Egy több milliárd pint tartalmazó, óriási adatbázist hozunk létre a Pinteresten, hogy az emberek felfedezhessék érdeklődési köreiket. A Pinterestet felhasználóinak védelme és a lehető legjobb minőségű tartalmak szolgáltatása érdekében feltérképezőrobotokat használunk a pinek mögött álló oldalakkal kapcsolatos adatok azonosításához. Azért, hogy a Pinterest felhasználói tevékenységeket végezhessenek az őket inspiráló dolgokkal kapcsolatban, feltérképezzük a megvásárolható termékpineket is, és visszaképeztetjük őket a kereskedők webhelyeire. Ez segíthet növelni az ezekre a webhelyekre irányuló organikus forgalmat, eladásokat és konverziókat, minimális erőfeszítéssel a kereskedők részéről.
A pinek mögött álló oldalak számos olyan részletgazdag jelet tartalmaznak, amelyek alapján kiszűrhetjük a spamet, ugyanakkor jobb javaslatokat és hasznosabb információkat szolgáltathatunk. A jelek minél hatékonyabb felhasználása érdekében rendszeresen gyűjtjük, mentjük és elemezzük a pinekhez kapcsolódó oldalak tartalmát.
A Pinterest-robot a következő három főbb okból fér hozzá a webhelyedhez:
Amikor egy eredeti Pinterest-robot felkeresi a webhelyedet, egy érvényes Pinterest felhasználói ügynököt küld, és egy általunk üzemeltetett hálózatról csatlakozik.
A Pinterest feltérképezőrobotja tiszteletben tartja a Robotkizárási szabványt (robots.txt), és úgy van beállítva, hogy korlátozza a webhelyednek küldött egyidejű kéréseket. A webhelyed konfigurálása során kerüld az ilyen IP-címek statikus megadását, mivel a feltérképezőrobot által használt címek értesítés nélkül változhatnak.
Felhasználói ügynökünk:
Pinterest/0.2 (+https://www.pinterest.com/bot.html)
Mozilla/5.0 (kompatibilis; Pinterestbot/1.0; +https://www.pinterest.com/bot.html)Mozilla/5.0 (Linux; Android 6.0.1; Nexus 5X Build/MMB29P) AppleWebKit/537.36 (KHTML, például Gecko) Chrome/41.0.2272.96 Mobile Safari/537.36 (kompatibilis; Pinterestbot/1.0; +https://www.pinterest.com/bot.html)
IP-címünk dinamikus és gyakran változik, de mindig a következő tartományban található: 54.236.1.001 – 54.236.1.255.
A Pinterest feltérképezőrobotja elsősorban az Amerikai Egyesült Államokban található IP-címeket térképezi fel. Az USA-n kívüli IP-címeket is feltérképezhetjük a lokalizált adatok támogatása érdekében.
Az USA-beli IP-címek mindig a következő tartományba esnek: 54.236.1.XXX.
A nem USA-beli IP-címek esetében nincs fix tartomány. Ha aggódsz, hogy az emberek úgy férnek hozzá a webhelyedhez, hogy Pinterest-robotnak tettetik magukat, ellenőrizd a robot eredetiségét. Ehhez az IP-tartomány ellenőrzése helyett kövesd a következő szakaszban szereplő lépéseket.
Ha folyamatos forgalom érkezik egy érvényes Pinterest felhasználói ügynököt küldő klienstől, de az nem megy át a fenti DNS-teszten, kérjük,
A Pinterest-feltérképezőrobot viselkedésének módosításához frissítened kell webhelyed robots.txt fájlját. A Pinterest feltérképezőrobotja az alábbi utasításokat tartja be: A robots.txt fájlt mindenképpen a főtartományodba helyezd, mert az altartományokban lévő robots.txt fájlokat nem támogatjuk.
A nagyobb feltérképezési késleltetések hatással lehetnek a tartalmaid Pinteresten való terjesztésére és ajánlására. Ezért legfeljebb 1 értékű késleltetéseket veszünk figyelembe, és minden ennél nagyobb értéket 1-nek veszünk. Ha nagyobb feltérképezési késleltetésre van szükséged,
user-agent: Pinterestbot
Crawl-delay: 0.2
user-agent: Pinterestbot
disallow: /
user-agent: Pinterestbot
disallow: /directory1/
user-agent: Pinterestbot
disallow: /directory1/
allow: /directory1/subdirectory1/
user-agent: Pinterestbot
disallow: /directory1/
allow: /directory1/subdirectory1/
crawl-delay: 0.2