Pinterests brugere har oprettet en database med milliarder af pins på Pinterest for at hjælpe folk med at finde og gøre det, de går op i. Vi bruger webcrawlere til at identificere data på siderne bag vores pins, så vi kan beskytte folk på Pinterest og levere indhold med den bedst mulige kvalitet. For at hjælpe folk på Pinterest med at gøre noget ved det, der inspirerer dem, crawler vi også for at oprette produktpins, der kan shoppes og knyttes tilbage til butikkers websites. Det kan hjælpe med at øge organisk trafik, salg og konverteringer til de pågældende websites, og det kræver en minimal indsats fra butikkernes side.
Siderne bag de forskellige pins indeholder detaljerede signaler, som vi bruger til at give bedre anbefalinger, bekæmpe spam og vise nyttige oplysninger. Vi henter, lagrer og behandler regelmæssigt sideindhold i forbindelse med pins for at udnytte disse signaler fuldt ud.
Pinterests crawler besøger dit website af tre hovedårsager:
Når en ægte Pinterest-crawler besøger dit website, sender den en gyldig Pinterest-brugeragent og opretter forbindelse fra et netværk, som drives af os.
Pinterests crawler overholder Robots Exclusion Standard (robots.txt) og er konfigureret til at begrænse antallet af samtidige anmodninger til dit website. Undlad at skrive præcise IP-adresser i konfigurationen af dit website, eftersom de adresser, crawleren bruger, kan blive ændret uden varsel.
Vores brugeragent er:
Pinterest/0.2 (+https://www.pinterest.com/bot.html)
Mozilla/5.0 (compatible; Pinterestbot/1.0; +https://www.pinterest.com/bot.html)Mozilla/5.0 (Linux, Android 6.0.1; Nexus 5X Build/MMB29P) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/41.0.2272.96 Mobile Safari/537.36 (compatible; Pinterestbot/1.0; +https://www.pinterest.com/bot.html)
Vores IP-adresse er dynamisk og skifter ofte, men den ligger altid mellem 54.236.1.001 og 54.236.1.255.
Pinterests crawler crawler primært med IP-adresser baseret i USA. Vi crawler dog også med IP-adresser baseret uden for USA for at understøtte lokaliserede data.
IP-adresser baseret i USA er altid i intervallet 54.236.1.XXX.
Der er ikke noget fast interval for IP-adresser, der ikke er baseret i USA. Hvis du er bekymret for, at andre får adgang til dit website ved at udgive sig for at være Pinterest-crawleren, kan du verificere dens ægthed ved at følge vejledningen i næste afsnit. På den måde slipper du for at stole på et tjek af IP-interval.
Du kan ændre Pinterest-crawlerens adfærd ved at opdatere filen robots.txt på dit website. Du skal sørge for at placere filen robots.txt på dit hoveddomæne, eftersom vi ikke understøtter robots.txt-filer på underdomæner.
Store forsinkelser i crawlingen påvirker distributionen og anbefalingerne af dit indhold på Pinterest. Derfor respekterer vi forsinkelser op til 1 og behandler alle højere værdier som 1.
user-agent: Pinterestbot
Crawl-delay: 0.2
user-agent: Pinterestbot
disallow: /
user-agent: Pinterestbot
disallow: /directory1/
user-agent: Pinterestbot
disallow: /directory1/
allow: /directory1/subdirectory1/
user-agent: Pinterestbot
disallow: /directory1/
allow: /directory1/subdirectory1/
crawl-delay: 0.2