Para ayudar a las personas a descubrir y hacer lo que más les gusta, estamos creando una base de datos de miles de millones de Pines en Pinterest. Para proteger a los usuarios de Pinterest y ofrecer la mejor calidad de contenido posible, usamos rastreadores web para identificar los datos asociados a las páginas tras los Pines.
Estas páginas contienen señales detalladas que nos permiten deducir mejores recomendaciones, combatir el spam y mostrar información útil. Para aprovechar estas señales al máximo, buscamos, almacenamos y procesamos con regularidad el contenido de la página asociado con los Pines.
El rastreador de Pinterest accede a tu sitio por tres razones principales:
Cuando un rastreador de Pinterest legítimo visita tu sitio web, envía un agente de usuario de Pinterest válido y establece el contacto desde una red que nosotros operamos.
El rastreador de Pinterest respeta el estándar de exclusión de robots (robots.txt) y está configurado para limitar el volumen de solicitudes que se realizan a tu sitio web de forma simultánea. No integres estas direcciones IP en la configuración de tu sitio web, ya que las direcciones que usa el rastreador pueden cambiar sin previo aviso.
Nuestro agente de usuario es el siguiente:
Pinterest/0.2 (+https://www.pinterest.com/bot.html)
Mozilla/5.0 (compatible; Pinterestbot/1.0; +https://www.pinterest.com/bot.html)
Mozilla/5.0 (Linux; Android 6.0.1; Nexus 5X Build/MMB29P) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/41.0.2272.96 Mobile Safari/537.36 (compatible; Pinterestbot/1.0; +https://www.pinterest.com/bot.html)
Nuestra IP es dinámica y cambia frecuentemente, pero siempre estará en el rango de 54.236.1.001 a 54.236.1.255.
El rastreador de Pinterest usa principalmente direcciones IP de EE. UU. También podemos rastrear con direcciones IP fuera de EE. UU. para admitir datos localizados.
Las direcciones IP de EE. UU. siempre están en el rango de 54.236.1.XXX.
En el caso de las direcciones IP que no sean de EE. UU., no hay un rango fijo. Si te preocupa que las personas accedan a tu sitio mientras se hacen pasar por el rastreador de Pinterest, sigue los pasos indicados en la siguiente sección en lugar de depender de un rango de IP para verificar su autenticidad.
Si recibes un volumen de tráfico consistente por parte de un cliente que envía un agente de usuario de Pinterest válido, pero que no supera la prueba de DNS anterior,
Para modificar el comportamiento del rastreador de Pinterest, deberás actualizar el archivo robots.txt de tu sitio. Asegúrate de colocar el archivo robots.txt en tu dominio principal, ya que no se admiten los archivos robots.txt en subdominios.
Los grandes retrasos en el rastreo afectan la distribución y la recomendación de tu contenido en Pinterest. Por lo tanto, respetamos retrasos de hasta 1 y trataremos cualquier valor superior como 1. Si necesitas un retraso de rastreo mayor,
user-agent: Pinterestbot
Crawl-delay: 0.2
user-agent: Pinterestbot
disallow: /
user-agent: Pinterestbot
disallow: /directory1/
user-agent: Pinterestbot
disallow: /directory1/
allow: /directory1/subdirectory1/
user-agent: Pinterestbot
disallow: /directory1/
allow: /directory1/subdirectory1/
crawl-delay: 0.2