Rastreador do Pinterest

Para ajudar toda a gente a encontrar o que mais gostam de fazer, estamos a criar uma base de dados de milhões de Pins no Pinterest. Para protegermos os nossos utilizadores e fornecermos os conteúdos com a maior qualidade possível, utilizamos Web crawlers para nos ajudar a identificar os dados das páginas relacionadas com os Pins.

Estas páginas contêm sinais detalhados que nos permitem inferir acerca das melhores recomendações, combater spam e apresentar informação útil. Para tirar todo o partido destes sinais, procuramos, guardamos e processamos o conteúdo de páginas associadas com Pins de forma regular.

Como é que o Pinterest acede ao teu site

Quando um crawler genuíno do Pinterest visita o teu website, envia um Agente de Utilizador válido do Pinterest e liga-se a partir de uma rede operada pelo Pinterest. Além de respeitar o Protocolo de Exclusão de Robôs, o crawler do Pinterest está configurado para limitar automaticamente a taxa de pedidos simultâneos feitos ao website.

Recomendamos que os webmasters evitem pré-programar estes endereços de IP nas configurações do site, uma vez que no futuro os endereços que o crawler utiliza podem ser alterados sem aviso.

O agente de utilizador do Pinterest é:

Pinterest/0.2 (+https://www.pinterest.com/bot.html)
Mozilla/5.0 (compatível; Pinterestbot/1.0; +https://www.pinterest.com/bot.html)
Mozilla/5.0 (Linux; Android 6.0.1; Nexus 5X Build/MMB29P) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/41.0.2272.96 Mobile Safari/537.36 (compatível; Pinterestbot/1.0; +https://www.pinterest.com/bot.html)

O IP do Pinterest é dinâmico e é alterado constantemente, mas será sempre: 54.236.1.XXX.

Verificar o crawler do Pinterest

  1. Usa o comando do anfitrião para executar uma pesquisa de DNS inversa no endereço IP dos teus registos
  2. Verifica que o nome do domínio na resposta termina em pinterest.com
  3. Usa o comando do anfitrião para executar uma pesquisa de DNS avançada na resposta obtida no passo 1
  4. Verifica que é igual ao endereço IP do passo 1

Se recebes um volume consistente de tráfego de um cliente ao enviar um Agente de Utilizador do Pinterest válido, mas este não passa no teste DNS descrito acima, cria um pedido de suporte.

Restringir o acesso ao teu site por parte do Pinterest

Para alterar o comportamento do crawler do Pinterest, tens de atualizar o ficheiro robots.txt do teu site. O crawler do Pinterest obedece às seguintes diretivas:

  • Não Permitir
  • Permitir
  • Crawl-delay
     
Ainda precisas de ajuda?
Contacta-nos