เรากำลังสร้างฐานข้อมูลที่ประกอบด้วยหลายพันล้านพินใน Pinterest เพื่อช่วยให้ผู้คนค้นพบและทำในสิ่งที่พวกเขาชื่นชอบ และเพื่อปกป้องผู้ใช้ของเราและมอบเนื้อหาที่มีคุณภาพสูงสุด เรามีการใช้โปรแกรมรวบรวมข้อมูลเว็บเพื่อช่วยระบุข้อมูลในหน้าเว็บที่อยู่เบื้องหลังของพินเหล่านั้น
หน้าเหล่านี้มีสัญญาณมากมายที่ช่วยให้เราหาคำแนะนำ รับมือกับสแปม และแสดงข้อมูลที่เป็นประโยชน์ได้ดีขึ้น และเพื่อให้ใช้ประโยชน์จากสัญญาณเหล่านี้ได้อย่างเต็มที่ เราจึงทำการดึงข้อมูล จัดเก็บ และประมวลผลเนื้อหาในหน้าที่เชื่อมโยงกับพินต่างๆ อยู่เสมอ
โปรแกรมรวบรวมข้อมูลของ Pinterest จะเข้าถึงเว็บไซต์ของคุณด้วยเหตุผลหลักสามประการ ดังนี้
เมื่อโปรแกรมรวบรวมข้อมูลตัวจริงของ Pinterest เข้าไปที่เว็บไซต์ของคุณ โปรแกรมจะส่งตัวแทนผู้ใช้ของ Pinterest ที่ถูกต้อง และเชื่อมต่อจากเครือข่ายที่เราดําเนินการ
โปรแกรมรวบรวมข้อมูลของ Pinterest ปฏิบัติตาม Robots Exclusion Standard (robots.txt) และได้รับการกำหนดค่าให้มีการจำกัดจำนวนคำขอที่เกิดขึ้นพร้อมกันในเว็บไซต์ของคุณ โปรดอย่าฮาร์ดโค้ดที่อยู่ IP ในไฟล์กำหนดค่าเว็บไซต์ เนื่องจากที่อยู่ที่โปรแกรมรวบรวมข้อมูลใช้อาจเปลี่ยนแปลงได้โดยไม่ต้องแจ้งให้ทราบล่วงหน้า
ตัวแทนผู้ใช้ของเราคือ:
Pinterest/0.2 (+https://www.pinterest.com/bot.html)
Mozilla/5.0 (ใช้ร่วมกันได้; Pinterestbot/1.0; +https://www.pinterest.com/bot.html)
Mozilla/5.0 (Linux; Android 6.0.1; Nexus 5X Build/MMB29P) AppleWebKit/537.36 (KHTML เช่น Gecko) Chrome/41.0.2272.96 Mobile Safari/537.36 (ใช้ร่วมกันได้; Pinterestbot/1.0; +https://www.pinterest.com/bot.html)
IP ของเราเป็นแบบไดนามิกและมีการเปลี่ยนแปลงบ่อยครั้ง แต่จะอยู่ในช่วง 54.236.1.001 ถึง 54.236.1.255
โปรแกรมรวบรวมข้อมูล Pinterest รวบรวมข้อมูลโดยใช้ที่อยู่ IP ในสหรัฐอเมริกาเป็นหลัก เราอาจรวบรวมข้อมูลด้วยที่อยู่ IP ที่อยู่นอกสหรัฐอเมริกาเพื่อรองรับข้อมูลที่แปลเป็นภาษาท้องถิ่น
ที่อยู่ IP ในสหรัฐอเมริกาจะอยู่ในช่วง 54.236.1.XXX เสมอ
ส่วน IP ที่ไม่ใช่ของสหรัฐอเมริกาจะไม่มีช่วงที่แน่นอน หากคุณกังวลว่ามีคนกําลังเข้าถึงเว็บไซต์ของคุณโดยปลอมตัวเป็นโปรแกรมรวบรวมข้อมูล Pinterest ให้ตรวจสอบความถูกต้องของโปรแกรมโดยทําตามขั้นตอนในหัวข้อถัดไป แทนที่จะอาศัยการตรวจสอบช่วง IP
หากเว็บไซต์ของคุณมีปริมาณการเข้าชมที่สม่ำเสมอจากไคลเอ็นต์ที่ส่งตัวแทนผู้ใช้ของ Pinterest ที่ถูกต้อง แต่ไม่ผ่านการทดสอบ DNS ข้างต้น โปรด
หากต้องการแก้ไขการทำงานของโปรแกรมรวบรวมข้อมูล Pinterest คุณจะต้องอัปเดตไฟล์ robots.txt ในเว็บไซต์ของคุณ โปรดตรวจสอบให้แน่ใจว่าคุณวางไฟล์ robots.txt บนโดเมนหลัก เนื่องจากเราไม่รองรับไฟล์ robots.txt บนโดเมนย่อย
ความล่าช้าเป็นเวลานานของการรวบรวมข้อมูลจะส่งผลกระทบต่อการเผยแพร่และการแนะนำเนื้อหาของคุณบน Pinterest ดังนั้นเราจึงยอมรับความล่าช้าสูงสุดที่ 1 และจะถือว่าค่าที่มากกว่าเป็น 1 หากคุณจำเป็นต้องใช้ความล่าช้าในการรวบรวมข้อมูลที่นานกว่านี้
user-agent: Pinterestbot
Crawl-delay: 0.2
user-agent: Pinterestbot
disallow: /
user-agent: Pinterestbot
disallow: /directory1/
user-agent: Pinterestbot
disallow: /directory1/
allow: /directory1/subdirectory1/
user-agent: Pinterestbot
disallow: /directory1/
allow: /directory1/subdirectory1/
crawl-delay: 0.2