ตั้งค่า Google’s crawl rate ใน google webmaster tools

หากใครเคยเจอปัญหา โดน google bot ถล่มจนเว็บล่ม เพราะจำนวน index เว็บเราเยอะ โดน google bot ถล่มหน้าเว็บที่มีการเรียก API ที่ซื้อมาและมี limit quota ขอแนะนำวิธีบรรเทาทุกข์ เปลี่ยนแปลงอัตราที่ google เข้ามาไต่เว็บเรา (ไม่มีผลต่ออันดับ)

ให้เข้าไปตั้งค่าที่ google web master tool > site setting > crawl rate > Limit Google’s maximum crawl rate

ยกตัวอย่าง
A Crawl-delay: สมมติตั้งค่าเรท 30 วิ google จะเก็บหน้าเว็บเรา 1,000 หน้า ใช้เวลา 8.3 ชม.

A Crawl-delay: สมมติตั้งค่าเรท 500 วิ (Low Rate) google จะเก็บหน้าเว็บเรา 1,000 หน้า ใช้เวลา 5.8 วัน

หรือจะใช้วิธีใส่ rel=nofollow ใน tag <a> ก็ช่วยได้เช่นกัน แต่ต้องคิดพิจารณา ว่าควรใช้ตรงไหนถึงจะดีที่สุด

Related posts:

This entry was posted in knowledge. Bookmark the permalink.