วันนี้เรามาศึกษาทำความรู้จักกับ google bot ทั้งสองจำพวกกันครับ

google bot หรือ spider ของ Google มันมีภารกิจในการวิ่ง หรือไต่ หรือเดิน หรือคลาน (อันนี้ไม่แน่ชัด) ไปตามลิ้งค์เพื่อเก็บข้อมูลตามเว็บเพจต่างๆเข้ามายังฐานข้อมูล index จากนั้นก็จะต้องมีการเปรียบองค์ประกอบของโครงสร้างเเละเนื้อหาในเเต่ละเว็บเพจ เพื่อจัดเรียงคำสำคัญๆในเว็บเพจนั้น เพื่อเตรียมพร้อมให้บริการค้นหากับคุณบนเว็บ google อย่างรวดเร็ว เเละสอดคล้องกับการแสวงหาของผู้ใช้ Google มากที่สุด googlebot มันมีสองเวอร์ชั่น คือ deepbot เเละ freshbot deepbot google bot เวอร์ชั่นนี้จะเป็นระบบ deep crawler มันชอบเดินทางไกลและชอบเสาะหา มันจะพยายามอย่างมากในการค้นหาเว็บเพจที่อยู่เเถวบ้านนอกครับ(เว็บที่ไม่เคยจะโปรโมทเลย)ไม่ว่าจะเป็นเว็บเก่าหรือเว็บใหม่ ด้วยการใช้ลิ้งค์เป็นถนนเดินทางไปทั่ว เมื่อมันพบเเล้ว มันก็จะเก็บข้อมูลใหม่ๆที่มันเจอลงใน index ของ Google มันจะทำงานเดือนละครั้งเท่านั้น เเต่ว่ามันจะเริ่มทำงานวันไหนก็แล้วแต่ว่าแต่ละครั้งมันจบงานวันไหน ไม่จำเป็นต้องเป็นวันสิ้นเดือนเสมอไป เเละบางทีอันดับเว็บเพจต่างๆเปลี่ยนไปมาไม่คงที่ ส่วนหนึ่งก็มาจากภารกิจของ deepbot ที่มันพบของใหม่ๆนั่นเอง freshbot เมื่อ Google มีข้อมูลเว็บเพจเเละลิ้งทั้งเก่าเเละใหม่มหาศาลจากการใช้ deepbot เเล้วที่นี้ก็ต้องต้องทำยังไงให้ indexer มีข้อมูลใหม่ๆสดๆ เช่นเมื่อคืนมีงานเปิดตัว iPhone 5 Google ก็จะต้องอัปเดตให้ทันด้วย คำตอบก็คือใช้ freshbot นั่นเอง freshbot ตัวนี้มันขยันเเละตามกระแส มันจะชอบแวะเวียนไปยังเว็บไซต์ที่มีการอัปเดทบ่อยๆ เพื่อเก็บข้อมูลจากเว็บไซต์เพื่อมาอัปเดท index ให้ทันกระแสโลกนั่นเอง