illustrated graphic by www.elliance.com

GoogleBot หรือตัวโปรแกรม Spider ของ Google มีหน้าที่ในการวิ่งหรือไต่ (Crawling) ไปตามลิงก์ที่ระโยงระยางจากเว็บหนึ่งไปสู่อีกเว็บ เพื่อเก็บข้อมูลตามเว็บเพจต่างๆ บนอินเทอร์เน็ต แล้วนำเข้ามาเก็บไว้ยังฐานข้อมูล Indexer ของ Google จากนั้นก็จะต้องมีการเปรียบเทียบองค์ประกอบของโครงสร้าง และเนื้อหาหรือคีย์เวิร์ดในแต่ละเว็บเพจ เพื่อการจัดเรียงคำสำคัญๆ ในเว็บเพจนั้น เพื่อเตรียมพร้อมให้บริการการค้นหาให้กับคุณบนเว็บ Google Searchอย่างรวดเร็ว และสอดคล้องกับการค้นหาของผู้ใช้ Google มากที่สุดเท่าที่มันจะทำได้ และเนื่องจากเว็บต่างๆ มีทั้งอัปเดทบ่อย และไม่อัปเดทกันเลยจึงทำให้ GoogleBot มี 2 ประเภท:

Google DeepBot

GoogleBot เวอร์ชัน DeepBotนี้จะเหมือนผงซักฟอกสำหรับคราบฝังลึก พูดอีกอย่างให้ไม่งงก็คือ DeepBotมีนิสัยชอบเดินไกลและเป็นนักค้นหา มันจะพยายามอย่างสุดความสามารถในการค้นหาเว็บเพจอันห่างไกลความเจริญ (เว็บที่ไม่เคยโปรโมต) ไม่ว่าจะเป็นเว็บเก่า เว็บใหม่ ด้วยการใช้ลิงก์เป็นถนนเดินทางไปทั่วอินเทอร์เน็ต เมื่อมันพบแล้ว มันก็จะดาวน์โหลดข้อมูลใหม่ๆ ที่มันเจอเก็บลงใน Index ของ Google รวมทั้งลิงก์ใหม่ๆ ก็เช่นกัน ซึ่งจะใช้เวลาประมาณหนึ่งเดือนสำหรับขบวนการทั้งหมด Read the rest of this entry…