بدون شک هر يک از ما هنگامي که موضوعي را در اينترنت جست وجو کرده ايم با ليست مفصلي از اطلاعات مواجه شده ايم که در بيشتر مواقع با دريافت مطالبي که در صدر فهرست هستند به مقصود خود رسيده ايم. google به عنوان مهم ترين مخزن اطلاعات جهان از مکانيسم هاي ويژه اي براي طبقه بندي و نيز اولويت گذاري مطالب استفاده مي کند. googlebot روبات جست و جوگري است که فهرستي طبقه بندي شده از مطالب و موضوعات گوناگون را به کاربر ارائه مي دهد. در واقع مانند يک روبات خزنده عمل مي کند بدين ترتيب که در بين صفحات سايت ها حرکت کرده و تمامي اطلاعات را در يک محل ذخيره مي کند و براي استفاده آسان تر فهرستي از آنها تهيه مي کند. بدين منظور ابتدا googlebot در بين شبکه ها حرکت کرده و مطالب گوناگون را جست و جو کرده و پيدا مي کند. کلمات پيدا شده در روي هر صفحه در قالب فهرستي طبقه بندي شده ذخيره مي شوند. بديهي است اين فهرست بسيار بزرگ خواهد بود و در يک پايگاه اطلاعاتي بسيار بزرگ ذخيره مي شود. googlebot به صفحات پيمايش شده شماره اي مشخص مي دهد و کلمات گوناگون را بر اساس حروف الفبا فهرست بندي مي کند. با پيمايش هر صفحه، موضوعات و مطالبي جديد به اين فهرست اضافه مي شود. هنگام جست و جو براي فهرست کردن مطالب، google به طور اتوماتيک فضاهاي خالي، برخي علامات و نقطه گذاري ها، کلمات تکراري را حذف مي کند و تمامي حروف را به کوچک تبديل مي کند. اين مساله خود باعث سرعت بيشتر خواهد شد. آخرين مرحله، پاسخ به درخواست کاربر است. هنگامي که کاربر در رابطه با موضوعي پرسشي مي کند يا کلمه خاصي را در محيط google تايپ مي کند googlebot به جست و جو در فهرست تهيه شده مي پردازد و هر آنچه را که در پايگاه داده هاي خود ذخيره کرده براساس اولويت تعيين شده در اختيار کاربر قرار مي دهد. بديهي است که با استفاده از اين روش شاخص گذاري سرعت دسترسي به اطلاعات بسيار بالا مي رود زيرا هنگام جست و جوي مطلبي خاص google ابتدا در فهرست الفبايي خود به دنبال کلمه موردنظر گشته و سپس براساس شاخص يا آدرس مشخص آن را در پايگاه داده هاي خود مي يابد. اما براي اولويت بندي مطالب، google چندين فاکتور را درنظر مي گيرد که طراحي مناسب، داشتن پيوندهاي دقيق به سايت هاي ديگر، اعتبار و شهرت سايت و نيز ميزان استقبال کاربران از آن سايت را مي توان نام برد. در بين فاکتورهاي تعيين کننده اولويت، آنچه از همه موارد مهم تر است پيوندهاي مناسب صفحات يک سايت به سايت هاي ديگر است که هر اندازه دقيق تر و همچنين از تعداد بيشتري برخوردار باشد آن سايت از جايگاه بالاتري در فهرست جست و جو برخوردار است. عامل مهم ديگري که باعث صدرنشيني سايتي مي شود ميزان جست و جو و ديدن آن از طرف کاربران است.در واقع هر چه ميزان استقبال از آن بيشتر باشد در اولويت بالاتري قرار خواهد گرفت. اين مساله که چگونه googlebot در بين اطلاعات به دست آمده فهرستي تهيه مي کند و با چه منطقي اطلاعات را اولويت بندي مي کند موضوع بسيار جالبي است که شرکت google هزينه و وقت زيادي را صرف آن کرده است.