قبل أن تبدأ عملية بحث، تجمع برامج الزحف على الويب معلومات من ملايين صفحات الويب وترتّبها ضمن فهرس البحث.

أساسيات "بحث Google"

تبدأ عملية الزحف بقائمة بعناوين الويب من عمليات الزحف السابقة وملفات Sitemap التي قدمها مالكو مواقع الويب. وتستخدم برامج الزحف لدينا أثناء زيارتها لمواقع الويب روابط على هذه المواقع لاكتشاف صفحات أخرى. ويولي برنامج الزحف أهمية خاصة بالمواقع الإلكترونية الجديدة والتغييرات التي تطرأ على المواقع الحالية والروابط المعطَّلة. وتحدِّد برامج الكمبيوتر المواقع الإلكترونية التي يجب الزحف إليها ومعدّل جلب صفحات من كل موقع وعددها.

نقدم Search Consoleلمنح مالكي المواقع خيارات دقيقة عن كيفية زحف محرك البحث Google إلى مواقعهم، حيث تستطيع هذه الخدمة تقديم تعليمات تفصيلية حول طريقة معالجة الصفحات على مواقع هؤلاء المالكين أو طلب إعادة الزحف أو تعطيل الزحف تمامًا باستخدام ملف اسمه “robots.txt”. ولا تقبل Google مطلقًا تلقّي أي دفعات مالية لزيادة معدل الزحف إلى موقع إلكتروني، إذ نوفِّر الأدوات نفسها لكل المواقع الإلكترونية لضمان أفضل النتائج الممكنة لمستخدمينا.

الزحف للعثور على المعلومات

يمكننا أن نصف شبكة الإنترنت بأنها مكتبة متنامية باستمرار تحتوي على مليارات الكتب من دون نظام مركزي لتنظيم البيانات. ونستخدم البرامج المعروفة باسم برامج الزحف على الويب لاكتشاف صفحات الويب المتاحة لجميع المستخدمين. وتفحص برامج الزحف صفحات الويب وتتّبع الروابط على هذه الصفحات على نحو يشبه كثيرًا ما تفعله عند تصفّح محتوى على الويب. وتنتقل هذه البرامج من رابط إلى آخر وتجلب بيانات عن هذه الصفحات الإلكترونية إلى خوادم Google.

استخدام الفهرسة لتنظيم المعلومات

عند رصد برامج الزحف لصفحة ويب، تعرض أنظمتنا محتوى الصفحة مثلما يفعل المتصفّح. ونهتم بالإشارات الرئيسية، بدءًا من الكلمات الرئيسية وانتهاءً بحداثة الموقع الإلكتروني، ويتم تتبُّع كل ذلك في فهرس البحث.

يتضمّن فهرس "بحث Google" مئات المليارات من صفحات الويب ويزيد حجمه عن 100 مليون غيغابايت. والفهرس يشبه الجزء الخلفي من الكتاب، إذ نُدخِل جميع الكلمات التي نرصدها في كل صفحة نفهرسها. وعندما نفهرس صفحة ويب، نضيفها إلى كل الكلمات التي تم إدخالها والموجودة في هذه الصفحة.

 

 

يمكّننا استخدام الرسم البياني المعرفي المستمر من تجاوز مجرد مطابقة الكلمات الرئيسية لفهم الأماكن والأشياء والأشخاص الذين تهتم بهم بشكل أفضل. لذلك، لا نعمل فقط على تنظيم المعلومات عن صفحات الويب، بل تشمل عملية التنظيم أنواعًا أخرى من المعلومات أيضًا. وتستطيع خدمة "بحث Google" اليوم مساعدتك على البحث عن نص من ملايين الكتب من كبرى المكتبات أو معرفة أوقات السفر من مؤسسة النقل العام المحلية أو مساعدتك على التنقل بين بيانات المصادر العامة مثل البنك الدولي.