مكونات محركات البحث: من اكتشاف الصفحة إلى عرض النتيجة

الخلاصة السريعة

تشمل مكونات محركات البحث برامج لاكتشاف الصفحات وجلبها، وفهرسًا للمعلومات، وأنظمة تختار النتائج عند الاستعلام. يوضح Google هذه المراحل، ولا يضمن انتقال كل صفحة بينها. [1]

• يكتشف الزاحف صفحات عبر الروابط وغيرها، ثم يجلب المحتوى المتاح. العثور على عنوان صفحة ليس هو تحليلها أو فهرستها. [1]
• تحلل الفهرسة محتوى الصفحة وتحتفظ بمعلومات عنه؛ وعند السؤال يبحث المحرك في الفهرس عن نتائج ملائمة، لا في كل الويب من البداية. [1]
• تساعد أنظمة مثل BERT في Google على فهم معنى الكلمات ومقصدها؛ ترتيب النتائج لا يختزل في عد كلمة متكررة. [3]
• في Google يلزم إتاحة الصفحة للزاحف، واستجابة HTTP 200، ومحتوى قابل للفهرسة. تحقق هذه الشروط لا يضمن الفهرسة أو موضعًا في النتائج. [2]
• في مثالنا اخترنا أ، «زراعة النعناع»، لسؤال عن زراعته؛ ونختار ب، «إصلاح كرسي»، لسؤال عن إصلاحه. هذا تدريب على الصلة، لا خوارزمية Google.

الزاحف يجلب ما يستطيع الوصول إليه

يكتشف الزاحف صفحات عبر الروابط وغيرها، ثم يجلب المحتوى المتاح. العثور على عنوان صفحة ليس هو تحليلها أو فهرستها. [1]

اسم Googlebot يشير إلى برنامج جلب الصفحات في مثال Google. يمكن أن يكون العنوان معروفًا للمحرك لكن الصفحة غير متاحة، كصفحة تطلب تسجيل الدخول. لذلك نفصل اكتشاف العنوان عن الوصول إلى محتواه. [1]

الفهرس يحفظ معلومات عن الصفحات

تحلل الفهرسة محتوى الصفحة وتحتفظ بمعلومات عنه؛ وعند السؤال يبحث المحرك في الفهرس عن نتائج ملائمة، لا في كل الويب من البداية. [1]

تخيل فهرسًا تعليميًا لصفحتين: أ عن زراعة النعناع، وب عن إصلاح كرسي. نكتب أمام أ موضوع الزراعة، وأمام ب موضوع الإصلاح. هذا تمثيل من تأليفنا لتوضيح فرق الصفحة نفسها عن المعلومات التي نصفها بها، وليس شكل قاعدة Google الحقيقية. [1]

الاستعلام والمعنى واختيار النتيجة

تساعد أنظمة مثل BERT في Google على فهم معنى الكلمات ومقصدها؛ ترتيب النتائج لا يختزل في عد كلمة متكررة. [3]

في مثالنا اخترنا أ، «زراعة النعناع»، لسؤال عن زراعته؛ ونختار ب، «إصلاح كرسي»، لسؤال عن إصلاحه. هذا تدريب على الصلة، لا خوارزمية Google.

غير السؤال في التدريب إلى «كيف أصلح رجل كرسي؟» ثم أعد الاختيار. المعلومة المعطاة عن الصفحتين لم تتغير، لكن المطلوب تغير. لا تمنح صفحة الزراعة الأولوية لمجرد أنها كانت اختيارك في السؤال السابق.

لماذا لا يظهر كل ما ينشر؟

في Google يلزم إتاحة الصفحة للزاحف، واستجابة HTTP 200، ومحتوى قابل للفهرسة. تحقق هذه الشروط لا يضمن الفهرسة أو موضعًا في النتائج. [2]

لا تجعل ثلاثة أسئلة سؤالًا واحدًا: هل يستطيع الزاحف الوصول؟ هل فهرست الصفحة؟ هل عرضت لهذا الاستعلام؟ حل مشكلة السؤال الأول لا يقدم جوابًا تلقائيًا عن السؤالين التاليين. [2]