كيف يزحف محرّك Google إلى مواقع الويب ويفهرسها ويعرضها

عندما تجلس أمام الكمبيوتر، وبعد إجراء عملية بحث في Google، يتم عرض قائمة لك على الفور بنتائج من الويب بالكامل.

كيف يعثر محرك Google على صفحات الويب التي تتطابق مع استعلام البحث، وعلى أي أساس يتم ترتيب النتائج؟

ببساطة، تخيل عملية البحث في الويب على أنها اطلاع على كتاب ضخم المحتوى، وبه فهرس شامل يخبرك بمكان كل جزء من هذا المحتوى بكل دقة.

وعندما تجري بحثًا في محرك Google، تراجع برامجنا الفهرس وتحديد أوثق نتائج البحث صلةً لعرضها (“تقديمها”) لك.

وتقديم نتائج البحث لك من خلال ثلاث عمليات رئيسية هي:

• الزحف: هل يعرف محرك Google موقعك؟ هل يمكننا العثور عليه؟
• الفهرسة: هل يستطيع محرك Google فهرسة موقعك؟
• العرض: هل يشتمل الموقع على محتوى جيد ومفيد وذي صلة ببحث المستخدم؟

الزحف

الزحف هو عملية يكتشف Googlebot‏ من خلالها الصفحات الجديدة أو التي يتم تحديثها ليضيفها إلى فهرس Google.

ونحن نستخدم في ذلك مجموعة ضخمة من أجهزة الكمبيوتر للبحث عن (أو “الزحف إلى”) مليارات الصفحات الموجودة على الويب وجلبها.

والبرنامج الذي يقوم بالبحث عن الصفحات وجلبها يسمى Googlebot (ويُعرف أيضًا باسم الروبوت أو برنامج التتبع أو العنكبوت).

ويستخدم Googlebot خوارزمية: حيث تحدد برامج الكمبيوتر المواقع التي يتم الزحف إليها، وعدد مرات عملية الزحف، وعدد الصفحات التي يتم البحث عنها وجلبها من كل موقع.

وتبدأ عملية زحف Google من خلال قائمة عناوين URL لصفحات ويب، تم إنشاؤها من عمليات زحف سابقة، ودمجها مع بيانات ملفات Sitemap التي يقدمها مشرفو المواقع.

وعندما يزور Googlebot كل موقع من مواقع الويب هذه، فإنه يكتشف روابط في كل صفحة ويضيفها إلى قائمة الصفحات التي سيتم الزحف إليها.

كما تتم ملاحظة المواقع الجديدة والتغييرات التي تمت على المواقع الحالية وكذلك الروابط المعطلة واستخدامها في تحديث فهرس Google.

لا تقبل Google تلقي الأموال مقابل الزحف إلى أحد المواقع أكثر من غيره، كما نفصل في نشاطنا تمامًا بين خدمة البحث وبين خدمة AdWords التي تحقق العائد لنا.

الفهرسة

يعالج Googlebot كل صفحة من الصفحات التي يتم الزحف إليها لتكوين فهرس ضخم يضم جميع الكلمات التي يراها ومكانها على كل صفحة.

بالإضافة إلى ذلك، نقوم بمعالجة المعلومات المضمنة في علامات المحتوى الرئيسي وصفاته، مثل علامات العنوان (Title) وسمات النص البديل (ALT).

ويستطيع Googlebot معالجة الكثير من أنواع المحتوى وليس كل الأنواع.

على سبيل المثال، لا يمكننا معالجة محتوى بعض ملفات الوسائط الكبيرة أو محتوى الصفحات ذات الطبيعة المتغيرة.

عرض النتائج

عندما يدخل المستخدم طلب بحث، تقوم محركاتنا بالبحث في الفهرس عن الصفحات المطابقة، وتعرض له النتائج التي نراها الأوثق صلةً بالنسبة إلى المستخدم.

ويتم تحديد مدى الصلة وفقًا لأكثر من 200 عامل من العوامل، أحدها نظام ترتيب الصفحات لإحدى الصفحات.

ويعتبر نظام ترتيب الصفحات المقياس الأكثر أهمية لإحدى الصفحات بناءً على الروابط الواردة من الصفحات الأخرى.

وبمعنى أبسط، فإن كل رابط يتم الوصول من خلاله إلى صفحة من صفحات موقعك يزيد من ترتيب موقعك في نظام ترتيب الصفحات.

ولا تتساوى كل الروابط: حيث تعمل Google جاهدة على تحسين تجربة المستخدم من خلال تحديد الروابط المزعجة وأية ممارسات أخرى تؤثر سلبًا على نتائج البحث.

وأفضل أنواع الروابط هي تلك التي يتم تقديمها حسب جودة المحتوى.

ومن أجل حصول موقعك على ترتيب جيد في صفحات نتائج البحث، من الأهمية بمكان أن تتأكد من أن محرك Google يقوم بالزحف إلى موقعك بشكل صحيح.

وتعمل إرشادات مشرفي المواقع التي نوفرها على تقديم أفضل الممارسات التي تساعدك على تجنب المخاطر الشائعة وتحسين ترتيب موقعك.