ما هو فهرس جوجل: لماذا لا تُفهرس الصفحة
ما هو فهرس جوجل ولماذا لا تُفهرس الصفحة: الفرق بين الاكتشاف والزحف والفهرسة، ومعنى الحالات التي يستخدمها Search Console.
بقلم Roozbeh Nazari · CEO
يُطرح سؤال ما هو فهرس جوجل عادة في خضم مشكلة: الصفحة منشورة، والرابط يعمل، لكنها لا تظهر في جوجل. عند هذه النقطة تتجه معظم الفرق مباشرة إلى البحث عن حل فتُصلح المكان الخطأ. غير أن الإجابة عن سؤال ما هو فهرس جوجل هي ما يتيح لك تسمية المرحلة التي تقف عندها المشكلة، والمشكلة بلا اسم لا تُصلَح. هذا المقال ليس مسار تشخيص بل تمرين في المفردات: ما الفهرس، وأي الحالات تختلف عن أيها، وما الذي تعنيه فعلا اللغة التي يستخدمها Search Console.
ما هو فهرس جوجل: سجل لا نسخة
الفهرس قاعدة بيانات ضخمة تخزّن فيها جوجل المعلومات التي تستخلصها من الصفحات التي تزحف إليها. وهنا سوء فهم مهم: الفهرس ليس نسخة احتياطية من موقعك ولا نسخة طبق الأصل منه. تُزحف الصفحة، ويُحلَّل محتواها، وتُخزَّن نتيجة هذا التحليل. وحين يبحث مستخدم، تبحث جوجل في هذا السجل لا في الويب. ولذلك فإن جملة "صفحتي منشورة" وجملة "صفحتي في الفهرس" مستقلتان؛ الأولى تخص خادمك والثانية تخص سجل جوجل.
والنتيجة العملية: قدرتك على فتح صفحة في المتصفح لا تدل على إمكان العثور عليها في البحث. وبالمثل، إزالتك صفحة من موقعك لا تمحو السجل في الفهرس فورا. فبين موقعك ونتائج البحث تأخير ووساطة دائما. وقد تناولنا السلسلة كاملة سابقا في مقال ما هو محرك البحث.
اكتُشفت، زُحف إليها، فُهرست: ثلاث حالات منفصلة
معرفة أن عنوان URL قد يكون في ثلاث حالات مختلفة من منظور جوجل تُزيل نصف المشكلات من البداية. فالعنوان المكتشَف عنوان تعرف جوجل بوجوده لكنها لم تنزّله بعد؛ وقد عرفته عادة عبر رابط أو خريطة موقع. والعنوان المزحوف إليه نُزّل ورُئي محتواه. أما العنوان المفهرس فقد حُلّل وخُزّن، وهو مرشح للظهور في نتائج البحث.
وهذه الحالات الثلاث متتابعة، وكل انتقال بينها قرار منفصل. فجوجل ليست ملزمة بفهرسة كل صفحة تزحف إليها؛ وتذكر وثائقها صراحة أنها لا تضمن زحف صفحة أو فهرستها أو عرضها، حتى لو التزمت بالقواعد. ولهذا فإن جواب "لماذا ليست مفهرسة" ليس عادة عطلا تقنيا بل نتيجة تقييم.
ويجدر أن نضيف أن البرامج الزاحفة ليست نوعا واحدا. فوثائق جوجل تعرّف الزواحف الشائعة وزواحف الحالات الخاصة وأدوات الجلب التي تعمل بطلب المستخدم، كلا على حدة. ويفيد هذا التمييز عند قراءة سجلات الخادم لمعرفة ما يعنيه طلب بعينه: فطلب فحص يدوي والزحف المنتظم ليسا الشيء نفسه.
وهناك أيضا حالة الخروج من الفهرس. فالصفحة التي فُهرست سابقا قد تسقط من السجل حين يتغير محتواها، أو حين تبقى غير متاحة مدة طويلة، أو حين لا تُختار ممثّلة بعد اليوم. ولذلك فحالة الفهرسة ليست وساما يُنال مرة ويبقى، بل حالة تتغير مع الوقت؛ وافتراض أن صفحة تحققت منها قبل ثلاثة أشهر ما زالت مفهرسة اليوم خطأ.
لماذا لا تُفهرس الصفحة: لغة الحالات
يعطي تقرير فهرسة الصفحات في Search Console حالة لكل عنوان URL، وهذه الحالات ليست عبارات اختيرت عشوائيا؛ فكل واحدة تشير إلى سبب مختلف ومالك مختلف. والنظر في بضعة أمثلة يُظهر منطق هذه اللغة.
تقول حالة "تم الزحف إليها - غير مفهرسة حاليا" إن جوجل رأت الصفحة لكنها اختارت ألا تخزّنها. ولا يوجد هنا عائق تقني؛ فهذه نتيجة تقييم، وعلاجها جعل الصفحة نفسها إجابة أفضل. في المقابل تقول حالة "تم اكتشافها - غير مفهرسة حاليا" إن الصفحة لم تُنزَّل بعد؛ وهذا يتعلق أكثر بأولوية الزحف وبنية الموقع.
أما حالتا "مستبعدة بعلامة noindex" و"محظورة بواسطة robots.txt" فهما تعليمات مقصودة وليستا مشكلة في الغالب. وبدل الذعر وإزالتهما، السؤال الواجب طرحه: من وضع هذه التعليمة، ومتى، ولماذا؟ فعلامة noindex تُركت سهوا وصفحة شكر أُبقيت عمدا خارج الفهرس تظهران في التقرير نفسه بالعبارة نفسها.
ومجموعة أخرى تتعلق بالعناوين الأساسية: صفحة بديلة تحمل وسم canonical صحيحا، أو تكرار بلا canonical يختاره المستخدم، أو اختيار جوجل canonical مختلفا عما اختاره المستخدم. لا تبلّغ هذه الحالات عن عطل؛ بل تبلّغ أن المحتوى نفسه موجود على أكثر من عنوان وأيها تعدّه جوجل الممثّل. وتنشأ المشكلة حين يكون الممثّل الذي اختارته جوجل غير الذي أردته. وقد عالجنا ترتيب التشخيص والإصلاح لهذه الحالات في مقال مشكلات الفهرسة، وأي قرار يغذّيه التقرير في دليل Search Console.
الوجود في الفهرس لا يعني الظهور
هذا هو الالتباس الشائع الثاني. فوجود صفحة في الفهرس لا يعني أنها ستظهر في المراتب العليا لأي استعلام. فالصفحة الموجودة في الفهرس التي لا تُعدّ وثيقة الصلة بما يكفي بأي استعلام قد لا تحصل على ظهور يُذكر. ولهذا، قبل تشخيص "لدينا مشكلة فهرسة"، انظر في تقرير الأداء: إن كانت الصفحة تحصل على ظهور فهي في الفهرس، والمشكلة في الصلة أو في معدل النقر لا في الفهرسة.
والعكس صحيح أيضا: بالنسبة لصفحة لا تحصل على ظهور، التحقق مما إذا كانت في الفهرس أسرع من البدء بالعمل على المحتوى. ففحص عنوان URL لا يستغرق دقيقتين وقد يُغني عن أسبوعين من العمل على المحتوى. ويستحق هذا الترتيب أن يصير قاعدة داخل الفريق: حين تَرِد شكوى بشأن الظهور، يُتحقق من الحالة أولا ثم يُناقش المحتوى.
ويدخل الحجم في هذه الصورة كذلك. ففي المواقع الكبيرة ليس واقعيا توقّع زحف كل صفحة بالوتيرة نفسها؛ فللزحف أولوية تتأثر ببنية الموقع والروابط الداخلية ومدى تكرار تحديث الصفحات. وفي موقع يضم آلاف الصفحات، وجود بضع صفحات خارج الفهرس ليس في ذاته دليل عطل؛ فالمهم النسبة وأي الصفحات بقيت خارجا.
ما تتحكم فيه وما لا تتحكم فيه
أنفع نتائج هذه المفردات أنها ترسم حدود مسؤوليتك. فما يمكنك التحكم فيه: أن تكون الصفحة متاحة، وأن تُعيد رمز الحالة الصحيح، وألا تحمل noindex غير مقصود، وأن يشير وسم canonical إلى النسخة التي تريدها، وأن ترد في خريطة الموقع وتكون قابلة للوصول عبر الروابط الداخلية. والشيء الوحيد الذي لا تتحكم فيه هو قرار فهرسة صفحة جرى الزحف إليها؛ فهذا القرار لجوجل، ولا تغيّره أي طريقة تَعِد بتسريعه.
وعمليا يعني هذا تقسيم العمل قسمين: إزالة العوائق مهمتك، واستحقاق التقييم مهمة المحتوى. وربط هذه الفحوص البنيوية بتدقيق منتظم يقع ضمن خدمة السيو التقني.
المصادر
- مساعدة Search Console — تقرير فهرسة الصفحات: أسباب عدم الفهرسة وتعريفات الحالات.
- Google Search Central — نظرة عامة على زواحف جوجل: الزواحف الشائعة وزواحف الحالات الخاصة وأدوات الجلب.
- Google Search Central — Search Essentials: المتطلبات التقنية وأهم الممارسات.