ما المقصود بـالفهرسة (Indexing)؟
الفهرسة هي العملية التي يحلّل فيها محرك البحث صفحة مزحوفة ويخزنها في فهرسه، فتصبح مؤهلة للظهور في نتائج البحث.
الفهرسة (Indexing) هي الخطوة التي يعالج فيها محرك البحث صفحة زحفها — يعرضها ويقرأ نصها وروابطها ووسومها ووسائطها ويختار رابطها الأساسي (canonical) — ثم يخزنها في فهرسه. لا تترتب إلا الصفحات المفهرسة، ولا يُستشهد في «نظرة عامة بالذكاء الاصطناعي» و«وضع الذكاء الاصطناعي» لدى جوجل إلا بالصفحات المفهرسة.
الزحف لا يعني الفهرسة
توضح جوجل أنها لا تفهرس كل صفحة تجدها (How Search works). وأثناء الفهرسة هي:
- تتحقق من حالة HTTP والتوجيهات مثل noindex؛
- تجمع الصفحات المكررة وتختار صفحة أساسية (canonical) لكل مجموعة؛
- تقيّم هل المحتوى مفيد بما يكفي للاحتفاظ به.
وقد تُترك خارج الفهرس صفحة اجتازت كل الفحوص التقنية لأنها لا تضيف جديدًا مقارنةً بصفحات موجودة بالفعل في الفهرس.
قراءة حالات Search Console
| الحالة | معناها المعتاد |
|---|---|
| Discovered – currently not indexed (مكتشفة – لم تُفهرس حاليًا) | تعرف جوجل الرابط لكنها لم تزحفه بعد: روابط داخلية ضعيفة أو أولوية منخفضة أو حدود الخادم |
| Crawled – currently not indexed (مزحوفة – لم تُفهرس حاليًا) | جُلبت وقُيّمت لكنها لم تُخزَّن — وغالبًا لأن المحتوى ضعيف أو مكرر |
| Duplicate, Google chose different canonical than user (مكررة، اختارت جوجل canonical مختلفًا عمّا حدده المستخدم) | تجاوزت إشارات أخرى وسم canonical الذي حددته |
| Excluded by ‘noindex’ tag (مستبعدة بوسم noindex) | تعمل كما أُريد — أو وسم منسيّ |
| Blocked by robots.txt (محظورة بواسطة robots.txt) | لم تُزحف؛ ويمكن مع ذلك أن تُفهرس اعتمادًا على الروابط، دون محتوى |
تعرض أداة فحص الروابط (URL Inspection) في Google Search Console حالة رابط واحد، ووسم canonical الذي اختارته جوجل، وتتيح لك طلب إعادة الزحف.
كيف تُفهرس صفحة
- أعد HTTP 200، مع وجود المحتوى الرئيسي في HTML الصادر من الخادم.
- أزل أي noindex وتأكد أن robots.txt يسمح بالزحف.
- استخدم وسم canonical ذاتي المرجع وأدرج الرابط في خريطة موقعك.
- اربط إليه من صفحات ذات صلة مفهرسة أصلًا — فمجرد إدراجه في خريطة الموقع إشارة ضعيفة.
- اجعله مختلفًا فعلًا عن بقية صفحات موقعك.
أما بالنسبة إلى Bing وYandex وغيرهما من المحركات التي تدعمه، فيخطرها IndexNow بالروابط الجديدة فورًا. وجوجل لا تدعم IndexNow؛ استخدم خرائط الموقع وSearch Console مع جوجل.
أخطاء شائعة
- اعتبار البحث بـ
site:عدًّا للفهرس. إنه عيّنة تقريبية لا تقرير. - طلب الفهرسة مرارًا للرابط نفسه. فهذا لا يسرّع شيئًا.
- نشر مئات صفحات المواقع أو الوسوم شبه المتطابقة وتوقع فهرسة كلها.
- افتراض أن الصفحة المفهرسة ستترتب. فالفهرسة مجرد تذكرة دخول؛ والصلة والجودة هما اللتان تحددان المركز.
افحص قابلية الفهرسة
تجيب أداة فحص قابلية الفهرسة عن سؤال «هل تستطيع جوجل فهرسة هذه الصفحة؟» — حالة HTTP وقاعدة robots.txt ووسم robots في الميتا وX-Robots-Tag وهدف canonical ووجودها في خريطة الموقع والتحويلات وnosnippet — وتُبرز سبب المنع. ولفهم الاكتشاف، وهو الخطوة التي تسبق الفهرسة، راجع زاحف الويب.
الأسئلة الشائعة
كم تستغرق جوجل لفهرسة صفحة جديدة؟
من بضع ساعات إلى عدة أسابيع. تُفهرس عادةً أسرع الصفحات في المواقع الراسخة المربوط إليها من صفحات شهيرة؛ وتستغرق المواقع الجديدة والصفحات اليتيمة أطول مدة.
لماذا أُزيلت صفحتي من فهرس جوجل؟
من الأسباب الشائعة noindex وُضع بالخطأ، أو حظر في robots.txt، أو خطأ في الخادم أو تحويل، أو canonical يشير إلى مكان آخر، أو تقدير جوجل أن الصفحة شديدة الشبه بغيرها. وتُظهر أداة فحص الروابط (URL Inspection) في Search Console السبب عادةً.
هل الفهرسة هي الترتيب نفسه؟
لا. الفهرسة تعني أن الصفحة مخزنة ومؤهلة للظهور. أما الترتيب فهو مدى ارتفاعها لاستعلام معين، ويعتمد على الصلة والجودة وإشارات أخرى كثيرة.