أهم النقاط
- عندما يرى Googlebot قاعدة noindex في الصفحة، لا يعرضها بحث Google نهائيًا، حتى لو أشارت إليها مواقع أخرى.
- علامة meta وعنوان X-Robots-Tag يؤديان إلى النتيجة نفسها، والعنوان هو الطريقة المناسبة لملفات PDF والصور والفيديو.
- لا تدعم Google قاعدة noindex داخل ملف robots.txt.
- إذا حظر ملف robots.txt الصفحة، فلن يرى Googlebot قاعدة noindex، وقد تبقى الصفحة في النتائج.
- قد تمر عدة أشهر قبل أن يزحف Googlebot إلى الصفحة من جديد، ويمكنك طلب الزحف بأداة فحص عنوان URL.
أحيانًا تريد صفحة متاحة لزوارك، لكنك لا تريدها في نتائج البحث: صفحة شكر بعد الشراء، أو نسخة تجريبية، أو ملف داخلي. هذا بالضبط ما تفعله قاعدة noindex.
عندما يزحف Googlebot إلى صفحة ويجد فيها القاعدة، لا يعرضها بحث Google نهائيًا، حتى لو أشارت إليها روابط من مواقع أخرى.
طريقتان لتطبيقها
تؤدي الطريقتان إلى النتيجة نفسها، فاختر ما يناسب موقعك ونوع المحتوى:
| المحتوى | الطريقة |
|---|---|
| صفحة HTML | علامة meta |
| ملف PDF أو صورة أو فيديو | عنوان X-Robots-Tag |
| ملف robots.txt | غير مدعوم |
علامة meta مفيدة إذا لم يكن لديك وصول كامل إلى الخادم، لأنها تتحكم في كل صفحة وحدها.
علامة meta
ضع هذه العلامة في قسم head لتمنع كل محركات البحث التي تدعم القاعدة من فهرسة الصفحة:
<meta name="robots" content="noindex">وإذا أردت منع برامج الزحف من Google وحدها، فاكتب googlebot بدل robots. ويمكنك جمع القاعدة مع قواعد أخرى، مثل noindex, nofollow في العلامة نفسها.
تنبّه Google إلى أن بعض محركات البحث قد تفسّر القاعدة بشكل مختلف، فقد تظهر صفحتك في نتائجها. وإذا كنت تستخدم نظام إدارة محتوى مثل WordPress أو Wix، فابحث في إعداداته عن خيار محركات البحث بدل تعديل HTML بنفسك.
عنوان X-Robots-Tag
بدل العلامة، يمكن أن يرسل الخادم عنوان استجابة HTTP بالقيمة noindex أو none:
X-Robots-Tag: noindexوهذه هي الطريقة المناسبة للملفات التي ليست HTML، مثل PDF والصور والفيديو، لأنها لا تحتوي على قسم head. ابنِ العلامة أو العنوان بـ أداة إنشاء وسم meta robots، وافحص العنوان بـ أداة فحص X-Robots-Tag.
لماذا لا تعمل؟
إذا بقيت الصفحة في النتائج، فالسبب غالبًا أحد ثلاثة:
- لم يزحف إليها Googlebot بعد: قد تمر عدة أشهر حسب أهمية الصفحة. اطلب الزحف بأداة فحص عنوان URL.
- ملف robots.txt يحظرها: فلا يستطيع Googlebot رؤية القاعدة. عدّل الملف ليسمح بالزحف إليها.
- القاعدة غير مرئية لـ Googlebot: افتح أداة فحص عنوان URL، وراجع HTML الذي رآه أثناء الزحف.
ويعرض تقرير فهرسة الصفحات في Search Console الصفحات التي وجد فيها Googlebot قاعدة noindex. وإذا أردت إزالة صفحة بسرعة، فراجع مستندات Google عن عمليات الإزالة.
متى لا تستخدمها؟
لا تستخدم noindex لاختيار صفحة أساسية بين صفحات مكرّرة داخل موقعك، لأنها تحظر الصفحة من النتائج تمامًا. استخدم rel=“canonical” بدلًا منها، كما يشرح دليل عنوان URL الأساسي.
ولتتأكد أن noindex لا يتعارض مع إشارات أخرى، افحص صفحتك بـ أداة كشف تعارض noindex وcanonical وخريطة الموقع.
الخلاصة
- noindex تمنع ظهور الصفحة في بحث Google نهائيًا.
- استخدم علامة meta لصفحات HTML، وعنوان X-Robots-Tag لبقية الملفات.
- لا تكتبها في robots.txt، ولا تحظر الصفحة فيه، وإلا فلن يراها Googlebot.
- تأكد بأداة فحص عنوان URL، وراجع تقرير فهرسة الصفحات.
- لا تستخدمها مع الصفحات المكرّرة، فهذا عمل rel=“canonical”.
المصادر
- 1.حظر فهرسة "بحث Google" باستخدام علامة noindex، Google Search Centralمصدر أساسي
- 2.طريقة تحديد عنوان URL الأساسي باستخدام rel="canonical" وغيرها من الطرق، Google Search Centralمصدر أساسي
أسئلة شائعة
لماذا ما زالت صفحتي تظهر في Google بعد إضافة noindex؟
على الأرجح لم يزحف Googlebot إليها منذ أضفت القاعدة، وقد يستغرق ذلك عدة أشهر حسب أهمية الصفحة. وقد يكون السبب أن ملف robots.txt يحظرها، فلا يستطيع Googlebot رؤية القاعدة أصلًا.
هل أضع noindex في ملف robots.txt؟
لا. لا تدعم Google قاعدة noindex في ملف robots.txt. استخدم علامة meta في الصفحة، أو عنوان X-Robots-Tag في استجابة الخادم.
كيف أحذف صفحة من نتائج Google بسرعة؟
تحيلك Google في هذه الحالة إلى مستندات عمليات الإزالة، لأن noindex يعمل فقط بعد أن يزحف Googlebot إلى الصفحة من جديد.
هل أستخدم noindex مع الصفحات المكرّرة؟
لا تنصح Google بذلك داخل الموقع الواحد، لأنه يحظر الصفحة من النتائج تمامًا. استخدم rel="canonical" لتحديد الصفحة الأساسية بدلًا منه.
عن الكاتب
مؤسس UpgradIQ FZC LLC
يعمل Adam Hafez في SEO التقني وقياس البحث، من الزحف والفهرسة إلى استشهاد محركات الإجابة. أسّس UpgradIQ، التي تربط تغيّر الترتيب بسببه من بيانات Search Console وGA4. ينشر ما تدعمه البيانات، ويذكر حدودها.
- SEO التقني
- القياس بـ Search Console وGA4
- تحسين الظهور في محركات الإجابة
- البيانات المنظَّمة
قراءات ذات صلة
أداة توحيد عناوين URL وكشف نسخها المكررة
الصق قائمة عناوين URL، ووحّدها وفق RFC 3986 وسياسة موقعك، واكتشف النسخ المكررة من الصفحة نفسها. مجانية وتعمل في متصفحك.
Core Web Vitals: متى تنجح صفحتك؟
المقاييس الثلاثة في Core Web Vitals وحدودها الرسمية، وقاعدة 75% من عمليات التحميل، والفرق بين القياس الميداني والمختبر، وأين تقيسها.
فحص طول العناوين والأوصاف بالجملة
الصق صفحات كثيرة واعرف أي العناوين والأوصاف التعريفية ستُقتطع في نتائج البحث، مقيسة بالبكسل. أداة مجانية تعمل في متصفحك.
أداة فحص سلاسل وحلقات العناوين الأساسية
الصق أزواج url -> canonical، وتتبّع كل قفزة، واكشف الحلقات والسلاسل متعددة القفزات بين العناوين الأساسية. مجانية وتعمل في متصفحك.