---
title: "خرائط الموقع وبرامج الزحف بالذكاء الاصطناعي"
url: https://seomadman.com/ar/news/mueller-sitemaps-ai-crawlers-couldnt-fetch
section: news
language: ar
published: 2026-10-06T00:00:00.000Z
modified: 2026-10-06T00:00:00.000Z
author: Adam Hafez
topics: ["الفهرسة", "SEO التقني"]
---

# خرائط الموقع وبرامج الزحف بالذكاء الاصطناعي

## الإجابة المختصرة

يقول John Mueller من Google إن برامج زحف تدريب الذكاء الاصطناعي لا تتيح عادة إرسال خريطة الموقع، لذلك يبقى الاسم العام sitemap.xml أو خلاصة RSS أقرب طريق إلى العثور على موقعك، بحسب Search Engine Journal. وقال أيضًا إن خريطة صالحة قد تظهر في Search Console بحالة Couldn't fetch بسبب حمل الخادم أو انخفاض الطلب على الزحف.

## أهم النقاط

- قال Mueller إن برامج زحف تدريب الذكاء الاصطناعي لا تملك عادة لوحة لإرسال الخريطة، فيبقى الاسم sitemap.xml أو خلاصات RSS لمن يريد أن تصلها.
- قال Mueller إنه رأى في سجلات خادمه برنامج زحف للذكاء الاصطناعي يجلب خريطته وملفات RSS، ولم يسمّ هذه البرامج ولم يذكر ماذا تفعل بالملفات.
- الخريطة الخاصة باسم غير مألوف وبلا ذكر في robots.txt وتُرسل إلى Google مباشرة تبقى مخفية عن الأنظمة الأخرى، ويحتاج Bing إلى إرسال مستقل.
- قد تعرض Search Console حالة Couldn't fetch لخريطة صالحة وعامة، وذكر Mueller سببين هما حمل الخادم والطلب على الزحف المرتبط بجودة الموقع.
- تلاحظ Search Engine Journal أن السببين خارج ملف الخريطة نفسه، فلا يستبعد نجاح التحقق من الملف هذا الخطأ.

خصص John Mueller وMartin Splitt من Google حلقة 1 أكتوبر 2026 من Search Off the Record، بعنوان [Do sitemaps still matter?](https://www.youtube.com/watch?v=hDva5VoZJsE)، لسؤالين عن خرائط الموقع.

ونقلت Search Engine Journal ما قاله Mueller في [مقال لـ Matt G. Southern](https://www.searchenginejournal.com/googles-mueller-says-ai-crawlers-access-sitemaps-rss-in-his-logs/) وفي [مقال لـ Roger Montti](https://www.searchenginejournal.com/google-explains-couldnt-fetch-sitemap-errors/).

ولم نسمع الحلقة نفسها. صفحتها على YouTube تؤكد العنوان وتاريخ الرفع في 1 أكتوبر، وكل ما يلي منسوب إلى هذين الكاتبين.

## هل تجد برامج الزحف خريطتك؟

قال Mueller بحسب Southern إن برامج زحف تدريب الذكاء الاصطناعي لا تملك عادة لوحة أو إعدادًا لإرسال ملف الخريطة. ولمن يريد وصول محتواه إلى هذه الأنظمة اقترح إبقاء الاسم العام sitemap.xml أو الاعتماد على خلاصات RSS، لأن الصفحات تربطها عادة في وسم head.

وقال إنه رأى في سجلات خادمه برنامج زحف للذكاء الاصطناعي يصل إلى ملف خريطته، وكذلك إلى ملفات RSS. ولم يسمّ هذه البرامج، وقال إنه لا يعرف هل توثق الشركات ذلك ولا ماذا تفعل بالملفات.

ويضيف Southern أن بروتوكول خرائط الموقع يجعل سطر Sitemap في robots.txt مستقلًا عن سطر user-agent، فلا يرتبط بقواعد برنامج زحف واحد. وتفحص [أداة التعارض بين الخريطة وrobots.txt](/tools/sitemap-robots-conflict-checker) الاثنين معًا.

## ماذا عن الخريطة الخاصة؟

قال Mueller إن من يريد خريطة خاصة يمنحها اسم ملف غير مألوف، ولا يذكرها في robots.txt، ويرسلها إلى Google مباشرة. والثمن بحسب Southern أن الأنظمة الأخرى لا تستطيع العثور عليها، وأن Bing على الأرجح يحتاج إلى إرسال مستقل.

## هل يغني llms.txt عنها؟

سُئل Mueller هل يحل llms.txt محل خريطة XML. شبّه ملف Markdown بخريطة HTML، وقال إن أنظمة Google لا تستطيع استخدامه خريطةً لأنه يفتقر إلى الصيغة الصارمة.

وينقل Southern أنه يرى الأمل أكبر من الواقع، وأن شيئًا من هذا لا يحدث حاليًا، وأنه لا يعتمد عليه. وتجد وضع الصيغة في [مسودة W3C لملف llms.txt](/news/w3c-llms-txt-standardization-draft).

## لماذا يظهر Couldn't fetch؟

سأل Splitt عن ملف XML صالح وعام ومربوط من robots.txt، ومع ذلك تقول Search Console أحيانًا إنها لم تستطع جلبه. وبحسب Montti أقرّ Splitt بأن هذا يصيب كثيرين رغم صلاحية ملفاتهم. وذكر Mueller سببين:

- حمل الخادم: قد تكون أنظمة Google مشغولة بزحف آخر فلا تجلب الخريطة، وتعرض Search Console ذلك أيضًا بحالة Couldn't fetch.
- الطلب على الزحف (crawl demand): إن رأت الأنظمة أنها لا تحتاج إلى زحف الكثير من الموقع فقد تتجاوز الخريطة. وقال Mueller إن هذا الطلب يقوم في الغالب على جودة الموقع كما تراها Google، فليس الأمر تقنيًا بحتًا.

ويقرأ Montti في كلام Mueller نقطة ثالثة: قد لا تحتاج Google إلى الخريطة أصلًا، وستستخدمها إن تحسنت جودة الموقع كثيرًا.

ورأي Montti أن الرسالة لا تطابق السبب الفعلي وتربك المستخدمين، وأن Google تعرف ذلك ولم تغيّرها. وهذا رأيه لا رأي Google.

## ما الذي تستبعده أولًا؟

تذكر [صفحة مساعدة تقرير الخرائط](https://support.google.com/webmasters/answer/7451001) من Google انخفاض الطلب على الزحف بين أسباب فشل الجلب، وتقول إن الطلب يزيد كلما ارتفعت جودة محتوى الموقع. وتذكر أيضًا حجب robots.txt وإجراءً يدويًا لم يُحل وعنوان URL خاطئًا يعيد 404.

وهذه فحوص تستطيع تنفيذها: تأكد أن الملف يُقرأ بـ[أداة التحقق من خريطة XML](/tools/xml-sitemap-validator)، ثم ابحث في سجلات الخادم عن طلبات فاشلة وقت الجلب. وإن بدا كل شيء سليمًا، فالتقارير ترجّح الطلب والجودة لا الملف نفسه.

## أسئلة شائعة

### هل تجد برامج زحف الذكاء الاصطناعي خريطة موقعي؟

ربما، بحسب Search Engine Journal. قال John Mueller إن هذه البرامج لا تتيح عادة إرسال خريطة، فأبقِ الاسم sitemap.xml أو انشر خلاصات RSS. وقد رأى برنامج زحف منها يجلب خريطته وملفات RSS في سجلاته.

### لماذا تقول Search Console إنها لم تستطع جلب خريطة صالحة؟

ذكر Mueller سببين بحسب Search Engine Journal. قد تكون أنظمة Google مشغولة عن جلب الملف، أو يكون الطلب على الزحف منخفضًا، وقال إنه يقوم في الغالب على جودة الموقع كما تراها Google.

### هل أستطيع إبقاء خريطة الموقع خاصة؟

نعم بحسب Mueller. امنحها اسم ملف غير مألوف، ولا تذكرها في robots.txt، وأرسلها إلى Google مباشرة. والثمن أن الأنظمة الأخرى لا تعثر عليها، وأن Bing على الأرجح يحتاج إرسالًا مستقلًا.

### هل يعمل llms.txt بديلًا عن خريطة الموقع؟

ليس في Google بحسب Mueller كما نقلت Search Engine Journal. شبّهه بخريطة HTML، وقال إن أنظمة Google لا تستطيع استخدامه خريطةً لأنه يفتقر إلى الصيغة الصارمة المطلوبة.

## المصادر

1. [Do sitemaps still matter?](https://www.youtube.com/watch?v=hDva5VoZJsE) - Google Search Central (YouTube) (primary)
2. [Google's Mueller Says AI Crawlers Access Sitemaps & RSS In His Logs](https://www.searchenginejournal.com/googles-mueller-says-ai-crawlers-access-sitemaps-rss-in-his-logs/) - Search Engine Journal
3. [Google Explains Couldn't Fetch Sitemap Errors](https://www.searchenginejournal.com/google-explains-couldnt-fetch-sitemap-errors/) - Search Engine Journal
4. [Sitemaps report - Search Console Help](https://support.google.com/webmasters/answer/7451001) - Google Search Console Help