أداة فحص llms.txt واختبار روبوتات الذكاء الاصطناعي
افحص فورياً مدى توافق موقعك مع ملف /llms.txt وتأكد هل توجيهات robots.txt تسمح برؤية واقتباس موقعك في إجابات ChatGPT Search و Perplexity و Claude.
لماذا أصبح ملف llms.txt بمثابة خريطة الموقع لمحركات الذكاء الاصطناعي؟
ابتكر الخبير التقني جيريمي هوارد معيار llms.txt لحل إشكالية كبرى تواجه النماذج اللغوية ووكلاء الذكاء الاصطناعي (مثل ChatGPT و Claude Code و Perplexity) : عند تصفح موقعك، فإن قراءة مئات الأسطر من كود HTML والتنسيقات المعقدة تستهلك مساحة التوكنز وتؤدي إلى تشويش إجابات الذكاء الاصطناعي.
يُقدّم ملف /llms.txt فهرساً نصياً خفيفاً بلغة Markdown يحتوي على اسم موقعك، وملخص دقيق لأعمالك، وروابط مباشرة لأهم صفحات الخدمات والمستندات التقنية، مما يجعل وكلاء الذكاء الاصطناعي يفهمون نشاطك بسرعة ويقتبسون منه بدقة.
الخطأ الشائع: حجب البحث والاقتباس بدلاً من حجب روبوتات التدريب
قامت العديد من الشركات عن غير قصد بإضافة أوامر حظر شاملة في ملف robots.txt، مما تسبب في إخفائها تماماً من محركات البحث الجديدة القائمة على الذكاء الاصطناعي. من الضروري جداً التمييز بين فئتين من الروبوتات :
1. روبوتات البحث والاقتباس (يجب فتحها دائماً)
روبوتات مثل OAI-SearchBot و ChatGPT-User و PerplexityBot و Claude-Web تبحث في الويب لحظياً عندما يطرح الزبون سؤالاً. إذا قمت بحجبها، فلن تظهر علامتك التجارية إطلاقاً في الإجابات المقترحة والمراجع.
2. روبوتات جمع بيانات التدريب (اختياري)
روبوتات مثل GPTBot و CCBot و Bytespider تجمع البيانات لتدريب النماذج المستقبلية. يمكنك حظرها لحماية بياناتك دون أن يؤثر ذلك على ظهورك في محركات البحث الذكية.
كيف تنشر ملف llms.txt في موقعك بسهولة؟
النشر على Next.js (App Router)
ضع الملف الذي تم إنشاؤه مباشرة في مجلد public/llms.txt وسيعمل تلقائياً. كما يمكنك إنشاء مسار ديناميكي app/llms.txt/route.ts لتحديث الروابط برمجياً من قاعدة بياناتك.
النشر على WordPress ومختلف الخوادم (Apache / Nginx)
ارفع ملف llms.txt عبر FTP أو لوحة التحكم إلى المجلد الرئيسي لموقعك (public_html/llms.txt) وتأكد من أن ملفك يفتح مباشرة عند طلبه عبر المتصفح.
الأسئلة الأكثر تداولاً حول تحسين محركات الذكاء الاصطناعي (GEO)
ما الفرق بين ملف /llms.txt وملف /llms-full.txt ؟
ملف /llms.txt هو ملخص خفيف ومكثف مصمم للقراءة السريعة أثناء الإجابة على الاستفسارات الفورية. بينما ملف /llms-full.txt يحتوي على التوثيق والمحتوى بالكامل بالتفصيل، ويستخدمه الوكلاء عندما يمتلكون نافذة سياق واسعة لتحليل مهام معقدة.
هل يغني ملف llms.txt عن ملف sitemap.xml ؟
كلا، ملف sitemap.xml يبقى ضرورياً لأرشفة جوجل التقليدية (Google Search Console)، بينما ملف llms.txt هو مكمل حديث ومخصص حصرياً لنماذج ووكلاء الذكاء الاصطناعي.