← الأدوات
فحص وصول زواحف الذكاء الاصطناعي
يقرأ ملف robots.txt ويعرض في جدول أياً من 16 زاحفاً للذكاء الاصطناعي يُسمح له بدخول موقعك.
يقرأ الفحص الملفات العامة فقط. لا يكتب شيئاً ولا يسجّل الدخول إلى أي حساب.
إجابة موجزة
هل يستطيع GPTBot أو ClaudeBot الزحف إلى موقعي؟
يجلب فحص وصول زواحف الذكاء الاصطناعي ملف /robots.txt للنطاق، ويفسّره وفق RFC 9309، ويعيد نتيجة مسموح أو محظور أو غير محدد لستة عشر زاحفاً منها GPTBot وClaudeBot وPerplexityBot وGoogle-Extended. ويطبّق مطابقة المجموعات وقاعدة أطول تطابق، وهو ما يختلف عن مجرد البحث في الملف عن كلمة Disallow.
أهم النقاط
- إذا كان للزاحف مجموعته الخاصة، فإن مجموعة الرمز (*) لا تنطبق عليه إطلاقاً — ولا حتى للقواعد التي أغفلتها مجموعته.
- عند تعارض Allow وDisallow، يفوز أطول نمط لا السطر الأسبق.
- «غير محدد» ليس مرادفاً لـ«مسموح»: قد يدخل الزاحف اليوم، لكن الموقع لم يُصرّح بشيء في هذا الشأن.
أسئلة متكررة
هل ينبغي أن أحجب زواحف الذكاء الاصطناعي؟
- هذان قراران منفصلان ولا ينبغي الخلط بينهما. حجب زواحف التدريب (GPTBot وGoogle-Extended وClaudeBot) يحدّ من استخدام محتواك في تدريب النماذج، وهو خيار ترخيص مشروع. أما حجب الزواحف التي تُنتج الإجابات (OAI-SearchBot وPerplexityBot وClaude-SearchBot) فيُخرج علامتك من تلك الإجابات كلياً.
استعلامات تجيب عنها هذه الصفحة
- حظر GPTBot
- robots.txt الذكاء الاصطناعي
- ما هو ClaudeBot
لنتحدّث عن مشروعك.
علامة جديدة، أو موقع يحتاج إعادة بناء، أو ظهور في البحث — أخبرنا من أين تريد أن تبدأ ولنضع خارطة الطريق معاً.