الرئيسية › قاعدة المعرفة › seo.cat.crawler

OAI-SearchBot و ChatGPT-User

عندما يبحث ChatGPT في الويب، يجلب OAI-SearchBot و ChatGPT-User الصفحات — منفصلاً عن زاحف التدريب GPTBot.

بوتان، مهمتان

يبني OAI-SearchBot فهرس البحث لبحث ChatGPT. يفتح ChatGPT-User صفحةً عندما يطلب مستخدم ذلك صراحةً في سؤاله أو يشارك رابطاً. كلاهما يوفر الأساس لإجابات مقتبسة برابط مصدر.

لماذا ينبغي السماح لهما

من يريد الظهور كمصدر في ChatGPT عليه أن يمنح هذين البوتين وصولاً. حظر GPTBot وحده يترك البحث دون تأثير؛ حظر «User-agent: *» يطال OAI-SearchBot أيضاً.

قاعدة robots.txt

لأقصى ظهور: كتلة لكل من «User-agent: OAI-SearchBot» و«User-agent: ChatGPT-User»، كلتاهما بـ «Allow: /». استبعد المناطق الحساسة (تسجيل الدخول، السلة، البحث الداخلي) بشكل مستهدف عبر Disallow.

اختبار إمكانية الجلب

يتحقق citeglass لـ OAI-SearchBot و ChatGPT-User بشكل منفصل مما إذا كان robots.txt يسمح بهما وما إذا كان خادمك يسلّم لهما المحتوى فعلاً — بما في ذلك الحالات التي تحظرهما فيها حماية من البوتات رغم robots.txt المسموح.

افحص موقعك أنت

يوضح citeglass في نحو 30 ثانية أين يكون موقعك غير قابل للقراءة لأنظمة الذكاء الاصطناعي — مجانًا ودون تسجيل دخول.

تابع القراءة

معلومات عامة، وليست استشارة قانونية. GEO مجال حديث — قد تتغير التوصيات.