OAI-SearchBot и ChatGPT-User

Когато ChatGPT търси в мрежата, OAI-SearchBot и ChatGPT-User извличат страници — отделно от обучаващия робот GPTBot.

Два бота, две задачи

OAI-SearchBot изгражда индекса за търсене за търсенето в ChatGPT. ChatGPT-User отваря страница, когато потребител го поиска изрично във въпроса си или сподели връзка. И двата осигуряват основата за цитирани отговори с връзка към източник.

Защо трябва да ги разрешите

Който иска да се появи като източник в ChatGPT, трябва да даде на тези два бота достъп. Блокиране само за GPTBot оставя търсенето незасегнато; блокиране за „User-agent: *“ засяга и OAI-SearchBot.

Правилото robots.txt

За максимална видимост: по един блок за „User-agent: OAI-SearchBot“ и „User-agent: ChatGPT-User“, и двата с „Allow: /“. Изключете целенасочено чувствителните области (вход, кошница, вътрешно търсене) чрез Disallow.

Тест на извличаемостта

citeglass проверява за OAI-SearchBot и ChatGPT-User поотделно дали robots.txt ги разрешава и дали сървърът ви действително им доставя съдържание — включително случаите, в които защита от ботове ги блокира въпреки разрешен robots.txt.

Проверете собствения си сайт

citeglass показва за около 30 секунди къде сайтът ви е нечетим за ИИ системите — безплатно и без вход.

Продължете четенето

Обща информация, не правен съвет. GEO е млада област — препоръките може да се променят.