Meta-ExternalAgent

Meta-ExternalAgent — краулер, которым Meta собирает общедоступный контент для моделей Llama и Meta AI.

Названия и назначение

Meta дополнительно использует более старое имя «FacebookBot» и «meta-externalfetcher» для загрузок по запросу пользователя. Meta-ExternalAgent — бот, значимый для обучения и ИИ-функций.

Блокировка

«User-agent: Meta-ExternalAgent», за которым следует «Disallow: /». Дополнительно «User-agent: meta-externalagent» строчными буквами, так как написание на практике различается.

Взвешивание

Блокировка выводит вас из обучения Llama и из ответов Meta AI в WhatsApp, Instagram и Facebook. Для локальных поставщиков с социальным охватом видимость здесь может быть ценна.

Проверка доступа

citeglass запрашивает вашу страницу с user-agent Meta-ExternalAgent и показывает, совпадают ли robots.txt и ответ сервера.

Проверьте свой сайт

citeglass примерно за 30 секунд показывает, где ваш сайт нечитаем для ИИ-систем — бесплатно и без входа.

Читать дальше

Общая информация, не юридическая консультация. GEO — молодая область, рекомендации могут меняться.