Проверено 28.10.2026 · https://www.citepulse.io/
Технические предпосылки для обнаруживаемости ИИ выполнены.
Матрица ИИ-краулеров
Для каждого бота: что разрешает ваш robots.txt — и что сервер на самом деле возвращает user-agent'у бота. Строки, выделенные красным: robots разрешает, но сервер блокирует (обычно правило WAF или защиты от ботов).
| Бот | Оператор | robots.txt | Ответ сервера |
|---|---|---|---|
| GPTBot | OpenAI | разрешено | 200 + содержимое |
| OAI-SearchBot | OpenAI | разрешено | 200 + содержимое |
| ChatGPT-User | OpenAI | разрешено | 200 + содержимое |
| ClaudeBot | Anthropic | разрешено | 200 + содержимое |
| Claude-SearchBot | Anthropic | разрешено | 200 + содержимое |
| Claude-User | Anthropic | разрешено | 200 + содержимое |
| PerplexityBot | Perplexity | разрешено | 200 + содержимое |
| Perplexity-User | Perplexity | разрешено | 200 + содержимое |
| Google-Extended | Google (Gemini-Training) | разрешено | — |
| Googlebot | Google (KI-Übersichten) | разрешено | 200 + содержимое |
| CCBot | Common Crawl (Trainingsdaten vieler LLMs) | разрешено | 200 + содержимое |
| Bytespider | ByteDance (Doubao) | разрешено (через User-agent: *) | 200 + содержимое |
| Amazonbot | Amazon (Alexa/Rufus) | разрешено (через User-agent: *) | 200 + содержимое |
| Applebot-Extended | Apple (Intelligence-Training) | разрешено (через User-agent: *) | — |
| Meta-ExternalAgent | Meta (Llama/Meta AI) | разрешено (через User-agent: *) | 200 + содержимое |
Как складывается оценка?
| Нет разметки FAQ или HowTo | -2 |
| Результат | 98 / 100 |
Структура и машинная понятность
Нет разметки FAQ или HowTo
Содержимое в формате «вопрос — ответ» и пошаговые инструкции без разметки FAQPage или HowTo сложнее распознать ИИ-системам как напрямую цитируемый ответ.
Что вам следует сделать: Там, где страница отвечает на реальные вопросы или даёт инструкции, разметьте её как FAQPage или HowTo (никакой разметки без видимого соответствующего содержимого).
В порядке (11)
- llms.txt присутствует и правдоподобно построен.
- Основное содержимое в HTML без JavaScript.
- Структурированные данные (JSON-LD) присутствуют. — Organization, WebSite, SoftwareApplication, WebPage
- Организация размечена как JSON-LD.
- Ровно один заголовок H1.
- Установлен canonical URL.
- Sitemap доступен.
- Заголовок страницы имеет разумную длину.
- Сигнал авторства присутствует.
- Быстрое время ответа сервера.
- Нет noindex — страницу можно индексировать.
Следующие шаги
- Нет разметки FAQ или HowTo. Там, где страница отвечает на реальные вопросы или даёт инструкции, разметьте её как FAQPage или HowTo (никакой разметки без видимого соответствующего содержимого).
Еженедельное повторное сканирование с уведомлением по e-mail при каждом изменении. В подготовке — введите свой адрес.
Метод и границы
Проверено 28.10.2026. citeglass забирает citepulse.io и связанные файлы (robots.txt, llms.txt, sitemap.xml) через HTTP — один раз как обычный браузер, один раз для каждого user-agent'а ИИ-краулера. JavaScript не выполняется. Время до первого байта: 725 мс.
Чем это не является: Никакого отслеживания позиций или цитирований, никакого утверждения о том, называет ли модель вас на самом деле, и никакой проверки содержимого, загружаемого через JavaScript. Снимок с точки зрения одного серверного IP.