Видимость в ИИ-поиске (GEO/AEO)

Проверьте, открывает ли robots.txt доступ ИИ-краулерам, оцените файл llms.txt и узнайте, насколько хорошо страницу можно цитировать. Результат — подсказка для диагностики, а не обещание позиций.

Что делает

ИИ-краулеры

ai-bots-check читает robots.txt и показывает, каким ИИ-агентам доступ разрешён, а каким закрыт. У каждого краулера своя роль. Краулеры обучения, такие как Google-Extended и CCBot, собирают данные для моделей. Краулеры для ответов, например PerplexityBot, находят источники для ответов в реальном времени. Многие сайты разрешают получение ответов и закрывают обучение, поэтому роль важна.

  • GPTBot, ClaudeBot, PerplexityBot, Google-Extended и многие другие
  • Каждый краулер с меткой его роли
  • Работает с живым URL или с текстом robots.txt, который вы вставите
  • llms-txt-check для файла /llms.txt

llms.txt

llms-txt-check загружает /llms.txt и проводит девять проверок «да или нет»: H1, не меньше трёх разделов, не меньше трёх ссылок, упоминание бренда, категория продукта или услуги, страница продукта или цен, доказательства, документация и размер меньше 60 КиБ. Оценка — из 10. Передайте --brand, чтобы проверить, что файл называет ваш бренд.

  • Девять двоичных проверок, оценка из 10
  • Проверка бренда с --brand
  • Читает только /llms.txt, другие страницы не открывает

Цитируемость

citability-check оценивает, насколько легко фрагмент текста процитировать в ответе ИИ: блоки ответов, самодостаточные предложения, факты и цифры, структура. Каждая из четырёх частей даёт до 25 баллов. Для URL оценивается основное содержимое, а не навигация и подвал. Высокий балл не гарантирует цитирование.

  • Четыре части по 25 баллов
  • Для URL — только основное содержимое
  • Сигналы доверия в скане: автор, даты, ссылки на источники
  • Подсказка для проверки, а не фактор ранжирования

Три шага — один сохранённый скан

  1. Проверьте доступ ИИ-краулеров в robots.txt

    seohead ai-bots-check читает robots.txt и показывает, каким ИИ-краулерам сайт открывает доступ, а каких блокирует: от GPTBot и ClaudeBot до PerplexityBot и Google-Extended.

  2. Оцените свой llms.txt

    seohead llms-txt-check загружает /llms.txt и проводит девять проверок «да или нет»: H1, разделы, ссылки, бренд, категория, цены, доказательства, документация и размер.

  3. Оцените, насколько текст пригоден для цитирования

    seohead citability-check оценивает блоки ответов, самодостаточность, плотность цифр и структуру в основном содержимом страницы, а не в навигации и подвале.

Проверки в этой возможности

ПроверкаЧто значитКритичностьДоказательство
NO_AUTHOR_BYLINEНа странице с контентом нет разметки автора или байлайна (meta author, rel=author, itemprop или author в JSON-LD)TipБлок trust_signals скана для этой страницы
NO_CONTENT_DATESНа странице с контентом нет даты публикации или обновления в машиночитаемом видеTipБлок trust_signals скана для этой страницы
FEW_CITATIONSНа странице с контентом нет исходящих ссылок на источники в основном текстеTipИсходящие ссылки, найденные в основном содержимом
MISSING_ABOUT_PAGEВ области скана не найдена индексируемая страница «О компании» (About)TipСтатус: не индексируется, битая, есть ссылка, но страница не просканирована, или страница не обнаружена
Ещё в реестре проверок
MISSING_CONTACT_PAGEMISSING_PRIVACY_POLICY

Одна команда

bash
seohead llms-txt-check --url https://example.com/

Сначала установите: руководство по установке. Каждая команда работает и как MCP-инструмент для ИИ-агентов.

Что нужно

  • URL сайта для ai-bots-check и llms-txt-check
  • URL страницы или сам текст для citability-check
  • Необязательно: название бренда для проверки llms.txt

Ограничения

  • Ни один инструмент не может гарантировать, что ИИ-продукт процитирует страницу или поставит её в выдачу
  • Поиск фраз для оценки цитируемости работает только для английского и русского языков
  • ai-bots-check читает правила в robots.txt, но не проверяет, соблюдает ли их краулер на самом деле
  • Для находок по сигналам доверия нужно сканирование нужных страниц

Вопросы

Он меняет мой robots.txt или llms.txt?
Нет. Проверки только читают данные. ai-bots-check работает с текстом robots.txt, llms-txt-check только загружает /llms.txt. Правки вы вносите сами.
Высокий балл цитируемости гарантирует, что ИИ-ответы будут цитировать мою страницу?
Нет. Балл показывает, насколько текст самодостаточен и подкреплён фактами. Это не обещание ранжирования или цитирования.
Стоит ли блокировать ИИ-краулеры?
Это зависит от политики, которую вы выбираете. ai-bots-check отделяет краулеры обучения, такие как Google-Extended и CCBot, от краулеров для ответов, таких как PerplexityBot. Так можно разрешить видимость в ответах и закрыть обучение.
Нужно ли указывать название бренда для проверки llms.txt?
Нет, но с --brand инструмент также проверит, что файл называет ваш бренд. Это одна из девяти проверок.
Нужен ли API-ключ?
Нет. Для этих трёх команд ключ не нужен. Они загружают robots.txt, /llms.txt или страницу, которую вы укажете.
Он проверяет, появляется ли мой сайт в ответах ИИ?
Нет. Он проверяет доступ, файл llms.txt и сам текст. Ответы ИИ-продуктов он не запрашивает.

Проверьте на своём сайте