Проверка видимости для ИИ
Узнайте на одном экране, могут ли ИИ-роботы читать ваш сайт, напрямую из robots.txt.
Этот инструмент читает файл robots.txt вашего сайта и показывает статус разрешения для четырёх ИИ-роботов: GPTBot от OpenAI, ClaudeBot от Anthropic, PerplexityBot от Perplexity и Google-Extended, который управляет тем, могут ли собственные ИИ-продукты Google (AI Overviews, Gemini) использовать ваш контент. Если робот заблокирован, соответствующий сервис не видит ваш контент и не может сослаться на вас в ответах.
Также проверяются ещё три момента: есть ли у вас файл llms.txt (формирующаяся практика краткого описания сайта для ИИ-систем, пока не официальный стандарт), доступна ли карта сайта sitemap.xml, и есть ли на страницах структурированные данные (schema.org). Структурированные данные помогают и поисковым системам, и ИИ точнее понять тип контента: статья, товар, часто задаваемые вопросы.
Эта проверка читает только настройки разрешений, она не измеряет, как часто роботы реально посещают сайт и как часто вы появляетесь в ответах ИИ. Разрешение робота в robots.txt не гарантирует видимость, а лишь снимает блокировку, сам контент по-прежнему должен быть открытым, точным и удобным для цитирования.
Как пользоваться
- Введите адрес вашего сайта.
- Запустите проверку, robots.txt будет прочитан автоматически.
- Посмотрите, какой из четырёх роботов заблокирован, если такой есть.
- Проверьте статус llms.txt, карты сайта и структурированных данных.
- Снимите блокировку для любого робота, отмеченного как запрещённый в robots.txt.
Частые вопросы
Снизит ли блокировка GPTBot мой трафик?
Блокировка GPTBot не даёт ChatGPT использовать ваш контент для обучения или живых ответов; на существующий поисковый трафик это не влияет, им управляет другой робот, Googlebot.
Обязателен ли файл llms.txt?
Нет, это пока не официальный стандарт; некоторые сайты добавляют его, чтобы дать ИИ-системам краткое описание контента, но ни одна система не гарантирует его чтение.
Выпаду ли я из поиска Google, если заблокирую Google-Extended?
Нет, Google-Extended управляет только использованием контента для Gemini и AI Overviews; на видимость в обычном поиске Google это не влияет, она зависит от Googlebot.
Могу ли я появляться в ответах ИИ без структурированных данных?
Можете, но структурированные данные яснее показывают тип и связи вашего контента, что повышает шанс точного цитирования.
