Проверка AI-краулеров
Введите домен — мы прочитаем реальный robots.txt и покажем, кто из AI-ботов разрешён, а кто заблокирован. Бесплатно, без регистрации.
Боты, которые мы проверяем
Список составлен по публичной документации вендоров. Если статуса бота нет в его собственной документации, мы это отмечаем отдельно, а не молчим.
Генератор llms.txt →
Соберём файл из реальных страниц вашего sitemap
Валидатор llms.txt →
Проверьте существующий файл по спецификации
Гайды по платформам: