Аудит сайта в Claude
У Anthropic три бота с разными задачами — для поиска, для запросов пользователя и для обучения. Проверю, какие из них пускает сайт, и подберу запросы для проверки ответов Claude.
Как Claude находит сайты
Claude ищет в интернете и отвечает со ссылками на источники. Страницы для поиска обходит Claude-SearchBot, Claude-User открывает сайт по просьбе пользователя, а ClaudeBot собирает тексты для обучения моделей. Закрыть обучение и оставить поиск можно — главное, не перекрыть всех ботов одним правилом.
Что проверяет страница
- Правила robots.txt для трёх ботов Anthropic — с учётом общей группы «*».
- Ответ главной на запрос с User-Agent ClaudeBot: антибот-защита нередко отдаёт ему ошибку.
- Есть ли текст без JavaScript, llms.txt и 5 главных запросов сайта без бренда — по ним я проверю ответы Claude вручную.
Что помогает попасть в ответ
Подробные экспертные страницы с авторством и ссылками на источники, понятная структура, упоминания бренда на авторитетных площадках. В кейсе клиники бренд был в 63 % ответов Claude.
Расскажите о проекте — предложу план продвижения
Посмотрю сайт, найду главные точки роста и предложу, с чего начать. Удобнее всего — в Telegram.