Москва, ул. Верхоянская, 18к2
24 сентября 2026

🧠 llms.txt: новый ритуал для тех, у кого 403 на половине сайта

Ahrefs проверил 137 210 доменов с llms.txt. 97% файлов за май 2026 не получили ни одного запроса от AI-ботов. Ни одного. Из тех 3%, что получили — реальные AI-ретривал-боты принесли лишь малую долю обращений.

Пока SEO-сообщество обсуждает, как правильно структурировать llms.txt и нужно ли туда добавлять описание проекта, значительная часть сайтов банально отдаёт 403 нужному краулеру или закрыла в robots.txt не тот user-agent. GPTBot и OAI-SearchBot — разные боты с разными задачами. Открыть один и считать, что ChatGPT теперь вас видит, распространённая история.

Schema.org для AI Overviews тоже не взлетела: исследование на 1885 страницах не нашло статистически значимого роста AI-цитирований после добавления JSON-LD ни в ChatGPT, ни в Google AI Mode.

Технический аудит для AI-видимости выглядит неожиданно знакомо: 200 OK, нет случайного noindex, canonical на месте, WAF не режет бота. Индустрия придумала новые инструменты, чтобы продолжать игнорировать старые проблемы.

Разбор с цифрами и чеклистом: SEOnews Разборы

Источник SEOnews Разборы
Все новости Telegram MAX