Кейс прост до обидного. Сайт открывается, страницы грузятся, GSC молчит (почти). Трафик при этом тает. Что делает SEO-специалист? Проверяет метатеги, смотрит ссылки, лезет в robots.txt. Правильно. Неправильно — что дальше.
В описанном кейсе виновником оказался Fail2ban. Система защиты сервера, которая должна отбивать атаки, посчитала Googlebot нарушителем и тихо добавила его IP в бан-лист. Для пользователей сайт работал нормально. Для поискового робота — не существовал.
GSC не показал красного баннера. Проблема всплыла только в разделе «Настройки → Сканирование → Статистика сканирования» — место, куда большинство заходит раз в полгода, если вообще заходит.
WAF, антибот-фильтры, ограничения по IP и частоте запросов — вся эта серверная инфраструктура находится вне зоны видимости стандартного SEO-аудита. Хотя именно она может закрыть Googlebot надёжнее любого noindex.
При падении трафика без явных причин — сначала смотри логи, потом правь мета.
Подробный разбор с чек-листом: SEOnews.ru