Сайт IRS пропал из выдачи Google из-за блокировки ботов
Сайт налоговой службы США на несколько дней почти исчез из результатов поиска Google. Причиной, вероятно, стала слишком агрессивная защита от ботов, которая заблокировала и поискового робота.
- Сайт IRS и другие правительственные ресурсы США резко потеряли позиции в Google.
- Вероятная причина — чрезмерно строгая блокировка ботов, затронувшая и Googlebot.
- Частично проблема уже устранена, сайт постепенно возвращается в выдачу.
За последние несколько дней сайт налоговой службы США (IRS) и другие государственные ресурсы резко потеряли позиции в поисковой выдаче Google. Как сообщает Search Engine Roundtable, проблема, судя по всему, связана с действиями самой IRS: федеральное ведомство могло внедрить слишком агрессивную защиту от ботов, которая по ошибке заблокировала и поискового робота Google.
Из-за блокировки Google не мог полноценно обходить страницы IRS, поэтому сайт перестал появляться в результатах поиска по многим запросам. По предварительной оценке, ведомство уже внесло исправления в настройки, и сайт постепенно восстанавливает свои позиции в выдаче.
Ситуация затронула не только главный домен IRS, но и другие правительственные сайты США, что указывает на системный характер проблемы, а не на единичный сбой.
Для владельцев сайтов это напоминание о том, что чрезмерно строгие меры защиты от ботов могут навредить видимости ресурса в поиске. Если вы используете агрессивные правила файла robots.txt, CAPTCHA или другие фильтры трафика, убедитесь, что они не блокируют Googlebot и другие поисковые системы.
SEO-специалистам стоит регулярно проверять覆盖率 индексации ключевых страниц своих клиентов. Резкое падение позиций без видимых причин может быть следствием не только алгоритмических изменений, но и технических блокировок на стороне сервера.
Оригинал публикации: www.seroundtable.com. Разбор и выводы — редакции «SEO-зоны».