poiskovye-roboty

Cloudflare разрешил запрещать обучение ИИ, не блокируя Googlebot

Новый механизм Disallow AI Training отделяет обучающие обходы от поисковых: Google и Apple уже учитывают отказ, поддержка Bing в robots.txt пока в ожидании.