Блокировка AI-ботов в Cloudflare мешает индексации Googlebot
По сообщению Search Engine Journal, ограничение доступа AI-ботам в Cloudflare может случайно блокировать Googlebot, что приводит к проблемам с индексацией сайтов.
cloudflare
Cloudflare и браузеры согласовали протокол PACT для борьбы с ботами
Cloudflare и три браузера-конкурента договорились о едином протоколе PACT, но он пока не запущен и решает лишь часть проблем с агентным доступом.