Google объяснил, почему переезд на CDN усиливает нагрузку на сервер
Инженеры Google разобрали, почему после подключения CDN обход Googlebot может участиться, а исходный сервер — не выдержать наплыва запросов.
obhod-sayta
Google: robots.txt управляет обходом, а не обучением ИИ
В новом видео Google Гэри Иллис объяснил, что robots.txt регулирует обход сайта, а не использование контента. Для неанглоязычных путей он советует процентное кодирование.
Google объяснил, что можно указывать в robots.txt для ИИ-краулеров
Гэри Иллис и Чери Проммавин выпустили второе видео серии Non-Canonical Cabinet — о том, какие директивы robots.txt поддерживает Google, а какие — нет.
Google считает URL со скобками и с процентным кодированием разными адресами
Джон Мюллер из Google заявил, что скобки в URL и их процентное кодирование — разные адреса, и советует придерживаться одного варианта в ссылках, канонических тегах и карте сайта.
В отчёте об обходе Google Search Console пропали данные за 15 сентября
В отчёте Crawl Stats в Google Search Console снова не хватает одного дня статистики — на этот раз пропали данные за 15 сентября. Подобное уже случалось, и Google обычно их восстанавливает.