Google поддержит единый контроль обучения ИИ в robots.txt
Google объявил о планах поддержать общий механизм в robots.txt, который позволит сайтам в одном шаге выражать предпочтения по обучению ИИ у разных провайдеров.
- Google планирует поддержать общий контроль обучения ИИ в robots.txt
- Механизм основан на работе группы AIPREF в IETF
- Это дополнение к Google-Extended, действующему с 2023 года
Как сообщает Google Search Central, компания объявила о планах поддержать общий контроль обучения ИИ в файле robots.txt. Такой механизм позволит сайтам в одном шаге сообщать о своих предпочтениях по использованию контента для обучения ИИ сразу нескольким провайдерам. Нововведение опирается на работу группы AIPREF в Инженерной группе Интернета (IETF).
Инициатива продолжает историю инструментов, которые Google предоставляет владельцам сайтов. С 2023 года компания предлагает контроль Google-Extended, позволяющий управлять использованием контента для обучения ИИ. Новый общий контроль в robots.txt должен стать более универсальным решением.
Поддержка общего контроля означает, что вебмастерам не придётся настраивать отдельные правила для каждого провайдера ИИ. Ожидается, что это упростит администрирование и сделает предпочтения сайтов более прозрачными для экосистемы.
Владельцам сайтов и SEO-специалистам стоит следить за внедрением нового стандарта: скоро появится возможность управлять обучением ИИ через один файл robots.txt, а не через несколько инструментов. Пока механизм не заработал, не отказывайтесь от Google-Extended и других действующих настроек.
Разработчикам, которые создают сайты и CMS, имеет смысл заложить поддержку нового синтаксиса robots.txt заранее, чтобы клиенты могли легко выражать свои предпочтения.
Оригинал публикации: developers.google.com. Разбор и выводы — редакции «SEO-зоны».