Компания A/O/Google/Microsoft совместно подготовила заявление, отвергающее обучение ИИ. Веб-сайтам достаточно добавить заявление, чтобы заблокировать его.

Аннотация:

Google, Microsoft, OpenAI и Anthropic поддерживают новое заявление о предпочтениях в обучении ИИ, которое позволяет веб-сайтам указывать, разрешать ли компаниям, занимающимся ИИ, использовать контент для обучения моделей, изменяя файл robots.txt. Согласно проекту, администраторам веб-сайтов нужно будет только добавить набор правил, чтобы сделать заявление нескольким компаниям, занимающимся искусственным интеллектом, поддерживающим эти правила.

Заявление гласит следующее:

Добавьте этот контент в файл robots.txt веб-сайта, чтобы заявить, что все содержимое сайта запрещено использовать для обучения моделей ИИ. Администратор веб-сайта также может изменять разрешенные или запрещенные каталоги. Например, некоторые каталоги разрешено использовать для обучения ИИ, а некоторый контент нельзя использовать для обучения ИИ.

Часы поддержки у каждой компании разные:

План по-прежнему находится на стадии интернет-проекта, но Microsoft заявила, что компания будет соблюдать это заявление начиная с 1 февраля 2027 года, поэтому веб-сайты, которые не хотят, чтобы их контент использовался для обучения ИИ, теперь могут изменить файл, добавив соответствующее заявление.

Google планирует предоставить поддержку начиная с начала 2027 года, но конкретные сроки еще не наступили. OpenAI заявляет, что реализует план в ближайшие месяцы, и Anthropic, похоже, начала поддерживать этот проект.

Запрет на обучение и цитирование контента для получения ответов преследует разные цели:

Приведенное выше заявление отражает только выбор использования контента веб-сайтом. Согласно проекту инструкций, установка только вышеуказанного утверждения не будет напрямую препятствовать сканерам получать доступ к веб-странице. Если веб-сайт хочет запретить определенным сканерам сканировать контент, его все равно необходимо настроить с помощью традиционных правил robots.txt.

Содержимое обучения и справочные веб-страницы с ответами на вопросы ИИ также имеют разные цели. Microsoft предоставляет дополнительные элементы управления AI Grounding для своих собственных служб, позволяя веб-сайтам решать, разрешено ли ссылаться на контент при использовании ответов, сгенерированных AI. Этот элемент управления предназначен для определенных страниц и применяется только к службам Microsoft.

Google заявила, что если веб-сайт использует приведенное выше заявление для отклонения обучения ИИ, но явно не устанавливает Google-Extended, Google планирует поступить с этим в соответствии с отказом веб-сайта от правил Google-Extended. Google-Extended включает обучение модели Gemini, а также использование веб-ссылок некоторых ответов Gemini.