Google планирует поддержать в robots.txt общий сигнал, которым владельцы сайтов смогут выразить запрет на обучение ИИ сразу для нескольких поставщиков. Поддержку намечают на 2027 год.
Общий сигнал предпочтений об использовании материалов для обучения ИИ. Вместо отдельных указаний каждому поставщику сайт сможет выразить общий выбор, который поддерживающие механизм компании будут учитывать.
Google сообщила о плане 30 октября. В основе работа группы AIPREF при IETF, организации, которая разрабатывает интернет-стандарты. Robots.txt — файл с указаниями для роботов, обращающихся к сайту.
Для владельца портала это вопрос об использовании его текстов. Он связан с поиском и ответами нейросетей, но решения по этим направлениям полезно принимать отдельно. Участие в ответах ИИ разобрано в статье о GEO-продвижении.
Google рассчитывает поддержать его вместе с другими поставщиками в 2027 году. Сейчас речь о планируемом механизме и проекте согласованных правил, которые ещё уточняются.
В анонсе нет готовой команды, которую нужно сегодня скопировать в файл. Google обещает сообщать о ходе работы. Назначать собственное имя параметра или считать поддержку уже включённой было бы преждевременно.
Практический шаг сейчас — определить желаемый результат: где сайт хочет разрешать использование материалов, а где ограничивать. Техническую запись стоит выбирать по действующим инструкциям конкретного поставщика.
Они продолжат работать рядом с общим сигналом. Если сайт запретит обучение общим сигналом и при этом не задаст отдельное правило Google-Extended, Google планирует трактовать это как запрет для Google-Extended.
Компания также указывает, что сайты, явно разрешающие Google-Extended, могут участвовать в ответах с опорой на источники в Gemini Apps и получать оттуда переходы. Это возможность участия, а не обещание показа или трафика.
Поэтому перед правкой полезно проверить существующие указания. Общее решение и отдельное исключение должны выражать задуманный выбор владельца, иначе настройка может дать другой результат.
Сам анонс не требует срочной правки. Сначала выясните, какие указания действуют сейчас и что вы хотите разрешить. Планируемую поддержку нельзя проверять так, будто механизм уже запущен.
Роботам, участвующим в механизме, предлагается общий способ прочитать выбор сайта. Из этого не следует, что любой посторонний сборщик технически лишится доступа к странице.
В рабочем плане продвижения полезно зафиксировать решение владельца и поручить проверку файла ответственному за сайт. Для такого плана есть разбор SEO-диагностики. После изменения проверяют доступность страниц и действующие указания, а рост посещаемости измеряют отдельно.
