Google, OpenAI, Anthropic и Microsoft приняли общий запрет на сбор данных для AI
Новая группа в robots.txt позволяет одним сигналом закрыть сайт или отдельные пути от сбора данных для обучения моделей.
Запрет на AI-обучение не мешает обычному сканированию сайта и его появлению в поиске Google.
Anthropic уже поддерживает сигнал; Google и Microsoft планируют внедрение в 2027 году, OpenAI — в ближайшие месяцы.
Директива действует только на будущий сбор и не удаляет данные, полученные компаниями раньше.
Почему важно
Издатели получают общий машиночитаемый способ разделить поисковую индексацию и разрешение на обучение моделей.