Google объявил, что издатели получат больше рычагов влияния на то, как их контент используется для обучения и работы AI-систем. Параллельно компания присоединяется к разработке стандарта IETF — международного органа, который задаёт технические правила для интернета.
Почему это важно для SEO и издателей
До сих пор у владельцев сайтов был ограниченный набор инструментов: robots.txt и мета-теги, которые AI-боты не всегда соблюдали добросовестно. Если крупный игрок вроде Google формализует правила через IETF, это задаёт ориентир для остальной индустрии — поисковых систем, AI-ассистентов, агрегаторов.
Для SEO-специалистов и владельцев контентных проектов это сигнал: стоит следить за тем, какие именно технические механизмы появятся в финальной версии стандарта. От этого будет зависеть, как настраивать доступ к контенту для разных типов ботов — поисковых краулеров, AI-тренировочных пауков и систем, которые генерируют ответы в реальном времени на основе чужих страниц.
Что такое IETF и почему участие Google имеет вес
IETF (Internet Engineering Task Force) — организация, которая разрабатывает открытые стандарты для интернета. Через нее в прошлом проходили базовые протоколы, на которых держится сеть. Участие Google в работе над стандартом для AI-контролей означает, что компания закладывает технический фундамент, который потенциально будут использовать и другие поисковики, и AI-платформы.
Это отличается от ситуации, когда каждая компания придумывает свой закрытый механизм. Открытый стандарт IETF, если он будет принят широко, снижает фрагментацию: издателю не придется настраивать отдельные правила под каждого AI-игрока отдельно.
Что это может изменить для арбитражников и владельцев трафика
Любой, кто строит контентные проекты под SEO-трафик, зависит от того, как поисковые системы и AI-сервисы обращаются с его материалами. Если AI-ответы в поиске начинают пересказывать содержимое статьи без перехода на сайт, это бьет по CTR и по монетизации.
Новые механизмы контроля потенциально дают возможность:
- разрешать или запрещать использование контента для обучения AI-моделей;
- разрешать или запрещать использование контента в AI-генерируемых ответах (например, в AI Overviews);
- настраивать эти разрешения отдельно от классического индексирования для поиска.
Это ключевое отличие от старых правил robots.txt, где доступ обычно был единым: либо боту разрешено сканировать страницу, либо нет. Разделение сценариев использования — это именно то, чего давно просили издатели.
Что делать прямо сейчас
Пока стандарт IETF формируется, конкретных технических спецификаций для внедрения еще нет. Разумная позиция — не спешить что-то менять в файлах robots.txt или мета-тегах под предположения, а следить за официальными объявлениями Google и публикациями IETF по этой теме.
Для команд, которые работают с крупными контентными проектами или новостными сайтами, где AI-пересказы уже заметно влияют на трафик, имеет смысл заранее выделить ответственного, который будет отслуживать развитие этого стандарта и оперативно вносить изменения в технические настройки сайта, когда появятся конкретные инструменты.
Главный вывод на данный момент простой: Google двигается в сторону более гранулярного контроля контента для AI, и делает это не в одиночку, а через открытый международный стандарт. Для рынка это может означать унификацию правил, которых индустрии не хватало с момента взрывного роста AI Overviews и AI-ассистентов, встроенных в поиск.
