30 октября 2026 года Google и Microsoft объявили о новых настройках использования контента для обучения ИИ. Компании поддержат общий сигнал в robots.txt, а Microsoft дополнительно разделит разрешения на обучение моделей и использование страниц в генерируемых ответах. Об изменениях сообщили Google Search Central и Microsoft Bing.
Для владельца сайта это разные решения. Можно соглашаться на использование статьи как источника для ответа со ссылкой, но возражать против обучения модели на её содержимом. Новые настройки призваны точнее выражать такие предпочтения.
Общий сигнал будет работать через robots.txt. Предложенный механизм позволяет задавать предпочтения для всего сайта или отдельных разделов. Его смогут учитывать компании, которые внедрят поддержку. Пока документ опубликован как Internet-Draft, а не как принятый стандарт IETF. Он также не заменяет обычные правила доступа роботов к страницам. Проект механизма.
Google планирует внедрение в начале 2027 года, без точной даты. Если сайт выразит общий запрет на обучение, но не задаст отдельное правило Google-Extended, компания намерена трактовать это как запрет для Google-Extended. Явные настройки Google-Extended продолжат действовать. Анонс Google.
Здесь есть существенная особенность: Google-Extended управляет использованием контента и для обучения Gemini, и для grounding. Так называют передачу найденного контента модели при подготовке ответа. Поэтому запрет может затронуть присутствие материалов в ответах Gemini. При этом Google прямо указывает, что Google-Extended не влияет на включение сайта в обычный Google Search и не служит сигналом ранжирования. Документация Google-Extended.
У Bing обучение и grounding будут независимыми настройками. Можно запретить обучение, сохранив разрешение использовать страницы в ИИ-ответах. Если настройки отсутствуют, по умолчанию действует разрешение. Возможность попадания в обычную выдачу Bing сохраняется при соблюдении требований к сканированию и индексированию. Разрешение grounding не гарантирует ссылок, трафика или выплат. Объяснение Microsoft.
Microsoft начнёт учитывать новые настройки 1 февраля 2027 года, по мере обхода страниц. Для сайтов, использующих NoArchive или NoCache, компания предусмотрела переходный период.
Сроки перехода Bing
| Дата | Что меняется |
|---|---|
| 15 декабря 2026 | В Bing Webmaster Tools открывается временная настройка для сайтов, которые используют NoArchive или NoCache на эту дату. |
| 1 февраля 2027 | Microsoft начинает учитывать новые настройки по мере обхода страниц. |
| До 1 марта 2027 | Нужно завершить переход, чтобы сохранить выбранные ограничения на обучение и использование страниц в ИИ-ответах. |
| 30 сентября 2027 | Истекает временная настройка. Для конкретной страницы она перестанет действовать раньше, если Bing при обходе обнаружит новую настройку. |
После 1 марта 2027 года NoArchive и NoCache перестанут учитываться как предпочтения для обучения и grounding. При обнаружении новых AI-настроек на сайте Microsoft перестанет учитывать оставшиеся старые теги для этих целей раньше.
Чтобы сохранить ограничения grounding при переходе, потребуется разместить настройки на страницах и записать временное предпочтение в Bing Webmaster Tools. Оно действует для каждой страницы до повторного обхода, при котором Microsoft обнаружит новые настройки, или до 30 сентября 2027 года, смотря что наступит раньше. Условия перехода.
Начать подготовку стоит с проверки robots.txt, метатегов и HTTP-заголовков. Для каждого ограничения зафиксируйте, зачем оно добавлено: закрыть страницу от поиска, запретить обучение или ограничить использование в ИИ-ответах. Такой список поможет обновить настройки без случайного запрета на сканирование нужных страниц.