‼️ Апдейт на 02.11.2026 ‼️ Из-за ограничений со стороны Яндекс Search API проверки, запущенные в дни повышенной нагрузки 1-2 ноября, могли быть не завершены. Денежные средства за них вернули на баланс.

Апдейт от 29.10.2026 ❗ Проверки в Яндекс Search API работают с ограничениями. Рекомендуем изменить время запуска проверок на 00:00 по московскому времени. Лучшие дни для запуска проверки - вторая половина недели, включая выходные. Как установить расписание проверок →

Чтобы получать данные в другое время, используйте Яндекс SERP, «живую» выдачу Яндекса. Как добавить Яндекс SERP в проект →

Google, OpenAI, Microsoft и Anthropic согласовали единый запрет на обучение ИИ

Он будет зафиксирован в файле robots.txt.

Компании Google, OpenAI, Microsoft и Anthropic достигли соглашения о едином запрете на использование их сайтов для обучения ИИ-систем. Это правило будет зафиксировано в файле robots.txt. 30 октября Google опубликовала в своём блоге описание нового подхода.

Ранее, если сайт не хотел, чтобы его тексты использовались для обучения нейросетей, ему приходилось указывать в robots.txt отдельные правила для каждого ИИ-агента: GPTBot для OpenAI, ClaudeBot для Anthropic и Google-Extended для Google. Теперь достаточно будет одной записи: «User-Agent: __usage_ai-training» и «Disallow: /», чтобы запретить обучение на всём сайте. Также можно будет закрыть доступ к отдельным разделам.

Инициативу предложил Кевин Келли из Anthropic, и она была направлена в Инженерный совет интернета (IETF). Однако пока это лишь черновик, не имеющий официального статуса стандарта. Рабочая группа IETF по предпочтениям для ИИ (AIPREF) продолжает обсуждение предложения.

Сроки внедрения различаются. Anthropic уже начала применять новый подход, OpenAI обещает внедрить его в ближайшие месяцы, Microsoft начнёт учитывать новые настройки с 1 февраля 2027 года, а Google планирует добавить поддержку в 2027 году. По данным Google, общий запрет будет действовать так же, как и запрет Google-Extended, если он не будет указан отдельно. При этом собственные настройки каждой компании будут сохранены.

Источник: Google Search Central

Читайте также по теме: 

Google усилил блокировку скрейперов и SEO‑инструментов

Google тестирует текстовые объявления в AI Mode

Google начал платить издателям за использование контента в ИИ‑поиске

Теги: