Не прошло и квартала с появления новых защит от парсинга в Google, как поисковая система придумала кое‑что новое. Теперь Google не затрудняет парсинг веб‑скрейперам и сервисам поисковой аналитики, а просто показывает неревантные результаты, если подозревает, что запросы совершаются автоматически.
Как всё началось
28 сентября 2026 года мы впервые получили тикет, который, как оказалось позже, стал началом этой истории. Пользователь жаловался на несовпадение позиций в Google. Однако если обычно такие обращения связаны с неправильной ручной проверкой (подробнее о том, как корректно проверять позиции вручную, мы писали в этой статье), то в этот раз сотрудники техподдержки заметили неладное. Выдача по запросу действительно отличалась от того, что мы наблюдали в реальной выдаче. Внешне результаты поиска были верные и соответствовали тематике, однако, перечень сайтов был иным.
Топвизор не единственный, кто столкнулся с такой проблемой. Вместо блокировки подозрительного IP или показа капчи Google стал действовать хитрее: отдавать результаты поиска, которые не соответствуют реальности. Такие результаты по техническим характеристикам не отличаются от верных, и парсеру практически невозможно определить, является ли страница корректной. При попадании таких результатов в отчет пользователи могут наблюдать выпадение своего сайта по ряду запросов.
Зачем Google это делает
По версии аналитиков, Google намеренно подменяет результаты выдачи в качестве защитной меры против AI‑скраперов, которые получают данные для обучения больших языковых моделей.
По нашим наблюдениям, альтернативная выдача содержит больше ссылок на соцсети и маркетплейсы, из‑за чего могут вытесняться сайты, имеющие стабильно высокую позицию при ручной проверке. Более того, в таких результатах, как правило, отсутствует обзор от ИИ. Около 80% подменной выдачи приходится на первую страницу поиска. При перезапросе чаще всего возвращаются верные результаты, однако массовые повторы проблемных запросов, наоборот, увеличивают риск получения ошибки.
Распознать «отравленную» выдачу — самая сложная часть проблемы, поскольку на первый взгляд такая страница выглядит нормальной. Представленные в ней результаты — настоящие, зачастую релевантные поисковому запросу, а сама страница оформлена так же, как обычная выдача Google. Разница лишь в том, что её содержимое не совпадает с тем, что видит реальный пользователь при аналогичном поиске. Возьмём, к примеру, запрос «iphone» для США (на английском языке): обычный пользователь увидит на первом месте сайт Apple, за ним — Википедию и другие привычные ресурсы. В «отравленной» же выдаче по тому же запросу первыми могут оказаться видео с YouTube или другие страницы, также посвящённые iPhone, — поэтому сама по себе такая выдача не вызывает подозрений. Следовательно, единственный способ выявить «отравленную» выдачу — это сравнить её с тем, что Google показывает реальному пользователю.
Однако выдача совпадает по тематике далеко не всегда. Иногда она соответствует одному слову во фразе из нескольких слов. Вот пример нормальной и альтернативной выдачи от nozzle.io:
Насколько часто встречается проблема
По оценке Nozzle, нестандартные результаты достигают доли до 25% от общего числа результатов, а начиная с 1 октября их доля составляет от 5 до 11% в день. Вот ключевые выводы из их исследования:
- В среднем 22,6% результатов выдачи «отравлены», на пике — 43,5%. Начиная с 13 сентября, на первой или второй страницах поисковой выдачи (SERP) стали появляться «отравленные» результаты (в тех случаях, когда анализировались обе страницы). Для сравнения: до этого показателя составлял 0,28%. В середине октября доля таких результатов снизилась до 4–6%, а 21 октября снова выросла до 35,7%;
- Вторая страница страдает сильнее — по двум причинам. Вторая страница выдачи оказывается «отравленной» в полтора раза чаще, чем первая. Зачастую это происходит, когда на первой странице отображаются вполне корректные результаты, а на второй — контент, соответствующий лишь одному из слов поискового запроса;
- Сначала блокировки, затем — «отравление». С 13 сентября запросы к Google начали приходить с ошибками, а с 20 сентября те из них, что всё же проходили, возвращали «отравленные» результаты;
- Страница выглядит нормально, а результаты — нет. В органической выдаче сохраняется лишь 22,3% сайтов, которые присутствовали там ранее (до начала проблемы этот показатель составлял 88,1%); их место занимают социальные сети и форумы;
- Отслеживаемые сайты исчезают, а затем возвращаются. Сайт, за которым ведется наблюдение, в 60,8% случаев «отравленной» выдачи выпадает из топ‑10 (ранее это происходило лишь в 2,7% случаев). При этом в 67,9% ситуаций привычные сайты возвращаются на свои позиции в течение трех дней.
Search Engine Journal сообщает, что альтернативная выдача имеет общие черты:
- Искусственный шторм выдачи;
- Имеет больше пользовательского контента (UGC);
- Имеет меньше обзоров ИИ (Google AI Overviews);
- Реклама не меняется и остаётся стабильной.
Обычные результаты поиска сохраняют 88,5% тех же веб‑сайтов для повторных поисков с теми же ключевыми фразами. Альтернативные результаты сохраняют только 20,7% веб‑сайтов при последовательных поисках по одним и тем же ключевым словам.
По их мнению, это значит, что Google вносит коррективы в отчёты инструментов для SEO‑аналитики, из‑за чего в них начинает отображаться более широкий круг сайтов, временно занимающих места в выдаче по одним и тем же ключевым фразам. Для стороннего наблюдателя, изучающего эти статистические данные, такая ситуация будет выглядеть как крайне высокая волатильность позиций.
По оценке cloro.dev, на пике 71,5% их страниц в Google утратили большую часть своих привычных позиций (с 30 сентября по 12 октября). У страниц SerpApi, если оценивать по тем же критериям, этот показатель достиг пикового значения в 89% и оставался выше 60% вплоть до 13 и 14 октября, и после этого за один день он снизился примерно до 10%. С проблемой также столкнулись специалисты DataForSEO.
О проблеме написали и русскоязычные SEO‑эксперты и авторы каналов и .
Как это влияет на Топвизор
Топвизор также столкнулся с этой проблемой. Если ваш сайт резко вылетел из Топа, хотя раньше стабильно ранжировался на первой странице, и при проверке вручную вы видите сайт в выдаче, напишите в Поддержку. Мы проведём анализ и в случае «отравленной» выдачи рассмотрим возможность бесплатного перезапуска проверки, поскольку перезапуск не всегда помогает и даёт «правильные» результаты.