Google объяснил, как он убирает дубли новостей из основных результатов поиска

Google убирает страницу из основных результатов поиска, если та же самая страница появляется в первом слоте блока «Главные новости», но при условии, что и сами «Главные новости» появляются перед основными результатами поиска. Об этом рассказал Дэнни Салливан — координатор Google.

Если блок с главными новостями идёт после какого-либо результата поиска, то дубли не будут скрыты.

Вот пример. Слева ситуация, когда «Главные новости» появились над основными результатами поиска. Первая ссылка отображалась только в этом блоке, но была исключена из основных результатов. Справа — дубль не был исключён, хотя и дублировался в блоке, потому что находился над главными новостями.

Салливан отметил, что они пересматривают этот момент, но пока что всё работает именно так.

Обсуждение этой темы началось после твита одного из пользователей. В нём он заявил, что якобы вбил в браузер заголовок статьи, которую опубликовал у себя на сайте, а в результатах поиска увидел множество страниц, дублирующих его статью.

Hey Google, I just searched for a headline that was published on my website and the ENTIRE FIRST PAGE after the news box was of websites stealing our content. The Verge didn’t show up until page 2.

This problem is getting worse. pic.twitter.com/Ox2AMYOt2Q

— Dieter Bohn (@backlon) January 18, 2022

Салливан ответил, что поиск по точному заголовку не показатель того, как большинство людей ищут информацию. Поиск по заголовку «обычно содержит много терминов, поэтому Google ищет страницы, которые содержат эти термины, — добавил он. — Это означает, что авторы с большей вероятностью найдут дубликаты, если будут искать свои статьи по заголовкам. При обычном поиске пользователи эти дубли вряд ли обнаружат».