На вопрос подписчика ответили вместе с Андреем Антохиным — SEO‑специалистом по международным проектам и автором телеграм‑канала Hello, Digital World. Свой вопрос можно задать в чате Журнала, и мы вместе с экспертом на него ответим.
Почему сайт не индексируют
Поисковики могут игнорировать сайт или страницу по разным причинам. Среди самых популярных:
-
сайт закрыт от индексации файлом robots.txt;
-
на страницах установлены теги noindex — например, если забыли убрать запрет после выпуска в прод;
-
индексация запрещена файлом .htaccess;
-
на страницу или сайт наложены санкции;
-
нет файла sitemap или он не добавлен в GSC — так краулерам сложнее найти и обратить внимание на ту или иную страницу.
Чтобы не проверять каждый элемент вручную, можно воспользоваться инструментом Анализ сайта: он подсветит технические ошибки, которые могли мешать индексации.
Если на странице или сайте были серьёзные проблемы, которые вы уже исправили, поисковик мог ещё не заметить этого. В этом случае можно вручную отправить страницы на повторную индексацию — так вы ускорите процесс.
Как проверить индексацию сайта в Google
Важным инструментом в работе с сайтом остаётся Google Search Console: в сервисе можно посмотреть, сколько страниц сайта проиндексировано, а сколько — нет, и узнать причины.
Например, GSC укажет на проблему, если страница заблокирована директивой в robots.txt, содержит тег noindex, на на неё наложены санкции и так далее.
Нужно работать над качеством материалов и внешними ссылками: сам факт отправки страницы на переобход не гарантирует попадания в индекс.
Сложно понять, почему сайт не индексируется, без деталей. Проблема одна — страниц нет в поиске, но причины могут быть разными: от забытой галочки в настройках до низкого качества контента. Если базовые настройки в порядке, то проблема, вероятнее всего, в авторитете (E‑E‑A‑T) или технических ошибках.
Ещё об индексации в Google
Индексация Google: анализ данных о 16 миллионах страниц
Правило 130 дней индексации: что это такое и как его использовать