Проверки в Яндекс Search API проходят в ограниченном режиме в ночное время. Планируйте запуск проверок с 00:00 до 04:59 по московскому времени и обязательно проверьте, что в Настройках аккаунта выставлен верный часовой пояс. Как установить расписание проверок →

Чтобы получать данные в другое время, используйте Яндекс SERP, «живую» выдачу Яндекса. Как добавить Яндекс SERP в проект →

Google планирует найти альтернативы robots.txt

И приглашает к обсуждению представителей разных специализаций.

Google изучает альтернативные способы управления сканированием и индексированием помимо протокола robots.txt. «Мы считаем, что настало время веб‑сообществам и сообществам искусственного интеллекта изучить дополнительные машиночитаемые средства, которые помогут вебмастерам контролировать, как поисковые системы сканируют их контент», — пишет Google в блоге.

Google заявил, что приглашает к разработке нового протокола издателей, гражданское общество, учёных и представителей других областей со всего мира. Про сроки говорить пока рано, поскольку всё на уровне обсуждений. Присоединиться может любой — надо лишь зарегистрироваться на сайте и подождать, когда Google пришлёт больше информации.

В наших новостях всегда есть немного больше, чем у других. Подпишитесь на канал в Телеграм и читайте интересные новости первыми.

Подписаться

Теги: