Апдейт❗Проверки в Яндекс Search API частично возобновлены. Запустить их можно и вручную, и автоматически в период с 20:00 по 05:59 по московскому времени. Для проверок, запущенных между 20:00 и 23:59, данные будут доступны в проектах не ранее полуночи. Как задать расписание проверок →

Чтобы получать данные в другое время, используйте Яндекс SERP, «живую» выдачу Яндекса. Как добавить Яндекс SERP в проект →

Googlebot — единственный поисковый робот, который может сканировать Twitter

Остальных роботов Twitter заблокировал в robots.txt.

Западные коллеги заметили, что Twitter обновил файл robots.txt и заблокировал всех поисковых ботов, кроме Googlebot. Теперь Яндекс и остальные поисковые системы, судя по всему, не смогут показывать ссылки в выдаче.

В наших новостях всегда есть немного больше, чем у других. Подпишитесь на канал в Телеграм и читайте интересные новости первыми.

Подписаться

Теги: