Google собирается обновить документацию по robots.txt и X-Robots

Гэри Иллис и Лизи Харви из Google заявили, что думают об обновлении документов Robots.txt и X-Robots-Tag в ближайшее время.

Гэри Иллис написал в Твиттере: «мы вместе с @LizziHarvey думаем о переделке/реструктуризации документов robotstxt и robotstags на http://developers.google.com/search. Если у вас есть претензии к этим документам, сейчас самое подходящее время, чтобы отправить отзыв».

Прямо сейчас можно дать обратную связь, если у пользователей есть вопросы или они хотят что-то добавить.

Недавно Google добавил новые примеры для директивы max-snippet с метатегом robots.