Обновление спецификации файла robots.txt от Google

Поисковая система Google обновила справочный документ «Спецификации файла robots.txt», в котором описывается, как обрабатываются соответствующие файлы.

Новейшая версия официального руководства содержит больше примеров и объяснений различных конфигураций файлов robots.txt.

Фрагмент обновленного руководства продемонстрирован ниже.

Уже известно, что обновлением справочного документа «Спецификации файла robots.txt» занимались сотрудники поисковой системы Google Гэри Илш и Лиззи Харви.

Произошедшее обновление заметил один из специалистов отрасли.

На данный момент, обновленный справочный документ уже переведен на русский язык.

Перевод датируется 15 апреля. В англоязычную версию обновления были внесены 7 апреля текущего года.

Стоит напомнить, что в последний раз справочный документ «Спецификации файла robots.txt» существенно обновлялся в 2019 году.

Источник: www.internet-technologies.ru