Заметил сегодня в Яндекс.Вебмастере новую категорию "Скорость обхода" в разделе "Индексирование"
Нужна ли эта настройка вообще? Кто что думает? Не такие уже крупные сайты имею, что бы при обходе ботов сайт колом становился.
У кого покрупнее, нагружает бот яндекса ваш сайт?
"Максимальная скорость обхода сайта считается исходя из оптимальной скорости обхода, рассчитываемой Яндексом. Индивидуальную скорость обхода сайта можно регулировать. "
"Изменяйте скорость обхода, только когда запросы робота замедляют ваш сервер. Установленные значения носят для робота рекомендательный характер."
———- Добавлено 16.02.2018 в 09:32 ———-
Больше информации здесь