Учитывается ли Crawl-Delay в robots.txt 25.02.2018Поисковая оптимизацияNo CommentsДобрый день. Яндекс анонсировал, что перестает учитывать Crawl-Delay. Подскажите, учитывает ли его гугл, и есть ли смысл прописывать его в robots.txt? ИсточникПохожие темы:Ошибка директив в файле robots.txt Заблокированные ресурсы в Search Console и ошибки в robots.txt Как заставить тупой Google видеть обновленный robots.txt Составление robots.txt нужна помощь и консультация crawl budget в 50-60 страниц в сутки для сайта на 8000 страниц: плохо, хорошо или норма