Close

Яндекс робот обходит непонятные страницы и отдает 404

Заметил картину в Явебмастере "статистика обхода". Робот бегает по непонятным страницам, точнее непонятно где он их берет. Пример
site.ru/avto/kupit-novy/ – это правильный адрес, который есть на сайте с ответом 200 ОК. Ниже будут URL по которым он отдавал Было N / a стало 404 Not Found

site.ru/avto/kupit-novy
site.ru/avto/kupit-novy/попро
site.ru/avto/kupit-novy/asd%as32%
site.ru/avto/ – kupit – novy/
site.ru/avto/ – kupit – novy

Даже интересный факт того, что вместо kupit в URL есть prodat, что в априори не может быть даже ошибочным написанием.
site.ru/avto/prodat-novy

Где он их находит? Сталкивался кто с таким? Куда ковырнуть? Сайт WP

Источник

Добавить комментарий