Close

Помогите с роботс

Всем привет. Очень сильно запутался, к примеру есть “сайт.ру”, у него есть блог, а в блоге статьи (Я к примеру, тут могут быть категория с товарами и пр), в итоге имеет такой вид: Сайт.ру/блог/статья. Надо закрыть от индексации все, что после названия любой статьи (Статей к примеру 200 на сайте), т.к. робот пытается что-то найти дальше этого адреса и выдает ошибки. Если сделать в роботсе такое правило: Disallow:Сайт.ру/блог/*/* оно же закроет все, что после последнего слеша, верно? Или может не только после слеша. Также может есть какой другой вариант?

Источник

Добавить комментарий