Close

Сканирование сайта

добрый день. Есть сайт http://xn--80aaafba5bacmiicxrsi1czd2k.xn--p1ai/ – запускаю сканер сайта с ограничением сканирования служебных папок upload и bitrix.
Сайт на битриксе. На сайте всего 12 тыс. товаров и 4 тыс. страниц с категориями, брендами, новостями и статьями. Итого 16 тыс. страниц.
На выходе Xenu мне выдает 1,6 млн ссылок, включая картинки, js, css, различного рода внешние ссылки и страницы с get-параметрами (пагинация, фильтр).
Вопрос – что я делаю не так? как мне просканировать сайт и получать только html-страницы? Возможно ли в Xenu задать ограничение сканирования определенных гет-параметров?
Или может сканер посоветуете какой другой. Потому что другие сканеры совсем не видят ссылки на сайте и не могут его сканировать……..

Источник

Добавить комментарий