Коллеги, всем привет! Ситуация следующая. Есть сайт http://домен.поддомен.me/. При сканировании в ScreamingFrog (SF), если вводить главную для сканирования, то SF парсит только незначительную часть сайта. Если добавить любую внутреннюю страницу сайта http://домен.поддомен.me/любая страница, то SF парсит все страницы кроме главной.