Close

Ссылки с доров парсящих контент

Добрый день коллеги!

Подскажите вы боретесь/не боретесь с ссылками из доров, которые автоматическими парсят контент из проекта и вместе с ним тянут наши урлы посадочных как «Источник — …»?

Из явных проблем:

1. очень резкие «вспышки» по ссылочному профилю:

http://prntscr.com/ntvx2b

2. такие ссылки долго не живут и очень быстро уходят «небытие» с кодом ответа либо 502, либо 301 → 301 (цикличный редирект)

Около 99% доменов в таких ссылках — фриномы.

Какие методы борьбы с такими парсерами вы можете посоветовать? Источник

Добавить комментарий