Если вы обнаружите, что определенная строка пользовательского агента используется на вашем сайте парсерами, и ее не используют настоящие браузеры или «добропорядочные» программы-обходчики, то вы можете тоже добавить такой User-Agent в свой черный список. Далее подпускаем к сайту только белых ботов (их список тут) в файрволле (если кто забыл – делается …
مشاهده بیشتر »
تاریخ روایی(روایت تاریخ)