Боты на сайте

[miha99]

Добрый день. Прошу помощи может кто сталкивался на сервер постоянно идут не пользовательские запросы(вижу в метрике) меньше минуты. Запросы идут с одного и того же провайдера с разных ip адрес. Обращался к хостерам говорят кто то парсит ваш сайт. Ситуация довольно не приятная хотелось бы разобраться. Возможно есть способ решения данного вопроса? Может кто сталкивался с данной проблемой?

ps Хостинг заблокировал ip адреса которые я "увидел" но не помогает.

[drOC]

Можно воспользоваться специализированными сервисами, например, Cloudflare CDN. Для OpenCart версий 1.4 - 2.1 есть одноименный бесплатный модуль.

 

Не прибегая к внешним решениям, можно собрать базу "черных" адресов с помощью алгоритма IP + количество запросов за определенное время.

Если лимит запросов превышен, IP добавляется в список запрещенных хостов в .htaccess но стоит учесть, что при грамотном парсинге, сбор такой базы может занять больше времени, чем необходимо для сбора всех данных с сайта и завершения атаки.

 

[miha99]

на сайт идет огромное число ботов через прямые переходы, у всех общая сеть - LEASE-TO-FOTONTELECOM.
Боты не отказные, время на сайте у всех разное, страницы входа у всех одна - главная.
По идее нужно закрыть доступ к сайту по провайдеру?
Пытался  закрыть через   
.htaccess    командой RewriteCond %{HTTP_REFERER} .*\.fototel.ru  [NC]  и также блокировать ip адреса  
##USER IP BANNING
<Limit GET POST>
 order allow,deny
 deny from и идет сам айпи адрес ничего не помогает вижу. Заходы есть .