Нагрузка на сервер после установки HTTPS

[ActiveSync]

Здравствуйте. Хостинг кинул данные IP адресов обращений:

 

Скрытый текст

Статистика с 2017-02-21 по 2017-02-24
 [[ -- Requests by url  -- ]]
 -- [[ mebel-24.com.ua ]] --
      2809  /index.php?route=record/treecomments/captcham  
      2628  /index.php?route=product/product/captcha  
      1682  /                                         
      1185  /robots.txt                               
       520  /admin/index.php?route=common/filemanager/directory&token=a59931bdbf490b7ff0b853d4fd0c2e71  
       484  /shkafu-kupe                              
       431  /admin/index.php?route=common/filemanager/files&token=a59931bdbf490b7ff0b853d4fd0c2e71  
       355  /admin/index.php?route=common/filemanager/image&token=a59931bdbf490b7ff0b853d4fd0c2e71&image=data%2Fmebel%2FMebel-Blonski%2FModulnaya-mebel-Paris%2FCveta-mebeli-Paris.jpg  
       344  /admin/index.php?route=common/filemanager/image&token=a59931bdbf490b7ff0b853d4fd0c2e71&image=data%2Fmebel%2FMebel-Blonski%2FModulnaya-mebel-Paris%2FPodsvetka-i-dovodchiki-Paris.jpg  
       329  /admin/index.php?route=common/filemanager/image&token=a59931bdbf490b7ff0b853d4fd0c2e71&image=data%2Fmebel%2FMebel-Blonski%2FModulnaya-mebel-Paris%2FParis_W-680x680.jpg  
       329  /admin/index.php?route=common/filemanager/image&token=a59931bdbf490b7ff0b853d4fd0c2e71&image=data%2Fmebel%2FMebel-Blonski%2FModulnaya-mebel-Paris%2FParis-D-eskiz.jpg                       [[ -- Requests by IP   -- ]]
 -- [[ mebel-24.com.ua ]] --
     34283   178.54.241.185  [UA]
      7104     130.193.51.7  [RU] spider-130-193-51-7.yandex.com
      6880     66.249.76.52  [US] crawl-66-249-76-52.googlebot.com
      5561     66.249.76.54  [US] crawl-66-249-76-54.googlebot.com
      5504     5.255.253.80  [RU] spider-5-255-253-80.yandex.com
      4095     141.8.184.15  [RU] spider-141-8-184-15.yandex.com
      3236   68.180.230.170  [US] b110340.yse.yahoo.net
      2585     66.249.76.53  [US] crawl-66-249-76-53.googlebot.com
      1768     66.249.76.55  [US] crawl-66-249-76-55.googlebot.com
      1639    66.249.75.141  [US] crawl-66-249-75-141.googlebot.com
      1384    130.193.37.18  [RU] spider-130-193-37-18.yandex.com
 [[ -- Requests per day -- ]]
 -- [[ mebel-24.com.ua ]] --
  2017-02-21       37570
  2017-02-22       29705
  2017-02-23       73218
  2017-02-24       18398

 

Что вообще происходит?)

что надо заблокировать / что сделать, какие изменения в файл robots.txt, а что в htacces?

Грозятся отключением..

[snastik]

К вам пришли поисковики и начали вас пожирать.

Надо действовать комплексно.

 

[konorws]

ActiveSync,  можете сказать что у вас за хостинг???
Чтото мне подсказывет что проблема не в https

[snastik]

1 минуту назад, konorws сказал:

ActiveSync,  можете сказать что у вас за хостинг???
Чтото мне подсказывет что проблема не в https

 

Именно в нем.
Для ботов - это новый сайт, который надо активно просканировать.
 

[konorws]

1 минуту назад, snastik сказал:

 

Именно в нем.
Для ботов - это новый сайт, который надо активно просканировать.
 

согласен но проблема в (цензура) хостинге а https это просто фактор который показал на то что при увеличении нагрузки хостинг начинает падать

[snastik]

5 минут назад, konorws сказал:

согласен но проблема в (цензура) хостинге а https это просто фактор который показал на то что при увеличении нагрузки хостинг начинает падать

 

Нет не в хостинге - у меня на ukraine на шареде 5000 хостов в день с глубиной 10 - без проблем крутиться без превышения нагрузки. И поиск на сВинксе заводится.

 

[konorws]

snastik, Да Хостинг Украина очень хорошо держится у самого там сайты весят нет никаких проблем. 
Но у @ActiveSync не Украина а http://hvosting.ua/  что это за кантора я вообще не понимаю и насчет их возможностей сомневаюсь

[snastik]

8 минут назад, konorws сказал:

snastik, Да Хостинг Украина очень хорошо держится у самого там сайты весят нет никаких проблем. 
Но у @ActiveSync не Украина а http://hvosting.ua/  что это за кантора я вообще не понимаю и насчет их возможностей сомневаюсь

 

Да на самом деле - пофиг. Что ukraine что hvnosting.

Ukraine нормально блочит аккаунты. Особенно если SELECT * FROM oc_product order by RAND

[konorws]

Ок наверное вы правы. 
Но какие тогда варинаты решения? Проводить оптимизацию ? или брать возможно лучшие тарифы?

[snastik]

4 минуты назад, konorws сказал:

Ок наверное вы правы. 
Но какие тогда варинаты решения? Проводить оптимизацию ? или брать возможно лучшие тарифы?

 

[ActiveSync]

возможно неправильно оптимизировали сайт под https, где-то не указаны редиректы, по этому что http что https - это уже двойная нагрузка

[snastik]

9 минут назад, ActiveSync сказал:

возможно неправильно оптимизировали сайт под https, где-то не указаны редиректы, по этому что http что https - это уже двойная нагрузка

Так на время переклейки зеркал, необходимо чтобы сайт был доступен по обеим протоколам!

[ActiveSync]

snastik, проверял все редиректы, на сайт можно зайти хоть с http://www и https://www , так и без них. Как понять, когда зеркала переклеятся? а то я уже в config.php поменял уже значения, используя этот FAQ:

 

Скрытый текст

http://forum.opencart.pro/topic/2675-руководство-для-перехода-на-ssl-https/

 

[snastik]

1 час назад, ActiveSync сказал:

snastik, проверял все редиректы, на сайт можно зайти хоть с http://www и https://www , так и без них. Как понять, когда зеркала переклеятся? а то я уже в config.php поменял уже значения, используя этот FAQ:

 

  Скрыть контент

http://forum.opencart.pro/topic/2675-руководство-для-перехода-на-ssl-https/

 

 

Добавляете в вебмастер яндекса отдельно зеркало https, заходите в http и жмакаете  - добавить https зеркало. Скорее всего вас Яндекс пошлет, так как у вас в роботсе будет старое зеркало host: http://mypopcorn.com
Его надо поменять на https и такой роботс должен светиться по обеим зеркалам.
Запасаетесь попкормом и ждете пока у зеркала http станет не больше 5% в индексе, а все они перетекут на https.  И после этого делаете принудительный редирект всего контента на https-зеркало.

Для гугла данные манипуляции надо повтороить также (добавить https-зеркало, как новый домен). Но гугл ведет себя по другому, он увидев дубль вашего магазина на https - автоматически переклеит его в выдаче на защищенную версию.

 

[ActiveSync]

Поднимаю тему еще раз, мы определили, что запросы в админке с ип 178.., создают такую нагрузку, но как исправить это? Админку кешировать?)) 

[snastik]

8 часов назад, ActiveSync сказал:

Поднимаю тему еще раз, мы определили, что запросы в админке с ип 178.., создают такую нагрузку, но как исправить это? Админку кешировать?)) 

Закройте админку по ip либо при помощи htpass

[ActiveSync]

и заблокировать людей, которые работают в этой админке и создают те самые запросы) @snastik

[ActiveSync]

хорошо, ещё раз перефразирую. Идет нагрузка на хостинг, около 14к запросов, эти все запросы идут от хозяев сайта (работают с админкой, правки = запрос).

Итог: это хостинг хреновый, который дает максимум 8% нагрузку на ядро и CPU time около 80-90, либо же трудяги работают в админке, создавая эту самую нагрузку?

Змінено 22 січня 2018 користувачем ActiveSync

[ActiveSync]

Кто-то может дать внятный ответ, как человек может накликать 

>>> 17223    178.54.145.63  [UA] 

запросов в админке?)

 

Если причина в вирусах на компьютере - их почистили давно.

Работают 2 ноутбука.

Змінено 22 січня 2018 користувачем ActiveSync

[chukcha]

4 часа назад, ActiveSync сказал:

14к запросов,

http - запросов?

Элементарно

стоит какой-нибудь модуль для поддерживания "постоянного лога" и каждую секунду  стучится

Вот вам как минимум 3600 в час
а если еще и два окна открыть...
Или какой-нибудь модуль, который аяксом проверяет наличие новых заказов
 

[snastik]

2 минуты назад, chukcha сказал:

http - запросов?

Элементарно

стоит какой-нибудь модуль для поддерживания "постоянного лога" и каждую секунду  стучится

Вот вам как минимум 3600 в час
а если еще и два окна открыть...
Или какой-нибудь модуль, который аяксом проверяет наличие новых заказов
 

Да там все проще.

Это статистика хостера. Хостер взял грепнул access log  и показал сколько общих запросов к вебсерверу идет на /admin

Если там допустим 200-300 товаров в списке в товарах и их кто-то постоянно редактирует - так может быть и больше.

[ActiveSync]

@chukcha это поправимо, или менять хостера, который не привязывается к CPU load(%) и CPU time (ms)?

 

db_log медленных запросов мог бы на это влиять? / количество генерации ошибок в errore? 

Змінено 22 січня 2018 користувачем ActiveSync

[chukcha]

2 минуты назад, ActiveSync сказал:

db_log медленных запросов

нет, но на хрена он нужен включенный на админку
Это может быть какой-нибудь ligthing
Да причин может быть сколько угодно..
Надо смотреть по месту

В админке по умолчанию, нет таймерных запросов

Тут другой вопрос
Вы например поставили  100 товаров выводить в списке
А у вас "улучшенная" админка, которая показывает еще и доп картинки

Или например 100 заказов показывать
У в заказе в среднем по 5 картинок
А все статика ходит через апач

Только по месту можно сделать вывод.


 

[ActiveSync]

@chukcha картинка основного товара, мигающая картинка, картинки в дополнении, и когда выбираешь картинку, какую залить в товар, это все создают доп.запросы?

странно то, что раньше таких нагрузок не было, и все началось после перевода с http на https, но проиндексировав полностью сайт, нагрузка должна была упасть, но тут что-то не сходится)

[chukcha]

Еще раз.. я про админку..а вы мне про фронт