Чрезмерная нагрузка на сервер.

[Nuts89]

Доброго время суток.

Уважаемые знатоки, помогите решить проблему с Чрезмерная нагрузка на сервер. Сне раз в два дня хостеры выключают сайт, из за повышенной нагрузки. есть два файла в которых они сказали покопаться, но я ничего не понимаю, посмотрите кто нибудь ,может скажете в чем проблема.

error_log.txt

access_log.txt

[snastik]

В этих файлах - ничего не увидишь! Только анализ работы магазина.
А там может быть проблем... От ненастроенной базы до косяков в типах таблиц, кривых модулях и все что угодно!
Решаемо, дорого. Если сильно горит - стучите в личку.

[Nameless]

были на этом хостинге подобные скачки, решил баном ботов. так же была и оптимизация базы от команды snastik'a и все стало шустро работать.

[Nuts89]

были на этом хостинге подобные скачки, решил баном ботов. так же была и оптимизация базы от команды snastik'a и все стало шустро работать.

А бан ботов, это что , и как это сделать ?

[Nuts89]

как оказалось на мой сайт идут очень много запросов с США (US), которые и грузят процессор, как защитить себя от таких iP?

[MorVit]

У этих запросов есть какой-то определённый useragent?

[Nuts89]

У этих запросов есть какой-то определённый useragent?

Да нет вроде бы нету, пробовал блокировать через

Order Allow,Deny

Allow from all

Deny from env=bad_bot

 

все ровно лезут и лезут ((, не знаю как остановить поток.

[snastik]

А кто вам сказал что это плохие боты ? Это может быть Бинг к примеру.

Если не решите вопрос - пишите в личку, договоримся.

[MorVit]

Да нет вроде бы нету, пробовал блокировать через

Order Allow,Deny

Allow from all

Deny from env=bad_bot

 

все ровно лезут и лезут ((, не знаю как остановить поток.

Что такое env=bad_bot? Там нужно указывать IP бота.

 

А кто вам сказал что это плохие боты ? Это может быть Бинг к примеру.

Если не решите вопрос - пишите в личку, договоримся.

Если у месяц с Бинга десяток переходов, а он немеряно нагружает сайт - то его нужно забанить.

[Nuts89]

Всем доброго время суток!. понаблюдал я за поведением сайта, как оказалось, если отключить рекламу на Яндекс маркет сайт работает стабильно, как только включаю все сайт умирает. Может кто встречал такое ? как лечить ?

[Nuts89]

Всем доброго время суток!. понаблюдал я за поведением сайта, как оказалось, если отключить рекламу на Яндекс маркет сайт работает стабильно, как только включаю все сайт умирает. Может кто встречал такое ? как лечить ?

Никто не сталкивался ? что делать ?((

[MorVit]

как оказалось, если отключить рекламу на Яндекс маркет сайт работает стабильно, как только включаю все сайт умирает.

Что еще за реклама Яндекса? У вас стоит скрипт Директа?

[snastik]

Что еще за реклама Яндекса? У вас стоит скрипт Директа?

 

Нагрузка идет на сервер вот все и умирает! Какие скрипты директа ?

Даже если это VPS c одним-двумя ядрами, генерация 4-5 потоков одновременно может убивать в хлам mysql и отнимать все процессорное время.

[Nuts89]

Нагрузка идет на сервер вот все и умирает! Какие скрипты директа ?

Даже если это VPS c одним-двумя ядрами, генерация 4-5 потоков одновременно может убивать в хлам mysql и отнимать все процессорное время.

 

У меня месяц назад все работало идеально, сайт также был подключен к Яндекс маркету, сейчас как только подключаю рекламу, нагрузка на сервер бешенная, товары стали на пару сотен больше, около 1800 товаров, посещаемость по метрике не более 200 чел. с чего такая нагрузка не пойму((

[snastik]

У меня месяц назад все работало идеально, сайт также был подключен к Яндекс маркету, сейчас как только подключаю рекламу, нагрузка на сервер бешенная, товары стали на пару сотен больше, около 1800 товаров, посещаемость по метрике не более 200 чел. с чего такая нагрузка не пойму((

Только рентген и лоботомия!

Причин, я навскидку могу назвать порядка 20.

 

Варианты могут быть любые - от происков конкурентов, до неправильного robots.txt

[Nuts89]

Только рентген и лоботомия!

Причин, я навскидку могу назвать порядка 20.

 

Варианты могут быть любые - от происков конкурентов, до неправильного robots.txt

Вот сам робот файл, что тут не так ? ((

robots.txt

[snastik]

Вот сам робот файл, что тут не так ? ((

Да может все и так. А может и нет.

Ну никто вам не скажет ничего конкретного без детального анализа магазина.

Кода. Базы данных.

Логов посещений.

Поиска эксплойтов и шеллов.

 

Про роботс я написал - как одну из 100 возможных причин. Я не шучу....

Причин с тормозами может быть пару сотен легко.

[Nuts89]

Да может все и так. А может и нет.

Ну никто вам не скажет ничего конкретного без детального анализа магазина.

Кода. Базы данных.

Логов посещений.

Поиска эксплойтов и шеллов.

 

Про роботс я написал - как одну из 100 возможных причин. Я не шучу....

Причин с тормозами может быть пару сотен легко.

 

Я удалил из робота все, и поставил запрет на индексацию, сайт стал работать стабильно.

[ZeroHero]

Я удалил из робота все, и поставил запрет на индексацию, сайт стал работать стабильно.

Эквивалентно лечению пореза ампутацией конечности. Как ваш сайт-то теперь найдут? Или переходы из поиска - далеко не основной источник трафика для вас?

[Nuts89]

Эквивалентно лечению пореза ампутацией конечности. Как ваш сайт-то теперь найдут? Или переходы из поиска - далеко не основной источник трафика для вас?у

У меня почти 99% товаров уже в поиске, он не индексирует новые позиции, думаю как быть дальше 

[snastik]

У меня почти 99% товаров уже в поиске, он не индексирует новые позиции, думаю как быть дальше 

Я же вам писал в личку как быть дальше.

Что касается запрета на индексацию - это самое ужасное что вы могли сделать!

[ZeroHero]

У меня почти 99% товаров уже в поиске, он не индексирует новые позиции, думаю как быть дальше

Так если вы запретили индексировать сайт, поисковики со временем выкинут ваш сайт из индекса. Змінено 4 серпня 2016 користувачем ZeroHero