Jump to content

Recommended Posts

Всем добрый день.
Хостинг Ukraine применил ограничения к сайту из-за повышенной нагрузки на mysql сервер.
Рекомендуют оптимизировать Медленные запросы....

Также, при анализе нагрузки мы обнаружили, что гугл-боты лезут по разным адресам типа:

GET /svet/mfp/manufacturers,decodom-1,decodom,abhika,dialma-brown/stock_status,7,11,9/ HTTP/1.0" 200 186953 "-" "Mozilla/5.0 (Linux; Android 6.0.1; Nexus 5X Build/MMB29P) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/41.0.2272.96 Mobile Safari/537.36 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)

И везде на окончании stock_status.  Может ли это тормозить сайт и влиять на степень нагрузки на mysql сервер?

Прошу помощи в оптимизации Медленных запросов, снижении нагрузки на mysql сервер и ускорению загрузки сайта.

Share this post


Link to post
Share on other sites
41 минуту назад, MGrey сказал:

Всем добрый день.
Хостинг Ukraine применил ограничения к сайту из-за повышенной нагрузки на mysql сервер.
Рекомендуют оптимизировать Медленные запросы....

Также, при анализе нагрузки мы обнаружили, что гугл-боты лезут по разным адресам типа:

GET /svet/mfp/manufacturers,decodom-1,decodom,abhika,dialma-brown/stock_status,7,11,9/ HTTP/1.0" 200 186953 "-" "Mozilla/5.0 (Linux; Android 6.0.1; Nexus 5X Build/MMB29P) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/41.0.2272.96 Mobile Safari/537.36 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)

И везде на окончании stock_status.  Может ли это тормозить сайт и влиять на степень нагрузки на mysql сервер?

Прошу помощи в оптимизации Медленных запросов, снижении нагрузки на mysql сервер и ускорению загрузки сайта.

 

Просто добавьте в роботс

Disallow: /*mfp

 

Бот пытается пройти по всем вариантам комбинаций фильтра. Мало того что вы дубли страниц плодите, еще и сервер подгружаете.

 

Share this post


Link to post
Share on other sites
1 час назад, Yoda сказал:

 

Просто добавьте в роботс


Disallow: /*mfp

 

Бот пытается пройти по всем вариантам комбинаций фильтра. Мало того что вы дубли страниц плодите, еще и сервер подгружаете.

 

Отвечу за MGrey. Всегда было добавлено это у него:

Disallow: *?mfp=*
Disallow: *&mfp=*

 

несколько часов назад я добавила это:

Disalow: /*mfp
Disallow: /*?mfp=
Disallow: /*&mfp=

 

может какой-то одной строчки достаточно, не знаю. Но пока ситуация не изменилась. По логам бот гугла продолжается долбится.

Edited by Marianna

Share this post


Link to post
Share on other sites
5 часов назад, Marianna сказал:

Отвечу за MGrey. Всегда было добавлено это у него:

Disallow: *?mfp=*
Disallow: *&mfp=*

 

несколько часов назад я добавила это:

Disalow: /*mfp
Disallow: /*?mfp=
Disallow: /*&mfp=

 

 

может какой-то одной строчки достаточно, не знаю. Но пока ситуация не изменилась. По логам бот гугла продолжается долбится.

 

*mfp  - этого не было!

А если посмотреть сюда

 

/svet/mfp/manufacturers,decodom-

 

Что мы видим? mfp в урле а не как get параметр.
соответственно это все бесполезно:

 

Disallow: *?mfp=*
Disallow: *&mfp=*

 

Что касается нагрузки от гугла, чтобы он успокоился ему надо перечитать роботс, что делает он не сразу. И мало того принимает его во внимание после переобхода в течении суток.

И мало того, в новом гуглвебмастере нет инструмента изменения robots.txt  и надо идти в старый. А еще он просто может наплевать на роботс, и тогда такой трафик надо отбивать на уровне какого-то кода.

 

 

 

Share this post


Link to post
Share on other sites

Исполнитель найден.
Спасибо всем откликнувшимся.
Желаю успехов! )

Share this post


Link to post
Share on other sites

Здравствуйте! Есть аналогичная проблема с нагрузкой на сервер, ищу исполнителя который поможет определить проблему, проанализировать запросы и оптимизировать БД! 

Share this post


Link to post
Share on other sites

Join the conversation

You can post now and register later. If you have an account, sign in now to post with your account.

Guest
You are posting as a guest. If you have an account, please sign in.
Reply to this topic...

×   Pasted as rich text.   Paste as plain text instead

  Only 75 emoji are allowed.

×   Your link has been automatically embedded.   Display as a link instead

×   Your previous content has been restored.   Clear editor

×   You cannot paste images directly. Upload or insert images from URL.


  • Recently Browsing   0 members

    No registered users viewing this page.

×

Important Information

On our site, cookies are used and personal data is processed to improve the user interface. To find out what and what personal data we are processing, please go to the link. If you click "I agree," it means that you understand and accept all the conditions specified in this Privacy Notice.