MaxD

36 минут назад, Yoda сказал:

Но вот модуль @usergio, дай бог ему здоровья, стоит на каждом втором магазине. И я думаю, что каждый владелец его модуля подтвердит, что в момент работы парсера, магазин ложится на слабых хостингах, или начинает существенно подтормаживать на нормальных.

Может у него там с архитектурой что-то не то, тем более его модуль чаще используют для импорта прайсов из файла, там естественно темпы вставки намного выше, чем при обходе внешних сайтов.

Из того, что я знаю - ни с ParseMX, ни с LiveImport (который тоже импортирует прайсы) магазины не ложились ни у кого ни на каких хостингах (кроме случаев, когда товаров становилось больше, чем магазин мог тянуть).

В любом случае, буду наблюдать за этим ньюансом у клиентов. И да, делать свой парсер - удовольствие такое себе )

4 минуты назад, Yoda сказал:

из-за перестроения индексов

Да, ты и тогда про перестроение индексов говорил. Нету в MySQL перестроения индексов при изменении данных, в индексе меняется/вставляется/удаляется только одно нужное значение.

Спорим мы вот о чем. Чтобы был смысл городить такой огород с промежуточным хранилищем (а городить там прилично), нужны веские реальные цифры вида "среднее время отклика сайта такое-то, запускаем парсинг - выростает вдвое". И чтобы еще было видно, что именно MySQL садится, и желательно на каких именно запросах.

На той же shopica остановка парсинга как-то не особо ее оживляла.

3 минуты назад, Yoda сказал:

К сожалению, вам лень читать мануал.

Ну уж мне хоть своего привычного пафоса не пиши. Для лавинообразного наслоения процессов апаче под "хоть каким-то трафиком от ботов" нужны задержки порядка 10+ секунд. Никаких дополнительных 100 мс к этому не приведут.

Что мешает перейти на InnoDB, если так страшат локи? Одни плюсы.

Yoda, ты лучше меня знаешь, что практически все запросы Opencart, которые стоит кешировать, используют таблицу product. Остальные и так быстрые. Ну ты сам в пункте 2.1 обьясняешь, как парадоксально.

10 минут назад, Yoda сказал:

А второй персонаж даже не понял зачем нужны какие то промежуточные таблицы, ведь и так же все вроде работает.

Немного оффтоп для этой темы, но видимо надо отозваться.

Yoda, у тебя нет никаких цифр, как и у меня. Если я ошибаюсь - поделись, будь добр.

А без цифр получается, что твои фантазии против моих. Мои фантазии такие:

Кеш MySQL с товарами не работает, его не рассматриваем. Запросы для записи нового товара в базу относительно быстрые (меньше 10 мс на все).

В худшем случае паралельные запросы задержатся на эти 10 мс. Абсолютно не критично, если один новый товар вставляется раз в несколько секунд.

Друзья, я уезжаю в отпуск до 10 июля. Не смогу отвечать в этот период.

В 20.04.2017 в 08:44, fantom сказал:

Изменяю категорию (описание например меняю) - выдается старая, из кеша

Изменение настроек магазина (категорий, инфо-страниц и т. д.) не отслеживается, после этого надо очищать кеш. Изменение/удаление товаров отслеживается, и соответствующие страницы кеша обновляются автоматически.

По поводу route=common/home - обновитесь до последней версии.

В 25.04.2017 в 12:37, fantom сказал:

Случись что (не дай бог, конечно) с автором или его сервером упадёт и магазин?

 Если что-то случится с сервером Lightning, дополнение просто отключится и магазин продолжит работать.

В 19.05.2017 в 09:18, krasnofff сказал:

На сайте стоит виджет яндекс доставки, который отображает, город покупателя, варианты, сроки и стоимость доставки.

Да, стукните в ПМ

Изменения в версии 2.26  

Друзья, вроде бы все порешали в личках, если будут еще вопросы - пишите.

Обновление 2.24 - много разных фиксов. Если у вас Lightning работает без проблем - обновляться нет необходимости.

Теперь Lightning можно скачать бесплатно с форума, и потом приобрести лицензию тоже через форум. Очень рад, что удалось договориться с руководством )

@AlexDW Спасибо огромное!

Что-то не отзывается администрация, придется создавать отдельные дополнения-лицензии.

Кто знает, какие опции надо выставить, чтобы человек мог покупать дополнение много раз? 

Есть огромная необходимость в возможности проводить платежи на произвольные суммы без привязки к какому-то дополнению через систему каталога. Мои дополнения изначально бесплатные, а потом уже из интерфейса дополнения пользователи докупают нужный им функционал, для одного домена может быть несколько покупок, в том числе на разные суммы.

В механике тут ничего сложного, покупателя посылаю на ссылку вида

https://opencartforum.com/profile/20214-maxd/pay/?sum=5000&subj=Лицензия+для+сайта+myyoyo.ru+на+парсинг+taobao.com+на+год

Покупателю показывается оформление заказа на Лицензия для сайта myyoyo.ru на парсинг taobao.com на год за 5000 руб.

После покупки через апи приходит извещение с суммой и строкой subj. 

Такой нехитрый функционал позволит реализовать самые витиеватые сценарии, и в перспективе может быть полезен и для оплаты работы фрилансеров через форум.

@Ardwark Сейчас по цифрам должно быть  (2034 + 1054) х 2 + 9201 = 15377 файлов в папке system/cache/lightning

Что-то не приходили извещения о новых сообщениях в теме.

@AntonBelkin Проблема с модулем "Автоматическая обработка прайс-листов" пока еще не решена. Можно отключать Lightning на время импорта.

 @Marryy Lightning делает все, в том числе правильно реагирует на заголовок If-Modified-Since . Но это все работает только для страниц с языком и валютой по умолчанию.

@ben475 Последнюю версию всегда можно скачать тут - http://lightning.devs.mx/download/

@Ardwark Посмотрите на цифры в статистике Lightning. Для каждой закешированной страницы (Page Cache) и AJAX-запроса используется 2 файла, для каждой query (DB Cache) - один файл. Цифры сходятся с количеством файлов?

Обновление 2.23: дальнейшие фиксы прегенерации, особенно на проблемных магазинах.

Да, полностью.

Что нового в этой версии 2.22 (Посмотреть все изменения)

Для решения проблемы с автоматической обработкой мне надо доступ к тестовой площадке, на которой это все установлено и можно воспроизвести проблему. Кто-то мне давал, но потом куда-то пропал.

uskirill, киньте доступ в ПМ. Страницы и так прегенерируются на фоне, но по сложной схеме, сейчас не имею времени ее расписать подробно.

Да, Lightning работает на всех версиях.

Обновление 2.21: исправление важной проблемы производительности, которая возникла в 2.20 )

Рекомендую всем обновиться.

IgorSK, отписал в пм.

Ardwark, удалось разобраться, почему упали рейтинги?

kibyury, отписал вам на почту. А сколько приблизительно записей в таблице oc_lightning_product_to_page?

slydeev, странное оно какое-то. Рекомендую попробовать другой модуль такого типа или оставить его только на некешируемых страницах (например, товаров).

Это вы уже писали. Дайте текст самой ошибки

Надіслано від мого MI 5, використовуючи Tapatalk