Jump to content
Search In
  • More options...
Find results that contain...
Find results in...

Vetlucky777

Users
  
  • Posts

    290
  • Joined

  • Last visited

Information

  • Gender
    Мужчина
  • City:
    Харків

Recent Profile Visitors

3,784 profile views

Vetlucky777's Achievements

Proficient

Proficient (10/14)

  • Dedicated Rare
  • First Post
  • Collaborator
  • Conversation Starter
  • Week One Done

Recent Badges

13

Reputation

  1. в логах парсера пишет вот что 2025-09-23 21:59:05| Парсинг : НЕГАТИВНЫЙ ответ | Код ответа = 18 | Текст ответа = transfer closed with 3403593 bytes remaining to read | так понимаю проблема с источником XML, уже сделали новую ссылку. в браузере открывает шустро быстрее чем намного чем было раньше но идет какой-то обрыв не пойму в чем дело. может кто сталкивался. в ручном режиме тоже не нарезает XML на отдельные ссылки
  2. сегодня возникла проблема на хостинге Украина стоит запуска каждую минуту, уже год работает все четко. время выполнения скрипта 0,2-0,5 сек. сегодня начали появлятся ошибки "Concurrent script execution blocked (pid=2961006, started 2025-09-23 15:18:02)" не может быть запущен скрипт так как запущен предыдущий и потом в истории пишет Час виконання: 600.24243 сек. может быть по 10-30 секунд потом опять нормально работает. не могу понять в чем дело. на сайте вообще ничего не менял, вчера такого не было
  3. делаю парсинг XML в CSV , есть артикулы около 1000 штук которые не нужно парсить. какие есть методы не парсить эти артикулы в файл? сперва делал в обработчике xml - Чего в товарах быть не должно, указывал артикулы и с регуляр выражениями в итоге блокирует часть артикулов которые нужны. хорошо блокирует в "Настройки допуска к обработке страницы" но там добавлять тысячу артикулов слишком долго
  4. такая ситуация, делаю парсинг в CSV ручной режим ( не крон). в предосмотре все верно, идет парсинг шкала вся заполняется, в логах написано Парсинг : УСПЕШНЫЙ ЗАПРОС | Код ответа [200] Ссылка | но когда скачиваю файл он полностью пустой
  5. у меня парсит не много данных, артикул, цены, наличие может из-за этого достаточно быстро. увеличил количество потоков сейчас справляется за 1,5 минуты.
  6. Сделал в simplepars_createcsv.twig так и так же в файле simplepars_cron.twig в модуле выбирал 20, 50, 100 потоков. разницы нет вообще, хоть в ручном режиме хоть по крону. даже на 30 сек нет улчушения возможно нужно еще что-то изменить?
  7. хостинг ukraine но понял что дело у меня было не в хостинге. у меня стоит парсинг в CSV каждые 10 минут. нарезка XML порядок выполнения 1 и потом парсинг в CSV порядок выполнения 2 получается что нарезка XML со временем двигается по времени и накладывается на парсинг в CSV а раз у нее порядок выполнения 1 то останавливает парсинг в CSV пока идет нарезка и потом парсинг в CSV идет с самого начала в уже в ранее добавленніе строки. в общем поменял сделал так - нарезка XML порядок выполнения 2, потом парсинг в CSV порядок выполнения 1 месяц работает проблем нет
Guest
×
  • Create New...

Important Information

On our site, cookies are used and personal data is processed to improve the user interface. To find out what and what personal data we are processing, please go to the link. If you click "I agree," it means that you understand and accept all the conditions specified in this Privacy Notice.