Перейти к публикации
Поиск в
  • Дополнительно...
Искать результаты, содержащие...
Искать результаты в...

Vetlucky777

Пользователи
  
  • Публикаций

    290
  • Зарегистрирован

  • Посещение

Информация

  • Пол
    Мужчина
  • Город:
    Харків

Посетители профиля

3 782 просмотра профиля

Достижения Vetlucky777

Proficient

Proficient (10/14)

  • Dedicated Редкая
  • First Post
  • Collaborator
  • Conversation Starter
  • Week One Done

Последние медали

13

Репутация

  1. в логах парсера пишет вот что 2025-09-23 21:59:05| Парсинг : НЕГАТИВНЫЙ ответ | Код ответа = 18 | Текст ответа = transfer closed with 3403593 bytes remaining to read | так понимаю проблема с источником XML, уже сделали новую ссылку. в браузере открывает шустро быстрее чем намного чем было раньше но идет какой-то обрыв не пойму в чем дело. может кто сталкивался. в ручном режиме тоже не нарезает XML на отдельные ссылки
  2. сегодня возникла проблема на хостинге Украина стоит запуска каждую минуту, уже год работает все четко. время выполнения скрипта 0,2-0,5 сек. сегодня начали появлятся ошибки "Concurrent script execution blocked (pid=2961006, started 2025-09-23 15:18:02)" не может быть запущен скрипт так как запущен предыдущий и потом в истории пишет Час виконання: 600.24243 сек. может быть по 10-30 секунд потом опять нормально работает. не могу понять в чем дело. на сайте вообще ничего не менял, вчера такого не было
  3. делаю парсинг XML в CSV , есть артикулы около 1000 штук которые не нужно парсить. какие есть методы не парсить эти артикулы в файл? сперва делал в обработчике xml - Чего в товарах быть не должно, указывал артикулы и с регуляр выражениями в итоге блокирует часть артикулов которые нужны. хорошо блокирует в "Настройки допуска к обработке страницы" но там добавлять тысячу артикулов слишком долго
  4. такая ситуация, делаю парсинг в CSV ручной режим ( не крон). в предосмотре все верно, идет парсинг шкала вся заполняется, в логах написано Парсинг : УСПЕШНЫЙ ЗАПРОС | Код ответа [200] Ссылка | но когда скачиваю файл он полностью пустой
  5. у меня парсит не много данных, артикул, цены, наличие может из-за этого достаточно быстро. увеличил количество потоков сейчас справляется за 1,5 минуты.
  6. Сделал в simplepars_createcsv.twig так и так же в файле simplepars_cron.twig в модуле выбирал 20, 50, 100 потоков. разницы нет вообще, хоть в ручном режиме хоть по крону. даже на 30 сек нет улчушения возможно нужно еще что-то изменить?
  7. хостинг ukraine но понял что дело у меня было не в хостинге. у меня стоит парсинг в CSV каждые 10 минут. нарезка XML порядок выполнения 1 и потом парсинг в CSV порядок выполнения 2 получается что нарезка XML со временем двигается по времени и накладывается на парсинг в CSV а раз у нее порядок выполнения 1 то останавливает парсинг в CSV пока идет нарезка и потом парсинг в CSV идет с самого начала в уже в ранее добавленніе строки. в общем поменял сделал так - нарезка XML порядок выполнения 2, потом парсинг в CSV порядок выполнения 1 месяц работает проблем нет
Гость
×
  • Создать...

Важная информация

На нашем сайте используются файлы cookie и происходит обработка некоторых персональных данных пользователей, чтобы улучшить пользовательский интерфейс. Чтобы узнать для чего и какие персональные данные мы обрабатываем перейдите по ссылке. Если Вы нажмете «Я даю согласие», это означает, что Вы понимаете и принимаете все условия, указанные в этом Уведомлении о Конфиденциальности.