Парсинг отделений Новой почты.

[mario512]

Доброго дня. Пытаюсь спарсить список отделений, используя метод getWarehouses. Список городов получил без проблем. Несколько дней страдал. Написал в support. Получил ответ:
 

Скрытый текст

Доброго ранку! Були внесені такі  зміни в роботу функціоналу обмеження на виклик запиту getWarehouses - 2 запити в секунду, але не частіше ніж кожні 0,5 секунди. Ми рекомендуємо 1 запит в 1 секунду. Якщо не дотримувалися обмежень, буде завантажуватись менша кількість відділень   Дякуємо за звернення! З повагою,  команда технічної підтримки Нової Пошти

 Примерно 10 000 городов, 1 город = 1 сек = около 3 часов? Пытался использовать cURL multi. Отправлял по 10 запросов за раз. Из 10 запросов, примерно 2 или 3 ответа. Потом улетел на 15 минут в бан. Какие есть еще варианты? Хранить список городов, а отделения запрашивать через api? 
P.S. про ограничения на запросы в документации нет информации)))

[bogdan281989]

В 18.01.2025 в 11:43, mario512 сказав:

Доброго дня. Пытаюсь спарсить список отделений, используя метод getWarehouses. Список городов получил без проблем. Несколько дней страдал. Написал в support. Получил ответ:
 

  Показати вміст

Доброго ранку! Були внесені такі  зміни в роботу функціоналу обмеження на виклик запиту getWarehouses - 2 запити в секунду, але не частіше ніж кожні 0,5 секунди. Ми рекомендуємо 1 запит в 1 секунду. Якщо не дотримувалися обмежень, буде завантажуватись менша кількість відділень   Дякуємо за звернення! З повагою,  команда технічної підтримки Нової Пошти

 Примерно 10 000 городов, 1 город = 1 сек = около 3 часов? Пытался использовать cURL multi. Отправлял по 10 запросов за раз. Из 10 запросов, примерно 2 или 3 ответа. Потом улетел на 15 минут в бан. Какие есть еще варианты? Хранить список городов, а отделения запрашивать через api? 
P.S. про ограничения на запросы в документации нет информации)))

Є свій маленький модуль з відділеннями для опенкарт, використовував готову лібу з github, ось цю https://github.com/lis-dev/nova-poshta-api-2/tree/master

Проблем немає, тільки що перевірив завантажилось 37к відділень (це мабуть з поштоматами), міст - 10430 штук.

Спробуйте її, можливо вона вирішить ваше питання, вона доволі проста

[mario512]

18.01.2025 в 11:55, bogdan281989 сказал:

Є свій маленький модуль з відділеннями для опенкарт, використовував готову лібу з github, ось цю https://github.com/lis-dev/nova-poshta-api-2/tree/master

Проблем немає, тільки що перевірив завантажилось 37к відділень (це мабуть з поштоматами), міст - 10430 штук.

Спробуйте її, можливо вона вирішить ваше питання, вона доволі проста

Дякую

[COBECTb11]

18.01.2025 в 11:43, mario512 сказал:

Доброго дня. Пытаюсь спарсить список отделений, используя метод getWarehouses. Список городов получил без проблем. Несколько дней страдал. Написал в support. Получил ответ:
 

  Показать содержимое

Доброго ранку! Були внесені такі  зміни в роботу функціоналу обмеження на виклик запиту getWarehouses - 2 запити в секунду, але не частіше ніж кожні 0,5 секунди. Ми рекомендуємо 1 запит в 1 секунду. Якщо не дотримувалися обмежень, буде завантажуватись менша кількість відділень   Дякуємо за звернення! З повагою,  команда технічної підтримки Нової Пошти

 Примерно 10 000 городов, 1 город = 1 сек = около 3 часов? Пытался использовать cURL multi. Отправлял по 10 запросов за раз. Из 10 запросов, примерно 2 или 3 ответа. Потом улетел на 15 минут в бан. Какие есть еще варианты? Хранить список городов, а отделения запрашивать через api? 
P.S. про ограничения на запросы в документации нет информации)))

Нашо страдать і створювати шось інакше якщо є готове рішення у @Prorab337 яке відмінно працює?

[mario512]

18.01.2025 в 14:47, COBECTb11 сказал:

Нашо страдать і створювати шось інакше якщо є готове рішення у @Prorab337 яке відмінно працює?

Я выбрал путь самурая. У меня перелопаченный oprncart. Модуль, который я себе писал, раньше работал. Сейчас потребовалось запустить новый проект, вот и столкнулся с проблемой. А точнее с ограничениями на интервал между запросами, которые ввели. 

 

[Aktozdes]

Є ще такий безкоштовний модуль, виводить міста та відділення

https://www.opencart.com/index.php?route=marketplace/extension/info&member_token=1711b818159546e7c94f71991918af38&extension_id=46787&filter_category_id=4&page=2

[mario512]

19.01.2025 в 19:12, Aktozdes сказал:

Є ще такий безкоштовний модуль, виводить міста та відділення

https://www.opencart.com/index.php?route=marketplace/extension/info&member_token=1711b818159546e7c94f71991918af38&extension_id=46787&filter_category_id=4&page=2

Дякую. Проблема решена. Был не корректно настроен LAMP. Отделения успешно получил. Правда минут 20 времени уходит)))

[Prorab337]

В 19.01.2025 в 21:48, mario512 сказав:

Дякую. Проблема решена. Был не корректно настроен LAMP. Отделения успешно получил. Правда минут 20 времени уходит)))

Дивно, має бути менше 30 секунд якщо все нормально налаштувати

[mario512]

20.01.2025 в 15:18, Prorab337 сказал:

Дивно, має бути менше 30 секунд якщо все нормально налаштувати

Уже разобрался. Намудрил с конфирурацией сервера. Спасибо!