Перейти до вмісту
Пошук в
  • Детальніше...
Шукати результати, які ...
Шукати результати в ...

[Поддержка] Парсер-менеджер товаров с торговых площадок


igyan

Recommended Posts

 

при попытке загрузить прокси лист вылетает ошибка - "SyntaxError: missing ; before statement"

наверх
в закладки

 

имя файла proxy_list.txt ?

Надіслати
Поділитися на інших сайтах

 

да, имя такое, файл скачан с вашего сайта

 

наверх
в закладки

 

Обновите модуль, не получится положите вручную в папку download

Надіслати
Поділитися на інших сайтах

Можно ли в вашем модуле сделать так: выбрать txt файл со списком ссылок для парсинга.

Т.е. добавить группу товаров одним махом.

типа такого:

http://catalog.onliner.by/stels/navi630disc2014/
http://catalog.onliner.by/stels/navi6102014/
http://catalog.onliner.by/stels/challenger2014/
http://catalog.onliner.by/stels/navi5702014/
http://catalog.onliner.by/stels/730disc275/
http://catalog.onliner.by/stels/mustang2014/
Надіслати
Поділитися на інших сайтах


 

Можно ли в вашем модуле сделать так: выбрать txt файл со списком ссылок для парсинга.

Т.е. добавить группу товаров одним махом.

типа такого:

http://catalog.onliner.by/stels/navi630disc2014/
http://catalog.onliner.by/stels/navi6102014/
http://catalog.onliner.by/stels/challenger2014/
http://catalog.onliner.by/stels/navi5702014/
http://catalog.onliner.by/stels/730disc275/
http://catalog.onliner.by/stels/mustang2014/

В этом модуле такой возможности нет, где был парсер, который добавляет страницу товаров с онлайнера, если интересно пишите в личку

Надіслати
Поділитися на інших сайтах

В парсере поиск не совсем как не маркете, это имитация поиска, некоторые товары могут и не находится, если есть дополнительные символы(кавычки скобки и тд). Попробуйте ввести в поиск что-нибудь простое Samsung Galaxy 5, посмотрите лог

Надіслати
Поділитися на інших сайтах

почистил

есть

 

22-05-2014 19:58:09: Ссылка на товар:http://market.yandex.ru/model.xml?modelid=8367344
22-05-2014 19:58:09: Начало парсинга
22-05-2014 19:58:09: Парсинг через прокси: 91.209.127.230:80
22-05-2014 19:58:09: Запрос: http://market.yandex.ru/model.xml?modelid=8367344
22-05-2014 19:58:13: Перенаправление -> http://market.yandex.ru/showcaptcha?cc=1&retpath=http%3A//market.yandex.ru/model.xml%3Fmodelid%3D8367344_7915cbc96b7d96b7d20e86f7187344d2&t=0/1400788689/12f3a81338b7b4e384a0e258f8ba2a78&s=213091101d44f377de584d77e073e9ce
22-05-2014 19:58:13: Запрос: http://market.yandex.ru/showcaptcha?cc=1&retpath=http%3A//market.yandex.ru/model.xml%3Fmodelid%3D8367344_7915cbc96b7d96b7d20e86f7187344d2&t=0/1400788689/12f3a81338b7b4e384a0e258f8ba2a78&s=213091101d44f377de584d77e073e9ce
22-05-2014 19:58:14: Удачный ответ от сервера
22-05-2014 19:58:14: Получено 9856 байт
22-05-2014 19:58:14: Конец парсинга

Надіслати
Поділитися на інших сайтах


куки включены?

яндекс перенаправляет на капчу,

при парсинге проверяются 10 прокси серверов, чтобы не завис парсинг

попробуйте удалять 10 превых прокси   и снова парсить

завтра буду смотреть дальше

Надіслати
Поділитися на інших сайтах

привет.

куки выключены (всё работало без них)

яндекс перенаправляет на капчу,

это вопрос или вывод? :о)

если вопрос - то не было капчи

если вывод - то получается IP сайта в бане?

сейчас удалю, попробую

Надіслати
Поділитися на інших сайтах


удалил первые 15 прокси - результат тот же

вообще отключил прокси. получил - Notice: Undefined variable: manufacturer_id in /home/sonic105/domains/sonic39.ru/public_html/admin/controller/module/parsermanager.php on line 1267

Надіслати
Поділитися на інших сайтах


С  прокси перенаправляет на капчу, это видно из лога. Определяет, что отключены куки, попробуйте подкинуть куки с браузера и сделать парсинг.

Без прокси товар парсится, но не найден производитель, пока отключите создание производителя,

Я в обновлении подправлю

Надіслати
Поділитися на інших сайтах

Сделайте как здесь https://opencartforum.com/topic/32580-%D0%BF%D0%B0%D1%80%D1%81%D0%B5%D1%80-%D0%BC%D0%B5%D0%BD%D0%B5%D0%B4%D0%B6%D0%B5%D1%80-%D1%82%D0%BE%D0%B2%D0%B0%D1%80%D0%BE%D0%B2-%D1%81-%D1%82%D0%BE%D1%80%D0%B3%D0%BE%D0%B2%D1%8B%D1%85-%D0%BF%D0%BB%D0%BE%D1%89%D0%B0%D0%B4%D0%BE%D0%BA/page-2#entry274488

скорре всего таже ошибка при замене, при обновлении я исправил а призамене пропустил, подправлю в ближайшее время

Надіслати
Поділитися на інших сайтах

А работает на локалке?
пробую, не получается...

23-05-2014 12:22:37: Ссылка на товар:http://market.yandex.ru/model.xml?text=SHO-ME%20STR-545&srnum=82&modelid=9289911&hid=90462
23-05-2014 12:22:37: Начало парсинга
23-05-2014 12:22:37: Cookie включены.
23-05-2014 12:22:37: Парсинг через прокси: 212.34.230.148:80
23-05-2014 12:22:37: Запрос: http://market.yandex.ru/model.xml?text=SHO-ME%20STR-545&srnum=82&modelid=9289911&hid=90462
23-05-2014 12:22:52: Неудачный ответ от сервера: 0, попробуйте позже
23-05-2014 12:22:52: Конец парсинга

 

При поиске выдает ошибку:
Notice: Undefined offset: 1 in C:\xampp\htdocs\ttttsaaa\admin\controller\module\parsermanager.php on line 2016

Надіслати
Поділитися на інших сайтах


должен работать

на локалке через прокси можно не парсить

для начала сделайте проверку прокси

Надіслати
Поділитися на інших сайтах

Сделайте как здесь https://opencartforum.com/topic/32580-%D0%BF%D0%B0%D1%80%D1%81%D0%B5%D1%80-%D0%BC%D0%B5%D0%BD%D0%B5%D0%B4%D0%B6%D0%B5%D1%80-%D1%82%D0%BE%D0%B2%D0%B0%D1%80%D0%BE%D0%B2-%D1%81-%D1%82%D0%BE%D1%80%D0%B3%D0%BE%D0%B2%D1%8B%D1%85-%D0%BF%D0%BB%D0%BE%D1%89%D0%B0%D0%B4%D0%BE%D0%BA/page-2#entry274488

скорре всего таже ошибка при замене, при обновлении я исправил а призамене пропустил, подправлю в ближайшее время

сделал

только строка не 1029 - она пустая, 1028

эффект тот же

Надіслати
Поділитися на інших сайтах


Створіть аккаунт або увійдіть для коментування

Ви повинні бути користувачем, щоб залишити коментар

Створити обліковий запис

Зареєструйтеся для отримання облікового запису. Це просто!

Зареєструвати аккаунт

Вхід

Уже зареєстровані? Увійдіть тут.

Вхід зараз
×
×
  • Створити...

Important Information

На нашому сайті використовуються файли cookie і відбувається обробка деяких персональних даних користувачів, щоб поліпшити користувальницький інтерфейс. Щоб дізнатися для чого і які персональні дані ми обробляємо перейдіть за посиланням . Якщо Ви натиснете «Я даю згоду», це означає, що Ви розумієте і приймаєте всі умови, зазначені в цьому Повідомленні про конфіденційність.