[Поддержка] Парсер-менеджер товаров с торговых площадок

[sonicking]

при попытке загрузить прокси лист вылетает ошибка - "SyntaxError: missing ; before statement"

наверх

в закладки

[igyan]

 

при попытке загрузить прокси лист вылетает ошибка - "SyntaxError: missing ; before statement"

наверх

в закладки

 

имя файла proxy_list.txt ?

[sonicking]

да, имя такое, файл скачан с вашего сайта

[igyan]

 

да, имя такое, файл скачан с вашего сайта

 

наверх

в закладки

 

Обновите модуль, не получится положите вручную в папку download

[sonicking]

установлена последняя версия

придётся кидать в ручную :о(

[texvek]

Можно ли в вашем модуле сделать так: выбрать txt файл со списком ссылок для парсинга.

Т.е. добавить группу товаров одним махом.

типа такого:

http://catalog.onliner.by/stels/navi630disc2014/
http://catalog.onliner.by/stels/navi6102014/
http://catalog.onliner.by/stels/challenger2014/
http://catalog.onliner.by/stels/navi5702014/
http://catalog.onliner.by/stels/730disc275/
http://catalog.onliner.by/stels/mustang2014/

[igyan]

 

Можно ли в вашем модуле сделать так: выбрать txt файл со списком ссылок для парсинга.

Т.е. добавить группу товаров одним махом.

типа такого:

http://catalog.onliner.by/stels/navi630disc2014/
http://catalog.onliner.by/stels/navi6102014/
http://catalog.onliner.by/stels/challenger2014/
http://catalog.onliner.by/stels/navi5702014/
http://catalog.onliner.by/stels/730disc275/
http://catalog.onliner.by/stels/mustang2014/

В этом модуле такой возможности нет, где был парсер, который добавляет страницу товаров с онлайнера, если интересно пишите в личку

[sonicking]

что то странное сегодня творится с парсером

залил свежий товар

задаю поиск - не находит

захожу на маркет, ввожу то же самое в поиск - находит

[igyan]

В парсере поиск не совсем как не маркете, это имитация поиска, некоторые товары могут и не находится, если есть дополнительные символы(кавычки скобки и тд). Попробуйте ввести в поиск что-нибудь простое Samsung Galaxy 5, посмотрите лог

[sonicking]

да ввожу простое, к примеру PIONEER SE-M531

парсер не находит, яндекс находит, а бывает и так, что раза с третьего и парсер находит

[igyan]

Если парсите через прокси возможно, глюки с самими прокси

[sonicking]

да, через прокси

понятно

[sonicking]

что то что с прокси, что на прямую, с яндекса на любой товар выдаёт "Ошибка парсинга. Не найдены элементы!"

[igyan]

почистите куки

При проверке прокси есть рабочие?

Что в логе?

[sonicking]

почистил

есть

 

22-05-2014 19:58:09: Ссылка на товар:http://market.yandex.ru/model.xml?modelid=8367344
22-05-2014 19:58:09: Начало парсинга
22-05-2014 19:58:09: Парсинг через прокси: 91.209.127.230:80
22-05-2014 19:58:09: Запрос: http://market.yandex.ru/model.xml?modelid=8367344
22-05-2014 19:58:13: Перенаправление -> http://market.yandex.ru/showcaptcha?cc=1&retpath=http%3A//market.yandex.ru/model.xml%3Fmodelid%3D8367344_7915cbc96b7d96b7d20e86f7187344d2&t=0/1400788689/12f3a81338b7b4e384a0e258f8ba2a78&s=213091101d44f377de584d77e073e9ce
22-05-2014 19:58:13: Запрос: http://market.yandex.ru/showcaptcha?cc=1&retpath=http%3A//market.yandex.ru/model.xml%3Fmodelid%3D8367344_7915cbc96b7d96b7d20e86f7187344d2&t=0/1400788689/12f3a81338b7b4e384a0e258f8ba2a78&s=213091101d44f377de584d77e073e9ce
22-05-2014 19:58:14: Удачный ответ от сервера
22-05-2014 19:58:14: Получено 9856 байт
22-05-2014 19:58:14: Конец парсинга

[igyan]

куки включены?

яндекс перенаправляет на капчу,

при парсинге проверяются 10 прокси серверов, чтобы не завис парсинг

попробуйте удалять 10 превых прокси   и снова парсить

завтра буду смотреть дальше

[sonicking]

привет.

куки выключены (всё работало без них)

яндекс перенаправляет на капчу,

это вопрос или вывод? :о)

если вопрос - то не было капчи

если вывод - то получается IP сайта в бане?

сейчас удалю, попробую

[sonicking]

удалил первые 15 прокси - результат тот же

вообще отключил прокси. получил - Notice: Undefined variable: manufacturer_id in /home/sonic105/domains/sonic39.ru/public_html/admin/controller/module/parsermanager.php on line 1267

[igyan]

С  прокси перенаправляет на капчу, это видно из лога. Определяет, что отключены куки, попробуйте подкинуть куки с браузера и сделать парсинг.

Без прокси товар парсится, но не найден производитель, пока отключите создание производителя,

Я в обновлении подправлю

[sonicking]

куки подкинул, производителя отключил

без прокси вылетает просто в белую страницу :о(

попробовал других доноров - то же белые странички...

[igyan]

Сделайте как здесь https://opencartforum.com/topic/32580-%D0%BF%D0%B0%D1%80%D1%81%D0%B5%D1%80-%D0%BC%D0%B5%D0%BD%D0%B5%D0%B4%D0%B6%D0%B5%D1%80-%D1%82%D0%BE%D0%B2%D0%B0%D1%80%D0%BE%D0%B2-%D1%81-%D1%82%D0%BE%D1%80%D0%B3%D0%BE%D0%B2%D1%8B%D1%85-%D0%BF%D0%BB%D0%BE%D1%89%D0%B0%D0%B4%D0%BE%D0%BA/page-2#entry274488

скорре всего таже ошибка при замене, при обновлении я исправил а призамене пропустил, подправлю в ближайшее время

[andrsin]

А работает на локалке?
пробую, не получается...

23-05-2014 12:22:37: Ссылка на товар:http://market.yandex.ru/model.xml?text=SHO-ME%20STR-545&srnum=82&modelid=9289911&hid=90462
23-05-2014 12:22:37: Начало парсинга
23-05-2014 12:22:37: Cookie включены.
23-05-2014 12:22:37: Парсинг через прокси: 212.34.230.148:80
23-05-2014 12:22:37: Запрос: http://market.yandex.ru/model.xml?text=SHO-ME%20STR-545&srnum=82&modelid=9289911&hid=90462
23-05-2014 12:22:52: Неудачный ответ от сервера: 0, попробуйте позже
23-05-2014 12:22:52: Конец парсинга

 

При поиске выдает ошибку:
Notice: Undefined offset: 1 in C:\xampp\htdocs\ttttsaaa\admin\controller\module\parsermanager.php on line 2016

[igyan]

должен работать

на локалке через прокси можно не парсить

для начала сделайте проверку прокси

[sonicking]

Сделайте как здесь https://opencartforum.com/topic/32580-%D0%BF%D0%B0%D1%80%D1%81%D0%B5%D1%80-%D0%BC%D0%B5%D0%BD%D0%B5%D0%B4%D0%B6%D0%B5%D1%80-%D1%82%D0%BE%D0%B2%D0%B0%D1%80%D0%BE%D0%B2-%D1%81-%D1%82%D0%BE%D1%80%D0%B3%D0%BE%D0%B2%D1%8B%D1%85-%D0%BF%D0%BB%D0%BE%D1%89%D0%B0%D0%B4%D0%BE%D0%BA/page-2#entry274488

скорре всего таже ошибка при замене, при обновлении я исправил а призамене пропустил, подправлю в ближайшее время

сделал

только строка не 1029 - она пустая, 1028

эффект тот же

[Гість]

На ocStore-1.5.5.1.2 работает? Есть смысл покупать? если постоянные проблемы с прокси.