[Поддержка] Парсер-менеджер товаров с торговых площадок

[rpv7]

перестали парситься атрибуты
картинки и описания парсятся исправно

вот лог


17-05-2018 13:49:43: Ссылка на товар:https://market.yandex.ru/product/10962185
17-05-2018 13:49:43: Начало парсинга
17-05-2018 13:49:43: User agent: Mozilla/5.0 (Windows NT 10.0; Win64; x64; rv:60.0) Gecko/20100101 Firefox/60.0
17-05-2018 13:49:43: Cookie включены.
17-05-2018 13:49:43: Запрос: https://market.yandex.ru/product/10962185
17-05-2018 13:49:44: Удачный ответ от сервера
17-05-2018 13:49:44: Получено 20681 байт
17-05-2018 13:49:44: Название товара: Телефон Samsung SM-B312E
17-05-2018 13:49:44: Запрос: https://avatars.mds.yandex.net/get-mpic/397397/img_id7663178929661653691/9hq
17-05-2018 13:49:44: Удачный ответ от сервера
17-05-2018 13:49:44: Получено 23863 байт
17-05-2018 13:49:44: Запрос: https://avatars.mds.yandex.net/get-mpic/96484/img_id3638551588021969146/9hq
17-05-2018 13:49:44: Удачный ответ от сервера
17-05-2018 13:49:44: Получено 15144 байт
17-05-2018 13:49:44: Запрос: https://avatars.mds.yandex.net/get-mpic/364668/img_id6523056840352003377/9hq
17-05-2018 13:49:45: Удачный ответ от сервера
17-05-2018 13:49:45: Получено 68769 байт
17-05-2018 13:49:45: User agent: Mozilla/5.0 (Windows NT 10.0; Win64; x64; rv:60.0) Gecko/20100101 Firefox/60.0
17-05-2018 13:49:45: Cookie включены.
17-05-2018 13:49:45: Запрос: https://m.market.yandex.ru/product/10962185/spec?track=tabs
17-05-2018 13:49:45: Перенаправление -> https://m.market.yandex.ru/showcaptcha?retpath=https%3A//m.market.yandex.ru/product/10962185/spec%3Ftrack%3Dtabs_f7dbfc9a0c498d8365fb3a96db33a782&t=0/1526554185/fd9d0ebd2286e24867e478b12dbfa48e&s=9ca2cc47e1618861d18f1d32763535cb
17-05-2018 13:49:45: Запрос: https://m.market.yandex.ru/showcaptcha?retpath=https%3A//m.market.yandex.ru/product/10962185/spec%3Ftrack%3Dtabs_f7dbfc9a0c498d8365fb3a96db33a782&t=0/1526554185/fd9d0ebd2286e24867e478b12dbfa48e&s=9ca2cc47e1618861d18f1d32763535cb
17-05-2018 13:49:45: Удачный ответ от сервера
17-05-2018 13:49:45: Получено 5065 байт
17-05-2018 13:49:45: Конец парсинга

[igyan]

на странице атрибутов капча,

подкиньте куки из браузера после посещения товаров и характеристик,

пробуйте прокси

[dima2000]

Парсер работает на OсStore 2.3 ? Раньше вроде как были с этим проблемы.

Главным образом интересует донор Onliner.by

Змінено 18 травня 2018 користувачем dima2000

[igyan]

на 2,3 работает,

в архиве parser_manager_1.3_2.3 есть модуль для этой версии, установка в readme.txt

[DmitriyV]

у всех норм работает? не могу спарсить, последний раз на той неделе парсил

[igyan]

В 29.05.2018 в 13:24, DmitriyV сказал:

у всех норм работает? не могу спарсить, последний раз на той неделе парсил

что не работает?

скиньте ссылки на товары.

[DmitriyV]

все нормально

[AKIR]

Здравствуйте, парсит ли данное дополнение категорию "Кондиционеры"(https://market.yandex.ru/catalog/54976)?
Можно ли, чтобы "Подробные характеристики"товара добавлялись как атрибуты в ocStore?
Может ли быть конфликт данного дополнения с шаблоном "TechStore"
(https://opencartforum.com/files/file/4550-techstore-adaptivnyy-universalnyy-shablon/)?

[igyan]

должен парсить, характеристики попадут в атрибуты

насчет конфликта не скажу, на шаблон по идее не должно влиять

пробуйте на демо

user:demo

pass:demo

 

[AKIR]

я правильно понимаю, что парсить возможно только по 1 товару?

Нельзя запустить парсинг целой категории?

[dima2000]

1 минуту назад, AKIR сказал:

я правильно понимаю, что парсить возможно только по 1 товару?

Нельзя запустить парсинг целой категории?

 

неправильно понимаете, можно парсить несколько товаров за один проход.

[AKIR]

Настройки парсера как на фото к модулю не нашел в демо , они просто отключены в демо режиме , или их теперь нет?

[igyan]

в этом парсере можно только через поиск найти ссылки  на товары, если есть названия или они загружены через прайс  и запустить парсинг товаров, выделив все галочками

без нормального прокси с яндекса может и не спарсить сразу много товаров

чтобы парсить категорию надо дорабатывать парсер под ваши нужды

[AKIR]

Вы меня совсем запутали , покупая модуль
"Парсер-менеджер товаров с торговых площадок 1.5.6.3" (https://opencartforum.com/files/file/1686-parser-menedzher-tovarov-s-torgovyh-ploschadok/)
я получу парсер  как в демо (http://www.oc-parser.ru/opencart/ocStore23023/admin/index.php?route=extension/module/parsermanager&token=96ZPs0aecpExrE4tSIHe8OU0WhtinRzG)
без доп. настроек как на фото к модулю?

 

Меня в целом он устраивает, мне нужен только доп функционал как на фото к модулю, чтоб туда прокси забить и иногда менять регион при парсинге с Москвы на Воронеж , в фото это все есть , а в демо нет , в этом и заключается мое непонимание

[dima2000]

16 часов назад, AKIR сказал:

Вы меня совсем запутали , покупая модуль
"Парсер-менеджер товаров с торговых площадок 1.5.6.3" (https://opencartforum.com/files/file/1686-parser-menedzher-tovarov-s-torgovyh-ploschadok/)
я получу парсер  как в демо (http://www.oc-parser.ru/opencart/ocStore23023/admin/index.php?route=extension/module/parsermanager&token=96ZPs0aecpExrE4tSIHe8OU0WhtinRzG)
без доп. настроек как на фото к модулю?

 

Меня в целом он устраивает, мне нужен только доп функционал как на фото к модулю, чтоб туда прокси забить и иногда менять регион при парсинге с Москвы на Воронеж , в фото это все есть , а в демо нет , в этом и заключается мое непонимание

 

нажмите на демо на вот эту кнопочку и увидите настройки.

[AKIR]

38 минут назад, dima2000 сказал:

 

нажмите на демо на вот эту кнопочку и увидите настройки.

Мда, бывают в жизни потрясения ))

Тогда беру конечно!

[AKIR]

Купил модуль , жду ключа активации..

 

У меня при парсинге ошибка выскакивает:

 

" The file /home/httpd/vhosts/shop-mpkursus.ru/httpdocs/system/library/parsermanager/parser_yandex.php was encoded by the ionCube Encoder for PHP 5.3 and cannot run under PHP 7.1 or later. Please ask the provider of the script to provide a version encoded with the ionCube Encoder for PHP 7.1. in Unknown on line 0 "

 

Системные требования

Ioncube PHP>5.3

 

У меня PHP 7.1,  ionCube Loader 10.2

 

Где скачать модуль закодированный под PHP 7.1 или это проблема исчезнет при активации?

[AKIR]

Модуль оплатил , как получить ключ активации?

Разработчик не отвечает ни здесь, ни в ЛС.

[AKIR]

Если вдруг , мне все-таки  предоставят "ключ активации" к купленному мной модулю,

перекодируйте пожалуйста файлы из ..\parser_manager_1.3_2.3.zip\for all versions\system\library\parsermanager\

кодировщиком ionCube для PHP 7.1 , так как мой сайт не может работать с PHP ниже 7.0

Змінено 9 червня 2018 користувачем AKIR

[AKIR]

При поиске товара показывается капча, после ее ввода

пишет , что "страница не найдена"

в чём может быть причина? Может из-за https?

 

[igyan]

да, в адресе при переренаправлении надо поправить http на https

какая версия модуля?

 

[AKIR]

В 14.06.2018 в 21:30, igyan сказал:

да, в адресе при переренаправлении надо поправить http на https

какая версия модуля?

 

Версия для ocStore 2.3 (parser_manager_version_2.3)

с перекодированными файлами под PHP7.1 и Loader10.2

у меня сайт на протоколе https, что конкретно нужно сделать, чтобы заработала капча?

[AKIR]

Что конкретно нужно изменить в коде, чтобы заработала капча?

[AKIR]

Прокси работает при режиме ввода 1 сервера,

при загрузке файла proxy_list.txt вида :

 

i8o8uTY:[email protected]:2200
i8o8uTY:[email protected]:2200

выдает ошибку: "Найдено рабочих прокси - Нет файла: proxy_list.txt0",

хотя по отдельности прокси работают в парсере,

В чем причина?

Змінено 19 червня 2018 користувачем AKIR

[igyan]

18 часов назад, AKIR сказал:

Версия для ocStore 2.3 (parser_manager_version_2.3)

с перекодированными файлами под PHP7.1 и Loader10.2

у меня сайт на протоколе https, что конкретно нужно сделать, чтобы заработала капча?

замените в контроллере  и в шаблоне

HTTP_SERVER на

HTTPS_SERVER