[Поддержка] Парсер-менеджер товаров с торговых площадок

[dimetrio1986]

а когда ждать обновления с иправлением парсинга описания товара с Хотлайна?

[AKIR]

В 04.10.2018 в 10:40, igyan сказал:

что конкретно не парсится?

например:

https://market.yandex.ru/product--split-sistema-hyundai-h-alt1-12h-ui029/10772352/spec?track=tabs

а вот этот спарсился через ссылку, но с четвертого раза

https://market.yandex.ru/product--split-sistema-hyundai-h-alt3-18h/1727282148/spec?track=tabs

видео пример попытки парсинга во вложении

[AKIR]

ссылка на видео , а то здесь почему-то не работает

https://yadi.sk/i/0thrr9rJ5KstEA

[igyan]

https://market.yandex.ru/product--split-sistema-hyundai-h-alt1-12h-ui029/10772352/spec?track=tabs

эта ссылка на характеристики, поэтому парсятся не все данные

 

нужно вводить ссылки на описание, попробуйте водить ссылки без spec 

[sidoruk2000]

Спарсил 8 товаров нормально и далее парсит но артибуты и картинки не парсит, ставит только основную картинку. В чем может быть проблема?  Также не хочет парсить цену . Прошу помочь. 

Змінено 27 жовтня 2018 користувачем sidoruk2000

[igyan]

3 часа назад, sidoruk2000 сказал:

Спарсил 8 товаров нормально и далее парсит но артибуты и картинки не парсит, ставит только основную картинку. В чем может быть проблема?  Также не хочет парсить цену . Прошу помочь. 

 скиньте несколько ссылок на товары

[sidoruk2000]

18 часов назад, igyan сказал:

 скиньте несколько ссылок на товары

https://market.yandex.ru/product--kofemashina-de-longhi-ec-685/1724323392?show-uid=407143050335190664016001&nid=54942&glfilter=4894822%3A12104441%2C12104442%2C12104443&glfilter=7893318%3A152887%2C152900%2C9239481%2C152894%2C982191%2C4764182%2C7143549%2C152922%2C152870&pricefrom=25000&priceto=160000&context=search

 

https://market.yandex.ru/product--kofemashina-de-longhi-ecam-22-360-366/8537818?show-uid=407143050335190664016002&nid=54942&glfilter=4894822%3A12104441%2C12104442%2C12104443&glfilter=7893318%3A152887%2C152900%2C9239481%2C152894%2C982191%2C4764182%2C7143549%2C152922%2C152870&pricefrom=25000&priceto=160000&context=search

 

https://market.yandex.ru/product--kofemashina-de-longhi-ecam-22-110/6457784?show-uid=407143050335190664016003&nid=54942&glfilter=4894822%3A12104441%2C12104442%2C12104443&glfilter=7893318%3A152887%2C152900%2C9239481%2C152894%2C982191%2C4764182%2C7143549%2C152922%2C152870&pricefrom=25000&priceto=160000&context=search

Змінено 28 жовтня 2018 користувачем sidoruk2000

[igyan]

проверил, две первые ссылки, парсит все кроме цены, тут верстку надо смотреть

 

галки в настройках все стоят?

парсите в режиме замены,

 

посмотрите что в логах парсера

[sidoruk2000]

1 час назад, igyan сказал:

проверил, две первые ссылки, парсит все кроме цены, тут верстку надо смотреть

 

галки в настройках все стоят?

парсите в режиме замены,

 

посмотрите что в логах парсера

галки все стоят, стоит режим замены. В логах пишет что все ок но к сожалению не все, а именно не парсит атрибуты :(. Заметил что если примерно через час нажать один товар он обновляет нормально с атрибутами а следующий товар уже не парсит атрибуты. Верстка здесь не причем, т.к. смотрю в админке внесение данных. Доступы к админке моего сайта отправил вам в личных сообщениях

28-10-2018 14:52:10: Ссылка на товар:https://market.yandex.ru/product--kofemashina-bosch-tes-60321-rw/13179429?show-uid=406289852007994522416014&nid=54942&glfilter=4894822:12104441,12104442,12104443&glfilter=7893318:152900,152887,9239481,152894,982191,4764182,152870,152922,7143549&pricefrom=25000&priceto=160000&context=search
28-10-2018 14:52:10: Начало парсинга
28-10-2018 14:52:10: Запрос: https://market.yandex.ru/product--kofemashina-bosch-tes-60321-rw/13179429?show-uid=406289852007994522416014&nid=54942&glfilter=4894822:12104441,12104442,12104443&glfilter=7893318:152900,152887,9239481,152894,982191,4764182,152870,152922,7143549&pricefrom=25000&priceto=160000&context=search&nocookiesupport=yes
28-10-2018 14:52:10: Перенаправление -> https://market.yandex.ua/product--kofemashina-bosch-tes-60321-rw/13179429?slug=kofemashina-bosch-tes-60321-rw&productId=13179429&show-uid=406289852007994522416014&nid=54942&glfilter=4894822%3A12104441%2C12104442%2C12104443&glfilter=7893318%3A152900%2C152887%2C9239481%2C152894%2C982191%2C4764182%2C152870%2C152922%2C7143549&pricefrom=25000&priceto=160000&context=search&nocookiesupport=yes&lr=0&rtr=143
28-10-2018 14:52:10: Запрос: https://market.yandex.ua/product--kofemashina-bosch-tes-60321-rw/13179429?slug=kofemashina-bosch-tes-60321-rw&productId=13179429&show-uid=406289852007994522416014&nid=54942&glfilter=4894822%3A12104441%2C12104442%2C12104443&glfilter=7893318%3A152900%2C152887%2C9239481%2C152894%2C982191%2C4764182%2C152870%2C152922%2C7143549&pricefrom=25000&priceto=160000&context=search&nocookiesupport=yes&lr=0&rtr=143
28-10-2018 14:52:11: Удачный ответ от сервера
28-10-2018 14:52:11: Получено 20716 байт
28-10-2018 14:52:11: Название товара: Кофемашина Bosch TES 60321 RW
28-10-2018 14:52:11: Не найдена цена!
28-10-2018 14:52:11: Запрос: https://avatars.mds.yandex.net/get-mpic/175985/img_id1706452422563133376/9hq
28-10-2018 14:52:11: Удачный ответ от сервера
28-10-2018 14:52:11: Получено 91010 байт
28-10-2018 14:52:11: Запрос: https://avatars.mds.yandex.net/get-mpic/199079/img_id8671570696956870921/9hq
28-10-2018 14:52:11: Удачный ответ от сервера
28-10-2018 14:52:11: Получено 83557 байт
28-10-2018 14:52:11: Запрос: https://market.yandex.ru/product--kofemashina-bosch-tes-60321-rw/13179429/spec?track=tabs&pricefrom=25000&priceto=160000&lr=0&nocookiesupport=yes
28-10-2018 14:52:11: Перенаправление -> https://market.yandex.ru/showcaptcha?cc=1&retpath=https%3A//market.yandex.ru/product--kofemashina-bosch-tes-60321-rw/13179429/spec%3Ftrack%3Dtabs%26pricefrom%3D25000%26priceto%3D160000%26lr%3D0%26nocookiesupport%3Dyes_e926dcba6e13e8ead01f1e4380901523&t=0/1540731131/e119a1ae3f972d6fbcad776f6952330c&s=70f7188bb662e1f39996aa8b6a00bd3b
28-10-2018 14:52:11: Запрос: https://market.yandex.ru/showcaptcha?cc=1&retpath=https%3A//market.yandex.ru/product--kofemashina-bosch-tes-60321-rw/13179429/spec%3Ftrack%3Dtabs%26pricefrom%3D25000%26priceto%3D160000%26lr%3D0%26nocookiesupport%3Dyes_e926dcba6e13e8ead01f1e4380901523&t=0/1540731131/e119a1ae3f972d6fbcad776f6952330c&s=70f7188bb662e1f39996aa8b6a00bd3b
28-10-2018 14:52:11: Удачный ответ от сервера
28-10-2018 14:52:11: Получено 16343 байт
28-10-2018 14:52:11: Конец парсинга

 

Змінено 28 жовтня 2018 користувачем sidoruk2000

[igyan]

при парсинге атрибутов перенаправляет на капчу,

похоже у вас выключены куки

попробуйте походить по товарам и атрибутам в браузере, потом подкинуть куки из браузера

[sidoruk2000]

5 минут назад, igyan сказал:

потом подкинуть куки из браузера

прошу подробнее как и куда их подкинуть :). Не совсем понятно

[igyan]

в архиве с модулем есть инструкция

 

Как подкинуть куки из браузера.pdf

Как парсить Hotline.pdf

[sidoruk2000]

49 минут назад, igyan сказал:

при парсинге атрибутов перенаправляет на капчу,

похоже у вас выключены куки

попробуйте походить по товарам и атрибутам в браузере, потом подкинуть куки из браузера

результат тотже :(, не работает. Что дальше сделать?

[igyan]

обратите внимание чтобы не было &nocookiesupport=yes в адресе, чтобы куи были включены

попробуйте удалить куки и снова подкинуть,

выставите задержку между парсингом 3-5 сек.

пробовать парсить через прокси с доступом к яндексу

или парсить с локалки и переносить на рабочий домен

[sidoruk2000]

10 минут назад, igyan сказал:

или парсить с локалки и переносить на рабочий домен

как я могу парсить с локалки если модуль лицензируется на домен а не на локалку? 

 

 

[igyan]

если есть возможность парсить,  сделаю ключ на локалку

желательно установить туда ioncube

 

[sidoruk2000]

Сколько будет стоить чтобы вы  нормально спарсили список?  Что-то не настраивается нормально парсинг. Я понимаю что вашей вины здесь нет, поэтому прошу платно спарсить список, он уже весь набит в парсинге.

[igyan]

попробуйте парсить, у вас была выключена галочка "Включить куки"

[sidoruk2000]

попробовал, спарсено все кроме атрибутов.  В некоторых товарах атрибуты спарсены (писал выше). В остальных нет 

[igyan]

ваш сервер имеет украинский IP, ссылки на товары найдены в зоне RU,

вам надо перепарсить ссылки на товары, чтобы они были в зоне UA

потом парсить,

я установил фильтр по атрибутам, попробовал спарсить 10 товаров, вроде парсит

можете парсить без прокси,

если выкинет на капчу, подкидывайте куки или хотя бы удалите их

 

[sidoruk2000]

17 минут назад, igyan сказал:

ваш сервер имеет украинский IP, ссылки на товары найдены в зоне RU,

вам надо перепарсить ссылки на товары, чтобы они были в зоне UA

потом парсить,

я установил фильтр по атрибутам, попробовал спарсить 10 товаров, вроде парсит

можете парсить без прокси,

если выкинет на капчу, подкидывайте куки или хотя бы удалите их

 

Прикольконо получается. Я купил парсер, потратил в итоге уже более двух дней своего времени, в данный момент нужно потратить еще пол дня  для того чтобы  переделать все ссылки на товары, а потом не известно - будет работать или нет. И так можно будет до бесконечности. Спасибо конечно за частично работающий парсер. Итого подвожу итог - парсер работает, но парсит информацию частично , мне так и не удалось спарсить атрибуты в товары и цены на товары. Разарботчик помогает, консультирует но конечного результата так и нет. На данный момент у меня срываются сроки выполнения проекта, я вынужден нанять контент-менеджеров чтобы действительно доделали работу, поскольку далее проводить непонятные експеременты и терять еще несколько дней как минимум просто не выгодно.  На просьбу сделать платный парсинг просто спарсив товары разработчик так и не ответил. На данный момент я не доволен покупкой данного модуля поскольку свою задачу он выполняет только частично. 

Змінено 28 жовтня 2018 користувачем sidoruk2000

[igyan]

я не занимаюсь парсингом товаров, чем мог я вам помог

если не спеша, у меня получилось парсить на вашем сервере

в парсере есть проблемы, я не могу гарантировать его бесперебойную работу,

поэтому такая стоимость,

поэтому там 4 донора, чтобы можно было наполнить магазин хоть с какого-нибудь

 

 

[sotavip]

В 09.01.2018 в 23:55, igyan сказал:

 

подскажите где скачать обновление

[sotavip]

В 29.10.2018 в 00:39, igyan сказал:

после обновления слетела лицензия

 

[sotavip]

В 29.10.2018 в 00:39, igyan сказал:

после обновления слетела лицензия

вообще есть поддержка продукта?