[Поддержка] Парсер-менеджер товаров с торговых площадок

[DesigNight]

Укажите количество отображаемых страниц, например 10, должно помочь

заработало, спасибо.

[greywolf]

Как  подправить ссылки на картинки с Onliner.by, был бы благодарен.

Оригинальные картинки без ватермарка лежат в каталоге original

Если честно, я вообще не не знаю как данный модуль берет адрес картинки с онлайнера, но я знаю точно, что картинки большого размера с ватермарком находятся по пути catalog/device/MAIN/, а такая же картинка, но без ватермарка лежит по адресу catalog/device/ORIGINAL/. Если в данном модуле прописать второй путь, то картинки будут скачиваться без ватермарка. Для справки, на онлайнере простая иерархия хранения картинок товара:

 

 

[1] http://content2.onliner.by/catalog/device/icon/51be96de3bce2c35ee5775a6fcfc261f.jpg // тут хранится иконка товара, размер 113px × 68px

[2] http://content2.onliner.by/catalog/device/100/311e3edd908697055dbbbbe8c2457383.jpg //та же картинка уменьшенного размера, размер 100px × 100px

[3] http://content2.onliner.by/catalog/device/main/311e3edd908697055dbbbbe8c2457383.jpg // та же картинка увеличенного размера но с ватермарк, размер 700px × 420px

[4] http://content2.onliner.by/catalog/device/original/311e3edd908697055dbbbbe8c2457383.jpg //та же картинка, но оригинального размера и без ватермарк, 3 000px × 1 798px

Идея заключается в следующем: Модуль качает картинку из [3] (судя по размерам), а хотелось бы что бы качал из [4]

Я писал парсер с онлайнера, правда на Delphi, в php ни в зуб ногой... я делал просто: находил адрес картинки из [2], и просто менял "100" на "original", получил [4] и скачивал уже большую, красивую картинку

Будет ли вноситься в модуль данная модификация?

[igyan]

Можно сделать, правда там изображения по  в среднем по 1М, будут долго парситься

[linuz]

Здравствуйте уважаемый автор. Могу-ли я с помощью вашего модуля добавить фото, описание и атрибуты с сайта моего поставщика. Сам товар уже загружен в моем магазине.

[greywolf]

Можно сделать, правда там изображения по  в среднем по 1М, будут долго парситься

Ну хоть как-то, а то тогда парсер картинок с onliner вообще теряет актуальность. Я обычно паршу товар с onliner, а картинки с yandex market, но на onliner больше ассортимент товаров. Готов доплатить вам, если реализуете возможность парсить оригинальные картинки с onliner

[igyan]

Здравствуйте уважаемый автор. Могу-ли я с помощью вашего модуля добавить фото, описание и атрибуты с сайта моего поставщика. Сам товар уже загружен в моем магазине.

Здравствуйте, парсить можно только с доноров, которые в парсере.

[igyan]

Ну хоть как-то, а то тогда парсер картинок с onliner вообще теряет актуальность. Я обычно паршу товар с onliner, а картинки с yandex market, но на onliner больше ассортимент товаров. Готов доплатить вам, если реализуете возможность парсить оригинальные картинки с onliner

пока сделайте изменения в файле admin/controller/module/parsermanager.php

 добавьте после строки, примерно 1806

foreach($image_parse as $key => $image){

вот это

$image = preg_replace('/\/main\//U','/original/', $image);

[linuz]

Здравствуйте, парсить можно только с доноров, которые в парсере.

Для работы с прайс листами у меня стоит модуль от вашего коллеги usergio. Не будет-ли конфликтов при загрузке, при использовании обоих модулей.

[igyan]

Конфликтов быть не должно

[greywolf]

 

пока сделайте изменения в файле admin/controller/module/parsermanager.php

 добавьте после строки, примерно 1806

foreach($image_parse as $key => $image){

вот это

$image = preg_replace('/\/main\//U','/original/', $image);

 

Спасибо! Все работает, парсит быстро (может у меня конешн товар такой, где картинки небольшие). Правда иногда у разных товаров одна и та же картинка парсится

[sonicking]

приветствую автора

 

можно ли сделать выбор папки для изображений или в виде выпадающего списка (как список категорий) или хотя бы с памятью (в плане, чтоб запоминалась последняя папка и список был раскрыт на ней)

в идеале было бы что то типа "привязать папку к категории" :о)

[vitalfut]

MaxyStore 
Версия 1.5.5.1
Поставил настроил 

но не ищет товар говорит не нашел товара 

[igyan]

MaxyStore 

Версия 1.5.5.1

Поставил настроил 

но не ищет товар говорит не нашел товара 

С какого сайта парсите, что в логе ?

[vitalfut]

с яндекс маркета 
Самое прикольное когда я сайта перенес на хостинг он при поиске увидел товар. А уже второй раз все постоянно не находит товар. 
 

[vitalfut]

Лог пишет 

17-10-2014 16:12:18: Начало парсинга

17-10-2014 16:12:18: Cookie включены.

17-10-2014 16:12:18: Парсинг через прокси: 

17-10-2014 16:12:18: Запрос: http://market.yandex.ru/search.xml?text=http%3A%2F%2Fmarket.yandex.ru%2Fmodel.xml%3Fmodelid%3D8348954&nocookiesupport=yes

17-10-2014 16:12:18: Много перенаправлений...

17-10-2014 16:12:18: Cookie включены.

17-10-2014 16:12:18: Парсинг через прокси: 

17-10-2014 16:12:18: Запрос: http://market.yandex.ru/search.xml?text=http%3A%2F%2Fmarket.yandex.ru%2Fmodel.xml%3Fmodelid%3D8348954

17-10-2014 16:12:18: Много перенаправлений...

17-10-2014 16:12:18: Конец парсинга

[vitalfut]

7-10-2014 16:13:10: Начало парсинга

17-10-2014 16:13:10: Cookie включены.

17-10-2014 16:13:10: Запрос: http://market.yandex.ru/search.xml?text=17-10-2014+16%3A12%3A18%3A+%D0%9D%D0%B0%D1%87%D0%B0%D0%BB%D0%BE+%D0%BF%D0%B0%D1%80%D1%81%D0%B8%D0%BD%D0%B3%D0%B0+17-10-2014+16%3A12%3A18%3A+Cookie+%D0%B2%D0%BA%D0%BB%D1%8E%D1%87%D0%B5%D0%BD%D1%8B.+17-10-2014+16%3A12%3A18%3A+%D0%9F%D0%B0%D1%80%D1%81%D0%B8%D0%BD%D0%B3+%D1%87%D0%B5%D1%80%D0%B5%D0%B7+%D0%BF%D1%80%D0%BE%D0%BA%D1%81%D0%B8%3A++17-10-2014+16%3A12%3A18%3A+%D0%97%D0%B0%D0%BF%D1%80%D0%BE%D1%81%3A+http%3A%2F%2Fmarket.yandex.ru%2Fsearch.xml%3Ftext%3Dhttp%3A%2F%2Fmarket.yandex.ru%2Fmodel.xml%3Fmodelid%3D8348954&nocookiesupport=yes

17-10-2014 16:13:10: Много перенаправлений...

17-10-2014 16:13:10: Cookie включены.

17-10-2014 16:13:10: Запрос: http://market.yandex.ru/search.xml?text=17-10-2014+16%3A12%3A18%3A+%D0%9D%D0%B0%D1%87%D0%B0%D0%BB%D0%BE+%D0%BF%D0%B0%D1%80%D1%81%D0%B8%D0%BD%D0%B3%D0%B0+17-10-2014+16%3A12%3A18%3A+Cookie+%D0%B2%D0%BA%D0%BB%D1%8E%D1%87%D0%B5%D0%BD%D1%8B.+17-10-2014+16%3A12%3A18%3A+%D0%9F%D0%B0%D1%80%D1%81%D0%B8%D0%BD%D0%B3+%D1%87%D0%B5%D1%80%D0%B5%D0%B7+%D0%BF%D1%80%D0%BE%D0%BA%D1%81%D0%B8%3A++17-10-2014+16%3A12%3A18%3A+%D0%97%D0%B0%D0%BF%D1%80%D0%BE%D1%81%3A+http%3A%2F%2Fmarket.yandex.ru%2Fsearch.xml%3Ftext%3Dhttp%3A%2F%2Fmarket.yandex.ru%2Fmodel.xml%3Fmodelid%3D8348954

17-10-2014 16:13:10: Много перенаправлений...

17-10-2014 16:13:11: Конец парсинга

И все неходит товара

[igyan]

Попробуйте скачать прокси лист и парсить через прокси, и сгенерируйте занова куки

[vitalfut]

Проверил Осторе проблем нет работает как часы а вот с максисторе работать не хочет 

[vitalfut]

И вопрос а где скачать эти прокси листы ?
Простите за наверно тупой вопрос 

[vitalfut]

Итересно сделал парсер одного товара на осторе нашел товар
а уже второй выкидывает ошибку 
Как и с Максисторе тоже нашел один товар  и все больше не ищет
такое ощущение что при первом парсере товара он что то меняет и становится в стопарь

[vitalfut]

Спасибо заработало

[vitalfut]

Жесть :))) и снова спарсил один элимент и снова не работает 
есть вообще какая нибудь стабильность что оно работало? Помогите 

[igyan]

1 Скачайте прокси лист

2 Подкиньте парсеру

3 Нажмите проверить

4 Походите по ссылкам на маркете с описаними и характеристиками, подкиньте куки из браузера в парсер

Пробуйте парсить

[vitalfut]

Автору респект Он помогает с тех. поддержкой 
Спасибо работает

[greywolf]

Заметил небольшой баг, если в названии товара есть слова на русском,то не находит товар. Например при парсинге с onliner вводишь Apacer AH354 Black 16 Гб не находит товар, а вводишь Apacer AH354 Black , находит, хотя на сайте onliner написано Apacer AH354 Black 16 Гб