[Поддержка] Парсер-менеджер товаров с торговых площадок

[igyan]

Отзывы с яндекса?

[gid]

Отзывы с яндекса?

да

[domdude]

купил парсер, который вы посоветовали...такая же ерунда как и с простым парсером яндекс маркета...Те же проблемы с добавлением характеристик и описания....куки добавлял, пробовал прокси, такая же ерунда...как быть?

[domdude]

короче не работает, зря потраченное время, деньги и нервы....Работал первые 10 минут, обрадовался, но потом опять ошибки парсинга. Пробовал с куками и без, с прокси и без. Если нет решения, то верните деньги плиз.

[panasys]

У меня мод работает прекрасно с яндексом

[igyan]

короче не работает, зря потраченное время, деньги и нервы....Работал первые 10 минут, обрадовался, но потом опять ошибки парсинга. Пробовал с куками и без, с прокси и без. Если нет решения, то верните деньги плиз.

пишите на почту

[igyan]

Отзывы пока не собираюсь делать,

[igyan]

У меня мод работает прекрасно с яндексом

Спасибо, хоть кто-то отписался. Яндекс постоянно, что-то меняет и пытается защитить свои данные, поэтому и проблемы с парсером.

Раньше можно было парсить без кук, теперь куки обязательно надо включать.  Куки лучше экспоритировать из браузера, там более полный набор. Единственное, если есть авторизации в денежных системах, на киких-то важных сайтах и доступ к серверу и  кукам есть не только у вас, то лучше экспоритировать куки только с сайта яндекса и без авторизации в кошельке. А вообще лучше сделать левую учетную запись и сделать куки под ней.

Если парсер перестал работать, надо попробовать занова подкинуть куки,

если опять не заработал, то удаляете куки, экспоритируете новые и пробуете парсить с прокси

Если опять не заработал, то это уже проблема, я пытаюсь, что-нибудь придумать еще.

[17animator]

Здравствуйте. При парсинге товаров добавляется строка название Acirc в SEO URL: и название картинок, пример названия картинки Nokia_Acirc_Lumia_1520_0.jpg и SEO URL: nokia_acirc_lumia_1520.html  Как убрать строчку acirc ??? И можно ли вместо пробелов сделать - ?

[igyan]

Здравствуйте. При парсинге товаров добавляется строка название Acirc в SEO URL: и название картинок, пример названия картинки Nokia_Acirc_Lumia_1520_0.jpg и SEO URL: nokia_acirc_lumia_1520.html  Как убрать строчку acirc ??? И можно ли вместо пробелов сделать - ?

Добавьте в файле admin/contrpller/module/parsermanager.php строки 60-70

в массив

"'acirc'i",

[17animator]

 

Добавьте в файле admin/contrpller/module/parsermanager.php строки 60-70

в массив

"'acirc'i",

Спасибо. Теперь получается nokia__lumia_1520.html А как сделать nokia-lumia-1520.html ???

[igyan]

Спасибо. Теперь получается nokia__lumia_1520.html А как сделать nokia-lumia-1520.html ???

Замените в 39 и 41 строке

                    $data = substr(preg_replace('/[^A-Za-z0-9_]/', '-',$this->clearshar(htmlentities($this->rus2translit($string)))), 0, 40);

                    $data = preg_replace('/[^A-Za-z0-9_]/', '-',$this->clearshar(htmlentities($this->rus2translit($string))));

 

[17animator]

Замените в 39 и 41 строке

                    $data = substr(preg_replace('/[^A-Za-z0-9_]/', '-',$this->clearshar(htmlentities($this->rus2translit($string)))), 0, 40);

                    $data = preg_replace('/[^A-Za-z0-9_]/', '-',$this->clearshar(htmlentities($this->rus2translit($string))));

 

Спасибо. Получилось nokia--lumia-1520.html убрать лишний символ nokia--lumia-1520.html  можно ?

[igyan]

Добавьте  перед

return $data;

 

вот это

$data = preg_replace('/-{2,}/', '-', $data);

 

Парсите через прокси с куками?

[17animator]

Добавьте  перед

return $data;

 

вот это

$data = preg_replace('/-{2,}/', '-', $data);

 

Парсите через прокси с куками?

Спасибо. Теперь нормально.

Да с куками, ip новый получаю когда банят, на денвере балуюсь.

[sonicking]

три часа сегодня возился с 10 товарами

 

и с прокси и без

и с куками и без

и в разных комбинациях

 

выдаёт или

 

Notice: Undefined index: product_attribute in D:\OpenCart Project\sonic39.ru\admin\controller\module\parsermanager.php on line 1080Warning: Cannot modify header information - headers already sent by (output started at D:\OpenCart Project\sonic39.ru\admin\index.php:86) in D:\OpenCart Project\sonic39.ru\vqmod\vqcache\vq2-system_engine_controller.php on line 28Warning: Cannot modify header information - headers already sent by (output started at D:\OpenCart Project\sonic39.ru\admin\index.php:86) in D:\OpenCart Project\sonic39.ru\vqmod\vqcache\vq2-system_engine_controller.php on line 29

 

или

 

Ошибка парсинга. Не найдены элементы!

 

по логу - требует капчу

 

23-07-2014 21:23:32: Ссылка на товар:http://market.yandex.ru/model.xml?modelid=10737890&hid=90635&show-uid=457889314061351171&track=mdlttl
23-07-2014 21:23:32: Начало парсинга
23-07-2014 21:23:32: Cookie включены.
23-07-2014 21:23:32: Парсинг через прокси: 221.176.14.72:80
23-07-2014 21:23:32: Запрос: http://market.yandex.ru/model.xml?modelid=10737890&hid=90635&show-uid=457889314061351171&track=mdlttl
23-07-2014 21:23:34: Перенаправление -> http://market.yandex.ru/showcaptcha?retpath=http%3A//market.yandex.ru/model.xml%3Fmodelid%3D10737890%26hid%3D90635%26show-uid%3D457889314061351171%26track%3Dmdlttl_3907dd635037470076069767a4f91057&t=0/1406139883/fa7db8f4a9be461acda21260199199eb&s=564372d0270b3fedb1620c85f43e21bd
23-07-2014 21:23:34: Запрос: http://market.yandex.ru/showcaptcha?retpath=http%3A//market.yandex.ru/model.xml%3Fmodelid%3D10737890%26hid%3D90635%26show-uid%3D457889314061351171%26track%3Dmdlttl_3907dd635037470076069767a4f91057&t=0/1406139883/fa7db8f4a9be461acda21260199199eb&s=564372d0270b3fedb1620c85f43e21bd
23-07-2014 21:23:36: Удачный ответ от сервера
23-07-2014 21:23:36: Получено 9386 байт
23-07-2014 21:23:36: Конец парсинга

 

сайт на локалке

[igyan]

Сделайте куки с регистрацией, парсер пока не умеет удалять прокси на которой капча, поэтому лучше их удать если в логе прокси забанен и нажимать проверку

[sonicking]

Сделайте куки с регистрацией, парсер пока не умеет удалять прокси на которой капча, поэтому лучше их удать если в логе прокси забанен и нажимать проверку

попробую (а для Opera 12 есть подобное расширение для кук как для Firefox, если в курсе?)

[igyan]

не в курсе, что-нибудь должно быть

[sonicking]

попробовал  создать файл кук с регистрацией

хватило на два товара

снова Ошибка парсинга. Не найдены элементы!

прокси удалял постепенно

[sonicking]

вот такую ошибку даёт при попытке парсить с

•      Hotline.ua
• Onliner.by

Notice: Undefined index: onliner in D:\OpenCart Project\sonic39.ru\admin\controller\module\parsermanager.php on line 1165Warning: Cannot modify header information - headers already sent by (output started at D:\OpenCart Project\sonic39.ru\admin\index.php:86) in D:\OpenCart Project\sonic39.ru\vqmod\vqcache\vq2-system_engine_controller.php on line 28Warning: Cannot modify header information - headers already sent by (output started at D:\OpenCart Project\sonic39.ru\admin\index.php:86) in D:\OpenCart Project\sonic39.ru\vqmod\vqcache\vq2-system_engine_controller.php on line 29

[igyan]

Сохраняете настройки после изменений

[sonicking]

конечно

сейчас ещё пару позиций удалось спарсить без прокси и снова затык

[igyan]

С яндесом пока есть проблемы, я пытаюсь что-нибудь сделать. Через API маркета не получилось, не дали ключ, придется возиться со старой технологией парсинга. С куками работает, но нестабильно.

[sonicking]

С яндесом пока есть проблемы, я пытаюсь что-нибудь сделать. Через API маркета не получилось, не дали ключ, придется возиться со старой технологией парсинга. С куками работает, но нестабильно.

удачи в изысканиях - когда примерно ждать результатов?