Перейти до вмісту
Пошук в
  • Детальніше...
Шукати результати, які ...
Шукати результати в ...

[Поддержка] Парсер-менеджер товаров с торговых площадок


igyan
Модуль «Парсер-менеджер товаров с торговых площадок» знято з продажу
Ми підібрали схожі модулі інших розробників — їх можна придбати вже зараз.

Що можна обрати замість

Вирішують ту саму задачу, але іншим способом або частково.
SimplePars - Універсальний парсер для ІМ
Модуль SimplePars призначений для парсингу та наповнення інтернет магазину. Ідея модуля полягає в тому, щоб ви могли заварити чашку кави і спостерігати як ваш магазин наповнюється товарами. Адже набагато приємніше спостерігати за автоматичним завантаженням товару, ніж заповнювати кожну позицію власноруч.   Ціна модуля знижена з 32$ до 26$ у зв'язку з тим, що на даний момент мені важко надавати повноцінну технічну підтримку модуля. Зараз у мене немає можливості відповідати всім у приватних повідомленнях. Сподіваюся, що в майбутньому це зміниться :( З 20.09.2024, купуючи модуль, ви погоджуєтесь з тим, що технічна підтримка модуля вам не надаватиметься! Ви можете ставити свої запитання в темі модуля, де я та інші учасники нашої спільноти відповідатимуть за можливості.   Можливості модуля SimplePars Основні завдання які вирішує модуль це парсинг даних із сайту та подальше заповнення чи оновлення товарів в інтернет магазині. Ви можете як парсити безпосередньо в інтернет магазин, так і парсыты в Excel таблицю для подальшої обробки. У двох словах не описати що вміє робити модуль, тому позначу тільки основні моменти. - Повноцінний парсер, що дозволяє парсити сайти і наповнювати магазин товарами. - Крім завантаження можливе настроювання оновлення існуючих товарів, цін, залишків та інших елементів товару. - Автоматичне створення категорій, виробників, атрибутів, опцій, завантаження зображень та багато іншого. - Вбудований гнучкий збирач посилань, який допоможе зібрати посилання на необхідні товари. - Можлива ідентифікація товару за різними значеннями, детальніше про всі ідентифікатори ви можете дізнатися тут - Ідентифікатори - Доступна установка націнок будь-якої складності. - Парсинг / Складання SEO шаблонів та заповнення Мета даних товару, категорій, виробників. Заповнення SEO_URL - Формувати прайс csv з даними, що ви парсіте. Також прайси можна складати в готовому форматі для завантаження через АОП або будь-якого іншого завантажувача прайс листів. - Пошук заміна, потужний інструмент, що дозволяє вам нальоту змінювати інформацію. Тобто ви можете змінювати інформацію, яку ви парсите перед тим як зберегти її в товар або прайс. - Пошук заміна повністю підтримує регулярні вирази. - Модуль здатний парсити в багатопотоковому режимі. Що робить парсинг максимально швидким! - Можливість налаштувати запити для обходу блокування з боку донора. - Підтримка роботи з проксі. - Власний проксі чекер, що дозволяє відібрати проксі сервера, які будуть працювати з конкретним донором. - Можливе індивідуальне налаштування запитів, Налаштування Cookies, User-Agent, Надсилання власних заголовків Headers - Система логування, яка дозволяє контролювати процес парсингу на будь-якому етапі. - Система кешування сайту донора для безпечного парсингу. - Вбудований редактор посилань, що дозволяє групувати посилання за списками, та робити завантаження певних груп посилань. Так само відслідковувати посилання, які повертаються з помилками. - Парсинг із автоматичною авторизацією на сайті донорі. Інструкція з авторизації (Функція застаріла. Дана функція застаріла і про багато сайтів вже не буде працювати. Тобто гарнтії, що у вас буде працювати, я не даю.) - NEW Автоматичний парсинг за розкладом, за допомогою CRON - NEW Вбудований редактор товарів. Редактор товарів допоможе зробити фінальне виправлення товарів. Інструкція до редактора товарів - NEW Парсер документів XML/YML від постачальника. - NEW Парсинг сайтів із зображеннями у форматі WEBP!!!! Докладніше - NEW Розширення можливостей парсера власними PHP скриптами. Докладніше!!! - NEW Парсинг файлів у товар. Тепер ви можете парсить інструкції до товару або будь-які інші файли з сайту донора. Докладніше!!!   Ви можете вказати будь-яку кількість границь парсингу, на будь-які дані, що є в html коді сайту донора. SimplePars це універсальний інструмент, який допоможе вам наповнити ваш інтернет магазин. Зверніть увагу, що ви можете налаштувати парсинг на будь-які дані, і необов'язково вони повинні бути сумісні з opencart. Ви можете парсувати статті, відгуки, блоги.   SimplePars адаптовані під роботи з модулями. HYPER PRODUCT MODELS - NEW AJAX замена товара по моделям - HYPER PRODUCT MODELS - OC 2 AJAX замена товара по моделям - HYPER PRODUCT MODELS - OC 3 HYPER MULTI PRODUCT MODELS - NEW HYPER MULTI PRODUCT MODELS - AJAX Мульти замена товара по моделям - OC 2 HYPER MULTI PRODUCT MODELS - AJAX Мульти замена товара по моделям - OC 3 Ціни у опціях. Обновление цены при выборе опции, без AJAX - HYPER Dynamic price of options - OC 2 Обновление цены при выборе опции, без AJAX - HYPER Dynamic price of options - OC 3 Зображення у опціях. Опции с вводом количества, артикулом и изображением OC 2 Опции с вводом количества, артикулом и изображением OC 3 Изображения опций PRO Закупівельна ціна товару. CostPrice - закупочная цена товаров в opencart   І це мала частина тих завдань, які може виконати даний модуль. SimplePars розробляється як універсальний парсер, у нього немає чітких завдань, він має лише набір інструментів. А що ви побудуєте, маючи ці інструменти залежить тільки від вас.   Повна інструкція до модуля доступна за посиланням Інструкція до модуля SimplePars   Відео-уроки роботи з модулем доступні за посиланням Відео уроки з роботи з модулем SimplePars   Допоміжна програма для парсингу для десктопа. Завантажити для Windows Завантажити для Linux   Увага! Усі навчальні матеріали були написані російською.   Демо сайт для ознайомлення з інтерфейсом та можливостями модуля Зверніть увагу, що на демо сайті парсинг недоступний. http://demo.simplepars.top/admin/ Логин - demo Пароль - demo   Ліцензійна угода. Ознайомитись   Інструкція з встановлення. Установка SimplePars 1. Зайдіть у директорію вашої версії модуля та скопіюйте все в корінь сайту із заміною. 2. Введіть у рядку браузера ваш_сайт/inst.php і натисніть Enter. 3. Далі перейдіть до розділу Система->Користувачі->Групи користувачів->Адміністратор натисніть виділити все у двох розділах: Дозволити перегляд Дозволити редагувати Потім натисніть зберегти. 4. Зайдіть у "Модифікатори" або "Менеджер додатків" та натисніть Оновити. 5. Після цього видаліть у корені сайту файл inst.php Все, модуль встановлено. У розділі Каталог під пунктом Виробники з'явиться пункт SimplePars – це вхід у модуль.   Інструкція по оновленню 1. Завантажити вміст директорії з назвою вашої версії в корінь сайту. 2. Виконати ваш_сайт/inst.php 3. Видалити з кореня сайту файл inst.php   Після встановлення або оновлення я бачу білий екран або помилку 500 Якщо бачите білий екран, то вам необхідно перейти до архіву з модулем до директорії Other versions of PHP і там будуть лежати файли під всі версії php. Відкриваєте папку з ім'ям вашої версії php та завантажуєте вміст у корінь магазину...

Оновлене

SimplePars - Універсальний парсер для ІМ

1 200 грн
Придбати

Recommended Posts

Кое-что еще хотел уточнить.

Теперь все работает, но картинки, которые уже есть у товаров почему-то не загружаются:

f5cc1245442e9f4116aaa476133b7da6.png

 

Идея по удобству: когда сразу ищешь ссылки на несколько товаров по ссылкам Ямаркета непонятно, правильные они или кривые (иногда бывает левые цепляет из-за несоответствия номенклатуры и маркета).

Было бы очень удобно, ввести колонку после ссылки "Наименование по донору" и туда вносить наименование с сайта-донора. Иначе приходится прежде чем парсить, все ссылки прощелкивать.... Это занимает много времени.

Надіслати
Поділитися на інших сайтах


С картинками какой-то глюк, то загружаются, то нет, непонятно.. Но не критично

Еще было бы удобно иметь фильтр по категории в фильтре товаров, а не в настройках, неудобно постоянно лазить переключать, если надо только группу пропарсить.

Надіслати
Поділитися на інших сайтах


С картинками какой-то глюк, то загружаются, то нет, непонятно.. Но не критично

 

Что в логе при парсинге картинок

 

Еще было бы удобно иметь фильтр по категории в фильтре товаров, а не в настройках, неудобно постоянно лазить переключать, если надо только группу пропарсить.

Нет места для добавления колонок

Змінено користувачем igyan
Надіслати
Поділитися на інших сайтах

Что в логе при парсинге картинок

Я говорю про уже существующие картинки у товара, а так они сами по себе есть.
 

Нет места для добавления колонок

Можно такой фильтр сделать отдельно и разместить например под блоком добавления нового товара.

 

Также хотелось бы иметь фильтр по дате поступления.

У нас на сайте много всяких товаров, много всякой мелочи, которой нет на яндексах и хотлайнах, и атрибуты вручную всем не сделаешь. Поступил новый товар, нужно на него напарсить данные, а его никак и не отсортировать...

Змінено користувачем sobago
Надіслати
Поділитися на інших сайтах


 

Я говорю про уже существующие картинки у товара, а так они сами по себе есть.
 
 

Можно такой фильтр сделать отдельно и разместить например под блоком добавления нового товара.

 

Также хотелось бы иметь фильтр по дате поступления.

У нас на сайте много всяких товаров, много всякой мелочи, которой нет на яндексах и хотлайнах, и атрибуты вручную всем не сделаешь. Поступил новый товар, нужно на него напарсить данные, а его никак и не отсортировать...

 

 

С фильтра с  категорией думаю достаточно в настройках, а фильтр по дате поступления можно подумать

Надіслати
Поділитися на інших сайтах

Что то я не понял, прочитал всю ветку форума и так не "догнал"

 получается так при :

04-10-2015 08:34:42: Начало парсинга
04-10-2015 08:34:42: Cookie включены.
04-10-2015 08:34:42: Запрос: https://market.yandex.ru/search.xml?text=Canon+EOS+5D
04-10-2015 08:34:42: Перенаправление -> http://market.yandex.ru
04-10-2015 08:34:42: Запрос: http://market.yandex.ru
04-10-2015 08:34:42: Перенаправление -> https://market.yandex.ru/
04-10-2015 08:34:42: Запрос: https://market.yandex.ru/
04-10-2015 08:34:43: Удачный ответ от сервера
04-10-2015 08:34:43: Получено 31007 байт
04-10-2015 08:34:43: Конец парсинга
 
На выходе он выдает 
 
Товаров не найдено!!!
 
Нады тыкать в 2 параметра Прокси и Cookie. 
И авось что-нибудь получится? Четкого алгоритма действий нет что ли?
У меня то находит то нет, от чего это может зависеть? Если настройки ни какие не меняю, прокси активные, по крайней мере судя по проверке.
Может надо много "находить" в cookies? Это как то влияет? и зачем от туда сначала удалять, а затем снова заливать.
И еще извините конечно, может я тугодум или дает о себе знать бессонная ночь в попытке разгадать алгоритма данного модуля, кириллицу данный модуль распознает? Просто даже когда у меня модуль волшебным образом начинал работать (затем правда сам и переставал не изменяя никаких настроек), русские названия он все равно не распознавал, хотя на Yandexe они есть. А вообще конечно прекрасная вещь, вот только не понятно, как заставить её четко работать. 
Змінено користувачем maikl288
Надіслати
Поділитися на інших сайтах


 

Что то я не понял, прочитал всю ветку форума и так не "догнал"

 получается так при :

04-10-2015 08:34:42: Начало парсинга
04-10-2015 08:34:42: Cookie включены.
04-10-2015 08:34:42: Запрос: https://market.yandex.ru/search.xml?text=Canon+EOS+5D
04-10-2015 08:34:42: Перенаправление -> http://market.yandex.ru
04-10-2015 08:34:42: Запрос: http://market.yandex.ru
04-10-2015 08:34:42: Перенаправление -> https://market.yandex.ru/
04-10-2015 08:34:42: Запрос: https://market.yandex.ru/
04-10-2015 08:34:43: Удачный ответ от сервера
04-10-2015 08:34:43: Получено 31007 байт
04-10-2015 08:34:43: Конец парсинга
 
На выходе он выдает 
 
Товаров не найдено!!!
 
Нады тыкать в 2 параметра Прокси и Cookie. 
И авось что-нибудь получится? Четкого алгоритма действий нет что ли?
У меня то находит то нет, от чего это может зависеть? Если настройки ни какие не меняю, прокси активные, по крайней мере судя по проверке.
Может надо много "находить" в cookies? Это как то влияет? и зачем от туда сначала удалять, а затем снова заливать.
И еще извините конечно, может я тугодум или дает о себе знать бессонная ночь в попытке разгадать алгоритма данного модуля, кириллицу данный модуль распознает? Просто даже когда у меня модуль волшебным образом начинал работать (затем правда сам и переставал не изменяя никаких настроек), русские названия он все равно не распознавал, хотя на Yandexe они есть. А вообще конечно прекрасная вещь, вот только не понятно, как заставить её четко работать. 

 

Бесплатные прокси из интернета яндекс банит, из 3000 проверенных работало только 3 и только, те что работают по https

поэтому  пробуйте парсить без прокси, с куками, куки хранятся в файле, удаление кук - это очистка файла, подкинуть куки - это заменить файл,

может помочь только очистка, если не помогает надо подкинуть

парсер находит html теги, без разницы кириллица там или другой язык, возможно не найдены теги, надо смотреть что в логе

Надіслати
Поділитися на інших сайтах

Всем привет!

Ребята, у кого проблема с hotline? не добавляется изображение на товар и большие пробелы в названии товара.

Типа такого Блендер стационарный              Bosch MMB 1001

Подскажите, может подобное у кого-то было??

Заранее спасибо!

Надіслати
Поділитися на інших сайтах


Всем привет!

Ребята, у кого проблема с hotline? не добавляется изображение на товар и большие пробелы в названии товара.

Типа такого Блендер стационарный              Bosch MMB 1001

Подскажите, может подобное у кого-то было??

Заранее спасибо!

С изображениями разобрался, все работает. А вот с названием товара ничего у меня не получится,igyan прошу помочь в этом вопросе

Надіслати
Поділитися на інших сайтах


С изображениями разобрался, все работает. А вот с названием товара ничего у меня не получится,igyan прошу помочь в этом вопросе

скиньте ссылку на товар

Надіслати
Поділитися на інших сайтах

С изображениями разобрался, все работает. А вот с названием товара ничего у меня не получится,igyan прошу помочь в этом вопросе

Обновил парсер, убрал пробелы из названия на хотлайне

С изображениями скорее всего не верно формируется путь, посмотрите в логах магазина, есть что

в настройках парсера и путь совпадает с физическим, работает выбор папки?

Надіслати
Поділитися на інших сайтах

Обновил парсер, убрал пробелы из названия на хотлайне

С изображениями скорее всего не верно формируется путь, посмотрите в логах магазина, есть что

в настройках парсера и путь совпадает с физическим, работает выбор папки?

Спасибо за вашу помощь, все работает.

Но такой вопрос, при парсинге с Hotline в поле "модель" записывается полностью название, с этим можно что-то сделать, или хотлайн не позволяет?

Надіслати
Поділитися на інших сайтах


Спасибо за вашу помощь, все работает.

Но такой вопрос, при парсинге с Hotline в поле "модель" записывается полностью название, с этим можно что-то сделать, или хотлайн не позволяет?

вставьте в файл

admin\controller\module\parsermanager.php

после строки 1646

$content =  $this->getContentParser($url);

это

$content =  preg_replace('#<span class=\"good-type\">.*<\/span>#Uism', '', $content);

 

будет удаляться вид товара

Надіслати
Поділитися на інших сайтах

  • 2 weeks later...

Створіть аккаунт або увійдіть для коментування

Ви повинні бути користувачем, щоб залишити коментар

Створити обліковий запис

Зареєструйтеся для отримання облікового запису. Це просто!

Зареєструвати аккаунт

Вхід

Уже зареєстровані? Увійдіть тут.

Вхід зараз
Гість
×
  • Створити...

Important Information

На нашому сайті використовуються файли cookie і відбувається обробка деяких персональних даних користувачів, щоб поліпшити користувальницький інтерфейс. Щоб дізнатися для чого і які персональні дані ми обробляємо перейдіть за посиланням . Якщо Ви натиснете «Я даю згоду», це означає, що Ви розумієте і приймаєте всі умови, зазначені в цьому Повідомленні про конфіденційність.