[Поддержка] SimplePars - Універсальний парсер для ІМ

[startkomp1]

Как парсить сайт с авторизацией? То есть оптовые цены на сайте появляются после авторизации

[Rassol2]

2 минуты назад, startkomp1 сказал:

Как парсить сайт с авторизацией? То есть оптовые цены на сайте появляются после авторизации

Здравствуйте.
Вот инструкция по парсингу с авторизацией.
https://simplepars.top/index.php?page=note&note_id=29

[Kiyoshi]

Также после авторизации было бы неплохо закешировать все собранные ссылки. Так как обычно срок жизни у авторизации короткий.

Змінено 21 травня 2020 користувачем Kiyoshi

[startkomp1]

Ещё есть вопрос, не пойму что не так, поставил чистый ocstore 3 на него unishop2 туда же парсер, вроде бы всё парсит, но вот характеристики у товара на сайте не появляются во вкладке и в блоке рядом с ценой, при ручном добавлении характеристики данная характеристика выводится нормально. В админке в самом товаре характеристики прописаны. В характеристиках тоже есть значения. Но на сайте не выводится всё что спарсилось.

[Rassol2]

1 минуту назад, startkomp1 сказал:

Ещё есть вопрос, не пойму что не так, поставил чистый ocstore 3 на него unishop2 туда же парсер, вроде бы всё парсит, но вот характеристики у товара на сайте не появляются во вкладке и в блоке рядом с ценой, при ручном добавлении характеристики данная характеристика выводится нормально. В админке в самом товаре характеристики прописаны. В характеристиках тоже есть значения. Но на сайте не выводится всё что спарсилось.

Звучит как то фантастически. Но все же почистите кеш.
И второй вопрос шаблон не использует сторонних настроек хранения атрибутов ?

[Tobolskiy]

Жаль что парсить можно только товары. Мы вот для интеграции ищем такой же парсер, но заказов, а нету...

[Rassol2]

42 минуты назад, Tobolskiy сказал:

Жаль что парсить можно только товары. Мы вот для интеграции ищем такой же парсер, но заказов, а нету...

Здравствуйте.
не совсем правильная формулировка.
Парсить можно и заказы. Но вот загружать в ИМ можно только фото.

А заказы можно парсить в CSV файл к примеру.

[Valery332]

Здравствуйте.

Есть ли готовые настройки для парсинга rozetka.com.ua?

[Rassol2]

1 минуту назад, Valery332 сказал:

Здравствуйте.

Есть ли готовые настройки для парсинга rozetka.com.ua?

Здравствуйте.
нет таких настроек нету.

Обратите внимание что парсинг розетки это не простая задача, они будут банить вас за анимальную активность.
Розетка борится с парсингом. И вам нужно будет использовать по полной настройки браузера в модуле.
https://simplepars.top/index.php?page=notes&tag_id=21
 

От себя добавлю уровень сложности при парсинге розетки настолько велик, что это не имеет смысла.
Это мое мнение, и по этому я не рекомендую его парсить.

[Axelenz]

59 минут назад, Rassol2 сказал:

От себя добавлю уровень сложности при парсинге розетки настолько велик, что это не имеет смысла.
Это мое мнение, и по этому я не рекомендую его парсить.

 

Я парсил Розетку под заказ... согласен, что это несколько трудозатратно, но вполне возможно, если создать правильный алгоритм, по которому можно это сделать. А есть ещё категории Розетки, которых совсем не мало ))) ... я создавал заказчику на Opencart копию нескольких тысяч категорий Розетки...

 

P.S. Парсил ещё год назад, когда модуль не обладал такими продвинутыми возможностями, как сейчас )

Змінено 22 травня 2020 користувачем Axelenz

[Rassol2]

@Valery332 Значит можете обратится к @Axelenz  у него уже есть опыт парсинга этого донора.
 

[Tobolskiy]

8 часов назад, Rassol2 сказал:

Здравствуйте.
не совсем правильная формулировка.
Парсить можно и заказы. Но вот загружать в ИМ можно только фото.

А заказы можно парсить в CSV файл к примеру.

к сожалению не совсем то, хотелось бы именно в им, для определенного рода "интеграции"

[Rassol2]

25 минут назад, Tobolskiy сказал:

к сожалению не совсем то, хотелось бы именно в им, для определенного рода "интеграции"

Если у вас специфический задание наврядли вы найдете готовое решение к нему.
Попробуйте найти исполнителя кто сделает нужный вам функционал.

[timurmx]

Добрый день!

Подскажите пожалуйста, через этот модуль получиться загрузить данные с CSV-файла?

[Rassol2]

21 минуту назад, timurmx сказал:

Добрый день!

Подскажите пожалуйста, через этот модуль получиться загрузить данные с CSV-файла?

нет. Модуль парсит сайты.
А вам нужен загрузчики прай листов. Можете выбрать что то из этого.

Автоматическая обработка прайс листов. 
CSV Price Pro import/export

[Vorodisa]

В 21.05.2020 в 15:38, Rassol2 сказал:

распишите как вы видите реализацию этого и тогда скажу реально допил или нет.
Заодно нужно будет изучить как эта система работает в АОП что бы понять где что хранится и как сравнивать.

Это лучше у автора АОПа спросить, что где хранится. И при парсинге ставить галочку какую нибудь - сверять с Альтернативным артикулом АОП

[Rassol2]

6 минут назад, Vorodisa сказал:

Это лучше у автора АОПа спросить, что где хранится. И при парсинге ставить галочку какую нибудь - сверять с Альтернативным артикулом АОП

как устроено я в принципе знаю.

У этой реализации сильно много условий. Нельзя простым пользователям давать такую галочку, потому что она будет нажата.
А если у них нету модуля АОП и нету таблицы с сравнением. Тут много условий.
В теории сделать можно но это пока не в приоритете. Целевая аудитория этой функции маленькая, а проблем с реализацией много.

[partshez]

Есть, настроенный на донора рабочий проект 23 тыс ссылок на товар. На тестовом сайте собрал 35 тыс ссылок на товар. Не могу закинуть эти 35 тыс ссылок на тот, где 23 тыс.!

Скопировать на тестовом и вставить на рабочий... долго думает, изменений нет.

Скопировал в текстовый документ - импортировал на рабочий проект. Написано. что все ссылки прошли проверку- соответствуют. А в очереди не появляются!

Как забросить ссылки? Автору вопрос. Или опять что-то с правами на папки? Где поставить 777?

Или как экспорт сделать только ссылок с проекта?

Змінено 23 травня 2020 користувачем partshez

[crosman]

У донора нет кода/модели товара, мне тоже не нужен код\модель. При парсинге ИМ в настройках "Код товара [model]" есть два варианта
 

Спойлер

Если выбрать вариант "Парсить", то в логах ошибка:
Вы выбрали действие {Парсить} в Код товара [model] Код не был найден на сайте доноре. Без кода невозможно создать товар. Рекомендуем поменять значение на {Создавать по умолчанию}. А код товара разместить в поле Артикул [sku]
Если выбрать создавать по умолчанию - всем товарам присваивается код товара по возрастанию начиная с 1. Подскажите пожалуйста, как мне отключить создание кода товара?

[Rassol2]

У донора нет кода/модели товара, мне тоже не нужен код\модель. При парсинге ИМ в настройках "Код товара [model]" есть два варианта
 
Спойлер
Если выбрать вариант "Парсить", то в логах ошибка:
Вы выбрали действие {Парсить} в Код товара [model] Код не был найден на сайте доноре. Без кода невозможно создать товар. Рекомендуем поменять значение на {Создавать по умолчанию}. А код товара разместить в поле Артикул [sku]
Если выбрать создавать по умолчанию - всем товарам присваивается код товара по возрастанию начиная с 1. Подскажите пожалуйста, как мне отключить создание кода товара?

Когда создаёте товар в opencart то поле модель обязательна. В любом случаи должно быть заполнено.

Отправлено с моего Pixel через Tapatalk

[crosman]

1 минуту назад, Rassol2 сказал:

 в opencart то поле модель обязательна.

А если я отключил обязательность этого поля?) У меня оно необязательное, соответственно пустое везде. Не получится не создавать код товара?

[farshmac]

Здравствуйте, может кто подскажет. Есть ли возможность фото с таких страниц забирать, хотя бы главное?

 https://dimplex.ru/catalog/kaminokomplekt-pierre-lux-venge-belyy-s-ochagom-gannon-df2010-eu-55/

url фото создается здесь, как я понял:

 

 $('#prod-list > li > div').hover(function(e) {
		curPic = $(this).find(".pic").empty();
		boxImg = "/upload/combo/combo_"+(portalMode ? $("#combo-price").attr("data-id")+"_"+$(this).parent().attr("data-rel"):$(this).parent().attr("data-rel")+"_"+$("#combo-price").attr("data-id"))+".jpg";
		$('<img />').appendTo(curPic).attr("src", boxImg)
		curPic.addClass("combo");

 

[partshez]

6 часов назад, farshmac сказал:

Здравствуйте, может кто подскажет. Есть ли возможность фото с таких страниц забирать, хотя бы главное?

 https://dimplex.ru/catalog/kaminokomplekt-pierre-lux-venge-belyy-s-ochagom-gannon-df2010-eu-55/

<a href="/upload/resize_cache/iblock/     .......      "

Весь документ. На данной странице 34  https://prnt.sc/smp52w    Одно фото через замену убрать

Змінено 24 травня 2020 користувачем partshez

[Rassol2]

15 часов назад, crosman сказал:

А если я отключил обязательность этого поля?) У меня оно необязательное, соответственно пустое везде. Не получится не создавать код товара?

можно в коде модуля сделать правку что бы он не записывал это значение.
в файле /admin/model/catalog/simplepars.php
Найти строку
SET model = '" . $this->db->escape($data['model']) . "',
И заменить ее на
SET

И модуль не будет записывать это значение в товар.

Но нужно понимать что и в настройках модуля не стоит выбирать после Код товара [model] как идентификатор товара.

[Rassol2]

17 часов назад, partshez сказал:

Есть, настроенный на донора рабочий проект 23 тыс ссылок на товар. На тестовом сайте собрал 35 тыс ссылок на товар. Не могу закинуть эти 35 тыс ссылок на тот, где 23 тыс.!

Скопировать на тестовом и вставить на рабочий... долго думает, изменений нет.

Скопировал в текстовый документ - импортировал на рабочий проект. Написано. что все ссылки прошли проверку- соответствуют. А в очереди не появляются!

Как забросить ссылки? Автору вопрос. Или опять что-то с правами на папки? Где поставить 777?

Или как экспорт сделать только ссылок с проекта?

А вы уверены что ссылки которые есть в файле, они соответствуют настройкам фильтра ссылок.
Так как модуль будет брать ссылки с файла и проверять их на соответствие настроенными фильтрам.
А в модуль попадут только те что соответствуют настройкам.