[Поддержка] SimplePars - Универсальный парсер для ИМ

[Vladimir99]

День добрый. Огромный респект и благодарность данному автору модуля - он просто замечательный!!

Хотелось задать вопрос о возможном развитии модуля и о тех моментах которых мне не хватило лично:

1. возможность удаления конкретной характеристики

2. возможность парсить-обновлять товар из прайса

3. возможность парсинга комментариев в карточку товара

4. возможность уникализировать описание товара и при парсинге комментариев сам комментарий . По принципу многих SEO модулей.

"Пример:     Хоте[л|ла] поделиться своей точкой зрения о данном [товаре|продукте]"

В результате мы получим 4 разных предложения - таким образом их можно создать очень много, что благотворно повлияет на позиции интернет магазина в поисковых системах

Благодарю за ответ

[Rassol2]

29 минут назад, Vladimir99 сказал:

1. возможность удаления конкретной характеристики

Да расширение функционала в редакторе товаров будет, и эта функция появится.
 

29 минут назад, Vladimir99 сказал:

2. возможность парсить-обновлять товар из прайса

это не совсем про парсинг, пока что не уверен что я хочу заходить в сегмент работы с прайс листами.
На эту тему есть уже 3-4 великолепных модулей не вижу смысла создавать пятый и пытаться составить им конкуренцию.

Ничего кардинально нового я не вижу что я могу принести в эту сферу.
 

31 минуту назад, Vladimir99 сказал:

3. возможность парсинга комментариев в карточку товара

будет но не в ближайших релизах. Очень мало востребованная задача по этому как бы далеко не на первом плане.
 

 

32 минуты назад, Vladimir99 сказал:

4. возможность уникализировать описание товара и при парсинге комментариев сам комментарий . По принципу многих SEO модулей.

"Пример:     Хоте[л|ла] поделиться своей точкой зрения о данном [товаре|продукте]"

В результате мы получим 4 разных предложения - таким образом их можно создать очень много, что благотворно повлияет на позиции интернет магазина в поисковых системах

Да это я тоже хочу сделать, но всему свое время.

[bodyak0]

Приветствую!Есть ли идею как собрать ссылки с этого сайта?
https://willer.ua/water_heaters
к примеру от сюда, если руками соберу все работает, а сбор не идет по сайту что может быть? Логи чистые 200 пришет норма

[Rassol2]

7 часов назад, bodyak0 сказал:

Приветствую!Есть ли идею как собрать ссылки с этого сайта?
https://willer.ua/water_heaters
к примеру от сюда, если руками соберу все работает, а сбор не идет по сайту что может быть? Логи чистые 200 пришет норма

Здравствуйте.
Проверьте внимательно настройки сбора.
У меня все заработало.
 

Спойлер

Либо у вас правила сильно ограничивают и под поиск не попадает ни одна ссылка.
Либо у вас выбран не тот метод сбора.
 

[ddv]

Скажите, пожалуйста, может покажется глупым вопросом, все-таки, а можно как-то к уже добавленным товарам ранее без помощи симплпарс, присвоить разметку через модуль.
Что имею ввиду.

Есть товары, которые были внесены в ручную, до покупки модуля, но теперь появилась возможность, после покупки simpltpars парсить у поставщика товары с сайта с привязкой к его цене и синхронизацией через крон. Но чтобы не парсить все товары заново и дублировать соответственно в магазине. хотелось бы как-то привязаться просто к цене и автоматом обновляться.
Можно такое реализовать? Заранее спасибо!

[Rassol2]

39 минут назад, ddv сказал:

Скажите, пожалуйста, может покажется глупым вопросом, все-таки, а можно как-то к уже добавленным товарам ранее без помощи симплпарс, присвоить разметку через модуль.
Что имею ввиду.

Есть товары, которые были внесены в ручную, до покупки модуля, но теперь появилась возможность, после покупки simpltpars парсить у поставщика товары с сайта с привязкой к его цене и синхронизацией через крон. Но чтобы не парсить все товары заново и дублировать соответственно в магазине. хотелось бы как-то привязаться просто к цене и автоматом обновляться.
Можно такое реализовать? Заранее спасибо!

не совсем ясно что вы имеете в виду под привязать к цене.
но если вы создавали товары вручную, то достаточно что бы у созданных товаров вручную совпадал артикул с артикулами сайта донора. И модуль SimplePars будет обновлять цены и все что вы хотите просто сопоставив артикул,

[travkovs]

Подскажите 
Как идет привязка к товарам которые спарсились
Что я имею ввиду, поясняю

- У всех поставщиков откуда парсю своя иерархия каталога

1) Я спарсил товары

2) Далее я сформировал разделы как мне необходимо и раскидал товары
3) Далее ... мне необходимо как-то посредством SimplePars обновлять на них цены 

Змінено 30 вересня 2020 користувачем travkovs

[Rassol2]

28 минут назад, travkovs сказал:

Подскажите 
Как идет привязка к товарам которые спарсились
Что я имею ввиду, поясняю

- У всех поставщиков откуда парсю своя иерархия каталога

1) Я спарсил товары

2) Далее я сформировал разделы как мне необходимо и раскидал товары
3) Далее ... мне необходимо как-то посредством SimplePars обновлять на них цены 

Выбираете обновить что вы хотите обновлять вот в каждом разделе.
 

Спойлер

Что нужно ставите действия обновлять, что не нужно ставите действие не обновлять.

Далее выбираете как сравнивать товар.
И в соответствии с этим настраиваете границу парсинга с данными для сравнения товара на сайте доноре с товаром у вас в магазине.
 

Спойлер

 

[travkovs]

4 минуты назад, Rassol2 сказал:

Выбираете обновить что вы хотите обновлять вот в каждом разделе.

  Не уверен что поняли меня

4 минуты назад, Rassol2 сказал:

2) Далее я сформировал разделы как мне необходимо и раскидал товары

После того как я спарсил товары я их раскидываю по другим разделам, это не помешает обновлять цены?

Привязка идет по артикулу  и парсер  найде нужный артикул обновит там цену верно?

.

И неважно куда я его переместил на сайте

 

Змінено 30 вересня 2020 користувачем travkovs

[Rassol2]

1 минуту назад, travkovs сказал:

После того как я спарсил товары я их раскидываю по другим разделам, это не помешает обновлять цены?

Нет не помешает.
 

1 минуту назад, travkovs сказал:

Привязка идет по артикулу  и парсер  найде нужный артикул обновит там цену верно?

Привязка идет не по артикулу а по выбранному идентификатору, смотрите скришот в предыдущем посте.

 

2 минуты назад, travkovs сказал:

И неважно куда я его переместил на сайте

Не важно.

[travkovs]

2 минуты назад, Rassol2 сказал:

Не важно.

Это и нужно. Спасибо!

[Rassol2]

2 часа назад, travkovs сказал:

Это и нужно. Спасибо!

не за что.

[Rassol2]

Обновление 4.0-2_beta

Исправления всех недочетов в парсере xml что вы сообщали за эту неделю.
Если вы находите какие то недочеты сообщайте, чем быстрее пофиксым все тем быстрее выйдет поддержка работы парсера xml в кроне.

[farshmac]

Здравствуйте, хотел бы попросить, если можно прописать тайтлы в парсере для более удобной навигации в браузере. Спасибо. 
Менеджер URL, настройки парсинга и т.п.
 

 

Спойлер

 

Змінено 2 жовтня 2020 користувачем farshmac

[Rassol2]

2 часа назад, farshmac сказал:

Здравствуйте, хотел бы попросить, если можно прописать тайтлы в парсере для более удобной навигации в браузере. Спасибо. 
Менеджер URL, настройки парсинга и т.п.

Да конечно пропишу.
 

[Zetx]

такой вопрос, чтоб парсить мульти сайт (рус. и укр) нужно создавать два отдельных проекта или можно в одном? метод используется sitemap, которая идет общая для всех товаров (отличия языков товаров в карте сайта лишь в url, тоесть товары на укр. языке имеют приставку в домене /ua)

Змінено 4 жовтня 2020 користувачем Zetx

[Rassol2]

1 час назад, Zetx сказал:

такой вопрос, чтоб парсить мульти сайт (рус. и укр) нужно создавать два отдельных проекта или можно в одном? метод используется sitemap, которая идет общая для всех товаров (отличия языков товаров в карте сайта лишь в url, тоесть товары на укр. языке имеют приставку в домене /ua)

Здравствуйте.
Можете использовать один проект. Можете два это не принципиально.

[Zetx]

1 час назад, Rassol2 сказал:

Здравствуйте.
Можете использовать один проект. Можете два это не принципиально.

а как разделить парсинг, чтоб товары имеющие в ссылках /ua заходили в укр. версию, а обычные ссылки (тоесть без /ua) в рус. версию сайта ... сейчас же получается, что в обеих языковых вкладках товара информация (название, описание) спарсена на одном языке

Змінено 4 жовтня 2020 користувачем Zetx

[Rassol2]

2 минуты назад, Zetx сказал:

а как разделить парсинг, чтоб товары имеющие в ссылках /ua заходили в укр. версию, а обычные ссылки (тоесть без /ua) в рус. версию сайта ... сейчас же получается, что в обеих языковых вкладках товара информация (название, описание) спарсена на одном языке

сперва собираете ссылки без ua парсите.
Затем удаляете ссылки и собираете с ua и парсите их.
 

[partshez]

Столкнулся с проблемой дублей фото. Подскажите, что неправильно делаю?

Спойлер

2020-10-05 06:48:37| Парсинг : УСПЕШНЫЙ ЗАПРОС  | Код ответа [200] Ссылка | https://www.toptancimburada.com/acrapol-121-zenne-cilt-lacifusya
2020-10-05 06:48:38| ->[SEO_URL Создан] : product_id=10614 | SEO_URL= acrapol-121-genskie-koga-lacifuksiya
2020-10-05 06:48:38| ->[ИЗОБРАЖЕНИЕ] : Загрузка успешна | Код ответа [200] Ссылка | https://www.toptancimburada.com/acrapol-121-zenne-cilt-lacifusya-94007-43-B.jpg
2020-10-05 06:48:38| ->[ИЗОБРАЖЕНИЕ] : Загрузка успешна | Код ответа [200] Ссылка | https://www.toptancimburada.com/acrapol-121-zenne-cilt-lacifusya-94008-43-B.jpg
2020-10-05 06:48:38| ->[ИЗОБРАЖЕНИЕ] : Загрузка успешна | Код ответа [200] Ссылка | https://www.toptancimburada.com/acrapol-121-zenne-cilt-lacifusya-94009-43-B.jpg
2020-10-05 06:48:38| ->[ОБНОВЛЕН ТОВАР] ID = 10614 | Идентификатор sku = [1400039749]
2020-10-05 06:48:38| -->Обновление | Location = https://www.toptancimburada.com/acrapol-121-zenne-cilt-lacifusya
2020-10-05 06:48:38| -->Обновление | Минимальный заказ = 8
2020-10-05 06:48:38| -->Обновление | Вычитать со склада = 0
2020-10-05 06:48:38| -->Обновление | Статус = 1
2020-10-05 06:48:38| -->Обновление | Название = Acrapol 121 Женские Кожа - Laci/Фуксия
2020-10-05 06:48:38| -->Обновление | Цена = 280
2020-10-05 06:48:38| -->Обновление | Производитель id = 54
2020-10-05 06:48:38| -->Обновление | Описание = {описание в логи не пишется}
2020-10-05 06:48:38| -->Обновление | Категория id = 99,94,89 Адрес = Обувь со склада в Турции->Женщины 36-40->Кроссовки
2020-10-05 06:48:38| -->Обновление | Удалены старые изображения фото с сервера. И загружены новые = =>
2020-10-05 06:48:38| -->Обновление | Главное изображение = http://pugovkaopt.com.ua/image/catalog/obuv/49-acrapol-121-zenne-cilt-lacifusya-94007-43-B.jpg
2020-10-05 06:48:38| -->Обновление | Дополнительные изображения = http://pugovkaopt.com.ua/image/catalog/obuv/48-acrapol-121-zenne-cilt-lacifusya-94008-43-B.jpg
2020-10-05 06:48:38| -->Обновление | Дополнительные изображения = http://pugovkaopt.com.ua/image/catalog/obuv/48-acrapol-121-zenne-cilt-lacifusya-94009-43-B.jpg
2020-10-05 06:48:38| -->Обновление | Атрибут обновлен в товаре Цвет: = Lacivert
2020-10-05 06:48:38| -->Обновление | Атрибут обновлен в товаре Закрытие: = Зашнурованный
2020-10-05 06:48:38| -->Обновление | Атрибут обновлен в товаре Основание: = Poli
2020-10-05 06:48:38| -->Обновление | Атрибут обновлен в товаре Материал: = Кожа искусственная (Искусственный)

Действие для фото **Обновление | Удалены старые изображения фото с сервера. И загружены новые = =>**

Перед фото создаются дополнительные цифры. https://prnt.sc/ut9zxs   Что это за цифры?

В результате создаются одинаковые фото с разными первыми цифрами. https://prnt.sc/uta1fd

В чем проблема? Как уйти от создания дублей?

На сервере уже больше 8 Гб занято изображениями вместе с этими дублями!   https://prnt.sc/utawme

Змінено 5 жовтня 2020 користувачем partshez

[partshez]

И еще одна проблема давно беспокоит меня. Уже на двух сайтах обнаружена.

Notice: Use of undefined constant CURL_HTTP_VERSION_2_0 - assumed 'CURL_HTTP_VERSION_2_0' in /home/admin/web/default.domain/public_html/admin/model/catalog/simplepars.php on line 10298

https://prnt.sc/utareo   https://prnt.sc/utas0v

С автором общался на эту тему, но пока решения не вижу

[Axelenz]

1 час назад, partshez сказал:

И еще одна проблема давно беспокоит меня. Уже на двух сайтах обнаружена.

Notice: Use of undefined constant CURL_HTTP_VERSION_2_0 - assumed 'CURL_HTTP_VERSION_2_0' in /home/admin/web/default.domain/public_html/admin/model/catalog/simplepars.php on line 10298

https://prnt.sc/utareo   https://prnt.sc/utas0v

С автором общался на эту тему, но пока решения не вижу

так Гугел говорит следующее:

https://curl.haxx.se/libcurl/c/CURLOPT_HTTP_VERSION.html

 

Attempt HTTP 2 requests. libcurl will fall back to HTTP 1.1 if HTTP 2 can't be negotiated with the server. (Added in 7.33.0)
The alias CURL_HTTP_VERSION_2 was added in 7.43.0 to better reflect the actual protocol name.
----------------------------------------------------------------------------------------------------------------------------
Попытка выполнить запросы HTTP 2. libcurl вернется к HTTP 1.1, если HTTP 2 не может быть согласован с сервером. (Добавлено в 7.33.0)
Псевдоним CURL_HTTP_VERSION_2 был добавлен в 7.43.0 для лучшего отражения фактического имени протокола.

Попробуйте использовать другую версию PHP... или посмотрите, правильную ли версию PHP Вы установили себе ?

Змінено 5 жовтня 2020 користувачем Axelenz

[Rassol2]

1 час назад, partshez сказал:

Действие для фото **Обновление | Удалены старые изображения фото с сервера. И загружены новые = =>**

Перед фото создаются дополнительные цифры. https://prnt.sc/ut9zxs   Что это за цифры?

В результате создаются одинаковые фото с разными первыми цифрами. https://prnt.sc/uta1fd

В чем проблема? Как уйти от создания дублей?

На сервере уже больше 8 Гб занято изображениями вместе с этими дублями!   https://prnt.sc/utawme

Если в директории лежит файл с таким же именем как вы парсит, тогда модуль добавляет цифру в имя файла и ложе рядом.
Модуль при перезагрузке фото удаляет старые с сервера при условии что они  в этот момент указаны в товаре.

Если это просто файлы лежат на сервере то модуль не будет их удалять.
Процесс банальный.

Модуль парсит фото. 
Смотри выбрано удалять и загружать заново. Он смотрит что есть в товаре сейчас, идет по указанным ссылкам удаляет физически файлы.
Затем прописывает путь к новым.
 

[Rassol2]

1 час назад, partshez сказал:

И еще одна проблема давно беспокоит меня. Уже на двух сайтах обнаружена.

Notice: Use of undefined constant CURL_HTTP_VERSION_2_0 - assumed 'CURL_HTTP_VERSION_2_0' in /home/admin/web/default.domain/public_html/admin/model/catalog/simplepars.php on line 10298

https://prnt.sc/utareo   https://prnt.sc/utas0v

С автором общался на эту тему, но пока решения не вижу

Разве не здесь решение вашего вопроса ?
 

Спойлер

 

[partshez]

8 минут назад, Rassol2 сказал:

Разве не здесь решение вашего вопроса ?
 

  Скрыть контент

 

Пробовал все три варианта с 2.0. Ошибка не пропадает.

https://prnt.sc/utckvu   https://prnt.sc/utcloj