[Поддержка] SimplePars - Универсальный парсер для ИМ

[Rassol2]

1 минуту назад, kostya242 сказал:

Если на сайте десятки и сотни категорий/подкатегорий, можно ли не руками выбирать, а сделать так чтобы начинаешь набирать название категории, она в листинге показывается

да уже думал об этом, видел реализации нужно будет подумать и сделать.
PS. Если несложно прячьте скриншоты под спойлер.
 

Спойлер

 

[kostya242]

Подскажите, почему парсятся атрибуты других категорий (хотя они разнесены по разным группам атрибутов) ? Т.е. например в атрибутах блендеров появляются атрибуты других категорий...

 

Спойлер

 

[Rassol2]

1 минуту назад, kostya242 сказал:

Подскажите, почему парсятся атрибуты других категорий (хотя они разнесены по разным группам атрибутов) ? Т.е. например в атрибутах блендеров появляются атрибуты других категорий...

Модуль не делит атрибуты на категории.

Он берет атрибут с названием
Тип
затем идет к вам в базу данных и смотрит есть ли у вас в магазине атрибут с именем тип.
Если есть тогда он берет его и добавляет в товар.
А если такого атрибута нет он создает его.

Проверка по группа не ведется.

[kostya242]

2 минуты назад, Rassol2 сказал:

Модуль не делит атрибуты на категории.

Он берет атрибут с названием
Тип
затем идет к вам в базу данных и смотрит есть ли у вас в магазине атрибут с именем тип.
Если есть тогда он берет его и добавляет в товар.
А если такого атрибута нет он создает его.

Проверка по группа не ведется.

 

Не совсем понял что мне делать

[partshez]

9 часов назад, Rassol2 сказал:

да может добавлю, но нужно иметь хотя бы с десяток таких праивил, что бы создать отдельную страницу по ним.
А у меня пока нет такого списка нужных правил.

Это для начала *блокнотика* в Инструкции. Все взято только из последних постов нашей темы. 

{reg[#[^0-9.,]#]}|

{reg[#,(.*)#]}|

reg[#(\s{2,})#]}|

{reg[#^(.*?)\s+?^(?=.*^\1$)#m]}|

{reg[#\t#]}|

{reg[#\s{2,}#]}|

{reg[#^\s+|\s+$#]}|

 

{skip}сухой|сухой

{reg[#сухой (.*)#]}|сухой

Змінено 17 вересня 2020 користувачем partshez

[Rassol2]

5 минут назад, kostya242 сказал:

 

Не совсем понял что мне делать

ну тут главное нужно понять что модуль не определяет какой категории относится атрибут.
По этому когда делаете то что вам необходимо помните что атрибуты создаются в товарах не смотря на то из каких групп этот атрибут.
Главное что бы он совпадал по имени с атрибутом из сайта донора.

то что вы их разнесли по разным группам это же не значит что их теперь нельзя использовать, или что теперь нужно создать дубль этого атрибута.

[kostya242]

42 минуты назад, Rassol2 сказал:

ну тут главное нужно понять что модуль не определяет какой категории относится атрибут.

Тогда абсолютно некорректная механика работы вот этой штуки из спойлера. Если атрибуты присваиваются (создаются) только для блендеров, то почему если есть 2 атрибута ШИРИНА, он выводит подпись что атрибут ширина принадлежит посудомойкам?  

 

 

Спойлер

 

[kostya242]

Ну и в частности до сих пор не понял ответ на вопрос  что делать в таком случае.

 

 

Спойлер

 

[Rassol2]

Только что, kostya242 сказал:

Тогда абсолютно некорректная механика работы вот этой штуки из спойлера.

а если вот так посмотреть становится корректной.
 

Спойлер

 

2 минуты назад, kostya242 сказал:

Если атрибуты присваиваются (создаются) только для блендеров, то почему если есть 2 атрибута ШИРИНА, он выводит подпись что атрибут ширина принадлежит посудомойкам?

Это легко объясняется.

Все происходит так.
Модуль говорит базе данных, у нас в базе есть атрибут с названием ШИРИНА ?
Баз данных, смотрит видит 2 штуки и отвечает, Да есть.
Модуль говорит дай мне id такого атрибута.
База данных смотрит, берет первый попавшийся и отдает с словами , ну на.

Примерно так это происходит.

[Rassol2]

3 минуты назад, kostya242 сказал:

Ну и в частности до сих пор не понял ответ на вопрос  что делать в таком случае.

ну пока что и не понятен ваш вопрос, как быть с чем ?

[kostya242]

29 минут назад, Rassol2 сказал:

ну пока что и не понятен ваш вопрос, как быть с чем ?

Спарсились товары с присвоением атрибутов из разных групп атрибутов. Чтобы исправить это (и не повторить в будущем при парсинге), что делать - удалять атрибуты для всех категорий товаров и что с ними делать чтобы исключить повтор (чтобы например та же ширина одновременно не была атрибутом духовки, посудомойки и блендера)

 

Спойлер

 

Змінено 17 вересня 2020 користувачем kostya242

[Rassol2]

Только что, kostya242 сказал:

Спарсились товары с присвоением атрибутов из разных групп атрибутов.

Такой возможности в модуле нет.
Если вы хотите развести много дублей атрибутов при этом присвоить им разные группы, тогда вам придется вручную это поправить.
Ну а при обновлении отключаете работу с атрибутами и ничего не нарушите.

PS. Но сугубо мое мнение, зачем вообще разносить атрибуты по группами. Луче сложить их в одну группу и тем самым избавится от дополнительной работы по поддержанию этого зоопарка. Может я глупость говорю но я так и не нашел причин зачем атрибуты разносят по разными группам.

[kostya242]

31 минуту назад, Rassol2 сказал:

тогда вам придется вручную это поправить.

Хорошо, как поправить это вручную можно?

[Rassol2]

1 час назад, kostya242 сказал:

Хорошо, как поправить это вручную можно?

Через базу данных или сторонние модули.
В моем моделе в редакторе товаров нету действий над опциями. Пока не реализовано.

[kostya242]

Так а если удалить имеющиеся атрибуты и затем парсером снова залить их НО уже без привязки к какой-то определенному типу техники

 

 

Спойлер

 

[Rassol2]

58 минут назад, kostya242 сказал:

Так а если удалить имеющиеся атрибуты и затем парсером снова залить их НО уже без привязки к какой-то определенному типу техники

можете так, а можете вручную атрибутам проставить одну и туже группу.
Либо запросов в базу данных всем атрибутам присвоить одну группу.

[Rassol2]

Список всех обновления модуля с версии 2.5 до 3 версии.
 

Спойлер

Обновление 2.5

https://opencartforum.com/topic/123017-podderzhka-simplepars-universalnyy-parser-dlya-im/?do=findComment&comment=1385705

Обновление 2.5-1

 https://opencartforum.com/topic/123017-podderzhka-simplepars-universalnyy-parser-dlya-im/?do=findComment&comment=1386472
 

Обновление 2.5-2
https://opencartforum.com/topic/123017-podderzhka-simplepars-universalnyy-parser-dlya-im/?do=findComment&comment=1386923

 

Обновление 2.5-3
https://opencartforum.com/topic/123017-podderzhka-simplepars-universalnyy-parser-dlya-im/?do=findComment&comment=1387588

 

Обновление 2.5-4
https://opencartforum.com/topic/123017-podderzhka-simplepars-universalnyy-parser-dlya-im/?do=findComment&comment=1391278

 

Обновление 2.5-5

https://opencartforum.com/topic/123017-podderzhka-simplepars-universalnyy-parser-dlya-im/?do=findComment&comment=1392739

 

Обновление 2.6

https://opencartforum.com/topic/123017-podderzhka-simplepars-universalnyy-parser-dlya-im/?do=findComment&comment=1395934

 

Обновление 2.7_beta

https://opencartforum.com/topic/123017-podderzhka-simplepars-universalnyy-parser-dlya-im/?do=findComment&comment=1405498

 

Обновление 2.7-1_beta

https://opencartforum.com/topic/123017-podderzhka-simplepars-universalnyy-parser-dlya-im/?do=findComment&comment=1406882

 

Обновление 2.7-2_beta

https://opencartforum.com/topic/123017-podderzhka-simplepars-universalnyy-parser-dlya-im/?do=findComment&comment=1411642

 

Обновление 2.7-3_beta

https://opencartforum.com/topic/123017-podderzhka-simplepars-universalnyy-parser-dlya-im/?do=findComment&comment=1415543

 

Обновление 2.8_beta

https://opencartforum.com/topic/123017-podderzhka-simplepars-universalnyy-parser-dlya-im/?do=findComment&comment=1434493

 

Обновление 2.8-1_beta

https://opencartforum.com/topic/123017-podderzhka-simplepars-universalnyy-parser-dlya-im/?do=findComment&comment=1436098

 

Обновление 2.8-2_beta

https://opencartforum.com/topic/123017-podderzhka-simplepars-universalnyy-parser-dlya-im/?do=findComment&comment=1437245

 

Обновление 2.8-3_beta

https://opencartforum.com/topic/123017-podderzhka-simplepars-universalnyy-parser-dlya-im/?do=findComment&comment=1437664

 

Обновление 2.6-1 и 2.8-4_beta

https://opencartforum.com/topic/123017-podderzhka-simplepars-universalnyy-parser-dlya-im/?do=findComment&comment=1443365

 

Обновление 2.8-5_beta

https://opencartforum.com/topic/123017-podderzhka-simplepars-universalnyy-parser-dlya-im/?do=findComment&comment=1445633

 

Обновление 2.9_beta

https://opencartforum.com/topic/123017-podderzhka-simplepars-universalnyy-parser-dlya-im/?do=findComment&comment=1451926

 

Обновление 2.9-1_beta

https://opencartforum.com/topic/123017-podderzhka-simplepars-universalnyy-parser-dlya-im/?do=findComment&comment=1453279

 

Обновление 2.9-2

https://opencartforum.com/topic/123017-podderzhka-simplepars-universalnyy-parser-dlya-im/?do=findComment&comment=1464205

 

Обновление 2.9-3_beta

https://opencartforum.com/topic/123017-podderzhka-simplepars-universalnyy-parser-dlya-im/?do=findComment&comment=1468648

 

Обновление 2.9-4_beta

https://opencartforum.com/topic/123017-podderzhka-simplepars-universalnyy-parser-dlya-im/?do=findComment&comment=1476467

 

Обновление 2.9-5_beta

https://opencartforum.com/topic/123017-podderzhka-simplepars-universalnyy-parser-dlya-im/?do=findComment&comment=1476644

 

Обновление 2.9-6_beta

https://opencartforum.com/topic/123017-podderzhka-simplepars-universalnyy-parser-dlya-im/?do=findComment&comment=1479142

 

Обновление 2.9-7_beta

https://opencartforum.com/topic/123017-podderzhka-simplepars-universalnyy-parser-dlya-im/?do=findComment&comment=1480597

 

Обновление 2.9-8_beta

https://opencartforum.com/topic/123017-podderzhka-simplepars-universalnyy-parser-dlya-im/?do=findComment&comment=1482797

 

Обновление 2.9-9_beta

https://opencartforum.com/topic/123017-podderzhka-simplepars-universalnyy-parser-dlya-im/?do=findComment&comment=1487413

 

Обновление 2.9-10_beta

https://opencartforum.com/topic/123017-podderzhka-simplepars-universalnyy-parser-dlya-im/?do=findComment&comment=1489906

 

Обновление 2.9-11_beta

https://opencartforum.com/topic/123017-podderzhka-simplepars-universalnyy-parser-dlya-im/?do=findComment&comment=1491656

 

Обновление 2.9-12

https://opencartforum.com/topic/123017-podderzhka-simplepars-universalnyy-parser-dlya-im/?do=findComment&comment=1495735

 

Обновление 2.9-13

https://opencartforum.com/topic/123017-podderzhka-simplepars-universalnyy-parser-dlya-im/?do=findComment&comment=1508186

 

Обновление 2.10

https://opencartforum.com/topic/123017-podderzhka-simplepars-universalnyy-parser-dlya-im/?do=findComment&comment=1508471

 

Обновление 2.10-1

https://opencartforum.com/topic/123017-podderzhka-simplepars-universalnyy-parser-dlya-im/?do=findComment&comment=1509793

 

[Rassol2]

Список всех обновлений модуля с версии 3 до 4
 

Спойлер

Обновление 3.0

Внедрение много поточности.

https://opencartforum.com/topic/123017-podderzhka-simplepars-universalnyy-parser-dlya-im/?do=findComment&comment=1519570

 

Обновление 3.0-1

https://opencartforum.com/topic/123017-podderzhka-simplepars-universalnyy-parser-dlya-im/?do=findComment&comment=1521065

 

Обновление 3.0-2_beta

https://opencartforum.com/topic/123017-podderzhka-simplepars-universalnyy-parser-dlya-im/?do=findComment&comment=1521785

 

Обновление 3.0-3_beta

https://opencartforum.com/topic/123017-podderzhka-simplepars-universalnyy-parser-dlya-im/?do=findComment&comment=1525018

 

Обновление 3.1_beta

https://opencartforum.com/topic/123017-podderzhka-simplepars-universalnyy-parser-dlya-im/?do=findComment&comment=1531698

 

Обновление 3.1-1_beta

https://opencartforum.com/topic/123017-podderzhka-simplepars-universalnyy-parser-dlya-im/?do=findComment&comment=1534217

 

Обновление 3.1-2_beta

https://opencartforum.com/topic/123017-podderzhka-simplepars-universalnyy-parser-dlya-im/?do=findComment&comment=1535787

 

Обновление 3.1-3
https://opencartforum.com/topic/123017-podderzhka-simplepars-universalnyy-parser-dlya-im/?page=93&tab=comments#comment-1540358

 

Обновление 3.2_beta

https://opencartforum.com/topic/123017-podderzhka-simplepars-universalnyy-parser-dlya-im/?do=findComment&comment=1555851

 

Обновление 3.2-1_beta

https://opencartforum.com/topic/123017-podderzhka-simplepars-universalnyy-parser-dlya-im/?do=findComment&comment=1557240

 

Обновление 3.2-2_beta

https://opencartforum.com/topic/123017-podderzhka-simplepars-universalnyy-parser-dlya-im/?do=findComment&comment=1559252

 

Обновление 3.2-3_beta

https://opencartforum.com/topic/123017-podderzhka-simplepars-universalnyy-parser-dlya-im/?do=findComment&comment=1560545

 

Обновление 3.2-4_beta

https://opencartforum.com/topic/123017-podderzhka-simplepars-universalnyy-parser-dlya-im/?do=findComment&comment=1563908

 

Обновление 3.2-5_beta

https://opencartforum.com/topic/123017-podderzhka-simplepars-universalnyy-parser-dlya-im/?do=findComment&comment=1565834

 

Обновление 3.3_beta

https://opencartforum.com/topic/123017-podderzhka-simplepars-universalnyy-parser-dlya-im/?do=findComment&comment=1575435

 

Обновление 3.3-2_beta

https://opencartforum.com/topic/123017-podderzhka-simplepars-universalnyy-parser-dlya-im/?do=findComment&comment=1578681

 

Обновление 3.3-3_beta

https://opencartforum.com/topic/123017-podderzhka-simplepars-universalnyy-parser-dlya-im/?do=findComment&comment=1581363

 

Обновление 3.3-4_beta

https://opencartforum.com/topic/123017-podderzhka-simplepars-universalnyy-parser-dlya-im/?do=findComment&comment=1583492

 

Обновление 3.3-5_beta

https://opencartforum.com/topic/123017-podderzhka-simplepars-universalnyy-parser-dlya-im/?do=findComment&comment=1585601

 

Обновление 3.4_beta

https://opencartforum.com/topic/123017-podderzhka-simplepars-universalnyy-parser-dlya-im/?do=findComment&comment=1593149

 

Обновление 3.4-1
https://opencartforum.com/topic/123017-podderzhka-simplepars-universalnyy-parser-dlya-im/?do=findComment&comment=1597797

 

Обновление 3.4-2
https://opencartforum.com/topic/123017-podderzhka-simplepars-universalnyy-parser-dlya-im/?do=findComment&comment=1600896

 

Обновление 3.5_beta

https://opencartforum.com/topic/123017-podderzhka-simplepars-universalnyy-parser-dlya-im/?do=findComment&comment=1602102

 

Обновление 3.5-1_beta

https://opencartforum.com/topic/123017-podderzhka-simplepars-universalnyy-parser-dlya-im/?do=findComment&comment=1606247

 

Обновление 3.5-2_beta

https://opencartforum.com/topic/123017-podderzhka-simplepars-universalnyy-parser-dlya-im/?do=findComment&comment=1608188

 

Обновление 3.5-3_beta

https://opencartforum.com/topic/123017-podderzhka-simplepars-universalnyy-parser-dlya-im/?do=findComment&comment=1609500

 

Обновление 3.5-4_beta

https://opencartforum.com/topic/123017-podderzhka-simplepars-universalnyy-parser-dlya-im/?do=findComment&comment=1610173

 

Обновление 3.5-5

https://opencartforum.com/topic/123017-podderzhka-simplepars-universalnyy-parser-dlya-im/?do=findComment&comment=1625723

 

Обновление 3.5-6

https://opencartforum.com/topic/123017-podderzhka-simplepars-universalnyy-parser-dlya-im/?do=findComment&comment=1625958

 

Обновление 3.6_beta

https://opencartforum.com/topic/123017-podderzhka-simplepars-universalnyy-parser-dlya-im/?do=findComment&comment=1627617

 

Обновление 3.6-1_beta

https://opencartforum.com/topic/123017-podderzhka-simplepars-universalnyy-parser-dlya-im/?do=findComment&comment=1628659

 

Обновление 3.7_beta

https://opencartforum.com/topic/123017-podderzhka-simplepars-universalnyy-parser-dlya-im/?do=findComment&comment=1633389

 

Обновление 3.7-1_beta

https://opencartforum.com/topic/123017-podderzhka-simplepars-universalnyy-parser-dlya-im/?do=findComment&comment=1634326

 

Обновление 3.7-2_beta

https://opencartforum.com/topic/123017-podderzhka-simplepars-universalnyy-parser-dlya-im/?do=findComment&comment=1636800

 

Обновление 3.7-3_beta

https://opencartforum.com/topic/123017-podderzhka-simplepars-universalnyy-parser-dlya-im/?do=findComment&comment=1637822

 

Обновление 3.7-4_beta

https://opencartforum.com/topic/123017-podderzhka-simplepars-universalnyy-parser-dlya-im/?do=findComment&comment=1639400

 

Обновление 3.7-5_beta

https://opencartforum.com/topic/123017-podderzhka-simplepars-universalnyy-parser-dlya-im/?do=findComment&comment=1641044

 

Обновление 3.7-6_beta

https://opencartforum.com/topic/123017-podderzhka-simplepars-universalnyy-parser-dlya-im/?do=findComment&comment=1641998

 

Обновление 3.7-7

https://opencartforum.com/topic/123017-podderzhka-simplepars-universalnyy-parser-dlya-im/?do=findComment&comment=1643118

 

[Rassol2]

Обновление v4.0_beta

Ну что поздравляю всех нас с появлением четвертой версии модуля. В этой версии модуль начал парсить XML/YML файлы.
Это тот функционал не просто дался, но это первая бета которая призвана полностью покрыть автоматизацию обновления остатков цены и наполнение магазинов по официальным загрузкам от ваших поставщиков.

Как то я под устал и в этот раз решил все не расписывать, а просто записать видео о новой вкладке.

 

При обновлении не забываем выполнить /inst.php

 

 

[specialforce22]

12 минут назад, Rassol2 сказал:

Ну что поздравляю всех нас с появлением четвертой версии модуля. В этой версии модуль начал парсить XML/YML файлы.

 

Ура! 

 

P.S. Мастерю себе торговую площадку, где будут поставщики товаров, услуг, доставка еды, конечно же, электронные билеты.

Застеснялся скинуть Вам свой билетный xml файл-поставщика - это же не совсем товар!? 

Теперь думаю, может, зря....

 

[RuslanLight]

1 час назад, Rassol2 сказал:

Ну что поздравляю всех нас с появлением четвертой версии модуля. В этой версии модуль начал парсить XML/YML файлы.

Капеец!! 

У меня только возникла потребность в такой функции и уже начал думать где найти такой модуль или как то извращаться с текущими возможностями, а тут на те!!!
@Rassol2  Вы реально не перестаете удивлять и радовать!!!! 
100500 Спасибо за ваш труд!

[Emillively]

2 часа назад, Rassol2 сказал:

Обновление v4.0_beta

Крутяк! Так держать!

[Emillively]

У меня два вопроса/потребности.

 

1 - Импорт изображений в магазин

Я хочу, чтобы модуль просканировал ссылки и если есть новые изображения дополнил ими товар.

Но. Модуль может заменить все фото, но старые фото останутся на сервере (плохо для дискового пространства и лишняя работка)

Модуль может добавить фото к имеющимся, что приводит к созданию дублей.

 

Отступ: Есть случай конечно, что у донора были заменены фото но имена файлов остались теже. В таком случае мы не получим новых изображений. Я думаю это отдельный кейс. Как часто бывает, что фото меняются, а имя файла остается прежним, думаю что редко, тем более, что имя файла генерируется автоматически системой.

 

2 - Парсинг изображений с корректировкой

Скажем модуль парсит от src=" до" но туда попадаю и файлы с расширением webM и видео файлы, а мой сайт с ними работать не умеет.

Как сделать, чтобы модуль брал только с определенным расширением или исключил определенные расширения? Я пробыла это сделать, не получилось.

 

Мой способ 1

Я указывал с границей пирсинга, где конец границы jpg и jpeg но там проблемка возникает. Если от /upload/ до jpg то по дорого захватывает лишний код.

 

Спойлер

 

Мой способ 2

В поиск/замена я добавляю в начале код https://ampm-store.ru

И если добавляю правила /upload/{skip}WebM|

Получаю https://ampm-store.ru{csvnc} сторка все равно создается.

 

P. S. Хотя наверное проще это починить на стороне сайта, но в целом задачка интересная.

[Rassol2]

4 часа назад, RuslanLight сказал:

Капеец!! 

У меня только возникла потребность в такой функции и уже начал думать где найти такой модуль или как то извращаться с текущими возможностями, а тут на те!!!
@Rassol2  Вы реально не перестаете удивлять и радовать!!!! 
100500 Спасибо за ваш труд!

Спасибо.

[Rassol2]

2 часа назад, Emillively сказал:

2 - Парсинг изображений с корректировкой

Скажем модуль парсит от src=" до" но туда попадаю и файлы с расширением webM и видео файлы, а мой сайт с ними работать не умеет.

Как сделать, чтобы модуль брал только с определенным расширением или исключил определенные расширения? Я пробыла это сделать, не получилось.

Здравствуйте.
Допустим через поиск замену вырезаем все записи которые вам не нужны к пример все что заканчивается на .webm
И тем самым исключаем такие записи.

А следующим правилом заменить /upload/ на  https://ampm-store.ru/upload/
если первое правило вырежет такую ссылку то второе уже не добавит ссылку на сайт. И тем самым вы получите пустое значение.