[Поддержка] SimplePars - Универсальный парсер для ИМ

[Rassol2]

  В 16.07.2021 в 09:05, LODESTAR сказав:

Доброго дня.

Думаю щодо придбання парсера. Може хто підкаже, він Brain парсить?

Expand  

Здравствуйте.
Да парсит. На нём отрабатываю вопрос по скорости, и все что касается массовых заданий. Когда нужно что то долго делать )))
Там как раз много товаров.

[Rassol2]

  В 16.07.2021 в 06:36, Reanimaster сказав:

Может кто-то подсказать, как добавлять и обновлять товар только своего проекта?

Expand  

Не знаю как можно добавлять товар только своего проекта ?
Обновлять могу понять, но добавлять нет. Добавлять можно любые товары и привязаться к проекту невозможно.

Как обновлять товары только своего проекта.
1. Добавляем к артикулу своего проекта приставку в начало или в конец, как вам будет удобно. К примеру 01-
По аналогии с известным вам модулем

2. Добавляем в настройки проекта тот же префикс к артикулу.

И все модуль сможет обновить только товар у которого в артикуле есть префикс, и префикс совпадает с префиксом проекта.
И вы можете этот префикс в разные проекты установить если хотите не с одного проекта работать с товарами.

Думаю понятно обрисовал логику.

[Reanimaster]

  В 16.07.2021 в 14:31, Rassol2 сказав:

1. Добавляем к артикулу своего проекта приставку в начало или в конец, как вам будет удобно. К примеру 01-
По аналогии с известным вам модулем

Expand  

 

В таком случае будут дубли. 
3 поставщика скажем. Пересекающийся товар. Если я везде задам свой префикс - то будет 3 товара с разными префиксами.

[Rassol2]

  В 16.07.2021 в 15:09, Reanimaster сказав:

 

В таком случае будут дубли. 
3 поставщика скажем. Пересекающийся товар. Если я везде задам свой префикс - то будет 3 товара с разными префиксами.

Expand  

у каждого товара в таблице oc_product есть поле dn_id в нем написан норм проекта через который был создан или обновлен этот товар.
А значит используя новый функционал.
https://simplepars.top/index.php?page=notes&tag_id=34

 

Вы можете написать скрипт который перед загрузкой данных в магазин, будет брать артикул, получать по нему товар из базы, проверять поле dn_id на наличие нужного вам id проекта. И если оно не совпадает, то сам артикул заменять на текст "МИМО xD" и товар не обновится, так как такого артикула не будет.
 

[Rassol2]

И да.
Я уже вернулся к работе.

Всех кому я отписался о том что в отпуске до 18 можете продублировать вопросы в ЛС и я на них отвечу.
 

[Reanimaster]

  В 16.07.2021 в 15:23, Rassol2 сказав:

Вы можете написать скрипт который перед загрузкой данных в магазин

Expand  

Точно!
Спасибо)

[Rassol2]

  В 16.07.2021 в 21:51, Reanimaster сказав:

Точно!
Спасибо)

Expand  

не за что.

[Rassol2]

Первый кейс по работе с собственными PHP скриптами для модуля SimplePars
 

Собственно решил описать первое задание выполненное при помощи расширения возможностей модуля через php скрипты.
Собственно тут ничего сверх естественного не было сделано, примечательно только то что это первый опыт.

Собственно задача была убрать из списка все ссылки где количество товара равно 0.
Так как ссылок больше 100 000 это сократит количество выполняемой работы. (Собственно логику мы не обсуждаем, мы просто решаем поставленную задачу)

Изящность в том что это можно решить в три строчки кода. У меня чуть больше так как я люблю вести диалог сам собой
Сам скрипт.
 

  Показати вміст

А здесь включаем его выполнение в нужный нам момент.
 

  Показати вміст

Все теперь при парсинге через это проект если в ссылке будет пустая граница париснга 14 ссылка будет удалятся из базы.

А теперь всем вопрос на размышление.
-> А можно усложнить логику, к примеру выписывает себе список ссылок по разным признаком, в какой то файл ?
==> Да господа можно. Как говорится PHP вам в руки, И мануал по написанию собственных скриптов вам на шею.

 

Надеюсь такой банальный пример покажет что не все так сложно, и все возможно.

[aammhin]

  В 17.07.2021 в 02:43, Rassol2 сказав:

Первый кейс по работе с собственными PHP скриптами для модуля SimplePars
 

Собственно решил описать первое задание выполненное при помощи расширения возможностей модуля через php скрипты.
Собственно тут ничего сверх естественного не было сделано, примечательно только то что это первый опыт.

Собственно задача была убрать из списка все ссылки где количество товара равно 0.
Так как ссылок больше 100 000 это сократит количество выполняемой работы. (Собственно логику мы не обсуждаем, мы просто решаем поставленную задачу)

Изящность в том что это можно решить в три строчки кода. У меня чуть больше так как я люблю вести диалог сам собой
Сам скрипт.
 

  Показати вміст

А здесь включаем его выполнение в нужный нам момент.
 

  Показати вміст

Все теперь при парсинге через это проект если в ссылке будет пустая граница париснга 14 ссылка будет удалятся из базы.

А теперь всем вопрос на размышление.
-> А можно усложнить логику, к примеру выписывает себе список ссылок по разным признаком, в какой то файл ?
==> Да господа можно. Как говорится PHP вам в руки, И мануал по написанию собственных скриптов вам на шею.

 

Надеюсь такой банальный пример покажет что не все так сложно, и все возможно.

Expand  

Спасибо, Отличная работа.

[Reanimaster]

  В 17.07.2021 в 02:43, Rassol2 сказав:

Первый кейс по работе с собственными PHP скриптами для модуля SimplePars

Expand  

Здравствуйте, уважаемый автор))
Можете помочь с написанием скрипта, который будет писать атрибуты в AttributeTextSelect?)

Есть таблицы и функции из модуля, автор любезно предоставил.
Заранее благодарю.

Змінено 18 липня 2021 користувачем Reanimaster

[Rassol2]

  В 18.07.2021 в 06:59, Reanimaster сказав:

Здравствуйте, уважаемый автор))
Можете помочь с написанием скрипта, который будет писать атрибуты в AttributeTextSelect?)
Есть таблицы и функции из модуля, автор любезно предоставил.
Заранее благодарю.

Здравствуйте.
Ну в данном случаи это не совсем просто взять и написать десяток строк , тут нужно переписать весь блок работы с атрибутами.

Ну как бы я могу ответить на ваши вопрос. По написанию скрипта. Но написать вместо вас скрипт на пару сотен строк нет.

Правда луче писать уже завтра вопросы по скрипту.
У вас задача по переписке логики модуля, хоть и называется написание скрипта но у вас колоссальная задача.

Отправлено с телефона через Tapatalk

[Reanimaster]

  В 18.07.2021 в 07:21, Rassol2 сказав:

У вас задача по переписке логики модуля, хоть и называется написание скрипта но у вас колоссальная задача.

Expand  

 

Я понимаю. Поэтому и прошу помощи. Сам не потяну. Тем более - контроллер то закрыт и я понимаю почему. И посмотреть функции не могу(
Не факт что это помогло бы конечно. Так - пальцем в небо.

[Rassol2]

  В 18.07.2021 в 07:26, Reanimaster сказав:

 
Я понимаю. Поэтому и прошу помощи. Сам не потяну. Тем более - контроллер то закрыт и я понимаю почему. И посмотреть функции не могу(
Не факт что это помогло бы конечно. Так - пальцем в небо.

А контроллере ничего и нет. Все в модуле.
Открываете функцию addProduct и там будет перечень всех функций которые работают с атрибутами. И переписывает их в свой скрипт с внесением своей логики.

Отправлено с телефона через Tapatalk

[Reanimaster]

  В 18.07.2021 в 07:31, Rassol2 сказав:

Открываете функцию addProduct и там будет перечень всех функций которые работают с атрибутами. И переписывает их в свой скрипт с внесением своей логики.

Expand  

 

Ок. Спасибо. Буду дерзать)) Если что прибегу за советом)

[demo69]

Можно как-то отобрать для парсинга товары со скидкой к примеру не более 10% ?

[Rassol2]

  В 19.07.2021 в 08:32, demo69 сказав:

Можно как-то отобрать для парсинга товары со скидкой к примеру не более 10% ?

Expand  

Здравствуйте.
Думаю да. А как это сделать зависит от того как указана скидка у донора.

[nebo]

Ребят, подскажите пожалуйста:

• Как добавить конкретную категорию к уже спаршенному товару?

Спарсил товар для одной категории. Теперь паршу для второй, но процентов 90 товара уже добавлены на сайт и соответственно, Парсер не добавляет дубликаты (и правильно делает). Как, прогнав еще раз определенные ссылки на товар из донора, добавить еще одну или две (три и т.д.) именно конкретно указанные категории? 

Идентификатор SKU. 

 

Все уже должны понять, что я имею введу. Но еще чуть разжую (У донора - Фильтр. И выставляя разные категории - фильтруется товар):

• Собрав у донора страницы на товары категории "Октавия А5 1,6 2009" - спарсил. Товару присвоил соответственную категорию;
• У донора, указываю в фильтре категорию "Октавия А5 1,4 2004" - собираю ссылки и паршу на сайт. И! Из этого списка, уже много товаров спаршены, так как товар подходит и для "Октавия А5 1,6 2009" и для "Октавия А5 1,4 2004". Естественно, парсер не создает дубли товара и из обработанных 2000 ссылок, добавляет на сайт 200 товаров. А 1800 из них уже есть. Как указать парсеру - добавить для этих 1800 товаров (которые уже есть на сайте и присвоены категории "Октавия А5 1,6 2009") новые, конкретно указанные категории (в данном случае, необходимо указать - "Октавия А5 1,4 2004" и категорию уровнем выше - Шкода Октавия А5) ?   - Все категории на сайте уже созданы, если что.

Чтобы парсер просто обновил уже добавленные товар.

Змінено 19 липня 2021 користувачем nebo

[Rassol2]

  В 19.07.2021 в 19:38, nebo сказав:

Ребят, подскажите пожалуйста:

• Как добавить конкретную категорию к уже спаршенному товару?

Спарсил товар для одной категории. Теперь паршу для второй, но процентов 90 товара уже добавлены на сайт и соответственно, Парсер не добавляет дубликаты (и правильно делает). Как, прогнав еще раз определенные ссылки на товар из донора, добавить еще одну или две (три и т.д.) именно конкретно указанные категории? 

Идентификатор SKU. 

 

Все уже должны понять, что я имею введу. Но еще чуть разжую (У донора - Фильтр. И выставляя разные категории - фильтруется товар):

• Собрав у донора страницы на товары категории "Октавия А5 1,6 2009" - спарсил. Товару присвоил соответственную категорию;
• У донора, указываю в фильтре категорию "Октавия А5 1,4 2004" - собираю ссылки и паршу на сайт. И! Из этого списка, уже много товаров спаршены, так как товар подходит и для "Октавия А5 1,6 2009" и для "Октавия А5 1,4 2004". Естественно, парсер не создает дубли товара и из обработанных 2000 ссылок, добавляет на сайт 200 товаров. А 1800 из них уже есть. Как указать парсеру - добавить для этих 1800 товаров (которые уже есть на сайте и присвоены категории "Октавия А5 1,6 2009") новые, конкретно указанные категории (в данном случае, необходимо указать - "Октавия А5 1,4 2004" и категорию уровнем выше - Шкода Октавия А5) ?   - Все категории на сайте уже созданы, если что.

Чтобы парсер просто обновил уже добавленные товар.

Expand  

Здравствуйте.
Вроде весь ответ заключается в названии действия.
 

  Показати вміст

Либо я не так понимаю вас. А то вроде все придельно просто.

[nebo]

  В 19.07.2021 в 20:27, Rassol2 сказав:

Здравствуйте.
Вроде весь ответ заключается в названии действия.
 

  Показати вміст

Либо я не так понимаю вас. А то вроде все придельно просто.

Expand  

 

Почти правильно

Уточнение/пример:

К примеру товар "Клапан - какой-то там" - на сайте доноре, он включен в категории: "Двигатель", "Внутренняя часть двигателя" и т.д. Все эти категории парсятся и создаются у меня на сайте как новые, ну и присваиваются к товару. Но на сайте доноре, нет категории "Октавия А5 1,4 2004" - которую я создал на своем сайте и хочу её в добавок к новосозданным категориям, также присвоить ко всему этому товару.

 

Выходит, сделать нужно так, чтобы при добавлении/обновлении товара, помимо категорий которые парсятся с сайта донора (граница парсинга настроена, с этом все ок) присваивались обязательно и категория "Октавия А5 1,4 2004" (которая есть на моем сайте, но нет на сайте доноре). 

 

Вопрос в том, как в добавок указать для присвоения категорию "Октавия А5 1,4 2004"?

[Rassol2]

  В 19.07.2021 в 21:07, nebo сказав:

 

Почти правильно

Уточнение/пример:

К примеру товар "Клапан - какой-то там" - на сайте доноре, он включен в категории: "Двигатель", "Внутренняя часть двигателя" и т.д. Все эти категории парсятся и создаются у меня на сайте как новые, ну и присваиваются к товару. Но на сайте доноре, нет категории "Октавия А5 1,4 2004" - которую я создал на своем сайте и хочу её в добавок к новосозданным категориям, также присвоить ко всему этому товару.

 

Выходит, сделать нужно так, чтобы при добавлении/обновлении товара, помимо категорий которые парсятся с сайта донора (граница парсинга настроена, с этом все ок) присваивались обязательно и категория "Октавия А5 1,4 2004" (которая есть на моем сайте, но нет на сайте доноре). 

 

Вопрос в том, как в добавок указать для присвоения категорию "Октавия А5 1,4 2004"?

Expand  

Так а что вам мешает дописать любую категорию что вам нужно?

 

  Показати вміст

 

[nebo]

  В 19.07.2021 в 21:11, Rassol2 сказав:

Так а что вам мешает дописать любую категорию что вам нужно?

 

  Показати вміст

 

Expand  

 

Так и делаю, но категория 1.4 (2004.05 - 2006.05) не присваивается (товара в категории нет).

 

  Показати вміст

 

 

[Rassol2]

  В 19.07.2021 в 21:30, nebo сказав:

 

Так и делаю, но категория 1.4 (2004.05 - 2006.05) не присваивается (товара в категории нет).

 

  Показати вміст

 

 

Expand  

Что в логах написано по этому вопросу ?

[nebo]

  В 19.07.2021 в 21:32, Rassol2 сказав:

Что в логах написано по этому вопросу ?

Expand  

 

Судя по логам, парсер создал категории не там, где надо и присвоил их. 

Категория то добавлена, но она еще раз создана и создана не в том месте.

Из лога: "2021-07-19 21:36:23| -->Обновление | Категории добавлены в товар id = 4532,3252,3251,3135,3134 Адрес = Гальмівна система->Дискові гальма->Гальмівний диск->Гальмівний диск->1.4 (2004.05 - 2006.05)"

 

Похоже нужно изменить настройки этой комбинации: {gran_18}{csvnc}1.4 (2004.05 - 2006.05)

 

 

  Показати вміст

 

[Rassol2]

  В 19.07.2021 в 21:47, nebo сказав:

Похоже нужно изменить настройки этой комбинации: {gran_18}{csvnc}1.4 (2004.05 - 2006.05)

Expand  

Это комбинация говорит о том что ко всем категориями что попадают в границу {gran_18} в конце добавить дочернюю 1.4 (2004.05 - 2006.05)

Вы должны понимать что если у вас в границе разные категории то к ним всем в конце добавится та что вы жестка указали в настройках.

 

  В 19.07.2021 в 21:47, nebo сказав:

Из лога: "2021-07-19 21:36:23| -->Обновление | Категории добавлены в товар id = 4532,3252,3251,3135,3134 Адрес = Гальмівна система->Дискові гальма->Гальмівний диск->Гальмівний диск->1.4 (2004.05 - 2006.05)"

Expand  

вот тут как раз модуль сообщает как он составил категории в соответствии с вашими настройками.

[Rassol2]

Обновление v4.6-1_beta

 

1. Исправление мелких недочетов.

 

2. При использовании собственных скриптов было добавлен еще одни блок информации перед Парсинга в ИМ и после Парсинга в ИМ
Блок permit

$script_data['permit'] - Многомерный массив который содержит два блока.
add - Если товар допущен на добавления.
up - Если товар допущен к обновлению.
Товар может либо обновляться либо добавляться, за это отвечает значение permit в интересующем вас блоке.
Значение pr_id содержит id товара, при обновлении или если скрипт выполняется после создания нового товара.
В остальном случаи там значение 0.

Пример

Array
(
    [add] => Array
        (
            [permit] => 0
            [pr_id] => 0
        )

    [up] => Array
        (
            [permit] => 1
            [pr_id] => 15200
        )

)

Эта информация так же добавлена в инструкцию к работе скриптов.
https://simplepars.top/index.php?page=note&n=48
Без этого блока оказалось тяжеловато.
Теперь не нужно самому получать информацию какой товар обновился или создался, что бы применить именно к нему свой скрипт.