[Поддержка] SimplePars - Универсальный парсер для ИМ

[partshez]

  В 02.07.2021 в 10:23, Reanimaster сказав:

Смотрите. Опишу ситуацию. Есть сайт. В котором атрибуты идут отдельной страницей. Тобишь в коде нет атрибутов.

Я создаю два проекта. И кидаю в крон 4 задачи.
1 проект:

1) Сбор ссылок
2) Парсинг (Только добавлять новый товар)

 

2 проект:

1) Сбор ссылок

2) Парсинг (Только обновление) и там добавляю атрибуты.
 

Expand  

А что мешает в один проект поместить ссылки из двух проектов и запускать Добавить/ Обновить?

[vh7]

День добрый. SimplePars крут и делает много больше чем только парсинг, но XML файлы поставщиков это какой-то непрекращающийся челенж. В связи с чем возникло два вопроса:

1. Поддерживает ли Поиск замена математические действия с полями? Скажем,  Цена от|{gran_3}{*}1.6  ?

2. Есть ли способ отобразить в модуле примерно следующее: если {gran_1}<={gran_2} то записать в {gran_1} значение {gran_2}{*}2.5 ?

[Rassol2]

  В 02.07.2021 в 14:13, vh7 сказав:

День добрый. SimplePars крут и делает много больше чем только парсинг, но XML файлы поставщиков это какой-то непрекращающийся челенж. В связи с чем возникло два вопроса:

1. Поддерживает ли Поиск замена математические действия с полями? Скажем,  Цена от|{gran_3}{*}1.6  ?

2. Есть ли способ отобразить в модуле примерно следующее: если {gran_1}<={gran_2} то записать в {gran_1} значение {gran_2}{*}2.5 ?

Expand  

Здравствуйте.
1. Если вы про то что бы вот сюда засовывать границы парсинга
 

  Показати вміст

То нет до такого еше не дошли. Это пока за гранью.

2. Так на вскидку не могу предложить как это сделать.
Но как повелось последнее время. Это можно будет сделать при помощи собственных скриптов. Которые вот вот должны выйти, но постоянно нахожу ошибки по этому пока пишу.

Ориентировочно конец следующей недели.

[Rassol2]

@vh7 хотя есть у меня один извращенный вариант. Ша попробую описать.

[Rassol2]

  В 02.07.2021 в 14:13, vh7 сказав:

2. Есть ли способ отобразить в модуле примерно следующее: если {gran_1}<={gran_2} то записать в {gran_1} значение {gran_2}{*}2.5 ?

Expand  

В поиск замене границы 1 пишем

{reg[#$#]}|{+}{rgan_2}{/}{gran_2}

Получаем число которое будет либо 2 и больше, либо меньше 2.
Затем наценку пишем (0-2)*0

То есть после деления значение будет равно двум или меньше то в границе {gran_1} запишется 0
Дальше в поле где хотели это использовать пишите логический оператор {gran_1}{|}{gran_2}{*}2.5

Надеюсь понятно объяснил идею ?

[Starychenko]

  В 02.07.2021 в 05:49, Rassol2 сказав:

Внимательней прочтите инструкцию, и правильно составьте строчку.
https://simplepars.top/index.php?page=note&n=5

И пропишите его как в инструкции.

Expand  

@Rassol2

Что я сделал не так ? Все согласно инструкции. Как наценка, так и округление.

 

1. Диапазоны чисел указаны верно (1-9)
2. Умножение указано верно *0.1
3. Для того чтобы применить второе действие внутри правила используется символ &

4. Округление указано верно {1|>} после символа & как второе действие
5. Правила разделены ; как в Ваших примерах.

Я комбинирую наценку и округление. Согласно Ваших мануалов - должно работать.

Если я делаю не так, то что ? Можете, пожалуйста, как вариант показать правильный пример ?

Строчка условий вроде как правильная.

Пускай мы её даже упростим (1-999999)*0.000001&{1|>} - это все равно не работает

[Rassol2]

  В 02.07.2021 в 20:00, Starychenko сказав:

Если я делаю не так, то что ? Можете, пожалуйста, как вариант показать правильный пример ?

Expand  

Прям в инструкции показано как правильно.
 

  Показати вміст

Так же нигде не написано что округление нужно указывать после символа &
И в инструкции указано что & применяется для разных правил наценки.

[vh7]

  В 02.07.2021 в 15:29, Rassol2 сказав:

В поиск замене границы 1 пишем

{reg[#$#]}|{+}{rgan_2}{/}{gran_2}

Получаем число которое будет либо 2 и больше, либо меньше 2.
Затем наценку пишем (0-2)*0

То есть после деления значение будет равно двум или меньше то в границе {gran_1} запишется 0
Дальше в поле где хотели это использовать пишите логический оператор {gran_1}{|}{gran_2}{*}2.5

Надеюсь понятно объяснил идею ?

Expand  

Да, идею понял. Спасибо большое. Должно сработать. И я так понимаю первая граница никак не должна оказаться пустой, чтобы это работало?

[Rassol2]

  В 02.07.2021 в 20:34, vh7 сказав:

Да, идею понял. Спасибо большое. Должно сработать. И я так понимаю первая граница никак не должна оказаться пустой, чтобы это работало?

Expand  

протестируйте.
Но насколько я помню если граница пустая то получится так.
0{+}{rgan_2}{/}{gran_2}

А это приведет к числу 1 а значить это попадет под правило наценки (0-2)*0

[Reanimaster]

  В 02.07.2021 в 11:12, partshez сказав:

А что мешает в один проект поместить ссылки из двух проектов и запускать Добавить/ Обновить?

Expand  

Мешает то что парсер не собирает ссылки с атрибутами

https://quke.ru/shop/UID_90285_oneplus_9_pro_12_256gb_astral_black.html
https://quke.ru/shop/UID_90285_oneplus_9_pro_12_256gb_astral_black.html/specs#product-tabs

 

Если есть мысль как объединить в 1 проект - буду признателен.

Второй вариант ссылок я делаю поиском/заменой. Благо такая функция уже есть)

[Rassol2]

  В 03.07.2021 в 08:19, Reanimaster сказав:

Если есть мысль как объединить в 1 проект - буду признателен.

Второй вариант ссылок я делаю поиском/заменой. Благо такая функция уже есть)

Expand  

вы можете через менеджер ссылок добавлять окончание к ссылками.
 

  Показати вміст

И у вас в проекте будет сразу два типа ссылок.

[vh7]

  В 02.07.2021 в 20:39, Rassol2 сказав:

протестируйте.
Но насколько я помню если граница пустая то получится так.
0{+}{rgan_2}{/}{gran_2}

А это приведет к числу 1 а значить это попадет под правило наценки (0-2)*0

Expand  

Работает супер!   Благодарю)

[Rassol2]

  В 03.07.2021 в 09:31, vh7 сказав:

Работает супер!   Благодарю)

Expand  

не за что.
Рад что вам подошло.

[AntonVN]

Здравствуй.

Подскажите пожалуйста по "Обработчик XML", а именно по категориям
на видео всё замечательно и понятно, а если ситуация сложнее, к примеру следующая:
 

<categories>

<category id="12345">Категория</category>
<category id="67890" parentId="12345">Подкатегория</category>

</categories>
 

в поиске можно прописать что:

12345|Категория

67890|Подкатегория

Но тогда просто 2 основные категории образовываются 

 

можно как то настроить "Обработчик" можно?

 

[Rassol2]

  В 03.07.2021 в 13:15, AntonVN сказав:

можно как то настроить "Обработчик" можно?

Expand  

Здравствуйте.
Можно, и все прекрасно описано в инструкции. Причем там описан именно такой случай как вы указали.
https://simplepars.top/index.php?page=note&n=35

[Starychenko]

@Rassol2

Добрый день. 

Подскажите, пожалуйста, возможно ли использовать каким-то образом к примеру диапазон в отборе ссылок ?

Есть сайт, у которого ссылки на товары и категории находятся на третьем уровне. И в данных ссылках всегда присутствует слово /catalog/.

Итого для сбора ссылок я использую такую настройку
 

  Показати вміст

 

Далее нам необходимо убрать из результата ссылки на категории.

Все категории отображаются вот так  /catalog/2745/

Я пока что руками вырезаю такие категории через доп фильтр. Ставлю в исключение /catalog/93/ ; /catalog/299/ ; /catalog/2745/. То есть приходиться каждую такую категорию указывать в доп фильтре.

Возможно ли сделать это более правильным способом ?

К примеру /catalog/[0-9999]/

[Rassol2]

  В 03.07.2021 в 16:45, Starychenko сказав:

К примеру /catalog/[0-9999]/

Expand  

Да вы можете записать это через регулярные выражения.
такая возможность присутствует в модуле.

[Reanimaster]

  В 03.07.2021 в 08:28, Rassol2 сказав:

вы можете через менеджер ссылок добавлять окончание к ссылками.

Expand  

О. Круто. А по крону так можно?

[Rassol2]

  В 03.07.2021 в 18:06, Reanimaster сказав:

О. Круто. А по крону так можно?

Expand  

Нет, в крон такие задания не добавить.

[specialforce22]

Коллеги, добрый день!

Стараюсь овладеть инструментами замены-подмены, очень много удалось привести в порядок - https://prnt.sc/18grtf4

Куча благодарностей за предоставленную зверь-машину её автору - @Rassol2

Я "собрался уже открыть офис на Багамах и управлять бизнесом из шезлонга нажатием кнопочки", но стою пока с чумаданами в дверях)))

 

Есть у меня затык в вопросе, как избавиться от кавычек - " - https://prnt.sc/18gqvqd

Перечитал в теме все похожие на этот вопрос вопросы и ответы, перепробывал по инструкциям различные комбинации - не получается

 

Буду рад подсказке! 

Премного благодарен!!!

[Rassol2]

  В 04.07.2021 в 08:47, specialforce22 сказав:

Есть у меня затык в вопросе, как избавиться от кавычек - " - https://prnt.sc/18gqvqd

Перечитал в теме все похожие на этот вопрос вопросы и ответы, перепробывал по инструкциям различные комбинации - не получается

 

Буду рад подсказке! 

Премного благодарен!!!

Expand  

Кавычки бывают разные.
Либо так
"|

либо вот так.
"|

 

Эти правила удалят кавычки.

[specialforce22]

  В 04.07.2021 в 09:15, Rassol2 сказав:

либо вот так.
"|

Expand  

 

Да ё-маё - &quot;|

А еще не получалось из-за того, что после кавычек пробел не ставил, а у меня у донора кавычка с пробелом.

Спасибо 

[nebo]

Ребят! Подскажите пожалуйста, как спарсить рекоммендуемые товары? (идентификатор - url. Урлы идентичны с донором).

Как скопировать его рекоммендуемые товары - на свой сайт (чтобы создать блок с рекоммендуемыми товарами, а не просто текст спарсить)?

[Rassol2]

  В 05.07.2021 в 15:59, nebo сказав:

Ребят! Подскажите пожалуйста, как спарсить рекоммендуемые товары? (идентификатор - url. Урлы идентичны с донором).

Как скопировать его рекоммендуемые товары - на свой сайт (чтобы создать блок с рекоммендуемыми товарами, а не просто текст спарсить)?

Expand  

Сейчас рекомендации модуль не парсит.
Такое будет сделано после выхода версии 4.6 когда появятся скрипты.

Эту функцию я сделаю по аналогу вот этой.
https://simplepars.top/index.php?page=note&n=46

 

Но прямо сейчас нельзя спарсить рекомендацию.

[Starychenko]

@Rassol2

 

Добрый день. Ловлю периодически ошибки авторизации при сборе ссылок по Cron и также при парсинге в ИМ по Cron.

 

Пользуюсь авторизацией по POST запросы.

 

Если в настройках проекта произвести авторизацию - она проходит нормально. Дальше в поле cookies заполняются куки и сбор ссылок или парсинг в ИМ идёт по cron идёт до момента, когда вероятно заканчивается срок жизни кукисов. Дальше парсинг или сбор ссылок останавливается, так как модуль не может найти мой логин, чтобы подтвердить авторизацию.

 

Если к примеру перед запуском Cron в настройках проекта удалить cookies, и не проводить авторизацию вручную (то есть поле кукисов пустое, но настройка авторизации заполнена). То при запуске cron проект завершается по причине того, что он не находит фразу (мой логин, который подтверждает авторизацию).

 

Я могу предложить, что модуль не может провести авторизацию по cron и провести повторную авторизацию, когда время сессии закончилось.

 

Подскажите, пожалуйста, как это можно поправить ? Товары, которые я забираю с сайта донора - доступны только после авторизации на сайте.

 

Заранеет спасибо большое за помощь