[Поддержка] SimplePars - Универсальный парсер для ИМ

[vikvol]

Дякую за допомогу! все працює коректно

[Axelenz]

@Rassol2

Добрый день.

Столкнулся с некоторым неудобством...

В сложных проектах, где парсится много сайтов и иногда приходится включать/отключать временно некоторые сайты, нужно лезть в базу, чтобы править в cron "Действие" - Удалять прайс/Не удалять прайс. Так, у меня с четырёх разных сайтов сливаются данные в один файл для дальнейшей заливки на Prom. Установлено удаление прежнего прайса перед формированием нового... но иногда сайты приходится отключать... и тогда лезть в базу и вносить изменения в таблицу... неудобно...

 

Нельзя ли в следующих релизах добавить возможность править именно эту возможность сразу же в cron ?

Скрытый текст

 

[Rassol2]

15.09.2022 в 13:48, Axelenz сказал:

Нельзя ли в следующих релизах добавить возможность править именно эту возможность сразу же в cron ?

Здравствуйте.
Нет пока что такое изменение не предвидится.
Сделать можно но в ближайшей перспективе не стоит ждать.

[partshez]

15.09.2022 в 15:52, tekhnovybor сказал:

SEO URL must be unique!

Доброго времени суток. Помогите пожалуйста разобраться с этой проблемой, 3 дня не можем решить.
При парсинге на мультиязыке (рус/укр, обе галочки стоит) и при создании СЕО из названия, не создаются автоматически уникальный сео юрл? а только при ручном добавлении в каждом товаре, в каждом русском дописываю - ру, а в украинском - укр, только тогда товар адекватно отображается на сайте в обоих языках. Как сделать это автоматичным?

Первым проектом парсите в два языка. Вторым проектом обновляете второй язык. Вот там уже прописываете Название, мета-данные для второго языка.

[partshez]

Доброго времени суток! Вопрос появился. В товаре указана дата добавления. Необходимо отфильтровать во время парсинга (не через редактор!) только товары, добавленные на донор сегодня. Если товар добавлен на донора сегодня, количество 99. Иначе ноль. Нужно что-то типа этого в поле количество    {if[{gran_1}{=}{date}]}99{else}0        {gran_1} получаем в виде **17.09.2022**

Как реализовать? Пока решения не получилось найти. Именно при парсинге нужно

 

 

[Rassol2]

17.09.2022 в 13:24, partshez сказал:

Доброго времени суток! Вопрос появился. В товаре указана дата добавления. Необходимо отфильтровать во время парсинга (не через редактор!) только товары, добавленные на донор сегодня. Если товар добавлен на донора сегодня, количество 99. Иначе ноль. Нужно что-то типа этого в поле количество    {if[{gran_1}{=}{date}]}99{else}0        {gran_1} получаем в виде **17.09.2022**

Как реализовать? Пока решения не получилось найти. Именно при парсинге нужно

 

 

Здравствуйте. 
Отфильтровать во время пансинга можно только через правила допуска. Но там не поддерживается указание текушей даты. Только вручную указать конкретную дату. 

[partshez]

17.09.2022 в 21:29, Rassol2 сказал:

Здравствуйте. 
Отфильтровать во время пансинга можно только через правила допуска. Но там не поддерживается указание текушей даты. Только вручную указать конкретную дату. 

Понятно. Спасибо! Но каждый день дату вводить нереально.  

Как вариант. Обновить-добавить весь товар. Отфильтровать и удалить по дате добавления НЕ СЕГОДНЯ. Серверу работа немного добавится, но результат получим.

[Rassol2]

Обновление v4.9-2_beta
Добавлен оператор {sdate} !!!
Данный оператор взял в себя все хотелки по работе с датами. Теперь можно указывать даты в разных форматах и сдвигать их вперед и назад.
Пример о чем идет речь можно увидеть здесь.

Скрытый текст

 

Теперь в редакторе товаров можно отфильтровывать не только те что сегодня не были обновлены, но и к примеру товары которые последний раз обновились два или три дня назад. Да и в принципе оператор {sdate} поддерживает любые форматы и любое смешение дат.

 

Данный оператор доступен в поиск замене и в редакторе товаров, в поле дата добавления и дата обновления.
Так же обратите внимание что старый оператор в редакторе товаров {date} теперь недоступен.

И все правила которые были реализованы на основе {date} нужно пересохранить в новом стиле, или заменить на {sdate}!!!

Единственное за что сильно очень извиняюсь инструкцию я тут не выкладываю так как она длинная, и сразу писал на сайт с описанием модуля.
Ну и кто давно со мной знает что русский язык я не освоил, и инструкцию пишу в несколько приходов, черновая затем зачинаю все ошибки. Так вот сейчас у меня нет столько времени по этому пишу черновую инструкцию и выкладываю, обещаю найти время в ближайшую неделю две что бы подчистить все ошибки.
А пока, возможно при чтении инструкции по данному оператору у вас будет теч кровь с глаз. За это и приношу дико извинения.

 

Собственно все богатство этого оператора по ссылке ниже.

https://simplepars.top/index.php?page=note&n=54

 

Так же обратите внимание что все это выходит в бета версии модуля и требует обкатки и сообщений о каких либо проблемах.

[Rassol2]

Обновление v4.9-3_beta

 

Добавлен оператор {rand}
Этот оператор позволяет генерировать случайные числа.

 

Пример

{rand[0-100]} - обратите внимание что диапазон рандомных числе должен находится внутри оператора {rand} в квадратных скобках. {rand[0-100]}

 

Этот оператор можно использовать на вкладке Парсинг в им.
Обратите внимание что при использовании в поиск замене при пред просмотре вы не увидите случайное число.
Этот оператор отрабатывает уже после поиск замены на вкладке парсинг в им. И увидеть работу можно в пред просмотре парсинга в им.
 

 

Подробности в инструкции к модулю.

Единственное за что сильно очень извиняюсь инструкцию я тут не выкладываю так как она длинная, и сразу писал на сайт с описанием модуля.
Ну и кто давно со мной знает что русский язык я не освоил, и инструкцию пишу в несколько приходов, черновая затем зачинаю все ошибки. Так вот сейчас у меня нет столько времени по этому пишу черновую инструкцию и выкладываю, обещаю найти время в ближайшую неделю две что бы подчистить все ошибки.
А пока, возможно при чтении инструкции по данному оператору у вас будет теч кровь с глаз. За это и приношу дико извинения.

https://simplepars.top/index.php?page=note&n=55

[Axelenz]

@Rassol2

Очень полезные возможности появляются в модуле... можно будет и не допиливать ничего в Excel, а всё нужное получать с помощью модуля.

[Rassol2]

25.09.2022 в 08:01, Axelenz сказал:

@Rassol2

Очень полезные возможности появляются в модуле... можно будет и не допиливать ничего в Excel, а всё нужное получать с помощью модуля.

На данный момент этот оператор доступен на вкладке парсинг в им. Парсинг в csv работать не будет. 
Завезу по мере востребованности. 

[partshez]

@Rassol2

Обновление 4.9-2 Очень интересно. Завтра попробую.

Вопрос. Вчера обработал 100 тыс товаров. Сегодня собрал заново ссылки. Увидел 100100 ссылок на товар, т.е. 100 новых товаров добавилось. Если запущу модуль на Добавление, он начнет проверять все 100100 ссылок и обработает только 100 новых. Это понятно. А можно ли каким-то образом сделать, чтобы модуль не перебирал 100 тыс ссылок (на это уйдет часов 20), а обработал только 100 НОВЫХ ссылок. Завтра еще 200 только новых ссылок. 

[Rassol2]

26.09.2022 в 12:55, partshez сказал:

@Rassol2

Обновление 4.9-2 Очень интересно. Завтра попробую.

Вопрос. Вчера обработал 100 тыс товаров. Сегодня собрал заново ссылки. Увидел 100100 ссылок на товар, т.е. 100 новых товаров добавилось. Если запущу модуль на Добавление, он начнет проверять все 100100 ссылок и обработает только 100 новых. Это понятно. А можно ли каким-то образом сделать, чтобы модуль не перебирал 100 тыс ссылок (на это уйдет часов 20), а обработал только 100 НОВЫХ ссылок. Завтра еще 200 только новых ссылок. 

Если вы обработали 100к ссылок.
а потом добавили новые 100 ссылок. При этом после обработки не нажимали на эту кнопку.

Скрытый текст

То в списке на обработку будут только новые ссылки, остальные будут помечены как обработанные.
Но если нажимали то все, только обрабатывать весь список.

[partshez]

27.09.2022 в 02:04, Rassol2 сказал:

Если вы обработали 100к ссылок.
а потом добавили новые 100 ссылок. При этом после обработки не нажимали на эту кнопку.

  Показать содержимое

То в списке на обработку будут только новые ссылки, остальные будут помечены как обработанные.
Но если нажимали то все, только обрабатывать весь список.

А как сказать крону, чтобы он не нажимал эту кнопку? И обработал только новые ссылки? 

[Rassol2]

27.09.2022 в 01:00, partshez сказал:

А как сказать крону, чтобы он не нажимал эту кнопку? И обработал только новые ссылки? 

Крону никак.

[partshez]

27.09.2022 в 13:42, Rassol2 сказал:

Крону никак.

Понял. Спасибо!

[Axelenz]

27.09.2022 в 02:04, Rassol2 сказал:

То в списке на обработку будут только новые ссылки, остальные будут помечены как обработанные.
Но если нажимали то все, только обрабатывать весь список.

Вот тут не плохо было бы иметь такую возможность в модуле, брать указанное количество ссылок, начиная с конца. Например, в случае Сергея, не так важно 100 ссылок обработать или 300, чтобы наверняка захватить новые, но это всё равно не 100,000...

[Rassol2]

27.09.2022 в 07:41, Axelenz сказал:

Вот тут не плохо было бы иметь такую возможность в модуле, брать указанное количество ссылок, начиная с конца. Например, в случае Сергея, не так важно 100 ссылок обработать или 300, чтобы наверняка захватить новые, но это всё равно не 100,000...

Заходите в менеджер ссылок отфильтровываете последние 100 ссылок из общего массива, создаете списко последнее и засовываете туда.
Идете на вкладку парсинг им выбираете список который создали и парсите только те ссылки что выбрали.

[Axelenz]

27.09.2022 в 15:50, Rassol2 сказал:

Заходите в менеджер ссылок отфильтровываете последние 100 ссылок из общего массива, создаете списко последнее и засовываете туда.
Идете на вкладку парсинг им выбираете список который создали и парсите только те ссылки что выбрали.

Я про автоматизацию... чтобы можно было настраивать cron на подобные действия... вручную не интересно...

[Rassol2]

27.09.2022 в 07:51, Axelenz сказал:

Я про автоматизацию... чтобы можно было настраивать cron на подобные действия... вручную не интересно...

В кроне как я уже написал нет, и ничего глобального по крону ближайшие время не будет. На него нет ресурсов.

[Rassol2]

27.09.2022 в 07:51, Axelenz сказал:

Я про автоматизацию... чтобы можно было настраивать cron на подобные действия... вручную не интересно...

Хотя опять же можно использовать собственные скрипты что бы написать скрип который при выполнении парсинга первой ссылки в проекте, после нее брал весь список и помечал как обработанный, кроме последних 300 ссылок. Так же при обработке ссылок проверял если парсинг идет в диапазоне последних 300 ссылок скрипт ничего не делает.

Вот вам и расширение функционала своими руками до нужного уровня.

[yurok79]

Подскажите, естьли какая-то возможность обнулять все наличии ОПЦИЙ перед началом обновления?

[Aspirinnka1]

Ребята, а если установлен Image COMPRESSOR, то webp должен нормально отображаться?

Я парсю картинки, но они в вебп и не отображаются на сайте. Пробовал преобразовать их в JPEG, но там происходит глюк и вместо 9 разных картинок я получаю 9 одинаковых

[Aspirinnka1]

30.09.2022 в 10:44, yurok79 сказал:

Подскажите, естьли какая-то возможность обнулять все наличии ОПЦИЙ перед началом обновления?

а зачем? парсите новые значения и всего делов. Нет?

[Kiyoshi]

30.09.2022 в 03:44, yurok79 сказал:

Подскажите, естьли какая-то возможность обнулять все наличии ОПЦИЙ перед началом обновления?

Здравствуйте есть но только с товара для этого в редакторе товара на вкладке действие выберете Удалить опций в товаре или можете во вкладке парcинга в им в опциях выбрать удалять все опций и загружать заново.

Змінено 30 вересня 2022 користувачем Kiyoshi