[Поддержка] SimplePars - Универсальный парсер для ИМ

[Rassol2]

1 минуту назад, Mixxxa163 сказал:

заметил опечатку http://prntscr.com/1v4uhr3

Да спасибо, поправлю.

[partshez]

19 минут назад, Mixxxa163 сказал:

заметил опечатку http://prntscr.com/1v4uhr3

Опечаток много. На скорость и качество парсинга не влияет 

[Rassol2]

Только что, partshez сказал:

Опечаток много. На скорость и качество парсинга не влияет 

О да ))

[Mixxxa163]

58 минут назад, partshez сказал:

Опечаток много. На скорость и качество парсинга не влияет 

..только на рассмотрение автору, в рамках улучшения юзабилити и так отличного продукта)

[partshez]

Не могу спарсить категории  https://bereg.ua/ru/silikon-daiwa-bait-junkie-3-2-minnow.html

В коде страницы все вижу https://prnt.sc/1v5kmqy   В модуле только Главная  https://prnt.sc/1v5kujv

Как решить вопрос?

[Flint2000]

35 хвилин назад, partshez сказав:

Как решить вопрос?

Скорее всего там хлебные крошки формирует JS, поэтому никак

[Rassol2]

1 час назад, partshez сказал:

Не могу спарсить категории  https://bereg.ua/ru/silikon-daiwa-bait-junkie-3-2-minnow.html

В коде страницы все вижу https://prnt.sc/1v5kmqy   В модуле только Главная  https://prnt.sc/1v5kujv

Как решить вопрос?

Всегда смотрите в коде модуля а не в браузере.
В браузере могут подставляться данные которых нет изначально на странице.

[partshez]

26 минут назад, Rassol2 сказал:

Всегда смотрите в коде модуля а не в браузере.
В браузере могут подставляться данные которых нет изначально на странице.

Это ясно. Так и делаю всегда. Отказал человеку. Категории не получается вытащить, к сожалению.

[Mixxxa163]

Не могу спарсить атрибуты, весь день пытаюсь...( Никак. Дело в том, что есть такие атрибуты, маркированным списком -   http://prntscr.com/1v5yte5 и у них нет разделителя...разделитель у меня запятая. Такой исходный код http://prntscr.com/1v5zllw. Получается вот так http://prntscr.com/1v5zovu Может кто подскажет - поможет?

[Axelenz]

54 минуты назад, Mixxxa163 сказал:

Не могу спарсить атрибуты, весь день пытаюсь...( Никак. Дело в том, что есть такие атрибуты, маркированным списком -   http://prntscr.com/1v5yte5 и у них нет разделителя...разделитель у меня запятая. Такой исходный код http://prntscr.com/1v5zllw. Получается вот так http://prntscr.com/1v5zovu Может кто подскажет - поможет?

Разделителем можно взять диаметр, но не факт, что он идёт разделителем для всех атрибутов.

Как вариант, можно сделать замену диаметра на ": Ø"

Ø|: Ø

и потом

::|:

на тот случай, если два двоеточия получится где-то

Змінено 7 жовтня 2021 користувачем Axelenz

[Mixxxa163]

4 минуты назад, Axelenz сказал:

Разделителем можно взять диаметр, но не факт, что он идёт разделителем для всех атрибутов.

Как вариант, можно сделать замену диаметра на ": " + диаметр, а потом через замену

::|:

на тот случай, если два получится где-то

Разделитель для всех атрибутов у меня запятая. Думаю нужно регулярное выражение, которое в конец текста этих границ <div class="characteristic-value"> </div> добавит запятую..диаметр не у всех атрибутов, далее есть например такой http://prntscr.com/1v67eqf

 

 

[Axelenz]

2 минуты назад, Mixxxa163 сказал:

Разделитель для всех атрибутов у меня запятая. Думаю нужно регулярное выражение, которое в конец текста этих границ <div class="characteristic-value"> </div> добавит запятую..диаметр не у всех атрибутов, далее есть например такой http://prntscr.com/1v67eqf

Да, к сожалению далеко не все сайты наполняют информацией сайты так, что можно легко это спарсить... Отсутствие симметричности и логики в размещении атрибутов намекает на дальнейшую доработку вручную... сам такое не люблю...

[Mixxxa163]

5 минут назад, Mixxxa163 сказал:

Разделитель для всех атрибутов у меня запятая. Думаю нужно регулярное выражение, которое в конец текста этих границ <div class="characteristic-value"> </div> добавит запятую..диаметр не у всех атрибутов, далее есть например такой http://prntscr.com/1v67eqf

 

 

Материалы в контакте со средой это атрибут а остальное - значения, все по такому принципу...

[Axelenz]

7 минут назад, Mixxxa163 сказал:

Материалы в контакте со средой это атрибут а остальное - значения, все по такому принципу...

Если у Вас всё, что в title идёт, как Название атрибута, а в value соответственно, как его значение и так везде, то можно спарсить атрибуты. У Вас только получится, что в value они должны идти или списком или через разделитель. Т.е. это разные значения одного Атрибута фактически...

Но это не кусочками нужно видеть, как Вы даёте... не хватает общей картины, что там ещё есть под капотом... Ссылка на сайт есть вместо картинки ? )

Змінено 7 жовтня 2021 користувачем Axelenz

[Axelenz]

12 минут назад, Mixxxa163 сказал:

Материалы в контакте со средой это атрибут а остальное - значения, все по такому принципу...

Лучше скиньте проект, там всё будет видно... Если дело только в запятой, поставлю.

[Mixxxa163]

8 минут назад, Axelenz сказал:

Если у Вас всё, что в title идёт, как Название атрибута, а в value соответственно, как его значение и так везде, то можно спарсить атрибуты. У Вас только получится, что в value они должны идти или списком или через разделитель. Т.е. это разные значения одного Атрибута фактически...

Но это не кусочками нужно видеть, как Вы даёте... не хватает общей картины, что там ещё есть под капотом... Ссылка на сайт есть вместо картинки ? )

есть конечно)..https://www.vega.com/ru/products/product-catalog/interface/guided-wave-radar/vegaflex-81 Наименование раскрывающихся списков не нужны:
Технические данные, Сертификаты, Индикация и настройка. Нужны только сами атрибуты, и их значения. Пример http://prntscr.com/1v6atzu. И после как подсказал @Rassol2 применить регулярку для замены запятой в дробях на точку, не меняя ее в значениях (словах)..{reg[#(\d)\040?,\040?(\d)#]}|$1.$2 http://prntscr.com/1v6bohl

 

[Mixxxa163]

1 час назад, Axelenz сказал:

Лучше скиньте проект, там всё будет видно... Если дело только в запятой, поставлю.

 

SPsetting-2.json

[Axelenz]

И Вы хотите парсить такие не простые атрибуты без использования повторяющихся границ ???

[Mixxxa163]

16 минут назад, Axelenz сказал:

И Вы хотите парсить такие не простые атрибуты без использования повторяющихся границ ???

не принципиально, я рассматриваю этот метод тоже..

[Axelenz]

9 минут назад, Mixxxa163 сказал:

не принципиально, я рассматриваю этот метод тоже..

characteristic-title">|
<div class="characteristic-values{skip}>|{csvnc}
[{skip}]|
{reg[#\s+</div>\s+<div class="characteristic-value">\s+#mu]}|,
<{skip}>|
{reg[#\v#]}|
{reg[#\h{2,}#]}| 
{reg[#\s+?{csvnc}\s+?#]}|{csvnc}

В повторяющихся границах вставьте, может где подправьте...

 

 

SPsetting-91.json

[Mixxxa163]

28 минут назад, Axelenz сказал:

characteristic-title">|
<div class="characteristic-values{skip}>|{csvnc}
[{skip}]|
{reg[#\s+</div>\s+<div class="characteristic-value">\s+#mu]}|,
<{skip}>|
{reg[#\v#]}|
{reg[#\h{2,}#]}| 
{reg[#\s+?{csvnc}\s+?#]}|{csvnc}

В повторяющихся границах вставьте, может где подправьте...

 

 

SPsetting-91.json 4 \u043a\u0411 · 1 download

Благодарствую Боярин!) работает, но не разберусь, пропала буква х http://prntscr.com/1v6vuxw и может быть в этой связи некоторые атрибуты остались пустыми без значений, а некоторые вообще не попали на предпросмотр, хотя в поиск-замене они есть http://prntscr.com/1v6w06q..?

[Axelenz]

9 минут назад, Mixxxa163 сказал:

Благодарствую Боярин!) работает, но не разберусь, пропала буква х http://prntscr.com/1v6vuxw и может быть в этой связи некоторые атрибуты остались пустыми без значений, а некоторые вообще не попали на предпросмотр, хотя в поиск-замене они есть http://prntscr.com/1v6w06q..?

Скиньте в личку этот новый проект, посмотрю, поправлю...

То, что работает я и сам удивлён )

Змінено 7 жовтня 2021 користувачем Axelenz

[Mixxxa163]

11 часов назад, Axelenz сказал:

Скиньте в личку этот новый проект, посмотрю, поправлю...

То, что работает я и сам удивлён )

Благодарю за помощь, по итогу все работает отлично!)..

[dmitriy2506]

день добрый может кто сталкивался с проблемой зависания сайта и всего впс сервера во время парсинга когда парсер попадает на пустую страницу или страницу категории где нет товара это происходит во время парсинга по крону

во время парсинга не по крону происходит 1 зависание и парсинг останавливается

Змінено 8 жовтня 2021 користувачем dmitriy2506

[kostya242]

Как сохранять форматирование текста (абзацы, табы, маркированные списки) с донора при парсинге? Сейчас всё сливается в одну кучу:

 

Спойлер