[Поддержка] SimplePars - Универсальный парсер для ИМ

[Alexcctv]

Добрый день столкнулся с проблемой что не парсится пагинация 
https://www.aroma-butik.ru/Montale.html
пробую даже парсить от и до но безуспешно) Сайт проблемный ужас что посоветуете? Пробовал даже отдельно бренд парсить но ссылки не собирает почему то, только чего добился 1 страницы в 51 товар спарсить, а остальное не выходит, можно конечно поизвращатся так же спарсить как 51 товар, но товара там очень много, тот сайт который гигант) К стати с прокси все нормально нареканий нету

[Rassol2]

7 минут назад, Alexcctv сказал:

Добрый день столкнулся с проблемой что не парсится пагинация 
https://www.aroma-butik.ru/Montale.html
пробую даже парсить от и до но безуспешно) Сайт проблемный ужас что посоветуете? Пробовал даже отдельно бренд парсить но ссылки не собирает почему то, только чего добился 1 страницы в 51 товар спарсить, а остальное не выходит, можно конечно поизвращатся так же спарсить как 51 товар, но товара там очень много, тот сайт который гигант) К стати с прокси все нормально нареканий нету

Вот ваша ссылка.
Пустой проект, не указаны никакие фильтры.
 

Спойлер

Как видим модуль спокойно собирает ссылки пагинации.
А значит внимательно просмотре фильтры.

Может модуль собирает, просто вы их отфильтровываете ?

[Alexcctv]

1 час назад, Rassol2 сказал:

Вот ваша ссылка.
Пустой проект, не указаны никакие фильтры.
 

  Показать контент

Как видим модуль спокойно собирает ссылки пагинации.
А значит внимательно просмотре фильтры.

Может модуль собирает, просто вы их отфильтровываете ?

он добавляет много лишего)
монталя всего 126 позиций, а ссылок 300

[Rassol2]

28 минут назад, Alexcctv сказал:

он добавляет много лишего)
монталя всего 126 позиций, а ссылок 300

Он добавляет только те ссылки которые соответствуют фильтрам.
А значит что.
1. Ссылки парсятся. С этим нет проблем.
2. Нужно настроить фильтры как вам нужно. И все.

[Rassol2]

1 час назад, Alexcctv сказал:

он добавляет много лишего)
монталя всего 126 позиций, а ссылок 300

ой, смотрю халтурите, ой халтурите.

Все настройки ваши за минуту делаются. Причем тут ну вот ничего сложного нету. Странно что вы об этом написали, вроде не первый день с модулем работаете.
 

Спойлер

Указываем границы и модуль идет только по страницам пагинации.
Указываем префикс /product/
И модуль собирает ссылки только на товар.

В конце получаю 128 ссылок. Ровно столько сколько есть в ветке.

Халтурите однако.

[Rassol2]

А может и не халтурите.
В последнем релизе есть баг.
Нужно в файле /admin/model/catalo/simplepars.php
В строке 505

Заменить это
$data_link = $this->mageTidyLinks($data_links, $url);
на это

$data_link = $this->madeTidyLinks($data_links, $url);

Что бы вышло так.
 

Спойлер

У меня это исправлено, по этому работает. А у вас по этой причине может не отрабатывать сбор ссылок с использованием области.
А точнее
Текст начала сбора  и Текст конца сбора

[Axelenz]

5 часов назад, Rassol2 сказал:

В последнем релизе есть баг.

 

У меня перестали фильтры отрабатывать нормально. Т.е. указываю фильтрацию в Сборе ссылок->Ссылки на товар и проходят все ссылки не зависимо от того, что указано в фильтре. Чтобы убрать нежелательное необходимо нажать на Повторить фильтрацию, а раньше они туда просто не пападали, всё автоматически фильтровалось, при указании Не должно быть в ссылках на товар. Или это так задумано ?

[Kiyoshi]

Странно у меня все нормально отрабатывает можно пример.

[Axelenz]

Сейчас с примером не получится, всё сделал, как мне нужно. Но в следующий раз сброшу фото. Работаю на локалке, но раньше то всё отрабатывало...

[cccrow]

Почитал отзывы, неужели он так хорош(не спам, реальный пользователь-ищу такой модуль) -( устал заполнять в ручную) , скажите этот модуль привязан к домену, или после покупки я смогу установить на разные домены, возможен кэшбэк если не понравится

[Rassol2]

25 минут назад, cccrow сказал:

Почитал отзывы, неужели он так хорош(не спам, реальный пользователь-ищу такой модуль) -( устал заполнять в ручную) , скажите этот модуль привязан к домену, или после покупки я смогу установить на разные домены, возможен кэшбэк если не понравится

И да и нет, так вышло что администрация на днях удалила три имеющихся негативных отзыва.
А остались только позитивные. Но они настоящие

Лицензия на один домен. Парсить можете любое количество сайтов. Без ограничения.

Кешбек, это все по условиям форума. За это автора модулей не отвечают. И скорее нет чем да. Так что луче за ранние быть уверенным что он вам нужен.

[Rassol2]

38 минут назад, Axelenz сказал:

Или это так задумано ?

нет, мне кажется что вы что то сделали не так.
Когда будет пример скинете проверю, вдруг баг нашли.

[Axelenz]

3 минуты назад, Rassol2 сказал:

Когда будет пример скинете проверю, вдруг баг нашли.

Хорошо, я тоже сначала подумал, что просто показалось, но гонял его много раз и не работает фильтр, как ранее.

[Rassol2]

7 минут назад, Axelenz сказал:

Хорошо, я тоже сначала подумал, что просто показалось, но гонял его много раз и не работает фильтр, как ранее.

дайте мне форму где не работает. Я погоняю.

Мне сегодня написал человек что криво работает фильтрация я гонял около часа. Ковырял код модуля. А потом оказалось что все верно работает.
Просто на сайте доноре в определенный момент начинают идти ссылки на страницы под домена new. А в фильтре установлено парсить только внутренние ссылки.
Так что я сейчас скептически настроен.
Скидывайте форму будем разбираться.

Единственное что найден баг в фильтре, о нем написал сегодня
https://opencartforum.com/topic/123017-podderzhka-simplepars-universalnyy-parser-dlya-im/?do=findComment&comment=1486181

[Shaer]

19 часов назад, Rassol2 сказал:

 

Лицензия на один домен

а если при покупке не указывать домен то можно парсер юзать сразу на нескольких?

[Rassol2]

2 часа назад, Shaer сказал:

а если при покупке не указывать домен то можно парсер юзать сразу на нескольких?

Если вам необходимо использовать на разных сайтах.
То для каждого сайта необходимо приобретать отдельно лицензию.

Лицензия распространяется на один сайт. И если при покупки не указали доменное имя это не значит что можно везде ставить.

[Kosteus]

Здравствуйте!
Как спарсить например бренд с четкой границей начала и конца, а внутри переменная ссылка?

[Rassol2]

6 минут назад, Kosteus сказал:

Здравствуйте!
Как спарсить например бренд с четкой границей начала и конца, а внутри переменная ссылка?

 

Спойлер

 

Ссылку вырезаем на уровне поиск замены.
то есть парсим с ссылкой. А затем на вкладке поиск замена добавляем правило <{skip}>|
на выходе чистое имя бренда.

[Rassol2]

@Kosteus Собственно пример.
 

Спойлер

А подробности тут - https://simplepars.top/index.php?page=note&note_id=9

[Rassol2]

Обновление 2.9-9_beta

 

Исправления.
Исправлена ошибка при импорте формы, когда вы пытаетесь импортировать один и тот же проект в два разных, модуль не позволял импортировать ссылки.

Так же исправил ошибку о которой писал здесь.
https://opencartforum.com/topic/123017-podderzhka-simplepars-universalnyy-parser-dlya-im/?do=findComment&comment=1486181

 

Новое

 

Спойлер

 

Добавлен блок Данные

Здесь я вроде учел все пожелания, добавил даже те поля что по моему мнению не имеют особого смысла.
 

Спойлер

Так же информация по всем этим полям доступна в логах.
 

Спойлер

Правда логи уже раздуваются до неприличия. И нужно что то с ними делать.

Для обновления необходимо выполнить /inst.php

PS. Я постарался и учел все просьбы по реализации дополнительных полей, а теперь бы хотел попросить что бы вы оставили отзыв о модуле, это помогает его продвигать.
https://opencartforum.com/files/file/6362-simplepars-universalnyy-parser-dlya-im/?tab=reviews

 

[bodyak0]

Добрый день, как боротся с символом пробела  8&quot;, а то в название лезет))Или через поиск замену удалять его?

[Rassol2]

2 минуты назад, bodyak0 сказал:

Добрый день, как боротся с символом пробела  8&quot;, а то в название лезет))Или через поиск замену удалять его?

Здравствуйте.

да через поиск замену.

правда это вроде не пробел а двойные кавычки. "

[bodyak0]

6 хвилин назад, Rassol2 сказав:

Здравствуйте.

да через поиск замену.

правда это вроде не пробел а двойные кавычки. "

Спасибо)

[Rassol2]

Только что, bodyak0 сказал:

Спасибо)

Не за что.

[bodyak0]

16 хвилин назад, Rassol2 сказав:

Не за что.

А еще такой вопрос если в описании сайта донора имеется фото, как его сделать чтобы оно было на моем сервере?
            <p><p>Инструмент предназначен для демонтажа осложненных пьезоэлектрических и электромагнитных форсунок дизельных двигателей, устанавливаемых на двигатели MERCEDES с системой впрыска топлива Common Rail выпускавшихся с 1998 года.<br />Автомобили: МВ C-Class, E-Class, Sprinter - 108 CDi, 110 CDi 16v, 112 CDi 16v, C220 CDi 16v,<br />E200 CDi 16v, Jeep Grand Cherokee 2.7 CRD;<br />Двигатели: дизельные CDI OM 611, 612, 613.</p>
<p><img src="/public/upload/7b8494dc34557156184e17c46d453db6-2016-01-11-12-15.jpg" alt="" width="1389" height="993" /></p></p>
я просто делаю через поиск замену вставляю ихний сайт, а мне нужно чтобы был мой))