Перейти к публикации
Поиск в
  • Дополнительно...
Искать результаты, содержащие...
Искать результаты в...

Рекомендованные сообщения

Добрый день столкнулся с проблемой что не парсится пагинация 
https://www.aroma-butik.ru/Montale.html
пробую даже парсить от и до но безуспешно) Сайт проблемный ужас что посоветуете? Пробовал даже отдельно бренд парсить но ссылки не собирает почему то, только чего добился 1 страницы в 51 товар спарсить, а остальное не выходит, можно конечно поизвращатся так же спарсить как 51 товар, но товара там очень много, тот сайт который гигант) К стати с прокси все нормально нареканий нету

Ссылка на комментарий
Поделиться на других сайтах


7 минут назад, Alexcctv сказал:

Добрый день столкнулся с проблемой что не парсится пагинация 
https://www.aroma-butik.ru/Montale.html
пробую даже парсить от и до но безуспешно) Сайт проблемный ужас что посоветуете? Пробовал даже отдельно бренд парсить но ссылки не собирает почему то, только чего добился 1 страницы в 51 товар спарсить, а остальное не выходит, можно конечно поизвращатся так же спарсить как 51 товар, но товара там очень много, тот сайт который гигант) К стати с прокси все нормально нареканий нету

Вот ваша ссылка.
Пустой проект, не указаны никакие фильтры.
 

Спойлер

ox11ewJ.png

Как видим модуль спокойно собирает ссылки пагинации.
А значит внимательно просмотре фильтры.

Может модуль собирает, просто вы их отфильтровываете ?

Ссылка на комментарий
Поделиться на других сайтах

1 час назад, Rassol2 сказал:

Вот ваша ссылка.
Пустой проект, не указаны никакие фильтры.
 

  Показать контент

ox11ewJ.png

Как видим модуль спокойно собирает ссылки пагинации.
А значит внимательно просмотре фильтры.

Может модуль собирает, просто вы их отфильтровываете ?

он добавляет много лишего)
монталя всего 126 позиций, а ссылок 300

Ссылка на комментарий
Поделиться на других сайтах


28 минут назад, Alexcctv сказал:

он добавляет много лишего)
монталя всего 126 позиций, а ссылок 300

Он добавляет только те ссылки которые соответствуют фильтрам.
А значит что.
1. Ссылки парсятся. С этим нет проблем.
2. Нужно настроить фильтры как вам нужно. И все.

Ссылка на комментарий
Поделиться на других сайтах

1 час назад, Alexcctv сказал:

он добавляет много лишего)
монталя всего 126 позиций, а ссылок 300

ой, смотрю халтурите, ой халтурите.


Все настройки ваши за минуту делаются. Причем тут ну вот ничего сложного нету. Странно что вы об этом написали, вроде не первый день с модулем работаете.
 

Спойлер

KbFWNyO.png

Указываем границы и модуль идет только по страницам пагинации.
Указываем префикс /product/
И модуль собирает ссылки только на товар.

В конце получаю 128 ссылок. Ровно столько сколько есть в ветке.

Халтурите однако. :)

Ссылка на комментарий
Поделиться на других сайтах

А может и не халтурите.
В последнем релизе есть баг.
Нужно в файле /admin/model/catalo/simplepars.php
В строке 505

Заменить это
$data_link = $this->mageTidyLinks($data_links, $url);
на это

$data_link = $this->madeTidyLinks($data_links, $url);

Что бы вышло так.
 

Спойлер

uSmhhAy.png

У меня это исправлено, по этому работает. А у вас по этой причине может не отрабатывать сбор ссылок с использованием области.
А точнее
Текст начала сбора  и Текст конца сбора

Ссылка на комментарий
Поделиться на других сайтах

5 часов назад, Rassol2 сказал:

В последнем релизе есть баг.

 

У меня перестали фильтры отрабатывать нормально. Т.е. указываю фильтрацию в Сборе ссылок->Ссылки на товар и проходят все ссылки не зависимо от того, что указано в фильтре. Чтобы убрать нежелательное необходимо нажать на Повторить фильтрацию, а раньше они туда просто не пападали, всё автоматически фильтровалось, при указании Не должно быть в ссылках на товар. Или это так задумано ?

Ссылка на комментарий
Поделиться на других сайтах


Сейчас с примером не получится, всё сделал, как мне нужно. Но в следующий раз сброшу фото. Работаю на локалке, но раньше то всё отрабатывало...

  • +1 1
Ссылка на комментарий
Поделиться на других сайтах


Почитал отзывы, неужели он так хорош(не спам, реальный пользователь-ищу такой модуль) -( устал заполнять в ручную) , скажите этот модуль привязан к домену, или после покупки я смогу установить на разные домены, возможен кэшбэк если не понравится

Ссылка на комментарий
Поделиться на других сайтах


25 минут назад, cccrow сказал:

Почитал отзывы, неужели он так хорош(не спам, реальный пользователь-ищу такой модуль) -( устал заполнять в ручную) , скажите этот модуль привязан к домену, или после покупки я смогу установить на разные домены, возможен кэшбэк если не понравится

И да и нет, так вышло что администрация на днях удалила три имеющихся негативных отзыва.
А остались только позитивные. Но они настоящие :)

Лицензия на один домен. Парсить можете любое количество сайтов. Без ограничения.

Кешбек, это все по условиям форума. За это автора модулей не отвечают. И скорее нет чем да. Так что луче за ранние быть уверенным что он вам нужен.

Ссылка на комментарий
Поделиться на других сайтах

38 минут назад, Axelenz сказал:

Или это так задумано ?

нет, мне кажется что вы что то сделали не так.
Когда будет пример скинете проверю, вдруг баг нашли.

Ссылка на комментарий
Поделиться на других сайтах

3 минуты назад, Rassol2 сказал:

Когда будет пример скинете проверю, вдруг баг нашли.

Хорошо, я тоже сначала подумал, что просто показалось, но гонял его много раз и не работает фильтр, как ранее.

Ссылка на комментарий
Поделиться на других сайтах


7 минут назад, Axelenz сказал:

Хорошо, я тоже сначала подумал, что просто показалось, но гонял его много раз и не работает фильтр, как ранее.

дайте мне форму где не работает. Я погоняю.

Мне сегодня написал человек что криво работает фильтрация я гонял около часа. Ковырял код модуля. А потом оказалось что все верно работает.
Просто на сайте доноре в определенный момент начинают идти ссылки на страницы под домена new. А в фильтре установлено парсить только внутренние ссылки.
Так что я сейчас скептически настроен.
Скидывайте форму будем разбираться.

Единственное что найден баг в фильтре, о нем написал сегодня
https://opencartforum.com/topic/123017-podderzhka-simplepars-universalnyy-parser-dlya-im/?do=findComment&comment=1486181

Ссылка на комментарий
Поделиться на других сайтах

19 часов назад, Rassol2 сказал:

 

Лицензия на один домен

а если при покупке не указывать домен то можно парсер юзать сразу на нескольких?

Ссылка на комментарий
Поделиться на других сайтах


2 часа назад, Shaer сказал:

а если при покупке не указывать домен то можно парсер юзать сразу на нескольких?

Если вам необходимо использовать на разных сайтах.
То для каждого сайта необходимо приобретать отдельно лицензию.

Лицензия распространяется на один сайт. И если при покупки не указали доменное имя это не значит что можно везде ставить. :)

Ссылка на комментарий
Поделиться на других сайтах

Здравствуйте!
Как спарсить например бренд с четкой границей начала и конца, а внутри переменная ссылка?

image.png.ba74d851d0e8a0264dcf17ce7066ecf2.png
image.png.200010ad31c506ebe5e49bd8a83f8a7f.png

Ссылка на комментарий
Поделиться на других сайтах


6 минут назад, Kosteus сказал:

Здравствуйте!
Как спарсить например бренд с четкой границей начала и конца, а внутри переменная ссылка?

image.png.ba74d851d0e8a0264dcf17ce7066ecf2.png
 

Спойлер

image.png.200010ad31c506ebe5e49bd8a83f8a7f.png

 

Ссылку вырезаем на уровне поиск замены.
то есть парсим с ссылкой. А затем на вкладке поиск замена добавляем правило <{skip}>|
на выходе чистое имя бренда.

Ссылка на комментарий
Поделиться на других сайтах

@Kosteus Собственно пример.
 

Спойлер

fghs6ei.png

А подробности тут - https://simplepars.top/index.php?page=note&note_id=9

Ссылка на комментарий
Поделиться на других сайтах

Обновление 2.9-9_beta

 

Исправления.
Исправлена ошибка при импорте формы, когда вы пытаетесь импортировать один и тот же проект в два разных, модуль не позволял импортировать ссылки.


Так же исправил ошибку о которой писал здесь.
https://opencartforum.com/topic/123017-podderzhka-simplepars-universalnyy-parser-dlya-im/?do=findComment&comment=1486181

 

Новое

 

Спойлер

R8CvaFs.png

 


Добавлен блок Данные


Здесь я вроде учел все пожелания, добавил даже те поля что по моему мнению не имеют особого смысла.
 

Спойлер

Zsjr23j.png


Так же информация по всем этим полям доступна в логах.
 

Спойлер

b7C5m60.png


Правда логи уже раздуваются до неприличия. И нужно что то с ними делать.

Для обновления необходимо выполнить /inst.php

PS. Я постарался и учел все просьбы по реализации дополнительных полей, а теперь бы хотел попросить что бы вы оставили отзыв о модуле, это помогает его продвигать.
https://opencartforum.com/files/file/6362-simplepars-universalnyy-parser-dlya-im/?tab=reviews

 

  • +1 3
Ссылка на комментарий
Поделиться на других сайтах

Добрый день, как боротся с символом пробела  8&quot;, а то в название лезет))Или через поиск замену удалять его?

Ссылка на комментарий
Поделиться на других сайтах


2 минуты назад, bodyak0 сказал:

Добрый день, как боротся с символом пробела  8&quot;, а то в название лезет))Или через поиск замену удалять его?

Здравствуйте.

да через поиск замену.

правда это вроде не пробел а двойные кавычки. "

Ссылка на комментарий
Поделиться на других сайтах

6 хвилин назад, Rassol2 сказав:

Здравствуйте.

да через поиск замену.

правда это вроде не пробел а двойные кавычки. "

Спасибо)

Ссылка на комментарий
Поделиться на других сайтах


Только что, bodyak0 сказал:

Спасибо)

Не за что.

Ссылка на комментарий
Поделиться на других сайтах

16 хвилин назад, Rassol2 сказав:

Не за что.

А еще такой вопрос если в описании сайта донора имеется фото, как его сделать чтобы оно было на моем сервере?
            <p><p>Инструмент предназначен для демонтажа осложненных пьезоэлектрических и электромагнитных форсунок дизельных двигателей, устанавливаемых на двигатели MERCEDES с системой впрыска топлива Common Rail выпускавшихся с 1998 года.<br />Автомобили: МВ C-Class, E-Class, Sprinter - 108 CDi, 110 CDi 16v, 112 CDi 16v, C220 CDi 16v,<br />E200 CDi 16v, Jeep Grand Cherokee 2.7 CRD;<br />Двигатели: дизельные CDI OM 611, 612, 613.</p>
<p><img src="/public/upload/7b8494dc34557156184e17c46d453db6-2016-01-11-12-15.jpg" alt="" width="1389" height="993" /></p></p>
я просто делаю через поиск замену вставляю ихний сайт, а мне нужно чтобы был мой))

Ссылка на комментарий
Поделиться на других сайтах


Создайте аккаунт или войдите в него для комментирования

Вы должны быть пользователем, чтобы оставить комментарий

Создать аккаунт

Зарегистрируйтесь для получения аккаунта. Это просто!

Зарегистрировать аккаунт

Войти

Уже зарегистрированы? Войдите здесь.

Войти сейчас
 Поделиться

×
×
  • Создать...

Важная информация

На нашем сайте используются файлы cookie и происходит обработка некоторых персональных данных пользователей, чтобы улучшить пользовательский интерфейс. Чтобы узнать для чего и какие персональные данные мы обрабатываем перейдите по ссылке. Если Вы нажмете «Я даю согласие», это означает, что Вы понимаете и принимаете все условия, указанные в этом Уведомлении о Конфиденциальности.