[Поддержка] SimplePars - Универсальный парсер для ИМ

[Flint2000]

10 хвилин назад, Malciska сказав:

Может кто подскажет каким способом можно защититься от парсинга?

 

разрешить запросы только с localhost

[Malciska]

19 минут назад, Flint2000 сказал:

разрешить запросы только с localhost

 

Можно поподробнее? Где, что и как 🤦‍♀️🤷‍♀️🤷‍♂️

 

Идея @Rassol2 сделать дополнение (платное) анти-парсинг  

Наверняка разработчик парсер модуля может лучше знать как защититься от парсинга

Змінено 9 липня 2021 користувачем Malciska

[Reanimaster]

4 часа назад, partshez сказал:

Нет. Попробовал ссылку и прокси. Не получилось. Бросил, пошел дальше. Ссылка не обработана. Прокси в следующий раз по очереди опять попытается отработать ссылку. Не получилось. Уже две ссылки не обработаны... И так далее. Этот прокси срочно отключить

Блин. Плохо. Когда 300к ссылок по крону обрабатываешь - так и месяц можно...

[Reanimaster]

3 часа назад, Malciska сказал:

Cloudfare - поможет?

Нет

Хотя - платный пожалуй может помочь. Но там и ценник нормальный в месяц.

Змінено 9 липня 2021 користувачем Reanimaster

[Reanimaster]

3 часа назад, Flint2000 сказал:

разрешить запросы только с localhost

[Reanimaster]

3 часа назад, Malciska сказал:

Может кто подскажет каким способом можно защититься от парсинга?

Могу сделать на платной основе. Если интересно - стучитесь в личку.

[dmitriy2506]

день добрый

нужно спарсить карточку товара, но товар на сайте доноре умножен на опцию пример

умеет ли парсер данные с нескольких ссылок загрузить в 1 карточку товара

конкретно в этом данном случае мне нужно по всем размерам матрасов собрат старую (зачёркнутую) цену, олд прайс типа эта инфа оступна только если переходить поссылке

[partshez]

9 часов назад, dmitriy2506 сказал:

день добрый

нужно спарсить карточку товара, но товар на сайте доноре умножен на опцию пример

умеет ли парсер данные с нескольких ссылок загрузить в 1 карточку товара

конкретно в этом данном случае мне нужно по всем размерам матрасов собрат старую (зачёркнутую) цену, олд прайс типа эта инфа оступна только если переходить поссылке

Пробуйте с этого сайта брать  https://emm.com.ua/matras-indigo

[dmitriy2506]

там нет украинского языка)

парсер я так понял так не умеет

[partshez]

29 минут назад, dmitriy2506 сказал:

там нет украинского языка)

парсер я так понял так не умеет

С первого сайта парсите все, включая украинский. Настрайваете второй сайт по идентификатору. Парсите с обновлением только основную цену и цены опций. Можно настроить наличие для опций при желании. В основной указываете две цены /акция/. Для опций только старую. Акционная сработает при наличии доп модуля /акции для опций выставляем. 

В итоге будет два языка с актуальными ценами и наличием

Для ЕММ другого варианта не нашел. Или парсить у конкурентов. Е-матрас у меня не получилось парсить

Змінено 10 липня 2021 користувачем partshez

[Reanimaster]

12 часов назад, dmitriy2506 сказал:

мне нужно по всем размерам матрасов собрат старую (зачёркнутую) цену, олд прай

Так там же просто 20% ровно разница. Сделайте стандартные опции, но цену +20% да и все.

[dmitriy2506]

там на каждый матрас своя скидка и цена по акции это 80% от старой цены, 20% от старой цены и 20% от новой цены это разные числа)  поэтому мне нужно 100*4455/80 и так на каждое значение опции и менять значение % на каждый матрас

в екселе я не понимаю как такое сделать учитывая что опен карт выводит все данные по опциями в одной ячейки в несколько строчек

[Shaer]

в инструкци сказано что первое фото становится заглавным, но предпросмотр стартового фото показывает ошибку хотя остальные картинки норм, в чем может быть проблема?

 

 

Змінено 10 липня 2021 користувачем Shaer

[partshez]

31 минуту назад, Shaer сказал:

в инструкци сказано что первое фото становится заглавным, но предпросмотр стартового фото показывает ошибку хотя остальные картинки норм, в чем может быть проблема?

 

 

В Предпросмотре- Изображения попробуйте открыть первое изображение по ссылке. Найдите битое фото. Удалите в Замене. Задайте границы фото. Удалите настройку Главного фото. Посмотрите в Логах, что написано про битое фото... Возможно, первое фото другого формата или вообще видео

Змінено 10 липня 2021 користувачем partshez

[Reanimaster]

3 часа назад, dmitriy2506 сказал:

в екселе я не понимаю как такое сделать

А зачем ексель, если SimplePars позволяет проводить арифметические операции?

А цену товара можно использовать в формуле в виде границы парсинга. Тобишь будет переменная, а не фикс значение.

Змінено 10 липня 2021 користувачем Reanimaster

[Shaer]

12 часов назад, partshez сказал:

В Предпросмотре- Изображения попробуйте открыть первое изображение по ссылке. Найдите битое фото. Удалите в Замене. Задайте границы фото. Удалите настройку Главного фото. Посмотрите в Логах, что написано про битое фото... Возможно, первое фото другого формата или вообще видео

норм фото, в превьющках стартовое фото отображается корректно но не показывается как основное, и да, линк битый и вообще не совпадает ни разу с тем который у донора, причем если у товара только одно фото то некачается вообще, если несколько то вроде качаются все но стартовое (то которое первое) не отображается

[Rassol2]

3 минуты назад, Shaer сказал:

норм фото, в превьющках стартовое фото отображается корректно но не показывается как основное, и да, линк битый и вообще не совпадает ни разу с тем который у донора, причем если у товара только одно фото то некачается вообще, если несколько то вроде качаются все но стартовое (то которое первое) не отображается

Скидывайте файл настроек гляну что у вас

[hitmanabs]

Подскажите пожалуйста, по каким причинам файл json не импортируется ( не загружается ) в симплпарс, пишет просто - файл не загружен

В логах ничего не пишет

Может где-то ограничения на размер файлов ?

 

[Rassol2]

14 минут назад, hitmanabs сказал:

Подскажите пожалуйста, по каким причинам файл json не импортируется ( не загружается ) в симплпарс, пишет просто - файл не загружен

В логах ничего не пишет

Может где-то ограничения на размер файлов ?

 

Здравствуйте.
напишите мне в лс где вы приобретали модуль и норм заказа.
так же скиньте файл json о котором идет речь и я все проверю.

[Mixxxa163]

Добрый день. Модуль может парсить документацию? pdf. из тапа в карточке товара.

[Reanimaster]

Добрый день. Есть предложение/хотелка.
Есть модуль Attribute_Text_Select для модуля FilterVier. Насколько я понял в нем аналогичные таблицы атрибутов. Этот модуль позволяет не пересоздавать фильтры каждый раз.
В общем - речь об адаптации под модуль. По аналогии с остальными.

[Rassol2]

2 минуты назад, Reanimaster сказал:

Добрый день. Есть предложение/хотелка.
Есть модуль Attribute_Text_Select для модуля FilterVier. Насколько я понял в нем аналогичные таблицы атрибутов. Этот модуль позволяет не пересоздавать фильтры каждый раз.
В общем - речь об адаптации под модуль. По аналогии с остальными.

Модуль ocFilter
не имеет свою собственную таблицу атрибутов, не требует пересоздания фильтров. Не требует адаптации. Использует атрибуты из коробки.
Почему тогда не он ?
 

[Rassol2]

2 часа назад, Mixxxa163 сказал:

Добрый день. Модуль может парсить документацию? pdf. из тапа в карточке товара.

Пока еше не сделал.
Но есть вопрос. Куда вы эту документацию загрузить хотите ?
У себя.

[Reanimaster]

22 минуты назад, Rassol2 сказал:

Почему тогда не он ?

Потому что он функционален как палка. А уже 21 век

Не умеет выводиться нигде, кроме категорий - это как минимум.

А FilterVier и выводится везде, кроме поиска. И атрибуты пересоздавать не нужно каждый раз после добавления. Имеет перелинковку атрибутов с фильтром. В разы лучше по СЕО.

Посмотрите пример. И это делается на автомате. Достаточно в админке в модуле все верно настроить.
http://demo-fv-seo-2.oc-vier.ru/netbook/acer-182-n

[Reanimaster]

26 минут назад, Rassol2 сказал:

не требует пересоздания фильтров.

Требует

 

OcFilter и FitlerVier сравнивать - это как сравнивать возможности парсинга SimplePars и АОП.
P.S. Это не камень в чей то огород, а реальный анализ возможностей.

Змінено 12 липня 2021 користувачем Reanimaster