[Поддержка] SimplePars - Универсальный парсер для ИМ

[yastman]

25.04.2022 в 14:45, Rassol2 сказал:

Не совсем понял суть того что вы написали.

при парисинге в интернет магазин ,включена опция "HPM поле для связи товара"  http://joxi.ru/8AnlJnYHN8PpXm

иногда бывает , что в товаре идентификатор  HPM пустой, в итоге  модуль с пустым идентификатором связывает товары между  собой.

я бы хотел добавить какой то способ(правило) что если идентификатор hpm пустой , то такие товары не связывать между собой

 

[Rassol2]

25.04.2022 в 06:57, yastman сказал:

при парисинге в интернет магазин ,включена опция "HPM поле для связи товара"  http://joxi.ru/8AnlJnYHN8PpXm

иногда бывает , что в товаре идентификатор  HPM пустой, в итоге  модуль с пустым идентификатором связывает товары между  собой.

я бы хотел добавить какой то способ(правило) что если идентификатор hpm пустой , то такие товары не связывать между собой

 

Если поле связи пустое то модуль не берет такой товар для связи.

[partshez]

обнулено

Змінено 25 квітня 2022 користувачем partshez

[marrekk]

Добрый день. Пробую запустить парсинг в ИМ из yml. В процессе заполнения настроек парсинга в окне предпросмотра возникает вот такая ошибка. В дальнейшем когда перехожу непосредственно на вкладку Парсинг в ИМ, при попытке запустить парсинг снова появляется эта ошибка. Подскажите в чем может быть проблема? 

[Rassol2]

25.04.2022 в 08:01, marrekk сказал:

Добрый день. Пробую запустить парсинг в ИМ из yml. В процессе заполнения настроек парсинга в окне предпросмотра возникает вот такая ошибка. В дальнейшем когда перехожу непосредственно на вкладку Парсинг в ИМ, при попытке запустить парсинг снова появляется эта ошибка. Подскажите в чем может быть проблема? 

Здравствуйте.

Во первых я не вижу вас в списке покупателей моего модуля. Напищите мне в лс номер вашего заказа и где вы приобретали модуль.
Во вторых это не ошибка, просто отключите пред просмотр и работайте дальше.
Понятное дело что пред просмотр браузера не может разобрать синтаксис yml если вы его из одного целого нарезали на кучу мелких.
Но в работе с yml вам нужен сам код а не пред просмотр.

[AntonVN]

Добрый день.

Подскажите пожалуйста, а если .xml находится на ftp, его как от можно спарсить? 

[Rassol2]

26.04.2022 в 05:47, AntonVN сказал:

Добрый день.

Подскажите пожалуйста, а если .xml находится на ftp, его как от можно спарсить? 

Здравствуйте.
Парсить можно только то до чего можно достаться по ссылке и http/s протоколам.
Можете сами выкачать положить его к себе и спарсить по ссылке на самого себя. Как вариант.

[AntonVN]

26.04.2022 в 17:03, Rassol2 сказал:

Здравствуйте.
Парсить можно только то до чего можно достаться по ссылке и http/s протоколам.
Можете сами выкачать положить его к себе и спарсить по ссылке на самого себя. Как вариант.

Спасибо, будем колдовать) Поставщик не желает открывать по http файл.

[Rassol2]

26.04.2022 в 06:31, AntonVN сказал:

Спасибо, будем колдовать) Поставщик не желает открывать по http файл.

Он может открыть его под паролем htpasswd и файл будет закрыт и работать с ним можно.

[Aspirinnka1]

Добрый день. 

Почитал инструкцию как работать с XML  и хочу уточнить: правильно ли я понимаю, что при парсинге через xml ссылку, мы на выходе получаем список ссылок на товары и далее по стандартной схеме Парсинг в ИМ?

А нельзя сразу файл такого формата парсить?

Идея была в обновлении цены товаров в дльнейшем. Парсить новые товары раз в неделю, а обновлять цены отсюда. Я так понимаю, что нагрузка на донора в данном случае будет гораздо ниже чем долбить 12к ссыок на товары для обновления цены.

 

 

Скрытый текст

 

[Aspirinnka1]

И попутный вопрос, блин

Недавно обнаружил, что один донор выдает ответ 403 Forbidden

Я так понимаю, что надо пробовать достучаться через прокси. Хотел для теста найти бесплатный прокси и убедиться, что проблема именно в блокировке, но так и не смог найти ни одного рабочего прокси бесплатно. Может кто подскажет где найти или как проверить донора по-другому?

[AntonVN]

26.04.2022 в 22:02, Aspirinnka1 сказал:

Добрый день. 

Почитал инструкцию как работать с XML  и хочу уточнить: правильно ли я понимаю, что при парсинге через xml ссылку, мы на выходе получаем список ссылок на товары и далее по стандартной схеме Парсинг в ИМ?

А нельзя сразу файл такого формата парсить?

Идея была в обновлении цены товаров в дльнейшем. Парсить новые товары раз в неделю, а обновлять цены отсюда. Я так понимаю, что нагрузка на донора в данном случае будет гораздо ниже чем долбить 12к ссыок на товары для обновления цены.

 

 

  Скрыть содержимое

 

Добрый день.
По парсингу XML ситуация какая, систему загружает на ваш хост полный xml, далее дробит на товары...
то-есть донор только отдаёт вам файл, что вы с ним  делаете к донору уже не относится...

В настройках оставляете только обновление цены и количества, все остальные обновления параметров отключаете.
Добавление нового уже на своё усмотрение...

Так же в задачах крона указываете что Вы хотите ежедневно обновляться, а добавлять товары в необходимый день.

[SToRm1k]

Всем привет, была проблема, при загрузки файла на сервер, pdf файл был кириллицей и первое слово из названия автоматически удалял. Проблема была в рациональности Apache

Возможно кому-то поможет

 

<?php
  setlocale(LC_ALL, 'ru_RU.UTF-8', 'Rus');
  //указываем границу парсинга где ссылка на pdf
  $grn_pdf = 8;

  //Указываем путь куда мы хотим сохранять PDF
 $dir = '/public_html/doc/';
  
 //Проверяем что бы граница парсинга с PDF не была пустой.
  if(!empty($script_data['form']['script_gran'][$grn_pdf])){

    //Получаем имя файла из ссылкы.
 $name = basename($script_data['form']['script_gran'][$grn_pdf]);

    //Скачиваем сам PDF
  $pdf = file_get_contents($script_data['form']['script_gran'][$grn_pdf]);

    //Сохраняем PDF в нужную директорию  
    file_put_contents($dir.$name, $pdf);    

  }
?> 

 

[Aspirinnka1]

27.04.2022 в 10:01, AntonVN сказал:

Добрый день.
По парсингу XML ситуация какая, систему загружает на ваш хост полный xml, далее дробит на товары...
то-есть донор только отдаёт вам файл, что вы с ним  делаете к донору уже не относится...

Добрый. Вы уверены, что Simplepars именно так работает? На первой вкладке "Сбор ссылок " Я закгрузил xml (см. картинку ниже) и получил список товаров. А дальше стандартная работа Парсинг в ИМ. Как-то так.

Т.е. из плюшек я получил список товаров с одного фида, а дальше опять долбить 12к ссылок на товары донора

 

Скрытый текст

 

[staniki]

Можно как то через крон поставить автономно парсить ссылки без моего участия? А то у меня инет мобильный и связь вечно пропадает, в итоге сессия устаревает и я разлогиниваюсь и парсинг не происходит. А ссылок очень много...

[Axelenz]

28.04.2022 в 12:30, staniki сказал:

Можно как то через крон поставить автономно парсить ссылки без моего участия?

Попробуйте почитать зачем он (cron) изначально создан. Вы будете весьма удивлены...

https://simplepars.top/index.php?page=note&n=26

 

Цитата

Планировщик задач (cron) в модуле SimpelPars предназначен для выполнения автоматических заданий по расписанию.

 

Змінено 28 квітня 2022 користувачем Axelenz

[staniki]

del

[Axelenz]

28.04.2022 в 13:14, staniki сказал:

В модуле настроил, крон вроде бы на хостинге тоже включил на каждую минуту, но задание не запускается

Если Вы уверены на 100% в правильной настройке Планировщика задач на хостинге, то рекомендую поиграться со временем. Например: обходите стороной "0", "00", "24" и не делайте промежутка времени, чтобы полночь входила в него. Напишите лучше время с "1" до "21"... попробуйте ну и подождать немного нужно будет, сразу же не запустится.

Ну и состояние, надеюсь, у Вас "Вкл." когда запускаете cron ?

Змінено 28 квітня 2022 користувачем Axelenz

[3DO]

10.02.2022 в 21:48, Rassol2 сказал:

Решился, так же указываете округление как и на странице поиск замены.

 

Не подскажите, как правильно это реализуется ?

В документации https://simplepars.top не нашел или плохо искал.

Сейчас так:

Цена на доноре 39 890

в правиле поиск/замена стоит наценка *1.4

получается 55 846, нужно чтобы было 55 850.

Спасибо!

[Rassol2]

28.04.2022 в 06:02, 3DO сказал:

 

Не подскажите, как правильно это реализуется ?

В документации https://simplepars.top не нашел или плохо искал.

Сейчас так:

Цена на доноре 39 890

в правиле поиск/замена стоит наценка *1.4

получается 55 846, нужно чтобы было 55 850.

Спасибо!

https://simplepars.top/index.php?page=note&n=5

[Axelenz]

28.04.2022 в 14:02, 3DO сказал:

Цена на доноре 39 890

в правиле поиск/замена стоит наценка *1.4

получается 55 846, нужно чтобы было 55 850.

В Вашем случае нужно: {10|>}*1.4

[3DO]

28.04.2022 в 14:03, Rassol2 сказал:

https://simplepars.top/index.php?page=note&n=5

 

28.04.2022 в 14:08, Axelenz сказал:

В Вашем случае нужно: {10|>}*1.4

 

Спасибо!

Вот невнимательность к чему приводит)

посмотрел пункт "Наценка, работа с цифрами", а строчкой ниже про Округление, проглядел.

 

Скрытый текст

 

[partshez]

27.04.2022 в 11:30, Aspirinnka1 сказал:

Добрый. Вы уверены, что Simplepars именно так работает? На первой вкладке "Сбор ссылок " Я закгрузил xml (см. картинку ниже) и получил список товаров. А дальше стандартная работа Парсинг в ИМ. Как-то так.

Т.е. из плюшек я получил список товаров с одного фида, а дальше опять долбить 12к ссылок на товары донора

 

  Скрыть содержимое

 

 

26.04.2022 в 19:02, Aspirinnka1 сказал:

Добрый день. 

Почитал инструкцию как работать с XML  и хочу уточнить: правильно ли я понимаю, что при парсинге через xml ссылку, мы на выходе получаем список ссылок на товары и далее по стандартной схеме Парсинг в ИМ?

А нельзя сразу файл такого формата парсить?

Идея была в обновлении цены товаров в дльнейшем. Парсить новые товары раз в неделю, а обновлять цены отсюда. Я так понимаю, что нагрузка на донора в данном случае будет гораздо ниже чем долбить 12к ссыок на товары для обновления цены.

 

 

  Скрыть содержимое

 

Здесь вы пишете и показываете про Выгрузку в формате xml. Работаем только на вкладке Обработчик xml. В сборе ссылок записываем адрес Выгрузки xml

27.04.2022 в 11:30, Aspirinnka1 сказал:

Добрый. Вы уверены, что Simplepars именно так работает? На первой вкладке "Сбор ссылок " Я закгрузил xml (см. картинку ниже) и получил список товаров. А дальше стандартная работа Парсинг в ИМ. Как-то так.

Т.е. из плюшек я получил список товаров с одного фида, а дальше опять долбить 12к ссылок на товары донора

 

  Скрыть содержимое

 

А здесь про сбор ссылок на товары из карты сайта, xml . Здесь записываем адрес сайтмеп.xml.

 Это два абсолютно разных функционала модуля.

Читайте еще...

Змінено 28 квітня 2022 користувачем partshez

[yurok79]

Подскажите как связать опции их xml prom.ua Где товары между собой связаны group id, а размер в виде атрибута. Каждый размер отдельным товаром. Есть такая возможность?

 

 

Змінено 28 квітня 2022 користувачем yurok79

[partshez]

28.04.2022 в 19:11, yurok79 сказал:

Подскажите как связать опции их xml prom.ua Где товары между собой связаны group id, а размер в виде атрибута. Каждый размер отдельным товаром. Есть такая возможность?

 

<offer available="false" id="77955s277228" selling_type="r" group_id="77955">
                                    <name>Кросівки Nike Victory G Lite</name>
                    <categoryId>Акція{csvnc}Нова колекція</categoryId>
                    <currency>UAH</currency>
                    <url>https://7dreamsport.ua/kros-vki-nike-victory-g-lite-2/</url>
                                                                                    <price>1595</price>
                                                                        <picture>https://7dreamsport.ua/wa-data/public/shop/products/55/79/77955/images/301412/301412.970x0.jpg</picture>
                                                    <picture>https://7dreamsport.ua/wa-data/public/shop/products/55/79/77955/images/301413/301413.970x0.jpg</picture>
                                                    <picture>https://7dreamsport.ua/wa-data/public/shop/products/55/79/77955/images/301414/301414.970x0.jpg</picture>
                                                    <picture>https://7dreamsport.ua/wa-data/public/shop/products/55/79/77955/images/301415/301415.970x0.jpg</picture>
                                                    <picture>https://7dreamsport.ua/wa-data/public/shop/products/55/79/77955/images/301416/301416.970x0.jpg</picture>
                                            <vendorCode>CW8190-024</vendorCode>
                    <quantity_in_stock>0</quantity_in_stock>
                                                                <param name="Розмір" unit="">49.5</param>
                                                                                                                                                                <param name="Бренд">Nike</param>
                                                                                                                                                                                    <param name="Вид товару">Взуття</param>
                                                                                                                                                                                    <param name="Стать">Чоловіча</param>
                                                                                                                                                                                    <param name="Погодні умови">Демісезон</param>
                                                                                                                                                                                    <param name="Категорія товару">Стріт</param>
                                                                                                                                                                                    <param name="Група товарів">Кросівки</param>
                                                                                                                        </offer>

 

Возможность есть. Модуль группировки товаров HPM.

Прячьте длинный текст в теме под спойлер