[Поддержка] SimplePars - Універсальний парсер для ІМ

[Rassol2]

29.01.2023 в 08:01, letto90 сказал:

Кто-нибудь сталкивался со сбором ссылок с нескольких карт сайта?

На доноре sitemap поделены на несколько штук и имеют формат:

https://www.сайтдонор.ком/SitemapsProducts.ashx?lng=ru&page=1

https://www.сайтдонор.ком/SitemapsProducts.ashx?lng=ru&page=2 и т.д.

Сами ссылки лежат по адресу https://www.сайтдонор.ком/SitemapsProducts.ashx?lng=ru

Пробовал прописывать ссылки в очередь сканирования. Не работает

  Скрыть содержимое

 

Что вы подразумеваете под словами не работает ? 
Не понятно от слова вообще.

 

вы не можете сохранить ссылки или что ? 
у вас есть логи модуля я их писал что бы у людей всегда была палочка выручадочка во всех случаях. Читаете логи и там в 90% случаев написано что происходит.

 

Зачем вы указываете текс начала и конца сбора ?  

[letto90]

29.01.2023 в 17:07, Rassol2 сказал:

Что вы подразумеваете под словами не работает ? 
Не понятно от слова вообще.

 

вы не можете сохранить ссылки или что ? 
у вас есть логи модуля я их писал что бы у людей всегда была палочка выручадочка во всех случаях. Читаете логи и там в 90% случаев написано что происходит.

 

Зачем вы указываете текс начала и конца сбора ?  

текст начала сбора и ставил и убирал. без результата

просто стоит на месте и всё. в логах один успешный ответ по стартовой ссылке и больше ничего

не собирает ссылки на товары со всех карт

в таком состоянии может висеть несколько часов и результата не будет

Скрытый текст

 

Змінено 29 січня 2023 користувачем letto90

[Rassol2]

29.01.2023 в 08:32, letto90 сказал:

текст начала сбора и ставил и убирал. без результата

просто стоит на месте и всё. в логах один успешный ответ по стартовой ссылке и больше ничего

не собирает ссылки на товары со всех карт

в таком состоянии может висеть несколько часов и результата не будет

  Скрыть содержимое

 

Зайдите в логи опенкарт и посмотрите. Есть ли там ошибки в файле simplepars.php 

 

если есть то пришлите скриншот этой строки с ошибкой. 

[letto90]

29.01.2023 в 17:37, Rassol2 сказал:

Зайдите в логи опенкарт

во всех логах было пусто

поэкспериментировав получилось добиться результата.

выставил 1 поток и паузу в 30 секунд. с другими настройками почему-то не хотел

Скрытый текст

 

[Rassol2]

29.01.2023 в 08:50, letto90 сказал:

во всех логах было пусто

поэкспериментировав получилось добиться результата.

выставил 1 поток и паузу в 30 секунд. с другими настройками почему-то не хотел

  Скрыть содержимое

 

В таком случае где то в логах должно было быть написано недостаточно времени на обработку. 

[letto90]

29.01.2023 в 17:52, Rassol2 сказал:

В таком случае где то в логах должно было быть написано недостаточно времени на обработку. 

предполагаю что хостинг банально не смог переварить за раз пять файлов по 20 мегабайт

[Rassol2]

29.01.2023 в 08:56, letto90 сказал:

предполагаю что хостинг банально не смог переварить за раз пять файлов по 20 мегабайт

В таком случае в логах появляется сообщение о нехватки оперативной памяти либо нехватки времени на выполнение скриптов поэтому с большей долей вероятности вы где-то пропустили информацию в логах. 

[corvet5]

подскажите пожалуйста в чем может быть проблема?

в поиск\замена. нехочет заменять символ '

какой-то противный символ в названии товара донора.

когда с ним парсится то и в поиске товаров не находит товар

[Axelenz]

31.01.2023 в 00:01, corvet5 сказал:

подскажите пожалуйста в чем может быть проблема?

Нужно видеть реальную ссылку и место откуда это берёте... То, что есть на самом деле не всегда соответствует тому, что Вы видите...

[corvet5]

http://buty-wolka.pl/421741-16-508.html

я уже пробовал и с сайта брать символ и с программы. никак(

  Змінено 31 січня 2023 користувачем corvet5

[partshez]

31.01.2023 в 03:46, corvet5 сказал:

http://buty-wolka.pl/421741-16-508.html

я уже пробовал и с сайта брать символ и с программы. никак(

 

https://prnt.sc/BFcjkpqG8FV7      https://prnt.sc/4XNBt81mZOpd

Не вижу проблемы

SPsetting-939.json

SPsetting-939 (1).json

Змінено 31 січня 2023 користувачем partshez

[Axelenz]

31.01.2023 в 03:46, corvet5 сказал:

я уже пробовал и с сайта брать символ и с программы. никак(

А какой символ Вы брали ?

' или ' ?

Скрытый текст

Продублируйте свой символ ещё и в ASCII

Змінено 31 січня 2023 користувачем Axelenz

[corvet5]

В 31.01.2023 в 08:26, partshez сказав:

https://prnt.sc/BFcjkpqG8FV7      https://prnt.sc/4XNBt81mZOpd

Не вижу проблемы

SPsetting-939.json 4 \u041a\u0411 · 0 downloads

SPsetting-939 (1).json 4 \u041a\u0411 · 0 downloads

это вы нажали спарсить страницу а потом преобразовать.

а попробуйте в той же вкладке модуля. туже страницу нажать "Спарсить+преобразовать" - в таком случае не обрабатывает. и при обработке прайсером это правило так же не будет учитыватся 

[corvet5]

В 31.01.2023 в 10:30, Axelenz сказав:

А какой символ Вы брали ?

' или ' ?

  Приховати вміст

Продублируйте свой символ ещё и в ASCII

' - заработало!!!

спасибо!!

[lenysi4ka1]

Подскажите пожалуйста - как настроить выборочный парсинг товаров из категории. Например, есть категория, которая включает в себя 100 sku, нужно загрузить только 3 sku с определенным артикулом.

[Rassol2]

31.01.2023 в 07:54, lenysi4ka1 сказал:

Подскажите пожалуйста - как настроить выборочный парсинг товаров из категории. Например, есть категория, которая включает в себя 100 sku, нужно загрузить только 3 sku с определенным артикулом.

Здравствуйте.

Создать границу парсинга для проверки данных пусть в эту границу парсинга попадают ску. 
Дальше укажите правила поиск замена чтобы заменить артикулы которые вам нужны на слово Rassol2. Далее используя правила допуска страницы проверяйте есть в границе указано слово Rassol2 значит допускаем эту страницу к обработке. 

[OneRe]

Добрый день,

Может кто сталкивался с такой проблемой при парсинге и разбивкой на атрибуты...Имеем такой код:

 

Скрытый текст

<span>System operacyjny</span>
</span>
<span class="specification__value">
<span class="specification__item">
<a class="btn-get-feature-rate specification__handler" data-rate-to="fvalue" data-id="1025558">
Windows 10 Pro<span class="specification__separator">, </span><i class="fa fa-circle-o-notch fa-spin fa-fw fa-icon-loader hidden" aria-hidden="true"></i>
</a>
</span>
<span class="specification__item">
<a class="btn-get-feature-rate specification__handler" data-rate-to="fvalue" data-id="477362">
Windows 7 Professional<span class="specification__separator"></span><i class="fa fa-circle-o-notch fa-spin fa-fw fa-icon-loader hidden" aria-hidden="true"></i>
</a>
</span>
 </span>
</div>

 

Если создать через правила поиска и замены:

<span class="specification__value">|{csvnc}
<span class="specification__separator">|{csvnc}

То работает все здорово, когда у "System operacyjny" одно значение. Если два - происходит страшная абракадабра, а именно из примера выше, Windows 7 Professional становится атрибутом, а не значением.

 

Буду рад, если поможете решить данную головоломку.

[Kiyoshi]

Здравствуйте@OneRe попробуйте так:

{reg[#\s{2,}#]}|
</span></span>|{csvnc}
<{skip}>|

[OneRe]

31.01.2023 в 19:19, Kiyoshi сказал:

Здравствуйте@OneRe попробуйте так:

{reg[#\s{2,}#]}|
</span></span>|{csvnc}
<{skip}>|

 

Большое спасибо. Помогло. Единственное, что проставилось по 2 {csvnc}, но это я подправил правилом {csvnc}{csvnc}|{csvnc} и все стало так как надо.

[Kiyoshi]

31.01.2023 в 11:39, OneRe сказал:

 

Большое спасибо. Помогло. Единственное, что проставилось по 2 {csvnc}, но это я подправил правилом {csvnc}{csvnc}|{csvnc} и все стало так как надо.

Пожалуйста.

[Shulz80]

Здравствуйте. Помогите решить проблему. Проявилась она у меня с пол года назад. Заметил что cron очень медленно обрабатывает задачи. В час может обновить максимум 30 товаров. В логах php ошибок не было (так сказали на хостинге). В логах сервера ошибок не было. Решил забить на это, так как на магазин времени не было и он удачно загнулся. Сейчас решил возобновить работы. Установил с нуля опенкарт, восстановил сайт, установил simplepars, настраиваю cron и получаю такую же работу. В час максимум 30 товаров. Что за фигня, не пойму.

[Axelenz]

31.01.2023 в 23:46, Shulz80 сказал:

так сказали на хостинге

А на каком хостинге ???

А-а-а... понятно, на каком... на hostiq.ua

У моей клиентки такая же ерунда на этом же хостинге...

 

Я перепробовал все возможные варианты написания задания - не влияет никак... cron не отрабатывает xml на 2000 товаров за 12 часов... А при ручном запуске обрабатывается за 3 минуты...

Змінено 31 січня 2023 користувачем Axelenz

[Shulz80]

01.02.2023 в 00:14, Axelenz сказал:

А-а-а... понятно, на каком... на hostiq.ua

Так точно. hostiq.ua. Получается проблема в нём. Подскажите, на каком хостинге точно нет такой проблемы?

[Axelenz]

01.02.2023 в 00:20, Shulz80 сказал:

Подскажите, на каком хостинге точно нет такой проблемы?

Так пока не попробуешь, то не скажешь...

Но за всё время у меня было только пару клиентов, у которых не работал cron а хостинг клялся, что у них всё красиво, ищите мол ошибки у себя и пишите разработчику...

При смене же хостинга cron сразу начинал нормально работать...

Змінено 31 січня 2023 користувачем Axelenz

[agkiev]

Всем привет,

 

Вопрос по Редактору товаров - Поиск и замена - Описание товара

 

Необходимо в отфильтрованных товарах в описании, в теге <img изменить путь к фотографиям

указываю так:

https://сайт/папка/{skip}/фото1.гпг|https://сайт/папка/правильная_папка/фото.гпг

....список с фото1 до фото21....

https://сайт/папка/{skip}/фото21.гпг|https://сайт/папка/правильная_папка/фото.гпг

 

для теста попробовал заменить только путь к фото1.гпг - все получилось

 

делаю список - запускаю - результат у этих товаров пропадает в описании весь html до фото21.гпг

 

что делаю не так?

 

Спасибо

 

Змінено 1 лютого 2023 користувачем agkiev