[Поддержка] SimplePars - Універсальний парсер для ІМ

[V139092]

Здравствуйте!
столкнулся с проблемой парсинга категорий, вроде-бы все корректно настроил
https://sigma.ua/bitrix/catalog_export/marketsigma_ua.php

А на выходе получается так

[mirek]

А если я запустил Сбор ссылок, а потом закрыл браузер то сбор прекратится ? 

 

[Rassol2]

30.04.2023 в 14:41, mirek сказал:

А если я запустил Сбор ссылок, а потом закрыл браузер то сбор прекратится ? 

 

Да, и если закроете вкладку на странице которой вы нажали старт, тоже остановится.
Что бы модуль работал автономно без вашего участия используйте cron
https://simplepars.top/index.php?page=notes&tag_id=27

[Rassol2]

30.04.2023 в 12:04, V139092 сказал:

Здравствуйте!
столкнулся с проблемой парсинга категорий, вроде-бы все корректно настроил
https://sigma.ua/bitrix/catalog_export/marketsigma_ua.php

А на выходе получается так

Здравствуйте.
Вас не видно в списке покупателей модуля.
Напишите мне в ЛС номер заказа, где вы приобретали модуль.

[dimonregi_ua]

30.04.2023 в 16:44, partshez сказал:

Настройте парсинг с другим идентификатором

https://simplepars.top/index.php?page=note&n=40

Спробував різні інші ідентефікатори. Ось логи. 
Товари парсяться (типу показує що завантаження завершено). Але вони на сайт не додаються. В редакторі товарів пусто ...
Спробував всі ідентифікатори що є в списку. Якщо обрати sku - model або ж name - завантаження не відбувається взагалі.
Якщо обрати один з цих -     upc - ean - jan - завантаження відбувається але редактор товарів пустий і по логах пише що товар вже є на сайті.

Можливо якось це вирішити?

 

Скрытый текст

2023-05-01 12:47:04| Парсинг : УСПЕШНЫЙ ЗАПРОС  | Код ответа [200] Ссылка | https://toysi.ua/ua/optom-poyizd-chukh-chukh-z-magnitnimi-prichepam
2023-05-01 12:47:04| !->[Товар Не создан/Не обновлен] : Не спарсен идентификатора товара, location | По ссылке https://toysi.ua/ua/optom-trek-zapusk-z-girkami
2023-05-01 12:47:04| !->[Товар не создан] : Товар с location  = [] Уже существует в магазине и модуль его не создавал.
2023-05-01 12:47:04| !->[Товар Не создан/Не обновлен] : Не спарсен идентификатора товара, location | По ссылке https://toysi.ua/ua/optom-elektrichka-muzichna
2023-05-01 12:47:04| !->[Товар не создан] : Товар с location  = [] Уже существует в магазине и модуль его не создавал.

 

2023-05-01 12:48:39| !->[Товар Не создан/Не обновлен] : Не спарсен идентификатора товара, mpn | По ссылке https://toysi.ua/ua/optom-elektrichka-muzichna
2023-05-01 12:48:39| !->[Товар не создан] : Товар с mpn  = [] Уже существует в магазине и модуль его не создавал.
2023-05-01 12:48:39| !->[Товар Не создан/Не обновлен] : Не спарсен идентификатора товара, mpn | По ссылке https://toysi.ua/ua/optom-poyizd-chukh-chukh-z-magnitnimi-prichepam
2023-05-01 12:48:39| !->[Товар не создан] : Товар с mpn  = [] Уже существует в магазине и модуль его не создавал.

2023-05-01 12:50:03| Парсинг : УСПЕШНЫЙ ЗАПРОС  | Код ответа [200] Ссылка | https://toysi.ua/ua/optom-treyler-z-tramplinom-siriy

2023-05-01 12:50:03| Парсинг : УСПЕШНЫЙ ЗАПРОС  | Код ответа [200] Ссылка | https://toysi.ua/ua/optom-treyler-z-tramplinom-chervoniy

 

[partshez]

01.05.2023 в 13:04, dimonregi_ua сказал:

Спробував різні інші ідентефікатори. Ось логи. 
Товари парсяться (типу показує що завантаження завершено). Але вони на сайт не додаються. В редакторі товарів пусто ...
Спробував всі ідентифікатори що є в списку. Якщо обрати sku - model або ж name - завантаження не відбувається взагалі.
Якщо обрати один з цих -     upc - ean - jan - завантаження відбувається але редактор товарів пустий і по логах пише що товар вже є на сайті.

Можливо якось це вирішити?

 

  Показать содержимое

2023-05-01 12:47:04| Парсинг : УСПЕШНЫЙ ЗАПРОС  | Код ответа [200] Ссылка | https://toysi.ua/ua/optom-poyizd-chukh-chukh-z-magnitnimi-prichepam
2023-05-01 12:47:04| !->[Товар Не создан/Не обновлен] : Не спарсен идентификатора товара, location | По ссылке https://toysi.ua/ua/optom-trek-zapusk-z-girkami
2023-05-01 12:47:04| !->[Товар не создан] : Товар с location  = [] Уже существует в магазине и модуль его не создавал.
2023-05-01 12:47:04| !->[Товар Не создан/Не обновлен] : Не спарсен идентификатора товара, location | По ссылке https://toysi.ua/ua/optom-elektrichka-muzichna
2023-05-01 12:47:04| !->[Товар не создан] : Товар с location  = [] Уже существует в магазине и модуль его не создавал.

 

2023-05-01 12:48:39| !->[Товар Не создан/Не обновлен] : Не спарсен идентификатора товара, mpn | По ссылке https://toysi.ua/ua/optom-elektrichka-muzichna
2023-05-01 12:48:39| !->[Товар не создан] : Товар с mpn  = [] Уже существует в магазине и модуль его не создавал.
2023-05-01 12:48:39| !->[Товар Не создан/Не обновлен] : Не спарсен идентификатора товара, mpn | По ссылке https://toysi.ua/ua/optom-poyizd-chukh-chukh-z-magnitnimi-prichepam
2023-05-01 12:48:39| !->[Товар не создан] : Товар с mpn  = [] Уже существует в магазине и модуль его не создавал.

2023-05-01 12:50:03| Парсинг : УСПЕШНЫЙ ЗАПРОС  | Код ответа [200] Ссылка | https://toysi.ua/ua/optom-treyler-z-tramplinom-siriy

2023-05-01 12:50:03| Парсинг : УСПЕШНЫЙ ЗАПРОС  | Код ответа [200] Ссылка | https://toysi.ua/ua/optom-treyler-z-tramplinom-chervoniy

 

Пишите в личку

[mirek]

30.04.2023 в 22:43, Rassol2 сказал:

Что бы модуль работал автономно без вашего участия используйте cron

В настройках задания внизу там где Дни/нед. невозможно вставить цифры дней недели. Не видно ввод

[partshez]

01.05.2023 в 13:16, mirek сказал:

В настройках задания внизу там где Дни/нед. невозможно вставить цифры дней недели. Не видно ввод

Контрл минус на клавиатуре. Насколько раз

[mirek]

01.05.2023 в 13:18, partshez сказал:

Контрл минус на клавиатуре

Помогло. Спасибо. Но там было 100% )

[Rassol2]

01.05.2023 в 05:23, mirek сказал:

Помогло. Спасибо. Но там было 100% )

Это когда я писал не учел маленькие экраны. А сейчас переписать внешний вид модуля с учетом мелких экранов почти не реально. :-(

[mirek]

При сканировании Сбор ссылок парсер нашел >30 000 ссылок. Но на вкладке Парсинг в ИМ было указано только 5000 ссылок

 

Что-то тут я не понимаю почему так ? Парсер обновил эти 5000 и встал. При этом теперь и на вкладке Сбор ссылок написано Обработано 0 В очереди 5000 

[partshez]

01.05.2023 в 15:00, mirek сказал:

При сканировании Сбор ссылок парсер нашел >30 000 ссылок. Но на вкладке Парсинг в ИМ было указано только 5000 ссылок

 

Что-то тут я не понимаю почему так ? Парсер обновил эти 5000 и встал. При этом теперь и на вкладке Сбор ссылок написано Обработано 0 В очереди 5000 

Сбор ссылок. Вверху. Показывать ВСЕ ССЫЛКИ. Перезапустить Сбор ссылок

[mirek]

01.05.2023 в 15:24, partshez сказал:

Показывать ВСЕ ССЫЛКИ.

В принципе вопрос не о том, что не видно все ссылки. На вкладке Парсинг в ИМ после запуска обработано только 5000 и парсер  остановился.
Написано Обработано ссылок: 5000 | Ссылок в очереди: 0 | [Ссылок в проекте: 5000]    Но в магазине  больше товаров чем 5000 и было собрано больше 5000. 

[Rassol2]

Внимание !!!
Из за переполнения личных сообщений на форуме я удалил 500 + переписок.
У вас это будет выглядеть как я какбутобы покинул биседу. Но это не так, из за переполненности личных сообщений я не могу создавать новые и это вынужденная мера.
Если я покинул какую то важную ветку беседы, напишите повторно ваш вопрос.

[Rassol2]

01.05.2023 в 14:14, mirek сказал:

В принципе вопрос не о том, что не видно все ссылки. На вкладке Парсинг в ИМ после запуска обработано только 5000 и парсер  остановился.
Написано Обработано ссылок: 5000 | Ссылок в очереди: 0 | [Ссылок в проекте: 5000]    Но в магазине  больше товаров чем 5000 и было собрано больше 5000. 

Это говорит о том что у вас всего в проекте 5000 ссылок и ни как и наче.
Может было собрано и больше но потом было удалено. Или вы нажали кнопку сохранить на вкладке сбора ссылок.

Скрытый текст

Вот эта кнопка записывает в список ссылок на товар только те что в ведены в поле Ссылки на товар.
А если у вас было 10000 ссылок, и стояла настройка выводить только 5000 то только вписано было 5000 и вот после нажатия только они остались в поле.

[Rassol2]

01.05.2023 в 07:24, partshez сказал:

Сбор ссылок. Вверху. Показывать ВСЕ ССЫЛКИ. Перезапустить Сбор ссылок

Показывать все отвачает только за показ, а не за сбор и так далее.
Так что не рекомендую трогать эту настройку если нужно просто собирать ссылки. Она нужна для тех кто люби после парсинга внучную скопировать все из поля сбор ссылок в файл или еше что то подобное, а по факту ее уже дано нужно убрать, так как люди выбирают показывать много а потом аказывается что их хостинг не способен выдать им миллион ссылок, из за нехватки памяти, или старенький пентиум одноядерный не может отрисовать 1 000 000 ссылок на странице и браузер крашится.

Ко всему нужно подходить с умом.

[Rassol2]

01.05.2023 в 07:00, mirek сказал:

При сканировании Сбор ссылок парсер нашел >30 000 ссылок. Но на вкладке Парсинг в ИМ было указано только 5000 ссылок

 

Что-то тут я не понимаю почему так ? Парсер обновил эти 5000 и встал. При этом теперь и на вкладке Сбор ссылок написано Обработано 0 В очереди 5000 

Не жмите кнопку сохранить ссылки.
Почему выводит только 5000т ?
Потому что вам для понимания что собирает модуль 5к достаточно, а для вашего хостинга и вашего браузера вывод большего колвас ссылок на одну стнаницу проблематично.

[mirek]

Мне вывод вовсе не нужен. Хотя там стоит выделенный сервер для сайта магазина )  Но я кажется понял. Похоже проблема в том, что я пытаюсь все сохранить на вкладке Сбор ссылок. Затем перехожу на вкладку Парсинг в ИМ. Нажимаю перегрузить ссылки и пишу в ИМ

То есть что-бы не потерялись >10000 не надо там нажимать во всех окошках Сохранить ссылки. А если нажимать только главную кнопку Сохранить вверху модуля ?

Ну в общем надо что-бы Парсинг в ИМ прошелся по всем найденным >10000 ссылкам

 

[mirek]

Не ясны принципы сохранения. Вот оно спарсило в магазин 5000 ссылок. Если их 30000 то алгоритм такой я нажимаю перегрузить на вкладке Парсинг в ИМ и снова пишу в магазин ?  Интересует только режим обновления. Не надо добавлять. И интересно при 2-м обновлении снова будет перебирать те же товары ?

[Rassol2]

02.05.2023 в 01:33, mirek сказал:

Мне вывод вовсе не нужен. Хотя там стоит выделенный сервер для сайта магазина )  Но я кажется понял. Похоже проблема в том, что я пытаюсь все сохранить на вкладке Сбор ссылок

 

Да не делайте это

[Rassol2]

Так, давайте вы посмотрите видео по модулю.

https://simplepars.top/index.php?page=note&n=25

А то вы начинаете писать вопросы которых в принципе не должно быть.

 

02.05.2023 в 01:37, mirek сказал:

Не ясны принципы сохранения. Вот оно спарсило в магазин 5000 ссылок. Если их 30000 то алгоритм такой я нажимаю перегрузить на вкладке Парсинг в ИМ и снова пишу в магазин ?

Конечно, вы же на вкладке парсинг в ИМ, понятное дело что тут можно писать только в магазин, на кладке прасинг в CSV можно парсить только в CSV.
 

02.05.2023 в 01:37, mirek сказал:

  Интересует только режим обновления. Не надо добавлять. И интересно при 2-м обновлении снова будет перебирать те же товары ?

Конечно, и при всех последующих.

 

А можно обновлять не теже товары ?
Обновление подразумевает получение новой информации и этой новой информацией замешать информацию в тех же товарах.

Пожалуйста дайте себе время на изучения модуля, это даже не вопросы первого уровня.

[Rassol2]

Так как действие сохранить ссылки нужно раз в 10 лет, и только избранным, добавил вот такой текст при попытке сохранить ссылки.
 

Скрытый текст

В следующем обновлении выложу, над текстом можно еше поработать.
То есть сохранение будет выполнено только после вторичного подтверждения выбранного действия.
Думаю это закроет такой вопрос. А если нет тут уже ничего не поможет

[Axelenz]

03.05.2023 в 02:22, Rassol2 сказал:

Так как действие сохранить ссылки нужно раз в 10 лет, и только избранным, добавил вот такой текст при попытке сохранить ссылки.

Очень часто пользуюсь этим сохранением. а иногда заказчиков интересуют ссылки на конкретно выбранные товары и им остальные не нужны, не нужен сбор ссылок.

[Rassol2]

03.05.2023 в 04:23, Axelenz сказал:

Очень часто пользуюсь этим сохранением. а иногда заказчиков интересуют ссылки на конкретно выбранные товары и им остальные не нужны, не нужен сбор ссылок.

Теперь при сохранении нужно будет нажать две кнопки.
1) сохранить.
2) подтвердить что вы именно это хотите делать.
 

[mirek]

Спасибо за разъяснения и доработку

 

Главное что меня интересовало это спарсить/обновить в ИМ все товары. То есть для того, что-б парсинг в ИМ прошелся по всем 30000 ссылок на вкладке Парсить в ИМ надо после обработки 5000 ссылок нажимать Перегрузить ссылки и снова запускать процесс парсинга в ИМ ? Что перезагружает кнопка Перезагрузить ссылки ?