[Поддержка] SimplePars - Универсальный парсер для ИМ

[Kiyoshi]

Попробуйте переключить и спарсить пару ссылок в кодировке Windows-1251 и посмотреть.

Змінено 13 лютого 2021 користувачем Kiyoshi

[Kytsya_]

15 минут назад, Kiyoshi сказал:

Попробуйте переключить и спарсить пару ссылок в кодировке Windows-1251 и посмотреть.

В Windows-1251 нормально все, но мне нужно именно utf-8 (на пром)

[Kiyoshi]

8 минут назад, Kytsya_ сказал:

В Windows-1251 нормально все, но мне нужно именно utf-8 (на пром)

Ясно.

 

32 минуты назад, Kytsya_ сказал:

Это нормально?

Такое бывает когда офис не понимает кодировку файла. Как вариант можете установить LibreOffice и открыть в нем созданный файл чтобы удостоверится что все нормально. Или если есть Notepad++ то открыть в нем для проверки.

Змінено 13 лютого 2021 користувачем Kiyoshi

[Rassol2]

1 час назад, Kytsya_ сказал:

Это нормально?

да это нормально если вы открываете прайс не в вашей кодировке.

[Axelenz]

1 час назад, Kytsya_ сказал:

В Windows-1251 нормально все, но мне нужно именно utf-8 (на пром)

Если что-то в виде кракозябр, то открываете, например, в LibreOffice и сохраняете файл в формате для Excel, а потом уже только открываете с помощью Excel.

Удобно, не спорю...а что делать. А потом удивляются, почему никто не покупает Microsoft Office, это же так удобно )))

 

[dvk18]

2 часа назад, Kytsya_ сказал:

пытаюсь создать прайс csv с кодировкой utf-8

csv это текстовый файл, вот и меняйте кодировку в текстовом редакторе

[Aspirinnka1]

Очередной дилетантский вопрос. 

В кроне вы выбираете сначала парсить ссылки, а затем парсить в ИМ, так?

Моя логика такая:

1. Запускаем сбор ссылок. в пункте действия выбираем удалить ссылки на товары. Я так понимаю, что ссылки в очереди сканирования остаются, и по ним и происходит сбор товаров. верно? Кэш не используем, ессенно. 

2. Запускаем парсить в ИМ. Тут прост оставим не использовать кэш и с большего все готово. В доп. действиях запускаем наши шаблоны и удаляем в конце не обновленные товары за сегодня. 

3. Вопрос с порядком выполнения. Можно запускать парс одновременно для разных сайтов? Для однго понятно, что нет. 

4. Скажите, а поле Действие можно увеличить в размерах? Не видно какое действие выбрано сейчас. Или может его тоже можно вверх добавит там где график выполнения? Сюда куда-нибудь. Чтобы было сразу видно и действие совершаемое по заданию. Это понятно, что не критично, сугубо на ваше усмотрение. да да, нет нет. 

5. А есть какой отчет о работе крона? к примеру, сколько товаров удалилоь, сколько добавилось? 

 

Спойлер

 

 

 

Змінено 13 лютого 2021 користувачем Aspirinnka1

[Kiyoshi]

1. Верно ссылки очереди сканирования сохраняются.

3. В автоматическом режиме нет. Только если откроете каждый проект по отдельности и в нем запустите загрузку товара.

4. Возможно для этого нужно изменить в admin/view/template/catalog/simplepars_cron

<div class="col-sm-2"> <!-- Меняем с col-sm-2 на col-sm-3 или болеее -->
  <label for="input-pause">
    Действие
    <span data-toggle="tooltip" data-original-title="Дополнительные параметры настройки задания. ">
    </span>
  </label>
  <input type="text" value="Добавлять и обновлять" class="form-control" readonly=""> 
</div>

4.1 Вынести в отдельный блок врядли.

5. Все действия пишутся в Логи проекта. Касательно удаления не помню чтобы там отражалось данное действие.

[Aspirinnka1]

10 часов назад, Kiyoshi сказал:

3. В автоматическом режиме нет. Только если откроете каждый проект по отдельности и в нем запустите загрузку товара.

4. Возможно для этого нужно изменить в admin/view/template/catalog/simplepars_cron

<div class="col-sm-2"> <!-- Меняем с col-sm-2 на col-sm-3 или болеее -->

3. Здесь я имел ввиду работу крона. Если время запуска у 2х проектов будет одинаково и приоритет тоже, то одноврененно не запустится, так?.Или вообще в таком случае не запустится?

Или проекты только по очереди, запускаются, так? т.е. надо, условно, все проекты поставить на 0-6 утра и задать им очередность 1 2 3...7. И они по порядку все будут отрабатывать, так?

4. Спасибо, попробую. 

 

P.S. а репутация тут поднимается? что-то я забыл...

Змінено 14 лютого 2021 користувачем Aspirinnka1

[Kiyoshi]

Верно каждому заданию нужно указывать порядок запуска. Исключение когда оно одно.

[kostya242]

12 часов назад, Aspirinnka1 сказал:

1. Запускаем сбор ссылок. в пункте действия выбираем удалить ссылки на товары. Я так понимаю, что ссылки в очереди сканирования остаются, и по ним и происходит сбор товаров. верно? Кэш не используем, ессенно. 

 

Подскажите, зачем отдельно запускать сбор ссылок с удалением товаров, а потом отдельно запускать парсинг в ИМ?

[Kiyoshi]

Ссылки на товар удаляются для того чтобы модуль не переходил по не существующей ссылки на товар, такое бывает когда донор не просто отключает товар а убирает его вовсе. А Парсинг в Им с удалением нужен для того чтобы контролировать наличие товар (не статус) как у донора 1 в 1.

 

Змінено 14 лютого 2021 користувачем Kiyoshi

[kostya242]

5 минут назад, Kiyoshi сказал:

А Парсинг в Им с удалением нужен для того чтобы контролировать наличие товар (не статус) как у донора 1 в 1.

 

 при парсинге ставлю статус товарам нет в наличии всем, потом делаю проверку и актуализирую реальное наличие товара у импортера

 

Спойлер

 

[Kiyoshi]

Как вариант тоже неплохой.

[Aspirinnka1]

32 минуты назад, kostya242 сказал:

при парсинге ставлю статус товарам нет в наличии всем, потом делаю проверку и актуализирую реальное наличие товара у импортера

ну не знаю...

 

А как вы новые товары донора добавите без сбора ссылок?

Просто парсинг в ИМ даст вам только существующие товары с последнего сбора ссылок. Новых товаров вы не получите.

Змінено 14 лютого 2021 користувачем Aspirinnka1

[yaroslavking]

В 11.02.2021 в 17:37, Rassol2 сказал:

Можете найти строчку
 `stock_status_id`='".(int)$data['stock_status_id']."'

В файле /admin/model/catalog/simplepars.php

И удалить ее.
И модуль не будет обновлять.

удалил эту строку и процесс парсинга в интернет магазин зависает на 22 товаре

 

вот лог

Спойлер

2021-02-14 09:06:54| Парсинг : УСПЕШНЫЙ ЗАПРОС  | Код ответа [200] Ссылка | https://vandalvape.com.ua/admin/simplepars/xml_page/1/8cb51bd3798127e67e6b6f65c34ba617-1.xml
2021-02-14 09:06:54| !->[Товар не обновлен] : В магазине не найден товар с model = [100005.0] Ссылка | https://vandalvape.com.ua/admin/simplepars/xml_page/1/8cb51bd3798127e67e6b6f65c34ba617-1.xml

2021-02-14 09:06:55| Парсинг : УСПЕШНЫЙ ЗАПРОС  | Код ответа [200] Ссылка | https://vandalvape.com.ua/admin/simplepars/xml_page/1/8cb51bd3798127e67e6b6f65c34ba617-2.xml
2021-02-14 09:06:55| !->[Товар не обновлен] : В магазине не найден товар с model = [100007.0] Ссылка | https://vandalvape.com.ua/admin/simplepars/xml_page/1/8cb51bd3798127e67e6b6f65c34ba617-2.xml

2021-02-14 09:06:55| Парсинг : УСПЕШНЫЙ ЗАПРОС  | Код ответа [200] Ссылка | https://vandalvape.com.ua/admin/simplepars/xml_page/1/8cb51bd3798127e67e6b6f65c34ba617-3.xml
2021-02-14 09:06:55| !->[Товар не обновлен] : В магазине не найден товар с model = [100009.0] Ссылка | https://vandalvape.com.ua/admin/simplepars/xml_page/1/8cb51bd3798127e67e6b6f65c34ba617-3.xml

2021-02-14 09:06:55| Парсинг : УСПЕШНЫЙ ЗАПРОС  | Код ответа [200] Ссылка | https://vandalvape.com.ua/admin/simplepars/xml_page/1/8cb51bd3798127e67e6b6f65c34ba617-4.xml
2021-02-14 09:06:55| !->[Товар не обновлен] : В магазине не найден товар с model = [100015.0] Ссылка | https://vandalvape.com.ua/admin/simplepars/xml_page/1/8cb51bd3798127e67e6b6f65c34ba617-4.xml

2021-02-14 09:06:55| Парсинг : УСПЕШНЫЙ ЗАПРОС  | Код ответа [200] Ссылка | https://vandalvape.com.ua/admin/simplepars/xml_page/1/8cb51bd3798127e67e6b6f65c34ba617-5.xml
2021-02-14 09:06:55| !->[Товар не обновлен] : В магазине не найден товар с model = [100020.0] Ссылка | https://vandalvape.com.ua/admin/simplepars/xml_page/1/8cb51bd3798127e67e6b6f65c34ba617-5.xml

2021-02-14 09:06:55| Парсинг : УСПЕШНЫЙ ЗАПРОС  | Код ответа [200] Ссылка | https://vandalvape.com.ua/admin/simplepars/xml_page/1/8cb51bd3798127e67e6b6f65c34ba617-6.xml
2021-02-14 09:06:55| !->[Товар не обновлен] : В магазине не найден товар с model = [100035.0] Ссылка | https://vandalvape.com.ua/admin/simplepars/xml_page/1/8cb51bd3798127e67e6b6f65c34ba617-6.xml

2021-02-14 09:06:55| Парсинг : УСПЕШНЫЙ ЗАПРОС  | Код ответа [200] Ссылка | https://vandalvape.com.ua/admin/simplepars/xml_page/1/8cb51bd3798127e67e6b6f65c34ba617-7.xml
2021-02-14 09:06:55| !->[Товар не обновлен] : В магазине не найден товар с model = [100036.0] Ссылка | https://vandalvape.com.ua/admin/simplepars/xml_page/1/8cb51bd3798127e67e6b6f65c34ba617-7.xml

2021-02-14 09:06:56| Парсинг : УСПЕШНЫЙ ЗАПРОС  | Код ответа [200] Ссылка | https://vandalvape.com.ua/admin/simplepars/xml_page/1/8cb51bd3798127e67e6b6f65c34ba617-8.xml
2021-02-14 09:06:56| !->[Товар не обновлен] : В магазине не найден товар с model = [100037.0] Ссылка | https://vandalvape.com.ua/admin/simplepars/xml_page/1/8cb51bd3798127e67e6b6f65c34ba617-8.xml

2021-02-14 09:06:56| Парсинг : УСПЕШНЫЙ ЗАПРОС  | Код ответа [200] Ссылка | https://vandalvape.com.ua/admin/simplepars/xml_page/1/8cb51bd3798127e67e6b6f65c34ba617-9.xml
2021-02-14 09:06:56| !->[Товар не обновлен] : В магазине не найден товар с model = [100046.0] Ссылка | https://vandalvape.com.ua/admin/simplepars/xml_page/1/8cb51bd3798127e67e6b6f65c34ba617-9.xml

2021-02-14 09:06:57| Парсинг : УСПЕШНЫЙ ЗАПРОС  | Код ответа [200] Ссылка | https://vandalvape.com.ua/admin/simplepars/xml_page/1/8cb51bd3798127e67e6b6f65c34ba617-10.xml
2021-02-14 09:06:57| !->[Товар не обновлен] : В магазине не найден товар с model = [100047.0] Ссылка | https://vandalvape.com.ua/admin/simplepars/xml_page/1/8cb51bd3798127e67e6b6f65c34ba617-10.xml

2021-02-14 09:06:57| Парсинг : УСПЕШНЫЙ ЗАПРОС  | Код ответа [200] Ссылка | https://vandalvape.com.ua/admin/simplepars/xml_page/1/8cb51bd3798127e67e6b6f65c34ba617-11.xml
2021-02-14 09:06:57| !->[Товар не обновлен] : В магазине не найден товар с model = [100048.0] Ссылка | https://vandalvape.com.ua/admin/simplepars/xml_page/1/8cb51bd3798127e67e6b6f65c34ba617-11.xml

2021-02-14 09:06:58| Парсинг : УСПЕШНЫЙ ЗАПРОС  | Код ответа [200] Ссылка | https://vandalvape.com.ua/admin/simplepars/xml_page/1/8cb51bd3798127e67e6b6f65c34ba617-12.xml
2021-02-14 09:06:58| !->[Товар не обновлен] : В магазине не найден товар с model = [100049.0] Ссылка | https://vandalvape.com.ua/admin/simplepars/xml_page/1/8cb51bd3798127e67e6b6f65c34ba617-12.xml

2021-02-14 09:06:58| Парсинг : УСПЕШНЫЙ ЗАПРОС  | Код ответа [200] Ссылка | https://vandalvape.com.ua/admin/simplepars/xml_page/1/8cb51bd3798127e67e6b6f65c34ba617-13.xml
2021-02-14 09:06:58| !->[Товар не обновлен] : В магазине не найден товар с model = [100050.0] Ссылка | https://vandalvape.com.ua/admin/simplepars/xml_page/1/8cb51bd3798127e67e6b6f65c34ba617-13.xml

2021-02-14 09:06:58| Парсинг : УСПЕШНЫЙ ЗАПРОС  | Код ответа [200] Ссылка | https://vandalvape.com.ua/admin/simplepars/xml_page/1/8cb51bd3798127e67e6b6f65c34ba617-14.xml
2021-02-14 09:06:58| !->[Товар не обновлен] : В магазине не найден товар с model = [100051.0] Ссылка | https://vandalvape.com.ua/admin/simplepars/xml_page/1/8cb51bd3798127e67e6b6f65c34ba617-14.xml

2021-02-14 09:06:58| Парсинг : УСПЕШНЫЙ ЗАПРОС  | Код ответа [200] Ссылка | https://vandalvape.com.ua/admin/simplepars/xml_page/1/8cb51bd3798127e67e6b6f65c34ba617-15.xml
2021-02-14 09:06:58| !->[Товар не обновлен] : В магазине не найден товар с model = [100052.0] Ссылка | https://vandalvape.com.ua/admin/simplepars/xml_page/1/8cb51bd3798127e67e6b6f65c34ba617-15.xml

2021-02-14 09:06:58| Парсинг : УСПЕШНЫЙ ЗАПРОС  | Код ответа [200] Ссылка | https://vandalvape.com.ua/admin/simplepars/xml_page/1/8cb51bd3798127e67e6b6f65c34ba617-16.xml
2021-02-14 09:06:58| !->[Товар не обновлен] : В магазине не найден товар с model = [100053.0] Ссылка | https://vandalvape.com.ua/admin/simplepars/xml_page/1/8cb51bd3798127e67e6b6f65c34ba617-16.xml

2021-02-14 09:06:58| Парсинг : УСПЕШНЫЙ ЗАПРОС  | Код ответа [200] Ссылка | https://vandalvape.com.ua/admin/simplepars/xml_page/1/8cb51bd3798127e67e6b6f65c34ba617-17.xml
2021-02-14 09:06:58| !->[Товар не обновлен] : В магазине не найден товар с model = [100054.0] Ссылка | https://vandalvape.com.ua/admin/simplepars/xml_page/1/8cb51bd3798127e67e6b6f65c34ba617-17.xml

2021-02-14 09:06:59| Парсинг : УСПЕШНЫЙ ЗАПРОС  | Код ответа [200] Ссылка | https://vandalvape.com.ua/admin/simplepars/xml_page/1/8cb51bd3798127e67e6b6f65c34ba617-18.xml
2021-02-14 09:06:59| !->[Товар не обновлен] : В магазине не найден товар с model = [100056.0] Ссылка | https://vandalvape.com.ua/admin/simplepars/xml_page/1/8cb51bd3798127e67e6b6f65c34ba617-18.xml

2021-02-14 09:06:59| Парсинг : УСПЕШНЫЙ ЗАПРОС  | Код ответа [200] Ссылка | https://vandalvape.com.ua/admin/simplepars/xml_page/1/8cb51bd3798127e67e6b6f65c34ba617-19.xml
2021-02-14 09:06:59| !->[Товар не обновлен] : В магазине не найден товар с model = [100057.0] Ссылка | https://vandalvape.com.ua/admin/simplepars/xml_page/1/8cb51bd3798127e67e6b6f65c34ba617-19.xml

2021-02-14 09:06:59| Парсинг : УСПЕШНЫЙ ЗАПРОС  | Код ответа [200] Ссылка | https://vandalvape.com.ua/admin/simplepars/xml_page/1/8cb51bd3798127e67e6b6f65c34ba617-20.xml
2021-02-14 09:06:59| !->[Товар не обновлен] : В магазине не найден товар с model = [100059.0] Ссылка | https://vandalvape.com.ua/admin/simplepars/xml_page/1/8cb51bd3798127e67e6b6f65c34ba617-20.xml

2021-02-14 09:06:59| Парсинг : УСПЕШНЫЙ ЗАПРОС  | Код ответа [200] Ссылка | https://vandalvape.com.ua/admin/simplepars/xml_page/1/8cb51bd3798127e67e6b6f65c34ba617-21.xml
2021-02-14 09:06:59| !->[Товар не обновлен] : В магазине не найден товар с model = [100060.0] Ссылка | https://vandalvape.com.ua/admin/simplepars/xml_page/1/8cb51bd3798127e67e6b6f65c34ba617-21.xml

2021-02-14 09:06:59| Парсинг : УСПЕШНЫЙ ЗАПРОС  | Код ответа [200] Ссылка | https://vandalvape.com.ua/admin/simplepars/xml_page/1/8cb51bd3798127e67e6b6f65c34ba617-22.xml
2021-02-14 09:06:59| ->Добавлена акционная цена = 70 | Для групп(ы) покупателей = ,4 | Сроком на = [2021-01-25 - ]

 

 

Змінено 14 лютого 2021 користувачем yaroslavking

[Kiyoshi]

24 минуты назад, Aspirinnka1 сказал:

А как вы новые товары донора добавите без сбора ссылок?

Никак допустил ошибку в предложений поправил.

[Kiyoshi]

  

20 минут назад, yaroslavking сказал:

удалил эту строку и процесс парсинга в интернет магазин зависает на 22 товаре

Нужно ждать автора атак можете попробовать установить паузу  парсинга  в 5с возможно упереться в ресурсы хостинга и останавливается.

 

Касательно логов модуль говорит что с данным Кодом товара или артикулом товара нет в магазине. Если вас не затруднит спрячьте его под спойлер или в файл.

 

Змінено 14 лютого 2021 користувачем Kiyoshi

[yaroslavking]

5 минут назад, Kiyoshi сказал:

  

Нужно ждать автора атак можете попробовать установить паузу  парсинга  в 5с возможно упереться в ресурсы хостинга и останавливается.

 

Касательно логов модуль говорит что с данным Кодом товара или артикулом товара нет в магазине. Если вас не затруднит спрячьте его под спойлер или в файл.

 

под спойлер спрятал, извините

 

а по поводу ресурсов то их хватает, когда код возвращаю на место то все работает

[kostya242]

Подскажите, как убрать пустую строку? 

 

Спойлер

 

[Rassol2]

4 минуты назад, kostya242 сказал:

Подскажите, как убрать пустую строку? 

 

  Скрыть контент

 

{reg[#^(\s|\t)+#m]}| - Удалить все пустые строки. (строки содержащие только пробелы и табуляции)

Все это есть в инструкции
https://simplepars.top/index.php?page=note&n=37

[kostya242]

Создал повторяющееся значение для дополнительных фотографий. В обработку подаются корректные URL с фотками.

 

Спойлер

 

 

Но при предпросмотре - есть всё кроме фотографий

 

 

Спойлер

 

При этом в списке - они видны

 

Спойлер

 

[Rassol2]

@kostya242  и при этом что написано в логах ?

[kostya242]

Только что, Rassol2 сказал:

и при этом что написано в логах ?

 

В логе ничего не написано, т.к. на парсинг не запускаю процесс. Видно же, что отсутствует главное изображение, соответственно могу предположить что и дополнительные не подтянуться. Или стоит запустить процесс?

[Rassol2]

Только что, kostya242 сказал:

 

В логе ничего не написано, т.к. на парсинг не запускаю процесс. Видно же, что отсутствует главное изображение, соответственно могу предположить что и дополнительные не подтянуться. Или стоит запустить процесс?

Логи пишутся не только когда парсинг запускаете.
А даже тогда когда нажимаете пред просмотр.