Модуль Автоматическая обработка прайс-листов. [Поддержка]

[myunik4]

Добрый день. У меня некорректно загружаются товары. Все время выдает ошибку 

Warning: Error while sending QUERY packet. PID=28746 in /home/m/myunik46/beflawless.ru/public_html/system/library/db/mysqli.php on line 18

Что это может быть? 

Open Cart 3032

[Rassol2]

1 минуту назад, myunik4 сказал:

Добрый день. У меня некорректно загружаются товары. Все время выдает ошибку 

Warning: Error while sending QUERY packet. PID=28746 in /home/m/myunik46/beflawless.ru/public_html/system/library/db/mysqli.php on line 18

Что это может быть? 

Open Cart 3032

скорее всего вы превышаете нагрузку на sql сервер на хостинге и он вас выключает.
Если используется парсинг поставьте паузу, что бы модуль меньше работы делал за то же время. И тем самым снизил нагрузку на sql

[myunik4]

9 минут назад, Rassol2 сказал:

скорее всего вы превышаете нагрузку на sql сервер на хостинге и он вас выключает.
Если используется парсинг поставьте паузу, что бы модуль меньше работы делал за то же время. И тем самым снизил нагрузку на sql

Я загружаю данные из таблицы. Не парсинг. Подскажите пожалуйста, как я могу снизить нагрузку? Благодарю.

[Kostyan11]

В 24.11.2019 в 13:10, SergeAgueroMe сказал:

Добрейшего всем!
Подскажите, пожалуйста, договорился с поставщиком у которого нету прайса, только прямой парс с его сайта. Все бы хорошо, но нужно собрать все ссылки на товары. Подскажите как это сделать? В этом модуле ничего такого не нашел.Может быть есть какая-то прога или скрипт? Спасибо

Попробуй этот https://turboparser.ru/

 

[byba]

8 часов назад, myunik4 сказал:

Я загружаю данные из таблицы. Не парсинг. Подскажите пожалуйста, как я могу снизить нагрузку? Благодарю.

Поставьте задержку парсинга.  Не принципиально парсите Вы таблицу или сайт. 

[myunik4]

19 минут назад, byba сказал:

Поставьте задержку парсинга.  Не принципиально парсите Вы таблицу или сайт. 

Ставлю 8 сек. максимальное, что есть. Не помогает к сожалению 

[AlexSPB]

В 02.06.2020 в 15:48, Rassol2 сказал:

вам ненужно определять номера колонок через модуль.
У вас стандартный прайс xml 2003 открываете его и смотрите нормера колонок через эксель.
Это не тот случай где нужно смотреть номера через модуль.

Что бы не потерять настройки достаточно сохранить таблицы базы данных которые начинаются на oc_suppler
и все сохранится.

я так и делал по прайсу xml 2003.

Таблицу я сохранил, модуль удалил, кэш чистил. Но потом когда установил его опять все осталось по прежнему, все формы, те же лаги...ппц

 

[Rubynoid]

1 час назад, myunik4 сказал:

Ставлю 8 сек. максимальное, что есть. Не помогает к сожалению 

Рандом попробуйте - он ка раз имитирует различное время запросов, как человек, а не как бот, систематически отправляя запросы через один и тот же заданный интервал времени.

[BF1138]

Всем привет!

Давно не заходила в модуль. Сейчас на Маке открыла и не вижу цветов в списке инструментов, это нормально или чот не так?

 

Змінено 3 червня 2020 користувачем BF1138

[gidokvova]

Здравствуйте.

У поставщика постоянно смещаются столбцы из-за акций (Column# 6  oldprice)

Column# 1  available	Column# 1  available
Column# 2  id	Column# 2  id
Column# 3  name	Column# 3  name
Column# 4  vendor_code	Column# 4  vendor_code
Column# 5  url	Column# 5  url
Column# 6  picture	Column# 6  oldprice
Column# 7  pickup	Column# 7  picture
Column# 8  delivery	Column# 8  pickup
Column# 9  description	Column# 9  delivery
Column# 10  ostatok	Column# 10  description
Column# 11  date	Column# 11  ostatok
Column# 12  isImport	Column# 12  date
Column# 13  keywords	Column# 13  isImport
Column# 14  price	Column# 14  keywords
Column# 15  currencyId	Column# 15  price
Column# 16  categoryId	Column# 16  currencyId
	Column# 17  categoryId    Как прописывать правильно столбцы в такой ситуации?? Файл XML Может кто сталкивался с таким прайсом?

[Rubynoid]

10 минут назад, gidokvova сказал:

Здравствуйте.

У поставщика постоянно смещаются столбцы из-за акций (Column# 6  oldprice)

Column# 1  available	Column# 1  available
Column# 2  id	Column# 2  id
Column# 3  name	Column# 3  name
Column# 4  vendor_code	Column# 4  vendor_code
Column# 5  url	Column# 5  url
Column# 6  picture	Column# 6  oldprice
Column# 7  pickup	Column# 7  picture
Column# 8  delivery	Column# 8  pickup
Column# 9  description	Column# 9  delivery
Column# 10  ostatok	Column# 10  description
Column# 11  date	Column# 11  ostatok
Column# 12  isImport	Column# 12  date
Column# 13  keywords	Column# 13  isImport
Column# 14  price	Column# 14  keywords
Column# 15  currencyId	Column# 15  price
Column# 16  categoryId	Column# 16  currencyId
	Column# 17  categoryId    Как прописывать правильно столбцы в такой ситуации?? Файл XML Может кто сталкивался с таким прайсом?

Один мой пользователь читал прайс по постоянной ссылке и прогонял его по Крону.
Каждый день, одна и та же ссылка, а прайсы свежие.

Поставщик начал произвольно добавлять в прайс колонку oldprice и vendorCountry
Причем: может добавить, а может не добавить
В результате, нумерация колонок меняется и прайс не проходит.

На сегодня задача решена с помощью файла http://prntscr.com/p947tb
15 - это номер формы поставщика.
Делаете схему расположения колонок в csv ( в Блокноте ) и закидываете на сервак в uploads
и колонки прайса выстраиваются по вашей схеме.

Если, например, в текущем прайсе не будет колонки oldprice, а в вашей схеме она есть,
то она просто будет пустая.

Содержимое файла  user_schema15.csv

 

<available,<id,<url>,<price>,<oldprice>,<sales_notes>,<currencyId>,<categoryId>,<picture>,<pickup>,<delivery>,<name>,<country_of_origin>,<vendor>,<vendorCode>,<description>,<param<name,<param,<param<unit

 

Никаких пробелов!!!

[Rubynoid]

34 минуты назад, BF1138 сказал:

Всем привет!

Давно не заходила в модуль. Сейчас на Маке открыла и не вижу цветов в списке инструментов, это нормально или чот не так?

 

Попробуйте почистить кеш на сайте и в самом браузере.

[Flint2000]

7 годин назад, Rubynoid сказав:

На сегодня задача решена с помощью файла http://prntscr.com/p947tb
15 - это номер формы поставщика.

Тут следует уточнить "15" номер формы в админке https://prnt.sc/stgi39 или  же номера названий прайса в admin/uploads https://prnt.sc/stgii2

Так вот, это именно НОМЕР НАЗВАНИЯ ПРАЙСА (ID ФОРМЫ), а не код поставщика

 

Змінено 4 червня 2020 користувачем Flint2000

[Rubynoid]

1 час назад, Flint2000 сказал:

Тут следует уточнить "15" номер формы в админке https://prnt.sc/stgi39 или  же номера названий прайса в admin/uploads https://prnt.sc/stgii2

Так вот, это именно НОМЕР НАЗВАНИЯ ПРАЙСА (ID ФОРМЫ), а не код поставщика

 

Это понятно. Лучше  gidokvova напишите - ему нужнее)

[MevgenyR]

Всем доброго дня!

Пытаюсь спарсить опции и что то не получается. С атрибутами и описанием инфу как парсить нашёл. По опциям нет. Пробовал по принципу атрибутов парсить но не выходит. Не могу понять за какой тег зацепиться. Может кто поможет? Какой тег взять и куда вставить в форме опции. Инфо пытаюсь дёрнуть от сюда view-source:https://fit2u.ru/product/sportivnyi-kombinezon-so-vstavkami-profit-km01010301 строка 728. Скрин прайса во вложении. Помогите пожалуйста

.

[gidokvova]

2 часа назад, Rubynoid сказал:

Это понятно. Лучше  gidokvova напишите - ему нужнее)

Спасибо. Попробую. Отпишусь...

[LODESTAR]

Добрый день.

Сегодня удалил все товары с сайта и решил залить по новому.

Сайт донор стал выдавать ошибку:

"

 The Product passed: Row ~= 1 SKU = Code Invalid price. Column = 9
 The Product passed: Row ~= 2 url = https://brain.com.ua/3G_router_Huawei_E5577FS-932-p378720.html Site no answer 
 The Product passed: Row ~= 2 SKU = U0309557 Product name not found in price-list 

"

 

С другого донора парсится нормально.

Это я что то в модуле начудил или мой IP блоконули?

[Rassol2]

7 минут назад, LODESTAR сказал:

Добрый день.

Сегодня удалил все товары с сайта и решил залить по новому.

Сайт донор стал выдавать ошибку:

"

 The Product passed: Row ~= 1 SKU = Code Invalid price. Column = 9
 The Product passed: Row ~= 2 url = https://brain.com.ua/3G_router_Huawei_E5577FS-932-p378720.html Site no answer 
 The Product passed: Row ~= 2 SKU = U0309557 Product name not found in price-list 

"

 

С другого донора парсится нормально.

Это я что то в модуле начудил или мой IP блоконули?

Вот ошибка во второй строке скорее всего связана с блоком вашего ip

Site no answer 

Вот это.

[LODESTAR]

9 минут назад, Rassol2 сказал:

Вот ошибка во второй строке скорее всего связана с блоком вашего ip

Site no answer 

Вот это.

А есть какие то варианты это обойти?

[Flint2000]

Тільки що, LODESTAR сказав:

А есть какие то варианты это обойти?

Использовать Прокси. Или договориться с донором, чтобы внес ваш IP в исключения

[pretzel]

18 часов назад, Rubynoid сказал:

<available,<id,<url>,<price>,<oldprice>,<sales_notes>,<currencyId>,<categoryId>,<picture>,<pickup>,<delivery>,<name>,<country_of_origin>,<vendor>,<vendorCode>,<description>,<param<name,<param,<param<unit

А можно узнать логику построения столбцов ?

<available,<id      где закрывающий знак ?

 

<param<name,<param,<param<unit      откуда взялись ? их в исходной таблице не было

[Flint2000]

32 хвилини назад, pretzel сказав:

<param<name,<param,<param<unit      откуда взялись ? их в исходной таблице не было

В каждой таблице могут быть свои значения

[pretzel]

1 час назад, Flint2000 сказал:

В каждой таблице могут быть свои значения

 

если прогоном столбцов

я получаю 

Column# 1  <Id>  
 Column# 2  <GroupId>  
 Column# 3  <Code>  
 Column# 4  <Article>  
 Column# 5  <PartNumber>  
 Column# 6  <Name>  
 Column# 7  <Type>  
 Column# 8  <Brand>  
 Column# 9  <Site>  
 Column# 10  <Model>  
 Column# 11  <ModelCharacteristic>  
 Column# 12  <OurWebSite>  
 Column# 13  <ImageLink>  
 Column# 14  <Warranty>  
 Column# 15  <Group>  
 Column# 16  <FullNameGroup>  
 Column# 17  <DataTransferSpeed>  
 Column# 18  <NumberOfAntennas>

 

то и в файле мне просто набросать по порядку ?

<Id>,<GroupId>,<Code>,<Article>,<PartNumber>,<Name>,<Type>,<Brand>,<Site>,<Model>,<ModelCharacteristic> ....

[Flint2000]

27 хвилин назад, pretzel сказав:

то и в файле мне просто набросать по порядку ?

Да

[gidokvova]

21 час назад, Rubynoid сказал:

Один мой пользователь читал прайс по постоянной ссылке и прогонял его по Крону.
Каждый день, одна и та же ссылка, а прайсы свежие.

Поставщик начал произвольно добавлять в прайс колонку oldprice и vendorCountry
Причем: может добавить, а может не добавить
В результате, нумерация колонок меняется и прайс не проходит.

На сегодня задача решена с помощью файла http://prntscr.com/p947tb
15 - это номер формы поставщика.
Делаете схему расположения колонок в csv ( в Блокноте ) и закидываете на сервак в uploads
и колонки прайса выстраиваются по вашей схеме.

Если, например, в текущем прайсе не будет колонки oldprice, а в вашей схеме она есть,
то она просто будет пустая.

Содержимое файла  user_schema15.csv

 

<available,<id,<url>,<price>,<oldprice>,<sales_notes>,<currencyId>,<categoryId>,<picture>,<pickup>,<delivery>,<name>,<country_of_origin>,<vendor>,<vendorCode>,<description>,<param<name,<param,<param<unit

 

Никаких пробелов!!!

Здравствуйте.

Прошу пере проверить может где-то упустил какой то момент. Выполнял по инструкции.

 

Создал файл user_schema5.csv в \admin\uploads

Содержимое файла по аналогии с вашим но с моими столбцами где 17колонок:

<available,<id,<name>,<vendor_code>,<url>,<oldprice>,<picture>,<pickup>,<delivery>,<description>,<ostatok>,<date>,<isImport>,<keywords>,<price>,<currencyId>,<categoryId>

 

Проганяю прайс 5.xml с 16 колонками где отсутствует oldprice.

Ошибка во всех строчках, что не видит категории : 

The Product has not been added: Row ~= 1 SKU = 10080 Category: '' not found in your settings (see page 'Category and margin')

 

Хотя пробовал и так:

<available>,id>,<name>,<vendor_code>,<url>,<oldprice>,<picture>,<pickup>,<delivery>,<description>,<ostatok>,<date>,<isImport>,<keywords>,<price>,<currencyId>,<categoryId>

<available>,<id>,<name>,<vendor_code>,<url>,<oldprice>,<picture>,<pickup>,<delivery>,<description>,<ostatok>,<date>,<isImport>,<keywords>,<price>,<currencyId>,<categoryId>

 

Пробовал переименовать user_schema5.csv  ---> user_schema5.xml  -- > user_schema33.csv  --> user_schema05.csv

 

Тестирую на локальном опен сервере.

Пример товара из прайса поставщика:

<offers>

<offer available="true" id="10080">

<name>товар11111</name>

<vendor_code>7259</vendor_code>

<url>

https://---------.ua/muz-ig

</url>

<picture>https://------.ua/p/enl_10080.jpg</picture>

<pickup>true</pickup>

<delivery>true</delivery>

<description>

<![CDATA[

Комплектация:</b> 

]]>

</description>

<ostatok>10...50 шт.</ostatok>

<date/>

<isImport>true</isImport>

<keywords>Игрушка</keywords>

<price>232.43</price>

<currencyId>UAH</currencyId>

<categoryId>99134</categoryId>

</offer>