Перейти до вмісту
Пошук в
  • Детальніше...
Шукати результати, які ...
Шукати результати в ...

Recommended Posts

  В 11.07.2024 в 13:16, bodyak0 сказав:

Добрый день, подскажите вот парсером с розетки пытаюсь спарсить товар, все настроила но изображение не хочет затягивать, вернее затягивает но в админке ломает путь выдает такое src="/home/vwwokxeu/public_html/image/catalog/1/416600657.jpg" скачиваю фото на пк оно не открывается, кто вообще с розетки пробовал парсить фото?Или преобразователь не работает теперь в модуле?

Expand  

Попробуйте вставить ссылку на фото  с сайта розетки вот сюда.
 

  Показати вміст

И нажать щагрузить, предварительно выбрав варианты не показывать превью и не подсвечивать синтаксис.
Что то мне подсказывает что розетка может вместо фото товара отдавать вам html файл где написано форбиден, доступ запрещен.
А если там реально фото отдается вы увидите кучу каракулей, знаков вопроса и так далее.

Надіслати
Поділитися на інших сайтах

  В 11.07.2024 в 14:13, Rassol2 сказав:

Попробуйте

Expand  

 

Я бы не помогал пользователям вареза

 

dbl.jpg.c7d590126e1bb3567238b9a70e4528b5.jpg

 

 

  • +1 2
Надіслати
Поділитися на інших сайтах

  В 11.07.2024 в 14:59, spectre сказав:

 

Я бы не помогал пользователям вареза

 

dbl.jpg.c7d590126e1bb3567238b9a70e4528b5.jpg

 

 

Expand  

А кто сказал что я не приобретал лицензию?

Надіслати
Поділитися на інших сайтах


  В 11.07.2024 в 14:13, Rassol2 сказав:

Попробуйте вставить ссылку на фото  с сайта розетки вот сюда.
 

  Показати вміст

И нажать щагрузить, предварительно выбрав варианты не показывать превью и не подсвечивать синтаксис.
Что то мне подсказывает что розетка может вместо фото товара отдавать вам html файл где написано форбиден, доступ запрещен.
А если там реально фото отдается вы увидите кучу каракулей, знаков вопроса и так далее.

Expand  

К стати да, вы правы. Каракули выдает

Надіслати
Поділитися на інших сайтах


  В 12.07.2024 в 09:30, bodyak0 сказав:

А кто сказал что я не приобретал лицензию?

Expand  

Здравствуйте.
Коль такая тема, напишите номер заказа модуля.
Я проверю. Можете в лс.

Надіслати
Поділитися на інших сайтах

Всем привет! Проблема с загрузкой атрибутов.

Были выполнены разные действия с атрибутами на сайте. Через АОП удалялись дубли атрибутов, неприкрепленные к товарам атрибуты, выполнялись действия по стандартизации атрибутов. Через Симплпарс удалялись атрибуты, не привязанные к товарам, создавались группы атрибутов и атрибуты. Через Атрибутико склеивались атрибуты и выполнялись действия с атрибутами и группами атрибутов. 

В результате имеем бардак с атрибутами на сайте и Симплпарс не хочет выполнять никакие действия с атрибутами! Запускаешь проект Без создания атрибутов - работает все нормально, не тормозит. Включаешь любое действие с атрибутами - скорость обработки ссылок падает до нуля (вне зависимости от способа запуска проекта в работу - вручную или через крон) . Зависает проект, админка, сайт. Работать в адинке вообще невозможно.

Еще проблема. Очень долго открывается и выполняется любое действие в Менеджере заданий (CRON) в админке. Например, нажимаешь Рестарт задания или Отключить задание, Изменить время... страница открывается несколько минут. 

Поставщиков и проектов много, заданий крон тоже много. Каждый поставщик имеет разные атрибуты. В итоге всех манипуляций по приведению в порядок сейчас на сайте порядка 5 тысяч атрибутов.

Каким образом решить эти проблемы?

Если кто-то может предложить помощь, готов рассмотреть - пишите в личку. 

Змінено користувачем partshez
Надіслати
Поділитися на інших сайтах


  В 17.07.2024 в 08:58, partshez сказав:

Всем привет! Проблема с загрузкой атрибутов.

Были выполнены разные действия с атрибутами на сайте. Через АОП удалялись дубли атрибутов, неприкрепленные к товарам атрибуты, выполнялись действия по стандартизации атрибутов. Через Симплпарс удалялись атрибуты, не привязанные к товарам, создавались группы атрибутов и атрибуты. Через Атрибутико склеивались атрибуты и выполнялись действия с атрибутами и группами атрибутов. 

В результате имеем бардак с атрибутами на сайте и Симплпарс не хочет выполнять никакие действия с атрибутами! Запускаешь проект Без создания атрибутов - работает все нормально, не тормозит. Включаешь любое действие с атрибутами - скорость обработки ссылок падает до нуля (вне зависимости от способа запуска проекта в работу - вручную или через крон) . Зависает проект, админка, сайт. Работать в адинке вообще невозможно.

Еще проблема. Очень долго открывается и выполняется любое действие в Менеджере заданий (CRON) в админке. Например, нажимаешь Рестарт задания или Отключить задание, Изменить время... страница открывается несколько минут. 

Поставщиков и проектов много, заданий крон тоже много. Каждый поставщик имеет разные атрибуты. В итоге всех манипуляций по приведению в порядок сейчас на сайте порядка 5 тысяч атрибутов.

Каким образом решить эти проблемы?

Если кто-то может предложить помощь, готов рассмотреть - пишите в личку. 

Expand  

Ну то что вы описали, мне кажется, никто не сможет дать вам ответ. Я не могу представить что там в базе данных атрибутов со всеми манипуляциями какие там связи остались удалились нарушились и так далее. Тут мои полномочия все.  :)

Ищите какой то один инструмент для работы с атрибутами и решайте все вопросы через него.

Надіслати
Поділитися на інших сайтах

  В 17.07.2024 в 08:58, partshez сказав:

Каждый поставщик имеет разные атрибуты. В итоге всех манипуляций по приведению в порядок сейчас на сайте порядка 5 тысяч атрибутов.

Каким образом решить эти проблемы?

Expand  

модулем по Атрибутам - "Attribute Text Select" (ATS)

Объединить схожие, "разорвать" мульти-Значения на множественные, массово Удалить не нужные, массово Добавить нужные, массово Изменить (отредактировать) Значения атрибутов и много чего еще.

сам модуль -

 

  В 17.07.2024 в 08:58, partshez сказав:

Если кто-то может предложить помощь

Expand  

 

здесь главное нужно понимать Структуру и Специфику сайта. В частности - Товаров и его Атрибутов.

Ведь одни и те же схожие, казалось бы, Атрибуты, могут по Специфике быть разными и важными. А другие Атрибуты/Значения, казалось бы по названию, полностью разными - являются дублями и их нужно объединить.

(Все операции в АТС сохраняют связь с Товарами, а повторные дубли - автоматом объединяются)

4_admin_merging_attrib-values.thumb.png.e6b0edeb58d42a9cbd5534626037ad98.png

 

даже если объединять сами Атрибуты с частично одинаковыми Значениями, то их одинаковые Значения не дублируются.

 

4_admin_merger-Attributes.thumb.png.dfdec9c07aa387d201e8aa73af95f63f.png

 

  • +1 2
Надіслати
Поділитися на інших сайтах

  В 17.07.2024 в 11:32, vier сказав:

модулем по Атрибутам - "Attribute Text Select" (ATS)

Объединить схожие, "разорвать" мульти-Значения на множественные, массово Удалить не нужные, массово Добавить нужные, массово Изменить (отредактировать) Значения атрибутов и много чего еще.

 

Expand  

Вчера купили Ваш модуль и установили на сайт. Будем разбираться

  • +1 1
Надіслати
Поділитися на інших сайтах


  В 17.07.2024 в 10:19, Rassol2 сказав:

Еще проблема. Очень долго открывается и выполняется любое действие в Менеджере заданий (CRON) в админке. Например, нажимаешь Рестарт задания или Отключить задание, Изменить время... страница открывается несколько минут. 

Expand  

По атрибутам понял. Спасибо!

А по этому вопросу что можете подсказать?

Надіслати
Поділитися на інших сайтах


  В 17.07.2024 в 12:14, partshez сказав:

Еще проблема. Очень долго открывается и выполняется любое действие в Менеджере заданий (CRON) в админке. Например, нажимаешь Рестарт задания или Отключить задание, Изменить время... страница открывается несколько минут. 

Expand  

сколько у вас заданий там ?
Я видел сложности  когда у пользователей по 50 заданий, но это не вопрос отработки модуля а вопрос отрисовки в браузере.
 

Надіслати
Поділитися на інших сайтах

  В 17.07.2024 в 12:56, Rassol2 сказав:

сколько у вас заданий там ?
Я видел сложности  когда у пользователей по 50 заданий, но это не вопрос отработки модуля а вопрос отрисовки в браузере.
 

Expand  

Понял. Вопрос снят. Сейчас порядка 100 заданий или больше. Много поставщиков приходится держать актуальными. По каждому поставщику по два задания...

Разбил по времени, таймаут сделал 48-72. Порядок выполнения назначен. Парсинг после обработчика запустил в 200 потоков. Но за одни сутки не успеваю все обновить. Часть проектов работает через прокси или с куками. Работа интересная. Спасибо Вам за модуль!

Змінено користувачем partshez
Надіслати
Поділитися на інших сайтах


Вопрос автору в первую очередь. И может быть кто-то подскажет.

Все больше сайтов переходят на HTTP/3. Симплпарс не может с ними работать. Какие есть варианты кроме парсера на Пайтон?

Автор, рассматриваете работу парсинга с такими сайтами хотя бы в перспективе? Или это нерешаемый вопрос?

Надіслати
Поділитися на інших сайтах


  В 24.07.2024 в 12:06, partshez сказав:

Вопрос автору в первую очередь. И может быть кто-то подскажет.

Все больше сайтов переходят на HTTP/3. Симплпарс не может с ними работать. Какие есть варианты кроме парсера на Пайтон?

Автор, рассматриваете работу парсинга с такими сайтами хотя бы в перспективе? Или это нерешаемый вопрос?

Expand  

http 3 в cURL поддерживается по умолчанию вроде как с php 8+
Модуль работает на движке opencart 2 и 3 который в свою очередь не поддерживает php 8

Отсюда либо самому пере собирать библиотеку curl в более ранних версиях php что не реально в масмаркете. Либо ждать модуль на версии php 8 и новее.
А вот об это сейчас не идет речи. Почти все разработки модуля SimplePars заморожены на неопределенный срок.

  • +1 1
Надіслати
Поділитися на інших сайтах

Может кто-то сталкивался или автор поможет.

Стартовая ссылка "https://site.com.ua/ua/remont/bojlery-kolonki-vodonagrevateli/2070-296381/"

Сбор ссылок через текст начала и конца, определяет количество страниц нормально, но все ссылки в "Очередь сканирования ссылок" имеют вид:

https://site.com.ua/./
https://site.com.ua/?p=2
https://site.com.ua/?p=3
https://site.com.ua/?p=4
https://site.com.ua/?p=5
https://site.com.ua/?p=6

 

Захватывает ссылки на товары только со стартовой ссылки(страницы).

Надіслати
Поділитися на інших сайтах


  В 24.07.2024 в 20:22, Vizex сказав:

Может кто-то сталкивался или автор поможет.

Стартовая ссылка "https://site.com.ua/ua/remont/bojlery-kolonki-vodonagrevateli/2070-296381/"

Сбор ссылок через текст начала и конца, определяет количество страниц нормально, но все ссылки в "Очередь сканирования ссылок" имеют вид:

https://site.com.ua/./
https://site.com.ua/?p=2
https://site.com.ua/?p=3
https://site.com.ua/?p=4
https://site.com.ua/?p=5
https://site.com.ua/?p=6

 

Захватывает ссылки на товары только со стартовой ссылки(страницы).

Expand  

Не совсем понимаю что вы имеете в виду.
Ссылки очереди сканирования будут такие как модуль смог найти по вашим настройкам фильтра очереди сканирования. И ссылки будут из кода страницы.
То есть елси под ваши настройки попадают именно такие ссылки то они и записываются в очередь, и ни как иначе.

Надіслати
Поділитися на інших сайтах

Добрый день. Может кто сталкивался - подскажите. Как работает в Обработчик XML в самом низу поле " Чего в товарах быть не должно" - пробовал по разному не сработало

Допустим нужно убрать "</param>" с ленты товаров

Надіслати
Поділитися на інших сайтах


  В 27.07.2024 в 14:23, Vladimir99 сказав:

Добрый день. Может кто сталкивался - подскажите. Как работает в Обработчик XML в самом низу поле " Чего в товарах быть не должно" - пробовал по разному не сработало

Допустим нужно убрать "</param>" с ленты товаров

Expand  

Просто не настраивайте эту границу и не указываете ее в атрибутах в Парсинг в ИМ.

Или конкретизируйте вопрос.

Сейчас вы говорите модулю, чтобы он не обрабатывал страницы, на которых есть указанный тег. 

Здесь можно указать, например, бренд, товары которого модуль должен игнорировать

Змінено користувачем partshez
Надіслати
Поділитися на інших сайтах


  В 27.07.2024 в 15:56, Vladimir99 сказав:

Благодарю за ответ. Мне нужно убрать єтот тег со страницы при парсинге. Думал это поле именно для этого. Может есть какое выражение сделать так ?

Expand  

Пишите в личку. Дайте настройки проекта. Опишите конкретнее Ваши пожелания

Надіслати
Поділитися на інших сайтах


  • 2 weeks later...
  В 12.07.2024 в 09:30, bodyak0 сказав:

А кто сказал что я не приобретал лицензию?

Expand  

 

Батенька, засветились, где только возможно, интернет всё помнит :)

Змінено користувачем 3DO
Надіслати
Поділитися на інших сайтах


  В 08.08.2024 в 13:19, csm300 сказав:

Подскажите, пожалуйста, @Rassol2
При повторном парсинге (обновлении) поле модель обновляться не будет ни в каком случае?

Expand  

Здравствуйте.
Обновляются исключительно те поля где вы выбрали действие обновить.

Надіслати
Поділитися на інших сайтах

  В 08.08.2024 в 13:21, Rassol2 сказав:

Здравствуйте.
Обновляются исключительно те поля где вы выбрали действие обновить.

Expand  

Я о том, что там такого действия нет, и оно, как я понял, не предусмотрено, то есть обновлять поле модель невозможно, верно?

Надіслати
Поділитися на інших сайтах


Створіть аккаунт або увійдіть для коментування

Ви повинні бути користувачем, щоб залишити коментар

Створити обліковий запис

Зареєструйтеся для отримання облікового запису. Це просто!

Зареєструвати аккаунт

Вхід

Уже зареєстровані? Увійдіть тут.

Вхід зараз
×
×
  • Створити...

Important Information

На нашому сайті використовуються файли cookie і відбувається обробка деяких персональних даних користувачів, щоб поліпшити користувальницький інтерфейс. Щоб дізнатися для чого і які персональні дані ми обробляємо перейдіть за посиланням . Якщо Ви натиснете «Я даю згоду», це означає, що Ви розумієте і приймаєте всі умови, зазначені в цьому Повідомленні про конфіденційність.