Jump to content

Recommended Posts

37 минут назад, sotavip сказал:

автор модуля вопрос был конкретно о вставках ссылок на картинки которые использует донор, без возможности загрузки самих картинок

а не о архитектуре магазина или использования бэкапа, не спрашиваю по сколько тут у людей гигабайтов у магазинов, просьба отвечать на вопросы как автор модуля к к по желанием клиента

Я не знаю кто вам сегодня испортил настроение.
Но если сегодня вы хотите общаться таким  образом, я вам помешать не могу.

 

Конкретно по вашему высказыванию.
Вы видите в своих сообщениях конкретный вопрос ? Я нет.

Спойлер
13 часов назад, sotavip сказал:

как решаете вопрос с хранением файлов? когда товаров много и соответственно фото, не хочется на хост загружать, в идеале их в отдельном месте хранить

 

13 часов назад, sotavip сказал:

и backup сайта будет делать проще без фото, гигабайты back up это жёстко :-)

 

13 часов назад, sotavip сказал:

возможно вставлять ссылки на фото от донора на первое время, индексация сейчас не важна

 

12 часов назад, sotavip сказал:

на хосте 4Гб уже полные, и это только начала парсинга :blink:

 

 

Но несмотря на это я попытался разъяснить вам ситуацию.
Если вы хотите получать конкретные ответы, начните задавать конкретные вопросы.
 

Share this post


Link to post
Share on other sites

@sotavip А все же.

Напишите мне в ЛС кака я у вас версия движка и модуля. Вам поправлю код и модуль не будет парсить фото, и в базу данных будет писать прямые ссылки на фото сайта донора.
Как это будет работать в логике самого opcencart я не знаю, но поскольку вам не важно сео и тому подобное это можно реализовать.

Share this post


Link to post
Share on other sites

ок, как только объем данных подойдет к критической, 

Share this post


Link to post
Share on other sites
3 минуты назад, sotavip сказал:

ок, как только объем данных подойдет к критической, 

На всякий случай пишу.
Когда у вас подойдет обьем к критическому и вы мне напишите, это не будет значить что я все брошу и пойду делать.
Сегодня ночью я намерен только разрабатывать модуль, по этому могу уделить время в целях саморазвития проделать такую авантюру.

Если вы мне напишите через пару дней или  ....   и я буду занят придется подождать.

Share this post


Link to post
Share on other sites

Подскажите пожалуйста, кто как реализует.

У донора нет ни артикулов, ни кодов каких то, только название, описание, цена, характеристики.

К чему привязаться не могу сообразить, чтоб потом в будущем после полного парсинга можно было обновлять цены.

Share this post


Link to post
Share on other sites
1 минуту назад, urchik сказал:

Подскажите пожалуйста, кто как реализует.

У донора нет ни артикулов, ни кодов каких то, только название, описание, цена, характеристики.

К чему привязаться не могу сообразить, чтоб потом в будущем после полного парсинга можно было обновлять цены.

Луче ссылку приложите.
Но как правило есть такие части в товаре которые обновляются ровно никогда.
К примеру я бы рекомендовал сделать так.
Захешировать название. в 4 символа.
Захошировать блок с фото в 4 символа.

Затем их склеить в поле артикул париснга в им.

Отдельно полагаться на название не стоит ибо они могут повторятся в товаре.
А если склеить с хешем фото, тогда должно быть уникально.

Ну это мой вариант, опыта у меня у самого с этим вопросом не много, но выглядит более менее надежно.

Share this post


Link to post
Share on other sites
6 часов назад, Rassol2 сказал:

На всякий случай пишу.
Когда у вас подойдет обьем к критическому и вы мне напишите, это не будет значить что я все брошу и пойду делать.
Сегодня ночью я намерен только разрабатывать модуль, по этому могу уделить время в целях саморазвития проделать такую авантюру.

Если вы мне напишите через пару дней или  ....   и я буду занят придется подождать.

 

 

SimplePars v3.0-2_beta , ocStore 2.1.0.2.1, просьба сделатьна своем хосте, с этими правками буду парсить заново

Share this post


Link to post
Share on other sites
11 минут назад, sotavip сказал:

 

 

SimplePars v3.0-2_beta , ocStore 2.1.0.2.1, просьба сделатьна своем хосте, с этими правками буду парсить заново

Я собственно уделил время этому вопросу.
И провел тесты.
Если записать в базу данных товара ссылку на фото которая лежит на удаленном хосте то опенкарт ее не выводит.
ESKvZpo.png

 

Результат в карточке товара.
 

Спойлер

JAQEUic.png


Хоть в модуле я и могу сделать такие изменения вам это пользы не принесет, поскольку сам движок отказывается так работать.
Идея была интересная но реализовать ее не получится.

Возможно и можно будет реализовать если вы найдете дополнение для опенкарт которое позволяет выводить фото находящиеся на удаленном сервере, и в базе данных товара указана не относительная ссылка, а полная ссылка на фото с удаленного хоста.
Если есть такой модуль тогда можно будет вернутся к этому вопросу.

А пока тест показал что это не имеет смысла.

Share this post


Link to post
Share on other sites
2 часа назад, Rassol2 сказал:

Луче ссылку приложите.
 

 

Товар

Выбрал первый попавшийся, но почти все такие , только есть еще с описанием.

Можно попробовать как вы предложили. Но если что то поменяется у них в блоке с фото и в наименование, то данный товар заново спарсится, вернее ее цена ))).

 

Еще заметил когда парсил другого донора, попадались ссылки без товара, на главную перекидывали, и парсер парсил их, добавлял пустые товары, а в логах писал что ошибок нет.

 

Share this post


Link to post
Share on other sites
1 час назад, Rassol2 сказал:

Я собственно уделил время этому вопросу.
И провел тесты.
Если записать в базу данных товара ссылку на фото которая лежит на удаленном хосте то опенкарт ее не выводит.
ESKvZpo.png

 

Результат в карточке товара.
 

  Скрыть контент

JAQEUic.png


Хоть в модуле я и могу сделать такие изменения вам это пользы не принесет, поскольку сам движок отказывается так работать.
Идея была интересная но реализовать ее не получится.

Возможно и можно будет реализовать если вы найдете дополнение для опенкарт которое позволяет выводить фото находящиеся на удаленном сервере, и в базе данных товара указана не относительная ссылка, а полная ссылка на фото с удаленного хоста.
Если есть такой модуль тогда можно будет вернутся к этому вопросу.

А пока тест показал что это не имеет смысла.

 

 

жаль, была бы не лишняя такая функция подгружать картинки  или нет,

возможно как то через поиск замену относительную ссылку вставлять?  к этому вопросу возможно вернемся позже, возможно кто то с эти сталкивался? 

 спасибо за внимание!

 

 

другой вопрос как отключить товар  по определенным нескольким текстам на странице товара, к примеру в описание указано что товар восстановленный (новый) и нет в наличии и в обоих случаях сделать количество товаров равно нулю.

такую функцию нашел только для одного случая например восстановленный (новый), через поиск и замену ищет слово восстановленный заменяет на ноль,  (новый) = 10, и ставив границу в количество получаем результат, а для второго  дополнительного критерия  'нет в наличии' не нашел способа как вставить, ведь во вкладке Пасинг в ИМ, в разделе количество указать несколько границ не возможно?

 

или как товозможно ли в поиске использовать выражение &? чтоб искал по нескольким критериям

 

 

Share this post


Link to post
Share on other sites
4 часа назад, sotavip сказал:

возможно как то через поиск замену относительную ссылку вставлять? 

Относительная ссылака подразумевает что фото лежит на вашем сервере.
 

4 часа назад, sotavip сказал:

другой вопрос как отключить товар  по определенным нескольким текстам на странице товара, к примеру в описание указано что товар восстановленный (новый) и нет в наличии и в обоих случаях сделать количество товаров равно нулю.

такую функцию нашел только для одного случая например восстановленный (новый), через поиск и замену ищет слово восстановленный заменяет на ноль,  (новый) = 10, и ставив границу в количество получаем результат, а для второго  дополнительного критерия  'нет в наличии' не нашел способа как вставить, ведь во вкладке Пасинг в ИМ, в разделе количество указать несколько границ не возможно?

В количество можно вставить несколько границ парсинга как и в лбьое место.
 

Спойлер

YxV4ZTq.png


По поводу отключить товар исходят из разных наборов текста на страницах к сожалению такого нету.

Share this post


Link to post
Share on other sites
5 часов назад, urchik сказал:

Товар

Выбрал первый попавшийся, но почти все такие , только есть еще с описанием.

Можно попробовать как вы предложили. Но если что то поменяется у них в блоке с фото и в наименование, то данный товар заново спарсится, вернее ее цена ))).

да делайте как я описал выше. Эти данные меняют аж никогда. По этому не стоить об этом думать, шанс есть но критично мал. И если так думать тогда нечему не прицепитесь.

 

5 часов назад, urchik сказал:

Еще заметил когда парсил другого донора, попадались ссылки без товара, на главную перекидывали, и парсер парсил их, добавлял пустые товары, а в логах писал что ошибок нет.

Если по истечению обстоятельств та страница куда перекинули содержит код с границе парсинга идентификатора товара то чем эта страница отличается от любой другой ?
Ничем границы есть данные в них есть значит модуль пытается создать товар из того  что у него есть.
Можете отключить переход по редиректам в браузере модуля.
 

Share this post


Link to post
Share on other sites

Добрый день, подскажите как правильно спарсить сайт https://moscow.pinskdrev.ru/catalog/myagkaya-mebel/kresla/kreslo-patritsiya/
не могу сделать чтобы парсер понимал где товар где категория, он почему то в товары мне категории добавляет)
по отдельности сложно парсить может совет какой дадите?

Share this post


Link to post
Share on other sites
2 минуты назад, bodyak0 сказал:

Добрый день, подскажите как правильно спарсить сайт https://moscow.pinskdrev.ru/catalog/myagkaya-mebel/kresla/kreslo-patritsiya/
не могу сделать чтобы парсер понимал где товар где категория, он почему то в товары мне категории добавляет)
по отдельности сложно парсить может совет какой дадите?

Здравствуйте.
Ну тут явно вопрос с настройками сбора ссылок.
Если не вникать что вы там настроили то совет будет такой.

По смотрите видео с сбором ссылок, особенно внимательно ту честь где рассказываю про границы парсинга в ссылках
 

Спойлер

 


И настройте таким образом что бы модуль в ссылки на товары собирал только ссылки из определенного блока. А этот блок находится только на страницах категорий. Итак что это решит ваш вопрос.

Или же рассмотрите вариант сбора ссылок с карты сайта.
 

Share this post


Link to post
Share on other sites
11 хвилину назад, Rassol2 сказав:

Здравствуйте.
Ну тут явно вопрос с настройками сбора ссылок.
Если не вникать что вы там настроили то совет будет такой.

По смотрите видео с сбором ссылок, особенно внимательно ту честь где рассказываю про границы парсинга в ссылках
 

  Приховати вміст

 


И настройте таким образом что бы модуль в ссылки на товары собирал только ссылки из определенного блока. А этот блок находится только на страницах категорий. Итак что это решит ваш вопрос.

Или же рассмотрите вариант сбора ссылок с карты сайта.
 

Если правильно понял то могу задать к примеру в тексте начала сбора <div class="js-product-item-list items"> а в конце </div>
так по идее граница есть сбора?

Share this post


Link to post
Share on other sites
1 минуту назад, bodyak0 сказал:

Если правильно понял то могу задать к примеру в тексте начала сбора <div class="js-product-item-list items"> а в конце </div>
так по идее граница есть сбора?

Да указывать так только выберите правильные границы парсинга.

Share this post


Link to post
Share on other sites

Добрый день!

Смею полагать, что не меня одного терзает этот вопрос))

Скажите, когда ожидать крон?

Share this post


Link to post
Share on other sites
1 минуту назад, DoosteR сказал:

Добрый день!

Смею полагать, что не меня одного терзает этот вопрос))

Скажите, когда ожидать крон?

не одного.
В версии 3.2 модуля.
Сейчас выйдет одно новая фишка глобальная а за ней будет реализовывается крон.

  • +1 1

Share this post


Link to post
Share on other sites
6 минут назад, Mat сказал:

Добрый день!

Можно парсить опции товара?

Пример https://profildoors-spb.ru/mezhkomnatnye-dveri/seria-xn/profil-dors-2-09xn-gruvd

Спойлер

image.png.e8c872d684d12d2d9d0fa1d8479a483c.png

 

Спасибо

Здравствуйте.
Как картинки нет не получится.

А вот как текст то вполне.
Я имею в виду что в опции цветовое решение серии будут значения
ДАРК БРАУН

КАШТАН НАТУРАЛЬНЫЙ

КАШТАН СВЕТЛЫЙ

.....

  • +1 1

Share this post


Link to post
Share on other sites
В 23.01.2020 в 08:10, sotavip сказал:

другой вопрос как отключить товар  по определенным нескольким текстам на странице товара, к примеру в описание указано что товар восстановленный (новый) и нет в наличии и в обоих случаях сделать количество товаров равно нулю.

такую функцию нашел только для одного случая например восстановленный (новый), через поиск и замену ищет слово восстановленный заменяет на ноль,  (новый) = 10, и ставив границу в количество получаем результат, а для второго  дополнительного критерия  'нет в наличии' не нашел способа как вставить, ведь во вкладке Пасинг в ИМ, в разделе количество указать несколько границ не возможно?

 

или как то возможно ли в поиске использовать выражение &? чтоб искал по нескольким критериям

 

 

Некоторое время назад использовал {gran_69}{|}{gran_66}  для цены Опции  http://prntscr.com/qslvk9  Автор категорически писал мне, что оператор ИЛИ в этом случае работать не должен. А у меня работает (но есть небольшая проблема по первой цене, это уже решал отдельно)! Я к тому, что нужно пробовать разные варианты. 

В данном случае я бы попробовал по умолчанию 0, а границы парсинга количества http://prntscr.com/qslw8s  через ИЛИ... 

 

Share this post


Link to post
Share on other sites

Добрый день!
Если в карточке товара так опции
Материал:

Цвет:

Размер:
я вывести могу как у донора 3 опции? 
 

Share this post


Link to post
Share on other sites
3 часа назад, bodyak0 сказал:

Добрый день!
Если в карточке товара так опции
Материал:

Цвет:

Размер:
я вывести могу как у донора 3 опции? 
 

да можете.

Share this post


Link to post
Share on other sites
1 годину назад, Rassol2 сказав:

да можете.

Получилось, вот только казус с ценами опции, можете посмотреть я так понимаю что парсером мне их не извлечь
https://moscow.pinskdrev.ru/catalog/onlayn-rasprodaja/matrats-tonus/
сайт донор, буду очень признателен

Share this post


Link to post
Share on other sites
16 минут назад, bodyak0 сказал:

Получилось, вот только казус с ценами опции, можете посмотреть я так понимаю что парсером мне их не извлечь
https://moscow.pinskdrev.ru/catalog/onlayn-rasprodaja/matrats-tonus/
сайт донор, буду очень признателен

Здравствуйте.
Скиньте мне в ЛС форму настройки, и номер заказа модуля. Я все посмотрю и за одно скину вам лицензионный ключ.

Share this post


Link to post
Share on other sites

Join the conversation

You can post now and register later. If you have an account, sign in now to post with your account.

Guest
You are posting as a guest. If you have an account, please sign in.
Reply to this topic...

×   Pasted as rich text.   Paste as plain text instead

  Only 75 emoji are allowed.

×   Your link has been automatically embedded.   Display as a link instead

×   Your previous content has been restored.   Clear editor

×   You cannot paste images directly. Upload or insert images from URL.


  • Similar Content

    • By GeorgyM
      500.00 руб
      Скачать/Купить дополнение


      Парсинг для Opencart : загрузка товаров / статей, для Опенкарт, OcStore, v.1.x, 2.x, 3.x
      Услуги по наполнению Вашего сайта. обновлению цен, остатков, автоматизации.
      Парсинг и загрузка на Ваш сайт, товаров для Opencart, каталогов, статей, блогов, галерей, отзывов, обзоров всего, что угодно.
      Парсинг Яндекс Маркета, Авито, Юлы, Price.ru любого сайта Вашего конкурента или поставщика.
      Могу собрать данные в Excel и CSV любого формата, а так же импортировать в Вашу базу данных.
        
      Я могу собрать любые данные в интернете и импортировать их на Ваш сайт.
      Срок работ от "супер срочно - сделать прямо сейчас"!  
        
      Как начать работать со мной: 
      1) Напишите мне  в личку - КЛИНУТЬ ЧТОБЫ НАПИСАТЬ МНЕ
      2) Укажите сайт, с которого нужно собрать данные (Домен)
      3) Укажите дополнительные пожелания  
       
      НЕ НУЖНО ЗАПОЛНЯТЬ СЛОЖНОЕ ТЕХНИЧЕСКОЕ ЗАДАНИЕ
      В переписке согласуем Все детали.
       
      Загрузка на Ваш сайт или передача Вам файла в формате Вашего модуля импорта.
      Быстро, конфиденциально 
      Указана базовая стоимость.
       
      В зависимости от сложности проекта цена может быть изменена по согласованию.
      Любая сложность парсинга!
       
      Чтобы сэкономить время на переписке, прошу внимательно отнестись к строкам ниже, по поводу ТЗ для Парсинга. Я должен понимать какие, работы мне для Вас делать, а без ТЗ я этого понять не смогу.
       
      Для понимания ТЗ мне нужно получить краткое ТЗ:
      Если Вам нужно получить от меня только файл для импорта и каталог картинок: дайте мне адрес сайта-донора, пример файла, который Вам нужно получить с заполненными 2-3 строками, комментарии, этого будет достаточно.  
      Если Вы хотите, чтобы я для Вас спарсил и загрузил товары: напишите мне адрес сайта-донора. Можете схематично показать какие данные со страницы донора, должны быть перенесены на Ваши страницы (в виде простых рисунков)  
      Часто возникает вопрос как скопировать товары с одного интернет магазина и загрузить товары в свой интернет магазин.
       
      Особенно Важно парсить товары если нужно перенести большой каталог на свой сайт интернет магазина, так как руками копировать товары очень долго. 
       
      Я могу спарсить самые сложные сайты: со скриптами, защитами, различными Post запросами, и предоставить Вам данные в CSV или Excel файле, нужного Вам формата.
       
      Могу загрузить опции товаров, атрибуты товаров, дополнительные картинки и тексты, отзывы.
       
      Провести нужные манипуляции с ценами и скидками на товары и прочие сложные операции.
      Могу привести каталог категорий к нужному виду, скопировав картинки и описания категорий.
       
      От Вас потребуется только, домены сайтов откуда копировать каталог, и если Вы планируете загружать самостоятельно данные в Ваш интернет магазин, пример файла в который Вам записать данные.
      Скрипт автоматического наполнения магазина, так же могу разработать.
      Добавил GeorgyM Добавлено 22.08.2017 Категория Услуги  
    • By GeorgyM
      Услуги по наполнению Вашего сайта. обновлению цен, остатков, автоматизации.
      Парсинг и загрузка на Ваш сайт, товаров для Opencart, каталогов, статей, блогов, галерей, отзывов, обзоров всего, что угодно.
      Парсинг Яндекс Маркета, Авито, Юлы, Price.ru любого сайта Вашего конкурента или поставщика.
      Могу собрать данные в Excel и CSV любого формата, а так же импортировать в Вашу базу данных.
        
      Я могу собрать любые данные в интернете и импортировать их на Ваш сайт.
      Срок работ от "супер срочно - сделать прямо сейчас"!  
        
      Как начать работать со мной: 
      1) Напишите мне  в личку - КЛИНУТЬ ЧТОБЫ НАПИСАТЬ МНЕ
      2) Укажите сайт, с которого нужно собрать данные (Домен)
      3) Укажите дополнительные пожелания  
       
      НЕ НУЖНО ЗАПОЛНЯТЬ СЛОЖНОЕ ТЕХНИЧЕСКОЕ ЗАДАНИЕ
      В переписке согласуем Все детали.
       
      Загрузка на Ваш сайт или передача Вам файла в формате Вашего модуля импорта.
      Быстро, конфиденциально 
      Указана базовая стоимость.
       
      В зависимости от сложности проекта цена может быть изменена по согласованию.
      Любая сложность парсинга!
       
      Чтобы сэкономить время на переписке, прошу внимательно отнестись к строкам ниже, по поводу ТЗ для Парсинга. Я должен понимать какие, работы мне для Вас делать, а без ТЗ я этого понять не смогу.
       
      Для понимания ТЗ мне нужно получить краткое ТЗ:
      Если Вам нужно получить от меня только файл для импорта и каталог картинок: дайте мне адрес сайта-донора, пример файла, который Вам нужно получить с заполненными 2-3 строками, комментарии, этого будет достаточно.  
      Если Вы хотите, чтобы я для Вас спарсил и загрузил товары: напишите мне адрес сайта-донора. Можете схематично показать какие данные со страницы донора, должны быть перенесены на Ваши страницы (в виде простых рисунков)  
      Часто возникает вопрос как скопировать товары с одного интернет магазина и загрузить товары в свой интернет магазин.
       
      Особенно Важно парсить товары если нужно перенести большой каталог на свой сайт интернет магазина, так как руками копировать товары очень долго. 
       
      Я могу спарсить самые сложные сайты: со скриптами, защитами, различными Post запросами, и предоставить Вам данные в CSV или Excel файле, нужного Вам формата.
       
      Могу загрузить опции товаров, атрибуты товаров, дополнительные картинки и тексты, отзывы.
       
      Провести нужные манипуляции с ценами и скидками на товары и прочие сложные операции.
      Могу привести каталог категорий к нужному виду, скопировав картинки и описания категорий.
       
      От Вас потребуется только, домены сайтов откуда копировать каталог, и если Вы планируете загружать самостоятельно данные в Ваш интернет магазин, пример файла в который Вам записать данные.
      Скрипт автоматического наполнения магазина, так же могу разработать.
  • Recently Browsing   0 members

    No registered users viewing this page.

×

Important Information

On our site, cookies are used and personal data is processed to improve the user interface. To find out what and what personal data we are processing, please go to the link. If you click "I agree," it means that you understand and accept all the conditions specified in this Privacy Notice.