Jump to content
Sign in to follow this  
interpol

Парсер для опенкарт

Recommended Posts

Хочу написать модуль для парсинга товаров, яндекс маркета и али экспресс. Меня интересует будет ли спрос и с каких сайтов(донаров) хотите чтобы был парсинг???

Share this post


Link to post
Share on other sites

хочу с любых сайтов
пишите Content Downloader, он с любых сайтов парсит (кстати лицензию пожизненную купил года три назад всего за 1 тыс руб) , потяните?

  • +1 1

Share this post


Link to post
Share on other sites

Универсальный парсинг - это иллюзия.

 

Целевые сайты уже не так глупы и просты, как вам кажется.

В некоторых случаях необходим "интеллектуальный" подход, когда нужно обхитрить того, кто пытается обхитрить вас.

 

К примеру, один из известных магазинов сделал так, что если вы 10 раз подряд будете искать товар(ы), даже с разными интервалами времени, на 11-й раз он вам выдаст товары, но совершенно другие, но из искомой категории. То есть вы даже не заметите подмены. Ищете одно - а парсите другое, но из похожих товаров. Как-то так. В общем подкитывает левак, но не явный. В итоге - у вас масса ошибочных товаров, где названия не соответствуют содержимому.

Share this post


Link to post
Share on other sites
К примеру, один из известных магазинов сделал так, что если вы 10 раз подряд будете искать товар(ы), даже с разными интервалами времени, на 11-й раз он вам выдаст товары, но совершенно другие, но из искомой категории. То есть вы даже не заметите подмены. Ищете одно - а парсите другое, но из похожих товаров. Как-то так. В общем подкитывает левак, но не явный. В итоге - у вас масса ошибочных товаров, где названия не соответствуют содержимому.

Что-то прям детскими страшилками повеяло)  А гуглу такие мегакрутые сайты тоже всякую фигню отдают?

Share this post


Link to post
Share on other sites

Что-то прям детскими страшилками повеяло)  А гуглу такие мегакрутые сайты тоже всякую фигню отдают?

 

Гугл не запрашивает страницу поиска с разными GET параметрами, он просто открывает видимые страницы.

Речь идет о поиске конкретных товаров на сайте-доноре, а не парсинг всего подряд..

Share this post


Link to post
Share on other sites

SooR

 

Видимо Вы не знакомы с вышеозвученной мною прогой-парсером, иначе знали бы что настройки ее гибки и она может парсить не только все подряд, но и выборочно...
потому иногда поступают вполне реализуемые ТЗ типа

парсим не все категории
Берем Керамическую плитку, Керамогранит, Клинкер, Мозаику

 

 

области парсинга задаются именно по ссылкам (УРЛ) и параметрам которые необходимы (возможен и выборочный парсинг)
GET, POST... другие приблуды вообще не используются...
потому не вижу модульной альтернативы данной проге, тем более на ОС
а грузится все простым импортом/экспортом CSV + по фтп грузится папка с картинками товара, которые так же парсятся с сайта донора )))

Share this post


Link to post
Share on other sites

Pascha

 

Как мне загрузить конкретные товары, не все? Если у меня есть ряд поставщиков со своими товарами, есть программа для сводного прайса, мне не нужны другие товары, мне нужно наполнить те, что у меня уже есть. Такое ваша программа сможет?

Share this post


Link to post
Share on other sites

SooR

Вы счас о парсере с доноров сайтов или о импорте прайс листов?
Например мне проще спарсить товары с старого сайта на ВП и импортнуть их в новый на ОС (можно и через БД, но парсером проще)

Говорим по моему о разных вещах... да и прога не моя, и я ее не рекламирую, а просто предоставляю вариант, к которому возможно кто то придет, раз



Хочу написать модуль для парсинга товаров

Share this post


Link to post
Share on other sites

Join the conversation

You can post now and register later. If you have an account, sign in now to post with your account.

Guest
You are posting as a guest. If you have an account, please sign in.
Reply to this topic...

×   Pasted as rich text.   Paste as plain text instead

  Only 75 emoji are allowed.

×   Your link has been automatically embedded.   Display as a link instead

×   Your previous content has been restored.   Clear editor

×   You cannot paste images directly. Upload or insert images from URL.

Sign in to follow this  

  • Recently Browsing   0 members

    No registered users viewing this page.

×

Important Information

On our site, cookies are used and personal data is processed to improve the user interface. To find out what and what personal data we are processing, please go to the link. If you click "I agree," it means that you understand and accept all the conditions specified in this Privacy Notice.