Подскажите программу для парсинга

[ProfiSale]

Только стал разбираться, нашел [cenzored]. Сам разбираться еще долго буду, подскажите как начинающему программу для парсинга.

Копировать буду этот сайт:

http://www.fcenter.ru/products.shtml?eshop

Нужны картинки, атрибуты и т.п., пока еще сам не знаю что точно требуется, просто руками сайт наполнять уже устал.

Еще нужны обновления цены и наличие товара, но вроде как тут есть для этого модули.

Змінено 20 вересня 2015 користувачем afwollis

[Einshtein]

никакой паресер не сделает ваш сайт более информативным и удобным чем вы сами ручками. Более того - тупо копия инфы с других сайтов - негативно влияет на сео.

[ProfiSale]

никакой паресер не сделает ваш сайт более информативным и удобным чем вы сами ручками. Более того - тупо копия инфы с других сайтов - негативно влияет на сео.

просто одно дело, когда я добавил товары, цена которых может и годами не меняться, всегда в наличии и т.п. - т.е. добавил и забыл, и совсем другое, когда цена и наличие товара обновляются каждый день. Ну и само собой добавлять в ручную тысячи товаров...это надо уже держать целый штат сотрудников. Неужели по другому никак? Змінено 15 серпня 2012 користувачем afwollis

[cmd]

ProfiSale, в моем понимании, если Вам надо парсить целый сайт, то надо писать парсер самому с нуля. Никакая универсальная программа тут по определению не поможет. Парсер отгружаете на свой веб-сервер и запускаете через cron. Другое дело, если есть xml или какой-то API-интерфейс для экспорта товаров - тогда можно и коробочное решение попробовать найти. Но у Вас, как я понимаю, первая ситуация. Так что я совершенно не представляю как Вам десктопное приложение тут может помочь...

[perplexor]

Content Downloader однозначно, гибкость и мощь в настройке поражает.

Она поможет, если сайт построен на движке и данные выводятся однотипно, по шаблону. Если же набор html страниц, то писать на заказ или ручками-ручками.

[Vladzimir]

Есть еще хорошая библа - http://simplehtmldom.sourceforge.net/. Гибкая легко настроить на любой вид парсинга. Есди скрестить с curl - полная эмуляция браузера.

[ProfiSale]

Есть еще хорошая библа - http://simplehtmldom.sourceforge.net/. Гибкая легко настроить на любой вид парсинга. Есди скрестить с curl - полная эмуляция браузера.

ничего не понятно)

[ProfiSale]

кстати, а тысяч 10 товаров опенкарт выдержит?

[Vladzimir]

Что именно ничего не понятно?

Там же примеров десятками, что и как получать из страницы, как заменять и т.д.

[janco]

PHP Crawler на том же sourceforget есть.

А может Teleport Pro подойдёт.

[Гість]

А может Teleport Pro подойдёт.

:-D

А как телепортом качать товары в свою базу, вы подумали?

А по поводу SimpleHTMLDom - там кроме "разобрать чужую страницу" еще есть тонкостей вагон и маленькая тележка. Знаем, о чем говорим.

ТС, обращайтесь, сделаем вам парсер. TomSawyer абсолютную правду говорит.

Сейчас как раз новую версию заканчиваем тестировать, с бОльшим функционалом.

[ZanSuro]

Подмену тему )))
 
В недавнем времени встал вопрос о наполнении сайта.
 
- Небольшая оговорка, у меня есть несколько друзей которые тоже бы хотели наполнить свои магазины и сайты контентов. Сайты у всех разные на разную тематику и соответственно парсить хотим с разных сайтов, прекрасно понимая что индивидуальное решение для каждого из нас было бы самым идеальным решением. Но мы подумали, пока мы начинающие бизнесмены и ограничены финансово )))) то для нас сейчас будет наилучшим вариантом воспользоваться каким нибудь универсальным парсингом. Из это всего следует вопрос.
 
Посоветуйте на Ваш взгляд наилучший парсер.
На сегодняшний день выбираю между 
1) Datacol 

http://web-data-extractor.net

2) Content Downloader X1 ULTIMATE

http://sbfactory.ru/

Или можете посоветовать или поделиться опытом о других парсиг программах.

Змінено 2 серпня 2015 користувачем ZanSuro

[ANiMAL]

Посоветуйте на Ваш взгляд наилучший парсер.

На сегодняшний день выбираю между 

1) Datacol 

http://web-data-extractor.net

2) Content Downloader X1 ULTIMATE

http://sbfactory.ru/

Или можете посоветовать или поделиться опытом о других парсиг программах.

 

Около года пользуюсь Датакол (лицензия), пока еще он меня не подводил, свои деньги он быстро окупил. В начале есть сложности в освоении, но они решаемы. Есть справка, есть видео, и также форум (там иногда отвечаю не так быстро как хотелось бы, но отвечают). Если есть вопросы по нему можете обращаться. Также в течении недели выходит новая версия, в которой будет намного проще создавать проекты и более сложные проекты.

P.S если интересует, есть скидка на лицензию.

Змінено 20 вересня 2015 користувачем ANiMAL

[Veinard]

Около года пользуюсь Датакол (лицензия), пока еще он меня не подводил, свои деньги он быстро окупил. В начале есть сложности в освоении, но они решаемы. Есть справка, есть видео, и также форум (там иногда отвечаю не так быстро как хотелось бы, но отвечают). Если есть вопросы по нему можете обращаться. Также в течении недели выходит новая версия, в которой будет намного проще создавать проекты и более сложные проекты.

P.S если интересует, есть скидка на лицензию.

Добрый день.

 Если скидка еще актуальна, то да, интересует!

[Stendal]

Добрый день, выбираю между Datacol  и Content Downloader X1 ULTIMATE. Парсил только автоматическим обработчиком прайс листов. Что посоветуете? В датаколе есть несколько уже вроде сайтов где должен быть настроен парсинг.

[Stendal]

есть кто-нибудь? помогите с выбором.

Змінено 18 липня 2017 користувачем Stendal

[Stendal]

Кто чем парсит, товарищи?

[Stendal]

19 часов назад, Stendal сказал:

Добрый день, выбираю между Datacol  и Content Downloader X1 ULTIMATE. Парсил только автоматическим обработчиком прайс листов. Что посоветуете? В датаколе есть несколько уже вроде сайтов где должен быть настроен парсинг.

Никто не хочет раскрывать  " свои орудия труда" ?

[Shureg]

Коротко:

Datacol   - легко освоить. Можно за вечер научиться парсить простенькие сайты без "сложностей". Но на этом его возможности и заканчиваются, сайты со "сложностями" парсить вы не сможете  ни через месяц, ни через год "освоения".

Content Downloader - можно отпарсить почти все. Но на освоение потребуется намного больше времени и сил.

[avngroup]

CD великолепный парсер .

Отличная поддержка от Сергея всегда подскажет и направит на пусть истинный ))

Хороший специалист на форуме CD Володя Когорец.

Да и вообще сообщество на форуме всегда поможет и подскажет.

Цены на настройку абсолютно приемлемые . Мы заказывали настройки у разных людей,а потом сами доводили до ума и попутно изучали возможности.

А теперь самый главный момент он сложный ,но оно того стоит . Постоянные обновления и добавление нового функционала.

Если вам надо одноразово залить товары с не сложного донора то наверное есть смысл смотреть на датакол.

Если у кого будут вопросы и сомнения пишите))расскажу подробно какие мы задачи решаем с помощью CD и что он умеет 

[Rassol2]

Подыму и я эту тему.
Теперь есть еше вот такая программа для парсинга