Рекомендуемые сообщения

max201181    32

index.php?app=downloads&module=display&section=screenshot&id=1004

Название: YGParser

Добавил: max201181

Добавлен: 08 марта 2013

Категория: Модули

Добавление основного и дополнительных изображений из Яндекса, Гугла и Мэйла

Проверен на: oc1513 - oc1541

Не заменяет системные файлы.

Задача:

К созданию этого модуля меня подбил прайс поставщика на 3000 позиций. Изображения товаров были доступны только на его сайте с его е*%чим водяным знаком, других не было. Вот и появился модуль.)

Возможности:

  1. Не нужно составлять инструкции.
  2. Добавление изображения товару за 3 секунды
  3. Не попадает в бан поисковиков.
  4. Три источника - Яндекс.Картинки, Картинки Google, Картинки@mail.ru
  5. Простая настройка
  6. Фильтр по разрешениям
  7. Просмотр перед сохранением
  8. Добавление и изменение дополнительных изображений

Установка:

  1. Скопируйте все файлы из папки upload в корень вашего сайта.
  2. Произвести первый запуск для создания настроек в БД.
  3. По умолчанию изображения сохраняются в папку /images/data/, при желании измените путь в закладке "Настройки".

Поддержка:

  1. Поддержка бесплатная
  2. Добавление новых источников и алгоритмов в порядке рейтинга
  3. Полный контроль с нашей стороны за изменениями во всех источника и своевременное обновление

На будущее:

  1. Парсинг популярных сервисов сравнения цен
  2. Парсинг будет происходить в "облаке", клиенту будет передоваться только результат

Лицензия:

  1. Покупатель имеет право использовать данный модуль на всех проектах, зарегистрированных на его имя.
  2. Для интернет-агентств и веб-студий предусмотренная "расширенная" лицензия. По вопросам преобретения пишите на maxim-che@yandex.ru

Убедительная просьба: цените труд и авторское право разработчиков, и это не относится именно к этому модулю.

Демо:

Админ. панель - sandbox.scriptprom.ru/oc1513/admin

Логин: demo

Пароль: demo

ВНИМАНИЕ: В связи с добавлением работы с дополнительными изображениями, немного поменялась логика интерфейса. Теперь для начала подбора картинок нужно кликнуть именно по изображению товара(основному или дополнительному), а не по самому полю.

Нажмите здесь, чтобы скачать файл

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Tom    2 014

Клёвая вещичка! Не пойму почему Парсер!? Аналог Поиск картинок в Google,да. Вот если бы вместо Гугла и Яндекса можно было вводить ссылку на сайт откуда забирать картинки,то да,это был бы парсер и я б тогда взял не глядя! Может осуществима такая фишка!?)

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
max201181    32

Клёвая вещичка! Не пойму почему Парсер!? Аналог Поиск картинок в Google,да. Вот если бы вместо Гугла и Яндекса можно было вводить ссылку на сайт откуда забирать картинки,то да,это был бы парсер и я б тогда взял не глядя! Может осуществима такая фишка!?)

Интересная тема, даже очень, ждите обновления). Первый прицел на минимальный гемор с настройками и инструкциями, но можно включить и полный парсер(название с залогом на будущее))).

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
koreshok    127

было бы хорошо ещё указывать папку сохранения, чтоб не лазить в файл настройки на сервере

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
max201181    32
было бы хорошо ещё указывать папку сохранения, чтоб не лазить в файл настройки на сервере

Этот вопрос и для меня еще открытый. Можно сделать папки /image/data/yandex и /image/data/google и делать из них свалку полученных изображений. Я и так процесс растянул до 3-х кликов, чтобы в бан не попадать и добавление фотки было быстрее и без напрягов. Ну если у кого есть нормальные идеи по "невидимому" выбору/добавлению папки я с удовольствие реализую.

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
koreshok    127

написал в личку...

работа парсинга картинок порадовала, молоток автор

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
markimax    1 488

Неплохой модуль

2579688856.png

На демо сайте, поправьте, чтобы народ не смущать

И может назвать его: image grabber ;) ?

Изменено пользователем markimax

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
markimax    1 488

Клёвая вещичка! Не пойму почему Парсер!? Аналог Поиск картинок в Google,да. Вот если бы вместо Гугла и Яндекса можно было вводить ссылку на сайт откуда забирать картинки,то да,это был бы парсер и я б тогда взял не глядя! Может осуществима такая фишка!?)

Ну и как вы себе это представляете? Маленький google написать, чтобы он проходился по всему сайту (ну так, например там где товаров >10000) и искал нужные картинки ;) ? А потом еще парсер html, который надо будет настраивать под каждый сайт, так как у нас не все подписывают image title и alt

Это все равно, что сказать, ауди машина классная, но если бы там стоял мотор от феррари я бы взял :)

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
slava911    26

Fatal error: Call to a member function find() on a non-object in /home/avtoto00/avtotool.com.ua/www/admin/controller/module/yg_parser.php on line 266

Выдает при нажатии поиск картинки. В чем может быть проблема?

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
max201181    32

Fatal error: Call to a member function find() on a non-object in /home/avtoto00/avtotool.com.ua/www/admin/controller/module/yg_parser.php on line 266

Выдает при нажатии поиск картинки. В чем может быть проблема?

Попробуйте перезагрузить модуль заново, похоже один из файлов не загрузился. Если ошибка повторится дайте мне доступ в админку, проверю и поправлю. cURL установлен?

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Tom    2 014

Ну и как вы себе это представляете? Маленький google написать, чтобы он проходился по всему сайту (ну так, например там где товаров >10000) и искал нужные картинки ;) ? А потом еще парсер html, который надо будет настраивать под каждый сайт, так как у нас не все подписывают image title и alt

Это все равно, что сказать, ауди машина классная, но если бы там стоял мотор от феррари я бы взял :-D

Интересная тема, даже очень, ждите обновления). Первый прицел на минимальный гемор с настройками и инструкциями, но можно включить и полный парсер(название с залогом на будущее))).

Видимо это для Вас не осуществимо! А вот в ответе автора оптимизм!

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
markimax    1 488

Знаете. как вариант я бы предложил парсить китайские мега интернет-магазины, через их поиск. Причем напрямую, они вряд-ли догадаются, что их парсят, так как их и так все парсят на предмет товаров.

Например:

http://www.aliexpres...hText=Cube+9GT5

Мало того у многих больших даже есть свой API. К тому же они "любят" когда их парсят, думают, что через них будут покупать товары.

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
max201181    32

Неплохой модуль

2579688856.png

На демо сайте, поправьте, чтобы народ не смущать

И может назвать его: image grabber ;) ?

Исправлено. Спасибо!

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
kint    18

хороший модуль, спасибо !

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Kuznec    10

сделайте чтоб сворачивать выбранную папку )

просто если ее скрыть путь пропадает, лучше в JS.

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
max201181    32

сделайте чтоб сворачивать выбранную папку )

просто если ее скрыть путь пропадает, лучше в JS.

1. Клик по по самой папке ее выбирает.

2. Затем можно свернуть.

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
gasya    0

а парсер устанавливает картинку только главную или можно ещё дополнительных накачать?

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
max201181    32

а парсер устанавливает картинку только главную или можно ещё дополнительных накачать?

Пока только основное изображение, наверное к выходным будут уже и дополнительные.

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
max201181    32

Ахтунг!

Яндекс изменил верстку, качайте обновление 0.1.4

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
kint    18

Ахтунг!

Яндекс изменил верстку, качайте обновление 0.1.4

опишите пжл для чайников, что значит яндекс изменил вёрстку и что будет если не обновиться !!! пока всё работает !

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
max201181    32

опишите пжл для чайников, что значит яндекс изменил вёрстку и что будет если не обновиться !!! пока всё работает !

Дизайн поменял, а с ним и некоторые CSS-селекторы по которым идет парсинг. На этот раз изменения были не значительные. Картинки Яндекса стали немного похожи на картинки Гугла.)

Ничего суперстрашного не будет если не обновитесь. Просто когда замечаете, что появляется много ошибок, значит пора лезть за обновлением.)

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Vdanya    4

напишите когда будет работать для доп. картинок пожалуйста. А так же было бы не плохо если бы в товаре можно было бы удалять(заменять) старые картинки прямо через этот парсер, или это уже возможно?

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
max201181    32

напишите когда будет работать для доп. картинок пожалуйста. А так же было бы не плохо если бы в товаре можно было бы удалять(заменять) старые картинки прямо через этот парсер, или это уже возможно?

Если у товара есть изображение, он установит новое. Или вы имеете в виду заменять именно файл?

Все пожелания я собираю и стараюсь реализовать(на сколько это возможно). Сейчас время апдейта немного отодвинулось из-за поломки рабочего ноута, но уже в строю и принимаюсь за работу!)

Вот что появится на днях:

- новый источник Картинки@mail.ru

- предпросмотр изображений.

- добавим настройки размеров эскизов и отбор картинок по параметрам(например по разрешению)

Как все это соберу, сразу займусь доп. изображениями.

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты

max201181, можно сделать так, чтобы не сбрасывался путь к сохранению файла после перехода с одного поисковика на другой, при перезагрузке страницы и при переходе на следующую страницу с товарами?

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты

Для публикации сообщений создайте учётную запись или авторизуйтесь

Вы должны быть пользователем, чтобы оставить комментарий

Создать учетную запись

Зарегистрируйте новую учётную запись в нашем сообществе. Это очень просто!

Регистрация нового пользователя

Войти

Уже есть аккаунт? Войти в систему.

Войти


  • Похожий контент

    • От igyan

      1 200.00 руб
      Скачать/Купить дополнение


      Парсер-менеджер товаров с торговых площадок
      Модуль Парсер-менеджер товаров с торговых площадок
      Предназначен для обновления и добавления товаров с торговых площадок Яндекс-маркет(категории электроника, бытовая техника, компьютеры и некоторые дугие), Hotline.ua, Onliner.by .
      Для работы парсера необходим ionCube и версия PHP не ниже 5.3
      Работает на версиях 1.5.1.3-1.6.6.1
      Модуль имеет привязку к домену, для каждого домена приобретается отдельная лицензия.
      Для покупки лицензии обращаться в личку
      Демо:
      http://www.oc-parser.ru/opencart/oc1541/admin/index.php?route=module/parsermanager
      User: demo
      Password: demo
      Видео как работает парсер:
      http://www.oc-parser.ru/index.php?r=site/page&view=demomanager
      Возможности:
      Добавление, обновление товаров . Автоматический поиск товара на сайте-доноре по названию товара или модели. Сохранение постоянных ссылок на товары с сайта донора, для дальнейшего использования ссылки. Гибкое использование фильтров для поиска редактируемых товаров, по отсутствию характеристик, описания, цены, изображения или целой категории товаров. Возможность выбора данных для обновления, данные указываются для каждого источника, с одного можно парсить атрибуты с другого, цену, описание и тд. Возможность дополнять или заменять данные в товарах. Использование прокси-сервера или указание целого листа с прокси-серверами. С последующей проверкой доступности сайта –донора (Яндекс.Маркет ). После проверки прокси сортируются по времени доступа. Контроль при парсинге нескольких товаров, если произошло прерывание парсинга из-за обрыва, таймаута, их можно допарсить позже. Подробный лог парсинга. Внимание! Перед парсингом сделайте бэкап БД магазина.
      Необходима библиотека CURL в PHP.
       
      Установка:
      Копирование в корень магазина файлов из архива для 1 или 2 версии. После запуска модуля создастся две таблицы в БД, одна для хранения ссылок на товары, другая для хранения ссылок при парсинге нескольких товаров. Настройка парсера согласно скрина, пустых значений не должно быть. Обновить таблицы парсера. Для торг.маил.ру и яндекса обязательно подкинуть куки, после посещения донора.  
      Принцип работы модуля:
      После установки модуля необходимо сделать первоначальные настройки для парсера и для сайтов-доноров, указывается сайт источник.
      Обязательно нажать «Сохранить». После настроек модуль готов к работе. Будут показаны товары, указанные в фильтре, или все если фильтр не используется.
      Обновление товаров.
      Для поиска товара необходимо нажать «Поиск» и будет произведен поиск товара по названию или модели. В появившемся списке товаров выбирается нужный, после чего ссылка на товар постоянно запомнится в парсере. Если поиск не дал результатов, можно ввести прямую ссылку на товар, скопировав ее с сайта источника. Для этого нужно нажать «+». Также есть возможность поиска товара по произвольному запросу(не по названию товара или модели). Для это нужно нажать «Ввести запрос» и ввести в поле, что необходимо найти.
      После появления ссылки с строке товара, товар можно парсить, есть возможность указать новую цену для товара, предварительно убрав галочку «Заменять цену» в настройках .
      Также возможен парсинг нескольких товаров, для этого нужно выбрать товары и нажать «Парсить все». Будут спарсены товары у которых есть ссылки.
      ВАЖНО! Парсинг нескольких товаров может быстро привести к бану, в особенности Яндексом, поэтому используйте эту функцию, если имеете прокси-сервера.
      При использовании фильтров по пустым атрибутам, изображениям и тд., после парсинга данных значений они не будут отображаться в парсере.
      Добавление новых товаров.
      Товары будут добавляться с выбранного сайта-источника. Для поиска товара надо нажать «Найти товар», можно сразу ввести прямую ссылку, нажав «+». После появления ссылки, можно парсить товар, нажав «Добавить товар». Для новых товаров можно указать категорию для отображения.
      Модуль адаптирован под версию 2.0. Проверено на версии 2.0, 2.1, 2.2. Для покупки обращаться в личку.
      В связи с тем что, с парсером постоянно возникают проблемы по независящим от автора и кода причинам: смена верстки донарами, отсутствие изображений, характеристик на некоторых страницах и капча тд. Постоянных просьб настроить парсер и напарсить товаров.
      С января 2017 парсер будет продаваться с лицензией на год, стоимость лицензии будет 500 р.
      На второй и последующие домены 750р.
       
       
      Добавил igyan Добавлено 20.02.2014 Категория Парсеры Системные требования Ioncube PHP>5.3 Сайт разработчика Старая цена Метод активации По запросу в ЛС Ioncube Loader Требуется OpenCart ocStore OpenCart.Pro, ocShop  
    • От igyan
      Модуль Парсер-менеджер товаров с торговых площадок
      Предназначен для обновления и добавления товаров с торговых площадок Яндекс-маркет(категории электроника, бытовая техника, компьютеры и некоторые дугие), Hotline.ua, Onliner.by .
      Для работы парсера необходим ionCube и версия PHP не ниже 5.3
      Работает на версиях 1.5.1.3-1.6.6.1
      Модуль имеет привязку к домену, для каждого домена приобретается отдельная лицензия.
      Для покупки лицензии обращаться в личку
      Демо:
      http://www.oc-parser.ru/opencart/oc1541/admin/index.php?route=module/parsermanager
      User: demo
      Password: demo
      Видео как работает парсер:
      http://www.oc-parser.ru/index.php?r=site/page&view=demomanager
      Возможности:
      Добавление, обновление товаров . Автоматический поиск товара на сайте-доноре по названию товара или модели. Сохранение постоянных ссылок на товары с сайта донора, для дальнейшего использования ссылки. Гибкое использование фильтров для поиска редактируемых товаров, по отсутствию характеристик, описания, цены, изображения или целой категории товаров. Возможность выбора данных для обновления, данные указываются для каждого источника, с одного можно парсить атрибуты с другого, цену, описание и тд. Возможность дополнять или заменять данные в товарах. Использование прокси-сервера или указание целого листа с прокси-серверами. С последующей проверкой доступности сайта –донора (Яндекс.Маркет ). После проверки прокси сортируются по времени доступа. Контроль при парсинге нескольких товаров, если произошло прерывание парсинга из-за обрыва, таймаута, их можно допарсить позже. Подробный лог парсинга. Внимание! Перед парсингом сделайте бэкап БД магазина.
      Необходима библиотека CURL в PHP.
       
      Установка:
      Копирование в корень магазина файлов из архива для 1 или 2 версии. После запуска модуля создастся две таблицы в БД, одна для хранения ссылок на товары, другая для хранения ссылок при парсинге нескольких товаров. Настройка парсера согласно скрина, пустых значений не должно быть. Обновить таблицы парсера. Для торг.маил.ру и яндекса обязательно подкинуть куки, после посещения донора.  
      Принцип работы модуля:
      После установки модуля необходимо сделать первоначальные настройки для парсера и для сайтов-доноров, указывается сайт источник.
      Обязательно нажать «Сохранить». После настроек модуль готов к работе. Будут показаны товары, указанные в фильтре, или все если фильтр не используется.
      Обновление товаров.
      Для поиска товара необходимо нажать «Поиск» и будет произведен поиск товара по названию или модели. В появившемся списке товаров выбирается нужный, после чего ссылка на товар постоянно запомнится в парсере. Если поиск не дал результатов, можно ввести прямую ссылку на товар, скопировав ее с сайта источника. Для этого нужно нажать «+». Также есть возможность поиска товара по произвольному запросу(не по названию товара или модели). Для это нужно нажать «Ввести запрос» и ввести в поле, что необходимо найти.
      После появления ссылки с строке товара, товар можно парсить, есть возможность указать новую цену для товара, предварительно убрав галочку «Заменять цену» в настройках .
      Также возможен парсинг нескольких товаров, для этого нужно выбрать товары и нажать «Парсить все». Будут спарсены товары у которых есть ссылки.
      ВАЖНО! Парсинг нескольких товаров может быстро привести к бану, в особенности Яндексом, поэтому используйте эту функцию, если имеете прокси-сервера.
      При использовании фильтров по пустым атрибутам, изображениям и тд., после парсинга данных значений они не будут отображаться в парсере.
      Добавление новых товаров.
      Товары будут добавляться с выбранного сайта-источника. Для поиска товара надо нажать «Найти товар», можно сразу ввести прямую ссылку, нажав «+». После появления ссылки, можно парсить товар, нажав «Добавить товар». Для новых товаров можно указать категорию для отображения.
      Модуль адаптирован под версию 2.0. Проверено на версии 2.0, 2.1, 2.2. Для покупки обращаться в личку.
      В связи с тем что, с парсером постоянно возникают проблемы по независящим от автора и кода причинам: смена верстки донарами, отсутствие изображений, характеристик на некоторых страницах и капча тд. Постоянных просьб настроить парсер и напарсить товаров.
      С января 2017 парсер будет продаваться с лицензией на год, стоимость лицензии будет 500 р.
      На второй и последующие домены 750р.
       
       
    • От wallnut
      Не индексируются страницы товаров, в Search Console, в просмотре страницы как Googlebot категории и все остальные страницы находятся, кроме страниц товаров, их он не находит
      В чем может быть проблема?
      Сайт: kraftsystem.com
    • От ashap

      1 100.00 руб
      Скачать/Купить дополнение


      Яндекс.Касса(по договору) Контроль наличия товара (расширение)
      В продаже только расширенная версия с поддержкой нового протокола версии 3 (также поддерживается и старый протокол)
       
      Расширение для совместной работы yandexur и yandexpayur (контроль наличия товаров)
      Позволяет совместить работу двух модулей "Yandex" отложенная и оплата сразу
      Если в корзине оказывается товар которого нет в наличии, то активируется модуль отложенной оплаты (Отложенная оплата. ЯД, Карты, Нал, WM, Мобильный (По договору)).
      Если в корзине все товары в наличии, то работает модуль обычной оплаты(в данном случае "Яндекс.Деньги, Карты, Наличные, Webmoney, Мобильный (по договору)")
      Так же по количеству, если вы превысите количество товара в наличие в корзине то включится отложенная оплата.
      + возможность принимать деньги на один договор с этих двух модулей или раскидывать на разные договоры
       
      Модуль также поддерживает работу с модулем simple как и основные модули.
      Не заменяет системных файлов и файлов модулей
       
      Должны быть установлены 2 модуля:
      1)Отложенная оплата. ЯД, Карты, Нал, WM, Мобильный (По договору)
      2)Яндекс.Деньги, Карты, Наличные, Webmoney, Мобильный (по договору)
       
       
      Смотрите также другие модули по ссылке
      Добавил ashap Добавлено 23.10.2014 Категория Платежные системы Системные требования Сайт разработчика https://store.pe-art.ru/ Старая цена Метод активации По запросу в ЛС Ioncube Loader Нет OpenCart 2.1
      2.0
      1.5.6.4
      1.5.6.3
      1.5.6.2
      1.5.6.1
      1.5.6
      1.5.4.1
      1.5.3.1 ocStore 2.1
      1.5.5.1.2
      1.5.5.1.1
      1.5.5.1
      1.5.4.1.2
      1.5.4.1.1
      1.5.4.1
      1.5.3.1 OpenCart.Pro, ocShop Opencart.pro 2.1
      OcShop 2.0.3.х
      OcShop 1.5.6.4.х  
    • От ashap
      В продаже только расширенная версия с поддержкой нового протокола версии 3 (также поддерживается и старый протокол)
       
      Расширение для совместной работы yandexur и yandexpayur (контроль наличия товаров)
      Позволяет совместить работу двух модулей "Yandex" отложенная и оплата сразу
      Если в корзине оказывается товар которого нет в наличии, то активируется модуль отложенной оплаты (Отложенная оплата. ЯД, Карты, Нал, WM, Мобильный (По договору)).
      Если в корзине все товары в наличии, то работает модуль обычной оплаты(в данном случае "Яндекс.Деньги, Карты, Наличные, Webmoney, Мобильный (по договору)")
      Так же по количеству, если вы превысите количество товара в наличие в корзине то включится отложенная оплата.
      + возможность принимать деньги на один договор с этих двух модулей или раскидывать на разные договоры
       
      Модуль также поддерживает работу с модулем simple как и основные модули.
      Не заменяет системных файлов и файлов модулей
       
      Должны быть установлены 2 модуля:
      1)Отложенная оплата. ЯД, Карты, Нал, WM, Мобильный (По договору)
      2)Яндекс.Деньги, Карты, Наличные, Webmoney, Мобильный (по договору)
       
       
      Смотрите также другие модули по ссылке
  • Последние посетители   0 пользователей онлайн

    Ни одного зарегистрированного пользователя не просматривает данную страницу