Jump to content

Recommended Posts

1 час назад, SiteMix сказал:

Очевидно, пропущена двойка. На других страницах класс правильный "col-md-12".

Поправлю спасибо.
 

1 час назад, SiteMix сказал:

1.2. При заполнении данных и переходе на другую вкладку, заполненные данные не сохраняются. Если это возможно, то было бы хорошо не терять данные пока этот проект не закрыт. Как, например, в АОП. Там можно перемещаться по вкладкам и внесённые изменения не теряются.

Это не получится. Поскольку у АОП это одна страница и разные вкладки. У меня же это разные страницы. А переход межу ними в виде вкладки. 
Это решает другие более важные проблемы. 
1. Скорость рендеринга страницы. Что не мало важно в проектах где должны выводится по несколько тысяч ссылок на страницу. 
2. Нет проблем с ограничением пост запроса. 
 

Цитата

1.3. Нет кнопки выхода из проекта. Только хлебные крошки. Предлагаю два варианта:
- добавить кнопку Применить, на которую перенести действие имеющейся кнопки, а по нажатию на имеющуюся кнопку Сохранить выполнять сохранение и выход;
- добавить кнопку выхода.

Специально делаю что бы при сохранении не выходило с страницы что настраивается. Это экономит время. Чего тоже не хватет мне в АОП. 
но я подумаю над этим. 

 

1 час назад, SiteMix сказал:

Думаю, даже пустое поле, должно быть хотя бы в одну строку. А в русской версии вместо Warning! лучше написать Внимание! И шрифт хорошо бы уменьшить.

Да и цвета я бы переделал на красный с чёрным. Или Чёрный шрифт на розовом фоне как в обычных алертах .
Как оказалось, надпись пока вбита прямо в контроллер, но, полагаю, это временно и она будет перенесена в локализацию.

Да с дизайном будем работать. 
Да я уже умудрился возненавидеть систему локализации Opencart как все печально сделано. К этому вопросу еше вернусь но делать  локализацию сейчас это дополнительные трудо часы. Изначально начал заполнять как нужно по феншую и понял что это сильно затормозит. Сейчас все прописываю сразу в файлы дизайна. Знаю что это неправильно нужно локализовать. Но это задача не первого эшелона. 

 

 

1 час назад, SiteMix сказал:

Запустил сканирование. Почему-то сканирование не запустилось, а в логе такая строка:
2018-12-17 15:38:18| Парсинг : НЕИЗВЕТНЫЙ ОТВЕТ Ответ сервера не распознан. Код ответа [0] Ссылка | https://mnogotools.ru/
В прошлый раз сканирование этого же сайта запускалось. Хотя, тут возможен бан... В прошлый раз, как мне показалось, в какой-то момент сбор ссылок прекратился.

За это писал частенько cURL Отдает ответ сервера 0 до конца не определил что это за ответ и почему он приходит. Это будет заполнятся по мере опыта ))

 

 

1 час назад, SiteMix сказал:

За несколько минут просканировано около 70 ссылок, если верить прогресс-бару. А за несколько часов " Просканированно 2956 | В очереди 8695 | Собрано 11904 " Это очень мало. Если учесть, что на сайте 1500 товаров (многие в нескольких категориях), то даже если товар посчитан 4 раза должно быть около 6000 ссылок на товары и около сотни ссылок категорий. Непонятно откуда цифра в значении "Собрано"?

Собрано это действительное количество ссылок записанное в базу данных как собрана для обработки. Они же будут записаны в поле выдача ссылок. 
 

 

1 час назад, SiteMix сказал:

3. Если во время сканирования перейти на другую вкладку, то оно останавливается.
Если остановка не устранима, то надо будет упомянуть этот момент в инструкции, когда она будет.

Да эта цена которую мы платим во избежание ограничения выполнения скрипта. 
Подумаю над этим. 

Share this post


Link to post
Share on other sites

Получается, что пункты 1.2 и 3 имеют общие корни - это различные шаблоны.

А если при переходе выводить предупреждение если изменения не сохранены или идёт сбор ссылок?

Тогда каждый сможет решить продолжить ли переход...

Share this post


Link to post
Share on other sites
4 минуты назад, SiteMix сказал:

Получается, что пункты 1.2 и 3 имеют общие корни - это различные шаблоны.

А если при переходе выводить предупреждение если изменения не сохранены или идёт сбор ссылок?

Тогда каждый сможет решить продолжить ли переход...

да это физически 3 разные страницы. 
Подумаю как сделать луче. 
Может поменять стиль перехода - http://joxi.ru/RmzxRBpfY0n43A 
Что бы не выглядели как вкладки. А как разные страницы и не было не недоразумения. 

Share this post


Link to post
Share on other sites

Вкладки - это удобно. Но предупреждение, если есть не сохранённые данные, или что запущенный процесс будет остановлен, не помешает...

Share this post


Link to post
Share on other sites
13 минут назад, SiteMix сказал:

Вкладки - это удобно. Но предупреждение, если есть не сохранённые данные, или что запущенный процесс будет остановлен, не помешает...

да я подумаю над этим.

 

Share this post


Link to post
Share on other sites
33 минуты назад, Rassol2 сказал:

 

У меня все еще модуль парсит.
Но, все-же запущенный вчера парсинг останавливается у меня. http://prntscr.com/lwd39h 
работает окло 3-4 часов может и останавливается, а если перезагрузить страницу просит залогиниться в админку.

---
Не знаю почему, но уточню что в этот момент у меня работают 2 вкладки браузера
одна парсит один сайт, http://prntscr.com/lwd53o
вторая парсит второй сайт http://prntscr.com/lwd58e
Запустил второй парсинг в 10:09, посмотрим сколько будет работать без остановки.

---
И вот это сайт у меня не открывает, визуально страницу грузит а вот код не показывает. http://prntscr.com/lwd70m

https://www.sds-group.ru/

  • +1 1

Share this post


Link to post
Share on other sites
17 минут назад, kikaridza123 сказал:

У меня все еще модуль парсит.
Но, все-же запущенный вчера парсинг останавливается у меня. http://prntscr.com/lwd39h 
работает окло 3-4 часов может и останавливается, а если перезагрузить страницу просит залогиниться в админку.

---
Не знаю почему, но уточню что в этот момент у меня работают 2 вкладки браузера
одна парсит один сайт, http://prntscr.com/lwd53o
вторая парсит второй сайт http://prntscr.com/lwd58e
Запустил второй парсинг в 10:09, посмотрим сколько будет работать без остановки.

---
И вот это сайт у меня не открывает, визуально страницу грузит а вот код не показывает. http://prntscr.com/lwd70m


https://www.sds-group.ru/

 

так по поводу остановки парсинга сейчас не отвечу, потому что нужно много осмыслить в плане работы работы сессии. 
Лайк, за парсинг с двух ссылок. )))

Вот сайт что не показывает код сейчас буду смотреть. 
 

Share this post


Link to post
Share on other sites
40 минут назад, kikaridza123 сказал:

У меня все еще модуль парсит.
Но, все-же запущенный вчера парсинг останавливается у меня. http://prntscr.com/lwd39h 
работает окло 3-4 часов может и останавливается, а если перезагрузить страницу просит залогиниться в админку.

Какая версия модуля. 
Я поп поводу остановки парсинга. 

Share this post


Link to post
Share on other sites

@kikaridza123 Я походу у вас исправил проблему с кодировкой. А а релиз не добавил. 
Може быть с этим связано. 

Share this post


Link to post
Share on other sites
1 час назад, kikaridza123 сказал:

И вот это сайт у меня не открывает, визуально страницу грузит а вот код не показывает. http://prntscr.com/lwd70m

Причину нашел, она связанна с кодировкой. Нужно разобраться с этим вопросом по луче. Что бы закрыть этот вопрос. 

Share this post


Link to post
Share on other sites
46 минут назад, Rassol2 сказал:

Запустил второй парсинг в 10:09, посмотрим сколько будет работать без остановки.

http://prntscr.com/lwdye4
Парсинг остановился в 10:14
Получается спарсено 93 ссылки
--
Версия 1,0,3
 

Share this post


Link to post
Share on other sites
1 минуту назад, kikaridza123 сказал:

http://prntscr.com/lwdye4
Парсинг остановился в 10:14
Получается спарсено 93 ссылки
--
Версия 1,0,3
 

Нужно опять смотреть в чем причина. Если нету пере захода в админку. 
если есть, тогда это вопрос в сессии. 

Edited by Rassol2

Share this post


Link to post
Share on other sites
17 минут назад, Rassol2 сказал:

нету пере захода в админку. 

Нет, в этот раз перезахода в админку нет.
Парсинг первой вкладки закончился,

сейчас запущу только одну вкладку на парсинг.
как остановиться отпишусь.
Пока размер файла http://prntscr.com/lwe940 44,1 Мб

 

Share this post


Link to post
Share on other sites
16 минут назад, Rassol2 сказал:

Нужно опять смотреть в чем причина. Если нету пере захода в админку. 

 

В 14.12.2018 в 11:45, Rassol2 сказал:

Вообще не должно быть потому что каждая ссылка это отправление post запроса с указанием токена.
Это должно продлевать жизнь сессии. 

 

так ведь сессия уничтожается независимо от того, есть запросы или нет
на сервере сработал сборщик мусора и сессия уничтожилась, соответственно и произошел разлогин

 

как решение, я думаю, стоит перенести парсинг на фронт
возможно, свой загрузчик, который будет грузить конфиг админки

Share this post


Link to post
Share on other sites
1 минуту назад, thentru сказал:

 

 

так ведь сессия уничтожается независимо от того, есть запросы или нет
на сервере сработал сборщик мусора и сессия уничтожилась, соответственно и произошел разлогин

 

как решение, я думаю, стоит перенести парсинг на фронт
возможно, свой загрузчик, который будет грузить конфиг админки

Честно я пока что далек от этого всего. 
Я не разобрался как работает. Появится чуть больше времени углублюсь. 

Я изначально построил систему через фронт. 
Суть такая:

Браузер выступает демоном. Оно дергает скрипт который беред ссылку и отправляет на парсинг. После чего получаем ответ. Если все ок, повторяем действие. 
И так пока не произойдет одно из двух. 
1. Закончатся ссылки. 
2. Вы нажмете в браузере стоп. 
 

И походу третий случай. 
Когда что то происходит и браузер не получает ответ об успехе. (А вот тут все то что нужно тестировать и искать.)
И вариант с сессиями который пока не проверен. 

по поводу сборщик. Браузер отправляет POST запрос в админку. Значит сервер не должен вычистить сессию по причине длительного простоя. 
Хотя не уверен нужно время на изучения. 

Share this post


Link to post
Share on other sites

@kikaridza123 
Как исправить отображение кода на сайте 

https://www.sds-group.ru/

Отправил в ЛС. 

В следующих версиях внесу фикс. 

Share this post


Link to post
Share on other sites
6 минут назад, Rassol2 сказал:

Я изначально построил систему через фронт. 

я имею ввиду, чтобы пост-запросы отправлялись например на site.ru/simpleparse.php (грубо, в обход использования токена и методов админки напрямую)

 

10 минут назад, Rassol2 сказал:

по поводу сборщик. Браузер отправляет POST запрос в админку. Значит сервер не должен вычистить сессию по причине длительного простоя. 

не совсем, есть параметр session.gc-maxlifetime который отвечает за срок жизни сессии и ваши запросы никак на него не влияют

Share this post


Link to post
Share on other sites
25 минут назад, thentru сказал:

я имею ввиду, чтобы пост-запросы отправлялись например на site.ru/simpleparse.php (грубо, в обход использования токена и методов админки напрямую)

 

 

Может быть если решу прикрутить крон.
Тогда сделаю.

Цитата

не совсем, есть параметр session.gc-maxlifetime который отвечает за срок жизни сессии и ваши запросы никак на него не влияют


Может вы и правы.
Но обычно если я работаю в админке меня не вылогинивает.
Но если оставить админку открытой и уйти на часик, по возвращению придется логинится. 

Наверное это все относительно, и зависит от хостинга. 
Насколько я помню на жизнь сессии влияет еше жизнь куков. У меня куки задаются на год, я про печеньку сессии. 
 

В моем понимании если отдавать куки в запросах тогда продливается жизнь сессии. 
А аякс не отдает куки. 
Короче не знаю нужно разбираться. )))))))

Edited by Rassol2

Share this post


Link to post
Share on other sites

Добрый день, спасибо за прекрасный скрипт!

Установил по инструкции, получаю белый экран и ошибку:

Fatal error: Can't use function return value in write context in /public_html/admin/model/catalog/simplepars.php on line 166

 

PHP 5.4.45

Версия ocStore 2.3.0.2.1

Edited by Olegikkk

Share this post


Link to post
Share on other sites
41 минуту назад, Olegikkk сказал:

Добрый день, спасибо за прекрасный скрипт!

Установил по инструкции, получаю белый экран и ошибку:

Fatal error: Can't use function return value in write context in /public_html/admin/model/catalog/simplepars.php on line 166

 

PHP 5.4.45

Версия ocStore 2.3.0.2.1

просто при открытии модуля ? 
или при определенных действиях ? 

Share this post


Link to post
Share on other sites
41 минуту назад, Olegikkk сказал:

При открытии модуля

если есть возможность дайте в ЛС доступ к фтп и адмике я посмотрю что это .
Поскольку строка что описана у вас ошибке не инициализируется при открытии модуля. 

Share this post


Link to post
Share on other sites

Обновление 1.1.1 принесло обновление алгоритма парсинга.
А точнее вот это.
 

23 часа назад, kikaridza123 сказал:

И вот это сайт у меня не открывает, визуально страницу грузит а вот код не показывает. http://prntscr.com/lwd70m


Немного переработал, потому что сложность была глубже чем в этом посте. Такие сайты не мог обработать модуль. 
теперь проблемы быть не должно. 

Так же внес исправления в разделители csv разделителем может быть один символ. 
Сразу прописал в шаблон что бы больше нельзя было в вести. 

Share this post


Link to post
Share on other sites

И ещё вопрос.

Спарсил около 200 ссылок и проверил. В некоторых местах не спарсились данные (парсил артикул и название товара). На всём количестве не спарсилось примерно по 10-и ссылкам. Проверил вручную - данные у донора присутствуют. Почему модуль делает пропуски ? Может пробовать задержку ставить ?

Share this post


Link to post
Share on other sites

Join the conversation

You can post now and register later. If you have an account, sign in now to post with your account.

Guest
You are posting as a guest. If you have an account, please sign in.
Reply to this topic...

×   Pasted as rich text.   Paste as plain text instead

  Only 75 emoji are allowed.

×   Your link has been automatically embedded.   Display as a link instead

×   Your previous content has been restored.   Clear editor

×   You cannot paste images directly. Upload or insert images from URL.


  • Similar Content

    • By legioner26
      799.00 руб
      Скачать/Купить дополнение


      Модуль зуммирования изображений товара - ZoomPRO
      Разработан многофункциональный модуль Opencart Zoom для зуммирования изображений в карточке товара с выбором вариантов исполнения.
      ПРИМЕЧАНИЕ !!!
      Если у Вас не стандартный шаблон то для корректной работы настоятельно рекомендую проверить установлены ли иные плагины зумма.
      Не забываем очищать кешь на сайте при изменении настроек. Сочетание клавишь (Ctrl+F5)
       
      По адаптации шаблонов пишите в ЛС
       
      Адаптирован с шаблонами Moneymaker 2, ROUNDSHOP, Лайтшоп, Corsica, Fiji
       
      Вариант №1
       
      Зуммирование в отдельном блоке, от изображения либо вывод в любом другом
       
      Вариант №2
       
      Зуммирование со скроллом внутри блока с изображением
       
      Вариант №3
       
      Зуммирование в виде лупы с настройками по ширине и высоте.
       
      ПРОСМОТР РАБОТЫ МОДУЛЯ
       
      Установка:
      1. Копируем содержимое исходя из версий ОС на хостинг в корень сайта 
      2. В модификаторах чистим кешь и обновляем.
      3. Пишем в личку номер вашего заказа, я высылаю Вам ключ.
       
      DEMO Логин: demo Пароль: demo
      http://demo.teplomir-svet.ru/index.php?route=product/product&product_id=43  
       
      https://opencartforum.com/profile/723002-legioner26/?tab=field_core_pfield_13 ->> Собственный программный модуль по парсингу товаров под управлением OpenCart
       
      Добавил legioner26 Добавлено 21.05.2019 Категория Меню, дизайн, внешний вид Системные требования Ioncube Loader Сайт разработчика Старая цена 2500 Метод активации По запросу в ЛС Ioncube Loader Требуется OpenCart 2.3
      2.2
      2.1
      2.0 ocStore 2.3
      2.2
      2.1 OpenCart.Pro, ocShop Opencart.pro 2.3
      Opencart.pro 2.1
      OcShop 2.0.3.х Обращение к серверу разработчика Нет  
    • By HasikBoy
      500.00 руб · Срок продления: 500.00 руб за день
      Скачать/Купить дополнение


      Парсинг, наполнение товарами, обработка прайс и его импорт, а так же публикация товаров в соц. сетях и других площадках
                Наполнение интернет магазина товарами, публикация товаров на других площадках, соц. сетях, форумах и так далее...
                Парсинг товаров, новостей, отзывов, документации, инструкций и др.
                Обработка, корректировка или сравнение прайс поставщиков, а так же их импорт к Вам
                Импорт товаров или иных данных на Ваш сайт
       
      При надобности, есть возможность заключить договор на предоставления услуг как физ так и юр. лицу!
       
       
       
       
      Предоставляю услуги:
      Парсинг; Загрузка изображений по артикулу; Поиск Характеристик по артикулу товара; Наполнение сайта товарами, отзывами, новостями, документами для товаров и другим контентом; Обработка прайс поставщиков и импорт в Ваш сайт. ; Написание модуля\скрипта для авто загрузки Exel\csv\json\xml от 1 500 руб.; Выгрузка каталога на другой портал или CMS;  
       
      Написание решений под Ваше техническое задание с 0:
      приложений; модулей; скриптов ; решения индивидуальны и пишутся с чистого листа, без лишнего функционала, в точности как написано в техническом задании.  
       
       
      Если есть вопросы, пишите, буду рад ответить!
        Отправить личное сообщение  
       
       
      Ориентировочная стоимость парсинга (пишите в ЛС оговорим детали по Вашему ТЗ)
       
      ВНИМАНИЕ!!!
      Стоимость указана ориентировочная, в большинстве случаев она меняется как в меньшую, так и в большую сторону, в зависимости от технического задания!
       
      ТИП КРАТКАЯ ИНФОРМАЦИЯ ЦЕНА ОТ В РУБ. Простой парсинг Блог, новостной сайт, и др. 1500 Обычный парсинг Простые интернет-магазины (без Атрибутов и опций) 3000 Парсинг средней сложности Интернет-магазины с товарами в которых присутствуют опции и характеристики 4000 Сложная задача по парсингу Сайты с блокировкой от парсинга 5500    
         
       
      Предоставляю услуги по автоматизации наполнения ресурсов,
      определенным контентом, а так же его обработка или генерация.
       
      Решение различных проблем
      Мониторинг конкурентов  
      Парсинг различных сайтов (
      интернет-магазинов, социальных сетей, площадок объявлений с выводом данных в таблицу Excel (формата XLS* или CSV), а также скачивание файлов  
      Парсинг во всевозможные CMS
       
      Сбор требуемой информации для SEO-специалистов Загрузка HTML-таблиц в необходимом формате Выполнение операций с файлами на диске Вычисление математических и логических конструкций как во время парсинга, так и после Определение позиции сайта в выдаче Google по ключевым запросам    
      Портфолио (больше на моем сайте резюме!!!)
        ЧПУ для CMS OcStore     CПАРСИТЬ ВСЕ ТОВАРЫ С САЙТА ZAMKI-MIRA НА САЙТ 1C-BITRIX     СПАРСИТЬ CАМОГОННЫЕ АППАРАТЫ И НАПОЛНИТЬ ИМИ САЙТ НА OPENCART     ПРИЛОЖЕНИЕ ФОТО КАТАЛИЗАТОР ДЛЯ WINDOWS 10     ПАРСИНГ ТОВАРОВ С САЙТА КОМПАНИИ КОНКУРЕНТА С ПЕРЕНОСОМ КАТАЛОГА, ВКЛЮЧАЯ ИЕРАРХИЮ, НА НАШ САЙТ   ПАРСИНГ КАТАЛОГА ТУРФИРМ     НАПОЛНЕНИЕ ИНТЕРНЕТ МАГАЗИНА OCSTORE ТОВАРАМИ КОНКУРЕНТА     ПАРСИНГ ЗАПАСНЫЕ ЧАСТИ НА МИНИТРАКТОР И МОТОБЛОК
      CMS OcStore
          СКРИПТ ПАРСИНГА JSON В БД VIRTUEMART
          CПАРСИТЬ ВСЕ ТОВАРЫ С САЙТА ZAMKI-MIRA НА САЙТ 1C-BITRIX     АВТОНАПОЛНЕНИЕ «АГЕНТСТВО НЕДВИЖИМОСТИ.» 1C-BITRIX   ИЗМЕНЕНИЯ XLS И ЕГО ИМПОРТ В ИНТЕРНЕТ-МАГАЗИН НА БАЗЕ CMS OPENCART   ПАРСИНГ ФОТО ИЗ АЛЬБОМОВ ГРУППЫ FACEBOOK   ПАРСИНГ ТОВАРОВ С Я.МАРКЕТА   ИЗМЕНЕНИЯ XLS И ЕГО ИМПОРТ В ИНТЕРНЕТ-МАГАЗИН НА БАЗЕ CMS OPENCART   АВТОМАТИЧЕСКОЕ ФОРМИРОВАНИЕ БАЗЫ ДАННЫХ В ТАБЛИЦЕ EXEL НА ОСНОВАНИИ ОБРАБОТКИ ИНТЕРНЕТ-РЕСУРСОВ   КАЧЕСТВЕННЫЙ ПАРСИНГ БАЗЫ РЕЗЮМЕ И ВАКАНСИЙ SPB.HH.RU     ПАРСИНГ ТОВАРОВ МАГАЗИНА URL(СКРЫТО) С ГЕНЕРАЦИЕЙ УНИКАЛЬНОГО ОПИСАНИЯ И ПОИСКОМ КАРТИНОК   КОРРЕКТНАЯ НАСТРОЙКА БАЗОВЫХ РЕДИРЕКТОВ ПО ПЕРЕХОДУ НА HTTPS           СБОР ДАННЫХ О РЕСТОРАНАХ В НИДЕРЛАНДАХ                      
        >>>Написать мне<<<       При заказе, в обязательном порядке потребуется оплатить\ купить услугу на форуме Добавил HasikBoy Добавлено 16.03.2018 Категория Услуги  
    • By HasikBoy
      Наполнение интернет магазина товарами, публикация товаров на других площадках, соц. сетях, форумах и так далее...
                Парсинг товаров, новостей, отзывов, документации, инструкций и др.
                Обработка, корректировка или сравнение прайс поставщиков, а так же их импорт к Вам
                Импорт товаров или иных данных на Ваш сайт
       
      При надобности, есть возможность заключить договор на предоставления услуг как физ так и юр. лицу!
       
       
       
       
      Предоставляю услуги:
      Парсинг; Загрузка изображений по артикулу; Поиск Характеристик по артикулу товара; Наполнение сайта товарами, отзывами, новостями, документами для товаров и другим контентом; Обработка прайс поставщиков и импорт в Ваш сайт. ; Написание модуля\скрипта для авто загрузки Exel\csv\json\xml от 1 500 руб.; Выгрузка каталога на другой портал или CMS;  
       
      Написание решений под Ваше техническое задание с 0:
      приложений; модулей; скриптов ; решения индивидуальны и пишутся с чистого листа, без лишнего функционала, в точности как написано в техническом задании.  
       
       
      Если есть вопросы, пишите, буду рад ответить!
        Отправить личное сообщение  
       
       
      Ориентировочная стоимость парсинга (пишите в ЛС оговорим детали по Вашему ТЗ)
       
      ВНИМАНИЕ!!!
      Стоимость указана ориентировочная, в большинстве случаев она меняется как в меньшую, так и в большую сторону, в зависимости от технического задания!
       
      ТИП КРАТКАЯ ИНФОРМАЦИЯ ЦЕНА ОТ В РУБ. Простой парсинг Блог, новостной сайт, и др. 1500 Обычный парсинг Простые интернет-магазины (без Атрибутов и опций) 3000 Парсинг средней сложности Интернет-магазины с товарами в которых присутствуют опции и характеристики 4000 Сложная задача по парсингу Сайты с блокировкой от парсинга 5500    
         
       
      Предоставляю услуги по автоматизации наполнения ресурсов,
      определенным контентом, а так же его обработка или генерация.
       
      Решение различных проблем
      Мониторинг конкурентов  
      Парсинг различных сайтов (
      интернет-магазинов, социальных сетей, площадок объявлений с выводом данных в таблицу Excel (формата XLS* или CSV), а также скачивание файлов  
      Парсинг во всевозможные CMS
       
      Сбор требуемой информации для SEO-специалистов Загрузка HTML-таблиц в необходимом формате Выполнение операций с файлами на диске Вычисление математических и логических конструкций как во время парсинга, так и после Определение позиции сайта в выдаче Google по ключевым запросам    
      Портфолио (больше на моем сайте резюме!!!)
        ЧПУ для CMS OcStore     CПАРСИТЬ ВСЕ ТОВАРЫ С САЙТА ZAMKI-MIRA НА САЙТ 1C-BITRIX     СПАРСИТЬ CАМОГОННЫЕ АППАРАТЫ И НАПОЛНИТЬ ИМИ САЙТ НА OPENCART     ПРИЛОЖЕНИЕ ФОТО КАТАЛИЗАТОР ДЛЯ WINDOWS 10     ПАРСИНГ ТОВАРОВ С САЙТА КОМПАНИИ КОНКУРЕНТА С ПЕРЕНОСОМ КАТАЛОГА, ВКЛЮЧАЯ ИЕРАРХИЮ, НА НАШ САЙТ   ПАРСИНГ КАТАЛОГА ТУРФИРМ     НАПОЛНЕНИЕ ИНТЕРНЕТ МАГАЗИНА OCSTORE ТОВАРАМИ КОНКУРЕНТА     ПАРСИНГ ЗАПАСНЫЕ ЧАСТИ НА МИНИТРАКТОР И МОТОБЛОК
      CMS OcStore
          СКРИПТ ПАРСИНГА JSON В БД VIRTUEMART
          CПАРСИТЬ ВСЕ ТОВАРЫ С САЙТА ZAMKI-MIRA НА САЙТ 1C-BITRIX     АВТОНАПОЛНЕНИЕ «АГЕНТСТВО НЕДВИЖИМОСТИ.» 1C-BITRIX   ИЗМЕНЕНИЯ XLS И ЕГО ИМПОРТ В ИНТЕРНЕТ-МАГАЗИН НА БАЗЕ CMS OPENCART   ПАРСИНГ ФОТО ИЗ АЛЬБОМОВ ГРУППЫ FACEBOOK   ПАРСИНГ ТОВАРОВ С Я.МАРКЕТА   ИЗМЕНЕНИЯ XLS И ЕГО ИМПОРТ В ИНТЕРНЕТ-МАГАЗИН НА БАЗЕ CMS OPENCART   АВТОМАТИЧЕСКОЕ ФОРМИРОВАНИЕ БАЗЫ ДАННЫХ В ТАБЛИЦЕ EXEL НА ОСНОВАНИИ ОБРАБОТКИ ИНТЕРНЕТ-РЕСУРСОВ   КАЧЕСТВЕННЫЙ ПАРСИНГ БАЗЫ РЕЗЮМЕ И ВАКАНСИЙ SPB.HH.RU     ПАРСИНГ ТОВАРОВ МАГАЗИНА URL(СКРЫТО) С ГЕНЕРАЦИЕЙ УНИКАЛЬНОГО ОПИСАНИЯ И ПОИСКОМ КАРТИНОК   КОРРЕКТНАЯ НАСТРОЙКА БАЗОВЫХ РЕДИРЕКТОВ ПО ПЕРЕХОДУ НА HTTPS           СБОР ДАННЫХ О РЕСТОРАНАХ В НИДЕРЛАНДАХ                      
        >>>Написать мне<<<       При заказе, в обязательном порядке потребуется оплатить\ купить услугу на форуме
    • By Rassol2
      Модуль SimplePars предназначен для парсинга и наполнения интернет магазина. 
       
      Идея модуля заключается в том что бы вы могли заварить чашечку кофе и наблюдать как ваш магазин наполняется товарами.
      Ведь намного приятнее наблюдать за строкой загрузки товара, чем заполнять каждую позицию вручную

       
      Возможности модуля SimplePars
      Основные задачи которые решает модуль это парсинг данных с сайта и последующее заполнение интернет магазина.
      Вы можете как парсить напрямую в интернет магазин, так и парсить в CSV файл для дальнейшей обработки. 
      Так же реализовано обновления товаров при помощи парсинга сайтов доноров. 
       
      В двух словах не описать что умеет делать модуль, по этому обозначу только основные моменты.

      1. Сбор ссылок на товары. Или на любые другие страницы сайта. Эти ссылки можно записать в таблицу csv. Либо использовать для наполнения вашего интернет магазина.
      2. Парсинг данных с сайта. Есть возможность парсить напрямую в интернет магазин, или же в файл csv. 
      3. Формировать прайс csv с данными что вы парсите. Так же прайсы можно формировать в готовом формате для загрузки через АОП. Или любого другого загрузчика прайс листов. 
      4. Заполнять интернет магазин новыми товарами.
      5. Обновлять товары, получать цены остатки с сайта донора.
       
      Вы можете указать любое количество границ парсинга, на любые данные что есть в html коде сайта донора.
      SimplePars это универсальный инструмент который поможет вам наполнить ваш интернет магазин.
      Обратите внимание что вы можете настроить парсинг на любые данные, и необязательно они должны быть совместимы с opencart. Вы можете парить статьи, отзывы, блоги.
       
      При загрузке или обновлении товара, модуль поддерживает работу с :
      1) Кодом товара 
      2) Артикулом 
      3) Названием
      4) Ценой
      5) Количеством товара на складе
      6) Производителем
      7) Описанием
      8) Категориями
      9) Изображениями
      10) Атрибутами.

      Так же поддерживается: Создание новых категорий, атрибутов, загрузка изображения по ссылке, создание производителей.
      Формировать URL товаров и заполнять SEO данные товара, категорий, производителей.
       
      В данном модуле есть возможность парсить все данные в CSV файл
      Можно формировать прайс листы для загрузки их через популярные дополнения. 
      Такие как:
      Автоматическая обработка прайс листов. 
      CSV Price Pro import/export
       
      И это малая часть тех задач которые может выполнить данный модуль. Модуль разрабатывается как универсальный парсер у него нету четких задач, у него есть только набор инструментов.
      А что вы построите имея эти инструменты уже зависит только от вас. 
       
      Инструкция к модулю доступна по ссылке (На данный момент разрабатывается обновленная версия инструкции)
      https://simplepars.top/index.php?page=doc
       
      Демо сайт для ознакомления с интерфейсом и возможностями модуля
      Обратите внимание что на демо сайте парсинг недоступен.
      http://demo.simplepars.top/admin/
      Логин - demo
      Пароль - demo
       
      Обзор возможностей модуля
       
      Инструкция по установке.
      Установка SimplePars
      1. Зайдите в директорию вашей версии модуля и скопируйте все в корень сайта с заменой.
      2. Введите в строке браузера ваш_сайт/inst.php и нажмите Enter.
      3. Далее перейдите в раздел Система->Пользователи->Группы пользователей->Администратор нажмите выделить все в двух разделах:
      Разрешить просмотр
      Разрешить редактировать
      Затем нажмите сохранить.
      4. Зайдите в "Модификаторы" или "Менеджер дополнений", и нажмите Обновить. 
      5. После этого удалите в корне сайта файл inst.php
      Все модуль установлен.
      В разделе Каталог под пунктом Производители появится пункт SimplePars это вход в модуль. 
       
      Инструкция по обновлению
      1. Загрузить содержимое директории c названием вашей версии  в корень сайта.
      2. Выполнить ваш_сайт/inst.php
      3. Удалить с корня сайта файл inst.php
  • Recently Browsing   0 members

    No registered users viewing this page.

×

Important Information

On our site, cookies are used and personal data is processed to improve the user interface. To find out what and what personal data we are processing, please go to the link. If you click "I agree," it means that you understand and accept all the conditions specified in this Privacy Notice.