-
Posts
11,656 -
Joined
-
Last visited
Content Type
Profiles
Forums
Marketplace
Articles
FAQ
Our New
Store
Blogs
module__dplus_manager
Everything posted by Rassol2
-
Не за что. Всего доброго.
- 13,430 replies
-
- simplepars
- парсинг товаров opencart
- (and 15 more)
-
Не за что.
- 13,430 replies
-
- simplepars
- парсинг товаров opencart
- (and 15 more)
-
открываете файл /admin/model/catalog/simplepars.php находите строку $reg_url = '#<url>(.*?)</url>#s'; заменяете на $reg_url = '#<DETAIL_PAGE_URL>(.*?)</DETAIL_PAGE_URL>#s'; что бы вышло вот так. все теперь при выборе последнего пункта С xml выгрузка <url> У вас модуль будет собирать ссылки по вашим тегам.
- 13,430 replies
-
- 1
-
- simplepars
- парсинг товаров opencart
- (and 15 more)
-
Да тогда в таком случаи нужно делать через csv или же могу подсказать что поправить в коде модуля что бы брало ваши теги.
- 13,430 replies
-
- simplepars
- парсинг товаров opencart
- (and 15 more)
-
Если у вас ссылки находятся в теге <url></url> То на страницу сбора ссылок уже есть готовый режим сбора. Я уже сам забыл про него. Так и называется XML выгрузка <url> Там можно вообще просто вставить выгрузку в очередь выбрать этот режим и модуль сам все сделает. Уже и забыл что это реализовал
- 13,430 replies
-
- 1
-
- simplepars
- парсинг товаров opencart
- (and 15 more)
-
Если товар подгружается динамически по событию, и данных о товаре нет на странице при её загрузке. То на данный момент такой товар не достать. Нужен обработчик js а в виде php модуля это не реализовать. Добавляете фай в список на парсинг. Делаете границу парсинга на получения url затем заходите в настройки парсинга в csv и добавляете одну границу с ссылками. Жмете спарсить. И вот у вас уже есть csv файл со всеми нужными вам ссылками. Дальше записываете их в список на парсинг в нужный вам проект и вот вы достали все ссылки.
- 13,430 replies
-
- simplepars
- парсинг товаров opencart
- (and 15 more)
-
Здравствуйте. Да в модуле можно сделать так что бы границу парсинга с текстом "В наличии" преобразовать в любое число. Но мой модуль он не обрабатывает csv, это парсер сайтов а не загрузчик прайс листов. Вы можете попробовать разобрать csv как xml но я думаю это гибла затея.
- 13,430 replies
-
- simplepars
- парсинг товаров opencart
- (and 15 more)
-
В внимание с 11.11.2021 по 21.11.2021 техническая поддержка модулю не предоставляется. Это значит что в этот период я не буду отвечать на личные сообщения!!! Если техническая поддержка для вас крайне важна, пожалуйста воздержитесь от покупки модуля в этот период. Лицензионный ключи в это время будут выдаваться в течении суток после покупки, то есть не сразу и не через 10 минут как обычно, а где то в течении суток. Если выше описанное вас не пугает тогда добро пожаловать По этой ссылке вы найдете видео уроки по работе с модулем. Видео уроки по работе с модулем SimplePars А здесь всегда доступна стандартная инструкция Инструкция к модулю SimplePars Так же если вам нужна помощь на платной основе вы можете обратится к Kiyoshi https://opencartforum.com/profile/670863-kiyoshi/ Axelenz https://opencartforum.com/profile/711240-axelenz/ partshez https://opencartforum.com/profile/832585-partshez/
- 13,430 replies
-
- 3
-
- simplepars
- парсинг товаров opencart
- (and 15 more)
-
Нет однозначного ответа. Прокси это когда вы делаете запрос к посреднику (к прокси) он от своего имени делает запрос на сайт донор. Затем этот запрос передает вам. То есть в теории донор получает постоянно запросы от разных ip и ему сложнее определить что запросы однотипные. Но возможно, так как есть еше куки и много других настроек запросов. Я бы сказал так: используя прокси вы уменьшаете вероятность попасть в бан, но не исключаете её.
- 13,430 replies
-
- 1
-
- simplepars
- парсинг товаров opencart
- (and 15 more)
-
Да. Кеш не про обход блокировок, кеш это про увеличение скорости повторного прогона, и снижение риска изначально попадания в блок. Но если вы там то кеш вам никак не поможет.
- 13,430 replies
-
- simplepars
- парсинг товаров opencart
- (and 15 more)
-
Ставите в парсинге Парсить и обновлять кеш. И каждый раз модуль будет обновлять кеш при обновлении цены. Прямой выгоды нет в скорости. Но если вдруг у вас будет какой то сбой и вам нужно повторно обновить данные, переключаетесь на использовать кеш и модуль возьмет все данные из него. То есть сможете парсить в 5 потоков без паузы. То есть кеш это страховка что бы лишний раз не долбить донора если вам нужно что то поправить в обновлении. В остальном он не нужен.
- 13,430 replies
-
- 1
-
- simplepars
- парсинг товаров opencart
- (and 15 more)
-
Я страну меняю , а сам остаюсь прежним. Так что Ник менять пока не буду ))) Отправлено с Телефона используя Tapatalk
- 13,430 replies
-
- simplepars
- парсинг товаров opencart
- (and 15 more)
-
Спасибо за подержу Надеюсь быстро обустрою новое рабочие место и ворвусь в старый режим, так как сейчас уже много работы которой я не могу сделать из за возможных перебоев с поддержкой. Так же уже у меня заморожен еше один прекрасный модуль который должен быть очень эмоциональным. Будем считать что у меня отпуск до конца новогодних праздников
- 13,430 replies
-
- 2
-
- simplepars
- парсинг товаров opencart
- (and 15 more)
-
Обновление v4.9_stable Поскольку я не до конца уверен в последней стабильной версии я оставлю доступными обе. То есть v4.7 и v4.9_stable Так как ближайшие дни я не смогу быстро решать возникнувшие проблемы (если таковые будут) я оставляю возможность скачать предыдущую версию и откатится обратно. В этой версии исправление недочетов, и то парочку. И добавлена возможность в редакторе товаров преобразовать webp в png Это может пригодится тем пользователям у который webp имеют вырезанный задний фон. То есть такие фото нужно преобразовывать именно в png так как тогда задний фон будет похож на оригинал с webp Внимание!!! В моей жизни происходят глобальные изменения 10 числа я улетаю в США, и улетаю с концами. Так как для меня это новая страна, и все нужно будет обустроить с самого начала у меня не будет возможности оперативно предоставлять техническую поддержку. Так же у меня появится разница в часовых поясах с вами С Москвой разница -9часов. То есть у вас 12ч дня разгар рабочего времени, а у меня 3ч ночи. У вас 22.00ч у меня 13ч дня. С Киевом разница -8часов.То есть у вас 12ч дня разгар рабочего времени, а у меня 4ч ночи. У вас 22.00ч у меня 14ч дня. Вот эти все вопросы мне предстоит решить, и я думаю на это у меня уйдет примерно месяц полтора. Так что все новые возможности начну внедрять уже в 2022году. Это как раз примерно 1.5 месяца. Лицензионные ключи будут выдаваться в обычном режиме. Единственное что с 11.11.2021 по 13.11.2021 возможны задержки выдаче лицензионных ключей так как в этот период будут поезда, самолеты, аэропорты, дороги, джетлаки. Так что в этот период буду выдавать ключи как только будет доступ к сети. В последний рабочий день на старом месте я опубликую информацию об возможных задержках на странице модуля, ну и периодически буду публиковать в ветке модуля что меня технически нет.
- 13,430 replies
-
- 7
-
- simplepars
- парсинг товаров opencart
- (and 15 more)
-
Внимательно подумайте что вы делаете и все станет на свои места. При сборе ссылок модуль парсить ссылки что я выделил в красный прямоугольник, и же и кеширует, а ссылки найденные на этих страницах добавляет в список ссылок на товар. А когда вы парсите в им, с включенным использованием кеша, модуль будет тот кеш ссылок на товар что есть. И поскольку при сборе модуль проходил и обновлял кеш ссылок категорий А НЕ ТОВАРОВ то получается что у товаров у вас не обновлен кеш. Все придельно логично. Обратите внимание что просмотрев логи вы бы и сами обнаружили что именно модуль кеширует, а значит могли бы при парсинге в ИМ зайти в логи и найти информацию по интересующей вас ссылки, откуда она была взята и была ли закеширована при сборе.
- 13,430 replies
-
- simplepars
- парсинг товаров opencart
- (and 15 more)
-
503 ошибка гласит что донор несмотря обработать ваш запрос. Вы можете выбрать ссылки с ошибкой 503 и повторить Парсинга. Если это было связанос нагрузкой на донора то повторный Парсинга сработает. Отправлено с Телефона используя Tapatalk
- 13,430 replies
-
- simplepars
- парсинг товаров opencart
- (and 15 more)
-
Не любой, а только те которые не способны интерпретировать javascript а это в свою очередь все парсеры на писанные на PHP. Да есть и будет решатся в 22 году не раньше.
- 13,430 replies
-
- 1
-
- simplepars
- парсинг товаров opencart
- (and 15 more)
-
Они просто включили проверку поддержку js в браузерах. У кого отключено информацию не отдают. Об этом и написано в вашем примере так что все вероятно. Так как на этом функционале у них что то завязано.
- 13,430 replies
-
- simplepars
- парсинг товаров opencart
- (and 15 more)
-
Этот сайт спарить не получится. Он работает на базе js и кода.
- 13,430 replies
-
- simplepars
- парсинг товаров opencart
- (and 15 more)
-
Здравствуйте. Проверяйте настройки сбора ссылок. Причина только в этом.
- 13,430 replies
-
- 1
-
- simplepars
- парсинг товаров opencart
- (and 15 more)
-
Здравствуйте. Логи дают нормальный ответ потому что проблем с запросом нет. Запрос ушел. Другое дело что данные этого запроса не подходят для авторизации, но сам запрос без ошибок. Скиньте в личку нормально данные для запроса и я проверю как появится время.
- 13,430 replies
-
- simplepars
- парсинг товаров opencart
- (and 15 more)
-
Мне это важно знать, в том ли направлении я с работал, и у всех ли сработало.
- 13,430 replies
-
- 3
-
- simplepars
- парсинг товаров opencart
- (and 15 more)
-
Я так понимаю что у вас тоже скорость выросла ? А то как то мало по этому поводу отзывов.
- 13,430 replies
-
- simplepars
- парсинг товаров opencart
- (and 15 more)
-
Да возможно. Собираете ссылки на страницы с разным языком или перенастраиваете куки на получение разных языков, и парсите. Выбрав нужный язык в настройках парсинга в им. С этим есть особенности, и они расписаны здесь https://simplepars.top/index.php?page=note&n=39
- 13,430 replies
-
- 1
-
- simplepars
- парсинг товаров opencart
- (and 15 more)
-
Здравствуйте. такой настройки нет. Если вы работаете через крон то там можно установить дор действие перед парсингом «очистка логов» это действие доступно в редакторе товаров.
- 13,430 replies
-
- simplepars
- парсинг товаров opencart
- (and 15 more)