Перейти до вмісту
Пошук в
  • Детальніше...
Шукати результати, які ...
Шукати результати в ...

Recommended Posts

1 час назад, Talfort сказал:

Кто-нибудь запускал парсер с Cron на VestaCP. Уже 2 месяца ничего не получается

 

А причем здесь панель? Крон запускается либо POST запросами WGET или CURL.

Либо с помощью php в режиме cli.

Если нужна помощь - в ЛС напишите.

Надіслати
Поділитися на інших сайтах


Пытаюсь работать по обучающим роликам, но начал сталкиваться с трудностями на этапе сборки ссылок.

Например я хочу выделить блок в котором нужно парсить ссылки , но в коде большое количество значений "row" не нужный код выделил красным ( так вот как сборщик ссылок поймёт что мне конкретно нужен "row" который отвечает за блок где товары , мой мозг просто ломается.1034834769_.thumb.png.fc3601f6664b8873feb3edf2b33d6193.png

Надіслати
Поділитися на інших сайтах


34 минуты назад, darkpeople сказал:

Пытаюсь работать по обучающим роликам, но начал сталкиваться с трудностями на этапе сборки ссылок.

Например я хочу выделить блок в котором нужно парсить ссылки , но в коде большое количество значений "row" не нужный код выделил красным ( так вот как сборщик ссылок поймёт что мне конкретно нужен "row" который отвечает за блок где товары , мой мозг просто ломается.1034834769_.thumb.png.fc3601f6664b8873feb3edf2b33d6193.png

Зачастую проще парсить, если есть карта сайта. Проверить можете если вобьете адрес  https://сайтдонора.ru/robots.txt там должна быть ссылка на sitemap, вбиваете ее в ссылку для парсинга и выбираете парсить с sitemap, а дальше уже работаете со всеми спарсенными ссылками, указываете какие оставлять в ссылках для парсинга, а какие не нужно

Змінено користувачем khamer89
Надіслати
Поділитися на інших сайтах


15 минут назад, khamer89 сказал:

Зачастую проще парсить, если есть карта сайта. Проверить можете если вобьете адрес  https://сайтдонора.ru/robots.txt там должна быть ссылка на sitemap, вбиваете ее в ссылку для парсинга и выбираете парсить с sitemap, а дальше уже работаете со всеми спарсенными ссылками, указываете какие оставлять в ссылках для парсинга, а какие не нужно

Понял, буду пробовать.

Надіслати
Поділитися на інших сайтах


Срочный вопрос. Перестал работать обработчик xml.

На товары вроде делит, но когда переходу по ссылкам из списка товаров получаю сообщение:

This page contains the following errors:

error on line 1 at column 1: Document is empty

Below is a rendering of the page up to the first error.

Парсер пишет 404 ошибку

Змінено користувачем yurok79
Надіслати
Поділитися на інших сайтах


4 часа назад, darkpeople сказал:

Пытаюсь работать по обучающим роликам, но начал сталкиваться с трудностями на этапе сборки ссылок.

Например я хочу выделить блок в котором нужно парсить ссылки , но в коде большое количество значений "row" не нужный код выделил красным ( так вот как сборщик ссылок поймёт что мне конкретно нужен "row" который отвечает за блок где товары , мой мозг просто ломается.1034834769_.thumb.png.fc3601f6664b8873feb3edf2b33d6193.png

Здравствуйте можете привязаться не к блоку где находятся товары а к началу карточки товара и закрывающим тегом взять подвал с исключением страниц категорий.

 

3 часа назад, khamer89 сказал:

Зачастую проще парсить, если есть карта сайта. Проверить можете если вобьете адрес  https://сайтдонора.ru/robots.txt там должна быть ссылка на sitemap, вбиваете ее в ссылку для парсинга и выбираете парсить с sitemap, а дальше уже работаете со всеми спарсенными ссылками, указываете какие оставлять в ссылках для парсинга, а какие не нужно

Я бы еще добавить что карта сайта далеко не всегда имеет все товары поставщика и сайты не все ее регулярно обновляют.

Змінено користувачем Kiyoshi
  • +1 1
Надіслати
Поділитися на інших сайтах


1 час назад, caspy сказал:

Добрый день!

вчера поставил первый раз крон. не сработал ночю. скажите пожалкцста в настройках ощиблось? 

Ошиблись в доноре...

Вы новичок в теме парсинга и хотите сразу начать парсить Розетку, да ещё и в 5 потоков без задержек и за пару часов все 15,000 ссылок... )))

Что-то мне подсказывает, что у Вас ничего не получится...

  • +1 1
Надіслати
Поділитися на інших сайтах


2 часа назад, caspy сказал:

Добрый день! вчера поставил первый раз крон. не сработал ночю. скажите пожалкцста в настройках ощиблось?

Здравствуй если у вашего хостинга есть документация по настройке крона рекомендую ознакомится с ней там скорей всего приведены примеры команд запуска для скрипта через wget. Возьмите пример команды и замените в нем адрес на http://ваш_сайт/admin/sp_cron.php

 

Касательно настроек Менеджер заданий (CRON) то @Axelenz прав не стоит вам парсить в 5 потоков да еще и без пауз так как словите бан в течений 1 ... 2 минут может и быстрее и тогда без нескольких прокси + пауза вам не обойтись.

  • +1 1
Надіслати
Поділитися на інших сайтах


вы не правильно поняли название. создаем api для заказов. нам нужно id товаров id товаров на opencart )хотели парсить через наш xml.

wget 'http://ваш_сайт/admin/sp_cron.php' 

єто команда достатычно?

Надіслати
Поділитися на інших сайтах


6 хвилин назад, caspy сказав:

вы не правильно поняли название. создаем api для заказов. нам нужно id товаров id товаров на opencart )хотели парсить через наш xml.

wget 'http://ваш_сайт/admin/sp_cron.php' 

При чем тут ваш API к крону simple pars?

Надіслати
Поділитися на інших сайтах

Всем привет! 
Кто временем богат?
Есть потребность спарсить один сайт, и вписать его товары в уже существующие на моем сайте(категории позаменять, а также атрибуты).
Если поможете, готов обсудить условия, в личку. 

Надіслати
Поділитися на інших сайтах


33 хвилини назад, Dmitry76 сказав:

Есть потребность спарсить один сайт, и вписать его товары в уже существующие на моем сайте(категории позаменять, а также атрибуты).

Артикулы или ID общие есть?

Надіслати
Поділитися на інших сайтах

Как думаете есть шанс такое спарсить - нет отдельных страниц товара, а доп-фото в поупап окне - https://opt.mattioli-bags.com/briefcases/ (http://mattioli-bags.com/) - у них есть розничный ИМ, но, к сожалению, не идентичный товар, надо с оптовой части тянуть.

Поставщик, блн, ни файл CSV, ни XML, ни карты, ни с сайта содрать.

Я как то сразу поставил крест на парсинге, о вдруг я не шарю и есть решение!

 

@Flint2000 @Kiyoshi

@partshez

 

Поглядите? :unsure:

Моих навыков недостаточно, за дельный совет готов с удовольствием выделить требуемые ассигнации)))

P.S. Сегодня ровно год, как поступления руками бью - засвистела фляга от нового поступления :(

Надіслати
Поділитися на інших сайтах


Подскажите как решить проблему: При "парсинг в ИМ" в предварительном просмотре происходит изменение цены, статуса наличие и тд. Но по факту на сайте не обновляется информация. 

Надіслати
Поділитися на інших сайтах


22 минуты назад, AlexFurs сказал:

Подскажите как решить проблему: При "парсинг в ИМ" в предварительном просмотре происходит изменение цены, статуса наличие и тд. Но по факту на сайте не обновляется информация. 

Парсинг в ИМ. Для каждого поля выставить Действие ПРИ обновлении. Обновлять- Не обновлять...

https://prnt.sc/1znxub5

Змінено користувачем partshez
Надіслати
Поділитися на інших сайтах


@specialforce22 Такое не спарсить, там аяксом инфа о товаре подгружается

  • +1 2
Надіслати
Поділитися на інших сайтах

Подскажите, пожалуйста, можно ли использовать оператор if в остатках. Ситуация следующая. Есть сайт донор. У него отображаются несколько складов. Один в наличии в стране, второй - под заказ из другой страны. И в первом случае и во втором указано количество. Я беру данные в "наличии" или "под заказ" Я хочу, чтобы если есть в наличии, то выводило к-во, если "под заказ", то 0. 

image.png.fa3ff491486edd301c16304c2ff0bf9c.pngили image.png

Правильно ли я задаю условие {if[{gran_"проверка наличия"}{=}1]{gran_"количество"}. Подскажите, пожалуйста, правильно ли я мыслю или я убежал не в ту сторону и вообще нельзя использовать оператор if в остатках

 

Змінено користувачем ShIgor
Надіслати
Поділитися на інших сайтах


2 хвилини назад, ShIgor сказав:

Подскажите, пожалуйста, можно ли использовать оператор if в остатках.

Можно использовать

Надіслати
Поділитися на інших сайтах

20 часов назад, partshez сказал:

Парсинг в ИМ. Для каждого поля выставить Действие ПРИ обновлении. Обновлять- Не обновлять...

https://prnt.sc/1znxub5

Все так и сделал, до этого парсинг через ИМ работал. Не могу понять, может нужно где-то еще какие настройки выставить? Как еще получить обновление модуля? Покупал через др аккаунт 2 года назад. Не могу найти какой, 2 года назад. Автор в отпуске до 21

Снимок экрана 2021-11-16 в 11.00.34.png

Змінено користувачем AlexFurs
Надіслати
Поділитися на інших сайтах


10 хвилин назад, ShIgor сказав:

Подскажите, пожалуйста, правильно ли вообще выражение {if[{gran_1"проверка наличия"}{=}1]{gran_2"количество"}    ?

Синтаксис правильный, а работоспособность зависит от того, какие данные сюда попадут.

  • +1 1
Надіслати
Поділитися на інших сайтах

Створіть аккаунт або увійдіть для коментування

Ви повинні бути користувачем, щоб залишити коментар

Створити обліковий запис

Зареєструйтеся для отримання облікового запису. Це просто!

Зареєструвати аккаунт

Вхід

Уже зареєстровані? Увійдіть тут.

Вхід зараз
×
×
  • Створити...

Important Information

На нашому сайті використовуються файли cookie і відбувається обробка деяких персональних даних користувачів, щоб поліпшити користувальницький інтерфейс. Щоб дізнатися для чого і які персональні дані ми обробляємо перейдіть за посиланням . Якщо Ви натиснете «Я даю згоду», це означає, що Ви розумієте і приймаєте всі умови, зазначені в цьому Повідомленні про конфіденційність.