[Поддержка] Парсер-менеджер товаров с торговых площадок

[rpv7]

при парсинге постоянно выдает капчу и пишет "попробуйте парсить снова"

если подменить куки то помогает на 1-2 товара, потом снова капча и "попробуйте парсить снова"

[tochkaG]

Друзья, давненько приобреталась лицензия 1.4.2 Сейчас всё перестало работать по неизвестной причине. Будьте добры, подскажите пожалуйста, в чём может быть причина? Вбиваю ссылку, нажимаю "Парсить", выдаётся ошибка - Ошибка парсинга. Не найдены элементы! 

[rpv7]

Друзья, давненько приобреталась лицензия 1.4.2 Сейчас всё перестало работать по неизвестной причине. Будьте добры, подскажите пожалуйста, в чём может быть причина? Вбиваю ссылку, нажимаю "Парсить", выдаётся ошибка - Ошибка парсинга. Не найдены элементы! 

обновите модуль

[igyan]

при парсинге постоянно выдает капчу и пишет "попробуйте парсить снова"

если подменить куки то помогает на 1-2 товара, потом снова капча и "попробуйте парсить снова"

над опробовать через прокси или парсить с локалки

[dima2000]

Ошибка парсинга. Не найдены элементы!

15-12-2016 10:00:11: Ссылка на товар:https://catalog.onliner.by/sound/edifier/c2x

15-12-2016 10:00:11: Начало парсинга
15-12-2016 10:00:11: User agent: Mozilla/5.0 (Windows NT 6.3; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/53.0.2785.116 Safari/537.36
15-12-2016 10:00:11: Cookie включены.
15-12-2016 10:00:11: Запрос: https://catalog.onliner.by/sound/edifier/c2x
15-12-2016 10:00:26: Неудачный ответ от сервера: 0, попробуйте позже
15-12-2016 10:00:26: Ошибка! Не найдено название товара!
15-12-2016 10:00:26: Конец парсинга

 

модуль последней версии

[kamar87]

для 2.х не планируете такой модуль?

[igyan]

для 2.х не планируете такой модуль?

если вы покупали версию под 1,5, то нужно доплатить 350р

[igyan]

Ошибка парсинга. Не найдены элементы!

15-12-2016 10:00:11: Ссылка на товар:https://catalog.onliner.by/sound/edifier/c2x

15-12-2016 10:00:11: Начало парсинга

15-12-2016 10:00:11: User agent: Mozilla/5.0 (Windows NT 6.3; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/53.0.2785.116 Safari/537.36

15-12-2016 10:00:11: Cookie включены.

15-12-2016 10:00:11: Запрос: https://catalog.onliner.by/sound/edifier/c2x

15-12-2016 10:00:26: Неудачный ответ от сервера: 0, попробуйте позже

15-12-2016 10:00:26: Ошибка! Не найдено название товара!

15-12-2016 10:00:26: Конец парсинга

 

модуль последней версии

на локалке и на демо добавил без проблем

почистите куки, пробуйте через прокси

 

[dima2000]

Сегодня появилась проблема.

 

20-12-2016 11:07:08: Начало парсинга
20-12-2016 11:07:08: User agent: Mozilla/5.0 (Windows NT 6.3; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/49.0.2623.112 Safari/537.36
20-12-2016 11:07:08: Cookie включены.
20-12-2016 11:07:08: Запрос: http://catalog.onliner.by/search?query=Belux%20%D0%A1%D0%BE%D0%BD%D0%B5%D1%82-%D0%A1%D0%B8%D1%82%D0%B8%20%D0%A8%D0%BA%D0%B0%D1%84%20%5B%D0%A860%5D&charset=utf-8
20-12-2016 11:07:08: Перенаправление -> https://catalog.onliner.by/search?query=Belux%20%D0%A1%D0%BE%D0%BD%D0%B5%D1%82-%D0%A1%D0%B8%D1%82%D0%B8%20%D0%A8%D0%BA%D0%B0%D1%84%20%5B%D0%A860%5D&charset=utf-8?query=Belux%20%D0%A1%D0%BE%D0%BD%D0%B5%D1%82-%D0%A1%D0%B8%D1%82%D0%B8%20%D0%A8%D0%BA%D0%B0%D1%84%20%5B%D0%A860%5D&charset=utf-8
20-12-2016 11:07:08: Запрос: https://catalog.onliner.by/search?query=Belux%20%D0%A1%D0%BE%D0%BD%D0%B5%D1%82-%D0%A1%D0%B8%D1%82%D0%B8%20%D0%A8%D0%BA%D0%B0%D1%84%20%5B%D0%A860%5D&charset=utf-8?query=Belux%20%D0%A1%D0%BE%D0%BD%D0%B5%D1%82-%D0%A1%D0%B8%D1%82%D0%B8%20%D0%A8%D0%BA%D0%B0%D1%84%20%5B%D0%A860%5D&charset=utf-8
20-12-2016 11:07:08: Удачный ответ от сервера
20-12-2016 11:07:08: Получено 90660 байт
20-12-2016 11:07:08: Конец парсинга

 

но ссылку на товар все равно не находит

 

https://yadi.sk/i/Ku0nz3Yc349LXd

 

Товаров не найдено.

[igyan]

Сегодня появилась проблема.

 

20-12-2016 11:07:08: Начало парсинга

20-12-2016 11:07:08: User agent: Mozilla/5.0 (Windows NT 6.3; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/49.0.2623.112 Safari/537.36

20-12-2016 11:07:08: Cookie включены.

20-12-2016 11:07:08: Запрос: http://catalog.onliner.by/search?query=Belux%20%D0%A1%D0%BE%D0%BD%D0%B5%D1%82-%D0%A1%D0%B8%D1%82%D0%B8%20%D0%A8%D0%BA%D0%B0%D1%84%20%5B%D0%A860%5D&charset=utf-8

20-12-2016 11:07:08: Перенаправление -> https://catalog.onliner.by/search?query=Belux%20%D0%A1%D0%BE%D0%BD%D0%B5%D1%82-%D0%A1%D0%B8%D1%82%D0%B8%20%D0%A8%D0%BA%D0%B0%D1%84%20%5B%D0%A860%5D&charset=utf-8?query=Belux%20%D0%A1%D0%BE%D0%BD%D0%B5%D1%82-%D0%A1%D0%B8%D1%82%D0%B8%20%D0%A8%D0%BA%D0%B0%D1%84%20%5B%D0%A860%5D&charset=utf-8

20-12-2016 11:07:08: Запрос: https://catalog.onliner.by/search?query=Belux%20%D0%A1%D0%BE%D0%BD%D0%B5%D1%82-%D0%A1%D0%B8%D1%82%D0%B8%20%D0%A8%D0%BA%D0%B0%D1%84%20%5B%D0%A860%5D&charset=utf-8?query=Belux%20%D0%A1%D0%BE%D0%BD%D0%B5%D1%82-%D0%A1%D0%B8%D1%82%D0%B8%20%D0%A8%D0%BA%D0%B0%D1%84%20%5B%D0%A860%5D&charset=utf-8

20-12-2016 11:07:08: Удачный ответ от сервера

20-12-2016 11:07:08: Получено 90660 байт

20-12-2016 11:07:08: Конец парсинга

 

но ссылку на товар все равно не находит

 

https://yadi.sk/i/Ku0nz3Yc349LXd

 

Товаров не найдено.

надо разбираться  поменяли поиск

парсите по прямой ссылке

[dima2000]

надо разбираться  поменяли поиск

парсите по прямой ссылке

 

когда обнову ждать ?

[metis]

надо разбираться  поменяли поиск

парсите по прямой ссылке

Тоже перестали парситься ссылки.

Будем ждать обновление.

[igyan]

когда обнову ждать ?

скорее всего завтра

[metis]

скорее всего завтра

Скачал обновленную версию. Что-то не работает у меня поиск ссылок.

[igyan]

Скачал обновленную версию. Что-то не работает у меня поиск ссылок.

что в логе

[metis]

что в логе

22-12-2016 22:37:33: Начало парсинга
22-12-2016 22:37:33: User agent: Mozilla/5.0 (Windows NT 6.1; WOW64; rv:45.0) Gecko/20100101 Firefox/45.0
22-12-2016 22:37:33: Запрос: https://catalog.api.onliner.by/search/products?query=KO151430
22-12-2016 22:37:47: Неудачный ответ от сервера: 0, попробуйте позже
22-12-2016 22:37:47: Конец парсинга

[igyan]

22-12-2016 22:37:33: Начало парсинга
22-12-2016 22:37:33: User agent: Mozilla/5.0 (Windows NT 6.1; WOW64; rv:45.0) Gecko/20100101 Firefox/45.0
22-12-2016 22:37:33: Запрос: https://catalog.api.onliner.by/search/products?query=KO151430
22-12-2016 22:37:47: Неудачный ответ от сервера: 0, попробуйте позже
22-12-2016 22:37:47: Конец парсинга

включите куки, подкиньте из браузера, попробуйте прокси, можно из паблика

совсем не ищет или  некоторые товары

[metis]

включите куки, подкиньте из браузера, попробуйте прокси, можно из паблика

совсем не ищет или  некоторые товары

Купи включил, не помогает. Проблема со всеми товарами.

 

23-12-2016 22:22:26: Начало парсинга
23-12-2016 22:22:26: User agent: Mozilla/5.0 (Windows NT 6.1; Win64; x64; rv:47.0) Gecko/20100101 Firefox/47.0
23-12-2016 22:22:26: Cookie включены.
23-12-2016 22:22:26: Запрос: https://catalog.api.onliner.by/search/products?query=1170
23-12-2016 22:22:39: Неудачный ответ от сервера: 0, попробуйте позже
23-12-2016 22:22:39: Конец парсинга

Змінено 23 грудня 2016 користувачем metis

[SAPER1985]

Была замечена одна небольшая ошибка, может кому то поможет 

$product['description'] .= $val->plaintext. " </br>";

У спец символа отсутствовали точка с запятой, для нас это была проблема, ибо кроме парсинга у нас был и экспорт товаров, спец символ летел в строку

[NEMESIS]

И ещё сайт начинает дико тормозить после включения вашего модуля. Любая страница загружается по 10-20 секунд, вместо максимум одной. Проверял, если отключаю плагин и очищаю кэш, то сайт начинает снова бодро бегать. В чем может быть проблема? Памяти на сервере валом, 1 гиг, потребляет сайт максимум 350 в пики

[igyan]

И ещё сайт начинает дико тормозить после включения вашего модуля. Любая страница загружается по 10-20 секунд, вместо максимум одной. Проверял, если отключаю плагин и очищаю кэш, то сайт начинает снова бодро бегать. В чем может быть проблема? Памяти на сервере валом, 1 гиг, потребляет сайт максимум 350 в пики

при парсинге будет тормоза, если не парсите не должно

[ZKostik]

Версия для 2.3 существует?

[ZKostik]

Достала ошибка 504.

И следом сервак перезагружает  Apache :ugeek:

 

Можно как-то вернуть отзывчивость при работе модуля? 

А то на автомате  5-6 товаров успевает с качаться

[igyan]

Достала ошибка 504.

И следом сервак перезагружает  Apache :ugeek:

 

Можно как-то вернуть отзывчивость при работе модуля? 

А то на автомате  5-6 товаров успевает с качаться

много от чего зависит: тариф, настройки хостинга, откуда парсите, прокси, задержки и тд. все в парсере не предусмотришь, пробуйте в различных режимах

5-6 товаров по-моему тоже неплохо

на крайний случай пасите на локалке и переносите на рабочий

[cbv]

Здравствуйте!

Планируете ли добавление антикапчи?