dexion
-
Posts
803 -
Joined
Content Type
Profiles
Forums
Marketplace
Articles
FAQ
Our New
Store
Blogs
module__dplus_manager
Everything posted by dexion
-
Спасибо При успешном парсинге одного товара перекидывает на страницу: http://prntscr.com/cmkpgc Если товаров несколько - записи отображаются несколько раз http://prntscr.com/cmkpqw Парсим атрибуты, цену, производителя. На страницу модуля приходится возвращаться вручную. Поиск категорически отказывается работать. Сколько кук не подкидываю - "много переадресаций" с первой же попытки поиска. Приходится к каждому товару находить ссылку на маркете вручную, прикреплять и парсить. Прокси купленный, рабочий. Может это связано с "переполненностью" таблицы parser_urls? У меня там 14545 строк. UPD: очистил таблицу parser_urls - поиск ссылок все равно не работает, с первого же товара выдает "много перенаправлений".
-
По ссылке "ничего не найдено". Где взять модуль?
-
Отображал белый экран на странице модуля, нужно было заменить в контроллере в самом начале $this->list = array( на public $list = array( После этого страница открылась, но экспорт все равно криво работает, например, при выборе определенных статусов и дат экспортирует пустую таблицу.
-
Ошибки следующие: PHP Notice: Undefined variable: list_elements PHP Warning: Invalid argument supplied for foreach() Ошибка в строке: <? foreach ($list_elements as $element) { ?> в файле - export_order.tpl
-
Да, тоже попробовал, ошибка не отображается, белый экран
-
Теперь белый экран на странице настроек модуля: https://***.ru/admin/index.php?route=module/export_order В логе ничего вроде бы
-
2016-09-23 17:42:31 - PHP Notice: Error: Could not load language module/export_order! in /var/www/vhosts/***.ru/httpdocs/vqmod/vqcache/vq2-system_library_language.php on line 39
-
После установки белый экран на странице модулей. Версия 1.5.4
-
Автор писал, что версия тестовая, будет работать сегодня до 16:00. Наверно поэтому ошибка 500, срок жизни файла закончился.
-
С картинками и производителями тоже какая-то проблема: 22-09-2016 13:45:13: Ссылка на товар:https://market.yandex.ru/product/10625036 22-09-2016 13:45:13: Начало парсинга 22-09-2016 13:45:13: User agent: Mozilla/5.0 (Macintosh; Intel Mac OS X 10.11; rv:48.0) Gecko/20100101 Firefox/48.0 22-09-2016 13:45:13: Cookie включены. 22-09-2016 13:45:13: Парсинг через прокси: *** пользователь: *** 22-09-2016 13:45:13: Запрос: https://market.yandex.ru/product/10625036 22-09-2016 13:45:17: Удачный ответ от сервера 22-09-2016 13:45:17: Получено 66870 байт 22-09-2016 13:45:17: Название товара: LOCMAN 020300MKFFX0BR0 22-09-2016 13:45:17: Не найден производитель! 22-09-2016 13:45:17: Не найдены изображения! 22-09-2016 13:45:19: Конец парсинга Цену спарсил, а картинку и производителя нет, хотя у товара они присутствуют. UPD: через 10 минут спарсил и картинку с производителем для этих же самых товаров. Но с первого раза почему то не прошло. UPD2: у меня тоже проблема с поиском. Не ищет ссылки вообще. Парсит по добавленным вручную ссылкам исправно, а вот ссылки ни одной не находит, даже если жму "поиск" для одного товара. Выдает "много перенаправлений". Прокси рабочий, в браузере маркет с ним открывается нормально, куки не спасают.
-
Похоже при парсинге атрибутов ошибка: 22-09-2016 13:18:56: Начало парсинга 22-09-2016 13:18:56: User agent: Mozilla/5.0 (Macintosh; Intel Mac OS X 10.11; rv:48.0) Gecko/20100101 Firefox/48.0 22-09-2016 13:18:56: Cookie включены. 22-09-2016 13:18:56: Парсинг через прокси: *** пользователь: *** 22-09-2016 13:18:56: Запрос: https://market.yandex.ru/product/10975061 22-09-2016 13:18:57: Удачный ответ от сервера 22-09-2016 13:18:57: Получено 66511 байт 22-09-2016 13:18:57: Название товара: LOCMAN 020000KBFOR1GOB 22-09-2016 13:18:57: User agent: Mozilla/5.0 (Macintosh; Intel Mac OS X 10.11; rv:48.0) Gecko/20100101 Firefox/48.0 22-09-2016 13:18:57: Cookie включены. 22-09-2016 13:18:57: Парсинг через прокси: *** пользователь: *** 22-09-2016 13:18:57: Запрос: https://market.yandex.ru/product/10975061hid=91259&track=tabs 22-09-2016 13:18:58: Неудачный ответ от сервера: 404, попробуйте позже 22-09-2016 13:18:59: Конец парсинга https://market.yandex.ru/product/10975061/spec?hid=91259&track=tabs и https://market.yandex.ru/product/10975061hid=91259&track=tabs отличаются наличием "/spec?"
-
Можете ли сориентировать когда ждать результатов?
- 1,549 replies
-
- 1
-
-
- парсер
- парсер яндекс.маркет
- (and 1 more)
-
Добрый день Маркет обновил верстку, парсер похоже перестал из-за этого работать. При попытке парсинга пишет: 19-09-2016 18:13:33: Ссылка на товар:https://market.yandex.ru/product/10975061 19-09-2016 18:13:33: Начало парсинга 19-09-2016 18:13:33: User agent: Mozilla/5.0 (Macintosh; Intel Mac OS X 10.11; rv:48.0) Gecko/20100101 Firefox/48.0 19-09-2016 18:13:33: Cookie включены. 19-09-2016 18:13:33: Парсинг через прокси: *** пользователь: *** 19-09-2016 18:13:33: Запрос: https://market.yandex.ru/product/10975061 19-09-2016 18:13:34: Удачный ответ от сервера 19-09-2016 18:13:34: Получено 62355 байт 19-09-2016 18:13:34: Ошибка! Не найдено название товара! 19-09-2016 18:13:34: Конец парсинга В демо та же ошибка. Как скоро сможете поправить?
-
Да, задержка срабатывает, в логе она тоже указывается: 19-08-2016 02:35:58: Задержка : 3 секунд. Ошибка была и при парсинге одного товара, там задержка ни к чему. В content.htm много кода, похожего на страницу маркета, в первых двух строчках: HTTP/1.0 200 Connection established HTTP/1.1 200 OK Важно что в остальных? UPD: вроде бы ожил парсер каким-то чудом...ссылки стали снова находиться и прикрепляться к товарам. Не ясно из-за чего ожил, и из-за чего не работал.
-
Здравствуйте Купил ваш модуль. Есть проблема с кнопкой календаря при добавлении задачи, она почему то не отображается: http://prntscr.com/c7iezw Можете помочь вывести кнопку?
-
Что делать в таком случае? Насколько я помню, если проблема с прокси/баном маркета - выдается ошибка "Много перенаправлений..." или ничего не пишется в логе. Но в данном случае: 18-08-2016 16:37:13: Удачный ответ от сервера 18-08-2016 16:37:13: Получено 70970 байт Указал около 100 ссылок на карточки вручную, запустил парсер - все успешно спарсилось. Но ссылки так и отказывало находить.
-
Установил, маркет в браузере работает, айпи подменился: http://prntscr.com/c7d2br
-
Жму "найти товар", ввожу там "ga-1000-1a", нахожу карточку, жму "выбрать", жму "показать страницу", вижу http://prnt.sc/c7cjrt хотя ссылка нашлась, можно выбрать, все сработает. У меня вроде бы всегда так было, это вряд ли показатель. Что значит "проверить парсер через прокси в браузерах"? Подключить в браузере прокси и полистать маркет? Или подключить в браузере прокси и попользоваться модулем? Или что-то другое? Что нужно увидеть, если прокси работает нормально?
-
А при успешном нахождении ссылки по этой кнопке абсолютно всегда должна отображаться страница на маркете? Мне кажется, у меня раньше всегда такая ошибка была, но парсер работал нормально. Только что карточка нашлась, нажал "выбрать", "показать страницу" - но там та же ошибка отображается, хотя ссылка нашлась.
-
У меня версия парсера 1.4.6, в ней есть это? Вижу кнопку "показать страницу", при нажатии на нее: http://prntscr.com/c7cjrt
-
Нет, не заработало.( Собралось около 10 ссылок из 150 товаров и снова перестало искать ссылки. И на товары, на которые ссылки уже собраны в базе, повторно ссылки найти не получается. Удаление пустых строк из parser_urls не помогает, table_urls пустая. Подкидывание кук, как делал всегда до этого, не помогает. Прокси действующий. В логе: 18-08-2016 16:37:12: Начало парсинга 18-08-2016 16:37:12: User agent: Mozilla/5.0 (Macintosh; Intel Mac OS X 10_11_6) AppleWebKit/601.7.7 (KHTML, like Gecko) Version/9.1.2 Safari/601.7.7 18-08-2016 16:37:12: Cookie включены. 18-08-2016 16:37:12: Парсинг через прокси: 37.140.195.37:53302 пользователь :(пароль) :(логин) 18-08-2016 16:37:12: Запрос: https://market.yandex.ru/search.xml?text=ga-1000-1a 18-08-2016 16:37:13: Удачный ответ от сервера 18-08-2016 16:37:13: Получено 70970 байт 18-08-2016 16:37:13: Конец парсинга А пишет "результатов не найдено!!!". Причем, если несколько раз нажимать "поиск" напротив одного товара - бывает с первого раза находит ссылку, бывает с 5го, бывает, с 10го, а бывает и при 15 нажатиях не находит ссылку, хотя карточка на маркете есть. Что делать? Буквально несколько дней назад 2 тыс товаров допарсил, все нормально было.
-
Заметил следующую ошибку при парсинге с я.маркета (с прокси, с куки, уже успешно спарсил 10тыс+ товаров): При первом поиске ссылок на часть товаров ссылки не нашлись, но в таблицу parser_urls айди товаров добавились с пустыми данными о ссылках. Затем, после исправления названия товаров, на которые ссылки не нашлись, на правильное (по которому карточки на маркете находятся), ссылки все равно не находились, причем ссылки перестали находиться вообще на все товары, даже на те, которые были успешно спарсены месяц/неделю/несколько дней назад. Ни куки, ни другие прокси не помогали. Но сам парсер работал. Если добавить вручную ссылку к товару и спарсить - все работает. А ссылки не находятся ни на какие товары вообще. Залез в таблицу parser_urls, удалил оттуда все строки с товарами, на которые ссылки не были найдены в предыдущие разы (около 800шт) - все заработало.
-
[Поддержка] Автоматически рекомендуемые товары
dexion replied to chick's topic in Модули и дополнения
Ответьте в лс, вторую неделю жду.. -
[Поддержка] ocBase Документы плюс(Торг-12, Счет-фактура и т.д.)
dexion replied to balukoff's topic in Другие дополнения
Сложно сказать. Автор так и не ответил на мои сообщения. -
[Поддержка] FSMonitor - отслеживание изменений в файлах сайта
dexion replied to halfhope's topic in Другие дополнения
Приобрел модуль, при установке возникла загвоздка с шаблоном админки, автор оперативно помог исправить. Выглядит все отлично, должно быть полезно, всем рекомендую. Автору благодарность.)
