egortide
-
Posts
104 -
Joined
-
Last visited
Content Type
Profiles
Forums
Marketplace
Articles
FAQ
Our New
Store
Blogs
module__dplus_manager
Everything posted by egortide
-
Приветствую всех, кто-нибудь здесь решал проблему с дублями значений фильтра? Как можно объединить эти значения в одно?
-
[Поддержка] OCFilter - Установка, обновление, настройка
egortide replied to SooR's topic in Другие дополнения
del. перепутал темы) -
Спасибо)
-
Используя прокси, как понять, какой из этих вариантов предпочтительнее?
-
а я не могу запустить один проект выполняться с 1 до 4, а второй с 2 до 4 условно говоря? то есть второй проект, даже если будет 2:10 не начнет свою работу, пока не закончит работу первый?
-
Доброго времени суток. А подскажите пожалуйста. У меня условно есть два проекта: один работает с полем цена, а второй с полем порядок сортировки. Если я их запущу одновременно (параллельно) в кроне, и эти проекты затрагивают один список товаров. то при такой работе они не будут мешать друг другу?
-
Спасибо за ответ. не понял только этот пункт, поясните пожалуйста) результат неплохой. просто кол-во товаров для обновления в файле XML будет достигать 700 тысяч. Это будет не меньше 10 часов:(
-
Доброго времени суток всем! Вот я запускаю Парсинг в ИМ (беру данные с файла XML). Исходные данные: 86 тысяч товаров. Парсил в следующих вариантах: 10 потоков - заняло 1 час 44 мин 50 потоков - заняло 1 час 22 мин 200 потоков - заняло 1 час 14 минут. сейчас пробую на 500, но понимаю, что время существенно не изменится. Как этот процесс можно ускорить? у меня хороший выделенный сервер, ресурс мощности большой. @Rassol2 Очень хочу услышать Ваше мнение) Спасибо!
-
Подскажите пожалуйста. Чем ограничивается кол-во потоков в парсинге в ИМ (если парсинг идет с файла XML, который я предварительно скачиваю себе на сервер). Можно ли вместо 10 потоков поставить условно говоря 50 , 100, 200? Тут все упирается в железо как я понимаю?
-
Помнится вы отвечали на мой вопрос как увеличить кол-во потоков. А скажите пожалуйста, как это сделать в настройке крона?
-
По-моему в импорте в ИМ нужно установить это:
- 13,640 replies
-
- 1
-
-
- simplepars
- парсинг товаров opencart
- (and 15 more)
-
там легко логику сделать: в цену записывай : data-price в акцию такая логика: {if[{data-price}{>}{data-discount-price}]}data-discount-price{else} если data-price будет больше data-discount-price , то в акцию запишется data-discount-price, если нет , то ничего не запишется
- 13,640 replies
-
- 1
-
-
- simplepars
- парсинг товаров opencart
- (and 15 more)
-
используй логические операторы https://simplepars.top/index.php?page=note&n=50
- 13,640 replies
-
- 1
-
-
- simplepars
- парсинг товаров opencart
- (and 15 more)
-
Спасибо, буду пробовать! Самый сложный модуль, который я осваивал, и функционал тут просто огромный, спасибо еще раз!
-
Если жать рестарт задания в кроне, то проект будет работать в этот же момент, или в отведенное для него время? Есть 2 проекта, я их рестартую, а они просто зависли в таком состоянии. Сейчас у меня 06:31. Получается при нажатии рестарта проект запустится только в 2?
-
Добрый всем вечер! У меня в кроне есть такие 2 задания в одном проекте После парсинга в ИМ, я захожу в проект и вижу, что там остались 43 ссылки на товар. Вопрос: в следующий раз при выполнении Обработчика XML/YML эти ссылки удалятся, когда появятся новые. или новые появятся после старых. Спасибо!
-
Добрый день, скажите пожалуйста подробнее про прокси и потоки. Я правильно понимаю, что если взять 5 прокси и поставить 5 потоков, то: с одного айпи произойдет 5 запросов, потом пауза (если она стоит), потом с другого айпи 5 запросов и так далее? Каким путем выявить наиболее эффективное значение: кол-во прокси/кол-во потоков/пауза в секундах, чтобы парсить быстрее и не быть забаненным?
-
Если по крону ставить парсинг донора, и случается такое, что некоторые товары не спарсились и ссылки залетели в "Ссылки с ошибками" по какой-либо причине. Как поступит парсер?
-
Я правильно понимаю. Что если поставить 4 задания в кроне: в один промежуток времени (условно с 00:00 до 5:00). И каждому заданию указать порядок выполнения 1,2,3,4 соответственно. Сделать таймаут примерно 4 часа, то: в 00:00 запустится первый проект, когда он закончит свою работу, сразу же запуститься второй и так далее по очереди?
-
делаю все это с целью обновления новых товаров в фиде. заливается товар с ссылкой на донора в имени , в определенную категорию. выгружаю эту категорию яндекс модулем. и парсером беру ссылки на страницы товара донора)
-
Готов, что править?)
-
В файле XML, который на скрине, все окей. там так и должно все быть. Я просто не понимаю, почему парсер не видит ссылку в куске XML name-тэга: <name>https://21vek.by/inflatable_boats/fishman200setjl0072071n_jilong.html</name> но при этом в тэге url он находит ссылку. <url>https://21vek.partners/bufer/serios123.html</url> и выдает только это
-
Подскажите пожалуйста, что я делаю не так. Хочу спарсить XML, чтобы ссылки с доменом 21vek.by попали в поле ссылки на товар, но никак не получается. Вот XML кусок если просто парсить этот файл, без каких либо настроек, то он выдает только это: https://21vek.partners/bufer/bufferid.html
-
Скажите пожалуйста, как можно поменять директорию, куда будет загружаться CSV файл?
-
При выполнении задания CRON на парсинг в CSV, где сохраняется конечный файл, на сервере?
