Axelenz
-
Posts
744 -
Joined
-
Last visited
Content Type
Profiles
Forums
Marketplace
Articles
FAQ
Our New
Store
Blogs
module__dplus_manager
Everything posted by Axelenz
-
Вы про это ?
-
А я сбрасывал фотографию уже спарсенного товара без логотипа со своего магазина на локалке, ну если Вы понимаете, что на фотографии изображено...
-
Почитайте про Повторяющиеся границы парсинга... Как я только не пробовал, как не менял границу - а оно парсит и парсит картинку и без всяких водяных знаков... Тут самая простая задача - ничего гениального...
-
Нет там никаких заморочек... Я провозился с Вашими настройками, думал, что там всё нормально и действительно нельзя стянуть фото, а потом просто посмотрел... и сделал всё правильно.
-
Всё там можно спарсить... но не с Вашими настройками...
-
Ну наверное притвориться Firefox-ом... Ищите Список User-Agent Firefox Mozilla/5.0 (Windows NT 6.1; Win64; x64; rv:47.0) Gecko/20100101 Firefox/62.0 Mozilla/5.0 (Windows NT 6.1; Win64; x64; rv:52.0) Gecko/20100101 Firefox/52.0 Mozilla/5.0 (Windows NT 6.1; Win64; x64; rv:57.0) Gecko/20100101 Firefox/57.0 Mozilla/5.0 (Windows NT 6.1; Win64; x64; rv:60.0) Gecko/20100101 Firefox/60.0 Mozilla/5.0 (Windows NT 6.1; Win64; x64; rv:71.0) Gecko/20100101 Firefox/71.0 Mozilla/5.0 (Windows NT 6.1; Win64; x64; rv:72.0) Gecko/20100101 Firefox/72.0 Mozilla/5.0 (Windows NT 6.1; Win64; x64; rv:73.0) Gecko/20100101 Firefox/73.0 Mozilla/5.0 (Windows NT 6.1; Win64; x64; rv:78.0) Gecko/20100101 Firefox/78.0 Mozilla/5.0 (Windows NT 6.1; Win64; x64; rv:84.0) Gecko/20100101 Firefox/84.0 Mozilla/5.0 (Windows NT 6.1; Win64; x64; rv:85.0) Gecko/20100101 Firefox/85.0 Mozilla/5.0 (Windows NT 6.1; Win64; x64; rv:86.0) Gecko/20100101 Firefox/86.0 Mozilla/5.0 (Windows NT 6.1; Win64; x64; rv:87.0) Gecko/20100101 Firefox/87.0 Попробуйте, отпишитесь, интересно...
- 13,430 replies
-
- 1
-
-
- simplepars
- парсинг товаров opencart
- (and 15 more)
-
Ибо не нужно пользоваться ГуглоХромом... В лисе открывается без лого, очевидно автор сайта так же недолюбливал хромоподобные браузеры )))
- 13,430 replies
-
- 1
-
-
- simplepars
- парсинг товаров opencart
- (and 15 more)
-
Присоединяюсь... Не хватает для удобства возможности перемещения уже заполненных строк выше/ниже или хотя бы вставки пустых строк между существующими...
-
Вы же не указали до чего необходимо округлять... https://simplepars.top/index.php?page=note&n=5
- 13,430 replies
-
- 1
-
-
- simplepars
- парсинг товаров opencart
- (and 15 more)
-
Так мы же можем использовать language_id ?
-
А почему нельзя по такому же принципу сделать сопоставление атрибутов для мультиязычного ? Например, парсятся атрибуты на русском. Заливаются на сайт. Теперь с базы вытягиваются эти спарсенные атрибуты, а также вытягивается их attribute_id и language_id. Дальше парсятся с донора атрибуты на другом языке, например, на украинском. Теперь в скрипте путём выбора делаем соответствие атрибутов с донора на обеих языках. А поскольку на первые атрибуты имеем сразу же их attribute_id, то остаётся только указать в какой именно language_id должны попадать вторые атрибуты... Наверное можно будет связать Наименования атрибутов со Значением атрибутов ? Ну это я себе так теоретически представляю )))
-
Не так давно делал на заказ парсинг двуязычного сайта и пришлось полистать интернет... Вот то же самое описывают на форуме: https://opencartforum.com/topic/16297-podderzhka-avtomaticheskaya-obrabotka-prays-listov/?page=1857&tab=comments#comment-1692398 https://opencartforum.com/topic/16297-podderzhka-avtomaticheskaya-obrabotka-prays-listov/?page=1856&tab=comments#comment-1690421 Поэтому я спарсил человеку на разных языках то, что возможно использовать на сайте Opencart, а атрибуты он сам уже переводил...
-
Сами по себе регулярные выражения ничего не значат. Значит то, насколько правильная логика выбрана и в то ли место эти выражения вставлены... Я часто использую, например, при очистке Описания с донора десятки строк с регулярными выражениями, которые что-то удаляют, заменяют, проверяют... и приходится вставлять чистку от лишних пробелов по нескольку раз в разных местах...
- 13,430 replies
-
- 1
-
-
- simplepars
- парсинг товаров opencart
- (and 15 more)
-
Из хотелок... На вкладке "CSV/Парсинг" в "Настройки допуска к обработке страницы" имеем, например, вариант загрузить если "Не содержит %значение%". Возьмём Наименование товара со словами, которые не должны быть спарсены, например: Маска для лица МАСКА от пыли Комплект маска и ласты Костюм маскарадный Маскарадные костюмы Очки-полумаска для плавания ну и т.д. Сейчас выбор фильтрации идёт по строгому соответствию слова, выбрав "маска" мы отфильтруем наименования, в которых присутствует слово с таким написанием. Я предлагаю расширить возможности фильтра и сделать как "жёсткую" привязку к слову, так и более "расширенную", если можно так выразиться. Т.е. оставить то, что уже есть, но и добавить вариант: "Не содержит все варианты %значение%" И этот фильтр убирает не только слова "маска", но и слова "Маска", "МАСКА" и пр., т.е. строчное/прописное написание слов игнорируется... Осталось только разобраться с вариантами, когда слово может быть, как часть более длинного слова... маскарадный, например... думаю, что такие варианты не должны рассматриваться, только в границах слова... Есть, конечно, регулярки, но всё же... Ну и аналогично расширить "Содержит %значение%". Это нужно для того, чтобы не тянуть длинные "простыни", где нужно учесть и расписать всевозможные варианты написания слов.
-
Хотелка по удобству работы с модулем... Вкладка "CSV/Парсинг". Я нажимаю очередную "волшебную" кнопку и автоматически заполняются "Название колонки в прайс листе CSV", например, наименованиями по порядку, как они идут в АОП... Красота ? Лишнее всегда можно удалить, но каждый раз заполнять одно и то же... ( Не лишним так же была бы возможность перемещения полей вверх-вниз... Иногда приходится реализовывать нудные проекты, число столбцов в которых превышает 500 ((( под дальнейший допил в Excel... Зато начинающим не нужно будет голову ломать, а что там писать и куда оно и зачем оно... Автозаполнение это наше всё, это то, что делает работу удобной и комфортной, убирает рутину.
-
{reg[#^(.*?);(.*?)$#]}|$1 оставить текст до знака ";" и удалить всё после него (и его так же). {reg[#^(.*?);(.*?)$#]}|$2 удалить текст до знака ";" (и его так же) и сохранить всё после него. {reg[#^(.*?);.*;(.*?)$#]}|$1$2 вырезать текст между символами ";"
- 13,430 replies
-
- 1
-
-
- simplepars
- парсинг товаров opencart
- (and 15 more)
-
Гляньте... а то я заметил, что у меня сносится весь <div> при попытке удаления class="что угодно" из <div class="что угодно">...
-
Ну можно, как вариант, получить из него какой-нибудь короткий хэш-код... но только не на 64 символа, может можно придумать хотя бы на 16 ?
-
Всё настроил... работает, подхватывает куки и url с донора... Благодарю. Вот бы ещё сюда прерывания в работе запихнуть. Например: через каждые X минут/часов или сотен/тысяч спасенных товаров перерыв в работе на Y минут... или лучше рандомный выбор от ... до ... минут/часов. Чтобы никого не напрягать. Я обычно так на ночь ставлю, с прерыванием.
-
Пришлось читать... Настроил, парсит, но через 5 минут выбрасывает из кабинета... нужно снова вводить логин и пароль, поэтому я использовал скрипт, который делает то же самое, только автоматически.
-
Попробовал, поигрался... оказывается, что меня вполне устраивает и 4.1-3... )))
-
При таких настройках вообще ничего с сайта не парсит... Парсит только, когда язаливаю куки в файл, ставлю ";" и блокирую файл от записи... но цену оптовую с кабинета так и не берёт... а 4.1-3 берёт всё без проблем...
-
У меня куки донор сбрасывает каждые 5 минут, поэтому я ими пользуюсь, блокируя txt файл на "Только чтение". В 4.2.это уже что-то не лепится...
-
Ставлю версию 4.1-3 - работает, только перехожу на 4.2-2 или 4.2-4 и делаю всё так же - не получаю оптовую цену...
-
Есть сложный донор, со сменой cookie через каждые 5 минут парсинга. Я разработал схему, как его парсить и она работала на всех версиях и на версии SimplePars v4.1-3_stable и сейчас работает, но... на последующий бетах модуль уже не может спарсить оптовую цену, которая есть только после регистрации в кабинете... ((( Откатываюсь на стабильную версию SimplePars v4.1-3_stable...
