[Поддержка] SimplePars - Универсальный парсер для ИМ

[Reanimaster]

17 минут назад, Rassol2 сказал:

Нет на вскидку я не могу подсказать все что нужно переделать.

Ок. Спасибо.

[Dmitry76]

Всем привет.
Кто может подсказать, хотя бы направление, где может быть подвох...
Есть проект №1,
делаю его копию, называю проект №2.
Настройки все идентичные получаются. 
В первом и во втором проекте есть одна и та же ссылка на товар с донора. 
В настройках парсинга в проекте № 1 есть определенная фраза(Сообщить о поступлении), в проекте №2 ее нет! Т.е. донор отдает двум этим одинаковым проектам информацию по-разному.

Почему такое может быть? 



 

[partshez]

6 минут назад, Dmitry76 сказал:

Всем привет.
Кто может подсказать, хотя бы направление, где может быть подвох...
Есть проект №1,
делаю его копию, называю проект №2.
Настройки все идентичные получаются. 
В первом и во втором проекте есть одна и та же ссылка на товар с донора. 
В настройках парсинга в проекте № 1 есть определенная фраза(Сообщить о поступлении), в проекте №2 ее нет! Т.е. донор отдает двум этим одинаковым проектам информацию по-разному.

Почему такое может 

6 минут назад, Dmitry76 сказал:

Всем привет.
Кто может подсказать, хотя бы направление, где может быть подвох...
Есть проект №1,
делаю его копию, называю проект №2.
Настройки все идентичные получаются. 
В первом и во втором проекте есть одна и та же ссылка на товар с донора. 
В настройках парсинга в проекте № 1 есть определенная фраза(Сообщить о поступлении), в проекте №2 ее нет! Т.е. донор отдает двум этим одинаковым проектам информацию по-разному.

Почему такое может 

 

При экспорте выбрать нижнюю строчку. Полный экспорт

Змінено 13 липня 2021 користувачем partshez

[Rassol2]

Обновление SimplePars v4.6_beta

 

Внимание!!! С завтрашнего дня меня не будет в сети примерно 3-4 дна. Так что не рекомендую ставить эту версию тем кто не может откатится, или решить вопрос без технической поддержки.
Лицензионные ключи будут выдаваться в прежнем режиме.

В данной версии реализована возможность использования собственных скриптов.
Обратите внимание что это еще самая ранняя версии беты и устанавливать ее нужно только если вы готовы к трудностям.
 

При помощи собственных скриптов вы можете реализовать любой функционал, функционал которого нет в модуле но вам нужен.
Подробно об этой возможности вы можете прочитать в инструкции

 

Желательно проходить инструкцию в том же порядке что я написал.
https://simplepars.top/index.php?page=note&n=47

https://simplepars.top/index.php?page=note&n=48

https://simplepars.top/index.php?page=note&n=49

ЗЫ. Я знаю что в инструкции много глупых опечаток, да, я не умею писать.  
Инструкции пишу за один присест, одним дублем. Потом вычитываю ошибки, и правлю поток своих мыслей. Пока что отредактировал только первую статью.
Надеюсь сегодня закончу с двумя другими.
Выкладываю как есть, а то буду тянуть сильно долго. Прошу понять, принять, и отпустить.

 

При обновлении вам нужно выполнить ./inst.php
 

[Rassol2]

@Dmitry76 Да все верно сказал @partshez
Я дополню, скорее всего это из за кук, в первом пректе они есть во втором нет.

При экспорте по умолчанию экспортируются не все данные, там исключены настройки запросов.
Это сделано специально, так как я начал замечать что люди делятся проектами, а там в экспорте написаны логины и пароли от сайтов доноров, которые они используют для авторизации. Так же прописаны платные прокси.
Люди делятся настройками на задумываясь. А это не безопасно, и я сделал что по умолчанию такая информация не экспортируется.

 

И это могло стать причиной того что вы описали.

[Dmitry76]

1 час назад, partshez сказал:

При экспорте выбрать нижнюю строчку. Полный экспорт

так и сделал, не помогает. В логах на 2-х проектах разные прокси подставились, но оба прокси - одинаковый регион выдают(Москву). Донор одинаковую информацию, по идее должен отдавать, а отдает разную. 

[Dmitry76]

1 час назад, Rassol2 сказал:

@Dmitry76 Да все верно сказал @partshez
Я дополню, скорее всего это из за кук, в первом пректе они есть во втором нет.

При экспорте по умолчанию экспортируются не все данные, там исключены настройки запросов.
Это сделано специально, так как я начал замечать что люди делятся проектами, а там в экспорте написаны логины и пароли от сайтов доноров, которые они используют для авторизации. Так же прописаны платные прокси.
Люди делятся настройками на задумываясь. А это не безопасно, и я сделал что по умолчанию такая информация не экспортируется.

 

И это могло стать причиной того что вы описали.

платные прокси идентичные прописаны. куки - не знаю, может из-за того, что они разнятся?

[Rassol2]

37 минут назад, Dmitry76 сказал:

платные прокси идентичные прописаны. куки - не знаю, может из-за того, что они разнятся?

что то упускаете.
Если представить что полностью все идентично настроено, то запрос с модуля будет одинаковый.
То есть нет разницы между запросами по проектам. Два разных проекта с одинаковыми настройками сделают одинаковый запрос.
Вы еше на всякий случай убедитесь что там не включен кеш.
Потому что в первом проекте может есть закешированные страницы, а во втором нет этого кеша.
И возможно в данный момент другая страница отдается а разница из за сделанного кеша.

[Rassol2]

Внимание!!!

С 14.07.21 по 18.07.21 меня нет в сети.

Ключи выдаются в прежнем режиме. Техническую поддержку в этот период а предоставить не могу

Приношу извинения за временные неудобства.

[malchuk]

Добрый день! Рассматриваю парсинг для покупки. У меня на сайте 2 языка украинский и русский. Может ли модуль парсить сразу 2 языка или это нужно делать как то отдельно?

[Rassol2]

1 минуту назад, malchuk сказал:

Добрый день! Рассматриваю парсинг для покупки. У меня на сайте 2 языка украинский и русский. Может ли модуль парсить сразу 2 языка или это нужно делать как то отдельно?

Здравствуйте.
Да может, но с оговорками.
Подробно разъясняю в этой статье.
https://simplepars.top/index.php?page=note&n=39

[partshez]

1 час назад, malchuk сказал:

Добрый день! Рассматриваю парсинг для покупки. У меня на сайте 2 языка украинский и русский. Может ли модуль парсить сразу 2 языка или это нужно делать как то отдельно?

Одним проектом парсится одинаковая информация в два языка. Создается копия проекта и обновляются поля согласно инструкции автора выше в украинской версии. Соответственно ссылки собираются на страницы нужного языка. Так надежнее работать.

[nebo]

Ребят! Беда! Спасайте!)

Как с этого сайта, спарсить "ИСПОЛЬЗУЕТСЯ В АВТОМОБИЛЯХ" и "Аналоги" (чтобы аналоги были как рекомендуемые товары, на странице товара): https://webshop-ua.intercars.eu/tovary/253469-febi-bilstein-haika-kolesa-fe04029&art=1062813&gru=A~6300000&lang=ru 

 

Самый главный вопрос по "ИСПОЛЬЗУЕТСЯ В АВТОМОБИЛЯХ". Очень надо! - и никак...

Спойлер

 

 

[Reanimaster]

19 часов назад, nebo сказал:

ИСПОЛЬЗУЕТСЯ В АВТОМОБИЛЯХ

А в куда это должно быть спаршено?

[Kuzolya]

В 20.11.2019 в 13:09, Rassol2 сказал:

Откройте файл /admin/model/catalog/simplepars.php
найдите строку.
$path = DIR_IMAGE.'catalog/';
Замените на
$path = DIR_IMAGE.'data/catalog/';

 

И все будет работать как вам нужно

здравствуйте!
обновила модуль и фото перестали записываться в нужную папку.
попыталась сделать то же, что вы советовали ранее, а теперь в этом файле таких строк нет.
Где можно мне поменять адрес для записи фотографий товаров?
 

[Reanimaster]

19 минут назад, Kuzolya сказал:

обновила модуль и фото перестали записываться в нужную папку.

 

Ну вот же

[nebo]

1 час назад, Reanimaster сказал:

А в куда это должно быть спаршено?

Хоть куда-то. В описание к примеру. Главное - получить с сайта донора эти данные. Дело в том, что эта вкладка вроде и есть в предварительном просмотре (при создании границ, в парсере), но данные по авто - никак не удается спарсить.

[Reanimaster]

27 минут назад, nebo сказал:

но данные по авто - никак не удается спарсить.

Данные на Аякс подтягиваются. SimplePars это не спарсит.
По поводу рекомендуемых - парсинг в CSV+Заливка :
1) AnyCSV

2) АОП

3) UniversalImport

[Reanimaster]

Помню писал про AttributeTextSelect.

Если бы вы все таки смогли это сделать - было бы просто чудесно.

Спойлер

 

вместо одной стандартной (product_attribute), три таблицы:

CREATE TABLE attribute_text (
  text_id int(11) NOT NULL,
  attribute_id int(11) NOT NULL,
  image varchar(255) NOT NULL,
  sort_order int(5) NOT NULL
) ENGINE=MyISAM DEFAULT CHARSET=utf8;

CREATE TABLE attribute_text_lang (
  id int(11) NOT NULL,
  attribute_id int(11) NOT NULL,
  language_id int(11) NOT NULL,
  text_id int(11) NOT NULL,
  text text NOT NULL
) ENGINE=MyISAM DEFAULT CHARSET=utf8;

CREATE TABLE attribute_text_product (
  id int(11) NOT NULL,
  product_id int(11) NOT NULL,
  attribute_id int(11) NOT NULL,
  text_id int(11) NOT NULL,
  text_int decimal(15,2) NOT NULL
) ENGINE=MyISAM DEFAULT CHARSET=utf8;

где:
1-я таблица - привязка id-Значения атрибута -> к самому id-Атрибуту + сортировка и картинка;
2-я таблица - название Значений атрибутов (text) и привязка -> к id-Языкам;
3-я таблица - привязка id Значений атрибутов и самих Атрибутов -> к id-Товара (text_int - поле, если значение числовое - для фильтра - используется в слайдерах - можно игнорировать).

 

 

Спойлер

 

Змінено 15 липня 2021 користувачем Reanimaster

[Kuzolya]

10 часов назад, Reanimaster сказал:

 

Ну вот же

Спасибо!
все нашла
поиск тупил( или я 
искал только первое слово((а остальные забыл найти

 

Змінено 15 липня 2021 користувачем Kuzolya

[Reanimaster]

Может кто-то подсказать, как добавлять и обновлять товар только своего проекта?

[partshez]

51 минуту назад, Reanimaster сказал:

Может кто-то подсказать, как добавлять и обновлять товар только своего проекта?

Добиться, чтобы в Сбор ссылок были только нужные ссылки на товары.

Менеджер  url . Попробовать создать список нужных товаров.

Заполнить отдельное поле для идентификатора. Например, артикул загнать дополнительно в upc и выбрать его идентификатором. 

Это пришло в голову...

[Reanimaster]

1 час назад, partshez сказал:

Это пришло в голову...

 

Спасибо. Примерно так и думал сам. Но есть один нюанс - крон...

[LODESTAR]

Доброго дня.

Думаю щодо придбання парсера. Може хто підкаже, він Brain парсить?

[Reanimaster]

16 минут назад, LODESTAR сказал:

Може хто підкаже, він Brain парсить?

Парсит человек. А модуль - всего лишь инструмент.