abuser

аналогичная проблема на одном из серверов таймвеба.

у кого-то разрешилась проблема ?

пауза ххх сек через каждые ууу товаров. пока тихо :)

Не совсем понял смысла этого , т.к. скрипт достаточно шустро шерстит по сайту-донору.. и банан ловишь из-за этого.. решил эту проблему путём добавления задержки при парсинге..

в сапплер.пхп

где-то есть :

function curl_get_contents(&$url, $pi) {

for ($r=0; $r<5; $r++) {

$head = $this->getHead($url);

sleep(rand(1,4)); //Вот это и добавил .. .

if ($head === false) {

$body = $this->getContents($url);

break;

Как обойти таймлимит хоостинга на работу скрипта ? (502 от нгинкса сыпецца рандомно как-то) 

 пытался через оперу авторефрешить - не получается - висит на 502-ой ошибке ((( т.е. не рефрешит страницу.. вот..

Сам себе отвечаю - м.б. как-то сделать через крон всё ? задал что-то типа:

php /usr/public/admin/index.php?route=catalog/suppler/start/cron&fileonserver=123.xml&supplernumber=7

* * * */5 типо такого что-то ... т.е запускать автоматом каждые 5 минут ...

смотрите фаил sos.tmp цифры соответствуют строке в прайсе от тайм лимита до тайм лимита цифры должны меняться это свидетельствует о том, что модуль работает. Пока все строки из прайса не обработаются будет выпадать тайм лимит. Количество загружаемых строк между тайм лимитами зависят от сложности задания и хостинга.

Как то так.

Так что смотрите sos.tmp

cherkas , Спасибо! Но это не совсем по вопросу ))

Про принцип работы я знаю прекрасно. Тут вопрос в другом - КАК организовать, что бы мне не приходилось подходить каждые 20-240 секунд к компьютеру и жать ф5\рефреш и пр ..

Как обойти таймлимит хоостинга на работу скрипта ? (502 от нгинкса сыпецца рандомно как-то) 

 пытался через оперу авторефрешить - не получается - висит на 502-ой ошибке ((( т.е. не рефрешит страницу.. вот..

Сергей, а тут ещё одна "мысля" пришла мне в голову - можно парсить название товара на предмет цвета и выставлять это автоматом в опцию товара, например.

Как такая идея для улучшения ?

Пример: название - холодильник samsung grey/серый  hl54

скриптом проверять наличие слов-цветов ру\англ\укр ...   и ставить в опцию соответственно .

дикость - обрабатывает по 20 товаров максимум - потом 502-ю даёт , да ещё и кидает всё в одну категорию ! жжжость ! 

+ ещё вопрос:   категорий больше 300 ....  ручками - муторно добавлять все + на вкладке данные прописать всё это -  это же с ума сойти можно !   как бы автоматизировать работу такую ? 

+++  - получается, что скрипт не создаёт всё-таки категории ??? ) 

Правильно сделали, что вставили в прайс цену.

Цена обновиться, нужно только включить: Обновлять, если цена снизилась.

А цена наверняка будет меньше 2 000 000, значит, обновится.

 

Совет: не поленитесь, создайте категории в админке руками - это же ваши категории, вашего магазина!

Зачем копировать чужие.

 

Посмотрите на доноре, какие категории у него есть и пропишите соответствия вашим на стр. Данные, все ненужное не зальется.

Выясните, правильно ли вы указали параметры парсинга категорий с донора - это важно.

Прочтите "Парсинг назад" - как спарсить последнюю категорию из хлебных крошек.

 

Ну и всегда показывайте содержимое errors, разберемся :)

 с названием - каким-то загадочным образом само исправилось - грешу на сервак таймвёбовцев.

по поводу категорий - пичалька, ну да ладно - ручками, значит ручками делаем-с .. (только зачем тогда радиобатон - создавать категории ???)

по ценнику -  получается, если товаров 12к , то придётся 1-й раз парсить скриптом сайт-донор для названия, характеристик, и ещё раз по нему же пройтись - собрать корректные цены ... так ?  *

 *тонко намекаю, что хочется очень за 1 присест выцепить все нужные данные ) 

пришло моё время тупить адово ))) 

Имеем:

сайт-донор

XML с колонками - артикул,ссылко-на-товар

Оссторе без категорий и пр.

Хочу: кнопку бабло , вставить продукты, категории на свой сайт.

Проблемы: 

1) длина названия спаршиваемого товара слишком большая по мнению скрипта - он выдаёт ошибку на этой почве

2) категории создавать не хочет ( 

Что делать, кто виноват ? 

ПСЫ потом уже вставил из инструкции "ценк поставить 2000000 и протянуть в xml" ...  но как потом обновиться-то  она с сайта ??? если изначально не хочет парситься-вставляться ?!?!?

и да - извратнулся даже-  поставил товарам категории-родители-дети в неск колонок, указал в настройках номера колонок.. и ни хрена - не добавляет категории эти (( 

апну слегка ..  а то ни ответа, ни привета (( 

м-дя ...   Человек спрашивает - дорого или не дорого с него взяли ... 

Ответ - не дорого.

Аргументы - сами вы этого сделать не можете\не хочете \ не умеете .  Человек выполнявший работу - не украл у Вас деньги, не одолжил, не взял за не сделанную работу..  

+ у Вас модуль, который облегчает вам же и вашим сотрудникам жизнь\загрузку картинок. ищите позитив ! 

Задача:

Вывести на странице БРЕНДА все категории, где данный бренд представлен товарами (включенными, отключенными - не важно. брать товары по прописанной главной категории)

Ссылка такой категории-бренда должна вести на страницу, в которой будет перечислен товар этого бренда из данной категории, текст этой категории-бренда.

Ссылки на СЕО, ЧПУ - должно поддерживаться для всех страниц.

Ссылки на товары при использовании схемы  чпу -  домен\категория\товар (не вставлять Бренд\Вставлять бренд - на выбор)

Ну, и соответственно - кто и за сколько готов сделать (время и деньги) + м.б. что-то дополнительное ?  

* И да - на офсайте тоже не нашел решения, м.б. плохо искал ... 

Как минимум нужна распозновалка капчь поэтому без абонентки не обойтись...

+ у меня начался гемор после 30 загруженных товаров за раз :)

Можно хоть 1000 загрузить, но акк в бан уйдет.

Всем удачи.

Всяко стоит проверка не только на ip, но и одинаковый номер телефона ... , например ..  мыло  .. и прпрпр...

всё тлен... и тлен  - тлен

понял причину того, почему не создавались группы атрибутов.. они создаются, но в пустую группу %) уффф)) ) 

Как это, как это :)

Основное фото 100% не может попасть в доп - это вообще, разные таблицы в БД.

По крайней мере, я этого безобразия точно не делал. :oops:

 

Дайте ссылочку на основное фото, которое не парсится.

Интересно.

 столкнулся на том же сайте, что и с кодировкой не той с проблемой одной - фотографии были в теге rel="тут фото"

в итоге заменил в файле сапплер.пхп  в строке отвечающей за парсинг фото  тег href= на rel= и все фото спарсились ) 

Проблема в кодировке сайта.

Сегодня не успел ее решить, постараюсь завтра сделать.

Видите, обрывается на букве ё

как профан в программировании спрошу - а такое не поможет ?  iconv("UTF-8", "windows-1251","тут, то , что хотим конвертнуть из 1251 в утф-8"); 

Можно пример?

отписался в пм 

урезает спаршенное описание абсолютно как угодно ...  бред-пит (((   нид хелп ! 

версия 5 от 2 окт

оссторе 1,5,4,1

deleted

При парсинге фото, появляются ошибки вида

 

The Product was passed: Row ~= 24 url = http://(Ссылка на товар) Site no answer 

 

Часть фото при этом парсится, остальная же часть - выдает эту ошибку.

Сайт поставщика работает нормально, если прям в логе нажать на ссылку-она работает, не пойму в чем причина.

как вариант  - у поставщика стоит ограничение на количество одновременных, либо подряд идущих запросов.. 

видимо - нужно увеличить задержку между парсингом..

 

В ошибках пишет вот такое:Warning. Row ~= 1 Product code (sku) = 00000024149 Manufacturer: '0' not found 

 Photo can not be found: Row ~= 1 Product code (sku) = 00000024149 Please, set  Manufacturer or keyword 

можно ли загружать без картинок товары??? И если да то подскажите как???

 

Без фото - нельзя!

НО - можете подставить url на любую картинку, например на картинку-заглушку на вашем сайте  - http://ваш_домен/image/no_image.jpg 

пожалуйста, подскажите, если у меня картинки закачаны уже на сервер и распределены по папкам image/data/папки. Как мне в экселевском файле это указать в строке картинки?

так и указать http://vash_domen/image/data/папка/картинка

Сергей, доброе утро! ) 

Как хорошо после сна спрашивать вопросы)))

Вопрос: можно ли сделать в  инструментах, или отдельным модулем "Раскидовалку картинок" (переместить основные и доп фотографии уже существующих товаров в автоматически создаваемые папки\подпапки, путём привязки оных к категориям конечным  + переименовка картинок в чпушное\сеошное, для исключения повторов в названиях разных товаров ставить sku в начале (тоже чпушно-сеошное, т.е. если ску с буквами русскими, например, или с пробелами и пр..),  при дополнительных картинках ставить sku-pictname-1,sku-pictname-2,...3,...4 ) ?

Проблема - картинки с именами gasrmaaetjhajaghsrgjjsgjsdgjsryj100500.jpg   в различнейших папках, все суются куда хотят.. 

Это избавило бы от обязательного прописывания "существующая папка для картинок" , т.к. потом можно было бы автоматом раскидать всё куда нужно.

+ избавило бы от перегруза папок over300 картинок, что , как известно - ася-сяй ... 

Пример:

при совпадении ску

Товар1 , ску1, фото1, допфото1, допфото2, категория кат1\подкат1

Товар2 , ску1, фото1, допфото1, категория кат1\подкат1

Кладём фото в  

image\data\seo(кат1)\seo(подкат1)\seo(ску1)-seo(фото1).jpg

image\data\seo(кат1)\seo(подкат1)\seo(ску1)-seo(допфото1).jpg

image\data\seo(кат1)\seo(подкат1)\seo(ску1)-seo(допфото2).jpg

image\data\seo(кат1)\seo(подкат1)\seo(ску2)-seo(фото1)-1.jpg

image\data\seo(кат1)\seo(подкат1)\seo(ску2)-seo(допфото1)-1.jpg

косяк ?   

При добавлении товара без категории - не ставится дефолтная категория.

ocstore 1.4.5.1 модуль перекачан 31.10.13 с утра