Перейти до вмісту
Пошук в
  • Детальніше...
Шукати результати, які ...
Шукати результати в ...
Продаж модуля «SEO bot checker» призупинено
Ми підібрали схожі модулі інших розробників — їх можна придбати вже зараз.

Що можна обрати замість

Роблять те саме — можна поставити замість.
Боти та сканери онлайн
Цей модуль заснований на: OpenCart - Bots and Crawlers OnLine, який розповсюджується безкоштовно для Opencart 2. Автором модуля є @Wild, але він давно offline, тому публікую адаптацію під OcStore 3 без його згоди. Я виконав лише адаптацію коду.
 
Модуль відображає активність роботів на сайті в Звіти->Покупці онлайн. Роботи, що відстежуються, налаштовуються в стандартних налаштуваннях магазину у вкладці Система->Налаштування->Опції в розділі Акаунт. Є можливість вести файл логів відвідування роботів (system/logs/useragents.log). Дуже корисно для аналізу відвідувачів. Боти з'являться не відразу, а при наступному відвідуванні сайту.
 
Порядок встановлення
Виконайте запит в БД (не забуваємо перевірити префікс таблиці)  ALTER TABLE `oc_customer_online` ADD COLUMN `bot_name` VARCHAR(64) NOT NULL AFTER `date_added`;  
Встановити файл через вбудований інсталятор розширень.
Оновити модифікатори.
Перейти в Система->Налаштування->Опції і перевірити наявність пунктів: Імена ботів з UserAgent і Записувати UserAgent в LOG (для налагодження)
Зберегти налаштування магазину.
Перейти до розділу Звіти -> Користувачі онлайн та перевірити роботу модуля.

Оновлене

Боти та сканери онлайн

Безкоштовно
Переглянути

Recommended Posts

Нет конечно!!!

 

Открыл, поискал ссылки, отложил в очередь..

И когда там придет очередь неизвестно..

 

 

Не путайте ПС пауки с парсерами.

Кстати вот вам и идея по расширению функционала.

Добавьте возможность запрещать и разрешать парсить карточки.

Надіслати
Поділитися на інших сайтах


Для WordPress знаю, видел, использовал. Для ОС есть такие? Эта тема еще работает?

Можно тогда встроить кнопочку "ping"  в данный модуль ;) и полезность его возрастет.

был бы спрос..

 

Но это тема отдельной разработки, сам давно не пользовался пингаторами, работает или нет - не знаю

Кроме того нужен список валидных пингаторов, который нужно проверять

Пингаторы должны быть " ручные"

Надіслати
Поділитися на інших сайтах

Попозже я могу его потаскать, по одному. Если нужен... только формат укажите ;)

формат простой, посмотрите в настройки-сервер-robots

Т.е. чистый шаблон - bot, .bot, yandex и т.д. И также закладку - список ботов

Разве что комментарий Можно сделать более продвинутым

Надіслати
Поділитися на інших сайтах

upd 11.06.2016
Редактирование ботов
Фильтр по ботам
Кнопки проверки страниц в индексе
посещенная страница представлена с протоколом

Надіслати
Поділитися на інших сайтах

Вот, с доменами уже лучше :) теперь я вижу, что Яша по секс-шопу бродит, а не его товары на других доменах :)

Только вот есть такой UA "Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/52.0.2736.0 Safari/537.36" - это кто? или теперь не только боты там светятся?

И не совсем понял где фильтр по ботам... хочется вменяемого "Google" и т.д. ;)

Надіслати
Поділитися на інших сайтах

ой! Да..

Побег исправлять...

Надіслати
Поділитися на інших сайтах

фикс

 

 

И не совсем понял где фильтр по ботам... хочется вменяемого "Google" и т.д.

 

 

фильтр в закладке списка ботов

 

Поясните что такое вменяемый "Google"

Надіслати
Поділитися на інших сайтах

Вкладка: список страниц, там вижу UA, скажем "Mozilla/5.0 (iPhone; CPU iPhone OS 8_1 like Mac OS X) AppleWebKit/600.1.4 (KHTML, like Gecko) Version/8.0 Mobile/12B411 Safari/600.1.4 (compatible; YandexMobileBot/3.0; +http://yandex.com/bots)" - а хотелось бы перед ним столбец, где коротко и ясно жирным шрифтом было сказано Yandex, чтобы я не искал глазами в UA ту самую приписку бота. Тем более что во вкладке список ботов им зачем-то имена можно давать, но не используются они...

 

Опять же на вкладке список страниц хотелось бы группировку по ботам, есть группа "Google", я ее открываю, а там:

Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)
Mozilla/5.0 (Linux; Android 6.0.1; Nexus 5X Build/MMB29P) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/41.0.2272.96 Mobile Safari/537.36 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)

и так далее...
 

Надіслати
Поділитися на інших сайтах

Тем более что во вкладке список ботов им зачем-то имена можно давать, но не используются они...

 

Это    просто уже заложено, но не сделано, вы же сами видели процесс :)

 

Но вы можете руками отфильтровать? Кнопка фильтр есть?

Надіслати
Поділитися на інших сайтах

Из купивших и установивших

У кого есть мультимагазин?

Ссылки верно отображаются?

 

Появился функционал проверки ссылки в robots.

Зачем? А вот для контроля - ходят ли роботы по "запрещенным ссылкам",

Или же.. зашел неизвестный робот, а закрыто только для G или Я

 

Появится со следующим релизом.

 

Вот как это выглядит

5649301939.png

 

По идее при мультимагазине подтягивается robots.txt от магазина

Змінено користувачем chukcha
Надіслати
Поділитися на інших сайтах

Не... можно сделать разные robots

Надіслати
Поділитися на інших сайтах

Отчетик - кому надо?

4264524366.png

Надіслати
Поділитися на інших сайтах

А можно попросить сменить хостинг для картинок? А то в Рашке он блокируется, пришлось через фригейт смотреть ;)

 

Вот это уже интересненько, а там даты можно будет выбирать для такой статистики?

Надіслати
Поділитися на інших сайтах

Если через недельку сбросите дамп

То можно буде поиграться уже реальными данными, с реальным объемом

 

На том который вы дали у меня получилось только за один день ( генерировать тестовый объем - лень)

 

А в вашем случае - можно статистику строить и по-магазинно

 

А не только по-роботно

 

Но!!! Это делается пока на энтузиазме, а через пару дней он помрет :)

Надіслати
Поділитися на інших сайтах

  • 2 weeks later...

upd 28.06.2016

Добавлена кнопка отчета

Учитываются мултимагазины

Включена поддержка кириллический доменов

Ссылки  посещенные роботом при выводе проверяются на разрешение/запрет в robots

Некоторые косметические изменения

Надіслати
Поділитися на інших сайтах

Здравствуйте!

 

После установки мода ошибок ни каких не было, теперь после каждого захода "бота" появляется ошибка (Warning: preg_match(): in /var/www/admin/www/centermebel.com/admin/controller/module/bot_checker.php on line 185),

что она означает и как от нее избавится?

Надіслати
Поділитися на інших сайтах


Это полная ошибка?

Надіслати
Поділитися на інших сайтах

эта ошибка в админке, в логах так - 2016-07-07 17:29:27 - PHP Warning:  preg_match():  in /var/www/admin/www/***/admin/controller/module/bot_checker.php on line 185

Змінено користувачем bankir33
Надіслати
Поділитися на інших сайтах


Скачайте измененную версию

И просто скопируйте файлы

 

Вы все равно не показали всю ошибку -: Unknown modifier

Надіслати
Поділитися на інших сайтах

Как такой отчет? По часовое посещение ботов

rep2.jpg

Надіслати
Поділитися на інших сайтах

после обновы та же ошибка, что и в посте #45 только на линии 183

Спасибо еще раз - карма..

Надіслати
Поділитися на інших сайтах

Створіть аккаунт або увійдіть для коментування

Ви повинні бути користувачем, щоб залишити коментар

Створити обліковий запис

Зареєструйтеся для отримання облікового запису. Це просто!

Зареєструвати аккаунт

Вхід

Уже зареєстровані? Увійдіть тут.

Вхід зараз
Гість
×
  • Створити...

Important Information

На нашому сайті використовуються файли cookie і відбувається обробка деяких персональних даних користувачів, щоб поліпшити користувальницький інтерфейс. Щоб дізнатися для чого і які персональні дані ми обробляємо перейдіть за посиланням . Якщо Ви натиснете «Я даю згоду», це означає, що Ви розумієте і приймаєте всі умови, зазначені в цьому Повідомленні про конфіденційність.