[Поддержка] Поисковая система с морфологией и релевантностью PRO

[sv2109]

17
Завантажити / Придбати розширення

Поисковая система с морфологией и релевантностью PRO

---

Больше 10 тысяч загрузок модулей от sv2109!

 

Что делает этот модуль?

Это модуль поиска для магазинов, которым нужен качественный и быстрый поиск. То есть практически для всех магазинов, ведь с плохим поиском магазины постоянно теряют десятки процентов прибыли! Ваши клиенты не будут вручную просматривать десятки тысяч страниц вашего сайта для поиска нужного товара. Если товар не найден в первые секунды через поиск то пользователь просто уходит с вашего сайта.   
 

Модуль тестировался на магазине в котором больше миллиона товаров!

 

Основные преимущества

• больше 1000 продаж модуля
• очень большая скорость поиска
• использование морфологии и релевантности для более точного поиска
• уменьшение процента отказов покупателей
• логика поиска для поиска по фразам из нескольких слов: И, ИЛИ
• неточный поиск, поиск с опечатками
• поиск без учета языка
• синонимы
   

Дополнительные возможности

• режим исправления раскладки клавиатуры ("фззду" -> "apple")
• режим транслитерации ("stol" -> "стол")
• возможность добавлять новые поля для поиска, например можно добавить поиска по id товара, мета H1 и почти по любому полю товара.
• гибкий поиск по атрибутам
• установка весов для категорий и производителей, можно товары из какой-то категории или производителя показывать выше или ниже остальных
• части речи
• возможность удаления, замены слов
• индексация по крону
• множество других настроек

 

Модуль совместим с модулями:

1. Search suggestion - поиск с автодополнением
2. Фильтр категорий в поиске
3. История Поиска
4. Похожие товары с морфологией и релевантностью
5. Поиск товаров в админке

 

Модуль совместим с модулями других разработчиков:

По всем вопросам по этим модулям обращайтесь к их разработчикам. 

1. Фильтр товаров - FilterVier_SEO
2. OCFilter - Модуль фильтра товаров

 

Чем этот модуль отличается от других модулей поиска?

К обычным поисковым модулям относятся: стандартный поиск OpenCart, другие модули поиска, например модуль "Поиск с морфологией и релевантностью".

Как они работают? После того, как пользователь ввел фразу для поиска и нажал кнопку "Искать", модуль поиска для того, чтобы найти все товары, которые соответствуют поисковой фразе, должен обойти все товары в базе данных, причем информация о каждом товаре находится не в одной, а в нескольких таблицах с множеством полей, многие из которых никак не проиндексированы.

Если у вас немного товаров на сайте (десятки, сотни) и быстрый сервер, то поиск у вас будет работать достаточно быстро.

Но если у вас тысячи товаров в магазине (или даже десятки и сотни тысяч) или не самый быстрый сервер, то чем больше у вас будет товаров, тем медленнее будет работать поиск на вашем сайте. В некоторых случаях и 5 и 10 и даже больше секунд, что конечно же очень много, все, что больше 1-2 секунды это уже много, пользователи не будут столько времени ждать, они закроют ваш сайт и пойдут на другой.

 

Как работает этот модуль?

Этот модуль работает по тому же принципу, что и поисковые системы, поэтому он так и называется.
Возьмем для примера поисковую систему Google. После того, как вы вводите в поле поиска, например, "OpenCart" и нажимаете кнопку "Поиск", Google отображает вам нужные результаты за доли секунды. Это возможно потому, что Google не ищет информацию непосредственно на каждом сайте в момент поиска, он уже до этого обошел все сайты и добавил эту информацию в свои очень быстрые базы данных, где все записи проиндексированы и лежат в базе с нужными весами (какой сайт показывать выше в выдаче, какой ниже). После этого Google осуществляет поиск по своих базах, это дает возможность найти сотни тысяч сайтов за доли секунды!
Именно так работает и этот модуль. Сначала он обходит все товары в магазине и добавляет всю информацию в свои таблицы базы данных с индексами.
Когда пользователь что-то ищет на сайте, поиск не обходит десятки полей в тысячах товаров, а ищет всего в одной таблице по проиндексированному одному полю, поэтому результат пользователь получит не через несколько секунд или даже десятков секунд, а через доли секунды, что в десятки и даже сотни раз быстрее стандартного поиска.

 

Морфология и релевантность

Как известно, стандартный поиск OpenCart просто ужасный. При поиске он разбивает искомую фразу на отдельные слова, после чего находит все товары, в которых встречается любое из этих слов. В результате при поиске по фразе "Монитор Samsung" на первых позициях может оказаться "монитор Acer" (так как в названии есть слово "монитор") или "ноутбук Samsung" так как в названии есть слово "Samsung". В то время, как нужный товар "Монитор Samsung" может быть где-то на 10-той странице. А если вы напишите в поиске не "ноутбук", а напр. "ноутбуки" или сделаете опечатку в слове "Samsung" то поиск вообще ничего не найдет, так как поиск осуществляется только по точному вхождению слова.

Этот модуль написан для того, чтобы исправить все недостатки стандартного поиска.

Для этого у него есть 2 инструмента:

1. Морфология. Поиск не по точному совпадению, а по корням слов. Теперь написав в поиске "ноутбуки", поиск выдаст все товары в которых встречается и "ноутбуки" и "ноутбук" и "ноутбука" итд. Поддерживаемые словари - русский, украинский, английский.
2. Релевантность. При поиске на первых позициях будут материалы с большим суммарным весом. Наибольший вес имеет точное вхождение фразы в начало названия товара, потом вхождение одного или нескольких слов в название (чем больше слов тем больший вес), потом вхождение слова в тег, потом целой фразы в описание, потом отдельного слова в описание. Чем больше совпадений, тем больше вес и тем выше будет этот товар в результатах поиска. Вес каждого совпадения можно корректировать в админке.

 

Возможности

• модуль написан на основе модуля "Поиск с морфологией и релевантностью", поэтому содержит весь огромный функционал того модуля
• использование морфологии и релевантности для более точного поиска
• выбор логики поиска для поиска по фразам из нескольких слов: И, ИЛИ
• поддержка мульти-магазина
• возможность отключить в поиске дату поступления товаров
• разные типы поиска (по корням слов и целым словам)
• режим исправления раскладки клавиатуры ("фззду" -> "apple")
• учитывать наличие на складе (товары, которых нет в наличии будут отображаться в конце поиска), а также в версии 4 и статусов наличия
• возможность добавлять новые поля для поиска, например можно добавить поиска по id товара, мета H1 и почти по любому полю товара.
• для каждого поля можно: указать минимальную длину слова, указать вес вхождения слова в начало или середину поля
• возможность исключить некоторые слова из поиска
• возможность заменить слова при поиске (например слова с ошибками: "aple" -> "apple")
• поддержка нескольких режимов индексации: индексация по крону, автоматическая индексация после каждого добавления, изменения, удаления товара, ручная индексации на странице настроек модуля с поддержкой пакетного создание индексов (можно запустить процесс и оставить страницу открытой на продолжительное время)
• поиск по вхождению
• неточный поиск
• возможность указывать конкретные атрибуты для поиска

 

Что нового в 4 версии модуля?

1. Поиск без учета языка. Теперь легко включается в настройках модуля. Пример: если на украинском языке ввести "одеяло" то найдет "ковдри" итд.
2. Полностью переписана функция индексирования, теперь индексирование работает в разы, а иногда и в десятки раз быстрее.
3. Полностью переписан механизм неточного поиска, теперь он работает иначе, намного лучше, чем раньше. Ищет с опечатками, неточным написанием, вхождение итд. Для работы нужен MySQL версии 5.7.6 и выше. 
4. Исправлена ошибка при которой поиск с большим количеством слов при логике поиска И на некоторых хостингах подвешивал MySQL сервер.
5. Тут сразу 2 улучшения:  
   - во-первых переписана логика поиска И, теперь она работает в разы быстрее и уже не должна нагружать сервер
   - во-вторых в настройках добавлено время выполнения поискового запроса, если время вышло то поиск просто завершается.
6. Поиск по атрибутам теперь можно настраивать, указывать какие именно атрибуты нужно индексировать и искать только по ним, а не все сразу. В магазине может быть 50 атрибутов, а искать нужно только по атрибуту "Цвет", теперь это возможно.
7. Сортировка результатов по наличию - теперь можно указывать конкретные статусы товара для товаров, которых нету в наличии. Можно, например убрать из результатов поиска товары "Нет в наличии" и "Снят с производства" но оставить "Под заказ" и "Ожидается через 2 дня".
8. Возможно изменять логику поиска с И на ИЛИ во время поиска если ничего не найдено.
9. Улучшена работа модуля с украинским языком.
10. Улучшен дизайн, дополнительные настройки вынесены в отдельный таб.
11. Исправлены другие ошибки, некоторые функции полностью переписаны, а также другие мелкие изменения и улучшение.

Изменения прошлых версий:

 

Скрытый текст

Что нового в третьей версии модуля?

1. Поиск Добавлен поиск с использованием транслитерации
   Давно многие это просили реализовать, сделал.
2. Добавлена возможность указывать очередность поиска между поиском с неправильной раскладкой, транслитерацией, неточным поиском
   Раньше это было жестко зашито в коде, сначала шел неточный поиск, а потом если неточный поиск ничего не находит то уже производился поиска по неправильной раскладке, что было не всегда удобно.
3. Добавлена точная настройка поиска по Категориям. Товары из определенных категорий можно отображать выше или ниже в поиске или убрать из поиска. 
   Пример. Есть магазин, который торгует мобильными телефонами. Вместе с телефонами он также торгует аксессуарами к ним: чехлы, защитные стекла, наушники итд. В названии и описании аксессуаров часто присутствует и модель телефона, которая к тому же часто повторяется, так как модели могут отличаться на 1 букву. И когда пользователь ищет какой-то телефон по модели, то и сам пользователь хочет увидеть в поиске именно телефоны и магазину намного выгоднее продать именно телефон, но в поиске на первых позициях могут быть именно чехлы или защитные стекла, а телефон этой модели далеко ниже в результатах поиска. Новая функция решает эту проблему, теперь настроить поиск можно намного гибче.
4. Добавлена точная настройка поиска по Производителям. Товары определенных производителей можно отображать выше или ниже в поиске или убрать из поиска. 
   Тоже самое что и по категориям, только по производителям. Магазин может например поднять в выдаче товары производителя, на которые у магазина больше наценка и больше прибыль с их продажи. 
5. Добавлена настройка по частям речи. Для определенных полей можно увеличить или уменьшить вес слов какой-то части речи или совсем не добавлять их в индекс. 
   Например можно не добавлять в индекс такие части речи как предлоги, союзы, междуметия итд. А вес имен существительных или глаголов наоборот увеличить. Работает только для русского языка.
6. Добавлена возможно поиска по точному совпадению слова, в более ранних версиях был поиск только по корням слов. 
   Так как раньше поиск искал по частям слов, то иногда точное совпадение слов было в результатах поиска ниже, чем слова с неполным совпадениям. Например пользователь мог искать "красное платье" и на первой позиции мог быть товар "Красный ремень для платья", а товар "Красное платье в белый горошек" могло быть ниже в выдаче, несмотря на то, что в нем точно совпадают все 2 слова. Эта функция исправляет этот момент. 
7. Добавлена опция не отображать в результатах товары, которых нету на складе, в более ранних версиях из можно было только отображать в конце списка. 
   Также многие давно просили реализовать это, сделано. 
8. Добавлены синонимы. 
   Теперь можно прописать наборы синонимов и товар будет находиться и по основному слову и по его синонимам. Например по слову "телефон" находить товары, где есть "смартфон". 
9. Больше десятка других улучшений по поиску, индексации, дизайну и т.д.
   Все они не очень большие, но все вместе также значительно улучшают весь поиск. 

 

Что нового во второй версии модуля?

1. Поиск по вхождению слова и по суффиксам. Этого многим очень не хватало в 1 версии, так как многим нужен был поиск по вхождению для напр. модели или артикула. Но этого не было в 1 версии, потому что такой поиск, если сделать его просто, очень сильно (в сотни раз) сказался бы на скорости поиска. Во второй версии был написан функционал быстрого (!) поиска по вхождению. 
2. Более точная релевантность. В 1 версии было 2 веса для слова: если слово первое (в напр. названии товара) и все остальные слова. То есть и слово, которой второе и слово которое 20-е имели один вес. Во 2 версии есть 2 веса: вес первого слова и вес последнего. Все остальные слова внутри получают веса динамически в зависимости от их положения и к-ва слов в названии. Таким образом чем ближе слово к началу тем больше у него вес и товары, у которых искомое слово будет стоять ближе к началу будут выводиться выше в результатах. Мало того, если поиск идет по вхождению, то вес также режется пропорционально части слова. Тем самым достигается большая точность релевантности поиска. 
3. Добавлен неточный поиск, поиск слов созвучных с искомым. То есть, можно найти товары, даже если ввести какое-то слово с опечаткой или грамматической ошибкой, конечно не все ошибки модуль найдет, но многие - да.
4. Лучший алгоритм поиска по логике И. Эта часть кода была полностью переписана, теперь в модуле такой поиск работает по новому алгоритму, который и на скорость не влияет и более точно находит только товары, в которых есть все слова из поисковой фразы. 
5. Поддержка OpenCart 3.0

 

 

Что нового во второй версии модуля?

1. Поиск по вхождению слова и по суффиксам. Этого многим очень не хватало в 1 версии, так как многим нужен был поиск по вхождению для напр. модели или артикула. Но этого не было в 1 версии, потому что такой поиск, если сделать его просто, очень сильно (в сотни раз) сказался бы на скорости поиска. Во второй версии был написан функционал быстрого (!) поиска по вхождению. 
2. Более точная релевантность. В 1 версии было 2 веса для слова: если слово первое (в напр. названии товара) и все остальные слова. То есть и слово, которой второе и слово которое 20-е имели один вес. Во 2 версии есть 2 веса: вес первого слова и вес последнего. Все остальные слова внутри получают веса динамически в зависимости от их положения и к-ва слов в названии. Таким образом чем ближе слово к началу тем больше у него вес и товары, у которых искомое слово будет стоять ближе к началу будут выводиться выше в результатах. Мало того, если поиск идет по вхождению, то вес также режется пропорционально части слова. Тем самым достигается большая точность релевантности поиска. 
3. Добавлен неточный поиск, поиск слов созвучных с искомым. То есть, можно найти товары, даже если ввести какое-то слово с опечаткой или грамматической ошибкой, конечно не все ошибки модуль найдет, но многие - да.
4. Лучший алгоритм поиска по логике И. Эта часть кода была полностью переписана, теперь в модуле такой поиск работает по новому алгоритму, который и на скорость не влияет и более точно находит только товары, в которых есть все слова из поисковой фразы. 
5. Поддержка OpenCart 3.0

 

 

 

Таблица сравнения версий модулей

	Поиск с морфологией и релевантностью, версия 3	Search Suggestion - Поиск с автодополнением, версия 5	Этот модуль - Поисковая система, версия 4
Скорость поиска	низкая	низкая	очень высокая
Релевантность	средняя	нету	очень высокая
Логика И	средняя	средняя	хорошая
Поиск по вхождению	есть (медленный)	есть (медленный)	есть
Неточный поиск	нету	нету	есть
Транслитерация	нету	есть	есть
Смена раскладки	нету	есть	есть
Коэффициенты для  категории	нету	нету	есть
Коэффициенты для производителей	нету	нету	есть
Настройки частей речи	нету	нету	есть
Поиск по целому слова	нету	нету	есть
Синонимы	нету	нету	есть
Поиск в шапке сайта	нету*	есть	нету*
Поддержка OpenCart	1.5 - 3	1.5, 2.0 - 3	1.5 - 3

 

* - в модуле Поисковая система и Поиск с морфологией и релевантностью  нету поиска в шапке сайта, потому этот функционал реализован отдельным модулем - Search Suggestion. Это сделано для большей гибкости. Эти модули отлично работают вместе (при наличии модуля Поисковая система модуль Search Suggestion ищет товары через модуль Поисковая система) но могут работать и отдельно. Лучше, конечно, использовать их вместе. 
 

Модуль совместим с модулями:

1. Search suggestion - поиск с автодополнением
2. Фильтр категорий в поиске
3. История Поиска
4. Похожие товары с морфологией и релевантностью

Совместимость:

OpenCart/ocStore 3.x, 2.0.x, 2.1.x, 1.5

 

Модуль использует IonCube, обычно на 99% хостингов он используется но на всякий случай можете проверить.

Одна лицензия модуля позволяет установить этот модуль на 1 домене.

Демо:

Сайт

Админка

 

Для связи с автором модуля пишите в ЛС на форуме
Условия оказания поддержки

© Стасюк Владимир (sv2109.com), 2016

---

• Автор
  sv2109
• долучення
  24.07.16
• Категорія
  Поиск
• Системные требования
• Метод активации
  По запросу в ЛС
• Ioncube Loader
  Требуется
• ocStore
  3.0
  2.3.0.2.4
  2.3
  2.2
  2.1
  1.5.5.1.2
  1.5.5.1.1
  1.5.5.1
  1.5.4.1.2
  1.5.4.1.1
  1.5.4.1
  1.5.3.1
• OpenCart.Pro, ocShop
  Opencart.pro 2.3
  Opencart.pro 2.1
  OcShop 2.0.3.х
  OcShop 1.5.6.4.х
• Звернення до сервера розробника
  Нет

 

[markimax]

Google также использует слуховой алгоритм

https://www.google.com/search?q=smsung

http://demo.sv2109.com/ocstore2102_2/index.php?route=product/search&search=smsung

[sv2109]

Google также использует слуховой алгоритм

https://www.google.com/search?q=smsung

http://demo.sv2109.com/ocstore2102_2/index.php?route=product/search&search=smsung

google много чего умеет, это поисковая система, которая стоит миллиарды долларов, конечно же что она ищет лучше модуля за 15$ 

 

на в модуле можно делать замену слов, например для слов с опечатками и тогда по smssung модуль тоже найдет товары:

http://demo.sv2109.com/ocstore2102_2/index.php?route=product/search&search=smsung

 

[markimax]

google много чего умеет, это поисковая система, которая стоит миллиарды долларов, конечно же что она ищет лучше модуля за 15$ 

 

на в модуле можно делать замену слов, например для слов с опечатками и тогда по smssung модуль тоже найдет товары:

http://demo.sv2109.com/ocstore2102_2/index.php?route=product/search&search=smsung

 

Морфологический разбор слабоват

Советую совмещать (или вообще основным сделать) по типу "слухового" (у меня есть реализация - могу дать), технически тривиально, т е точно также как у вас сейчас реализовано, но база не слов, а "морфо- слухо" хешей

[kolek5520]

ищет  и вправду быстро
скидки владельцам Поиск с морфологией и релевантностью PRO будет?

[sv2109]

Советую совмещать (или вообще основным сделать) по типу "слухового" (у меня есть реализация - могу дать), технически тривиально, т е точно также как у вас сейчас реализовано, но база не слов, а "морфо- слухо" хешей

 

нужно будет изучить этот вопрос на досуге, я раньше просто об этом не задумывался никогда, будут вопросы - обращусь. 

 

ищет  и вправду быстро

скидки владельцам Поиск с морфологией и релевантностью PRO будет?

да, конечно. 

[baxabit]

На демо вообще ничего не срабатывает, увы.

[sv2109]

На демо вообще ничего не срабатывает, увы.

что не срабатывает?

[Vetal]

по фразе "ipho" не ищет...

там может лимит в 5 символов ?

[sv2109]

по фразе "ipho" не ищет...

там может лимит в 5 символов ?

нет, в настройках стоял поиск по точному слову, не по началу,

только что поменял настройки, теперь находит

http://demo.sv2109.com/ocstore2102_2/index.php?route=product/search&search=ipho

[Vetal]

а почему по фразе "ipho"  также показивает  

iPod Touch и iPod Nano   ??

[sv2109]

а почему по фразе "ipho"  также показивает  

iPod Touch и iPod Nano   ??

[/quote

Потому что в описании (а поиск включен по описанию) одного есть "iPod touch features the same multi-touch screen technology as iPhone. " а второго " and sync your iPod or iPhone with ease."

[Vetal]

етот модуль еще и настроить с трудом будет...куча наворотов ))или не будет искать ниче или и то что искать не надо :-)

[sv2109]

етот модуль еще и настроить с трудом будет...куча наворотов ))или не будет искать ниче или и то что искать не надо :-)

Функциональный модуль не может быть простым, чем больше функционал, тем больше в нем будет настроек, 

В модуле есть настройки по умолчанию, которые подойдут для большинства сайтов, в крайнем случае есть поддержка, где подскажут как настроить модуль именно под ваш сайт, если стандартные настройки вам почему-то не подойдут. 

[markimax]

Неплохо на демке сделать тысяч 50 товаров чтобы показать скорость

Поиск на 10 товаров как то не серьезно ;)

[sv2109]

Неплохо на демке сделать тысяч 50 товаров чтобы показать скорость

Поиск на 10 товаров как то не серьезно ;)

согласен, просто нету тестовой базы на 50 тыс. товаров, 

думаю, когда модуль купят первый покупатели, то они не откажутся от того, чтобы ссылку на их магазин разместили в описании модуля, реальные данные всегда лучше тестовых. 

[apitomec]

Подскажите пожалуйста, в данном поиске, в настройке можно указать, что бы текст написанный русскими буквами искался именно как английский и как-то это было автоматизированно, а не простым подбором слов?..

 

Например по запросу самсунг выдавался поиск по слову samsung, а не "поиск не дал результатов"

Или "Мониторы Самсунг" выдавались "Мониторы samsung"

 

Как я понимаю реализация данного метода возможна через перевод русских букв в транслит и последующее исправление ошибок путем замены слов.

 

Если это не реализовано, планирует ли автор добавить этот весьма полезный функционал? :-)

[sv2109]

Подскажите пожалуйста, в данном поиске, в настройке можно указать, что бы текст написанный русскими буквами искался именно как английский и как-то это было автоматизированно, а не простым подбором слов?..

 

Например по запросу самсунг выдавался поиск по слову samsung, а не "поиск не дал результатов"

Или "Мониторы Самсунг" выдавались "Мониторы samsung"

 

Как я понимаю реализация данного метода возможна через перевод русских букв в транслит и последующее исправление ошибок путем замены слов.

 

Если это не реализовано, планирует ли автор добавить этот весьма полезный функционал? :-)

это уже реализовано, можно не только заменять на транслит, но и в отдельной вкладке "замена слов" настраивать замену слов, с "самсунг" на "samsung", автоматически это наврядли можно сделать по той причине, что написать слово пользователь может как угодно а перевод дасть только один вариант и все. 

[apitomec]

это уже реализовано, можно не только заменять на транслит, но и в отдельной вкладке "замена слов" настраивать замену слов, с "самсунг" на "samsung", автоматически это наврядли можно сделать по той причине, что написать слово пользователь может как угодно а перевод дасть только один вариант и все. 

Большое спасибо за ответ! Буду думать над приобретением... 

[pylsar]

Добрый день.

 

А можно ли осуществить такой функционал, чтобы, если покупатель забыл переключить раскладку и начал писать, к примеру, английскими буквами - русские слова, поиск понимал этот ввод правильно - по русски, и наоборот?

[sv2109]

Добрый день.

 

А можно ли осуществить такой функционал, чтобы, если покупатель забыл переключить раскладку и начал писать, к примеру, английскими буквами - русские слова, поиск понимал этот ввод правильно - по русски, и наоборот?

это уже реализовано в модуле

[zloymudvin]

А будет ли работать на Opencart 2.3.0.2, если нет, то планируется ли?

[sv2109]

А будет ли работать на Opencart 2.3.0.2, если нет, то планируется ли?

планируется, но на данный момент она еще не готова. 

[grishka0007]

С жадностью прочитал описание, и уже было побежал за денюжками, Как вдруг в конце описания увидел совместимость.. Только 2.хх

Горе моё не передать словами.

Пичаль, пойду искать что-нибудь более-менее похожее под 15512

И все же автор молодец!

[sv2109]

С жадностью прочитал описание, и уже было побежал за денюжками, Как вдруг в конце описания увидел совместимость.. Только 2.хх

Горе моё не передать словами.

Пичаль, пойду искать что-нибудь более-менее похожее под 15512

И все же автор молодец!

похожее для 1.5:

https://opencartforum.com/files/file/3267-%D0%BF%D0%BE%D0%B8%D1%81%D0%BA-%D1%81-%D0%BC%D0%BE%D1%80%D1%84%D0%BE%D0%BB%D0%BE%D0%B3%D0%B8%D0%B5%D0%B9-%D0%B8-%D1%80%D0%B5%D0%BB%D0%B5%D0%B2%D0%B0%D0%BD%D1%82%D0%BD%D0%BE%D1%81%D1%82%D1%8C%D1%8E-pro/