Mysql полнотекстовое релевантность поиска по нескольким таблицам

Мне было поручено создать функцию поиска по всему сайту. Поиск требует просмотра статей, событий и содержимого страницы.

Я использовал MATCH()/AGAINST() в MySQL раньше и знаю, как получить релевантность результата, но насколько я знаю, релевантность уникальна для поиска (содержимое, количество строк и т.д.), релевантность результатов из таблицы статей не будет соответствовать релевантности результатов из таблицы событий.

Нужно ли унифицировать релевантность, чтобы результаты из всех трех таблиц имели сопоставимую релевантность?

Ответ 1

Да, вы можете очень хорошо их унифицировать с помощью поисковой системы, такой как Apache Lucene и Solr.

http://lucene.apache.org/solr/

Если вам нужно сделать это только в MySQL, вы можете сделать это с помощью UNION. Вероятно, вы захотите подавить любые нулевые результаты.

Вам нужно будет решить, как вы хотите повлиять на релевантность в зависимости от того, какая таблица соответствует.

Например, предположим, что вы хотите, чтобы статьи были наиболее важными, события были средними, а страницы были наименее важными. Вы можете использовать множители следующим образом:

set @articles_multiplier=3;
set @events_multiplier=2;
set @pages_multiplier=1;

Вот рабочий пример, который вы можете попробовать, который демонстрирует некоторые из этих методов:

Создайте образцы данных:

create database d;
use d;

create table articles (id int primary key, content text) ENGINE = MYISAM;
create table events (id int primary key, content text) ENGINE = MYISAM;
create table pages (id int primary key, content text) ENGINE = MYISAM;

insert into articles values 
(1, "Lorem ipsum dolor sit amet"),
(2, "consectetur adipisicing elit"),
(3, "sed do eiusmod tempor incididunt");

insert into events values 
(1, "Ut enim ad minim veniam"),
(2, "quis nostrud exercitation ullamco"),
(3, "laboris nisi ut aliquip");

insert into pages values 
(1, "Duis aute irure dolor in reprehenderit"),
(2, "in voluptate velit esse cillum"),
(3, "dolore eu fugiat nulla pariatur.");

Сделайте его доступным для поиска:

ALTER TABLE articles ADD FULLTEXT(content);
ALTER TABLE events ADD FULLTEXT(content);
ALTER TABLE pages ADD FULLTEXT(content);

Используйте UNION для поиска всех этих таблиц:

set @target='dolor';

SELECT * from (
  SELECT 
    'articles' as 'table_name', id, 
    @articles_multiplier * (MATCH(content) AGAINST (@target)) as relevance
    from articles
  UNION
  SELECT 
    'events' as 'table_name', 
    id,
    @events_multiplier * (MATCH(content) AGAINST (@target)) as relevance
    from events
  UNION
  SELECT 
    'pages' as 'table_name', 
    id, 
    @pages_multiplier * (MATCH(content) AGAINST (@target)) as relevance
    from pages
)
as sitewide WHERE relevance > 0;

Результат:

+------------+----+------------------+
| table_name | id | relevance        |
+------------+----+------------------+
| articles   |  1 | 1.98799377679825 |
| pages      |  3 | 0.65545331108093 |
+------------+----+------------------+

Ответ 2

(Извините, я хочу оставить это в качестве комментария к вышеуказанному ответу, но у меня нет достаточной репутации для комментариев)

Помните, что UNION в подзапросах очень плохо оптимизирован. Часто случается, когда вы хотите разбивать свои страницы на "LIMIT @page * 10, 10" в родительском запросе, тогда MySQL должен получить все результаты из подзапросов, чтобы оценить родительский запрос.