Получить частоты слов из полнотекстового поиска SQL Server

Question

Полнотекстовый поиск SQL Server вычисляет ранг на основе частоты слова в документе и в наборе всех документов (TFIDF). Можно ли получить доступ к этим значениям напрямую?

Я хотел бы найти топ-n наиболее часто встречающихся слов в моей таблице. Можно ли получить этот список из индекса полнотекстового поиска?

Я использую SQL Server 2005.

Answer 1

Я не знаю простого способа сделать это на SQL Server 2005, но в 2008 году две команды Transact-SQL делают именно то, что вам нужно.

• sys.dm_fts_index_keywords_by_document
  • http://technet.microsoft.com/en-us/library/cc280607.aspx
• sys.dm_fts_index_keywords
  • http://technet.microsoft.com/en-us/library/cc280900.aspx

Answer 2

Я не работал с полнотекстовым поиском, но раньше я достиг аналогичного результата, используя процедуру на основе таблицы чисел для разделения входного текста на отдельные слова (множество примеров того, как это сделать, доступно в других местах) и запуск агрегатных функций по отношению к результатам. На самом деле быстрее, чем вы ожидаете.