Sql серверная функция для отображения частоты слов в столбце - PullRequest
Новая
       21

Sql серверная функция для отображения частоты слов в столбце

4 голосов
/ 19 мая 2009

У меня есть таблица, в которой перечислены произвольные текстовые данные опроса, в котором участникам было разрешено вводить свои ответы (относительно цветов, которые они хотели бы иметь на своей свадьбе)

Я хотел бы написать функцию sql, которая собирает всю информацию из этого столбца, и order подсчитывает частоту каждого слова, упорядочивая результат, полученный по этому количеству. 

Response
--------
Red and White
green
White and blue
Blue
Dark blue

Я бы хотел, чтобы приведенная выше таблица была упорядочена следующим образом 

Response  Frequency
--------  ---------
Blue      3
White     2
And       2
Red       1
Green     1

Я могу убрать все мусорные слова, такие как "и", после запуска функции. Кто-нибудь знает какие-нибудь хорошие функции, которые производят такое поведение?

Ответы [ 3 ]

4 голосов
/ 19 мая 2009

Хорошо, это работает удовольствие. Во-первых, функция для разделения значений ... 

Alter Function dbo.SeparateValues    

(    
 @data VARCHAR(MAX),    
 @delimiter VARCHAR(10)     
)     
RETURNS     
@tbldata TABLE(col VARCHAR(MAX))    
As    
--Declare @data VARCHAR(MAX) ,@delimiter VARCHAR(10)     
--Declare @tbldata TABLE(col VARCHAR(10))    
--Set @data = 'hello,how,are,you?,234234'    
--Set @delimiter = ','    
--DECLARE @tbl TABLE(col VARCHAR(10))    
Begin    
DECLARE @pos INT    
DECLARE @prevpos INT    
SET @pos = 1     
SET @prevpos = 0    

WHILE @pos > 0     
BEGIN    
SET @pos = CHARINDEX(@delimiter, @data, @prevpos+1)    
if @pos > 0     
INSERT INTO @tbldata(col) VALUES(LTRIM(RTRIM(SUBSTRING(@data, @prevpos+1, @pos-@prevpos-1))))    
else    
INSERT INTO @tbldata(col) VALUES(LTRIM(RTRIM(SUBSTRING(@data, @prevpos+1, len(@data)-@prevpos))))    
SET @prevpos = @pos     
End    

RETURN       
END

тогда я просто применяю это к своему столу ... 

Select Count(*), sep.Col FROM (
        Select * FROM (
            Select value = Upper(RTrim(LTrim(Replace(Replace(Replace(Replace(Replace(Replace(Replace(Replace(Replace(Replace(Replace(Replace(Replace(Replace(response, ',', ' '), '.', ' '), '!', ' '), '+', ' '), ':', ' '), '-', ' '), ';', ' '), '(', ' '), ')', ' '), '/', ' '), '&', ''), '?', ' '), '  ', ' '), '  ', ' ')))) FROM Responses
        ) easyValues
        Where value <> '' 
    ) actualValues 
    Cross Apply dbo.SeparateValues(value, ' ') sep
    Group By sep.Col
    Order By Count(*) Desc

Хорошо, поэтому я пошел OTT со своими вложенными таблицами, но я убрал все символы дерьма, разделил значения и сохранил итоговый итог наиболее часто используемых слов.

1 голос
/ 22 февраля 2014 
DECLARE @phrases TABLE (id int, phrase varchar(max))
INSERT @phrases values
(1,'Red and White'  ),
(2,'green'          ),
(3,'White and blue' ),
(4,'Blue'           ),
(5,'Dark blue'      );

SELECT word, COUNT(*) c
FROM @phrases
CROSS APPLY (SELECT CAST('<a>'+REPLACE(phrase,' ','</a><a>')+'</a>' AS xml) xml1 ) t1
CROSS APPLY (SELECT n.value('.','varchar(max)') AS word FROM xml1.nodes('a') x(n) ) t2
GROUP BY word

word         freq
----------- -----------
and         2
blue        3
Dark        1
green       1
Red         1
White       2
1 голос
/ 19 мая 2009

Ваша главная проблема в том, что вам не хватает функции разделения в SQL Server.

Вот пример, который выглядит довольно хорошо ..

http://www.sqlteam.com/forums/topic.asp?TOPIC_ID=50648

Используя это, вы записываете сохраненный процесс в соответствии с ... 

CREATE TABLE #Temp (Response nvarchar(50), Frequency int) 

DECLARE @response nvarchar(100)
DECLARE db_cursor CURSOR FOR 
SELECT response FROM YourTable

OPEN db_cursor  
FETCH NEXT FROM db_cursor INTO @response 

WHILE @@FETCH_STATUS = 0  
BEGIN  
       /* Pseudo Code */ 
       --Split @Response 
       --Iterate through each word in returned list
       --IF(EXISTS in #TEMP)
       --    UPDATE THAT ROW & INCREMENT THE FREQUENCY
       --ELSE
       --    NEW WORD, INSERT TO #Temp WITH A FREQUENCY OF 1

       FETCH NEXT FROM db_cursor INTO @response 
END   

SELECT * FROM #Temp

Theres, вероятно, менее безрассудный способ сделать это без курсоров, но если это просто то, что вы нужно запустить один раз, и вы за столом или ответы не феноменально велики, тогда это должно сработать

...