Точное совпадение и нечеткость ... Что хорошего? - PullRequest
Новая
       42

Точное совпадение и нечеткость ... Что хорошего?

0 голосов
/ 29 ноября 2018

Я несколько часов пытался найти лучший способ создания и автозаполнения, которые поддерживают многоязычный поиск городов.(ES / EN), нечеткость и получение приоритета для точного соответствия (покажите это в верхней части результатов), но я не могу найти хороший способ выполнить эту задачу.

Мое текущее решение работает очень хорошо во многих случаях, нокогда я ищу для цыган, первый вариант - «Яссо-Восточная Румыния, Румыния», а цыганская Италия - это тридцать функция (точное совпадение)

Результат Json: 

[{"_index":"destinations","_type":"doc","_id":"_X80XWcBn2nzTu98N7_F","_score":75.50012,"_source":{"destination_name_en":"Iasi-East Romania","destination_name_es":"Iasi-East Romania","destination_name_pt":"Iasi-East Romania","country_code":"RO","country_name":"ROMANIA","destination_id":7953,"popularity":"0"}},{"_index":"destinations","_type":"doc","_id":"7380XWcBn2nzTu98OMZl","_score":73.116455,"_source":{"destination_name_en":"La Romana","destination_name_es":"La Romana","destination_name_pt":"La Romana","country_code":"DO","country_name":"DOMINICAN REPUBLIC","destination_id":2816,"popularity":"0"}},{"_index":"destinations","_type":"doc","_id":"1X80XWcBn2nzTu98OMZl","_score":71.4391,"_source":{"_index":"destinations","_type":"doc","_id":"8H80XWcBn2nzTu98OMZl","_score":52.018818,"_source":{"destination_name_en":"Rome","destination_name_es":"Roma","destination_name_pt":"Roma","country_code":"IT","country_name":"ITALY","destination_id":6338,"popularity":"0"}}]

Rightтеперь это мое лучшее решение ..

Отображение: 

'settings' => [ 
                'analysis' => [     
                    'filter' => [
                        'autocomplete_filter' => [
                            "type"=> "edge_ngram",
                            "min_gram"=> 1,
                            "max_gram"=> 20,

                        ]
                    ],
                    'analyzer' => [
                        'autocomplete' => [
                            "type" => "custom",
                            'tokenizer' => "standard",
                            'filter' => ['lowercase', 'asciifolding', 'autocomplete_filter'],
                        ]
                    ],

                ],   
            ],
            'mappings' =>[
                'doc' => [
                    "properties"=> [
                        "destination_name_en"=> [
                           "type"=> "text",
                           "analyzer"=> "autocomplete",
                           "search_analyzer"=> "standard",

                        ],
                        "destination_name_es"=> [
                           "type"=> "text",
                           "analyzer"=> "autocomplete",
                           "search_analyzer"=> "standard",
                        ],
                        "destination_name_pt"=> [
                           "type"=> "text",
                           "analyzer"=> "autocomplete",
                           "search_analyzer"=> "standard",
                        ],
                        "popularity"=> [
                           "type"=> "integer",
                        ]
                    ]
                ]
            ]

Поиск: 

'query' => [
                "bool" => [
                    "should" => [   
                         [
                            "multi_match"=>[
                                "query"=>$text,
                                "fields"=>[
                                   "destination_name_*"
                                ],
                                "type"=>"most_fields",
                                "boost" => 2
                            ]
                        ],
                        [
                            "multi_match"=>[
                                "query"=>$text,
                                "fields"=>[
                                   "destination_name_*"
                                ],
                                "fuzziness" => "1",
                                "prefix_length"=> 2                                   
                            ]
                        ]
                    ]
                ]
            ]

Кроме того, я хочу добавить повышение к определенному месту назначения, используя ее значение популярности.

Я надеюсь, что кто-то может привести меня с примером или указанием того, куда идти.

Я был бы очень признателен

Ответы [ 2 ]

0 голосов
/ 30 ноября 2018

это работает как шарм!Теперь я могу получить Рим в первых результатах, а также принимает ошибки в конце слова.Роми возвращают тоже Рим в первом результате.

Теперь я пытаюсь повысить результаты с помощью поля популярности (у меня есть два Рима, Рим-Италия и Рим-Австралия), и я хочу повысить популярность некоторых городовв мире.

Я использую оценку функции, но это дает мне очень странные результаты.

Это мой текущий код: 

'query' => [
                'function_score' => [
                    'field_value_factor' => [
                        'field' => 'popularity',
                    ],
                    "score_mode" => "multiply",
                    'query' => [
                        "bool" => [
                            "should" => [   
                                 [
                                    "multi_match"=>[
                                        "query"=>$text,
                                        "fields"=>[
                                           "destination_name_*"
                                        ],
                                        "type"=>"most_fields",
                                        "boost" => 2
                                    ]
                                ],
                                [
                                    "multi_match"=>[
                                        "query"=>$text,
                                        "fields"=>[
                                           "destination_name_*"
                                        ],
                                        "fuzziness" => "1",
                                        "prefix_length"=> 2                                   
                                    ]
                                ],
                                [
                                    "multi_match"=>[
                                        "query"=>$text,
                                        "fields"=>[
                                           "destination_name_*.exact"
                                        ],
                                        "boost" => 2                                   
                                    ]
                                ]
                            ]
                        ]
                    ]
                ],
            ],

Любые предложения?

PD: Большое спасибо за помощь.отныне я даю вам лучший ответ, потому что вы уже решили основную проблему

0 голосов
/ 29 ноября 2018

Проблема в том, что при поиске roma Яссы-Восточная Румыния получает первый результат, поскольку он содержит рома на всех языках.Но roma соответствует только для Rome в ES / PT / IT, а не для EN.

Таким образом, если вы хотите повысить точное соответствие, вам нужно проиндексировать название города в другом поле без автозаполнения (для всех языков) и добавить новое предложение в поле для этих полей.

пример для сопоставления: 

 "properties"=> [
        "destination_name_en"=> [
                "type"=> "text",
                "analyzer"=> "autocomplete",
                "search_analyzer"=> "standard",
                "fields": => [
                    "exact" => [
                        "type"=> "text",
                        "analyzer"=> "standard", // you could use a more fancy analyzer here
                    ]

                ]
        ],
....

и в запросе: 

'query' => [
                "bool" => [
                    "should" => [   
                         [
                            "multi_match"=>[
                                "query"=>$text,
                                "fields"=>[
                                   "destination_name_*"
                                ],
                                "type"=>"most_fields",
                                "boost" => 2
                            ]
                        ],
                        [
                            "multi_match"=>[
                                "query"=>$text,
                                "fields"=>[
                                   "destination_name_*"
                                ],
                                "fuzziness" => "1",
                                "prefix_length"=> 2                                   
                            ]
                        ],
                        [
                            "multi_match"=>[
                                "query"=>$text,
                                "type"=>"most_fields" 
                                "fields"=>[
                                   "destination_name_*.exact"
                                ],
                                "boost" => 2 
                            ]
                        ]
                    ]
                ]
            ]

Не могли бы вы попробовать что-то подобное и держать нас в курсе?

...