Elasticsearch Terms Aggregation - для динамических ключей объекта - PullRequest
Новая
       33

Elasticsearch Terms Aggregation - для динамических ключей объекта

1 голос
/ 07 октября 2019

Структура документов 

Doc_1 {
"title":"hello",
"myObject":{
 "key1":"value1",
 "key2":"value2"
 }
}
Doc_2 {
"title":"hello world",
"myObject":{
 "key2":"value4",
 "key3":"value3"
 }
}
Doc_3 {
"title":"hello world2",
"myObject":{
 "key1":"value1",
 "key3":"value3"
 }
}

Информация : myObject содержит динамическую пару ключ-значение.

Цель :Моя цель - написать запрос агрегации, чтобы получить количество уникальных динамических пар ключ-значение.

Попытка и объяснение : Я легко могу получить результаты для известных ключей таким способом. 

       {
        "size":0,
        "query":{
               "match":{"title":"hello"}
                },
        "aggs":{
               "key1Agg":{
                    "terms":{"field":"myObject.key1.keyword"}
                },
               "key2Agg":{
                    "terms":{"field":"myObject.key2.keyword"}
                },
               "key3Agg":{
                    "terms":{"field":"myObject.key3.keyword"}
               }
              }
          }

Это типичный результат вышеупомянутой агрегированной вложенной записи ключей. 

{
...
"aggregations": {
    "key1Agg": {
        ...        
        "buckets": [
            {
                "key": "value1",
                "doc_count": 2
            }

        ]
    },
    "key2Agg": {
        ...
        "buckets": [
            {
                "key": "value2",
                "doc_count": 1
            },
            {
                "key": "value4",
                "doc_count": 1
            }

        ]
    },
    "key3Agg": {
       ...
        "buckets": [
            {
                "key": "value3",
                "doc_count": 2
            }

        ]
    }
}

} ​​

Теперь все, что мне нужно, это вернуть счетчик всех динамических пар ключ-значение, т. Е. Не вводить имена жестких ключей в запросе агрегации.

Я использую ES 6.3, заранее спасибо !!

1 Ответ

2 голосов
/ 07 октября 2019

Из предоставленной вами информации видно, что myObject, по-видимому, имеет тип данных объекта , а не вложенный тип данных .

Ну, нет простого способа обойтись без изменения имеющихся у вас данных, что вы можете сделать, и, возможно, самое простое решение - это включить дополнительное поле, скажем, назовем его myObject_list, чтотипа keyword, где документы будут выглядеть следующим образом:

Образцы документов: 

POST test_index/_doc/1
{
 "title":"hello",
  "myObject":{
   "key1":"value1",
   "key2":"value2"
  },
  "myObject_list": ["key1_value1", "key2_value2"]     <--- Note this
}

POST test_index/_doc/2
{
 "title":"hello world",
  "myObject":{
   "key2":"value4",
   "key3":"value3"
  },
  "myObject_list": ["key2_value4", "key3_value3"]     <--- Note this
}

POST test_index/_doc/3
{
 "title":"hello world2",
  "myObject":{
   "key1":"value1",
   "key3":"value3"
  },
  "myObject_list": ["key1_value1", "key3_value3"]     <--- Note this
}

Вы можете запросить, как показано ниже:

Запрос запроса:

POST test_index/_search
{
  "size": 0,
  "aggs": {
    "key_value_aggregation": {
      "terms": {
        "field": "myObject_list",              <--- Make sure this is of keyword type
        "size": 10
      }
    }
  }
}

Обратите внимание, что здесь я использовал Термины агрегации .

Ответ: 

{
  "took" : 406,
  "timed_out" : false,
  "_shards" : {
    "total" : 1,
    "successful" : 1,
    "skipped" : 0,
    "failed" : 0
  },
  "hits" : {
    "total" : {
      "value" : 3,
      "relation" : "eq"
    },
    "max_score" : null,
    "hits" : [ ]
  },
  "aggregations" : {
    "key_value_aggregation" : {
      "doc_count_error_upper_bound" : 0,
      "sum_other_doc_count" : 0,
      "buckets" : [
        {
          "key" : "key1_value1",
          "doc_count" : 2
        },
        {
          "key" : "key3_value3",
          "doc_count" : 2
        },
        {
          "key" : "key2_value2",
          "doc_count" : 1
        },
        {
          "key" : "key2_value4",
          "doc_count" : 1
        }
      ]
    }
  }
}

Надеюсь, это поможет!

...