Многоязычные запросы в ElasticSearch - PullRequest
Новая
       20

Многоязычные запросы в ElasticSearch

2 голосов
/ 13 сентября 2011

Допустим, у нас есть следующее отображение в ElasticSearch. 

{
  "content": {
    "properties": {
      "id": {
        "type": "string",
        "index": "not_analyzed",
        "store": "yes"
      },
      "locale_container": {
        "type": "object",
        "properties": {
          "english": {
            "type": "object",
            "properties": {
              "title": {
                "type": "string",
                "index_analyzer": "english",
                "search_analyzer": "english",
                "index": "analyzed",
                "term_vector": "with_positions_offsets",
                "store": "yes"
              },
              "text": {
                "type": "string",
                "index_analyzer": "english",
                "search_analyzer": "english",
                "index": "analyzed",
                "term_vector": "with_positions_offsets",
                "store": "yes"
              }
            }
          },
          "german": {
            "type": "object",
            "properties": {
              "title": {
                "type": "string",
                "index_analyzer": "german",
                "search_analyzer": "german",
                "index": "analyzed",
                "term_vector": "with_positions_offsets",
                "store": "yes"
              },
              "text": {
                "type": "string",
                "index_analyzer": "german",
                "search_analyzer": "german",
                "index": "analyzed",
                "term_vector": "with_positions_offsets",
                "store": "yes"
              }
            }
          },
          "russian": {
            "type": "object",
            "properties": {
              "title": {
                "type": "string",
                "index_analyzer": "russian",
                "search_analyzer": "russian",
                "index": "analyzed",
                "term_vector": "with_positions_offsets",
                "store": "yes"
              },
              "text": {
                "type": "string",
                "index_analyzer": "russian",
                "search_analyzer": "russian",
                "index": "analyzed",
                "term_vector": "with_positions_offsets",
                "store": "yes"
              }
            }
          },
          "italian": {
            "type": "object",
            "properties": {
              "title": {
                "type": "string",
                "index_analyzer": "italian",
                "search_analyzer": "italian",
                "index": "analyzed",
                "term_vector": "with_positions_offsets",
                "store": "yes"
              },
              "text": {
                "type": "string",
                "index_analyzer": "italian",
                "search_analyzer": "italian",
                "index": "analyzed",
                "term_vector": "with_positions_offsets",
                "store": "yes"
              }
            }
          }
        }
      }
    }
  }
}

Когда конкретный пользователь запрашивает индекс, мы можем взять его культуру из ее настроек, т.е. мы знаем, какой анализатор использовать. Как мы можем сформулировать запрос, который будет искать только поля «заголовок» и «текст» на ее собственном языке (скажем, немецком) и использовать немецкий анализатор для токенизации поискового запроса?

1 Ответ

1 голос
/ 14 сентября 2011

Я упростил пример использования анализатора standard для «английского» и simple (без остановки) для «французского». Для такого документа: 

{
  id: "abc",
  locale_container: {
    english: {
      title: "abc to ABC",
      text: ""
    },
    french: {
      title: "def to DEF",
      text: ""
    }
  }
}

Следующие запросы помогают:

  • locale_container.english.title:abc -> возвращает документ
  • locale_container.french.title:def -> также возвращает документ
  • locale_container.english.title:to -> ничего не возвращает, так как 'to' - стоп-слово
  • locale_container.french.title:to -> возвращает документ
...