Сервис AWS Elasticsearch с высокой загрузкой ЦП и JVMMemoryPressure - PullRequest
0 голосов
/ 22 января 2019

У меня есть 23-узловый кластер Elasticsearch.Я обрабатываю большое количество данных с помощью большого количества update_by_query запросов POST.До этого, когда обновления не выполнялись, график облачных часов ЦП AWS показывал постоянную загрузку ЦП 10-20%.После запуска этих обновлений в течение пары дней, оно составляет 70-80% и уже несколько дней.Это хорошо после того, как запросы POST были остановлены.График JVMMemoryPressure также резко вырос и теперь составляет 75-95%.

Я не уверен, что это просто сборка мусора в течение нескольких дней, но это немного касается.

Вот мой размер магазина с конечной точки _stats ES.Пожалуйста, дайте мне знать, какие другие данные я могу предоставить из моего экземпляра ES.

"store": {
  "size": "1.7tb",
  "size_in_bytes": 1954605785516
},

РЕДАКТИРОВАТЬ:

Тип экземпляра i3.large.elasticsearch

...