Тайм-аут ошибки при сборе данных в упругом поиске - PullRequest
0 голосов
/ 31 августа 2018

версия: 6.3.0

Мы установили пробную версию ELK, и она работала нормально, но недавно мы наблюдали ошибку ниже в узлах ELK, и на панели управления kibana не отображаются данные.

В elk-master-node мы получаем ошибки ниже вместе с сообщением об истечении licesne за последние пару дней

[2018-08-31T18: 51: 59,859] [ПРЕДУПРЕЖДЕНИЕ] [o.e.l.LicenseService] [elk-master-node] Лицензия [истекает] в [Пятница, 31 августа 2018 года]. Если у вас есть новая лицензия, пожалуйста, обновите ее. В противном случае, пожалуйста, достигните к вашему контакту поддержки. Коммерческие плагины работают с пониженным функциональность по истечении срока действия лицензии: работоспособность кластера безопасности, кластер статистика и индексы статистика операции заблокированы Все операции с данными (читай и пиши) продолжай работать отключено, DELETE watch API продолжает работать Наблюдать за выполнением и записью к истории Действия часов не выполняют мониторинг Агент прекратит сбор метрик кластера и индексов. прекратить автоматическую очистку индексов старше [xpack.monitoring.history.duration] graph API для исследования графиков отключено мл. Машинное обучение API отключено logstash Logstash будет продолжать опрашивать централизованно управляемые трубопроводы обесценивание API отключены. Обновление API отключено. SQL Server поддерживает отключенный накопительный ролик Создание и запуск накопительных заданий больше не будет позволил. Остановка / удаление существующих заданий, RollupCaps API и RollupSearch продолжает функционировать.

[2018-08-31T18: 52: 26761] [ERROR] [o.e.x.m.c.c.ClusterStatsCollector] Тайм-аут сборщика [elk-master-node] [cluster_stats] при сборе данные [2018-08-31T18: 53: 23,022] [ОШИБКА] [o.e.x.m.c.i.IndexStatsCollector] [elk-master-node] сборщик [index-stats] истек тайм-аут при сборе данные

В узлах данных появляется следующая ошибка:

[2018-08-31T19: 00: 37,918] [WARN] [o.e.m.j.JvmGcMonitorService] [elk-data-node01] [gc] [8066] накладные расходы, потраченные [1.8s] на сбор последний [1.9с] [2018-08-31T19: 00: 39410] [ERROR] [o.e.x.m.c.n.NodeStatsCollector] [elk-data-node01] сборщик [node_stats] истек тайм-аут при сборе данные [2018-08-31T19: 00: 39,512] [WARN] [o.e.m.j.JvmGcMonitorService] [elk-data-node01] [gc] [8067] накладные расходы, потраченные [1.4s] на сбор в последние [1,5 с]

Состояние кластера с главного узла:

{
"_nodes" : {
"total" : 3,
"successful" : 3,
"failed" : 0
},
"cluster_name" : "elk-logging-prod",
"timestamp" : 1535741657925,
"status" : "green",
"indices" : {
"count" : 172,
"shards" : {
"total" : 1432,
"primaries" : 716,
"replication" : 1.0,
"index" : {
"shards" : {
"min" : 2,
"max" : 10,
"avg" : 8.325581395348838
},
"primaries" : {
"min" : 1,
"max" : 5,
"avg" : 4.162790697674419
},
"replication" : {
"min" : 1.0,
"max" : 1.0,
"avg" : 1.0
}
}
},
"docs" : {
"count" : 146584946,
"deleted" : 96934
},
"store" : {
"size" : "105.6gb",
"size_in_bytes" : 113435405019
},
"fielddata" : {
"memory_size" : "30.4kb",
"memory_size_in_bytes" : 31216,
"evictions" : 0
},
"query_cache" : {
"memory_size" : "163.2kb",
"memory_size_in_bytes" : 167168,
"total_count" : 66284,
"hit_count" : 5951,
"miss_count" : 60333,
"cache_size" : 59,
"cache_count" : 381,
"evictions" : 322
},
"completion" : {
"size" : "0b",
"size_in_bytes" : 0
},
"segments" : {
"count" : 12843,
"memory" : "280.9mb",
"memory_in_bytes" : 294616635,
"terms_memory" : "217.8mb",
"terms_memory_in_bytes" : 228436330,
"stored_fields_memory" : "39.3mb",
"stored_fields_memory_in_bytes" : 41305856,
"term_vectors_memory" : "0b",
"term_vectors_memory_in_bytes" : 0,
"norms_memory" : "8.3mb",
"norms_memory_in_bytes" : 8741824,
"points_memory" : "6.7mb",
"points_memory_in_bytes" : 7077349,
"doc_values_memory" : "8.6mb",
"doc_values_memory_in_bytes" : 9055276,
"index_writer_memory" : "24.3mb",
"index_writer_memory_in_bytes" : 25550466,
"version_map_memory" : "696.2kb",
"version_map_memory_in_bytes" : 712946,
"fixed_bit_set" : "1.5mb",
"fixed_bit_set_memory_in_bytes" : 1610120,
"max_unsafe_auto_id_timestamp" : 1535729108045,
"file_sizes" : { }
}
},
"nodes" : {
"count" : {
"total" : 3,
"data" : 2,
"coordinating_only" : 0,
"master" : 1,
"ingest" : 3
},
"versions" : [
"6.3.0"
],
"os" : {
"available_processors" : 24,
"allocated_processors" : 24,
"names" : [
{
"name" : "Linux",
"count" : 3
}
],
"mem" : {
"total" : "70.4gb",
"total_in_bytes" : 75689287680,
"free" : "18.7gb",
"free_in_bytes" : 20169138176,
"used" : "51.7gb",
"used_in_bytes" : 55520149504,
"free_percent" : 27,
"used_percent" : 73
}
},
"process" : {
"cpu" : {
"percent" : 33
},
"open_file_descriptors" : {
"min" : 384,
"max" : 5880,
"avg" : 4012
}
},
"jvm" : {
"max_uptime" : "3.7h",
"max_uptime_in_millis" : 13350435,
"versions" : [
{
"version" : "1.8.0_161",
"vm_name" : "OpenJDK 64-Bit Server VM",
"vm_version" : "25.161-b14",
"vm_vendor" : "Oracle Corporation",
"count" : 3
}
],
"mem" : {
"heap_used" : "2.5gb",
"heap_used_in_bytes" : 2694126712,
"heap_max" : "3.8gb",
"heap_max_in_bytes" : 4153671680
},
"threads" : 493
},
"fs" : {
"total" : "1.1tb",
"total_in_bytes" : 1304314785792,
"free" : "1tb",
"free_in_bytes" : 1183926980608,
"available" : "1tb",
"available_in_bytes" : 1183926980608
},
"plugins" : [ ],
"network_types" : {
"transport_types" : {
"security4" : 3
},
"http_types" : {
"security4" : 3
}
}
}
}
[root@wielknews01 nodes]# curl -u elastic:Elastic@123 'localhost:9200'
{
"name" : "elk-master-node",
"cluster_name" : "elk-logging-prod",
"cluster_uuid" : "arew575AS2mNXNz-uWcMvQ",
"version" : {
"number" : "6.3.0",
"build_flavor" : "default",
"build_type" : "rpm",
"build_hash" : "424e937",
"build_date" : "2018-06-11T23:38:03.357887Z",
"build_snapshot" : false,
"lucene_version" : "7.3.1",
"minimum_wire_compatibility_version" : "5.6.0",
"minimum_index_compatibility_version" : "5.0.0"
},
"tagline" : "You Know, for Search"
}

Спасибо Сина

Добро пожаловать на сайт PullRequest, где вы можете задавать вопросы и получать ответы от других членов сообщества.
...