как упругое исследование решает, сколько осколков можно восстановить параллельно

Question

Я сделал снимок индекса с 24 осколками.Индекс имеет размер 700 г.При восстановлении восстанавливает 4 осколка параллельно.

Мой кластер - это новый кластер с одним компьютером без узлов реплики.Машина AWS c3.8xlarge с 32 vCPU и памятью 60G.Я также следовал Как ускорить восстановление Elasticsearch? .

При восстановлении использование памяти полностью.Как эластичный поиск определяет, сколько осколков можно восстановить параллельно?Мне было интересно, как я могу настроить аппаратную конфигурацию моих машин, чтобы сделать восстановление быстрее.Если в моем кластере больше машин, можно ли линейно улучшить скорость восстановления?

Answer 1

В сущности, для ES 6.x есть две настройки, которые определяют, насколько быстро восстанавливается первичный осколок:

• cluster.routing.allocation.node_initial_primaries_recoveries Устанавливает количество первичных осколков, которые восстанавливаются параллельно на одномузел.Значения по умолчанию - 4. Таким образом, для кластера с N компьютерами общее число параллельно восстанавливаемых сегментов равно N *node_initial_primaries_recoveries (см. https://www.elastic.co/guide/en/elasticsearch/reference/current/shards-allocation.html#_shard_allocation_settings)
• indices.recovery.max_bytes_per_sec Решает, сколько загружено хранилища.на восстановление по одному индексу. По умолчанию 40 МБ. (См. https://www.elastic.co/guide/en/elasticsearch/reference/current/recovery.html)