Как улучшить производительность индекса в Elasticsearch со слишком большим количеством полей?

Question

У меня есть индекс с тысячами столбцов.Я пытаюсь проиндексировать 10 000 000 документов в кластере.Это стоит около 3 часов.

Я пытался некоторые методы для поворота индексной скорости, и это все еще медленно.

Как я могу повернуть скорость для такого индекса стысячи полей и более 100 000 000 документов?

Answer 1

Какая аппаратная конфигурация у вашего кластера?Сколько памяти у кучи Java?Сколько ядер?Какова скорость вашего диска?

Кроме того, где ваша инфраструктура?В помещении или в облачном сервисе?

Вам действительно нужны все поля в документе?Как соотносится ваш индекс?

Если вы уже попробовали методы для повышения производительности, возможно, вы не можете ничего сделать, миллионы документов, тысячи полей для каждого из которых действительно будут занимать время для индексации.