Переиндексировать данные из Amazon S3 в Elasticsearch - PullRequest
0 голосов
/ 22 мая 2018

У нас есть несколько ГБ данных в виде json-файлов в Amazon S3, мы также индексируем данные в Elasticsearch для поиска.Нам нужна функциональность для переиндексации данных в Elasticsearch по следующим причинам.

1] Отключение ES
2] Новые поля добавлены / удалены из документа.

Мы пытались читать данные из s3 внаш код и затем отправка его в ES, это было довольно медленно и не может быть использовано.

Каков наилучший способ переиндексировать данные из Amazon S3 в Elasticsearch.

С уважением,

Добро пожаловать на сайт PullRequest, где вы можете задавать вопросы и получать ответы от других членов сообщества.
...