ElasticSearch - удаление и индексирование (добавление документов) одновременно. Это сильно повлияет на производительность удаления и / или индексации? - PullRequest
0 голосов
/ 16 апреля 2019

У меня есть индекс Elasticsearch.Для индексации (добавления документов) однодневных данных потребуется 20-30 минут.Удаление данных за один месяц (данные старого месяца) займет 3-4 часа.

  1. Пока я удаляю данные старого месяца (3-4 часа до конца), эффективность поиска все еще остается высокой.
  2. Но моя запланированная ежедневная индексация обработки новых документов начнется, я не знаю, следует ли мне сейчас прекратить эту индексацию новых ежедневных документов и дождаться окончания удаления данных за старый месяц, а затем выполнитьновая индексация.

В старых случаях использования у меня были огромные наборы данных, которые нужно было удалить (заняло 1 день, чтобы завершить удаление) и индекс (заняв 2-3 часа, чтобы завершить индексацию) одновременновремя, оба процесса были почти полностью заблокированы в течение длительного времени.Оба процесса стали очень медленными.

Но сейчас, в текущем случае, наборы данных намного меньше.

Спасибо!

Добро пожаловать на сайт PullRequest, где вы можете задавать вопросы и получать ответы от других членов сообщества.
...