Выгрузка огромных данных из таблицы Кассандры - PullRequest
0 голосов
/ 11 октября 2018

У нас есть таблица с 15 миллионами записей, и в одном из столбцов хранится огромный XML.Требование - сгенерировать 30 разных текстовых файлов с разными полями XML со всеми данными (более 15 миллионов) из таблицы.И все эти 30 заданий будут выполняться одновременно.Часто мы попадаем в ReadTimeoutException.Из-за нехватки времени мы не можем думать о решениях для кэширования.Как мы можем смягчить эти исключения readtimeout?Любая помощь будет благодарна.Ниже представлены весенняя партия и версия Cassandra, в которой используется Cassandra - 3.11, с использованием Spring Batch - 3.x в качестве платформы для выгрузки.

Добро пожаловать на сайт PullRequest, где вы можете задавать вопросы и получать ответы от других членов сообщества.
...