Разъем Spark Cassandra, выполняющий медленное обновление вставки - PullRequest
0 голосов
/ 04 мая 2020

Я вижу очень медленную вставку для значительно меньшего числа рядов (10-15) в Cassandra с использованием разъема Spark Cassandra (spark-cassandra-connector-2.11 ver: 2.4.3). Весь лог выполнения c перед сохранением в Cassandra занял 1 минуту (включая сохранение кадра данных в Hive), но занимал большую часть времени при сохранении в 3 таблицах Cassandra и обновлении в столбце Тип счетчика в другой таблице Общее выполнение задания Время в кластере пряжи

Время, необходимое в Кассандре Экономия для каждой вставки

...