Откатывает ли Spark saveAsTable, когда сеанс прерывается во время записи? - PullRequest
0 голосов
/ 24 мая 2018

При добавлении в таблицу управления кустами с помощью saveAsTable выполняется ли откат работы, выполненной с помощью неполного saveAsTable, или сохраняется частичная информация?

1 Ответ

0 голосов
/ 24 мая 2018

Не существует понятия "откат" при написании таблицы с использованием искры.Он не создает транзакционную таблицу, когда вы сохраняете AsTable.Если сеанс искры умирает во время сохранения таблицы, таблица остается в нерабочем состоянии.Даже если записаны частичные данные, вы, вероятно, не сможете прочитать частично записанные данные.

Однако остальные данные можно прочитать, если вы используете улей только добавления.

Добро пожаловать на сайт PullRequest, где вы можете задавать вопросы и получать ответы от других членов сообщества.
...