Вставка в улей стол с вкладышами из улья и искры - PullRequest
0 голосов
/ 20 февраля 2019

У нас есть таблица с наклоном улья, и данные вставляются в эту таблицу из улья.Таким образом, файлы в HDFS следуют семантике улья.Теперь мы хотим ежедневно добавлять данные в эту таблицу из спонтанной работы.Мы протестировали вставку, и она работает, и новые файлы, созданные в HDFS, следуют семантике искры.

Согласно https://www.slideshare.net/TejasPatil1/hive-bucketing-in-apache-spark, семантика группирования куста и искры различна, а используемая функция хеширования также различна.

Что произойдет, когда мы сделаем соединение с другим столом с ячейками (с привязкой к столбцу соединения) сейчас.Это будет нормальное соединение?

...