обрезка паркетной колонны в искре - PullRequest
0 голосов
/ 01 июня 2018

Я знаю, что паркет поддерживает чтение только выбранных пользователем столбцов.Но когда я использую

dataframe.read.parquet().select(col*) 

для чтения данных, похоже, что все еще читается весь файл.Есть ли какой-нибудь способ в спарке читать только выбранные порции столбцов?

...