Возможно ли, что задание Spark может читать данные, сохраненные в Amazon EFS - PullRequest
0 голосов
/ 03 ноября 2018

Мне было интересно, может ли задание Spark считывать данные непосредственно из Amazon EFS.

Один из способов - переместить данные из EFS в S3 и разрешить заданию Spark читать данные из S3. Но это вводит еще один шаг в конвейер ETL.

Любые предложения приветствуются. Спасибо

...