Чтение данных из CSV-файла в Интернете с использованием scala - PullRequest
0 голосов
/ 23 апреля 2020

У меня есть большой CSV-файл в Интернете "https://drive.google.com/file/d/1_8************* / view" (размер почти 100 МБ)

Можно ли прочитать файл непосредственно с вышеупомянутого URL-адреса и загрузить данные в scala dataframe.

Если да, понадобится ли вам помочь загрузить его в мою систему

С уважением,

1 Ответ

0 голосов
/ 23 апреля 2020

Данные не могут быть напрямую загружены в Spark. Вам нужно будет загрузить файл на диск, а затем загрузить его в Spark

...