Оптимальный способ чтения массива чисел из csv - PullRequest
0 голосов
/ 17 июня 2020

Я пытаюсь прочитать файл csv в DataFrame, содержащий столбец типа массива, который имеет Double значения.

Во время расследования я нашел этот пост: Как загрузить файл csv в Spark DataFrame с помощью Array [Int] . Насколько я понял, этот метод подразумевает создание нового DataFrame на базе старого (прочитанного из CSV-файла), так как вызывает метод select.

Есть ли менее избыточный способ чтения массива нестроковых типов из файла CSV?

...