Я пытаюсь прочитать файл csv в DataFrame
, содержащий столбец типа массива, который имеет Double
значения.
Во время расследования я нашел этот пост: Как загрузить файл csv в Spark DataFrame с помощью Array [Int] . Насколько я понял, этот метод подразумевает создание нового DataFrame
на базе старого (прочитанного из CSV-файла), так как вызывает метод select
.
Есть ли менее избыточный способ чтения массива нестроковых типов из файла CSV?