У нас есть искровой фрейм данных, который при использовании display(spark_df) отлично работает и просматривает ~ 200 строк.Предварительный просмотр загружается как CSV нормально.
Но при попытке загрузить полный результат повторно выполняется команда и не удается выдать ошибку CSV data source does not support array<string> data type
Что здесь не так?