sparkSession.read().load("some_path") означает чтение файла паркета, сохраненного в HDFS или S3, при локальном запуске он выдает следующее исключение:
Caused by: java.lang.RuntimeException: file:/my_local_path/local_file is not a Parquet file. expected magic number at tail ...
Как выполнить его локальное тестирование?