Как отключить создание искр пустого файла $ folder $? - PullRequest
0 голосов
/ 19 июня 2020

При запуске кластера Spark в AWS EMR я сохраняю файл parque.

При сохранении файлов Spark создает несколько пустых файлов, содержащих слово $folder$, например:

введите описание изображения здесь

Эти файлы сохраняются в S3.

Существует ли какая-либо конфигурация, позволяющая избежать создания этих файлов?

...