Как переименовать имя выходного файла склеивания задания? - PullRequest
0 голосов
/ 30 октября 2018

Я создаю связующее задание, в котором выходные данные хранятся в корзине s3. Путь S3 задается следующим образом:

DF.write.format('csv').mode("overwrite").save("s3://test",header='true')

Я хочу указать пользовательское имя файла для вывода, к которому следует добавить системную дату.

Пример: test20180101.csv

1 Ответ

0 голосов
/ 15 ноября 2018

Вы можете попробовать следующее:

DF.write.format('csv').mode("overwrite").save("s3://test/test20180101.csv",header='true')
...