Нет расширения при использовании from_options 'в DynamicFrameWriter в AWS контексте склеивания искры

Question

 I am new to AWS. I am writing **AWS Glue job** for some transformation and I could do it. But now after the transformation I used **'from_options' in DynamicFrameWriter Class** to transfer the data frame as csv file. But the file copied to S3 without any extension. Also is there any way to rename the file copied, using DynamicFrameWriter or any other. Please help....

Шаг 1: Инициировано связующее задание AWS для преобразования файлов в экземпляре S3 в экземпляр RDS. Шаг 2: При успешном завершении задания перенесите содержимое файла в другой S3, используя from_options 'в классе DynamicFrameWriter. Но файл не имеет расширения.

Answer 1

вы должны установить формат файла, который вы пишете. например: format = csv

Это должно установить расширение файла csv. Однако вы не можете выбрать имя файла, под которым хотите его записать. Единственный вариант, который у вас есть, - это выполнить какую-то операцию s3, в которой вы меняете ключевое имя файла.