Я выполняю запрос SELECT Athena по манифесту корзины S3.Затем я хочу использовать результаты этого запроса в формате .csv в пакетной операции S3.
Мой запрос выполняется нормально, и я могу получить доступ к выводу .csv через пакет S3, но поскольку первая строка фактически является заголовком столбца, пакет S3 создает неисправимую ошибку, поскольку считает, что манифест теперь ссылаетсяк нескольким сегментам.
Как я могу легко удалить заголовки столбцов из моих результатов?Я бы предпочел просто сделать это в SQL.Размер файла делает использование стандартных инструментов Unix непозволительным.Я мог бы использовать AWS Glue, но это кажется излишним просто для подавления заголовков в запросе SQL.