AWS Glue Crawler - как получить правильные типы данных - PullRequest
0 голосов
/ 04 марта 2020

У меня есть Glue Crawler, который читает данные из S3 и автоматически назначает типы данных.

Тип данных для первого столбца должен быть Number (Integer), но он отображается как десятичное число (38,10). Вот как Афина показывает данные для первых 10 записей (после запуска Glue Crawler):

1   3568813.0000000000
2   3568814.0000000000
3   3570809.0000000000
4   3570810.0000000000
5   3573970.0000000000
6   3573971.0000000000
7   3573972.0000000000
8   3573973.0000000000
9   3573974.0000000000
10  3573975.0000000000

(в идеале - мы должны видеть чистые числа без конечных нулей ..)

Есть ли способ «форсировать» правильный тип данных с помощью Glue Crawler? Если нет - как это можно исправить после операции сканирования?

Спасибо.

...