Афина читает из файлов AWS DMS CSV - PullRequest
0 голосов
/ 12 сентября 2018

Я настраиваю свою DMS для чтения из базы данных MySQL и миграции ее данных на S3 с репликацией.Кажется, все работает нормально, он создает большие CSV-файлы для всех данных и начинает создавать меньшие CSV-файлы с дельтами.

Проблема в том, что когда я читаю эти CSV-файлы с помощью AWS Glue Crawlers, они непохоже, что эти дельты или даже хуже, они, кажется, получают только дельты, игнорируя большие файлы CSV.

Я знаю, что здесь есть похожий пост: Афина не может разрешить файлы CSV изAWS DMS

Но это без ответа, и я не могу комментировать там, поэтому я открываю это.

Кто-нибудь нашел решение для этого?

С наилучшими пожеланиями.

...