Запрос Athena (Add Partition) с использованием AWS Glue Scala - PullRequest
0 голосов
/ 05 ноября 2018

Есть ли возможность запросить данные в ALTER TABLE ADD PARTITION в существующей таблице в Афине из Glue Script с использованием Scala?

и возможные библиотеки из aws.athena.connections (OR)

Использование spark для запроса таблицы Athena для добавления из (Каталог данных клея)?

1 Ответ

0 голосов
/ 06 ноября 2018

Вы можете позвонить в Афину с помощью запроса ALTER TABLE ADD PARTITION или добавить раздел через Glue API . Однако AWS SDK уже должен быть предоставлен для вас, чтобы вы могли использовать соответствующие Athena или Glue клиентские классы.

Если ваши задания выполняются в настраиваемом VPC, убедитесь, что есть доступ к сервисам AWS.

...