Клей Crawler для S3 ведро с несколькими папками - PullRequest
0 голосов
/ 16 января 2020

При попытке настроить гусеничный сканер на корзине S3 он завершается после создания таблиц только для одной папки и в итоге дает ERROR : Internal Service Exception.

Кто-то сказал мне, что для сканирования должен сканировать Для всех папок и вложенных папок необходимо добавить полную структуру каталогов в качестве разных источников данных для каждой вложенной папки или даже на уровне файлов при настройке Crawler из пользовательского интерфейса. Тем не менее, это не кажется масштабируемым, особенно когда имеется множество папок, а также если структура каталогов обновляется.

Может кто-нибудь помочь здесь?

...