Kafka Connect S3 Bucket Папка - PullRequest
       96

Kafka Connect S3 Bucket Папка

0 голосов
/ 30 октября 2019

Могу ли я создать свой собственный каталог в s3, используя конфлюент S3SinkConnector?

Я знаю, что это создает структуру папок, к сожалению, нам нужен новый каталог strcuture.

1 Ответ

0 голосов
/ 31 октября 2019

Вы можете изменить topics.dir, за которым следует путь, извлеченный partitioner.class.

Если вам нужна «новая структура каталогов» (указана, потому что у S3 нет каталогов), тогда вам нужно взглянуть на реализацию собственного класса Partitioner

https://docs.confluent.io/current/connect/kafka-connect-s3/index.html#s3-object-names

...