Перенос данных из локального каталога в хранилище озера данных Azure с помощью flume без hadoop - PullRequest
Новая
       43

Перенос данных из локального каталога в хранилище озера данных Azure с помощью flume без hadoop

0 голосов
/ 19 ноября 2018

** Я пытаюсь принять данные, которые находятся в каталоге моего виртуальной машины Linux в каталог Из моего лазурного хранилища озера данных с каналом я не знаю, какой тип раковины использовать, и даже если это возможно, зная, что для источника я использую сполдир **

************** Мой файл конфига flume *********

a1 - мой агент против гриппа 

a1.sources = r1
a1.sinks = k1
a1.channels = c1

# Describe/configure the source
a1.sources.r1.type = spooldir
a1.sources.r1.spoolDir = home/
a1.sources.r1.fileHeader = true

#describe the sink ( here is my problem  i don't know what type of sink to use i don't find any documentation about it)
a1.sinks.k1.type = 
a1.sinks.k1.endpoint = 


# Use a channel which buffers events in memory

a1.channels.c1.type = memory
a1.channels.c1.capacity = 1000
a1.channels.c1.transactionCapacity = 100

# Bind the source and sink to the channel
a1.sources.r1.channels = c1
a1.sinks.k1.channel = c1
...