Что лучше между Chukwa и Scribe?

Question

Я использую Hadoop, но для входа мне нужно что-то. Но я не знаю, какая система лучше подходит для входа между Scribe и Chukwa . Ребята, подскажите, пожалуйста. И если есть какие-либо альтернативы, которые легко смешать с Hadoop, пожалуйста, дайте мне знать.

Answer 1

У меня есть альтернатива для вас:

Apache Flume создан Cloudera и предназначен главным образом для ввода / вывода данных из HDFS.

https://cwiki.apache.org/confluence/display/FLUME/Index

У каждой системы есть свои плюсы и минусы, и все они имеют определенные проблемы с надежностью в больших масштабах, но я могу сказать, что Flume построен на Java, поэтому может использовать основную библиотеку HDFS.

Мы используем Flume во всех партияхузлов для получения данных с наших машин в HDFS и S3.

Answer 2

Проверьте сравнение инструментов для сбора бревен на https://groups.google.com/a/cloudera.org/forum/#!topic/flume-user/BMtsyGedcPo