Создать форму в Cloudera

Question

Я работаю в экосистеме Cloudera, и, как новичок, я начал с реализации примера Flume в Твиттере и успешно его завершил. Теперь, когда я хочу передать данные из Twitter по разным ключевым словам, я должен зайти в файл конфигурации Twitter и отредактировать его, а затем запустить агент flume с помощью терминала.

Я думал о том, как разрешить пользователю открывать форму, вводить в нее ключевые слова и запускать Flume Agent для получения данных из Twitter вместо того, чтобы каждый раз заходить в файл конфигурации Twitter. Для этого я хочу знать, есть ли в экосистеме Cloudera какой-либо инструмент для реализации идеи, которую я обсуждал выше?

Answer 1

Cloudera Manager - единственный интерфейс, который позволяет конфигурировать агент Flume, AFAIK.

В противном случае вам нужно будет создать свой собственный пользовательский интерфейс для выполнения чего-то такого особенного.

Если возможно, вы могли бы установить отдельный инструмент через Посылку, называемую Streamsets , которая является более полным и программируемым потоковым инструментом, разработанным некоторыми из тех же людей, что и Flume.