Миграция на nifi автономно из кластера HDF

Question

Я прокомментирую проблему, с которой я столкнулся.

В компании, где я работаю, несколько лет назад они решили внедрить nifi.Проблема в том, что они реализовали полное решение HDF, что-то действительно ненужное, чтобы использовать только nifi.К счастью, интерфейс Ambari используется для перезапуска службы

В настоящее время я нахожусь в процессе миграции этого nifi, который состоит из 3 кластерных узлов (что также не требуется, поскольку выполняются только небольшие задачи и ресурсы расходуются)dockerized nifi standalone.

Этот процесс ранее был успешно выполнен с nifi с меньшим потоком.Процедура, которая была выполнена, состояла в том, чтобы просто экспортировать шаблон потока и импортировать его, добавив в nifi.properties правильные ключи, чтобы иметь возможность использовать службы контроллера.

Я пытаюсь выполнитьэта же процедура без успеха.Поток импортирован правильно, но я не могу визуализировать загруженные мной службы контроллеров, добавив правильный ключ в nifi.properties.

Попробуйте вручную извлечь ключ из служб контроллера для загрузки, которая выглядит как "чувствительная"значение ", но я не смог этого сделать.

В качестве второго варианта скопируйте файл flow.xml.gz сервера, который необходимо перенести, отредактируйте некоторые поля с помощью текстового редактора (например, пути к файлам, драйверы и т. д.) ивидимо мне лучше с этим;У меня было несколько ошибок, среди которых мне пришлось добавить драйверы (jdbc, hive и т. Д.).Я исправляю маленькие проблемы понемногу.

Есть ли действительно правильный способ перенести это?Потому что для более чем правильного ввода пароля в файле nifi.properties я не вижу службы контроллера?Есть ли у HDF какие-либо другие файлы конфигурации?

В качестве дополнительных данных используется версия dockerized nifi 1.2.0, а версия nifi с HDF 1.1.0.По-видимому, нет серьезных изменений, которые могли бы повлиять.

Спасибо за помощь!

Answer 1

Спасибо за помощь Я не знал этого о главном ключе в файле bootstrap.conf

Я сделал следующее: - Экспортируйте из исходного потока nifi и импортируйте его в новый nifi. - Изменить с указанием ключей в nifi.properties и bootstrap.conf - Сервис не запускается, в журналах сообщается следующее

2019-06-06 17: 28: 21,807 INFO [main] o.a.n.b.NotificationServiceManager Успешно загружены следующие 0 служб: [] 2019-06-06 17: 28: 21,809 ИНФОРМАЦИЯ [main] org.apache.nifi.bootstrap.RunNiFi Registered no Notification Services для типа уведомления NIFI_STARTED 2019-06-06 17: 28: 21,809 INFO [main] org.apache.nifi.bootstrap.RunNiFi Зарегистрировано: Службы уведомлений для типа уведомлений NIFI_STOPPED отсутствуют. 2019-06-06 17: 28: 21,809 ИНФОРМАЦИЯ [main] org.apache.nifi.bootstrap.RunNiFi Зарегистрировано no Notification Services для типа уведомления NIFI_DIED 2019-06-06 17: 28: 21,829 ИНФОРМАЦИЯ [main] org.apache.nifi.bootstrap.Command Запуск Apache NiFi ... 2019-06-06 17: 28: 21 829 INFO [main] org.apache.nifi.bootstrap.Command Рабочий каталог: /opt/nifi/nifi-1.2.0 2019-06-06 17: 28: 21,829 ИНФОРМАЦИЯ [main] org.apache.nifi.bootstrap.Command Команда: / docker-java-home / bin / java -classpath /opt/nifi/nifi-1.2.0/./ конф: /opt/nifi/nifi-1.2.0 /./ Библиотека / SLF4J-апи-1.7.25.jar: /opt/nifi/nifi-1.2.0 /./ Библиотека / июль-к-SLF4J-1.7. 25.jar: /opt/nifi/nifi-1.2.0 /./ Библиотека / Logback-классический 1.2.3.jar: /opt/nifi/nifi-1.2.0 /./ Библиотека / JCL-над-slf4j- 1.7.25.jar: /opt/nifi/nifi-1.2.0 /./ Библиотека / Nifi-апи-1.2.0.jar: /opt/nifi/nifi-1.2.0 /./ Библиотека / javax.servlet- апи-3.1.0.jar: /opt/nifi/nifi-1.2.0 /./ Библиотека / Nifi-каркасного апи-1.2.0.jar: /opt/nifi/nifi-1.2.0 /./ Библиотека / log4j-над-SLF4J-1.7.25.jar: /opt/nifi/nifi-1.2.0 /./ Библиотека / Nifi-свойства-1.2.0.jar: /opt/nifi/nifi-1.2.0 /./ Lib / пристани-схема-3.1.jar: /opt/nifi/nifi-1.2.0 /./ Библиотека / Nifi-среда-1.2.0.jar: /opt/nifi/nifi-1.2.0 /./ Библиотека / nifi-nar-utils-1.2.0.jar: /opt/nifi/nifi-1.2.0 /./ lib / logback-core-1.2.3.jar -Dorg.apache.jasper.compiler.disablejsr199 = true -Xmx512m -Xms512m -Djava.security.egd = файл: / dev / urandom -Dsun.net.http.allowRestrictedHeaders = true -Djava.net.preferIPv4Stack = true -Djav a.awt.headless = true -XX: + UseG1GC -Djava.protocol.handler.pkgs = sun.net.www.protocol -Dnifi.properties.file.path = / opt / nifi / nifi-1.2.0 /./ conf / nifi.properties -Dnifi.bootstrap.listen.port = 40303 -Dapp = NiFi -Dorg.apache.nifi.bootstrap.config.log.dir = / opt / nifi / nifi-1.2.0 / logs org.apache. nifi.NiFi -K /opt/nifi/nifi-1.2.0/./conf/sensitive.key 2019-06-06 17: 28: 21,912 ИНФОРМАЦИЯ [main] org.apache.nifi.bootstrap.Command Запустил Apache NiFi с идентификатором процесса 35 2019-06-06 17: 28: 22,814 ИНФОРМАЦИЯ [Слушатель команд загрузки NiFi Bootstrap] org.apache.nifi.bootstrap.RunNiFi Apache NiFi теперь работает и прослушивает запросы Bootstrap через порт 35155 2019-06-06 17: 28: 41,948 ОШИБКА [Обработчик регистрации NiFi] org.apache.nifi.StdErr Не удалось запустить веб-сервер: org.jasypt.exceptions.EncryptionOperationNotPossibleException 2019-06-06 17: 28: 41,949 ОШИБКА [Обработчик регистрации NiFi] org.apache.nifi.StdErr Выключение ... 2019-06-06 17: 28: 42,922 ИНФОРМАЦИЯ [main] org.apache.nifi.bootstrap.RunNiFi NiFi никогда не запускался. Не перезапустит NiFi

• После этого кажется, что служба продолжает перезапускаться, поэтому замените файл nifi-framework-nar на версию 1.1.0, чтобы у него не было правильной библиотеки jasypt. (Помните, у меня есть миграция nifi 1.1 до 1.2)

• Nifi продолжает перезапуск, сообщая о следующей ошибке.

2019-06-06 18: 25: 18,143 INFO [main] org.apache.nifi.NiFi Запуск NiFi ... 2019-06-06 18: 25: 18,208 INFO [main] org.apache.nifi.NiFi Теперь перезаписывает файл в /opt/nifi/nifi-1.2.0/./conf/sensitive.key 2019-06-06 18: 25: 18,209 ИНФОРМАЦИЯ [главная] org.apache.nifi.NiFi Перезапись материала ключа с помощью клавиатуры: c957a7de1ce10bf7a2c1b8cc8907df203e13bfb497e75b81e6fcd8cfbcae449d 2019-06-06 18: 25: 18,209 ИНФОРМАЦИЯ [main] org.apache.nifi.NiFi Удаление / отмена связи файла: /opt/nifi/nifi-1.2.0/./conf/sensitive.key2019-06-06 18: 25: 18,209 INFO [main] org.apache.nifi.NiFi Считывание ключа защиты свойств из файла ключа, предоставленного процессом начальной загрузки 2019-06-06 18: 25: 18,405 INFO [main] oanifi.properties.NiFiPropertiesLoader Определенный путь по умолчанию для nifi.properties: '/opt/nifi/nifi-1.2.0/./conf/nifi.properties' 2019-06-06 18: 25: 18,411 INFO [main] oanifi.properties.NiFiPropertiesLoader Loaded 124свойства из /opt/nifi/nifi-1.2.0/./conf/nifi.properties 2019-06-06 18: 25: 18,597 INFO [main] oanproperties.ProtectedNiFiProperties Существует 1 защищенных свойства из 5 чувствительных свойств (100%)2019-06-06 18: 25: 18,604 ИНФОРМАЦИЯ [main] oanpAESSensitivePropertyProvider AES Чувствительный поставщик свойств успешно расшифровал чувствительное значение 2019-06-06 18: 25: 18,605 INFO [main] org.apache.nifi.NiFi Загружен 123 свойства 2019-06-06 18: 25: 18,614 INFO [main] org.apache.nifi.BootstrapListener Запущен Bootstrap Listener, прослушивание входящих запросов на порт 34369 2019-06-06 18: 25: 18,696 INFO [main] org.apache.nifi.BootstrapListener Успешно инициирован обмен данными с Bootstrap[main] org.apache.nifi.nar.NarUnpacker Процесс загрузки NAR занял 4192250200 наносекунд.2019-06-06 18: 25: 23,177 INFO [main] org.apache.nifi.nar.NarClassLoaders Загруженный файл NAR: /opt/nifi/nifi-1.2.0/./work/nar/extensions/nifi-jetty-bundle-1.2.0.nar-распакован как загрузчик классов org.apache.nifi.nar.NarClassLoader [./work / nar / extensions / nifi-jetty-bundle-1.2.0.nar-unpacked] 2019-06-06 18: 25: 23,186 INFO [main] org.apache.nifi.nar.NarClassLoaders Загруженный файл NAR: /opt/nifi/nifi-1.2.0/./work/nar/framework/nifi-framework-nar-1.1.0.2.1.0.0-165.nar-распакован как загрузчик классов org.apache.nifi.nar.NarClassLoader [./work / nar / framework / nifi-framework-nar-1.1.0.2.1.0.0-165.nar-unpacked]2019-06-06 18: 25: 23,188 INFO [main] org.apache.nifi.nar.NarClassLoaders Загруженный файл NAR: /opt/nifi/nifi-1.2.0/./work/nar/extensions/nifi-ldap-iaa-provider-nar-1.2.0.nar-распакован как загрузчик классов org.apache.nifi.nar.NarClassLoader [./work / nar / extensions / nifi-ldap-iaa-provider-nar-1.2.0.nar-unpacked] 2019-06-06 18: 25: 23,193 INFO [main] org.apache.nifi.nar.NarClassLoaders Загруженный файл NAR: /opt/nifi/nifi-1.2.0/./work/nar/extensions/nifi-gcp-nar-1.2.0.nar-unpacked как загрузчик классов org.apache.nifi.nar.NarClassLoader [./ work / nar / extensions / nifi-gcp-nar-1.2.0.narбез упаковки] 2019-06-06 18: 25: 23,194 ИНФОРМАЦИЯ [main] org.apache.nifi.nar.NarClassLoaders Загруженный файл NAR: /opt/nifi/nifi-1.2.0/./work/nar/extensions/nifi-kerberos-iaa-provider-nar-1.2.0.nar-распакован как загрузчик классов org.apache.nifi.nar.NarClassLoader [./work / nar / extensions / nifi-kerberos-iaa-provider-nar-1.2.0.nar-unpacked] 2019-06-06 18: 25: 23,195 INFO [main] org.apache.nifi.nar.NarClassLoaders Загруженный файл NAR: /opt/nifi/nifi-1.2.0/./work/nar/extensions/nifi-standard-services-api-nar-1.2.0.nar- распакован как загрузчик классов org.apache.nifi.nar.NarClassLoader [./work / nar / extensions / nifi-standard-services-api-nar-1.2.0.nar-unpacked] 2019-06-06 18: 25: 23,196 INFO [main] org.apache.nifi.nar.NarClassLoaders Загруженный файл NAR: /opt/nifi/nifi-1.2.0/./work/nar/extensions/nifi-hl7-nar-1.2.0.nar- распакован как загрузчик классов org.apache.nifi.nar.NarClassLoader [./ work / nar / extension / nifi-hl7-nar-1.2.0.nar-unpacked] 2019-06-06 18: 25: 23,197 INFO [main] org.apache.nifi.nar.NarClassLoaders Загруженный файл NAR: / opt / nifi / nifi-1.2.0 / ./ work / nar / extensions / nifi-datadog-nar-1.2.0.nar-распаковывается как загрузчик классов org.apache.nifi.nar.NarClassLoader [./ work / nar / extensions / nifi-datadog-nar-1.2.0.nar-unpacked] 2019-06-06 18: 25: 23,198 INFO [main] org.apache.nifi.nar.NarClassLoaders Загруженный файл NAR: /opt/nifi/nifi-1.2.0/./work / nar / extensions / nifi-solr-nar-1.2.0.nar-распаковывается как загрузчик классов org.apache.nifi.nar.NarClassLoader [./ work / nar / extensions / nifi-solr-nar-1.2.0.Нар-распакованы]2019-06-06 18: 25: 23,199 INFO [main] org.apache.nifi.nar.NarClassLoaders Загруженный файл NAR: /opt/nifi/nifi-1.2.0/./work/nar/extensions/nifi-websocket- services-api-nar-1.2.0.nar-распакован как загрузчик классов org.apache.nifi.nar.NarClassLoader [./work / nar / extensions / nifi-websocket-services-api-nar-1.2.0.nar- распакованный] 2019-06-06 18: 25: 23,201 INFO [main] org.apache.nifi.nar.NarClassLoaders Загруженный файл NAR: /opt/nifi/nifi-1.2.0/./work/nar/extensions/nifi-ccda- nar-1.2.0.nar-распакован как загрузчик классов org.apache.nifi.nar.NarClassLoader [./work / nar / extensions / nifi-ccda-nar-1.2.0.nar-unpacked] 2019-06-06 18: 25: 23,202 ИНФОРМАЦИЯ [главная] org.apache.nifi.nar.NarClassLoaders Загруженный файл NAR: /opt/nifi/nifi-1.2.0/./work/nar/extensions/nifi-amqp- nar-1.2.0.nar-распакован как загрузчик классов org.apache.nifi.nar.NarClassLoader [./work / nar / extensions / nifi-amqp-nar-1.2.0.nar-unpacked] 2019-06-06 18: 25: 23,207 INFO [main] org.apache.nifi.nar.NarClassLoaders Загруженный файл NAR: /opt/nifi/nifi-1.2.0/./work/nar/extensions/nifi-aws- nar-1.2.0.nar-распакован как загрузчик классов org.apache.nifi.nar.NarClassLoader [./work / nar / extensions / nifi-aws-nar-1.2.0.nar-unpacked] 2019-06-06 18: 25: 23,207 INFO [main] org.apache.nifi.nar.NarClassLoaders Загруженный файл NAR: /opt/nifi/nifi-1.2.0/./work/nar/extensions/nifi-dbcp- service-nar-1.2.0.nar-распакован как загрузчик классов org.apache.nifi.nar.NarClassLoader [./work / nar / extensions / nifi-dbcp-service-nar-1.2.0.nar-unpacked] 2019-06-06 18: 25: 23,209 INFO [main] org.apache.nifi.nar.NarClassLoaders Загруженный файл NAR: /opt/nifi/nifi-1.2.0/./work/nar/extensions/nifi-email- nar-1.2.0.nar-распакован как загрузчик классов org.apache.nifi.nar.NarClassLoader [./work / nar / extensions / nifi-email-nar-1.2.0.nar-unpacked] 2019-06-06 18: 25: 23,210 INFO [main] org.apache.nifi.nar.NarClassLoaders Загруженный файл NAR: /opt/nifi/nifi-1.2.0/./work/nar/extensions/nifi-cassandra- nar-1.2.0.nar-распакован как загрузчик классов org.apache.nifi.nar.NarClassLoader [./work / nar / extensions / nifi-cassandra-nar-1.2.0.nar-unpacked] 2019-06-06 18: 25: 23,211 INFO [main] org.apache.nifi.nar.NarClassLoaders Загруженный файл NAR: /opt/nifi/nifi-1.2.0/./work/nar/extensions/nifi-registry- nar-1.2.0.nar-распакован как загрузчик классов org.apache.nifi.nar.NarClassLoader [./work / nar / extensions / nifi-registry-nar-1.2.0.nar-unpacked] 2019-06-06 18: 25: 23,212 INFO [main] org.apache.nifi.nar.NarClassLoaders Загруженный файл NAR: /opt/nifi/nifi-1.2.0/./work/nar/extensions/nifi-kafka- 0-10-nar-1.2.0.nar-распаковывается как загрузчик классов org.apache.nifi.nar.NarClassLoader [./work / nar / extensions / nifi-kafka-0-10-nar-1.2.0.nar- распакованный] 2019-06-06 18: 25: 23,212 INFO [main] org.apache.nifi.nar.NarClassLoaders Загруженный файл NAR: /opt/nifi/nifi-1.2.0/./work/nar/extensions/nifi-kafka- 0-9-nar-1.2.0.nar-распаковывается как загрузчик классов org.apache.nifi.nar.NarClassLoader [./work / nar / extensions / nifi-kafka-0-9-nar-1.2.0.nar- распакованный] 2019-06-06 18: 25: 23,215 INFO [main] org.apache.nifi.nar.NarClassLoaders Загруженный файл NAR: /opt/nifi/nifi-1.2.0/./work/nar/extensions/nifi-media- nar-1.2.0.nar-распакован как загрузчик классов org.apache.nifi.nar.NarClassLoader [./work / nar / extensions / nifi-media-nar-1.2.0.nar-unpacked] 2019-06-06 18: 25: 23,216 INFO [main] org.apache.nifi.nar.NarClassLoaders Загруженный файл NAR: /opt/nifi/nifi-1.2.0/./work/nar/extensions/nifi-websocket- processors-nar-1.2.0.nar-распакован как загрузчик классов org.apache.nifi.nar.NarClassLoader [./work / nar / extensions / nifi-websocket-processors-nar-1.2.0.nar-unpacked] 2019-06-06 18: 25: 23,217 INFO [main] org.apache.nifi.nar.NarClassLoaders Загруженный файл NAR: /opt/nifi/nifi-1.2.0/./work/nar/extensions/nifi-avro- nar-1.2.0.nar-распакован как загрузчик классов org.apache.nifi.nar.NarClassLoader [./work / nar / extensions / nifi-avro-nar-1.2.0.nar-unpacked] 2019-06-06 18: 25: 23,218 INFO [main] org.apache.nifi.nar.NarClassLoaders Загруженный файл NAR: /opt/nifi/nifi-1.2.0/./work/nar/extensions/nifi-scripting- nar-1.2.0.nar-распакован как загрузчик классов org.apache.nifi.nar.NarClassLoader [./work / nar / extensions / nifi-scripting-nar-1.2.0.nar-unpacked]2019-06-06 18: 25: 23,218 INFO [main] org.apache.nifi.nar.NarClassLoaders Загруженный файл NAR: /opt/nifi/nifi-1.2.0/./work/nar/extensions/nifi-ssl-context-service-nar-1.2.0.nar-распакован как загрузчик классов org.apache.nifi.nar.NarClassLoader [./work / nar / extensions / nifi-ssl-context-service-nar-1.2.0.nar-распакован] 2019-06-06 18: 25: 23,218 ИНФОРМАЦИЯ [main] org.apache.nifi.nar.NarClassLoaders Загруженный файл NAR: /opt/nifi/nifi-1.2.0/./work/nar/extensions/nifi-couchbase-nar-1.2.0.nar-распакован как загрузчик классов org.apache.nifi.nar.NarClassLoader [./work / nar / extensions / nifi-couchbase-nar-1.2.0.nar-распакован] 2019-06-06 18: 25: 23,219 INFO [main] org.apache.nifi.nar.NarClassLoaders Загруженный файл NAR: /opt/nifi/nifi-1.2.0/./work/nar/extensions/nifi-social-media-nar-1.2.0.nar-распакован как загрузчик классов org.apache.nifi.nar.NarClassLoader [./work / nar / extensions / nifi-social-media-nar-1.2.0.nar-unpacked] 2019-06-06 18: 25: 23,220 INFO [main] org.apache.nifi.nar.NarClassLoaders Загруженный файл NAR: /opt/nifi/nifi-1.2.0/./work/nar/extensions / nifi-kafka-0-8-nar-1.2.0.nar-распаковывается как загрузчик классов org.apache.nifi.nar.NarClassLoader [./work / nar / extensions / nifi-kafka-0-8-nar-1.2.0.nar-unpacked] 2019-06-06 18: 25: 23,220 INFO [main] org.apache.nifi.nar.NarClassLoaders Загруженный файл NAR: /opt/nifi/nifi-1.2.0/./work/nar / extensions / nifi-stateful-analysis-nar-1.2.0.nar-распаковывается как загрузчик классов org.apache.nifi.nar.NarClassLoader [./ work / nar / extensions / nifi-stateful-analysis-nar-1.2.0.nar-unpacked] 2019-06-06 18: 25: 23,221 INFO [main] org.apache.nifi.nar.NarClassLoaders Загруженный файл NAR: /opt/nifi/nifi-1.2.0/./work/nar/extensions / nifi-site-to-site-reports-nar-1.2.0.nar-распаковывается как загрузчик классов org.apache.nifi.nar.NarClassLoader [./work / nar / extensions / nifi-site-to-site-reports-nar-1.2.0.nar-unpacked] 2019-06-06 18: 25: 23,222 INFO [main] org.apache.nifi.nar.NarClassLoaders Загруженный файл NAR: /opt/nifi/nifi-1.2.0/./work/nar/extensions/nifi-poi-nar-1.2.0.nar-unpacked как загрузчик классов org.apache.nifi.nar.NarClassLoader [./ work / nar / extensions / nifi-poi-nar-1.2.0.nar-unpacked] 2019-06-06 18: 25: 23,223 INFO [main] org.apache.nifi.nar.NarClassLoaders Загруженный файл NAR: /opt/nifi/nifi-1.2.0 / ./ work / nar / extensions / nifi-tcp-nar-1.2.0.nar-распаковывается как загрузчик классов org.apache.nifi.nar.NarClassLoader [./ work / nar / extensions / nifi-tcp-nar-1.2.0.nar-unpacked] 2019-06-06 18: 25: 23,223 INFO [main] org.apache.nifi.nar.NarClassLoaders Загруженный файл NAR: /opt/nifi/nifi-1.2.0/./work/nar / extensions / nifi-mqtt-nar-1.2.0.nar-распаковывается как загрузчик классов org.apache.nifi.nar.NarClassLoader [./work / nar / extensions / nifi-mqtt-nar-1.2.0.nar-распакован] 2019-06-06 18: 25: 23,224 ИНФОРМАЦИЯ [main] org.apache.nifi.nar.NarClassLoaders Загруженный файл NAR: /opt/nifi/nifi-1.2.0/./work/nar/extensions/nifi-enrich-nar-1.2.0.nar-распакован как загрузчик классов org.apache.nifi.nar.NarClassLoader [./work / nar / extensions / nifi-enrich-nar-1.2.0.nar-распакован] 2019-06-06 18: 25: 23,226 INFO [main] org.apache.nifi.nar.NarClassLoaders Загруженный файл NAR: /opt/nifi/nifi-1.2.0/./work/nar/extensions/nifi-hadoop-libraries-nar-1.2.0.nar-распаковывается как загрузчик классов org.apache.nifi.nar.NarClassLoader [./work / nar / extensions / nifi-hadoop-library-nar-1.2.0.nar-unpacked] 2019-06-06 18: 25: 23,227 INFO [main] org.apache.nifi.nar.NarClassLoaders Загруженный файл NAR: /opt/nifi/nifi-1.2.0/./work/nar/extensions/nifi-html-nar-1.2.0.nar-распакован как загрузчик классов org.apache.nifi.nar.NarClassLoader [./work / nar / extensions / nifi-html-nar-1.2.0.nar-unpacked] 2019-06-06 18:25: 23,227 INFO [main] org.apache.nifi.nar.NarClassLoaders Загруженный файл NAR: /opt/nifi/nifi-1.2.0/./work/nar/extensions/nifi-evtx-nar-1.2.0.nar-распакован как загрузчик классов org.apache.nifi.nar.NarClassLoader [./work / nar / extensions / nifi-evtx-nar-1.2.0.nar-unpacked]2019-06-06 18: 25: 23,229 INFO [main] org.apache.nifi.nar.NarClassLoaders Загруженный файл NAR: /opt/nifi/nifi-1.2.0/./work/nar/extensions/nifi-elasticsearch-nar-1.2.0.nar-распакован как загрузчик классов org.apache.nifi.nar.NarClassLoader [./work / nar / extensions / nifi -asticsearch-nar-1.2.0.nar-unpacked] 2019-06-06 18: 25: 23,229 INFO [main] org.apache.nifi.nar.NarClassLoaders Загруженный файл NAR: /opt/nifi/nifi-1.2.0/./work/nar/extensions/nifi-snmp-nar-1.2.0.nar-распакован как загрузчик классов org.apache.nifi.nar.NarClassLoader [./work / nar / extensions / nifi-snmp-nar-1.2.0.nar-unpacked] 2019-06-06 18: 25: 23,230 INFO [main] org.apache.nifi.nar.NarClassLoaders Загруженный файл NAR: /opt/nifi/nifi-1.2.0/./work/nar/extensions/nifi-websocket-services-jetty-nar-1.2.0.nar-распакован как загрузчик классов org.apache.nifi.nar.NarClassLoader [./work / nar / extensions / nifi-websocket-services-jetty-nar-1.2.0.nar-unpacked] 2019-06-06 18: 25: 23,232INFO [main] org.apache.nifi.nar.NarClassLoaders Загруженный файл NAR: /opt/nifi/nifi-1.2.0/./work/nar/extensions / nifi-flume-nar-1.2.0.nar-распаковывается как загрузчик классов org.apache.nifi.nar.NarClassLoader [./work / nar / extensions / nifi-flume-nar-1.2.0.nar-unpacked]2019-06-06 18: 25: 23,232 INFO [main] org.apache.nifi.nar.NarClassLoaders Загруженный файл NAR: /opt/nifi/nifi-1.2.0/./work/nar/extensions/nifi-update-attribute-nar-1.2.0.nar-распакован как загрузчик классов org.apache.nifi.nar.NarClassLoader [./work / nar / extensions / nifi-update-attribute-nar-1.2.0.nar-unpacked] 2019-06-06 18: 25: 23,233 INFO [main] org.apache.nifi.nar.NarClassLoaders Загруженный файл NAR: /opt/nifi/nifi-1.2.0/./work/nar/extensions/nifi-cybersecurity-nar-1.2.0.nar-распакован как загрузчик классов org.apache.nifi.nar.NarClassLoader [./work / nar / extensions / nifi-cybersecurity-nar-1.2.0.nar-unpacked] 2019-06-06 18:25: 23 233 INFO [main] org.apache.nifi.nar.NarClassLoaders Загруженный файл NAR: /opt/nifi/nifi-1.2.0/./work/nar/extensions/nifi-spring-nar-1.2.0.nar-распакован как загрузчик классов org.apache.nifi.nar.NarClassLoader [./work / nar / extensions / nifi-spring-nar-1.2.0.nar-распакован] 2019-06-06 18: 25: 23,234 ИНФОРМАЦИЯ [main] org.apache.nifi.nar.NarClassLoaders Загруженный файл NAR: /opt/nifi/nifi-1.2.0/./work/nar/extensions/nifi-azure-nar-1.2.0.nar-распакован как загрузчик классов org.apache.nifi.nar.NarClassLoader [./work / nar / extensions / nifi-azure-nar-1.2.0.nar-распакован] 2019-06-06 18: 25: 23,235 INFO [main] org.apache.nifi.nar.NarClassLoaders Загруженный файл NAR: /opt/nifi/nifi-1.2.0/./work/nar/extensions/nifi-kite-nar-1.2.0.nar-распаковывается как загрузчик классов org.apache.nifi.nar.NarClassLoader [./work / nar / extensions / nifi-kite-nar-1.2.0.nar-unpacked] 2019-06-06 18: 25: 23,236INFO [main] org.apache.nifi.nar.NarClassLoaders Загруженный файл NAR: /opt/nifi/nifi-1.2.0/./work/nar/extensions/nifi-distributed-cache-services-nar-1.2.0.nar-распакован как загрузчик классов org.apache.nifi.nar.NarClassLoader [./work / nar / extensions / nifi-распределенные кэш-службы-nar-1.2.0.nar-распакован] 2019-06-06 18:25: 23 236 INFO [main] org.apache.nifi.nar.NarClassLoaders Загруженный файл NAR: /opt/nifi/nifi-1.2.0/./work/nar/extensi.ons / nifi-ignite-nar-1.2.0.nar-распаковывается как загрузчик классов org.apache.nifi.nar.NarClassLoader [./work / nar / extensions / nifi-ignite-nar-1.2.0.nar-unpacked]2019-06-06 18: 25: 23,237 INFO [main] org.apache.nifi.nar.NarClassLoaders Загруженный файл NAR: /opt/nifi/nifi-1.2.0/./work/nar/extensions/nifi-windows-event-log-nar-1.2.0.nar-распакован как загрузчик классов org.apache.nifi.nar.NarClassLoader [./work / nar / extensions / nifi-windows-event-log-nar-1.2.0.nar-распакован] 2019-06-06 18: 25: 23,237 ИНФОРМАЦИЯ [main] org.apache.nifi.nar.NarClassLoaders Загруженный файл NAR: /opt/nifi/nifi-1.2.0/./work/nar/extensions/nifi-lumberjack-nar-1.2.0.nar-распакован как загрузчик классов org.apache.nifi.nar.NarClassLoader [./work / nar / extensions / nifi-lumberjack-nar-1.2.0.nar-unpacked]2019-06-06 18: 25: 23,237 INFO [main] org.apache.nifi.nar.NarClassLoaders Загруженный файл NAR: /opt/nifi/nifi-1.2.0/./work/nar/extensions/nifi-beats- nar-1.2.0.nar-распакован как загрузчик классов org.apache.nifi.nar.NarClassLoader [./work / nar / extensions / nifi-beats-nar-1.2.0.nar-unpacked] 2019-06-06 18: 25: 23,238 INFO [main] org.apache.nifi.nar.NarClassLoaders Загруженный файл NAR: /opt/nifi/nifi-1.2.0/./work/nar/extensions/nifi-http- context-map-nar-1.2.0.nar-распакован как загрузчик классов org.apache.nifi.nar.NarClassLoader [./work / nar / extensions / nifi-http-context-map-nar-1.2.0.nar- распакованный] 2019-06-06 18: 25: 23,240 INFO [main] org.apache.nifi.nar.NarClassLoaders Загруженный файл NAR: /opt/nifi/nifi-1.2.0/./work/nar/extensions/nifi-standard- nar-1.2.0.nar-распакован как загрузчик классов org.apache.nifi.nar.NarClassLoader [./work / nar / extensions / nifi-standard-nar-1.2.0.nar-unpacked] 2019-06-06 18: 25: 23,241 INFO [main] org.apache.nifi.nar.NarClassLoaders Загруженный файл NAR: /opt/nifi/nifi-1.2.0/./work/nar/extensions/nifi-elasticsearch- 5-nar-1.2.0.nar-распакован как загрузчик классов org.apache.nifi.nar.NarClassLoader [./work / nar / extensions / nifi -asticsearch-5-nar-1.2.0.nar-unpacked] 2019-06-06 18: 25: 23,241 INFO [main] org.apache.nifi.nar.NarClassLoaders Загруженный файл NAR: /opt/nifi/nifi-1.2.0/./work/nar/extensions/nifi-riemann- nar-1.2.0.nar-распакован как загрузчик классов org.apache.nifi.nar.NarClassLoader [./work / nar / extensions / nifi-riemann-nar-1.2.0.nar-unpacked] 2019-06-06 18: 25: 23,242 INFO [main] org.apache.nifi.nar.NarClassLoaders Загруженный файл NAR: /opt/nifi/nifi-1.2.0/./work/nar/extensions/nifi-slack- nar-1.2.0.nar-распакован как загрузчик классов org.apache.nifi.nar.NarClassLoader [./work / nar / extensions / nifi-slack-nar-1.2.0.nar-unpacked] 2019-06-06 18: 25: 23,242 INFO [main] org.apache.nifi.nar.NarClassLoaders Загруженный файл NAR: /opt/nifi/nifi-1.2.0/./work/nar/extensions/nifi-hwx- schema-registry-nar-1.2.0.nar-распакован как загрузчик классов org.apache.nifi.nar.NarClassLoader [./work / nar / extensions / nifi-hwx-schema-registry-nar-1.2.0.nar- распакованный] 2019-06-06 18: 25: 23,243 INFO [main] org.apache.nifi.nar.NarClassLoaders Загруженный файл NAR: /opt/nifi/nifi-1.2.0/./work/nar/extensions/nifi-hive- services-api-nar-1.2.0.nar-распакован как загрузчик классов org.apache.nifi.nar.NarClassLoader [./work / nar / extensions / nifi-hive-services-api-nar-1.2.0.nar- распакованный] 2019-06-06 18: 25: 23,243 INFO [main] org.apache.nifi.nar.NarClassLoaders Загруженный файл NAR: /opt/nifi/nifi-1.2.0/./work/nar/extensions/nifi-provenance- repository-nar-1.2.0.nar-распакован как загрузчик классов org.apache.nifi.nar.NarClassLoader [./work / nar / extensions / nifi-провансанс-repository-nar-1.2.0.nar-unpacked] 2019-06-06 18: 25: 23,243 INFO [main] org.apache.nifi.nar.NarClassLoaders Загруженный файл NAR: /opt/nifi/nifi-1.2.0/./work/nar/extensions/nifi-mongodb- nar-1.2.0.nar-распакован как загрузчик классов org.apache.nifi.nar.NarClassLoader [./work / nar / extensions / nifi-mongodb-nar-1.2.0.nar-unpacked] 2019-06-06 18: 25: 23,244 INFO [main] org.apache.nifi.nar.NarClassLoaders Загруженный файл NAR: /opt/nifi/nifi-1.2.0/./work/nar/extensions/nifi-splunk- nar-1.2.0.nar-распакован как загрузчик классов org.apache.nifi.nar.NarClassLoader [./work / nar / extensions / nifi-splunk-nar-1.2.0.nar-unpacked] 2019-06-06 18: 25: 23,244 INFO [main] org.apache.nifi.nar.NarClassLoaders Загруженный файл NAR: /opt/nifi/nifi-1.2.0/./work/nar/extensions/nifi-language- translation-nar-1.2.0.nar-распакован как загрузчик классов org.apache.nifi.nar.NarClassLoader [./work / nar / extensions / nifi-language-translation-nar-1.2.0.nar-unpacked] 2019-06-06 18: 25: 23,245 INFO [main] org.apache.nifi.nar.NarClassLoaders Загруженный файл NAR: /opt/nifi/nifi-1.2.0/./work/nar/extensions/nifi-record- serialization-services-nar-1.2.0.nar-распакован как загрузчик классов org.apache.nifi.nar.NarClassLoader [./work / nar / extensions / nifi-запись-сериализация-services-nar-1.2.0.nar- распакованный]2019-06-06 18: 25: 23,246 INFO [main] org.apache.nifi.nar.NarClassLoaders Загруженный файл NAR: /opt/nifi/nifi-1.2.0/./work/nar/extensions/nifi-ambari-nar-1.2.0.nar-распакован как загрузчик классов org.apache.nifi.nar.NarClassLoader [./work / nar / extensions / nifi-ambari-nar-1.2.0.nar-unpacked] 2019-06-06 18: 25: 23,246 INFO [main] org.apache.nifi.nar.NarClassLoaders Загруженный файл NAR: /opt/nifi/nifi-1.2.0/./work/nar/extensions/nifi-jms-cf-service-nar-1.2.0.nar-распаковывается как загрузчик классов org.apache.nifi.nar.NarClassLoader [./work / nar / extensions / nifi-jms-cf-service-nar-1.2.0.nar-unpacked] 2019-06-06 18: 25: 23,247 INFO [main] org.apache.nifi.nar.NarClassLoaders Загруженный файл NAR: /opt/nifi/nifi-1.2.0/./work/nar/extensions/nifi-cdc-mysql-nar-1.2.0.nar-распакован как загрузчик классов org.apache.nifi.nar.NarClassLoader [./work / nar / extensions / nifi-cdc-mysql-nar-1.2.0.nar-unpacked] 2019-06-06 18: 25: 23,247 INFO [main] org.apache.nifi.nar.NarClassLoaders Загруженный файл NAR: /opt/nifi/nifi-1.2.0/./work/nar/extensions/nifi-hbase-nar-1.2.0.nar-распакован как загрузчик классов org.apache.nifi.nar.NarClassLoader [./work / nar / extensions / nifi-hbase-nar-1.2.0.nar-unpacked] 2019-06-06 18:25:23,249 INFO [main] org.apache.nifi.nar.NarClassLoaders Загруженный файл NAR: /opt/nifi/nifi-1.2.0/./work/nar/extensions/nifi-hbase_1_1_2-client-service-nar-1.2.0.nar-распаковывается как загрузчик классов org.apache.nifi.nar.NarClassLoader [./work / nar / extensions / nifi-hbase_1_1_2-client-service-nar-1.2.0.nar-unpacked] 2019-06-06 18:25: 23,250 INFO [main] org.apache.nifi.nar.NarClassLoaders Загруженный файл NAR: /opt/nifi/nifi-1.2.0/./work/nar/extensions/nifi-hadoop-nar-1.2.0.nar- распакован как загрузчик классов org.apache.nifi.nar.NarClassLoader [./work / nar / extensions / nifi-hadoop-nar-1.2.0.nar-unpacked] 2019-06-06 18: 25: 23,251 ИНФОРМАЦИЯ [главная] org.apache.nifi.nar.NarClassLoaders Загруженный файл NAR: /opt/nifi/nifi-1.2.0/./work/nar/extensions/nifi-parquet-nar-1.2.0.nar-unpacked как загрузчик классов org.apache.nifi.nar.NarClassLoader [./work / nar / extensions / nifi-parquet-nar-1.2.0.nar-unpacked] 2019-06-06 18: 25: 23,251 INFO [main] org.apache.nifi.nar.NarClassLoaders Загруженный файл NAR: /opt/nifi/nifi-1.2.0/./work/nar/extensions/nifi-jms-processors-nar-1.2.0.nar-распакован как загрузчик классов org.apache.nifi.nar.NarClassLoader [./work / nar / extensions / nifi-jms-процессоры-nar-1.2.0.nar-распакован] 2019-06-06 18: 25: 23,254 INFO [main] org.apache.nifi.nar.NarClassLoaders Загруженный файл NAR: /opt/nifi/nifi-1.2.0/./work/nar/extensions/nifi-hive-nar-1.2.0.nar-распаковывается как загрузчик классов org.apache.nifi.nar.NarClassLoader [./work / nar / extensions / nifi-hive-nar-1.2.0.nar-unpacked] 2019-06-06 18: 25: 23,323ОШИБКА [main] org.apache.nifi.NiFi Ошибка запуска NiFi из-за java.lang.NoSuchMethodException: org.apache.nifi.web.server.JettyServer. (Org.apache.nifi.util.NiFiProperties, java.util.Set) 2019-06-06 18: 25: 23,324 ИНФОРМАЦИЯ [Thread-1] org.apache.nifi.NiFi Инициирование отключения веб-сервера Jetty ... 2019-06-06 18: 25: 23,325 ИНФОРМАЦИЯ [Thread-1]org.apache.nifi.NiFi Завершение работы веб-сервера Jetty (хорошо или иначе).

• Удалите папку потоковых файлов, но она все еще не запускается.

• Я проверил использование папки lib моего nifi 1.1и ошибка следующая: Ошибка: Не удалось найти или загрузить основной класс org.apache.nifi.bootstrap.RunNiFi

Где указаны файлы, которые будут использоваться в nifi?По-видимому, для более чем правильного потока, работа процессоров продолжает зависеть от файлов nar с библиотеками, принадлежащими его версии.

Спасибо!

Answer 2

Чувствительные свойства в файле flow.xml.gz зашифрованы ключом, полученным из записи nifi.sensitive.props.key в nifi.properties.Если это значение само по себе зашифровано (то есть имеет форму abcdef...||abcdef...), вам также необходимо скопировать значение nifi.bootstrap.sensitive.key из bootstrap.conf.С этими двумя значениями (и с использованием того же алгоритма для KDF и шифрования, как указано в nifi.sensitive.props.algorithm в nifi.properties), ваш новый экземпляр NiFi должен иметь возможность дешифровать чувствительные свойства процессор , которые встроены взашифрованная форма в flow.xml.gz.