Не удается запустить Kafka-Connect в качестве службы на CentOS 7 - PullRequest
0 голосов
/ 19 октября 2018

У меня есть среда Kafka (Zookeeper + Kafka Server + Kafka-Connect), которая отлично работает, когда я использую командную строку для запуска каждого отдельного компонента в CentOS 7.

Теперь я настраиваю эти компоненты Kafka длязапустить как сервис.Для этого я создал файлы .service и поместил его в папку / etc / systemd / system.Ниже приведены файлы

zookeeper.service

#!/bin/bash
# vi /etc/systemd/system/zookeeper.service
[Unit]
Description=This service will start Zookeeper server which will be used by Kafka Server. 
Requires=network.target remote-fs.target
After=network.target remote-fs.target

[Service]
Type=simple
ExecStart=/opt/interactcrm/kafka_2.11-1.0.1/bin/zookeeper-server-start.sh /opt/interactcrm/kafka_2.11-1.0.1/config/zookeeper.properties
ExecStop=/opt/interactcrm/kafka_2.11-1.0.1/bin/zookeeper-server-stop.sh
TimeoutStartSec=0
Restart=on-abnormal

[Install]
WantedBy=multi-user.target

kafka.service

#!/bin/bash
# vi /etc/systemd/system/kafka.service
[Unit]
Description=This service will start Kafka server. 
Requires=zookeeper.service
After=zookeeper.service

[Service]
Type=simple
ExecStart=/opt/interactcrm/kafka_2.11-1.0.1/bin/kafka-server-start.sh /opt/interactcrm/kafka_2.11-1.0.1/config/server.properties
ExecStop=/opt/interactcrm/kafka_2.11-1.0.1/bin/kafka-server-stop.sh
TimeoutStartSec=0
Restart=on-abnormal

[Install]
WantedBy=multi-user.target

Кафка-connect.service

#!/bin/bash
# vi /etc/systemd/system/kafkaconnect.service
[Unit]
Description=This service will start Kafka Connect Service. 
Requires=network.target remote-fs.target nss-lookup.target kafka.service kafka.service
After=network.target remote-fs.target nss-lookup.target kafka.service 


[Service]
Type=forking
Environment="KAFKA_JMX_OPTS=-Dcom.sun.management.jmxremote -Dcom.sun.management.jmxremote.port=10040 -Dcom.sun.management.jmxremote.local.only=true -Dcom.sun.management.jmxremote.authenticate=false"
Environment="LOG_DIR=/var/log/kafka-logs"
ExecStart=/opt/interactcrm/kafka_2.11-1.0.1/bin/connect-distributed.sh /opt/interactcrm/kafka_2.11-1.0.1/config/connect-distributed.properties
TimeoutStartSec=1000
#Restart=on-abnormal
#SuccessExitStatus=143

[Install]
WantedBy=multi-user.target

Сервисы Zookeeper и Kafka запускаются без проблем.Я могу создавать темы, а затем делать операции над темой.Проблема с сервисом Kafka Connect.

Когда я пытаюсь запустить службу с помощью команды systemctl, служба не запускается.Застревает без следующего журнала ::

Oct 19 18:29:20 localhost.localdomain connect-distributed.sh[1071]: [2018-10-19 18:29:20,713] INFO Added plugin 'io.debezium.connector.mysql.MySqlConnector...er:136)
Oct 19 18:29:20 localhost.localdomain connect-distributed.sh[1071]: [2018-10-19 18:29:20,713] INFO Added plugin 'io.debezium.transforms.ByLogicalTableRoute...er:136)
Oct 19 18:29:20 localhost.localdomain connect-distributed.sh[1071]: [2018-10-19 18:29:20,713] INFO Added plugin 'io.debezium.transforms.UnwrapFromEnvelope'...er:136)
Oct 19 18:29:20 localhost.localdomain connect-distributed.sh[1071]: [2018-10-19 18:29:20,761] INFO Loading plugin from: /opt/interactcrm/debezium/debezium ...er:184)
Oct 19 18:29:28 localhost.localdomain connect-distributed.sh[1071]: [2018-10-19 18:29:28,725] INFO Registered loader: PluginClassLoader{pluginLocation=file...er:207)

Я не могу найти никаких журналов для этого процесса в журналах сообщений после этой строки, и в других журналах нет ошибок.Процесс застревает в этой строке ::

INFO Зарегистрированный загрузчик: PluginClassLoader {pluginLocation = file ... er: 207)

Независимо от того, насколько я увеличуТайм-аут этот процесс никогда не начинается.Но когда я запускаю ту же команду из командной строки, служба запускается правильно.

Я попытался удалить все коннекторы из пути к плагину, чтобы посмотреть, запускается ли служба, но она застревает на одной линии.

Ниже приводится моя контрольная точка ::

Служба Kafka-Connect

...