невозможно развернуть дебезиум на миникубе - PullRequest
0 голосов
/ 08 декабря 2018

Я новичок в kubernetes, я пытаюсь интегрировать kafka с debezium и mysql.я успешно развернул kafka и mysql на миникубе, как только я развернул debezium yml на миникубе, он завис и вообще не отвечает, затем перезагружаю миникуб, после запуска всех pod миникуб снова завис.ниже мой код:

служба zookeeper

 apiVersion: v1
kind: Service
metadata:
  name: zoo1
  labels:
    app: zookeeper-1
spec:
  ports:
  - name: client
    port: 2181
    protocol: TCP
  - name: follower
    port: 2888
    protocol: TCP
  - name: leader
    port: 3888
    protocol: TCP
  selector:
    app: zookeeper-1

развертывание zookeeper:

kind: Deployment
apiVersion: extensions/v1beta1
metadata:
  name: zookeeper-deployment-1
spec:
  template:
    metadata:
      labels:
        app: zookeeper-1
    spec:
      containers:
      - name: zoo1
        image: debezium/zookeeper
        ports:
        - containerPort: 2181
        env:
        - name: ZOOKEEPER_ID
          value: "1"
        - name: ZOOKEEPER_SERVER_1
          value: zoo1

служба kafka:

apiVersion: v1
kind: Service
metadata:
  name: kafka-service
  labels:
    name: kafka
spec:
  ports:
  - port: 9092
    name: kafka-port
    protocol: TCP
  selector:
    app: kafka
    id: "1"
  type: NodePort

kafka deployemnt:

kind: Deployment
apiVersion: extensions/v1beta1
metadata:
  name: kafka-broker1
spec:
  template:
    metadata:
      labels:
        selector: kafka
        app: kafka
        id: "1"
    spec:
      containers:
      - name: kafka
        image: debezium/kafka
        ports:
        - containerPort: 9092
        env:
        - name: KAFKA_ADVERTISED_PORT
          value: "9092"
        - name: KAFKA_ADVERTISED_HOST_NAME
          value: 192.168.39.47
        - name: KAFKA_ZOOKEEPER_CONNECT
          value: zoo1:2181
        - name: KAFKA_BROKER_ID
          value: "1"
        - name: KAFKA_CREATE_TOPICS
          value: hello-topic:3:3

Том MySql-persistance:

#application/mysql/mysql-pv.yaml  
kind: PersistentVolume
apiVersion: v1
metadata:
  name: mysql-pv-volume
  labels:
    type: local
spec:
  storageClassName: manual
  capacity:
    storage: 1Gi
  accessModes:
    - ReadWriteOnce
  hostPath:
    path: "/mnt/data"
---
apiVersion: v1
kind: PersistentVolumeClaim
metadata:
  name: mysql-pv-claim
spec:
  storageClassName: manual
  accessModes:
    - ReadWriteOnce
  resources:
    requests:
      storage: 1Gi

Развертывание mysql:

#application/mysql/mysql-deployment.yaml 
# this command is for mysql client   kubectl run -it --rm --image=debezium/example-mysql --restart=Never mysql-client -- mysql -h mysql -pdebezium 
apiVersion: v1
kind: Service
metadata:
  name: mysql
spec:
  ports:
  - port: 3306
  selector:
    app: mysql
  clusterIP: None
---
apiVersion: extensions/v1beta1  # for versions before 1.9.0 use apps/v1beta2
kind: Deployment
metadata:
  name: mysql
spec:
  selector:
    matchLabels:
      app: mysql
  strategy:
    type: Recreate
  template:
    metadata:
      labels:
        app: mysql
    spec:
      containers:
      - image: debezium/example-mysql
        name: mysql
        env:
          # Use secret in real usage
        - name: MYSQL_ROOT_PASSWORD
          value: debezium
        - name: MYSQL_USER
          value: mysqluser
        - name: MYSQL_PASSWORD
          value: mysqlpw
        ports:
        - containerPort: 3306
          name: mysql
        volumeMounts:
        - name: mysql-persistent-storage
          mountPath: /var/lib/mysql
      volumes:
      - name: mysql-persistent-storage
        persistentVolumeClaim:
          claimName: mysql-pv-claim

Развертывание Debezium:

kind: Deployment
apiVersion: extensions/v1beta1
metadata:
  name: debezium-connect-source
spec:
  selector:
    matchLabels:
      app: debezium-connect-source
  replicas: 1
  template:
    metadata:
      labels:
        app: debezium-connect-source
    spec:
      terminationGracePeriodSeconds: 30
      containers:
      - name: debezium-connect-source
        image: debezium/connect
        env:
        - name: BOOTSTRAP_SERVERS
          value: kafka-service:9092
        - name: GROUP_ID
          value: "1"
        - name: CONFIG_STORAGE_TOPIC
          value: debezium-connect-source_config
        - name: OFFSET_STORAGE_TOPIC
          value: debezium-connect-source_offset
        ports:
        - containerPort: 8083
          name: dm-c-source

при развертыванииДебезиум, затем проблема запускается и реакция мини-куба как

$ kubectl get pods
Unable to connect to the server: net/http: TLS handshake timeout

ОС: Centos
Версия мини-куба: v0.30.0

Ответы [ 2 ]

0 голосов
/ 12 декабря 2018

Вы должны установить ограничения памяти для модулей на основе Java.Старые версии Java воспринимают всю гостевую память как собственную и с радостью полностью ее используют - и запущено как минимум три JVM.

0 голосов
/ 08 декабря 2018

Я полагаю, что это происходит из-за нехватки ресурсов на виртуальной машине, запущенной minikube.

По умолчанию, когда вы начинаете использовать minikube start, она занимает только 2 ЦП и 2 ГБ ОЗУ вашей системы, иглядя на ваши развертывания (kafka + mysql + debezium), этого может быть недостаточно.

Вы можете увеличить ЦП и память, выделенные для ВМ, используя minikube start с параметрами --cpu и --memory (значение должно быть в МБ).

Для получения дополнительной информации вам следует сделатьminikube start -h

Я настоятельно рекомендую, если вы хотите настроить интенсивное развертывание, вам следует использовать машины с большим количеством ресурсов.

Надеюсь, это поможет.

...