Воздушный поток - ModuleNotFoundError: нет модуля с именем «kubernetes» - PullRequest
0 голосов
/ 24 мая 2019

Я установил Python, Docker на свою машину и пытаюсь импортировать from airflow.contrib.operators.kubernetes_pod_operator import KubernetesPodOperator но когда я подключаю докер, я получаю сообщение о том, что модуль не существует. Я уже сделал pip install apache-airflow[kubernetes] и у меня все та же ошибка. Есть ли конкретное местоположение компьютера, на котором я должен проверить, установлена ​​ли библиотека на самом деле? Что я могу сделать, чтобы решить эту проблему?

enter image description here

from airflow import DAG
from datetime import datetime, timedelta
from airflow.contrib.operators.kubernetes_pod_operator import KubernetesPodOperator
from airflow.operators.dummy_operator import DummyOperator
import logging
import os
from airflow.utils.helpers import parse_template_string

default_args = {
    'owner': 'airflow',
    'depends_on_past': False,
    'start_date': datetime.utcnow(),
    'email': ['airflow@example.com'],
    'email_on_failure': False,
    'email_on_retry': False,
    'retries': 1,
    'retry_delay': timedelta(minutes=5)
}

dag = DAG(
    'kubernetes_sample', default_args=default_args, schedule_interval=timedelta(minutes=10))


start = DummyOperator(task_id='run_this_first', dag=dag)

passing = KubernetesPodOperator(namespace='default',
                          image="Python:3.6",
                          cmds=["Python","-c"],
                          arguments=["print('hello world')"],
                          labels={"foo": "bar"},
                          name="passing-test",
                          task_id="passing-task",
                          get_logs=True,
                          dag=dag
                          )

failing = KubernetesPodOperator(namespace='default',
                          image="ubuntu:1604",
                          cmds=["Python","-c"],
                          arguments=["print('hello world')"],
                          labels={"foo": "bar"},
                          name="fail",
                          task_id="failing-task",
                          get_logs=True,
                          dag=dag
                          )

passing.set_upstream(start)
failing.set_upstream(start)

webserver_1 | Traceback (последний вызов был последним): webserver_1 |
Файл "/usr/local/lib/python3.6/site-packages/airflow/models.py", строка 377, в файле_процесса webserver_1 | m = imp.load_source (mod_name, путь к файлу) webserver_1 | Файл "/usr/local/lib/python3.6/imp.py", строка 172, в load_source webserver_1 | module = _load (spec) webserver_1 | Файл "", строка 684, в _load веб-сервер_1 | Файл "", строка 665, в _load_unlocked webserver_1 | Файл "", строка 678, в exec_module webserver_1 | Файл "", строка 219, в _call_with_frames_removed webserver_1 | Файл "/usr/local/airflow/dags/example_airflow.py", строка 3, в webserver_1 | от airflow.contrib.operators.kubernetes_pod_operator import KubernetesPodOperator webserver_1 | файл "/Usr/local/lib/python3.6/site-packages/airflow/contrib/operators/kubernetes_pod_operator.py", строка 21, в webserver_1 | от airflow.contrib.kubernetes import kube_client, pod_generator, pod_launcher webserver_1 | файл "/Usr/local/lib/python3.6/site-packages/airflow/contrib/kubernetes/pod_launcher.py", строка 25, в webserver_1 | от импортных часов kubernetes, клиент webserver_1 | ModuleNotFoundError: модуль не указан 'Kubernetes'

Ответы [ 2 ]

1 голос
/ 25 мая 2019

Он пытается импортировать модуль с именем kubernetes.Попробуйте это:

pip install kubernetes
0 голосов
/ 25 мая 2019

Запустите следующее

pip install apache-airflow[kubernetes]

После этого перезапустите веб-сервер и планировщик Airflow.

...