气流 - ModuleNotFoundError：没有名为“kubernetes”的模块

Question

我在我的机器上安装了 Python、Docker 并试图导入， from airflow.contrib.operators.kubernetes_pod_operator import KubernetesPodOperator但是当我连接 docker 时，我收到该模块不存在的消息。我已经做了pip install apache-airflow[kubernetes]，我仍然有同样的错误。是否有特定的机器位置我应该检查库是否已实际安装？我能做些什么来解决这个问题？

from airflow import DAG
from datetime import datetime, timedelta
from airflow.contrib.operators.kubernetes_pod_operator import KubernetesPodOperator
from airflow.operators.dummy_operator import DummyOperator
import logging
import os
from airflow.utils.helpers import parse_template_string

default_args = {
    'owner': 'airflow',
    'depends_on_past': False,
    'start_date': datetime.utcnow(),
    'email': ['airflow@example.com'],
    'email_on_failure': False,
    'email_on_retry': False,
    'retries': 1,
    'retry_delay': timedelta(minutes=5)
}

dag = DAG(
    'kubernetes_sample', default_args=default_args, schedule_interval=timedelta(minutes=10))


start = DummyOperator(task_id='run_this_first', dag=dag)

passing = KubernetesPodOperator(namespace='default',
                          image="Python:3.6",
                          cmds=["Python","-c"],
                          arguments=["print('hello world')"],
                          labels={"foo": "bar"},
                          name="passing-test",
                          task_id="passing-task",
                          get_logs=True,
                          dag=dag
                          )

failing = KubernetesPodOperator(namespace='default',
                          image="ubuntu:1604",
                          cmds=["Python","-c"],
                          arguments=["print('hello world')"],
                          labels={"foo": "bar"},
                          name="fail",
                          task_id="failing-task",
                          get_logs=True,
                          dag=dag
                          )

passing.set_upstream(start)
failing.set_upstream(start)

webserver_1 | 回溯（最近一次调用最后一次）：webserver_1 |
文件“/usr/local/lib/python3.6/site-packages/airflow/models.py”，第377行，在process_file webserver_1 | m = imp.load_source(mod_name, filepath) webserver_1 | 文件“/usr/local/lib/python3.6/imp.py”，第 172 行，在 load_source webserver_1 | 模块 = _load(spec) webserver_1 | _load webserver_1 中的文件“”，第 684 行 | _load_unlocked webserver_1 中的文件“”，第 665 行 | 文件“”，第 678 行，位于 exec_module webserver_1 | 文件“”，第 219 行，在 _call_with_frames_removed webserver_1 | 文件“/usr/local/airflow/dags/example_airflow.py”，第 3 行，在 webserver_1 | 从airflow.contrib.operators.kubernetes_pod_operator 导入KubernetesPodOperator webserver_1 | 文件“/usr/local/lib/python3.

Answer 1

运行以下

pip install apache-airflow[kubernetes]

之后重新启动 Airflow 网络服务器和调度程序。