小编bku*_*rac的帖子

Apache Airflow:Dag 任务标记为僵尸,后台进程在远程服务器上运行

**Apache Airflow 版本:**1.10.9-composer

Kubernetes 版本:客户端版本:version.Info{主要:“1”,次要:“15+”​​,GitVersion:“v1.15.12-gke.6002”,GitCommit:“035184604aff4de66f7db7fddadb8e7be76b6717”,GitTreeState:“clean”,BuildDate:“ 2020-12-01T23:13:35Z",Go版本:"go1.12.17b4",编译器:"gc",平台:"linux/amd64"}

环境: Airflow,运行在 Kubernetes 之上 - Linux 版本 4.19.112

  • 操作系统: Linux 版本 4.19.112+ (builder@7fc5cdead624) (Chromium OS 9.0_pre361749_p20190714-r4 clang 版本 9.0.0 (/var/cache/chromeos-cache/distfiles/host/egit-src/llvm-project c11de5eada2decd0a495ea02676b6f483 8cd54fb)(基于在 LLVM 9.0.0svn)) #1 SMP 2020 年 9 月 4 日星期五 12:00:04 PDT 2020
  • 内核: Linux gke-europe-west2-asset-c-default-pool-dc35e2f2-0vgz 4.19.112+ #1 SMP Fri Sep 4 12:00:04 PDT 2020 x86_64 Intel(R) Xeon(R) CPU @ 2.20GHz正版英特尔 GNU/Linux

发生了什么 ? 正在运行的任务在执行时间超过最新心跳+5分钟后被标记为“僵尸”。该任务在另一个应用程序服务器的后台运行,使用 SSHOperator 触发。

    [2021-01-18 11:53:37,491] {taskinstance.py:888} INFO - Executing <Task(SSHOperator): load_trds_option_composite_file> on 2021-01-17T11:40:00+00:00
    [2021-01-18 11:53:37,495] {base_task_runner.py:131} INFO …
Run Code Online (Sandbox Code Playgroud)

airflow

8
推荐指数
0
解决办法
8435
查看次数

标签 统计

airflow ×1