相关疑难解决方法(0)

气流没有正确安排Python

码:

Python版本2.7.x和气流版本1.5.1

我的dag脚本就是这个

from airflow import DAG
from airflow.operators import BashOperator
from datetime import datetime, timedelta


default_args = {
'owner': 'xyz',
'depends_on_past': False,
'start_date': datetime(2015,10,13),
'email': ['xyz@email.in'],
'schedule_interval':timedelta(minutes=5),
'email_on_failure': True,
'email_on_retry': True,
'retries': 1,
'retry_delay': timedelta(minutes=5),
}
dag = DAG('testing', default_args=default_args)
run_this_first = BashOperator(task_id='Start1',bash_command='date', dag=dag)
for i in range(5):
    t = BashOperator(task_id="Orders1"+str(i), bash_command='sleep 5',dag=dag)
    t.set_upstream(run_this_first)
Run Code Online (Sandbox Code Playgroud)

从那你可以看出我正在创建一个包含6个任务的DAG,第一个任务(Start1)首先启动,之后所有其他五个任务开始

目前我在DAG开始之间给出了5分钟的时间延迟

它已经完美地运行了第一种类型的所有六个任务,但是在五分钟后DAG没有重新启动

已经超过1小时DAG没有重新启动我真的不知道我错了.

如果有人可以指出我出了什么问题,那将是非常好的.我尝试用airflow testing clear同样的事情清理然后发生.它运行第一个实例然后就站在那里.

命令行显示的唯一内容是 Getting all instance for DAG testing

当我更改schedule_interval的位置时,它只运行任何调度间隔parallel.That在5分钟内完成300或更多任务实例.没有5分钟的计划间隔

代码2:

from airflow import DAG
from airflow.operators import …
Run Code Online (Sandbox Code Playgroud)

python airflow

11
推荐指数
1
解决办法
1万
查看次数

标签 统计

airflow ×1

python ×1