小编Joe*_*988的帖子

在气流 DAG 中出现错误,不支持 >> 的操作数类型:“列表”和“列表”。任务的顺序和并行执行

我是 Apache 气流和 DAG 的新手。DAG 中共有 6 个任务(task1、task2、task3、task4、task5、task6)。但是在运行 DAG 时,我们收到以下错误。

DAG 不支持 >> 的操作数类型:“列表”和“列表”

下面是我的 DAG 代码。请帮忙。我是气流的新手。

from airflow import DAG
from datetime import datetime
from airflow.providers.databricks.operators.databricks import DatabricksSubmitRunOperator


default_args = {
    'owner': 'airflow',
    'depends_on_past': False
}

dag = DAG('DAG_FOR_TEST',default_args=default_args,schedule_interval=None,max_active_runs=3, start_date=datetime(2020, 7, 14)) 


#################### CREATE TASK #####################################   

task_1 = DatabricksSubmitRunOperator(
    task_id='task_1',
    databricks_conn_id='connection_id_details',
    existing_cluster_id='{{ dag_run.conf.clusterId }}',
    libraries= [
        {
        'jar': 'dbfs:/task_1/task_1.jar'
        }        
        ],
    spark_jar_task={
        'main_class_name': 'com.task_1.driver.TestClass1',
        'parameters' : [
            '{{ dag_run.conf.json }}'       
        ]
    }
)



    
task_2 = DatabricksSubmitRunOperator(
    task_id='task_2',
    databricks_conn_id='connection_id_details',
    existing_cluster_id='{{ …
Run Code Online (Sandbox Code Playgroud)

python directed-acyclic-graphs airflow airflow-scheduler

1
推荐指数
2
解决办法
2089
查看次数