小编7yl*_*l4r的帖子

Image我认为这就是全部:

用于调整js/html面板大小的拖动功能已经消失,js窗格太小了!最大的问题是重新启动浏览器,清除缓存和删除cookie后,此问题仍然存在.如何重置这个以便我可以再次使用jsfiddle？

我正在尝试清除失败的任务，以便它再次运行。

我通常使用树视图中的 Web GUI 执行此操作

选择“清除”后，我被定向到一个错误页面：

此页面上的回溯与我在尝试使用 CLI 清除此任务时收到的错误相同：

[u@airflow01 ~]# airflow clear -s 2002-07-29T20:25:00 -t 
coverage_check  gom_modis_aqua_coverage_check 
[2018-01-16 16:21:04,235] {__init__.py:57} INFO - Using executor CeleryExecutor
[2018-01-16 16:21:05,192] {models.py:167} INFO - Filling up the DagBag from /root/airflow/dags
Traceback (most recent call last):
  File "/usr/bin/airflow", line 28, in <module>
    args.func(args)
  File "/usr/lib/python3.4/site-packages/airflow/bin/cli.py", line 612, in clear
    include_upstream=args.upstream,
  File "/usr/lib/python3.4/site-packages/airflow/models.py", line 3173, in sub_dag
    dag = copy.deepcopy(self)
  File "/usr/lib64/python3.4/copy.py", line 166, in deepcopy
    y = copier(memo)
  File "/usr/lib/python3.4/site-packages/airflow/models.py", line 3159, in __deepcopy__ …

我的气流管道由于多种不同的原因陷入了僵局状态，每次解决问题都是一场猜谜游戏。我想为管道出现僵局时创建一个清单。

使用气流时最常见的死锁原因是什么？应采取哪些步骤来验证和修复每种类型的死锁？

我正在尝试诊断一个表现不佳的气流管道,我想知道我应该从气流调度程序中得到什么样的性能,类似于"每秒安排的任务".

我有几个排队的工作,我的许多任务在几秒钟内完成,所以我怀疑调度程序是限制组件,我有很多快速任务的错误.如果可以避免,我宁愿不重写我的DAG.

我该怎么做才能提高调度程序排队任务的速率？

管道细节

这是我目前的airflow.cfg的样子.

我只有两个笨蛋跑.一个是每5分钟安排一个,另一个很少由第一个触发.我目前正试图以这个频率回填几年,但可能需要改变我的方法:

至于工作节点:我目前有4个相当强大的服务器,在磁盘,网络,CPU,RAM,交换中的资源使用率低于10%.关闭3个工作人员对我的任务吞吐量没有影响,服务器几乎没有记录工作量的变化.