aiflow max active dag run到达

时间:2016-11-15 12:26:50

标签: python airflow

一旦Airflow启动,就不会执行特定dag的dag运行并达到最大活动dag。即使在将dag运行状态设置为成功之后,Scheduler似乎也没有将新计划的任务移动到执行状态。所有活动的dag运行都处于“运行”状态。这只发生在一些dags上。有人可以帮忙吗?

2 个答案:

答案 0 :(得分:0)

检查实例任务详细信息以找出阻止DAG执行的问题。 enter image description here

答案 1 :(得分:0)

这意味着将 dag_concurrency 设置为比您尝试使用的并发任务更少的数量。有一个名为airflow.cfg的文件,您可以在其中更改某些执行配置,其中一个是 dag_concurrency ,可能将其设置为'6',以增加您的需要,只需确保它不超过可能导致问题的并行度的数量。

相关问题