ADFv2 队列时间

fgb*_*ezp 4 azure azure-data-factory-2

我有一个包含一些复制活动的管道。其中一些活动负责以压缩方式将大量数据从存储帐户复制到同一个存储帐户(我指的是几 TB 数据)。

运行管道几个小时后,我注意到一些活动在监控刀片上显示“排队”时间,我想知道“排队”时间的原因是什么。更重要的是,如果我在那个时候被收费也是因为据我所知,我的 ADF 没有做任何事情。

排队时间

有人可以透露一些信息吗?:)

fgb*_*ezp 6

(由于评论字符限制,将此作为答案发布)

在与 Azure 支持人员进行了长时间的讨论并联系了 ADF 产品团队的某个人之后,我得到了一些答案:

1 - 排队时间不计费。

2 - 最初,编排 ADF 系统将作业放入队列中,并获得“排队时间”,直到基础设施接收它并开始处理部分。

3 - 在我的情况下,由于底层后端执行程序(它使用 Azure Batch)中的错误,作业开始后排队时间增加。显然,执行程序崩溃了,我的工作正在遭受“重新取货”时间的困扰,从而增加了排队时间。这解释了为什么一段时间后我开始看到执行时间和传输的数据正在减少。这个错误修正的预计到达时间是在月底。此外,我正在执行的工作超时(7 天后),在检查帐单后,我确认我没有为此收取一毛钱。