Lea*_*neR 1 azure azure-data-factory azure-log-analytics kql azure-data-explorer
我有一个 ADF 管道,我正在尝试查询其故障日志。我需要根据我在管道运行中使用的参数来分析日志。我的示例查询如下:
ADFPipelineRun
| project JobId, PLName, JobStatus, PL_param, Status
| where PLName == "org_daily_data_load"
| where Status == "Failed"
| where PL_param contains 'org_erp_sap'
Run Code Online (Sandbox Code Playgroud)
这有效。但我需要分析各种参数的结果。但参数相似但并不总是相同。它们因日期和时间而异,如下所示:
参数:
org_erp_sap_20201104_063418
ABC_ENV_D_20210329_174033
123_xyz_abc_20210801_101923
org_erp_sap_20210504_143418
123_xyz_abc_20210401_121923
Run Code Online (Sandbox Code Playgroud)
正如您在上面看到的,日期不同,但参数中有一个共同的字符串部分。如果我想检查这些参数的日志,我必须手动更改where PL_param contains每个查询的子句中的参数,如下所示:
ADFPipelineRun
| project JobId, PLName, JobStatus, PL_param, Status
| where PLName == "org_daily_data_load"
| where Status == "Failed"
| where PL_param contains 'org_erp_sap'
ADFPipelineRun
| project JobId, PLName, JobStatus, PL_param, Status
| where PLName == "org_daily_data_load"
| where Status == "Failed"
| where PL_param contains 'ABC_ENV_D'
ADFPipelineRun
| project JobId, PLName, JobStatus, PL_param, Status
| where PLName == "org_daily_data_load"
| where Status == "Failed"
| where PL_param contains '123_xyz_abc'
Run Code Online (Sandbox Code Playgroud)
有没有办法使contains子句仅使用公共字符串部分采用多个值,而不管后面的日期和时间戳信息如何?像下面这样:
ADFPipelineRun
| project JobId, PLName, JobStatus, PL_param, Status
| where PLName == "org_daily_data_load"
| where Status == "Failed"
| where PL_param contains 'org_erp_sap%' OR 'ABC_ENV_D%' OR '123_xyz_abc%'
Run Code Online (Sandbox Code Playgroud)
这是我第一次使用 KQL 和 Azure Log Analytics,我不知道如何实现这一点。有人可以帮忙吗?
如果我理解正确的话,您想要的只是将所有变量放在一处。为此let,您可以使用如下语句:
let PLName = "org_daily_data_load";
let StatusToLookFor = "Failed";
// etc...
ADFPipelineRun
| project JobId, PLName, JobStatus, PL_param, Status
| where PLName == PLNameToLookFor
| where Status == StatusToLookFor
| where PL_param contains 'org_erp_sap%' OR 'ABC_ENV_D%' OR '123_xyz_abc%'
Run Code Online (Sandbox Code Playgroud)
has顺便说一句,如果您正在寻找完整的单词,那么使用它比contains使用索引要高效得多。您还可以使用更方便的语法,如下所示:
| where PL_param has_any ('org_erp_sap%', 'ABC_ENV_D%', '123_xyz_abc%')
Run Code Online (Sandbox Code Playgroud)
如果你想在查询开始时声明这个列表,那么你可以这样做:
let PLParamsToLookFor = dynamic(['org_erp_sap%', 'ABC_ENV_D%', '123_xyz_abc%']);
ADFPipelineRun
...
| where PL_param has_any (PLParamsToLookFor)
Run Code Online (Sandbox Code Playgroud)
| 归档时间: |
|
| 查看次数: |
11233 次 |
| 最近记录: |