如何创建 Kusto 函数以在 azure 数据资源管理器中获取增量记录

Question

我创建了一个 ADF 管道，用于使用查询选项将数据从 Azure 数据浏览器 Kusto 复制到 dataverse，源中具有 200k 记录，但我需要复制增量负载，如何在 kusto 中编写函数

我正在尝试创建一个 ADF 管道，用于使用带有查询选项的复制活动将数据从 Kusto 复制到 dataverse，我需要将增量加载副本复制到 dataverse。如何为增量记录创建 Kusto 函数

Answer 1

为了仅从 Kusto 复制增量记录，您可以在复制活动中使用查询选项。

在复制活动的查询文本框中给出查询。

查询的编写方式应使其仅从源中过滤所需的增量记录。

例如，如果您的数据如下所示，

date, id
2024-01-01,1
2024-02-01,2
2024-03-02,3

如果您已复制上述所有记录，然后如果增量记录如下所示，

date, id
2024-04-01,4
2024-05-04,5

您可以在复制活动中给出查询，例如，

table1
|where date>'2024-03-02'

这样您就可以从 kusto 复制增量记录。