使用 azure 数据工厂，在没有日期或主键列的情况下进行增量加载。

Question

我有一个源，让我们说SQL DB或Oracle数据库，我想拉表数据到Azure SQL数据库。但问题是，我没有任何日期列的数据被插入或主键列。因此，是否有任何其他方法来执行此操作。

Answer 1

半递增的一种方法是在源表的相当稳定的列分区表，然后你可以使用映射数据流比较的分区（可以做行数，聚合，哈希字节等）。每次加载你都把比较输出存储在分区元数据的某个地方，以便下次加载时能够再次比较。这样一来，你就可以只重新加载自上次加载以来发生变化的分区。