我正在尝试构建一个循环处理 Dynamics 365 中的实体列表的管道,并将数据导出到每个实体的镶木地板文件中,这样我就不必为每个实体构建管道。
但是我无法在映射选项卡中导入架构。
有没有办法动态导入模式?或者也许创建另一个管道来提取模式然后导入它?
最新版本的 Azure Synapse Link for Dataverse(截至目前)可以将数据导出为 Delta Lake 格式。这只是通过 GUI 的一个选项。创建新链接时选择“使用 Spark 池进行 Delta Lake 数据转换作业”选项:
更多详情请点击这里:
https://learn.microsoft.com/en-us/power-apps/maker/data-platform/azure-synapse-link-delta-lake
使用 Spark 池是有成本的,因此请考虑降低频率,例如每小时、每天两次、每天等