azure-data-factory 相关问题

Microsoft Azure Data Factory是一种云服务,用于使用时间片的概念以受控方式调用(编排)其他Azure服务。数据工厂主要使用手工制作的JSON开发,这为工具提供了执行哪些活动的说明。虽然仍处于预览阶段,但Azure Data Factory V2的引入可以使用api而不仅仅是JSON文件提供更轻松的数据集成体验。

Azure 数据工厂未在 MySQL 中创建新表

我正在尝试使用 Azure 数据工厂将数据从 Sharepoint List 复制到 Azure Database for MySQL。我希望每次运行此数据管道时,ADF 都必须创建一个新表并复制数据

回答 1 投票 0

如何使用 ADF 将多个文件夹连同文件从一个 Blob 容器复制到多个子文件夹中的另一个 Blob?

我正在使用 ADF 管道将多个文件夹中存在的多个数据集镶木地板文件从一个源 blob 容器(客户端容器)复制到我们的 blob 容器。 不过,我不想复制它

回答 1 投票 0

将 Microsoft Fabric 数据工厂连接到 Azure 存储库 - 管道不可见

我已按照 https://learn.microsoft.com/en-us/fabric/admin/about-tenant-settings#how-to-get-to-the-tenant-settings 指南了解如何连接数据来自 Microsoft Fabric Azure DevOps 的工厂重新...

回答 1 投票 0

使用 Lookup 活动输出作为 ADF 中 ForEach 循环内活动的源

我需要使用查找的输出作为 ForEach 循环内的示例管道的源。所以1.我有一个excel作为查找源,其中包含一列“代码”。列中的每一行都有...

回答 1 投票 0

在 Azure 数据工厂中将布尔值转换为 1 和 0

我有一个包含布尔值的 JSON 文件,我想知道是否真的可以在管道内将这些 TRUE 和 FALSE 转换为 1 和 0? 任何帮助或信息

回答 2 投票 0

尝试创建管道时,AzureDevOps 管道“经典编辑器”不可见

我正在尝试在 AzureDevOps 中为我们的 Azure 数据工厂 CI/CD 流程创建管道。我想使用“经典编辑器”来创建管道,请参见图片。 但是,当我选择“创建”时

回答 1 投票 0

Azure Datafactory 数据流中的科学记数法

使用数据流读取数据时,我发现非常大或非常小的数字会自动转换为科学计数法。正在读取的数据是从单个...

回答 1 投票 0

在 Azure 数据工厂 (ADF) 中,链接服务在实时模式和 Git 模式之间似乎不同步

我使用 Azure DevOps 将 Azure 数据工厂 (ADF) 从开发环境部署到临时环境。在实时模式下,ADF 暂存中的所有服务就像在...

回答 1 投票 0

在 ADF 中,我想在接收器中创建一个表,并使用该表创建主键。我怎样才能做到这一点?

假设我有一个源表Table1,以PK为ID,那么如何在sink中创建与Table1相同的表,其中包含PK ID? 我想首先通过 ADF 创建表,然后使用

回答 1 投票 0

链接服务未出现在 Azure 数据工厂中

我正在执行 az datafactory 链接服务创建 命令,该命令在我的 ADF 中创建一个新的链接服务。这是可见的。但是,将 ADF 与 Git 集成后,相同的命令会返回

回答 2 投票 0

数据工厂管道因各种错误而失败

我建立了一个 Azure 数据工厂,以 MongoDB 作为源,并使用 Delta Lake Storage Gen2。 所有连接(到源和目标目的地)均已成功检查。但是

回答 2 投票 0

Azure DevOps 版本的 ADF 从开发到生产。如何让发布不影响链接服务

我有 2 个主要订阅:开发和生产,以及其特定的 ADF 项目。 两个数据工厂具有完全相同的版本,但唯一的主要区别是链接服务:Dev LS ...

回答 1 投票 0

具有对象 ID 的客户端无权在范围内执行操作“Microsoft.DataFactory/factories/triggers/write”

我已在 Azure DevOps 中创建了一个 YAML 管道,以使用以下任务部署 Azure 数据工厂: - 任务:部署-adf-json@2 输入: 天蓝色订阅:''

回答 1 投票 0

如何从数据工厂发送带有查询输出结果作为附件的电子邮件?

我有一个数据存入 SSMS 表中,我需要使用数据工厂将其作为电子邮件附件发送。有任何建议以这种方式设置管道,以便我可以查询表中的数据并附加...

回答 2 投票 0

Azure 数据工厂中 CICD 后出现链接服务错误

执行从 ADF 的 dev 到 qa 的 CICD 后,所有其他资源均已就位,但链接服务未正确设置,并出现以下错误 数据工厂 Data-Factory-Ds-qa 没有 MI 规定...

回答 1 投票 0

如果源中没有可用,ADF 复制会主动添加附加列

我有 10 个文件,它们的列数不同,但所有文件的目标都是相同的。 因为我们知道复制活动总是在源和目标中寻找相同数量的列,所以我的计划...

回答 1 投票 0

运行ToList时出现内部连接致命错误

在我的业务中,我从 DataFactory 并行调用多个 Azure 函数。 如果此时尝试执行 ToList,则 Close() 过程中会发生错误,如下所示。 系统.InvalidOperationExc...

回答 1 投票 0

DelimitedText (csv) 数据集自动将文件路径编码为 urlencoding 格式,连续的复制活动无法找到 blob

我有一个数据工厂,它在 foreach 循环内具有数据流活动和连续复制活动。数据流从 bob sto 中的源容器中提取文件夹路径和文件名...

回答 1 投票 0

如何参数化数据集,以便我可以使用 blob 文件夹中的多个 excel 文件逐个传递到 PowerQuery?

我在数据工厂中,需要帮助来参数化数据集,以便我可以使用 blob 文件夹中的多个文件在 PowerQuery 中进行处理,然后发送到 AzureSQL 表进行接收(存储)。我不...

回答 1 投票 0

Azure 数据工厂通过特定字符串/值查找 JSON 对象,然后选择不同的值

我有一个旧版 API(没有开发支持),我正在从中提取数据。以下是 Activity().outputs.body.data 的输出 { “列_id”:1, &...

回答 1 投票 0

© www.soinside.com 2019 - 2024. All rights reserved.