Microsoft Azure Data Factory是一种云服务,用于使用时间片的概念以受控方式调用(编排)其他Azure服务。数据工厂主要使用手工制作的JSON开发,这为工具提供了执行哪些活动的说明。虽然仍处于预览阶段,但Azure Data Factory V2的引入可以使用api而不仅仅是JSON文件提供更轻松的数据集成体验。
我创建了一个管道将文件名从容器传递到复制数据任务。 我需要将出现在那里的文件(具有不同的名称)传递给复制数据,然后将其内容c...
我有一个包含三列的表格: 名称、金额、费用(例如 Apple、5、XX) 不幸的是,我有多行具有相同的 ID。但金额不同,收费也不同。 我想合并那些
使用@Concat在ADF Activity中构建动态表达式
我正在尝试使用 ADF 中的 @concat 活动构建动态表达式。 我正在努力构建这个表达式,请帮忙。 我预期的输出表达式/结果是:我想要用单引号括起来
允许其他用户为 Azure 数据工厂中的管道创建警报电子邮件的权限?
我试图授予用户权限,使其能够在 Azure 数据工厂中的管道发生故障时创建警报。作为所有者,我可以毫无问题地创建警报,但是当另一个用户尝试...
如何覆盖Azure DevOps Pipeline中数据工厂的参数? - ARM 模板中的空白导致错误?
我正在尝试在Azure数据工厂中添加参数,以便我可以覆盖每个开发、测试和生产环境的参数值。目前我已在 DevOps Release 中设置静态字符串作为参数...
Bicep 脚本,用于为源和目标或接收器创建 Azure 数据工厂数据集
我正在尝试不同的方法来为 Cosmos DB Mongo DB 类型创建 Azure 数据工厂的数据集以进行数据迁移,但在验证 Microsoft 链接时没有得到任何结果。 可以这样吗...
如何在 Azure 数据工厂中处理数据库增量 sql 文件以更新 MySQL 数据库
我有一个 .sql 增量文件,其中包含对数据库表的更新和删除。我有一个数据库,其中包含用于更新增量的相同表。在 Azure 数据工厂内...
有没有办法在 Azure 数据工厂中使用 7z 格式压缩文件?
我正在将 SSIS 包迁移到 Azure 数据工厂管道,它所做的事情之一是将大文件(大约 4gig)ZIP 为 .7z 格式。我需要能够复制这个功能...
如何在 ADF 中为 Azure Function 设置 JAVA_HOME 环境
我正在用 Python 编写一个连接到 IBM informix 数据库的 Azure 函数。我使用 jaydebeapi 作为连接库,并使用 JDBC 进行连接。 但是,当我运行连接代码时...
从 Azure SQL DB 到 Snowflake 的增量数据库复制
我想使用 Azure Factory 将表从 Azure SQL DB 上传到 Snowflake。 现在我正在使用带有源和目标的管道“复制数据”。整个事件表(大约...
将本地 SQL Server Analysis Server 表格模型与 Azure 数据工厂连接
我是一名在非洲非营利组织工作的 Power BI 志愿者。我们这里有一个本地 Power BI 报表服务器实例,并使用 SQL Server 分析服务器表格模型作为数据存储/后端。 ...
ADF 管道任务如果条件表达式获取错误函数“and”不接受 5 个参数
在我的 adf 管道中,我有 if 条件,所以我尝试运行表达式 @and(或(或(等于(formatDateTime(utcNow(), 'MM'), '01'),equals(formatDateTime(utcNow(), 'MM'), '02')),or(equals(formatDate. ..
我正在使用 Azure 数据工厂从 JSON REST API 提取数据。 JSON 元素的格式如下: { “订单 ID”:1 “日期”:“20170122”, ”
从使用 Packer 构建的自定义映像创建 Windows Server VM(用于 Azure 数据工厂自托管 IR)时出现问题
我在使用通过 Packer 创建的自定义映像创建虚拟机时遇到一些问题。 我正在使用 Packer 为 Azure 数据工厂自托管集成运行时构建映像。我的 Packer 模板将会
如何使用 ADF 检查和比较文件夹 (Datalake) 内的文件名
我的要求是将Datalake文件夹中的文件名与.CSV文件中的文件名进行比较,如果文件名匹配,那么我想复制这些文件,如果文件名不匹配...
ADF 映射数据流因 BatchUpdateException 失败
我有许多映射数据流在过去几个月中一直定期运行,其中一些从昨天开始出现故障。 数据流模式是 - 来源:2 Azure SQL DB 测试...
我每天尝试使用 Azure 数据工厂在 Azure SQL DW 上加载一堆表,但在加载它们之前我需要一些帮助来转换 DBF 表(转换为 CSV 会更好)。谁能指出...
我在创建 ADF DataFlow 时遇到一些奇怪的问题。 设置源转换并通过数据预览查看输出后,我添加了展平转换。 然后,我尝试
通过 ADF 将文件从 blob 复制到雪花时出错:不支持加密的 Excel 文件“Reports.csv”,请删除其密码
在将数据从天蓝色斑点加载到雪花时,我遇到以下错误: 错误代码 = EncryptedExcelIsNotSupported,'类型 = Microsoft.DataTransfer.Common.Shared.HybridDeliveryException,消息 = 已加密
我正在加载一个以管道作为分隔符的 CSV 文件,该文件位于 blob 位置,并使用突触管道中的 SP 活动将其加载到临时表
管道是元数据驱动的 错误消息是 '[昨天 22:20] mruti Ranjan Dehury 代码”:21104,“消息”:“ErrorCode=DelimitedTextMoreColumnsThanDefined,'T...