azure-data-factory-2 相关问题

Microsoft Azure的云数据集成服务,它可以将数据存储,移动和处理服务组合成自动数据管道。它可以连接到各种来源,而不仅仅是Azure。其版本2具有更多图形工具和SDK,与之前的版本相比,提供了更简单的用户体验。

用于Azure数据工厂的活动性

Azure数据工厂中是否有任何方法可以退出每个循环。我在每个循环中使用a来遍历文件并进行处理。但是,当复制活动置于循环内时...

回答 1 投票 -1

使用控制文件验证文件夹中的文件

我正在使用以下提到的结构来验证控制文件中存在的文件名列表,并使用Azure数据工厂检查这些文件是否存在于文件夹中。控制文件...

回答 1 投票 0

使用ADF将数据从CSV文件加载到SQL DB

[我有一个.CSV文件,我正在尝试使用azure数据工厂将其加载到SQLDB,但是在CSV文件中,该地址栏中有一列“地址”,地址之间有逗号,因此ADF会拆分...] >

回答 2 投票 0

根据触发器将参数传递给Azure Data Factory-ADF活动

我有Azure数据管道,必须在其中将参数传递给Databricks活动。我为此活动添加了多个基于事件的触发器(blob文件夹的更新)。当特定的触发器得到...

回答 1 投票 0

Azure数据工厂链接服务错误-无法从密钥库获取机密

我正在创建到Azure Data Factory v2中的远程服务器的链接服务。远程服务器使用用户名密码验证机制。我已经创建了到同一服务的链接服务...

回答 1 投票 0

MongoDB连接的参数化链接服务

我正在尝试在azure数据工厂中参数化mongo DB连接的链接服务。我在这里已经提到了文件。以下是我尝试在链接服务的代码中更新的代码{...

回答 1 投票 0

如何在Azure Data Factory v2中解压缩zip文件

我正在尝试使用Azure Data Factory v2解压缩一个zip文件(其中包含多个文件)。该zip文件位于Azure文件存储中。 ADF复制任务仅复制原始zip文件,而没有...

回答 1 投票 0

'在管道Azure Devops中,术语'Set-AzureRmDataFactoryV2'不被识别为cmdlet的名称'错误

Azure Powershell AZ模块在azure devops管道中仍然不起作用?当我尝试Powershell版本4+并且代理为2017(也尝试Windows 2019)#Install-Module -Name Az -...

回答 2 投票 0

我如何在Azure数据工厂中引用派生列操作的JSON源

我是Azure数据工厂的新手。我已经能够使用管道从REST API源生成一组JSON文件。每个文件都包含一个顶级JSON对象,该对象具有最多100个子级的数组...

回答 1 投票 0

向现有数据集中添加更多表

如何向现有数据集中添加更多表?我创建了一个数据工厂来复制3个表(Azure SQL数据库)的表数据。现在,我想再添加两个表。我该怎么办?

回答 3 投票 -2

将以单词(TCE *)为前缀的特定CSV文件从Blob移动到SQL表中

我想知道我们如何将特定的模式命名文件(由tce前缀)从bob复制到SQL表格。如果它无法加载单个文件,但我想将所有文件以tce开头。

回答 1 投票 0

Azure数据工厂GetMetadata活动

我在azure数据工厂管道中有一个元数据活动,并且将其连接到数据湖以获取文件。 Azure数据工厂中是否有可用的方法来对可用文件进行排序...

回答 1 投票 0

我在从ADF和邮递员向持久性功能(Azure函数的扩展)发出发布请求时遇到问题

我能够从ADF和邮递员调用azure函数,但是当我从ADF或邮递员调用持久函数时,它给我错误:对目标Azure Function1的操作失败:调用提供的Azure ...

回答 1 投票 0

Azure数据工厂可以从Delta Lake格式读取数据吗?

我们能够通过将增量文件源指定为ADF中的拼花数据集来读取文件。尽管这会读取增量文件,但最终会读取增量中数据的所有版本/快照...

回答 1 投票 0

当源是二进制数据集时,接收器必须为二进制

我不熟悉Azure数据工厂场景,尝试复制数据教程,在该教程中,我具有一个带有emp.txt的InputDataset,其中包含以下信息:名字,姓氏John,Doe Jane,Doe和我...

回答 1 投票 0

ADF V2必需的Blob缺少通配符文件夹路径和通配符文件名

我正在尝试使用由getmetadata和foreach提供的通配符文件夹路径。这些文件夹中的实际文件名以_Problem_1.csv结尾,但是出现以下错误。可以...

回答 1 投票 0

无法使用python在azure数据工厂中为每个活动创建

我正在尝试使用python创建azure数据工厂管道和资源。我在某些ADF活动(例如“查找”,“复制..”)中取得了成功,但是我在这里面临的问题是我正在尝试复制...

回答 1 投票 0

如何解决'lastindexof'是一个原语,并且不支持Azure Data Factory中的嵌套属性

我正在尝试在数据工厂中获取现有文件名,并使用动态内容对其进行重新排列,以便在文件名后附加时间戳。但是,我似乎收到以下错误:位置172'...

回答 1 投票 1

无法在数据工厂上创建可变活动

我正在尝试使用python创建数据工厂资源,并且在调用几个类示例时遇到错误-在这里我正在尝试创建“设置变量活动”,但我得到的错误参考是:...

回答 1 投票 1

如何仅使用管道名称来检查Data Factory管道运行的当前状态?

是否可以通过Powershell或API通过仅管道名称来检查Azure数据工厂管道运行的当前状态?我已经看到您可以使用Get-AzDataFactoryV2PipelineRun ...

回答 1 投票 0

© www.soinside.com 2019 - 2024. All rights reserved.