azure-data-factory-2 相关问题

Microsoft Azure的云数据集成服务,它可以将数据存储,移动和处理服务组合成自动数据管道。它可以连接到各种来源,而不仅仅是Azure。其版本2具有更多图形工具和SDK,与之前的版本相比,提供了更简单的用户体验。

Azure数据工厂中的复制数据活动

我有一个adf管道,该管道使用复制数据活动将数据从blob存储复制到表存储。该管道每天在触发器上运行一次。我很好奇知道此复制数据活动如何...

回答 1 投票 0

如何获取触发Azure数据工厂管道的文件的名称?

我是ADF的新手。我需要将数据从15个CSV文件加载到15个Azure Sql数据库表。在管道中,每次创建Blob时都有一个触发器来运行管道。我会...

回答 1 投票 0

使用ADF管道RUN ID作为表名

我有一个ADF管道,该管道使用复制数据活动将数据从Blob存储复制到表存储。该管道每天在触发器上运行一次。假设表存储中的表的名称...

回答 1 投票 0

Azure数据工厂查找和每个

我有一个数据工厂管道,我想遍历SQL查找活动的行。我已将查询范围缩小到三列500行。我了解要引用一个...

回答 2 投票 0

如何检查使用管道名称运行的最新Data Factory Pipeline的当前状态?

是否可以使用.NET SDK检查以管道名称运行的最新数据工厂管道的当前状态?这就是我现在尝试的:使用(var client = new ...

回答 1 投票 0

Azure | ADF |如何读取对象类型的变量(使用其他变量)?

我正在使用Azure数据工厂。我正在尝试使用String变量在JSON数组中查找Key并检索其Value。我似乎无法弄清楚如何在ADF中执行此操作。详细信息:我已经定义了一个...

回答 1 投票 0

Azure数据工厂-自托管IR

我们正在使用Azure数据工厂将SQL数据从内部复制到Azure数据湖。为此,我们在内部部署环境中的一台VM中安装了自托管IR。问题-本地VM(...

回答 1 投票 0

了解ADF数据集

我了解,在Azure数据工厂中,数据集是某些源数据的视图。您能否通过将两个源表连接在一起的查询来创建单个数据集?还是必须创建两个数据集,...

回答 1 投票 0

Azure表存储中不接受整数列

我正在使用ADF管道将数据从数据湖复制到表存储。表存储中有一列,其中包含整数值(列:Age)。在尝试查询表存储中的数据时https:// ...

回答 1 投票 0

存储过程作为数据流中的源

我正在尝试执行将有行作为输出的存储过程,但是当我在数据流源中尝试时,在源'source1'上收到错误消息DF-SYS-01:com.microsoft.sqlserver.jdbc ....

回答 1 投票 0

如何在Azure Data Factory SFTP中使用通配符文件名?

我正在使用Data Factory V2,并创建了一个位于第三方SFTP中的数据集。 SFTP使用SSH密钥和密码。我使用...

回答 1 投票 0

使用Azure数据工厂v2管道验证azure blob存储中csv文件每个字段的标题名称

我有一个场景,用户将上传带有一些数据和该文件头的文件。我需要处理文件,并确保标题中的字段名称正确并且没有...

回答 1 投票 0

Data Factory-从JSON文件中带有破折号“-”的字段中检索值

在我的管道中,我使用GET请求通过REST API来访问第三方数据库。作为输出,我收到了一堆JSON文件。我必须下载的JSON文件数(与...的数量相同)]

回答 1 投票 0

使用Azure数据工厂过滤数据并将其加载到相应的表中

我正在从具有列事务类型的存储过程中获取数据,并且它具有一些值(如(直接,IMPS,网上银行),现在我想根据这些值过滤数据并加载...]]

回答 1 投票 0

如何使用.NET SDK将诊断设置添加到azure服务?

如何使用c#从asp.net核心Web应用程序将诊断设置添加和配置到Azure数据工厂?]

回答 1 投票 0

[使用变量过滤复制数据源

方案:我在Azure SQL数据库上有多个视图作为复制数据管道的源。视图包含多个客户的数据,因此我需要按客户ID过滤的管道。我可以做...

回答 1 投票 1

在Azure数据工厂中计算哈希

我们有一个要求,要将文件和文件夹从内部复制到Azure Blob存储。在复制文件之前,我要计算散列值并将其放入文件中的...

回答 1 投票 0

运行Azure数据工厂(ADF)管道时Blob和表中缺少列名

我正在使用ADF将数据湖中的数据存储到数据流中的blob,并使用复制活动将数据从blob复制到表中。这是容器中的数据结构:_committed_111(块Blob)...

回答 1 投票 0

在Azure数据工厂中提取数据时,我是否需要某种存储空间

**这里的数据新手*当前,要使用从Dynamics 365提取的数据运行分析报告,我使用Power BI。问题在于,Power BI处理大数据的速度相当慢。我进行了许多...

回答 1 投票 0

如何根据条件触发ADF管道

我有一个ADF管道,如果本地文件路径上的文件可用,则需要触发该管道。在事件类型触发器中,我可以看到它仅适用于天蓝色的容器。我该怎么办...

回答 1 投票 0

© www.soinside.com 2019 - 2024. All rights reserved.