azure-data-factory-2 相关问题

Microsoft Azure的云数据集成服务,它可以将数据存储,移动和处理服务组合成自动数据管道。它可以连接到各种来源,而不仅仅是Azure。其版本2具有更多图形工具和SDK,与之前的版本相比,提供了更简单的用户体验。

查看数据工厂v2调试运行的解决方法

我意识到通常在关闭浏览器窗口后在数据工厂v2用户界面中看不到调试运行,但不幸的是我需要意外地重新启动我的机器并且它运行时间很长......

回答 1 投票 0

如何在Azure数据工厂中读取扩展名为.xlsx和.xls的文件?

我正在尝试使用我的azure数据工厂数据集中的.xlsx扩展名在Azure Blob存储中读取和优化文件。抛出跟随错误处理'Csv / Tsv格式文本'源'时发现错误...

回答 2 投票 1

Azure数据工厂|从SFTP到Blob的增量数据负载

我创建了一个(一次运行)DF(V2)管道,将文件(.lta.gz)从SFTP服务器加载到azure blob中以获取历史数据。工作得很漂亮。每天SFTP上都会有几个新文件......

回答 2 投票 1

Azure数据工厂:用于分层模式映射的对象名称中的空格

我正在使用“复制数据”活动将数据从REST服务复制到Azure SQL Server。 REST服务正在返回分层JSON响应,我正在使用模式映射将其推送到...

回答 1 投票 1

在Azure数据工厂中查找和预览Web活动:@Item()返回null

如下面链接所述,我首先触发Lookup。它给了我电子邮件ID,然后对于每个电子邮件ID,我正在调用POST请求。通过Azure数据中的azure SQL表进行迭代...

回答 1 投票 1

Azure Data Factory复制数据很慢

源数据库:托管在Azure VM上的PostgreSQL D16s_v3目标数据库:Azure VM上托管的SQL Server开发人员版D4s_v3源数据库大小约为1TB目标数据库为空...

回答 3 投票 4

我们可以将Databricks输出传递给ADF作业中的功能吗?

任何人都可以帮助我使用Databricks和Azure功能吗?我正在尝试将数据块JSON输出传递给ADF作业中的azure函数体,是否可能?如果是,怎么样?如果不是,还有什么其他选择......

回答 1 投票 1

ADF日志分析 - 如何关联多个管道

我一直在做一些实验,对于Log Analytics中的ADF日志,相关ID似乎是Pipeline RunId的副本。 TriggerId似乎是空白的。我有一条管道......

回答 1 投票 0

存储过滤器活动的输出

我正在创建一个管道,它根据几列(使用Filter活动)过滤源SQL表的输入,然后将其复制到Azure SQL表。但复制活动需要SQL ...

回答 1 投票 0

一个复制活动数据工厂v2中的两个查询

我是使用Azure数据工厂的新手,我想知道是否有一种模式可以在一个活动副本中运行两个查询,例如:我有一个数据集Oracle用于我的原点,另一个用于我的舞台,两个...

回答 1 投票 0

在CSV文件中转换日期格式

嗨我必须将数据从Excel文件加载到Azure数据仓库,但在转换过程中我在转换excel文件中的日期格式时遇到问题。 Excel文件中的日期格式是Tue ...

回答 1 投票 0

通过Azure Data Factory活动检查文件编码

我希望能够在我的管道流中检查输入文件的编码。由于Azure Data Factory提供的活动之一,有任何想法吗?谢谢你的提示

回答 1 投票 0

如何从Azure Function应用程序中的Data Factory任务接收/访问POST请求和“用户属性”的标头

我还是Azure的新手,所以如果这是一个新手问题,请耐心等待。我在Azure Data Factory中创建了一个任务,该任务将调用Http触发的Python函数(消耗计划)。设置......

回答 1 投票 1

将最新文件从S3复制到Azure Blob(使用Azure Factory V2)

我还是Azure数据工厂的新手,我正在尝试将每天转储到我的S3文件夹/存储桶中的文件移动到Azure blob。我已经在Data中创建了数据集(用于源和接收器)和链接服务...

回答 2 投票 1

Azure Data Factory v2 - 从镶木地板复制到SQL DB的错误年份

我对Azure Data Factory v2有一个奇怪的问题。有一个Spark Job正在运行并生成镶木地板文件作为输出,ADFv2复制活动然后采取输出镶木地板并复制...

回答 2 投票 2

在ADF V2中添加动态内容

我需要将动态内容添加到文件名中,该文件名应该是该月的最后一天。例如,如果我在四月份运行作业,它应该生成文件名作为三月的最后一天。预期结果 ...

回答 1 投票 0

是否可以使用在天蓝色数据工厂中运行的SSIS-IR从azure存储文件系统中读取excel文件?

我在azure存储文件系统中有excel文件。还在adfv2中运行SSIS-IR。是否可以使用SSIS-IR从文件系统中读取excel文件?试图读取excel文件并插入到sql db中。

回答 2 投票 0

如何重命名自托管集成运行时节点

我在本地开发计算机上配置了自托管集成运行时节点,以连接到Azure中的数据工厂。我现在希望它改为不同的名称,例如“DEV-01-Machine”但不能......

回答 1 投票 1

如何使用Azure Data Factory将CosmosDb文档复制到Blob存储(单个json文件中的每个文档)

我正在尝试使用Azure Data Factory(v2)备份我的Cosmos Db存储。一般来说,它正在完成它的工作,但我想让Cosmos集合中的每个文档对应blob存储中的新json文件。 ...

回答 4 投票 1

如何使用Data Factory截断Dynamics 365实体(并复制到Azure数据湖)?

我目前正在使用数据工厂将实体从Dynamics 365批量复制到Azure Data Lake。实体每24小时保存为Data Lake中的CSV文件。我没有批量复制,而是......

回答 2 投票 1

© www.soinside.com 2019 - 2024. All rights reserved.