azure-data-factory 相关问题

Microsoft Azure Data Factory是一种云服务,用于使用时间片的概念以受控方式调用(编排)其他Azure服务。数据工厂主要使用手工制作的JSON开发,这为工具提供了执行哪些活动的说明。虽然仍处于预览阶段,但Azure Data Factory V2的引入可以使用api而不仅仅是JSON文件提供更轻松的数据集成体验。

Azure SqlSink传递参数。

在Azure数据工厂管道中,我试图将参数传递给Azure SQL中的存储过程(下面的步骤2)。但我找不到怎么样。有些人知道如何传递参数列表(来自输入数据集)......

回答 1 投票 0

Azure数据工厂 - 将管道结果写入REST API?

虽然我已经看到了从HTTP获取数据的示例,但我还没有真正看到过输出到REST API的问题。最好的方法是什么?谢谢,-Greg

回答 1 投票 0

数据工厂 - 使用通配符确定文件名

我正在使用Data Factory将文件从我的文件系统移动到Blob存储。问题是:文件使用YYYYMMDD标识符命名,[我可以通过分区解析({year} {...

回答 1 投票 1

将文件从FTP位置复制到Azure Data Lake

我已按照MSDN文档中显示的所有步骤从FTP复制文件。到目前为止,创建了数据集,创建了链接服务器,创建了管道。管道图...

回答 1 投票 0

上次执行管道的Data Factory V1系统变量已执行

我有一个管道,每天从SQLDB表中提取新更新的数据到Data Lake Store中的.tsv文件。稍后将使用该数据来附加/更新现有表。仅选择...

回答 2 投票 0

在SSIS中更改Data Lake Store Source的输出类型

使用Azure Data Lake Store Source时是否可以更改列的输出类型?目前它是DT_WSTR(100),但在我的源文件中包含更大的字段,然后是100个字符。 ...

回答 1 投票 2

上游依赖项的数据工厂等待超时

我目前正在使用Data Factory V1。我有一个有2个链式活动的管道:。第一个活动是复制活动,它将SQLDB中的表提取到Data Lake Store中的.tsv文件中。 ......

回答 1 投票 1

MYSQL变更数据捕获(CDC) - Azure服务(Azure数据工厂)

我想对MYSQL数据库的数据表执行ETL操作,并将数据存储在azure数据仓库中。我没有更新日期列来标识该期间的修改记录。 ...

回答 3 投票 -1

从azure数据工厂执行存储过程

我试图从Azure DataFactory V2中的Azure文档DB中执行存储过程。该过程将使用平面表中的数据进行一些插入到不同的表中。根据MS ...

回答 2 投票 1

从Azure数据工厂调用Azure SQL DW存储过程

尝试在Azure SQL Datawarehouse中运行存储过程时出现以下错误。活动'SprocActivitySample'包含无效的数据集引用'Destination-SQLDW-nna'。 ...

回答 2 投票 3

任何为Azure Batch创建ADFV2自定义活动的.NET / Python示例

我正在寻找可以创建运行Azure批处理代码的ADFV2 Factory的.NET或Python脚本。任何链接都赞赏。

回答 1 投票 -1

无法访问ADLS帐户'(帐户名)'

我试图使用azure数据工厂v2将数据复制到Azure数据湖商店接收器。我创建了数据湖商店,按照这里的文章创建了一个AD Web应用程序,并确保...

回答 3 投票 1

如何停止计划的azure数据工厂作业(切片)运行

不久前,我创建了一个简单的工作,将数据从blob存储复制到azure数据湖。我创建了一个每天运行的计划。由于这是一项实验,我想停止这项工作......

回答 2 投票 2

Azure数据工厂管道中的每月计划

我们如何安排Azure数据工厂管道仅在每月的特定日期运行。(例如,每月的第9天)

回答 2 投票 0

ADF V2错误位置不符合字符串'@'

这是MSDN的双重帖子,但没有得到任何帮助,所以我希望有专家在这里看到它。我从https://docs.microsoft.com/en-us/azure/data-factory/tutorial-..-中找到的示例开始。

回答 2 投票 3

Azure数据工厂存储过程多个输入

在我的数据工厂中,我有一个存储过程,它为单个输出操作2个表。我需要传递2个sqlWriterTableType但我似乎无法看到这是如何可能的,任何人都有...

回答 1 投票 0

Azure数据工厂复制字符串失败

我正在尝试执行以下操作...使用Azure Data Fatctory,管道复制从Blob存储中的JSON文件到Azure SQL的字符串。我面临如下问题...复制的字符串到Azure SQL显示为“...

回答 1 投票 0

如何在不同的订阅中将文件和文件夹从一个ADLS复制到另一个ADLS?

我需要能够将文件和文件夹从一个Data Lake复制到另一个不同订阅的Data Lake,我拥有Auth Token和密钥。我试过不同的解决方案......

回答 1 投票 0

如何在C#中检查Azure datafactory管道是否在没有运行标识的情况下运行

有没有办法在C#中查找管道是否在没有运行ID的情况下运行?我试过查找,但可以找到采用RunID并给出管道状态的方法

回答 1 投票 0

Azure数据工厂:将数据从CosmosDB复制到SQL数据库失败,并出现“范围索引”错误

我需要将Azure CosmosDB(以前称为DocumentDB)中的数据移动到Azure SQL数据库中。我正在使用“复制数据”资源,我已经设置了源和目标以及...

回答 2 投票 0

© www.soinside.com 2019 - 2024. All rights reserved.