azure-data-factory 相关问题

Microsoft Azure Data Factory是一种云服务,用于使用时间片的概念以受控方式调用(编排)其他Azure服务。数据工厂主要使用手工制作的JSON开发,这为工具提供了执行哪些活动的说明。虽然仍处于预览阶段,但Azure Data Factory V2的引入可以使用api而不仅仅是JSON文件提供更轻松的数据集成体验。

移动 - 而不是复制 - Azure数据工厂中的数据

我想设置一个Azure数据工厂管道,它执行移动(即复制,验证,删除)操作,而不仅仅是Blob存储和Data Lake Store之间的复制操作。我不能 ...

回答 3 投票 4

在“复制活动”中过滤blob数据

我有一个复制Activity,它将数据从Blob复制到Azure Data Lake。 Blob由具有事件中心触发器的Azure功能填充。 Blob文件附加了UNIX时间戳,这是...

回答 1 投票 1

如何在Azure数据工厂中添加动态连接字符串

有人可以帮助我使用azure数据工厂实现与数据库的动态连接吗?

回答 1 投票 -1

从PostgreSql到Blob的增量复制数据

我目前正在研究PostgreSql,并努力将增量数据从PostgresDb移动到Blob,请帮助我解决方案,以前尝试过复制工具模板但没有用。我想要 ...

回答 1 投票 -1

Azure数据工厂日期转换

我刚开始学习数据工厂,我有一个非常简单的管道,它将Azure Blob存储中的CSV文件加载到Azure SQL数据仓库中。源CSV文件第3列包括......

回答 2 投票 0

ARM模板 - 改进 - customSetupScriptProperties

在由ADF生成的用于从Azure DevOps部署的ARM模板中,是否可以添加参数...

回答 1 投票 0

如何使用SSIS C#脚本组件将程序集文件加载到Azure Data Factory集成的运行时?

我有一个SSIS包,其中包含一个脚本组件,可以从Dynamics 365中提取数据。该包从Visual Studio以及我将其部署到的本地SQL服务器中执行得很好...

回答 1 投票 2

如果源和目标都是动态的,如何在复制活动中动态映射架构?

我正在使用一个场景,我有一个azure文件存储帐户,其中我有不同的文件夹,每个文件夹包含* .csv文件。我想在不同的Azure SQL数据库中加载每个* .csv文件...

回答 1 投票 1

如何使用Azure Data Factory V2中的HTTP或REST连接器创建动态API端点连接

我有一个基于REST的外部API,我需要创建一个连接,以便定期检索数据(用于BI)。这个API相当强大,支持大约60 ...

回答 1 投票 0

如何将Tumbling Window参数传递给Data Factory UI中的Data Factory管道?

我在Azure Data Factory中定义了一个带有Tumbling Window触发器的管道,如下所示:我希望我的活动能够接收Tumbling窗口参数(trigger()。输出....

回答 1 投票 0

内部postgreSql到blob的性能调优

我试图将数据从Onplace Postgres移动到blob,但数据移动速度非常慢,是否有任何性能调整步骤要遵循?

回答 1 投票 0

Azure数据工厂 - 每行导入数据调用REST调用

我想使用Azure Data Factory执行以下操作...读入CSV文件,根据该文件中的地址执行Google Maps Geocode查找,并将结果转储到Azure SQL中。我已经能够......

回答 1 投票 1

按日期的Azure blob复制分区

我在Azure blob存储中有这样的文件:entity | - part001.parquet | - part002.parquet | - part003.parquet | - part004.parquet ...这个镶木地板数据有一个日期列,让我们给它命名......

回答 1 投票 0

Azure数据工厂逻辑函数表达式无效

我有一个ADF管道,应该是ETL工作。我添加了IF CONDITION,它应该评估获得的最后一个结果(复制数据活动)(如果输出为Succeeded,则为true activity ...

回答 1 投票 1

Azure数据工厂 - 清理批处理任务文件

我正在使用Azure Data Factory v2,使用具有专用节点的批处理帐户池来进行处理。我发现随着时间的推移批处理活动失败,因为D:/ temp驱动器上没有更多空间......

回答 4 投票 0

如何将Azure数据工厂活动的输出接收到SQL数据库?

在我的管道中,我有一个Lookup活动,它将数据输出到Azure Function活动。我想将Azure Function活动的结果保存到SQL数据库。我能做的唯一活动......

回答 1 投票 2

在AzureDataFactory管道中创建LinkedSerive时,自托管集成运行时不可用

我想使用ADF管道将数据从我的本地sql db加载到ADLS。为了执行此活动,我需要自托管Integration Runtime.I下载并配置了Integration ...

回答 1 投票 0

链接服务是否支持azure数据工厂中的动态json?

目前,我正在尝试设置动态密钥库链接服务。不幸的是,无论我尝试什么,我都无法成功测试连接。 {“name”:“AzureKeyVault1”,“properties”:{...

回答 2 投票 2

将数据从Dynamics CRM加载到SQL Server

无法使用Azure数据工厂从Dynamics CRM到SQL Server获取选项集字符串。我正在使用Azure数据工厂将数据从Dynamics CRM移动到SQL DB。我使用fetchXML查询来获取...

回答 1 投票 0

Azure数据工厂未加载

我无法在任何浏览器中打开Azure数据工厂,它只是在过去1小时内继续加载。我尝试刷新并使用其他浏览器,是否有任何具体原因发生?所有其他......

回答 3 投票 1

© www.soinside.com 2019 - 2024. All rights reserved.