azure-data-factory 相关问题

Microsoft Azure Data Factory是一种云服务,用于使用时间片的概念以受控方式调用(编排)其他Azure服务。数据工厂主要使用手工制作的JSON开发,这为工具提供了执行哪些活动的说明。虽然仍处于预览阶段,但Azure Data Factory V2的引入可以使用api而不仅仅是JSON文件提供更轻松的数据集成体验。

在Azure Batch上运行python脚本

我试图在azure批处理上执行一个python脚本,这是一个linux dsvm,这样脚本就可以安装python包然后执行python脚本。以下是我使用的代码:try:from ...

回答 1 投票 0

如何转换列befory副本?

我想将一个表从sourceA复制到sourceB,但在我想要转换列值之前。我怎么能这样做?我试图在映射中尝试添加动态内容,但我想我...

回答 4 投票 1

存储过滤器活动的输出

我正在创建一个管道,它根据几列(使用Filter活动)过滤源SQL表的输入,然后将其复制到Azure SQL表。但复制活动需要SQL ...

回答 1 投票 0

(我如何)Azure数据工厂(使用证书)进行(常规)mysql数据库连接

我们需要从客户端数据库中提取数据,他们要求我们在连接时使用SSL +他们的证书。我唯一的问题是:我不知道在哪里“导入”他们的证书的PEM文件...

回答 1 投票 1

如何使用python连接datafactory活动

我正在按照本教程快速入门教程很好,因为教会如何使用python生成数据工厂资源,管道和一个活动,但如果我需要多个,我如何连接...

回答 1 投票 0

一个复制活动数据工厂v2中的两个查询

我是使用Azure数据工厂的新手,我想知道是否有一种模式可以在一个活动副本中运行两个查询,例如:我有一个数据集Oracle用于我的原点,另一个用于我的舞台,两个...

回答 1 投票 0

在CSV文件中转换日期格式

嗨我必须将数据从Excel文件加载到Azure数据仓库,但在转换过程中我在转换excel文件中的日期格式时遇到问题。 Excel文件中的日期格式是Tue ...

回答 1 投票 0

自托管集成运行时的水平/垂直缩放

我们正在寻找自动化方式来横向,垂直扩展ADF中使用的自托管集成运行时虚拟机的拉动。阅读Microsoft文档并不能提供答案。

回答 1 投票 2

如何从Azure Function应用程序中的Data Factory任务接收/访问POST请求和“用户属性”的标头

我还是Azure的新手,所以如果这是一个新手问题,请耐心等待。我在Azure Data Factory中创建了一个任务,该任务将调用Http触发的Python函数(消耗计划)。设置......

回答 1 投票 1

通过Azure数据工厂刷新Power BI数据集

有没有办法通过Azure数据工厂刷新Power BI数据集?我发现有一个REST API(https://powerbi.microsoft.com/en-us/blog/announcing-data-refresh-apis-in-the-power-bi -...

回答 2 投票 0

如何从ASP.NET Core应用程序查询Azure Analysis Service中的数据?

我有一个云应用程序,它将所有数据转储到Azure Data Lake中。使用Azure Data Factory,我构建了一个管道,用于从湖中提取和转换数据并将其保存在...

回答 1 投票 0

如何使用python创建一个azure datafactory资源文件夹?

是否可以使用python在数据工厂中创建带有管道的文件夹?正在阅读本教程:数据工厂教程它创建一个管道只有一个复制活动我可以创建一个文件夹...

回答 1 投票 0

数据转换的工具建议

我在Power BI中有大量原始故障数据。代码时间状态x123 2019-04-22T23:57:00 ok x123 2019-04-23T01:00:00故障x123 2019-04-23T02:00:00 ...

回答 1 投票 0

无法将类型'string'隐式转换为'Microsoft.Azure.Management.DataFactory.Models.SecretBase'

我正在使用.NET和Azure Data Factory的SqlServerLinkedService开发ETL解决方案,作为从内部SQL Server到Azure的数据移动的一部分。我无法设置密码属性,因为...

回答 2 投票 2

创建Azure数据工厂集成运行时(如果它不存在) - Azure PowerShell

我已经在Azure门户中创建了Azure数据工厂集成运行时,现在想要通过PowerShell脚本创建$ IR = Get-AzDataFactoryV2IntegrationRuntime -DataFactoryName“...

回答 2 投票 0

尝试获取输出消息时出现ADF错误

执行时我得到了以下错误。错误{“errorCode”:“BadRequest”,“message”:“活动parent-control-sp失败:JSON文本格式不正确。意外字符'\”'是......

回答 1 投票 0

Azure Data Factory v2 - 从镶木地板复制到SQL DB的错误年份

我对Azure Data Factory v2有一个奇怪的问题。有一个Spark Job正在运行并生成镶木地板文件作为输出,ADFv2复制活动然后采取输出镶木地板并复制...

回答 2 投票 2

如何使用Azure数据工厂动态获取表(sql server数据仓库)中的所有json文件表数据(从ADF加载到DWH)

我必须将所有json文件数据放入从azure数据工厂到sql server数据仓库的表中。我能够将数据加载到具有静态值的表中(通过在数据集中给出列名)...

回答 1 投票 0

需要通过IR连接ADF和BigQuery

我想通过IR连接Azure数据工厂和Google Big查询,需要什么值以及如何从Big Query访问数据

回答 1 投票 0

需要将csv源数据插入Azure SQL数据库

我在csv中有一个源数据。我创建了一个sql表来插入csv数据。我的sql表中有主键列和外键列。在Data中映射时我不能跳过这两列...

回答 1 投票 0

© www.soinside.com 2019 - 2024. All rights reserved.