azure-data-factory-2 相关问题

Microsoft Azure的云数据集成服务,它可以将数据存储,移动和处理服务组合成自动数据管道。它可以连接到各种来源,而不仅仅是Azure。其版本2具有更多图形工具和SDK,与之前的版本相比,提供了更简单的用户体验。

在Azure数据工厂中创建MongoDB链接服务

我在Azure数据工厂中设置Mongo DB链接服务时遇到问题。我们已经在本地平台上使用Mongo DB连接从客户端提取一些数据。现在,我们是...

回答 1 投票 1

Terraform azurerm_data_factory vsts_configuration失败,出现错误:为数据工厂配置存储库时出错

我正在尝试使用Terraform部署在Azure数据工厂中建立代码存储库,并通过Azure Cloud Shell进行贡献者访问,遵循以下步骤:https://www.terraform.io/docs/providers/azurerm / ...

回答 1 投票 1

集成运行时具有两个磁盘驱动器,是否可以在链接的服务文件系统中参数化Host字段?

我正在尝试使用复制数据管道来部署azure数据工厂,该管道会从一个或多个已部署的/本地文件系统路径中提取文件,并将其转储到blob存储中。 ...

回答 1 投票 0

如何根据接收器中的参数设置文件名?

是否可以根据映射数据流宿中的参数设置文件名?表达式构建器认为这很好,并且该参数可以在界面中拖放:但是...

回答 2 投票 0

将Azure Data Factory中的嵌套JSON映射到原始对象

由于ADF(Azure数据工厂)无法处理复杂/嵌套的JSON对象,因此我在SQL中使用OPENJSON来解析对象。但是,我无法从以下对象获取“原始” JSON:{“ rows:...

回答 1 投票 0

我如何执行一次Azure数据工厂管道X次(对于X个不同的参数值?)>

我有一个每天在特定时间触发的管道,可以正常工作。该管道将 当前日期作为输入参数,这也很好。现在我正在做...

回答 1 投票 0

Azure数据工厂映射数据流到CSV接收器的结果为零字节文件

我正在加强Azure数据工厂的工作,比较复制活动性能与将数据流映射到Azure Blob存储中的单个CSV文件的比较。当我通过...

回答 1 投票 1

替换回车,返回SOQL API

我正在使用Azure数据工厂从Salesforce API连接器提取数据。问题是某些数据包含回车和换行符。通常我会使用REPLACE(REPLACE(column,char(10)...

回答 1 投票 0

当通过C#.NET Framework管理的数据工厂将数据从Blob复制到Azure SQL时,忽略错误的行

我正在按照本教程进行操作,以从Blob中的平面文件加载Azure SQL中的数据。此方法需要C#.NET Framework控制台应用程序来创建/管理Blob数据集,Azure SQL接收器和数据...

回答 1 投票 0

什么是ADF自定义.NET活动的兼容.NET Framework?

实际上,我正在为ADF自定义.NET活动开发.NET工具。如果.NET Framework为4.5或4.5.2,则该工具运行良好。但是,如果我将框架版本切换到4.6,它将无法运行。它是...

回答 1 投票 0

Azure数据工厂:源数据集具有用户定义的表类型的存储过程

我有一个存储过程,该存储过程接受用户定义的表类型作为参数。我想在Azure数据工厂的复制数据活动的源数据集中使用此SP。我看过一些例子,其中...

回答 1 投票 1

azure数据工厂获取查找活动错误输出

在我的管道中,当查找失败时,只有一个查找活动和一个存储过程活动。查找会发送查询,例如select 1 / count(*)作为来自某个表的结果...

回答 1 投票 0

如何将整个文件内容作为文本加载到 AzureSQLDW 表的列中?

我在 Azure 数据湖 2 中有一些文件,我想将它们加载为 AzureSQLDW 中的列值 nvarchar(max)。 AzureSQLDW 中的表是堆。我找不到任何方法来做到这一点?我只看到col...

回答 3 投票 0

从根AZStorage Blob复制数百万个文件到子文件夹

我有多个Azure存储Blob容器,每个容器都包含超过100万个JSON文件,其中包括根目录。不可能使用(不使人震惊),因此尝试使用Data Factory将它们移动到使用...

回答 1 投票 3

Azure数据流交叉连接

我有一个需要通过Azure数据流实现的要求。正如在输出中看到的那样,您可以在输出中看到我们可以轻松地在sql查询中使用交叉和拆分函数,但是相同...

回答 1 投票 0

ADF复制数据活动-在插入SQL db之前检查重复记录

我有一个非常简单的ADF管道,可以将数据从本地mongoDB(自托管集成环境)复制到Azure SQL数据库。我的pipleline能够从mongoDB复制数据并将其插入到SQL ...

回答 3 投票 0

使用数据工厂将表从SAP BW提取到Azure Data Lake Gen2

我想知道将表从安装在Azure云上的SAP BW提取到Azure数据湖gen2的过程。我想使用ADF将数据从SAP BW复制到Data Lake。我们可以将ADF连接到SAP ...

回答 1 投票 1

Trigger选项不适用于在调试模式下成功运行管道的参数管道

我已经在Azure数据工厂中创建了参数化管道。如果我通过单击“调试”运行,则该管道运行良好。但是通过触发选项执行失败。它无法识别来源...

回答 1 投票 0

Azure Data Factory如何通过REST链接的服务/数据集使用动态查询参数?

我知道如何创建网络活动,但要求直接将响应写入Blob存储,因此我使用复制活动。在复制活动内部,我有一个REST数据集,它使用REST ...

回答 1 投票 0

Azure数据工厂查询

案例:-有一个URL,我需要从下拉列表中选择一个输入,从下拉列表中选择另一个输入以转换一些数据,再从另一个下拉列表中选择CSV格式的数据,然后单击...]]

回答 1 投票 0

© www.soinside.com 2019 - 2024. All rights reserved.