azure-data-factory 相关问题

Microsoft Azure Data Factory是一种云服务,用于使用时间片的概念以受控方式调用(编排)其他Azure服务。数据工厂主要使用手工制作的JSON开发,这为工具提供了执行哪些活动的说明。虽然仍处于预览阶段,但Azure Data Factory V2的引入可以使用api而不仅仅是JSON文件提供更轻松的数据集成体验。

数据工厂中的 Databricks 工作流输出

我看过很多文章解释如何从数据工厂中的databricks笔记本返回输出。是否可以通过工作流程来完成此操作? 我是 Databricks 的新手,但我是这个项目

回答 1 投票 0

从列获取复制可能会在映射期间出现数据截断警告,并在 MS Fabric 下的数据工厂中出现 Float 不兼容错误?

我正在尝试在 Microsoft Fabric 的试用许可证下的数据工厂服务中创建管道。 该文件应该复制 *.txt.gz 格式文件中存在的数据...

回答 1 投票 0

如何在Azure数据工厂中传递不记名令牌API

我有一个API,它具有授权和不记名令牌。我在邮递员中进行了测试,它正在工作。但是,当我在 ADF 中使用 Web 活动时,它不起作用。 我在 URL 部分传递 url。

回答 1 投票 0

使用 Azure 数据工厂检索 QuickBooks Online 总账数据的 API

我正在尝试使用 Azure 数据工厂通过 OAUTH2 连接到 QuickBooks Online General Ledger。我的方法是首先创建一个带有 Web Activity 的管道来执行 POST 调用来接收

回答 1 投票 0

通过 REST API 提取数据时在数据流级别出现错误

我有一个带有 REST API 调用的 ADF 管道,该调用应该以块的形式返回数据,每页最多 100 条记录。 在下图中,它显示直到设置所需的页数为止...

回答 1 投票 0

Azure 数据工厂表达式生成器:使用嵌套数组和对象构建 JSON 时出错

我已经为此工作了几天,并正在寻求帮助。我无法正确构建格式并需要帮助。 我一直在尝试在 Az 中创建 JSON 结构...

回答 1 投票 0

如何在 Azure Datafactory 中创建指向 presto 的链接服务时提供证书

我正在尝试使用以下链接使用 Azure 数据工厂中的链接服务连接到 Presto: https://learn.microsoft.com/en-us/azure/data-factory/connector-presto?tabs=data-factory 我已经进入...

回答 1 投票 0

在 Azure 数据工厂中创建链接服务时,Azure databricks 集群无法加载

这是错误 我正在尝试学习天蓝色数据块,数据工厂...... 我正在尝试将数据块集群链接到数据工厂,但集群无法加载,我已进入集群...

回答 1 投票 0

ADF 管道中的动态 SQL 查询

我正在尝试在 ADF 管道中动态替换 SQL 查询中的表。我尝试了这些查询来获取它: 选择 * 从 c 其中 timestampToDateTime("@{concat(variables('lastUpdatedColumn'),'*

回答 1 投票 0

Rest 调用因客户端错误而失败,ADF 中的状态代码为 404。但我可以通过邮递员看到日期

我正在尝试使用服务主体通过图形 API 连接共享点。我在复制活动中设置了一个休息数据集,并将基本 URL 设置为 https://graph.microsoft.com/v1.0/ 并给出了

回答 1 投票 0

使用 Azure 数据工厂按 LastModifiedDate 增量复制新文件

[在此输入图像描述] (https://i.sstatic.net/MBwbT11p.png) “我需要复制文件,条件是只复制最后修改的文件。因为我总共有6个

回答 1 投票 0

如何使用Azure数据工厂写入数据以共享点列表

我有一个要求,我需要使用azure数据工厂写入数据来共享点列表文件,您能在这里请人帮忙吗? 有什么方法可以帮助将数据写入共享点...

回答 1 投票 0

我想从 ADF 获取 Azure SQL 表数据以用作复制活动中的输入

我有4个SQL表。 员工(包含员工信息) 工程师(与员工结构相同,但没有输入) 3)学生(与Employee结构相同,但没有输入) 4)元数据(包含

回答 2 投票 0

Azure 数据工厂获取业务中心总账条目

我创建了一个 OData LinkedService 并将其连接到 Business Central,如屏幕截图所示: 然后,当我运行管道或预览时,出现以下错误: 对目标复制数据的操作...

回答 1 投票 0

数据工厂到共享点列表

我已经设置了从 Azure 中的数据工厂到共享点站点的连接,这样我就可以将站点上的一些列表拉入 Blob 存储中,这样我就可以处理到我们的仓库中。这一切都有效...

回答 2 投票 0

如何使用 ADF 根据文件名称将多个文件重定向到多个文件夹

我想知道如何使用 Azure Datafactory 将多个文件重定向到 Data Lake 中的多个文件夹中。 例如,我的文件是 bag.csv,然后我可以将其重定向到 TotalBags 类型的文件夹...

回答 1 投票 0

嵌套在 Azure 数据工厂 V2 中的每个活动

我尝试使用两个 forEach 活动来迭代文件夹的子文件夹,并使用参数来获取子文件夹的元数据。我有 forEach1 和 forEach2 及其自己的项目数组。几秒之内...

回答 3 投票 0

Azure 数据工厂:“整数”类型的值不支持属性选择

我正在尝试实现分成批次的负载。 我使用过以下手册: https://techcommunity.microsoft.com/t5/azure-synapse-analytics-blog/extracting-sap-data-using-odata-par...

回答 1 投票 0

在azure数据工厂中执行PostgreSql存储过程

我需要使用 Azure 数据工厂执行 Azure PostgreSQL 存储过程。有什么办法可以做到同样的事情吗?我发现存储过程活动仅支持 SQL 过程。 巴斯...

回答 3 投票 0

如何使用 terraform 将 Azure Analysis Services Server (AASS) 与 Azure SQL 数据库和 Azure 数据工厂 (ADF) 连接

我计划使用 terraform 连接 azure 分析服务服务器与 Azure SQL 数据库和 Azure 数据工厂。 到目前为止,这些文档还没有那么有用,我想知道你是否可以......

回答 1 投票 0

© www.soinside.com 2019 - 2024. All rights reserved.