u-sql 相关问题

U-SQL是为Azure Data Lake设计的查询语言。它提供了一种将SQL关键字与语法C#表达式混合的方法,这样在一个脚本中,程序员可以对来自非结构化源的数据进行模式化,使用SQL将数据聚合为所需的形式,然后将输出写入文件或桌子。

将 Power BI 连接到 S3 存储桶

需要一些指导,因为我是 Power BI 和 Redshift 的新手.. 我的原始 JSON 数据以 .gz 文件的形式存储在 Amazon S3 存储桶中(每个 .gz 文件有多行 JSON 数据) 我想连接

回答 2 投票 0

从U-SQL中引用ADL存储gen2文件。

我有一个ADL账户,设置了两个存储:常规的ADLS gen1存储设置为默认,还有一个启用了 "分层命名空间 "的blob存储,使用存储键连接到ADLS ...

回答 1 投票 0

用于JSON转换的U-SQL脚本。

我有一个有很多级别的JSON文件,需要在Azure Data Lake Analytics中转换它,以获得从 "vin "级别开始的所有数据(包括)。 被切割的json是:"vehicleStatusResponse"。{ "...

回答 1 投票 1

如何避免在使用U-SQL读取具有未知列数的Excel文件时重复最后一列的值

我正在尝试使用oh22is ExcelExtractor库读取Excel文件并在Azure Datalake中写入一个csv文件。 Excel文件的表格格式有问题,并且列数未知(...

回答 1 投票 0

如何在U-SQL提取语句中指定日期范围

我的输入文件位于一个月目录中,使用命名模式_.csv,我可以创建摘录以捕获所有文件@InputFile_Daily +“ {*}。json”。但是,现在我需要能够创建一个文件集...

回答 1 投票 1

C#正则表达式-查找字符串模式,并用更正的字符串模式替换]]

[找到正则表达式的正则表达式是什么,后跟任意数量的字符,然后是“”,然后是“”,然后是任意数量的字符,然后是“”“?例如“富兰克林”“->”“富兰克林”“”“ ...

回答 1 投票 -1

基于3个唯一列的现有文件中不存在的U-SQL插入数据

@ AllData = SELECT DISTINCT e1。[Createddate],e1.Active,e1.Model e1。[ID]来自@ searchlog1 AS e1左反抗联接...

回答 1 投票 0

我们如何在datafactory中创建通用映射数据流,以从具有不同模式的不同表中动态提取数据?

我正在尝试创建对所有表通用的azure datafactory映射数据流。我将传递表名,用于连接目的的主列以及在groupBy中使用的其他列...

回答 1 投票 1

如何爆炸而不会丢失空值?

如何在U-SQL中爆炸数组而不丢失Null值?在正常的交叉应用| Explode(),空值丢失。我从这里提取了以下脚本:@content = SELECT * ...

回答 1 投票 0

使用U-SQL从文本文件中删除特殊字符

您能帮助我使用U-SQL从文本文件中删除特殊字符(”)。 @testResult = SELECT Card_no,Regex.Replace(Card_no,“ s + | \\'| \\”“,” 9999“)AS var4 FROM @testData; ...

回答 1 投票 -1

我想在u-sql的if条件中使用“> =”,但变量在字符串中

我正在使用u-sql代码,如果条件需要在其中使用,但字符串中有一个问题@day,因此,我无法使用“> =”条件,如果可以,可以对其进行转换工作,但全部...

回答 1 投票 0

如何使用空值连接字符串

我们如何串联可能为空的字符串?我收到以下错误:...尝试执行时:@blocks_merged = SELECT AN_52_ENC_CSN_ID AS an_53_enc_csn_id,字符串。...

回答 1 投票 0

“ GetVersionedSdkPath:意外的布局”尝试构建U-SQL项目时出错

两台不同的计算机,Windows 10 1803,带有v2.4.2000.0的Azure Data Lake和Stream Tools的VS2017的全新安装。我尝试构建超基本的U-SQL项目以在本地运行,然后得到...

回答 1 投票 1

从u-sql中的文件夹获取要处理的文件数

[如果文件夹中有多个文件,则如何从u-sql中的文件夹(目录)中获取文件计数,然后仅处理最新文件,否则处理第一个文件!

回答 1 投票 0

使用数据工厂在使用天蓝色数据仓库映射.tsv文件数据时出错

我想将.tsv文件中存在的表单数据湖中的数据复制到azure数据仓库中,但日期数据类型中有2列,因此在映射...时遇到问题...]

回答 1 投票 0

可以使用azure python sdk根据上次修改时间过滤azure数据湖文件吗?

我正在尝试对存储在蔚蓝数据湖中的文件执行内存中操作。如果不使用ADL Downloader,就找不到有关使用匹配模式的文档。对于单个文件,...

回答 1 投票 0

Azure数据工厂在复制大数据文件时失败

我正在使用Azure数据工厂,将数据从REST API复制到Azure数据湖存储。以下是我的活动的JSON {“ name”:“ CopyDataFromGraphAPI”,“ type”:“ Copy”,“ policy”:{...

回答 1 投票 0

如何组合不同的模式

我正在使用自定义输出从我的“平面数据”生成XML,如下所示:SELECT * .. OUTPUT @all_data TO“ / Patient / {ID} .tsv”使用新的Microsoft.Analytics.Samples.Formats.Xml .XmlOutputter( “患者”); ...

回答 1 投票 -1

字符串转换为浮动与指数号

我需要字符串转换为浮动我需要你-SQL代码。该脚本可以是一个exponencial像10 ^ 2我试过Float.Convert而不是作品。我期望转换(10 ^ 2)= 100

回答 2 投票 1

U型SQL文本提取整数

我需要从文件中提取数据,请参见下面的代码。 @rows = EXTRACT booking_date串,路由字符串,字符串信道,POS串,本塔串,FLIGHT_DATE ...

回答 1 投票 4

© www.soinside.com 2019 - 2024. All rights reserved.