u-sql 相关问题

U-SQL是为Azure Data Lake设计的查询语言。它提供了一种将SQL关键字与语法C#表达式混合的方法,这样在一个脚本中,程序员可以对来自非结构化源的数据进行模式化,使用SQL将数据聚合为所需的形式,然后将输出写入文件或桌子。

USQL + Python扩展库

usql python扩展是否支持sci-kitlearn库?网页https://docs.microsoft.com/en-us/azure/data-lake-analytics/data-lake-analytics-u-sql-python-extensions仅提及numpy,pandas,...

回答 1 投票 0

如何使用.NET SDK中的代码执行U-SQL作业

我有一个U-SQL作业,在后面的代码中使用自定义Extractors。我需要从C#代码按需运行它。我找到了一种通过像字符串一样传递脚本来提交作业的方法。我能以某种方式执行......

回答 1 投票 0

根据U-SQL中的配置值过滤记录

我有两个csv文件 - 1]包含列 - firstName,lastName,age 2]包含单列 - id1,id2,id3这3个id字段包含不同的数字。现在从我想要输出的第一个文件...

回答 1 投票 1

在U-SQL中实现Case语句

想知道是否有人有关于使用U-SQL实现案例或IF语句的建议。例如,我如何转换它:SELECT FirstName,LastName,Salary,DOB,CASE Gender ...

回答 6 投票 4

在sql中有没有其他方法可以实现以下逻辑?

我有两个表 - > tb1和tb2。我正在使用ID列对这些表执行左连接操作,并且还有一个条件,例如一列不等于其他列。下边是 ...

回答 2 投票 0

如何使用不等于U-SQL中的条件?

我正在尝试编写一个U-SQL查询来复制SQL查询所执行的相同逻辑,如下所示。 SELECT * FROM tb1 LEFT JOIN tb2 ON tb1.id = tb2.id AND tb1.pid!= tb2.pid;由于U-SQL不支持...

回答 1 投票 1

U-SQL结合三个连接的操作写入了大量的数据

所以我有三个数据源,我想连接在一起产生一些输出。 File1.json:378mb File2.json:72kb file3.json:500kb @ extractFile1 = EXTRACT columnList FROM PATH“path / File1 ....

回答 1 投票 0

Azure Data Lake中的U-SQL输出

如果我不知道表中包含多少个不同的键值,是否可以根据列值自动将表拆分为多个文件?是否可以将关键值放入...

回答 3 投票 5

在SQL中解析多个DateTimes

所以我提取的文件有两个不同的起始时间格式的多个实例。一个开始时间采用zulu(UTC)格式,另一个采用标准dateTime格式。所以当我创建一个......

回答 1 投票 0

ADLA作业:根据行内容写入不同的文件

我有一个固定宽度文本文件的BUNCH包含多个事务类型,只有我关心的3个(121,122,124)。示例文件:...

回答 2 投票 1

ADF V2中的USQL活动 - 2705用户无法访问datalake商店

使用Azure Data Factory V2运行U-SQL脚本时遇到问题。这个U-SQL脚本在门户网站或vs:@a = SELECT * FROM(VALUES(“Contoso”,1500.0,“2017 -...

回答 2 投票 1

USQL提取文件的子集

我有一个U SQL问题。我有一个日常工作,就是按照以下格式将文件输出到目录/Output/{YYYY}/{MM}/{DD}/file.csv我现在有第二份工作要运行,这将...

回答 1 投票 0

如何使用U-SQL修改文本文件

我有一个大约130MB的大文件,每行包含10个A字符,而在第10个“A”字符的末尾是\ t,我想提取这个文本文件,然后将所有A改为B。任何人都可以帮忙......

回答 1 投票 0

在Data Lake中创建Spark作业而不是U-SQL作业

是否可以在Data Lake中创建Spark作业而不是U-SQL作业?

回答 1 投票 1

Guid.NewGuid()总是为所有行返回相同的Guid

对于我从源头转变的每一行,我都需要独特的guid。下面是示例脚本;代码Guid.NewGuid()总是为所有行返回相同的@Person = EXTRACT SourceId int,...

回答 3 投票 3

Azure Data Lake Analytics中的内存限制

我已经为NetCDF文件实现了一个自定义提取器,并在输出之前将变量加载到内存中的数组中。有些数组可能很大,所以我想知道ADLA的内存限制是什么。 ...

回答 2 投票 3

选择上个月没有警告的用户

我是u-sql的新手。我有一个文件的用户列表,以及用户在其他文件上的警告列表。这些文件都是csv文件格式的datalake。如何选择没有警告的用户?

回答 2 投票 0

© www.soinside.com 2019 - 2024. All rights reserved.