databricks-sql 相关问题


将 Databricks SQL 查询转换为 DAX

我有以下 databricks sql 查询,我需要帮助通过查找转换为 DAX。 选择不同的 P.ProgramId ,P.程序名 ,DU.内部电子邮件地址 来自 gold.programid P INNER 加入黄金。


Databricks CLI 版本 0.209 - 重置 API v2.1 中的现有作业

如何使用 cli v 0.209 重置 databricks 中的现有作业。 已经参考了下面讨论旧版本 databricks-cli 的论坛 Azure Databricks CLI:更新工作流/作业定义...


无法在Azure databricks中实例化EventHubsSourceProvider

我尝试使用以下代码从 Azure Databricks 的事件中心读取数据。 从 pyspark.sql.functions 导入 * 从 pyspark.sql.types 导入 * NAMESPACE_NAME =“*myEventHub*&...


Databricks Spark:java.lang.OutOfMemoryError:GC 开销超出限制 i

我正在 Databricks 集群中执行 Spark 作业。我通过 Azure 数据工厂管道触发作业,它以 15 分钟的间隔执行,因此在成功执行三到四次之后...


更新DataBricks中String列类型的JSON数据中的特定值

我在databricks目录中有一个列类型为字符串的表。它包含 JSON,我想从中更新特定值,例如“key1”。我已经使用 from_json 将其转换为 json...


禁用 Databricks 笔记本中的命令框

我有一个 Databricks 笔记本。我的笔记本有几个命令。其中一些只是为了我的测试,我不想在生产中运行它们。 有什么办法可以禁用命令。我不想


在 Databricks 中使用 AutoLoader 时是否可以不合并镶木地板?

在 Databricks 中使用 AutoLoader 时是否可以不合并镶木地板? 问题是,我想将数据从 S3 存储桶直接复制到 Azure Blob 存储,而不合并它。只需 1:1 复制...


通过全局初始化脚本启用 Databricks 集群日志

我想通过全局初始化脚本为工作区中的所有集群(新的或旧的)设置集群日志传送。 我尝试通过自定义 Spark conf 添加底层 Spark 属性 - /databricks/dri...


将 pyspark 数据帧转换为代码/语法

假设我在 Databricks 中有以下 pyspark 数据框: 一些其他列 价格_历史记录 测试1 [{“日期”:“2021-03-21T01:20:33Z”,“price_tag”:“N”,...


pyspark 中没有发生小数点后 2 舍入

我正在databricks中进行以下计算,并四舍五入到小数点后两位。 结果 = ( 圆形的( 合并( 当(col('col')!= 0,col('col')), 当(col('col')!...


是否可以广播字典并将其用作 pyspark 中的查找?

我正在azure databricks中运行以下代码。 使用 erp_bu 创建查找字典,erp_bu 是具有两列“erp_code”和“bu”的行对象列表 广播查找字典


Sharepoint 文件修改时触发 Synapse Pipeline 的方法

我正在寻找一种在文件被修改时触发 Synapse 管道(运行 Databricks 笔记本和 Web 活动来刷新 PowerBI)的方法。 假设我的 Sharepoint 网站上有一个 data.xlsx


尝试在 Azure Databricks 上导入已安装的 Python Wheel 包时出现操作系统错误

我有一个名为 my_sdk.whl 的轮子包,是我在本地开发和构建的。 我还在虚拟环境中使用 pip install my_sdk.whl 测试了这个包,并尝试在...


在过程中忽略 SQL 语句

我在我的 pl/sql 过程中收到 pl/sql 语句忽略错误,其中 SELECT 在编译时在 sql Developer 中启动 过程 sort_emp_records ( p_instance_id IN VARCHAR2, p_filen...


SQL Server (T-SQL) 相当于 C# DateTime.Compare?

我想执行与以下 DateTime.Compare 相同的操作,但在 T-SQL 中: if (DateTime.Compare(DateTime.Now, (DateTime)myVar.Date) >= 0) { myVar.Priority += WeightedValue; } 我尝试创建...


SQL Server 作业完成后如何触发 DataStage 作业?

目前,SQL Server 中有一个作业计划每天运行几次。 SQL 作业为在 SQL Server 作业之后不久安排的 DataStage 作业构建一个文件,问题是...


私有端点连接Azure SQL数据库

我已经有 Azure SQL Server 的专用端点。在 Azure 数据工厂中创建链接服务时,如何配置 Azure SQL 数据库的专用端点?


在 where 子句中使用变量进行 SQL 查询以进行排除

我正在使用 dbWarden (https://www.sqlservercentral.com/articles/dbwarden-a-free-sql-server-monitoring-package-3) 进行 SQL 监控,并希望将某些进程排除在外“长


SQL 查询意外并行执行

尽管“并行成本阈值”的值设置为 50,但估计成本为 32 的 SQL 查询仍会并行执行。 此屏幕截图取自 SQL Server 2022CU10 服务器,...


SQL:将 DATEADD 与 bigint 结合使用

我有一些 SQL 将 javascript 日期转换为 SQL 日期,效果很好。但是,我遇到了一些太大的数据并导致异常: 算术溢出错误转换


SQL Server 2019 Express 安装失败,因为找不到 2017 驱动程序?

我安装了SQL Server 2019的基本配置,最后报错: 哎呀 无法安装 SQL Server (setup.exe)。 退出代码(十进制):-2068052310 错误描述:安装


在 Pandas 中复制 SQL Group By、Having 和 Sum 功能

这是我的sql查询: 选择 tri.FINCODE、tri.YEAR_END、sum(qr.OP_INCOME) OP_INCOME、sum(qr.OP_EXPENSE) OP_EXPENSE、sum(qr.INT_COST) INT_COST、sum(qr.EBIT) EBIT、sum(qr.NOPAT) NOPAT、sum (qr.


Microsoft SQL Server Management Studio - 查询结果为文本

我在 Microsoft SQL Server 中有一个数据库,并且正在使用 Microsoft SQL Server Management Studio。 我可以选择将查询结果插入到文件中,尽管查询结果不是


SQL 将多值数据拆分为多行

我有一个包含以下数据的 SQL 表: |名称 |颜色 |形状| | -------- | ------------------ | ---------------- | |鲍勃 |蓝色、绿色|圆形、方形...


在 SQL Moodle 用户完成报告中包含 Scorm 活动名称

我如何扩展 Russell England 此处提供的优秀 SQL 代码:moodle 中活动完成的 sql 代码,以将 Scorm 活动标题(mdl_scorm 表中的名称实体)包含在 ...


从 FT.AGGREGATE 反馈或保存查询

我正在尝试在 rediSearch 中复制以下 SQL 查询: %%sql 选择 NumQuestions, COUNT(OwnerUserId) AS NumUsers 从 ( 选择 OwnerUserId, COUNT(*) AS NumQuestions 来自帖子 W...


sql loader:使用sql loader加载大于4000个字符的字符串

我需要使用sql加载器将CSV文件加载到表中,但列的长度超过了varchar2数据类型的最大长度。 建表语句: 创建表 TEST_PIPE_SEP (FILE_NM VA...


sql:如何查找聚合中满足条件的连续日期

我正在 Azure SQL MI 中工作。我正在努力处理某个 SQL 查询。我有一个“时间表”表,如下所示: 员工 ID 日期 工作时间 劳动类型 小时数 -------------------...


游戏的实时 Web API 可以在 ASP.NET Core 和 SQL Server 中实现吗?

您能告诉我游戏的实时 Web API 是否可以在 ASP.NET Core 和 SQL Server 中实现吗? 我们正在开发的 Unity 游戏需要实时 Web API。我们正在使用 SQL


使用 Sequelize 将 Cloud Run Node 应用连接到 Cloud SQL

我正在尝试在 Google Cloud Run 上部署 Nodejs 应用程序,该应用程序应该使用 Sequelize ORM 连接到 Cloud SQL MySQL 数据库。 如果我使用云 sql ins 的本地代理,它工作正常...


如何通过Oracle到SQL Server的网关更新Genero中带双引号的列?

我们已经创建了从Oracle到SQL Server的网关和数据库链接, 在 sqlplus 和 SQL Developer 中。执行此操作后,以下查询将起作用: 更新 Ckm_cqh@mstest 设置“cqh02”=“2222” ...


询问正确的SQL查询

const personid = result.map(item => item.person_id) console.log("personen", personid) const formattedid = personid.join(","); const nameResult = 等待


通过 IAM 身份验证将任何 SQL 客户端连接到 Amazon RDS for MySQL

我可以从 SQL 命令行工具使用 IAM 身份验证连接到 MySQL RDS 数据库。但同样我需要实现与 DBeaver 等 SQL 客户端或其他一些客户端的连接。我确实...


SQL Server 上的查询过滤器 (ArcGIS Pro)

目前我正在尝试将 Oracle 数据库上的旧查询过滤器升级到 SQL 服务器。旧查询如下: select * from table.a a, table.b b WHERE sdo_relate(a.shape, b.shape, 'm...


如何将所有模板放在一个文件中并从 python 代码在 jinja2 中访问它们

我有 30 到 40 个 SQL 查询,我想使用 jinja2 模板文件来存储查询,以便将 python 代码和 SQL 查询分开存储 对于每个 SQL 查询,我创建一个单独的


实体框架 - 带有参数列表 <> 的 SqlQuery [重复]

我正在尝试使用 EF 通过 IN 子句查询数据库: 列表 ids = 新列表 {1,2,3,4....20}; 字符串 sql = GetSql(ids); //sql 是“SELECT * FROM Student WHERE Id in (@p0, @p1, ...


Postgres:将 JSON 数据扩展到列和行

我有一个 SQL 格式的表,其中包含 JSON 格式的列。以下是 SQL 查询输出的示例: 我需要此表中的每一行使用


当Apache IoTDB中导出TsFile数据的sql语句较多时,为什么执行的结果却较少?

我想问一下,当在Apache IoTDB中使用TsFile导出工具时,我的sql文件中有40条sql语句,但只导出了3个TsFile。这是什么原因呢?导出工具有没有...


使用云sql身份验证代理从本地mysql客户端访问Cloud SQL

我在从本地/gcloud shell 连接到我的 Cloud SQL - MySQL 实例时遇到问题。根据组织政策,我们不能拥有 mysql 数据库实例的公共 IP。所以我创建了一个 vpc 网络来使用


Django 和 SQL Server 的数据库配置 - 转义主机

我已将 Django 应用程序设置为使用 Microsoft SQL Server 数据库。这是我的数据库配置。 数据库= { '默认': { '引擎': 'mssql', 'NAME': "报告", '


使用 MSSQL 将 SQL Server 与 Nodejs 连接时出现 SQL Server 错误“[ConnectionError: Login failed for user '****'.]”

我遇到以下错误 [连接错误:用户“****”登录失败。] name: '连接错误', message: '用户\'****\'登录失败。', 代码:'E...


将包含日期的列按月拆分为多列。 SQL

我正在尝试根据月份验证登录的用户。 SQL 当前df 用户 ID 日期 P1302 2023-11-01 P1302 2023-10-01 P1302 2023-09-01 P1302 ...


删除 SQL *Plus SPOOL 中的初始和尾随空白行(SET MARKUP CSV)

我正在尝试使用 SQL *Plus 将简单的 SELECT 导出到 .csv 文件。如果有更好的方法来做到这一点,我愿意,但我需要使用 SQL 并以 .csv 结尾,并且能够单击某些内容来运行 wh...


sql server 2008数据库附加错误

我尝试将豪华数据库添加到我的 SQL Server 2008,但出现错误。 它显示以下错误: 服务器“SAMEER-PC”附加数据库失败。(Microsoft.SqlServer.Smo) 额外


如何命名与表名含义相同的SQL列?

我有一个名为指令的 SQL 表。该表有一列也称为指令,类型为 varchar(8192),包含所需的文本指令: 创建表`指令`( `


如何控制 Hibernate 在生成的查询中使用的 SQL 表别名?

tl;dr:Hibernate 在其查询中自动生成 SQL 表别名,如 jurisdicti4_ 或 this_。这是一个示例查询: 选择 this_.id AS id2_6_3_, 这个_.


SQL 查询返回某些值

我有这个 SQL 查询(我正在使用 Access): 选择 [tbl - 用户列表].*, [lnk - 用户状态列表].[员工状态], [tbl - 应用程序所在地区].[地区] 从 ( -- 左乔伊...


T-SQL 存储过程 - 检测参数是否作为 OUTPUT 提供

考虑以下 T-SQL 代码片段: 创建过程 dbo.SquareNum(@i INT OUTPUT) 作为 开始 设置@i = @i * @i --选择@i 结尾 去 声明@a INT = 3,@b INT = 5 EXEC dbo.SquareNum @a OUTPU...


从spark/scala项目代码中资源文件夹中的sql文件读取查询

我在 IntelliJ 中的文件夹结构如下 src-->主-->资源-->sql-->samplequery.sql 我在文件夹 src--> main-->scala-... 中有 scala 对象文件samplequeryexecute


Oracle 在 SQL 中访问 varray 元素

我正在研究 Oracle 中的数组支持,并遇到了有关 SQL 查询中数组访问的障碍。我正在使用以下架构: 创建类型smallintarray为varray(10) of number(3,0);


© www.soinside.com 2019 - 2024. All rights reserved.