partitioning 相关问题

分区是一种性能策略,您可以将可能非常大的数据组划分为一些较小的数据组。

Visual studio 2022 想要安装在此文件路径,但该路径不再可用

D 驱动器不再可用 我无法安装新的 VS。我在 2-3 年前安装了一个装置,从那时起,安装它的驱动器就出现了故障。现在我不能

回答 1 投票 0

根据工作线程、核心和 DataFrame 大小确定 Spark 分区的最佳数量

Spark-land 中有几个相似但不同的概念,围绕如何将工作分配给不同的节点并同时执行。具体来说,有: Spark 驱动程序节点 (

回答 2 投票 0

同时分离分区后删除它是否安全?

我正在尝试在我的 psql(版本 15)数据库上自动进行分区管理。 我想删除旧分区以释放数据库中的一些空间。为此,我计划使用 CONCURRENTLY 关键字将其分离...

回答 1 投票 0

Spark 在读取时是否使用 repartition() 来推断 parquet 文件的分区是否持续存在?

我有两个数据集存储为镶木地板文件,其架构如下: 数据集1: ID 第 1 列 列2 1 v1 v3 2 v2 v4 数据集2: ID 第 3 列 第 4 列 1 v5 v7 2 v6 v8 我想使用 pysp 连接两个数据集...

回答 1 投票 0

如何查询名称由 PL/pgSQL 函数结果构建的表?

我有下面的函数,它接受日期时间并返回整数。 创建或替换函数 public.get_partition_index(带时区的日期时间时间戳) 返回整数 语言 plpgsql 伊穆塔...

回答 1 投票 0

将数组严格分为两部分,其中左半部分元素小于右半部分元素

我需要根据中间值midval将数组A[n]分为两个子数组A1,A2,使得A1(或表示为左边)的所有元素都小于midval,并且所有元素都小于midval元素...

回答 1 投票 0

Athena 分区表未产生任何结果

我正在尝试在 Athena 中创建分区表。在 S3 上,根据指南,我有以下目录结构: aws s3 ls s3://arapbi/polygon/tickers/ PRE dt=...

回答 1 投票 0

将正数列表分配到所需数量的集合中,旨在使它们之间的总和尽可能接近

我发布这篇文章的目的是整合我的其他帖子,其中要求我提供一个最小的工作示例,同时也询问有关代码本身的建议,以防有人提出建议......

回答 1 投票 0

以下值分区是否涵盖 12 月 31 日这一天?

以下值分区是否涵盖 12 月 31 日这一天? 创建数据库“dfs://stock_day” 按 RANGE(1991.01M + (0..30)*12)、HASH([CHAR,2]) 分区 引擎='OLAP', 原子='TRA...

回答 1 投票 0

如何计算每个零件编号从当前日期到当前日期 - 交货时间的订单数量?

我正在尝试编写一个查询来计算两个日期(订单日期和回溯日期(订单日期 - 交货时间))之间每个零件编号的订单数量之和。 例如, 零件编号 订购日期 回顾 D...

回答 1 投票 0

DolphinDB:如何解决错误与查询相关的分区数[xxxx]太大?

数据查询时出现如下错误: 与查询相关的分区数量[274000]太大。请在WHERE子句的分区列上添加更具体的过滤条件...

回答 1 投票 0

MariaDB 不会根据分区表上的分区进行选择

我有这个范例(Laravel 应用程序):当您在我的应用程序中编辑和实体时,我不会编辑数据库中的记录。相反,我将该实体复制为一个新实体。数据库中的每个可编辑实体都有...

回答 1 投票 0

Spark 中如何从外部数据源并行读取数据?

我是 Spark 新手,正在阅读学习 Spark 日志。对数据获取/读取的概念有疑问。 如果我有一个外部数据源(未分区)并且我想...

回答 1 投票 0

分区可以用于 Postgres 中的 LIKE 查询吗?

我有一个巨大的单词表,我正在其上运行 LIKE 查询: 创建表词 ( id 整数, 词变量 ) 它的工作时间相当长。索引没有多大帮助,所以我尝试按单词 col 对其进行分区...

回答 2 投票 0

如何编写 Eloquent 查询以从分区表中检索数据

我正在研究数据库分区并使用laravel框架进行开发。 我正在尝试将原始查询转换为 Eloquent。 前任。我的查询就像 SELECT * FROM 员工 PARTITION (p2) 所以使用...

回答 1 投票 0

在 BigQuery 中使用表中的同一列进行分区和聚类

我正在转向由时间戳列分区的表,其值以毫秒为单位。现在我想按小时生成集群,这将取决于我用于分区的相同时间戳列...

回答 1 投票 0

使用 2 列进行表分区

是否可以使用 2 列而不是仅 1 列的分区函数来对表进行分区? 考虑一个包含 3 列的表 ID(int,主键, 日期(日期时间), 数字(整数) ...

回答 3 投票 0

为什么 MonetDB 不将此表添加到合并表中?

我正在努力处理合并表,需要社区帮助! 当我将表添加到新创建的合并表时,“添加”表是否需要为空? 如果“添加”表有...

回答 1 投票 0

MonetDB 合并表问题

我正在努力处理合并表,需要社区帮助! 当我将表添加到新创建的合并表时,“添加”表是否需要为空? 如果“添加”表有...

回答 1 投票 0

MySQL 可以并行化 UNION 子查询(或任何其他查询)吗?

我使用数据量较大的分区表。根据 MySQL 文档,ToDo 列表中有: 涉及聚合函数(例如 SUM() 和 COUNT())的查询可以 很容易

回答 4 投票 0

© www.soinside.com 2019 - 2024. All rights reserved.