partitioning 相关问题

分区是一种性能策略,您可以将可能非常大的数据组划分为一些较小的数据组。

按字符串划分BigQuery

我有一个数据集,我试图在BQ中为其创建一个表,我想通过一个类似于“ Mar1998”的“ yearmonth”字段对它进行分区。这些月份中有80个月,它们使我的660M崩溃了……

回答 1 投票 0

找到同一组两个分区之间所有不同交点的Python高效方法

我需要找到同一集合的两个分区之间的所有不同交集。例如,如果我们有以下两个具有相同集合的分区x = [[1,2],[3,4,5],[6,7,8,8,9,10]] ...

回答 1 投票 0

无法通过Spark查询分区数据上的BigQuery外部表

我试图在由Spark作业写入的GCS中的分区数据上创建一个外部表,并以PARQUET格式对日期进行分区。数据是GCS桶如图所示。我...

回答 1 投票 0

为什么我的3分区问题未能通过给定的测试用例? (3-分区问题)

参考以下内容:3-PARTITION问题有人可以解释一下为什么在R. Gurung的cpp解决方案中我们从总和开始j和k的循环吗?如果从0开始循环,该怎么办?我...

回答 1 投票 -1

我如何在AWS ec2上增加ebs分区的卷大小?

当我在某个分区上(在aws-ec2实例上)部署应用程序时,出现致命错误,我在此块上没有空间,设备上没有剩余空间。如何在...

回答 2 投票 1

我应该基于什么来决定给定表的最佳散列分区数?

例如,我想创建一个哈希分区表,如下所示:CREATE TABLE partition_table(some_id INT NOT NULL)PARTITION BY HASH(some_id);我首先创建4个分区...

回答 1 投票 0

如何在Linux Centos 7.7(AltArch)中的/ dev / root中增加可用的文件系统大小?

我正在运行CentOS 7.7的全新安装。在我的Raspberry Pi 3上,不幸的是,在安装yum软件包时,我的大小用完了:[root @ centos7〜]#df -h使用的文件系统大小可用...

回答 1 投票 0

测试Postgres表分区的HASH函数

我正在使用Postgres 11,并且希望在主键为UUID的表上使用哈希分区。我了解我需要预先选择多个分区,并且...

回答 1 投票 0

尝试在Prolog中实现分区谓词

我正在尝试在序言中实现一个分区谓词,该谓词将列表分成其前缀和后缀part(L,P,S),其中前缀和后缀的定义如下:prefix(P,L):-append(P, _,L)。 ...

回答 1 投票 0


如何在分区之前通过输出来平衡Spark DataFrame数据

我有带有地理空间数据的DataFrame。我想按列对其进行分区:数据源ID和四键。主要目标是一方面使文件的最小数量不超过一定大小。 ...

回答 1 投票 1

得到错误:比较中超过了最大递归深度

我正在尝试使用Hoare分区方案编写QuickSort算法。我很确定我的分区功能是正确的。我使用变量'Swaps'指示左枢轴的运动...

回答 1 投票 1

如何使用部分字符字段对PostgreSQL表进行分区?

PostgreSQL 11.4表foo包含一个my_datetime字段,该字段的字符为variant(254),我想使用此字段对foo进行分区,但仅将字符串值的年,月,日部分20200328175432 ...

回答 1 投票 0

在通过输出分割分区之前平衡Spark DataFrame数据

我有带有地理空间数据的DataFrame。我想按列对其进行分区:数据源ID和四键。主要目标是一方面使文件的最小数量不超过一定大小。在...

回答 1 投票 0

uuid作为散列分区的主键和分区键

我正在PostgreSQL 12中建立一个按哈希表分区的分区,它将具有256个分区。我将uuid用作表的主键。可以使用与哈希键相同的uuid列吗?...

回答 1 投票 2

如何每天截断oracle创建的分区

我也为该分区创建了一个表,我也创建了该分区,并给了我提到的那个分区范围(1,'day')。每天,oracle将为该表创建一个分区..我的项目是.. 。

回答 1 投票 0

SQL Server分区表按行数大于1的列数据和分区筛选

我有一个SQL Server分区表,在其中获取行数> 1的数据,但是我有一个IsActive列并想拉出行数> 1的活动分区的场景...]]

回答 2 投票 -1

从HiveQL的url字段中解析和提取字段

我从表中获得此数据:id,uri,date_entered,p_id,ads_id 1,http://vegiefood.com/path1/p.php?keyword = veganway&country = france#Ref1,30 / JUN / 2016,PVEGIEFOOD ,GOOGLEADSENSE 2,http:// ...

回答 1 投票 0

Scheme中列表的非递减列表?

我们需要一个称为nondecreaselist的Scheme函数,该函数接收一个数字列表并输出一个列表列表,这些列表总体上具有相同的数字,并且顺序相同,但是分为以下列表...

回答 2 投票 -3

PostgreSQL 12可以在执行时通过子查询返回列表来对分区进行修剪吗?

[我试图在一种情况下利用分区的优势:我有表“ events”,该表按字段“ dt_pk”按列表进行了分区,而该字段是表“ dates”的外键。 -模式删除模式(如果存在测试...)>

回答 2 投票 3

© www.soinside.com 2019 - 2024. All rights reserved.