hive 相关问题

Hive是Hadoop的数据仓库系统,可以简化数据汇总,即席查询以及分析存储在Hadoop兼容的分布式文件系统中的大型数据集。 Hive提供了一种机制,用于将结构投影到此数据上,并使用类似SQL的语言HiveQL查询数据。

意外字符(在字符 2 处)飞镖颤动

在我的 flutter hive 上获取存储的数据让我陷入了这个错误: ════════小组件库捕获异常═════════════════════════════ ══════ 意外字符(字符 2 处) {id:2,

回答 1 投票 0

flutter NoSuchMethodError:类“String”没有实例 getter“logo”

我是 flutter 新手,我的 flutter 代码有问题 问题是 NoSuchMethodError:类“String”没有实例 getter“logo”接收器:“{id:2,网络:MTN,折扣:2,徽标:mt ...

回答 3 投票 0

SQL:查询某个时间段的年/月/日分区数据

我有一个由 parquet 文件组成的 AWS S3 数据湖,其结构如下: s3://bucket/device/table_x/year=2000/month=01/day=02/xyz.parquet 我的目标是使用 AWS Athena 查询数据以在 Graf 中显示...

回答 1 投票 0

hive 达到最大工作线程数,无法连接到 hiveserver2

当我使用beeline连接到hiveserver2时,错误消息是这样的。 我之前已经连接到hiveserver2。 我连接到 hiveserver2 几次后会显示此错误。 我可以使用 jdbc 连接:

回答 1 投票 0

Hive 中的 date_format 函数给出错误的结果

我正在尝试使用命令 date_format 将字符串转换为微秒的日期 询问: 选择 date_format('2021-04-14 16:07:47.123456', 'yyyy-MM-dd HH:mm:ss.SSSSSS') 结果: 2021-04-14 1...

回答 1 投票 0

带有 SERDEPROPERTIES 的 Hive CREATE TABLE 语句会引发错误

我正在进行从 HDP 到 AWS EMR 的迁移项目。作为这项工作的一部分,我们使用 HDP 中的 CREATE TABLE 语句在 EMR Hive 中创建表,这是使用 show create 获得的

回答 1 投票 0

无法在 Hive 查询中定义动态参数

我正在尝试在 Hive 中设置一些视图,这些视图将日期作为动态参数。在我下面的工作中,我已改为在 Select 子句中使用 hiveconf 变量,这样我们就可以看到什么......

回答 2 投票 0

Hive 数据量增加时左连接中未连接 da

在这个hive sql中,当table1数据量很大的时候,t2.c会丢失,但是应该join,这在mapreduce层面怎么解释呢? 选择 t1.a, t1.b, t2.c 从 表1 t1 左

回答 1 投票 0

如何连接HIVE Metastore + TRino + S3

Hive-独立-元存储 = v3.1.3 Hadoop jar = v3.3.4 我已经设置了 Hive MetaStore,最终目标是将其与 TRINO 连接,这样我就可以在 S3 中查询我的镶木地板文件..并且我...

回答 2 投票 0

提高此窗口密集型查询的性能

我在 HQL 中有以下代码。它从包含超过 25 亿行和大约 334 列的表中提取数据。运行需要一段时间,因此我正在寻找任何可能的潜在性能提升。 ...

回答 1 投票 0

列统计(Hive)中字段bitVectors的含义是什么?

列统计测试 我从文档中获得了有关 Hive 列统计信息的信息。对于大多数列都归档了bitVectors,它的含义是什么,以及计算它的规则? 我创建了一些选项卡...

回答 1 投票 0

Pyspark JDBC 返回具有列名称的所有行

我正在使用Python 3.7中的Spark 3.2.1和以下代码查询Spark的(Hive)数据库表。 该表可以通过 DBeaver、PowerBI 和 SS 等其他系统进行完全访问和操作...

回答 1 投票 0

使用 Between 运算符的 Hive 不等式连接

我们有一个类似于以下的查询:(partition_date 是我们的表分区) 从 A 选择 * 加入B 其中partition_date > B.last_runtime; 我们意识到,通过将条件放在 w...

回答 2 投票 0

无法读取 Spark 上的外部 Hive 表

影响版本:2.3.2 组件:PySpark、Spark Core、Spark Shell 标签:JSON 外部表 hive Spark 环境:hdp 3.1.4 hive-hcatalog-core-3.1.0.3.1.4.0-315.jar & hive-hcatalog-core-3...

回答 1 投票 0

是否可以从 HDFS 手动删除 Hive 表的分区目录而不删除分区

假设我有一个分区的配置单元表 >显示分区db.my_table; +----------------------------------+ |隔断| +----------------------------------+ |在_...

回答 2 投票 0

从源代码构建 Apache Tez 失败

我正在使用 Hadoop 版本 3.3.6 设置节点集群 (CentOs 8)。我尝试使用Java 8为Hive(版本3.1.3)的执行引擎设置Apache Tez(版本0.9.2)。但是之后

回答 1 投票 0

如何使用 python 在配置单元位置的文件中插入 2 列并使用分隔符

我正在将 kafka 消息写入 hive 仓库位置中的一个文件,并且通过一条消息,我还想在每条记录中写入 system_date 。 topicPartition=[TopicPartition(mytopic, p) for p in range(0,

回答 1 投票 0

iOSNotificationServiceExtension和Flutter应用程序之间的交互

我有一个场景,在收到推送通知后,我需要使用 Hive 数据库中存储的信息解密通知数据并将其显示在通知中。 我正在尝试...

回答 1 投票 0

类不会自动生成g.dart文件

导入'包:flutter/material.dart'; 导入'包:hive/hive.dart'; 'person_model.g.dart' 部分; @HiveType(类型ID:1) 类 PersonModel 扩展 HiveObject { @HiveField(0) int personID =

回答 1 投票 0

将数据从 Hive 摄取到 GeoMesa Accumulo

我正在尝试使用 JDBC 转换器将数据从 Hive 提取到 GeoMesa Accumulo 中。以下是 JDBC 转换器的配置: geomesa.converters.hive = { 类型=“jdbc&q...

回答 1 投票 0

© www.soinside.com 2019 - 2024. All rights reserved.