相当于蜂巢中Presto的transform()函数

问题描述 投票:1回答:1

我似乎无法在Hive中找到Presto的transform()函数的等效项。

TLDR:如何将函数应用于Hive中数组的每个元素?

更确切地说,我有一个包含零个或多个结构的数组。每个结构都具有相同的架构,并包含多个变量,其中包括一个is_done,它是一个布尔值。我想做的是评估数组中是否至少有一个结构体的变量is_done为True。

在Presto中,我们将使用transform来提取布尔值,然后使用array_max来查看至少一个是否为真:

array_max(transform(a.array_task, x -> x.is_done))
sql arrays hive hiveql presto
1个回答
1
投票

[不幸的是,Hive没有这种功能。无需使用其他UDF,您可以通过展开数组并检查struct元素来做到这一点:

with your_table as (select array(named_struct('is_done',true),named_struct('is_done',false)) initial_array) 

select t.initial_array, max(a.s.is_done) as is_done 
  from your_table t
       lateral view outer explode(initial_array) a as s --s is a struct
  group by  t.initial_array    
  ;

结果:

initial_array                           is_done 

[{"is_done":true},{"is_done":false}]    true
© www.soinside.com 2019 - 2024. All rights reserved.