hive:如何检查一个数组的值是否存在于另一个数组中?

ehxuflar  于 2021-06-26  发布在  Hive
关注(0)|答案(2)|浏览(1233)

我有两个这样的数组,它们是从我创建的自定义项返回的:
阵列a-[p908,s57,a65]阵列b-[p908,s57]
我需要使用配置单元查询检查数组a的元素是否存在于数组b中,或者数组b的元素是否存在于数组a中。
我被困在这里了。有人能给我个建议吗?
我是否也可以从udf中返回一些其他数据类型来代替数组,以便于比较?

8cdiaqws

8cdiaqws1#

select      concat(',',concat_ws(',',A),',') regexp 
                concat(',(',concat_ws('|',B),'),')  as are_common_elements

from        mytable
;

演示

create table mytable (id int,A array<string>,B array<string>);

insert into table mytable 

                select  1,array('P908','S57','A65'),array('P908','S57')
    union all   select  2,array('P908','S57','A65'),array('P9','S5777')
;      

select * from mytable;
+------------+----------------------+----------------+
| mytable.id |      mytable.a       |   mytable.b    |
+------------+----------------------+----------------+
|          1 | ["P908","S57","A65"] | ["P908","S57"] |
|          2 | ["P908","S57","A65"] | ["P9","S5777"] |
+------------+----------------------+----------------+
select      id
           ,concat(',',concat_ws(',',A),',')    as left_side_of_regexp
           ,concat(',(',concat_ws('|',B),'),')  as right_side_of_regexp

           ,concat(',',concat_ws(',',A),',') regexp 
                concat(',(',concat_ws('|',B),'),')  as are_common_elements

from        mytable
;
+----+---------------------+----------------------+---------------------+
| id | left_side_of_regexp | right_side_of_regexp | are_common_elements |
+----+---------------------+----------------------+---------------------+
|  1 | ,P908,S57,A65,      | ,(P908|S57),         | true                |
|  2 | ,P908,S57,A65,      | ,(P9|S5777),         | false               |
+----+---------------------+----------------------+---------------------+
hfsqlsce

hfsqlsce2#

我们可以用侧视图来做。让我们有两个表,表1和表2,以及表中数组字段分别为col1和col2的列。使用类似below:-

select collect_set (array_contains (col1 , r.tab2) ) 
from table1 , 
(select  exp1 as tab2 
 from    (table2 t2 lateral view explode(col2) exploded_table as exp1 ) ) r

您也可以使用array\u intersection或其他数组函数。

相关问题