hive复杂数据类型如何实现数据过滤

Hive支持复杂数据类型，如STRUCT、ARRAY和MAP

1. 使用WHERE子句过滤Struct类型：

假设我们有一个名为employee的表，其中包含一个名为info的STRUCT类型字段，该字段包含员工的姓名、年龄和部门信息。

CREATE TABLE employee (id INT,info STRUCT<name STRING, age INT, department STRING>);

要过滤出年龄大于30岁的员工，可以使用以下查询：

SELECT * FROM employeeWHERE info.age > 30;

2. 使用LATERAL VIEW和EXPLODE过滤ARRAY类型：

假设我们有一个名为products的表，其中包含一个名为tags的ARRAY类型字段，该字段包含产品标签。

CREATE TABLE products (id INT,tags ARRAY<STRING>);

要过滤出包含"electronics"标签的产品，可以使用以下查询：

SELECT p.*FROM products pLATERAL VIEW INLINE(p.tags) t AS tagWHERE tag = 'electronics';

3. 使用LATERAL VIEW和EXPLODE过滤MAP类型：

假设我们有一个名为orders的表，其中包含一个名为metadata的MAP类型字段，该字段包含订单元数据。

CREATE TABLE orders (id INT,metadata MAP<STRING, STRING>);

要过滤出包含"priority"键且值为"high"的订单，可以使用以下查询：

SELECT o.*FROM orders oLATERAL VIEW INLINE(o.metadata) m AS key, valueWHERE key = 'priority' AND value = 'high';

这些示例展示了如何在Hive中过滤复杂数据类型。根据实际需求和数据结构，可以相应地调整查询。