Apache Pig - IsEmpty() 函数

Pig Latin 的 IsEmpty() 函数用于检查包或映射是否为空。

语法

下面给出的是 IsEmpty() 函数的语法。

grunt> IsEmpty(expression)

示例

假设我们在HDFS目录/pig_data/中有两个文件，分别是emp_sales.txt和emp_bonus.txt，如下所示。 emp_sales.txt包含销售部门员工的详细信息，emp_bonus.txt包含获得奖金的员工详细信息。

emp_sales.txt

1,Robin,22,25000,sales 
2,BOB,23,30000,sales 
3,Maya,23,25000,sales 
4,Sara,25,40000,sales 
5,David,23,45000,sales 
6,Maggy,22,35000,sales

emp_bonus.txt

1,Robin,22,25000,sales 
2,Jaya,23,20000,admin 
3,Maya,23,25000,sales 
4,Alia,25,50000,admin 
5,David,23,45000,sales 
6,Omar,30,30000,admin

我们已将这些文件加载到 Pig 中，关系名称分别为 emp_sales 和 emp_bonus，如下所示。

grunt> emp_sales = LOAD 'hdfs://localhost:9000/pig_data/emp_sales.txt' USING PigStorage(',')
   as (sno:int, name:chararray, age:int, salary:int, dept:chararray);
	
grunt> emp_bonus = LOAD 'hdfs://localhost:9000/pig_data/emp_bonus.txt' USING PigStorage(',')
   as (sno:int, name:chararray, age:int, salary:int, dept:chararray);

现在让我们使用 cogroup 运算符将关系 emp_sales 和 emp_bonus 与键 age 的记录/元组分组，如下所示 。

grunt> cogroup_data = COGROUP emp_sales by age, emp_bonus by age;

使用 DUMP 运算符验证关系 cogroup_data，如下所示。

grunt> Dump cogroup_data;
  
(22,{(6,Maggy,22,35000,sales),(1,Robin,22,25000,sales)}, {(1,Robin,22,25000,sales)}) 
(23,{(5,David,23,45000,sales),(3,Maya,23,25000,sales),(2,BOB,23,30000,sales)}, 
   {(5,David,23,45000,sales),(3,Maya,23,25000,sales),(2,Jaya,23,20000,admin)})  
(25,{(4,Sara,25,40000,sales)},{(4,Alia,25,50000,admin)}) 
(30,{},{(6,Omar,30,30000,admin)})

COGROUP 运算符根据年龄对每个关系中的元组进行分组。 每个组都描述一个特定的年龄值。

例如，如果我们考虑结果的第一个元组，它按年龄 22 分组。它包含两个包，第一个包包含第一个关系（在本例中为 Student_details）中年龄为 22 的所有元组， 第二个包包含第二个关系（本例中为 employee_details）中年龄为 22 的所有元组。如果关系没有年龄值为 22 的元组，则它返回一个空包。

获取有空包的组

让我们使用 IsEmpty() 函数从组中的 emp_sales 关系中列出此类空包。

grunt> isempty_data = filter cogroup_data by IsEmpty(emp_sales);

验证

使用 DUMP 运算符验证关系 isempty_data，如下所示。 emp_sales 关系保存关系 emp_bonus 中不存在的元组。

grunt> Dump isempty_data; 
  
(30,{},{(6,Omar,30,30000,admin)})

apache_pig_eval_functions.html