W3Cschool
恭喜您成為首批注冊用戶
獲得88經(jīng)驗值獎勵
Pig Latin的 IsEmpty() 函數(shù)用于檢查包或映射是否為空。
下面給出了 IsEmpty() 函數(shù)的語法。
grunt> IsEmpty(expression)
假設(shè)在HDFS目錄 /pig_data/ 中有兩個文件,即 emp_sales.txt 和 emp_bonus.txt ,如下所示。emp_sales.txt 包含銷售部門員工的詳細(xì)信息, emp_bonus.txt 包含獲得獎金的員工詳細(xì)信息。
emp_sales.txt
1,Robin,22,25000,sales 2,BOB,23,30000,sales 3,Maya,23,25000,sales 4,Sara,25,40000,sales 5,David,23,45000,sales 6,Maggy,22,35000,sales
emp_bonus.txt
1,Robin,22,25000,sales 2,Jaya,23,20000,admin 3,Maya,23,25000,sales 4,Alia,25,50000,admin 5,David,23,45000,sales 6,Omar,30,30000,admin
分別使用關(guān)系 emp_sales 和 emp_bonus ,將這些文件加載到Pig中,如下所示。
grunt> emp_sales = LOAD 'hdfs://localhost:9000/pig_data/emp_sales.txt' USING PigStorage(',') as (sno:int, name:chararray, age:int, salary:int, dept:chararray); grunt> emp_bonus = LOAD 'hdfs://localhost:9000/pig_data/emp_bonus.txt' USING PigStorage(',') as (sno:int, name:chararray, age:int, salary:int, dept:chararray);
現(xiàn)在讓我們使用 cogroup 來分組 emp_sales 和 emp_bonus 關(guān)系的記錄/ 運(yùn)算符,如下所示。
grunt> cogroup_data = COGROUP emp_sales by age, emp_bonus by age;
使用 DUMP 運(yùn)算符驗證關(guān)系 cogroup_data ,如下所示。
grunt> Dump cogroup_data; (22,{(6,Maggy,22,35000,sales),(1,Robin,22,25000,sales)}, {(1,Robin,22,25000,sales)}) (23,{(5,David,23,45000,sales),(3,Maya,23,25000,sales),(2,BOB,23,30000,sales)}, {(5,David,23,45000,sales),(3,Maya,23,25000,sales),(2,Jaya,23,20000,admin)}) (25,{(4,Sara,25,40000,sales)},{(4,Alia,25,50000,admin)}) (30,{},{(6,Omar,30,30000,admin)})
COGROUP操作符根據(jù)年齡從每個關(guān)系中分組元組,每個組描述特定的年齡值。例如,如果我們考慮結(jié)果的第一個元組,則按照年齡22分組。包含兩個包,第一個包包含所有來自第一個關(guān)系的元組(本例中為student_details),其年齡為22歲,第二個 bag包含來自具有年齡22的第二關(guān)系(在這種情況下是employee_details)的所有元組。如果關(guān)系不具有年齡值為22的元組,則它返回一個空包。
讓我們使用 IsEmpty() 函數(shù)從組中的 emp_sales 關(guān)系中列出這些空包。
grunt> isempty_data = filter cogroup_data by IsEmpty(emp_sales);
使用DUMP運(yùn)算符驗證關(guān)系 isempty_data ,如下所示。 emp_sales 關(guān)系保存了 emp_bonus 關(guān)系中不存在的元組。
grunt> Dump isempty_data; (30,{},{(6,Omar,30,30000,admin)})
Copyright©2021 w3cschool編程獅|閩ICP備15016281號-3|閩公網(wǎng)安備35020302033924號
違法和不良信息舉報電話:173-0602-2364|舉報郵箱:jubao@eeedong.com
掃描二維碼
下載編程獅App
編程獅公眾號
聯(lián)系方式:
更多建議: