Apache Pig - Opérateur Foreach

le FOREACH L'opérateur est utilisé pour générer des transformations de données spécifiées en fonction des données de la colonne.

Syntaxe

Voici la syntaxe de FOREACH opérateur.

grunt> Relation_name2 = FOREACH Relatin_name1 GENERATE (required data);

Exemple

Supposons que nous ayons un fichier nommé student_details.txt dans le répertoire HDFS /pig_data/ comme indiqué ci-dessous.

student_details.txt

001,Rajiv,Reddy,21,9848022337,Hyderabad
002,siddarth,Battacharya,22,9848022338,Kolkata
003,Rajesh,Khanna,22,9848022339,Delhi 
004,Preethi,Agarwal,21,9848022330,Pune 
005,Trupthi,Mohanthy,23,9848022336,Bhuwaneshwar 
006,Archana,Mishra,23,9848022335,Chennai 
007,Komal,Nayak,24,9848022334,trivendram 
008,Bharathi,Nambiayar,24,9848022333,Chennai

Et nous avons chargé ce fichier dans Pig avec le nom de la relation student_details comme indiqué ci-dessous.

grunt> student_details = LOAD 'hdfs://localhost:9000/pig_data/student_details.txt' USING PigStorage(',')
   as (id:int, firstname:chararray, lastname:chararray,age:int, phone:chararray, city:chararray);

Obtenons maintenant les valeurs d'identité, d'âge et de ville de chaque élève à partir de la relation student_details et stockez-le dans une autre relation nommée foreach_data en utilisant le foreach opérateur comme indiqué ci-dessous.

grunt> foreach_data = FOREACH student_details GENERATE id,age,city;

Vérification

Vérifier la relation foreach_data en utilisant le DUMP opérateur comme indiqué ci-dessous.

grunt> Dump foreach_data;

Production

Il produira la sortie suivante, affichant le contenu de la relation foreach_data.

(1,21,Hyderabad)
(2,22,Kolkata)
(3,22,Delhi)
(4,21,Pune) 
(5,23,Bhuwaneshwar)
(6,23,Chennai) 
(7,24,trivendram)
(8,24,Chennai)