ハイブの指定された条件で1行から複数​​の行を作成する

Question

nullチェックを実装しようとしています。例えばのため：

Col_A | Col_B | Col_C | Col_D | New_Col 
null | boy | null | dust | Col_A failed null check 
null | boy | null | dust | Col_D failed null check 

これを行うための適切な方法は何ですか：次に

Col_A | Col_B | Col_C | Col_D 
null | boy | null | dust 

は、私は出力をしたいですか？

Answer 1

select t.* 
     ,concat(elt(e.pos+1,'Col_A','Col_B','Col_C','Col_D'),' failed null check') as New_Col 
from mytable t lateral view posexplode (array(Col_A,Col_B,Col_C,Col_D)) e 
where e.val is null 

Answer 2

一つの方法は、union allを使用しています。

select Col_A, Col_B, Col_C, Col_D, 'Col_A failed NULL check' as new_col 
from t 
where Col_A is null 
union all 
select Col_A, Col_B, Col_C, Col_D, 'Col_B failed NULL check' as new_col 
from t 
where Col_B is null 
union all 
select Col_A, Col_B, Col_C, Col_D, 'Col_C failed NULL check' as new_col 
from t 
where Col_C is null 
union all 
select Col_A, Col_B, Col_C, Col_D, 'Col_D failed NULL check' as new_col 
from t 
where Col_D is null; 

これはかなり強引です。たくさんの列がある場合は、スプレッドシートを使用してSQLを生成できます。また、各サブクエリに対して個別のスキャンが必要です。