ハイブテーブルから文字列の重複を削除する方法

Question

重複する値で区切られた列（文字列）スペースがあります。重複を削除したい：

column_name 
----------------- 
gun gun man gun man 
shuttle enemy enemy run 
hit chase 

私は次のようになりたい：私はハイブdatabase.Pleaseヘルプを使用しています

column_name 
---------------- 
gun man 
shuttle enemy run 
hit chase 

。

Answer 1

カスタムUDFを使用しない場合、これはクエリのみで行う方法の1つです。

select id, concat_ws(' ',collect_set(splited)) as column_name 
from 
(
    select id, splited 
    from tbl_name 
    LATERAL VIEW explode(split(column_name,' ')) t as splited 
    group by id, splited 
) x 
group by id