Spark SQL- Spark SQLでNULL以外の列を動的に選択

Question

NULL以外の値を含む列を選択したいとします。私は、テーブルABCがあるとします。

SnapshotDate CreationDate Country Region CloseDate Probability BookingAmount RevenueAmount SnapshotDate1 CreationDate1 CloseDate1 
     null   null  null null  null 25 882000 0   null   null   null 
     null   null  null null  null 25 882000 0   null   null   null 
     null   null  null null  null 0 882000 0   null   null   null 
     null   null  null null  null 0 882000 0   null   null   null 
     null   null  null null  null 0 882000 0   null   null   null 
     null   null  null null  null 0 882000 0   null   null   null 
     null   null  null null  null 0 882000 0   null   null   null 
     null   null  null null  null 0 882000 0   null   null   null 
     null   null  null null  null 0 882000 0   null   null   null 
     null   null  null null  null 0 882000 0   null   null   null 
     null   null  null null  null 0 882000 0   null   null   null 
     null   null  null null  null 0 882000 0   null   null   null 
     null   null  null null  null 0 882000 0   null   null   null 
     null   null  null null  null 0 882000 0   null   null   null 
     null   null  null null  null 0 882000 0   null   null   null 
     null   null  null null  null 0 882000 0   null   null   null 
     null   null  null null  null 0 882000 0   null   null   null 
     null   null  null null  null 0 882000 0   null   null   null 
     null   null  null null  null 0 882000 0   null   null   null 
     null   null  null null  null 0 882000 0   null   null   null 

それから私は、彼らがnull以外の値が含まれているとしてのみ確率、BookingAmountとRevenueAmount列を選択し、唯一のnull値を含む列の残りの部分を無視したいと思います。

私はSnapshotDate！= nullとCreationDate！= nullと..... select *からabcを選択しました。 しかし、それは各行を探すために役立ちません。

注： - sqlContext.sql（「COL1がnullのときにそれをエンドを選択し、他のそれを選択いけないケースを選択）ABCからのX」）

私は火花1.6.1

を使用しています - のようなものがあります

これを行う方法はありますか？私は右のあなたを理解している場合は

select Probability, BookingAmount,RevenueAmount from abc 

ようなものが必要事前

Answer 1

で

感謝。