Pysparkデータフレーム演算子「IS NOT IN」

Question

これをRからPysparkに書き直したいと思います。 pysparkで

array <- c(1,2,3) 
dataset <- filter(!(column %in% array)) 

Answer 1

あなたはこのようにそれを行うことができます。

array = [1, 2, 3] 
dataframe.filter(dataframe.column.isin(*array) == False) 

Answer 2

df_result = df[df.column_name.isin([1, 2, 3]) == False] 

Answer 3

わずかに異なる構文と "日付" データセット：

toGetDates={'2017-11-09', '2017-11-11', '2017-11-12'} 
df= df.filter(df['DATE'].isin(toGetDates) == False)