spark datasource INサブクエリ

Question

別のデータソースからデータを読み込むためにspark2.0.3のデータソースを書きました。短い答えは私たちが現在INフィルタをプッシュダウンしていないということです

The = SQL is in this picture

Answer 1

：

The in SQL is in this picture

しかし、のような=サブクエリの作品：私はサブクエリで使用するときのように。しかし、フィルタがnullの場合データソースに追加します。

主な問題は、サブクエリに潜在的に多くの値が含まれている可能性があり、これらをプッシュすると非常に高価になることです（SQLが大きいため、ソースがこれらで動作しない可能性があります）。