取得SparkContext DATAFRAMEのSparkContextについてはDataFrameWriter

Question

から私は基本的なことで、コンテキストを取得することができます：

df.rdd.sparkContext

私はすなわちDataFrameWriter、と同じことを達成することができますどのような方法があります。基礎となるDataFrame/Rddを取得することによって？

Answer 1

これはプライベートであることを許可する唯一のメンバーのようです。あなたは反射でそれを行うことができます：それは一般的に言えば、悪い考えですが、実際にこれが必要な場合は...

より良い方法：DataFrameWriterはDataset.writeコールから来る必要があります。それが第三者コードでない限り、どこで発生したのかを見つけ、そこでもコンテキストを取得します。