Apache Sparkロギング拡張計画

Question

ログに書きますdf.explain(true) 私は物理的および論理的な計画を見たいと思います。 log4j.propertiesソースコードを見て、println()という標準出力を使用しているようです。

どのように達成できますか？

Answer 1

この質問では、JIRAのスパークに関する問題を開封しました：SPARK-18829 今あなたが使用して計画を説明し印刷することができますについては、

df.queryExecution.toString 

このコードはanalayed /物理/論理計画

で文字列を返します