Spark + Intellij + Azure - 画面に出力

Question

私はIntellijを使用してScalaコードを作成し、Azure HDInsightスパーククラスタに送信して実行します。実行されているジョブについてのログの詳細が表示されていますが、println()ステートメントの出力は表示されません。

これは正常ですか？プログラムの実行結果を見る方法はありますか？

Answer 1

これは正常ではありません。新しいリモートデバッグ機能を使用してHDInsightクラスタに接続し、コードを実行してみてください。以下のドキュメントとデバッグビデオを見つけてください。

https://docs.microsoft.com/en-us/azure/hdinsight/hdinsight-apache-spark-intellij-tool-debug-remotely-through-ssh

https://www.youtube.com/watch?v=wQtj_wjn1Ac

あなたは、それ以上の質問を持っている必要があり、私たちは知ってみましょう。

おかげで、 -Jenny

Answer 2

これは既知の問題です、https://github.com/Microsoft/azure-tools-for-java/issues/957

を参照してください。