ローカルモードのエグゼキュータの数とクライアントとクラスタのモードの違い

Question

私はSparkの設定に関して非常に簡単な質問があります。ローカルモードでは、エグゼキュータの数は1つです。

もう1つの質問は、クライアントモードまたはクラスタモードとしての展開モードの違いですか？

Answer 1

正しく覚えていれば、特に指定しなければ、ローカルモードで1つのエグゼキュータが得られます。

クライアントモードとクラスタモードの違いは、主にドライバが動作する場所です。クライアントモードでは、ジョブを展開するマシン上で実行されます。クラスタモードでは、ドライバはクラスタ内のあるノード上で実行されます。クライアントモードでは、ドライバがstdoutとstderrに出力するものに簡単にアクセスできます。疑わしい場合はクライアントモードで実行してください。