ドライバで使用されるスパーク数

Question

クラスタモードの場合は、ドライバにspark.driver.coresを使用してコア数を設定できます。しかし、ドライバのクライアントモードとローカルモードの場合、いくつのコアが使用されますか

Answer 1

アプリケーションをローカルで実行している場合は、ローカルシステムのすべてのフリーコアを使用します。ローカル[n]を使用して、ここでnはアプリケーションで使用するコアの数です。ローカルモードでアプリケーションで使用されるコアで、ローカルのドライバでアプリケーションを実行するとexecutorが単一のJVMで起動されるためです。