1
私がYarnを設定するときには、メモリを割り当てるための環境変数JAVA_HEAP_MAXがあります。私がSparkワーカーをインスタンス化するとき、spark.executor.memoryはこの値を上書きしますか？ -Xmxを使用してJavaヒープを手動で設定する必要がある、またはSpark confsがこれに対処する必要がある理由はありますか？SparkでJavaヒープサイズを設定する
基本的に、sparkに割り当てるメモリよりも大きい最初のJavaヒープメモリ割り当てを設定する必要がありますか、それともデフォルトで管理していますか？環境によってJVMを変更する使用例スパーク以外の変数？