EMRでSpark/Zeppelinのspark.driver.memoryを設定する方法

Question

EMarker（Spark、Zeppelin）を使用する場合、Zeppelin Sparkインタプリタの設定でspark.driver.memoryを変更すると機能しません。

EMR Webインターフェイス（aws CLIではなく）を使用してクラスタを作成するときに、Sparkドライバメモリを設定する最も簡単な方法は何ですか？

ブートストラップアクションは解決策ですか？ 「はい」の場合は、ブートストラップアクションファイルの例を教えてください。

Answer 1

あなたは常にジョブフロー/クラスタの作成時に、次の設定を追加しようとすることができます：

[ 
    { 
     "Classification": "spark-defaults", 
     "Properties": { 
      "spark.driver.memory": "12G" 
     } 
    } 
] 

あなたはspark-defaultのためかどうかの設定のこのほとんどを行うことができますが、Hadoopのcore-siteなど

私は願っていますこれは役に立ちます！