2017-09-05 11 views
0

EMRテンプレートを使用してAWSデータパイプラインを作成しましたが、EMRクラスタにSparkをインストールしていません。そのために特別な行動を設定する必要はありますか? 私はいくつかのbootstrapactionはスパークのインストールの必要性を参照してくださいしかし、それも動作していません。AWS DataPipeline EMRクラスタ(スパークあり)

答えて

0

install-sparkブートストラップアクションは、3.x AMIバージョンのみです。 releaseLabel(emr-4.x以降)を使用している場合、インストールするアプリケーションは別の方法で指定されます。

パイプラインを作成するときは、下部にある[Edit in Architect]をクリックするか、パイプラインのホームページでパイプラインを編集してからEmrClusterノードをクリックし、[Add an optional field .. 。" 落ちる。 Sparkを追加する場所です。

関連する問題