Beginner Spark Dev tips

Question

私はSparkを学び始めており、Windowsデスクトップにローカルクラスタをセットアップして、すぐにAWSにアプリケーションをインストールする準備が整いました。どのツールを使うべきかを知りたいEclipseを使ってJavaで開発していきます。私はDatabricksまたはClouderaを使用するか、プレーンなバニラスパークを行うべきですか？私がより速く学ぶのを助ける初心者として役立つヒントを探しています。ありがとうございました。

Answer 1

「バニラスパーク」をダウンロードしてください。その後、EclipseでMavenプロジェクトを作成します。 Pomファイルでは、正しいdependencys（Spark Core、Spark SQL、...）を追加する必要があります。その後、Jarをエクスポートします。送信スクリプトを使用して開始することができます。初めに、例からJavaコードを実行しようとしてください。その後、あなた自身のコードを書くことができます。