毎時スパーク・ジョブ・サーバーの自動スパーク・ジョブをスケジュールする

Question

DataStax Enterprise Edition 4.8には、Spark JobserverがサポートされているバージョンのApache Spark 1.4.1.1に対して特別にコンパイルされています。 SparkジョブはCassandraからデータを読み込み、集計したデータを同じKeyspaceの別のテーブルに書き込みます。

スパークジョブサーバーには、1時間ごとにジョブが自動的に実行されるようにスケジュールする機能はありますか？

Answer 1

残念ながら、Spark Jobserverには今すぐジョブをスケジュールする機能はありません。

Linux上でcronタスクを使用して、curlコマンドを自動的に実行してJobserverに要求を送信することができます。