2
私はHerokuにapache sparkをデプロイする方法を探しています。私のユースケースは、apache sparkを実行するHeroku上のクラスタを持つことです。実行中でサービスと対話しているWebサービスがあります。サービスがhdfsシステムからデータを取得しています。HerokuにApache Sparkをデプロイ
これが実現可能かどうかのご意見はありますか?
私はHerokuにapache sparkをデプロイする方法を探しています。私のユースケースは、apache sparkを実行するHeroku上のクラスタを持つことです。実行中でサービスと対話しているWebサービスがあります。サービスがhdfsシステムからデータを取得しています。HerokuにApache Sparkをデプロイ
これが実現可能かどうかのご意見はありますか?
私が知る限り、Apache SparkをHerokuで実行することはできません。 Herokuはサービスとしてのプラットフォームです。 Apache Sparkクラスタを作成するには、Infrastructure as a Service(たとえば、Digital Ocean)が必要です。また、Databricksを使用することもできます。
Heroku専用スペースとdyno dnsのリリースで、Heroku上にApache Sparkクラスタを展開することが可能になりました。 Heroku上のSparkクラスタを展開する以下のチェックアウトボタンをクリックしてください。 https://github.com/heroku/spark-in-space – Fahad