Spark SQLでサポートされているデータストアのリスト

Question

私は非常に初心者です。私は重複/愚かな質問をしたら申し訳ありません。

私の製品（Java Webアプリケーション）が要求するように、（何らかの設定に基づいて）データストアのいずれかにデータをプッシュするアプリケーションを書く必要があります。データストアには、RDBMS、Hive、NoSQLデータストアがあります。したがって、SparkSqlが私のケースに最も適しているかどうかを確認します。はいの場合、Spark SQLでサポートされているデータストアのリストを取得できますか？スパークがこれをしないならば、彼らは他のアプローチですか？

私を助けてください！

Answer 1

はい！ SparkSql（Spark）はあなたの用途に最適です。 私の知る限り、SparkSqlはRDBMS、Hive、およびNoSQLデータストアをサポートしています。

SparkSQLには少数の店舗に直接アクセスするAPIはないかもしれませんが、SparkのAPIの助けを借りて少しでもデータストアに接続できるはずです。

RDBMS、Cassandra、HBase、ElasticSearch、Solr、Hive、S3、HDFSなどに接続するためにSparkを使用しています。