Apache Sparkでは、データベース（MySQL、MongoDBなど）からRDDを構築できますか？

-1

私は、テキストファイルと配列からRDDを構築することができますが、データベースはどうですか？Apache Sparkでは、データベース（MySQL、MongoDBなど）からRDDを構築できますか？

2016-05-13 Rainmaker

として使用することができます。私の考えでは、上記のコメントの質問で指摘されているように、JDBCで読むのが最善の方法です。そうすれば、あなたのデータでDataFrameが作成されるので、RDDに変換するには '.rdd'を呼び出します。 –

はい、HadoopがHadoop InputFormatとOutputFormat、およびhadoopRDDメソッドを使用して作成したものだけに接続できます。データソースのほとんどはspark-packages（たとえばMongoDb）で既に完了しています。または、jdbcをthis answer points out

出典

2016-05-13 00:16:19

Apache Sparkでは、データベース（MySQL、MongoDBなど）からRDDを構築できますか？

答えて

関連する問題