複数のホストでmongodbスパークコネクタを設定する

spark.mongodb.output.uri=mongodb://127.0.0.1/ 
spark.mongodb.output.database=test 
spark.mongodb.output.collection=myCollection

2017-01-05 david

AFAIK、いいえなぜ2つの接続が必要ですか？ – mrsrinivas

私は2つの接続は必要ありません。それらのうちの1つがダウンしている場合に備えて、複数のレプリカをシードとして提供したいと思います。 – david

spark.mongodb.input.uriとspark.mongodb.output.uriMongoDB Connection URI formatを受け入れます。

接続URI形式は、MongoDBがサポートするすべてのドライバ（SparkのMongoDB Scalaドライバを含む）で機能するはずです。たとえば、レプリカセットに接続するには、次のように指定します。

mongodb://db1.example.net,db2.example.net:2500/?replicaSet=myReplica

2017-01-06 05:07:00

答えて