使用多个主机配置 mongodb spark 连接器

dav*_*vid 2 configuration connector mongodb apache-spark

有没有办法在 SparkConf 中指定多个 MongoDB 主机?文档中的示例(https://docs.mongodb.com/spark-connector/v1.1/configuration/)似乎表明没有。

spark.mongodb.output.uri=mongodb://127.0.0.1/
spark.mongodb.output.database=test
spark.mongodb.output.collection=myCollection
Run Code Online (Sandbox Code Playgroud)

Wan*_*iar 5

spark.mongodb.input.urispark.mongodb.output.uri接受的MongoDB连接URI格式

连接 URI 格式应适用于所有 MongoDB 支持的驱动程序,包括 Spark 的 MongoDB Scala 驱动程序。例如,为了连接到副本集,您可以指定:

mongodb://db1.example.net,db2.example.net:2500/?replicaSet=myReplica
Run Code Online (Sandbox Code Playgroud)