dav*_*vid 2 configuration connector mongodb apache-spark
有没有办法在 SparkConf 中指定多个 MongoDB 主机?文档中的示例(https://docs.mongodb.com/spark-connector/v1.1/configuration/)似乎表明没有。
spark.mongodb.output.uri=mongodb://127.0.0.1/
spark.mongodb.output.database=test
spark.mongodb.output.collection=myCollection
Run Code Online (Sandbox Code Playgroud)
的spark.mongodb.input.uri和spark.mongodb.output.uri接受的MongoDB连接URI格式。
连接 URI 格式应适用于所有 MongoDB 支持的驱动程序,包括 Spark 的 MongoDB Scala 驱动程序。例如,为了连接到副本集,您可以指定:
mongodb://db1.example.net,db2.example.net:2500/?replicaSet=myReplica
Run Code Online (Sandbox Code Playgroud)
| 归档时间: |
|
| 查看次数: |
1277 次 |
| 最近记录: |