MongoDB Connector for Spark 提供了 MongoDB 和 Apache Spark 之间的集成。
通过Connector,您可以访问权限所有Spark库以与MongoDB数据集一起使用:Dataset,用于使用SQL进行分析(受益于自动模式推断)、流媒体、机器学习和图表API。您还可以将该Connector与Spark Shell 结合使用。
MongoDB Spark Connector 与以下版本的 Apache Spark 和 MongoDB 兼容:
MongoDB Spark Connector | Spark 版本 | MongoDB 版本 |
|---|---|---|
11.0.0 | 4.0 或更高版本 | 4.2 或更高版本 |