MongoDB Connector for Spark 提供 MongoDB 和 Apache Spark 之间的集成。
通过该连接器,您可以访问旨在与 MongoDB 数据集搭配使用的所有 Spark 库:Dataset,它可用于通过 SQL 进行分析(得益于自动模式推断)、流式处理、机器学习和图形 API。您还可将此连接器与 Spark Shell 结合使用。
MongoDB Spark Connector 与以下版本的 Apache Spark 和 MongoDB 兼容:
MongoDB Spark Connector | Spark 版本 | MongoDB 版本 |
|---|---|---|
11.1.0 | 4.0 或更高版本 | 4.2 或更高版本 |