MongoDB Connector for Spark は、MongoDB と Apache Spark の統合を提供します。
connectorを使用すると、MongoDB データセットで使用できるすべての Spark ライブラリにアクセスできます。SQL を使用した分析(自動スキーマ推論を利用)、ストリーミング、機械学習、グラフ API のための Dataset などです。Spark Shell で connector を使用することもできます。
MongoDB Spark Connector は、次のバージョンの Apache Spark および MongoDB と互換性があります。
MongoDB Spark Connector | Spark のバージョン | MongoDB バージョン |
|---|---|---|
11.1.0 | 4.0 以降 | 4.2 以降 |