O conector do MongoDB para Spark fornece integração entre MongoDB e Apache Spark.
Com o conector, você tem acesso a todas as bibliotecas do Spark para uso com conjuntos de dados do MongoDB : Dataset para análise com SQL (beneficiando-se da inferência automática de esquemas), streaming, aprendizado de máquina e APIs de grafos. Você também pode usar o conector com o Spark Shell.
O conector Spark do MongoDB é compatível com as seguintes versões do Apache Spark e MongoDB:
MongoDB Spark Connector | Versão do Spark | Versão do MongoDB |
|---|---|---|
11.0.1 | 4.0 ou posterior | 4.2 ou posterior |