Menu Docs

Página inicial do DocsVisualizar & analisar dadosMongoDB Spark Connector

Modo de transmissão

Nesta página

  • Visão geral

O Conector Spark é compatível com modo de streaming, que usa o Spark Structured Streaming para processar dados assim que estiverem disponíveis, em vez de aguardar que um intervalo de tempo passe. O Spark Structured Streaming é um mecanismo de processamento de fluxo de dados que você pode acessar usando a API Dataset ou DataFrame.

Importante

O Apache Spark contém dois mecanismos de processamento de fluxo diferentes:

  • Spark Streaming com DStreams, agora um mecanismo legado não suportado

  • Spark Structured Streaming.

Este guia se refere apenas ao Spark Structured Streaming.

As seções abaixo mostram como usar o Conector Spark para ler dados do MongoDB e gravar dados no MongoDB no modo de streaming:

Dica

Documentação do Apache Spark

Para saber mais sobre como usar o Spark para processar fluxos de dados, consulte o Guia de programação do Spark.

← Opções de configuração de gravação em lote

Nesta página