Crear una canalización de Data Lake Obsoleto

PUBLICAR /api/atlas/v2/grupos/{ID de grupo}/tuberías

Crea una canalización de Data Lake.

Las canalizaciones de Data Lake están obsoletas...

Parámetros de ruta

  • ID de grupo string Requerido

    Cadena 24hexadecimal única que identifica su proyecto. Utilice el punto de conexión /groups para recuperar todos los proyectos a los que el usuario autenticado tiene acceso.

    NOTA: Grupos y proyectos son términos sinónimos. El ID de tu grupo es el mismo que el de tu proyecto. Para los grupos existentes, el ID de tu grupo/proyecto permanece igual. El recurso y los puntos finales correspondientes usan el término "grupos".

    El formato debe coincidir con el siguiente patrón: ^([a-f0-9]{24})$.

Parámetros de consulta

  • envolvente booleano

    Indicador que indica si la aplicación encapsula la respuesta en un objeto JSON envelope. Algunos clientes de la API no pueden acceder a los encabezados de respuesta HTTP ni al código de estado. Para solucionar esto, configure envelope=true en la consulta. Los endpoints que devuelven una lista de resultados utilizan el objeto de resultados como encapsulado. La aplicación añade el parámetro de estado al cuerpo de la respuesta.

    El valor predeterminado es false.

application/vnd.atlas.2023-01-01+json

Cuerpo Requerido

Crea una canalización de Data Lake.

  • Política de retención del conjunto de datos Objeto

    Política de retención de conjuntos de datos para una canalización de Data Lake programada.

    Ocultar atributos de datasetRetentionPolicy Mostrar atributos de datasetRetentionPolicy Objeto
    • unidades string Requerido

      Cantidad de tiempo en que Data Lake Pipeline mide la retención del conjunto de datos.

      Los valores son DAYS, WEEKS o MONTHS.

    • valor integer(int32) Requerido

      Número que indica la cantidad de días, semanas o meses que Data Lake Pipeline retendrá los conjuntos de datos.

      El valor mínimo es 1.

  • Nombre string

    Nombre de esta tubería de Data Lake.

  • disipador Objeto

    Atlas Data Lake Storage como destino para una canalización de Data Lake.

    Ocultar atributos del sumidero Mostrar atributos del sumidero Objeto
    • metadataProvider string

      Proveedor de nube de destino para esta canalización de Data Lake.

      El valor es AWS.

    • región de metadatos string

      Región del proveedor de nube de destino para esta canalización de Data Lake.

      Regiones de proveedores de nube compatibles
    • campos de partición matriz[objeto]

      Campos ordenados utilizados para organizar físicamente los datos en el destino.

      Campo de partición en el proveedor de almacenamiento de Data Lake para una canalización de Data Lake.

      Ocultar atributos de partitionFields Mostrar atributos de partitionFields Objeto
      • nombre del campo string Requerido

        Etiqueta legible por humanos que identifica el nombre del campo utilizado para particionar los datos.

        La longitud máxima es 700.

      • orden integer(int32) Requerido

        Secuencia en la que MongoDB Cloud segmenta los datos de la colección para crear particiones. El recurso expresa esta secuencia comenzando desde cero.

        El valor predeterminado es 0.

    • tipo Discriminado

      El valor es DLS.

  • fuente Objeto

    Uno de:
  • transformaciones matriz[objeto]

    Campos que se excluirán de esta canalización de Data Lake.

    Transformaciones de campo durante la ingesta de una tubería de Data Lake.

    Ocultar atributos de transformaciones Mostrar atributos de transformaciones Objeto
    • Campo string

      Introduzca la clave en el documento.

    • tipo string

      Tipo de transformación aplicada durante la exportación del espacio de nombres en una canalización de Data Lake.

      El valor es EXCLUDE.

Respuestas

  • 200 application/vnd.atlas.2023-01-01+json

    Vale

    Ocultar atributos de respuesta Mostrar los atributos de respuesta Objeto
    • _id string

      Cadena de dígitos hexadecimales 24única que identifica la canalización de Data Lake.

      El formato debe coincidir con el siguiente patrón: ^([a-f0-9]{24})$.

    • fecha de creación cadena(fecha-hora)

      Marca de tiempo que indica cuándo se creó la canalización de Data Lake. Este parámetro expresa su valor en el formato de marca de tiempo ISO 8601 en UTC.

    • Política de retención del conjunto de datos Objeto

      Política de retención de conjuntos de datos para una canalización de Data Lake programada.

      Ocultar atributos de datasetRetentionPolicy Mostrar atributos de datasetRetentionPolicy Objeto
      • lastModifiedDate cadena(fecha-hora)

        Fecha de la última modificación de la política de retención. Este parámetro expresa su valor en el formato de marca de tiempo ISO 8601 en UTC.

      • unidades string Requerido

        Cantidad de tiempo en que Data Lake Pipeline mide la retención del conjunto de datos.

        Los valores son DAYS, WEEKS o MONTHS.

      • valor integer(int32) Requerido

        Número que indica la cantidad de días, semanas o meses que Data Lake Pipeline retendrá los conjuntos de datos.

        El valor mínimo es 1.

    • ID de grupo string

      Cadena de dígitos hexadecimales 24única que identifica al grupo.

      El formato debe coincidir con el siguiente patrón: ^([a-f0-9]{24})$.

    • lastUpdatedDate cadena(fecha-hora)

      Marca de tiempo que indica la última actualización de la canalización de Data Lake. Este parámetro expresa su valor en el formato de marca de tiempo ISO 8601 en UTC.

    • Nombre string

      Nombre de esta tubería de Data Lake.

    • disipador Objeto

      Atlas Data Lake Storage como destino para una canalización de Data Lake.

      Ocultar atributos del sumidero Mostrar atributos del sumidero Objeto
      • tipo string Discriminado

        Tipo de destino de ingesta de esta tubería de Data Lake.

        El valor es DLS.

      • metadataProvider string

        Proveedor de nube de destino para esta canalización de Data Lake.

        El valor es AWS.

      • región de metadatos string

        Región del proveedor de nube de destino para esta canalización de Data Lake.

        Regiones de proveedores de nube compatibles
      • campos de partición matriz[objeto]

        Campos ordenados utilizados para organizar físicamente los datos en el destino.

        Campo de partición en el proveedor de almacenamiento de Data Lake para una canalización de Data Lake.

        Ocultar atributos de partitionFields Mostrar atributos de partitionFields Objeto
        • nombre del campo string Requerido

          Etiqueta legible por humanos que identifica el nombre del campo utilizado para particionar los datos.

          La longitud máxima es 700.

        • orden integer(int32) Requerido

          Secuencia en la que MongoDB Cloud segmenta los datos de la colección para crear particiones. El recurso expresa esta secuencia comenzando desde cero.

          El valor predeterminado es 0.

    • fuente Objeto

      Uno de:
    • Estado string

      Estado de este pipeline de Data Lake.

      Los valores son ACTIVE o PAUSED.

    • transformaciones matriz[objeto]

      Campos que se excluirán de esta canalización de Data Lake.

      Transformaciones de campo durante la ingesta de una tubería de Data Lake.

      Ocultar atributos de transformaciones Mostrar atributos de transformaciones Objeto
      • Campo string

        Introduzca la clave en el documento.

      • tipo string

        Tipo de transformación aplicada durante la exportación del espacio de nombres en una canalización de Data Lake.

        El valor es EXCLUDE.

  • 400 aplicación/json

    Solicitud incorrecta.

    Ocultar atributos de respuesta Mostrar los atributos de respuesta Objeto
    • badRequestDetail Objeto

      Detalle de solicitud incorrecto.

      Ocultar el atributo badRequestDetail Mostrar el atributo badRequestDetail Objeto
      • campos matriz[objeto]

        Describe todas las violaciones en una solicitud de cliente.

        Ocultar atributos de campos Mostrar atributos de campos Objeto
        • Descripción string Requerido

          Una descripción de por qué el elemento de solicitud es incorrecto.

        • Campo string Requerido

          Una ruta que conduce a un campo en el cuerpo de la solicitud.

    • detalle string

      Describe las condiciones o razones específicas que causan cada tipo de error.

    • Error integer(int32) Requerido

      Código de estado HTTP devuelto con este error.

      Documentación externa
    • errorCode string Requerido

      Código de error de aplicación devuelto con este error.

    • Parámetros matriz[objeto]

      Parámetros utilizados para dar más información sobre el error.

    • razón string

      Se devolvió un mensaje de error de aplicación con este error.

  • 401 aplicación/json

    No autorizado.

    Ocultar atributos de respuesta Mostrar los atributos de respuesta Objeto
    • badRequestDetail Objeto

      Detalle de solicitud incorrecto.

      Ocultar el atributo badRequestDetail Mostrar el atributo badRequestDetail Objeto
      • campos matriz[objeto]

        Describe todas las violaciones en una solicitud de cliente.

        Ocultar atributos de campos Mostrar atributos de campos Objeto
        • Descripción string Requerido

          Una descripción de por qué el elemento de solicitud es incorrecto.

        • Campo string Requerido

          Una ruta que conduce a un campo en el cuerpo de la solicitud.

    • detalle string

      Describe las condiciones o razones específicas que causan cada tipo de error.

    • Error integer(int32) Requerido

      Código de estado HTTP devuelto con este error.

      Documentación externa
    • errorCode string Requerido

      Código de error de aplicación devuelto con este error.

    • Parámetros matriz[objeto]

      Parámetros utilizados para dar más información sobre el error.

    • razón string

      Se devolvió un mensaje de error de aplicación con este error.

  • 403 aplicación/json

    Forbidden.

    Ocultar atributos de respuesta Mostrar los atributos de respuesta Objeto
    • badRequestDetail Objeto

      Detalle de solicitud incorrecto.

      Ocultar el atributo badRequestDetail Mostrar el atributo badRequestDetail Objeto
      • campos matriz[objeto]

        Describe todas las violaciones en una solicitud de cliente.

        Ocultar atributos de campos Mostrar atributos de campos Objeto
        • Descripción string Requerido

          Una descripción de por qué el elemento de solicitud es incorrecto.

        • Campo string Requerido

          Una ruta que conduce a un campo en el cuerpo de la solicitud.

    • detalle string

      Describe las condiciones o razones específicas que causan cada tipo de error.

    • Error integer(int32) Requerido

      Código de estado HTTP devuelto con este error.

      Documentación externa
    • errorCode string Requerido

      Código de error de aplicación devuelto con este error.

    • Parámetros matriz[objeto]

      Parámetros utilizados para dar más información sobre el error.

    • razón string

      Se devolvió un mensaje de error de aplicación con este error.

  • 404 aplicación/json

    No se encontró.

    Ocultar atributos de respuesta Mostrar los atributos de respuesta Objeto
    • badRequestDetail Objeto

      Detalle de solicitud incorrecto.

      Ocultar el atributo badRequestDetail Mostrar el atributo badRequestDetail Objeto
      • campos matriz[objeto]

        Describe todas las violaciones en una solicitud de cliente.

        Ocultar atributos de campos Mostrar atributos de campos Objeto
        • Descripción string Requerido

          Una descripción de por qué el elemento de solicitud es incorrecto.

        • Campo string Requerido

          Una ruta que conduce a un campo en el cuerpo de la solicitud.

    • detalle string

      Describe las condiciones o razones específicas que causan cada tipo de error.

    • Error integer(int32) Requerido

      Código de estado HTTP devuelto con este error.

      Documentación externa
    • errorCode string Requerido

      Código de error de aplicación devuelto con este error.

    • Parámetros matriz[objeto]

      Parámetros utilizados para dar más información sobre el error.

    • razón string

      Se devolvió un mensaje de error de aplicación con este error.

  • 500 aplicación/json

    Error Interno del Servidor.

    Ocultar atributos de respuesta Mostrar los atributos de respuesta Objeto
    • badRequestDetail Objeto

      Detalle de solicitud incorrecto.

      Ocultar el atributo badRequestDetail Mostrar el atributo badRequestDetail Objeto
      • campos matriz[objeto]

        Describe todas las violaciones en una solicitud de cliente.

        Ocultar atributos de campos Mostrar atributos de campos Objeto
        • Descripción string Requerido

          Una descripción de por qué el elemento de solicitud es incorrecto.

        • Campo string Requerido

          Una ruta que conduce a un campo en el cuerpo de la solicitud.

    • detalle string

      Describe las condiciones o razones específicas que causan cada tipo de error.

    • Error integer(int32) Requerido

      Código de estado HTTP devuelto con este error.

      Documentación externa
    • errorCode string Requerido

      Código de error de aplicación devuelto con este error.

    • Parámetros matriz[objeto]

      Parámetros utilizados para dar más información sobre el error.

    • razón string

      Se devolvió un mensaje de error de aplicación con este error.

POST /api/atlas/v2/grupos/{groupId}/pipelines
atlas api dataLakePipelines createPipeline --help
import (
	"os"
	"context"
	"log"
	sdk "go.mongodb.org/atlas-sdk/v20231115001/admin"
)

func main() {
	ctx := context.Background()
	clientID := os.Getenv("MONGODB_ATLAS_CLIENT_ID")
	clientSecret := os.Getenv("MONGODB_ATLAS_CLIENT_SECRET")

	// See https://dochub.mongodb.org/core/atlas-go-sdk-oauth
	client, err := sdk.NewClient(sdk.UseOAuthAuth(clientID, clientSecret))

	if err != nil {
		log.Fatalf("Error: %v", err)
	}

	params = &sdk.CreateGroupPipelineApiParams{}
	sdkResp, httpResp, err := client.DataLakePipelinesApi.
		CreateGroupPipelineWithParams(ctx, params).
		Execute()
}
curl --include --header "Authorization: Bearer ${ACCESS_TOKEN}" \
  --header "Accept: application/vnd.atlas.2023-11-15+json" \
  --header "Content-Type: application/json" \
  -X POST "https://cloud.mongodb.com/api/atlas/v2/groups/{groupId}/pipelines" \
  -d '{ <Payload> }'
curl --user "${PUBLIC_KEY}:${PRIVATE_KEY}" \
  --digest --include \
  --header "Accept: application/vnd.atlas.2023-11-15+json" \
  --header "Content-Type: application/json" \
  -X POST "https://cloud.mongodb.com/api/atlas/v2/groups/{groupId}/pipelines" \
  -d '{ <Payload> }'
Solicitar ejemplos
{
  "datasetRetentionPolicy": {
    "units": "DAYS",
    "value": 42
  },
  "name": "string",
  "sink": {
    "metadataProvider": "AWS",
    "metadataRegion": "string",
    "partitionFields": [
      {
        "fieldName": "string",
        "order": 0
      }
    ],
    "type": "DLS"
  },
  "source": {
    "type": "ON_DEMAND_CPS",
    "clusterName": "string",
    "collectionName": "string",
    "databaseName": "string"
  },
  "transformations": [
    {
      "field": "string",
      "type": "EXCLUDE"
    }
  ]
}
Ejemplos de respuestas (200)
{
  "_id": "32b6e34b3d91647abb20e7b8",
  "createdDate": "2026-05-04T09:42:00Z",
  "datasetRetentionPolicy": {
    "lastModifiedDate": "2026-05-04T09:42:00Z",
    "units": "DAYS",
    "value": 42
  },
  "groupId": "32b6e34b3d91647abb20e7b8",
  "lastUpdatedDate": "2026-05-04T09:42:00Z",
  "name": "string",
  "sink": {
    "type": "DLS",
    "metadataProvider": "AWS",
    "metadataRegion": "string",
    "partitionFields": [
      {
        "fieldName": "string",
        "order": 0
      }
    ]
  },
  "source": {
    "type": "ON_DEMAND_CPS",
    "clusterName": "string",
    "collectionName": "string",
    "databaseName": "string",
    "groupId": "32b6e34b3d91647abb20e7b8"
  },
  "state": "ACTIVE",
  "transformations": [
    {
      "field": "string",
      "type": "EXCLUDE"
    }
  ]
}
Ejemplos de respuestas (400)
{
  "error": 400,
  "detail": "(This is just an example, the exception may not be related to this endpoint) No provider AWS exists.",
  "reason": "Bad Request",
  "errorCode": "VALIDATION_ERROR"
}
Ejemplos de respuestas (401)
{
  "error": 401,
  "detail": "(This is just an example, the exception may not be related to this endpoint)",
  "reason": "Unauthorized",
  "errorCode": "NOT_ORG_GROUP_CREATOR"
}
Ejemplos de respuestas (403)
{
  "error": 403,
  "detail": "(This is just an example, the exception may not be related to this endpoint)",
  "reason": "Forbidden",
  "errorCode": "CANNOT_CHANGE_GROUP_NAME"
}
Ejemplos de respuestas (404)
{
  "error": 404,
  "detail": "(This is just an example, the exception may not be related to this endpoint) Cannot find resource AWS",
  "reason": "Not Found",
  "errorCode": "RESOURCE_NOT_FOUND"
}
Ejemplos de respuestas (500)
{
  "error": 500,
  "detail": "(This is just an example, the exception may not be related to this endpoint)",
  "reason": "Internal Server Error",
  "errorCode": "UNEXPECTED_ERROR"
}