Docs 菜单
Docs 主页
/ /
MongoDB Atlas Data Lake
/

编辑 Atlas Data Lake 管道 — 预览

在此页面上

  • 步骤

您可以通过 Atlas 用户界面、Data Lake 管道API和 Atlas CLI 对 Data Lake 管道进行更改,包括:

  • 编辑数据提取安排

  • 编辑数据集保留策略

  • 编辑数据存储地区

  • 更改要从 Data Lake 数据集中排除的字段

要使用 Atlas CLI 修改项目的指定Data Lake管道的详细信息,请运行以下命令:

atlas dataLakePipelines update <pipelineName> [options]

要了解有关命令语法和参数的更多信息,请参阅 atlas dataLakePipelines update 的 Atlas CLI 文档。

提示

请参阅:相关链接

要通过API编辑管道,请向Data Lake pipelines端点发送 PATCH请求,并注明要编辑的管道的名称。要了解有关用于更新管道的pipelines端点语法和参数的更多信息,请参阅更新一个数据湖管道。

提示

您可以向availableSchedules端点发送GET请求,以检索可用于更改类型为PERIODIC_DPS的 Data Lake 管道的计划的备份计划策略项列表。

1
2
  1. 如果尚未显示,请选择包含您的项目的组织导航栏中的 Organizations菜单。

  2. 如果尚未显示,请从导航栏的 Projects 菜单中选择您的项目。

  3. 在侧边栏中,单击Deployment标题下的Data Lake

3
4

数据集保留策略可以在指定的持续时间后自动删除旧数据集,从而帮助管理 Data Lake 存储。

要为管道配置数据集保留策略,请将Dataset Retention Policy切换为ON ,然后输入时间值(以天、周或月为单位)。

重要

对管道的数据集保留策略的更改会立即生效。 如果降低包含现有数据集的管道的保留持续时间,则超过新持续时间的数据集将立即过期。

5

在更改Basic Schedule之前,请确保所需的数据提取频率与当前的备份计划相似。 例如,如果您希望切换到Daily ,则必须在策略中配置Daily备份计划。 或者,如果您想切换到每周一次的计划,则必须在策略中配置Weekly备份计划。 要了解更多信息,请参阅备份计划。 您还可以向 Data Lake availableSchedules端点发送GET请求,以检索可用于更改 Data Lake 管道计划的备份计划策略项列表。

6

Atlas Data Lake 在以下 AWS 地区提供优化的存储:

数据湖区域
AWS 区域
Virginia, USA
us-east-1
美国俄勒冈州
us-west-2
巴西圣保罗
sa-east-1
爱尔兰
eu-west-1
英国伦敦
eu-west-2
德国法兰克福
eu-central-1
印度孟买
ap-south-1
新加坡
ap-southeast-1
澳大利亚悉尼
亚太东南部-2
7
8
  • 单击Add Field并指定Field Name ,将字段添加到已排除的字段列表中。

  • 单击Delete All以删除已排除字段列表中的所有字段。

  • 单击,从已排除字段列表中删除该字段。

9
10

后退

查看Data Lake管道

在此页面上