Atlas Data Federation 概述

关键概念

Atlas Data Federation 架构

当您使用Atlas Data Federation时，联合数据库实例存在于区域VPC中。所有联合数据库实例数据流量，无论是流向Atlas集群还是云提供商对象存储，均经过 TLS加密。 TLS加密是Atlas Data Federation提供的主节点 (primary node in the replica set)网络安全形式。如果您的联合数据库实例和数据源（Atlas 集群、S3 、Blob、Google Cloud Storage）使用同一云提供商，则数据流量要么遍历云提供商的网络基础架构，要么遍历公共互联网，具体取决于云提供商记录的网络服务能力。如果您的联合数据库实例和数据源位于不同的云提供商上，则数据流量将遍历公共互联网。

点击放大

上图中的数据平面是数据所在的位置。您可以配置Atlas Data Federation来访问权限各种存储服务中的数据。 具体来说，您可以配置Atlas Data Federation，以跨Amazon Web Services区域、 Azure Blob 存储容器、 GCP存储桶、 Atlas集群、 HTTP和 HTTPS URL以及Atlas Online Archive访问权限Amazon Web Services S 存储桶中的数据。3要学习；了解有关配置Atlas Data Federation以访问权限数据存储的更多信息，请参阅为联合数据库实例定义数据存储。

然后，您可以为联合数据库实例设置基于角色的访问控制。您可以通过全局连接选项或将其固定到特定区域来控制客户端连接到联合数据库实例的方式。要了解详情，请参阅为联合数据库实例配置连接。

Atlas Data Federation保留数据局部性并最大限度地利用本地计算，从而最大限度地减少数据传输并优化性能。 上图中的计算平面显示了Atlas Data Federation处理所有请求的位置。 Atlas Data Federation在距离您的数据最近的地区提供一个弹性代理池， Atlas Data Federation可以在其中进程您的查询数据。 要学习；了解有关支持区域的更多信息，请参阅Atlas Data Federation区域。

Atlas Data Federation 不会将数据持久保留在系统内，一旦处理完您的查询，它只会将元数据存储在您的联合数据库实例中。这使您能够遵守数据主权法规，并确保您的数据的存储和处理符合法律要求。

上图中的控制平面与 Atlas 控制平面相同，是 Atlas Data Federation 平衡用户请求并聚合最终结果的地方。

Atlas Data Federation 直接在底层存储服务上执行查询的某些部分，而不是将所有数据都传输到计算节点进行处理。此外，当您执行查询时，它首先由 Data Federation 前端组件处理，该组件负责规划查询，然后将其分发到后端的节点。之后，后端节点会直接访问您的数据存储以执行查询逻辑并将结果返回给前端。此过程减少了需要移动的数据量，从而使整个过程的速度更快、成本更低。要了解详情，请参阅查询联合数据库实例。

为了优化查询性能，Atlas Data Federation 会执行以下操作：

• 对于云对象存储，它使用数据分区来根据查询参数选择需要处理的文件。要了解详情，请参阅为 S3 数据定义路径和使用分区属性类型。此外，它还使用 Parquet 元数据来减少通过行组选择或列投影从 Parquet 文件扫描的数据量。要了解详情，请参阅Parquet 数据格式。

• 对于Atlas集群，它会尝试将尽可能多的查询“下推”到集群。示例，如果您的聚合管道有一个 阶段，并且可以在本地处理，则Atlas Data$match Federation会尝试在Atlas 集群中进程该阶段，并且仅将生成的文档返回到联合层以处理后续阶段。要学习；了解更多信息，请参阅在Atlas集群中查询数据。

要了解更多信息，请参阅优化查询性能。

您可以使用 MongoDB 语言特定的驱动程序、 mongosh和Atlas SQL连接到 Atlas Data Federation。 要了解更多信息，请参阅连接到您的联合数据库实例。

用途示例

您可以使用 Atlas Data Federation 执行以下操作：

• Atlas将Atlas 集群数据复制到 Parquet 或逗号分隔值（CSV）文件中，并写入AmazonCSV Amazon Web Services3AzureWeb Services S 存储桶或Azure Blob 存储。

• 跨多个 Atlas 集群和在线归档进行查询，以获得 Atlas 数据的整体视图。

• Atlas物化来自Atlas集群、 AmazonAmazon Web Services 3AzureWeb Services S 存储桶和Azure Blob 存储的聚合的数据。

• 从Amazon Web Services S3 存储桶或AzureAmazon Web Services Blob 存储读取数据并将其导入AtlasAzureAtlas 集群。