Arquivos On-line

stores

1
"stores" : [
2
  {
3
    "name" : "<string>",
4
    "provider": "<string>",
5
    "region": "<string>"
6
  }
7
]

stores

Array de objetos em que cada objeto representa um armazenamento de dados a ser associado à instância do banco de dados federado. O armazenamento de instância do banco de dados federado faz referência a arquivos em um bucket S3 , documentos em um Atlas cluster, arquivos armazenados em URLs acessíveis publicamente ou Atlas Online Archives. O Atlas Data Federation só pode acessar armazenamentos de dados definidos no objeto stores .

stores.[n].name

Nome de armazenamento da instância do banco de dados federado . O campo databases.[n].collections.[n].dataSources.[n].storeName referencia este valor como parte da configuração de mapeamento.

stores.[n].provider

fornecedor de nuvem onde os dados do snapshot são armazenados. O valor deve ser dls:<subtype> para um snapshot. O Atlas Data Federation aceita os seguintes subtipos:

• aws, para o qual o valor deve ser dls:aws

stores.[n].region

Nome da região do seu arquivo on-line. Cada armazenamento está associado a uma única região, onde os dados arquivados são armazenados. Se você tiver vários arquivos online em diferentes regiões, você deverá adicionar um armazenamento para cada região para mapear dados nessa região para bancos de dados virtuais e coleção na instância do banco de dados federado.

Para saber mais sobre as regiões suportadas para Amazon Web Services, consulte Regiões do Atlas Data Federation.

databases

1
"databases" : [
2
  {
3
    "name" : "<string>",
4
    "collections" : [
5
      {
6
        "name" : "<string>",
7
        "dataSources" : [
8
          {
9
            "storeName" : "<string>",
10
            "datasetName" : "<string>",
11
            "datasetPrefix": "<string>",
12
            "trimLevel": <int>,
13
            "provenanceFieldName": "<string>",
14
            "maxDatasets": <int>
15
          }
16
        ]
17
      }
18
    ],
19
    "views" : [ 
20
      {
21
        "name" : "<string>", 
22
        "source" : "<string>", 
23
        "pipeline" : "<string>" 
24
      }
25
    ] 
26
  }
27
]

databases

Array de objetos que definem o mapeamento entre cada instância do banco de dados federado definido no stores e arquivos online. Cada objeto representa um banco de dados, suas collections e, opcionalmente, quaisquer visualizações das collections. Cada banco de dados de dados pode ter vários objetos collections e views .

databases.[n].name

Nome do banco de dados para o qual o Atlas Data Federation mapeia os dados contidos no armazém de dados.

databases.[n].collections

Array de objetos em que cada objeto representa uma coleção e fontes de dados que mapeiam para um armazenamento de instância de banco de dados federado stores.

databases.[n].collections.[n].name

Nome da coleção para a qual o Atlas Data Federation mapeia os dados contidos em cada databases.[n].collections.[n].dataSources.[n].storeName. Cada objeto na array representa o mapeamento entre a coleção e um objeto na array stores.

Você pode gerar nomes de collection dinamicamente, especificando * para o nome da collection. Para gerar nomes de collection dinamicamente, você também deve especificar o seguinte:

• databases.[n].collections.[n].dataSources.[n].datasetPrefix

• databases.[n].collections.[n].dataSources.[n].trimLevel

Para coleções curinga, o Atlas Data Federation mapeia um nome de conjunto de dados para um nome de coleção primeiro dividindo o namespace em uma lista de campos no delimitador $ e, em seguida, cortando vários campos da esquerda da lista e, finalmente, combinando os campos restantes usando _.

databases.[n].collections.[n].dataSources

Array de objetos em que cada objeto representa um armazenamento de instância do banco de dados federado na array stores para mapear com a collection. Você pode especificar vários dataSources para uma coleção de curingas somente se todos os dataSources da coleção mapearem para o arquivo on-line stores.

databases.[n].collections.[n].dataSources.[n].storeName

Nome de um armazém de instância do banco de dados federado para mapear para o <collection>. Deve corresponder ao name de um objeto na array stores.

databases.[n].collections.[n].dataSources.[n].datasetName

Nome do conjunto de dados do arquivo on-line para mapear com a coleção. O datasetName está no seguinte formato:

<version>$<type>$<subtype>$<clusterName>$<dbName>$<collectionName>$<archiveId>

Exemplo

Considere o seguinte nome de arquivo on-line.

v1$atlas$archive$clusterName$dbName$collections$archiveId

Aqui:

• v1 é a versão

• atlas é o tipo de conjunto de dados

• archive é o subtipo

• clusterName é o nome do cluster do Atlas

• dbName é o nome do reconhecimento de data center no cluster do Atlas

• collection são as coleções no banco de banco de dados

• archiveId é o identificador exclusivo dos dados arquivados

Observação

Para uma collection não curinga, você não pode especificar essa opção se especificar a opção databases.[n].collections.[n].dataSources.[n].datasetPrefix porque o Atlas Data Federation gera automaticamente as collections para o conjunto de dados mais recente usando o nome especificado na opção databases.[n].collections.[n].dataSources.[n].datasetPrefix .

databases.[n].collections.[n].dataSources.[n].datasetPrefix

Necessário para collection de curingas.

Prefixo do nome do conjunto de dados para corresponder ao nome do conjunto de dados do arquivo on-line. Quando você define isso para coleções curinga, o Atlas Data Federation mapeia as coleções apenas para os nomes de conjuntos de dados de arquivamento online cujo prefixo corresponda ao valor especificado aqui.

Se você especificar essa configuração para uma coleção não curinga, o Atlas Data Federation mapeará somente o conjunto de dados mais recente (para o snapshot capturado mais recentemente) para a coleção. Você também não pode especificar o databases.[n].collections.[n].dataSources.[n].datasetName se especificar essa opção para uma collection não curinga.

Exemplo

{
  ...,
  "name": "myFederatedDbCollection",
  "dataSources": [
    {
      "storeName": "aws-dl-store",
      "datasetPrefix": "v1$atlas$archive$MyCluster$MyDB$MyArchiveId"
    }
  ]
}

databases.[n].collections.[n].dataSources.[n].trimLevel

Inteiro não assinado que especifica quantos campo do nome do conjunto de dados devem ser cortados da esquerda do nome do conjunto de dados antes de mapear os campo restantes para um nome de collection curinga. O valor deve ser maior que 0 e menor que 7. Você pode definir essa configuração apenas para collection de curingas.

Você não pode definir esta configuração utilizando o Editor Visual na UI do Atlas. Portanto, essa configuração tem como padrão o nível de ajuste 5 para configurações usando o Editor Visual.

databases.[n].collections.[n].dataSources.[n].provenanceFieldName

Nome do campo que inclui a procedência dos documentos nos resultados. Se você especificar esta configuração na configuração de armazenamento, o Atlas Data Federation retornará os seguintes campos para cada documento no resultado:

Nome do campo	Descrição
provider	Provedor (stores.[n].provider) na configuração de armazenamento da instância do banco de dados federado
clusterName	Nome do cluster do Atlas
databaseName	Nome do reconhecimento de data center no cluster do Atlas
collectionName	Nome da collection
snapshotID	String exclusiva de 24 caracteres hexadecimais que identifica o snapshot
dataSetName	Nome do conjunto de dados do arquivo onlinedatabases.[n].collections.[n].dataSources.[n].datasetName()

Você não pode definir esta configuração utilizando o Editor Visual na UI do Atlas.

databases.[n].collections.[n].dataSources.[n].maxDatasets

Inteiro não assinado que especifica o número máximo de conjuntos de dados a partir dos quais gerar collection dinamicamente para o conjunto de dados. Você deve fornecer um valor maior que 0. Você pode definir essa configuração apenas para collection de curingas. O Atlas Data Federation retorna conjuntos de dados em ordem lexicográfica inversa.

Observação

Você não pode definir esta configuração utilizando o Editor Visual na UI do Atlas. Portanto, a configuração do Atlas Data Federation não inclui um limite no número de conjuntos de dados para configurações utilizando o Editor Visual.