Terminologia e conceitos do Amazon DataZone

Um domínio do Amazon DataZone é a entidade organizadora para conectar seus ativos, usuários e seus projetos. Com os domínios do Amazon DataZone, você tem a flexibilidade de refletir as necessidades de dados e analytics de sua estrutura organizacional, seja criando um único domínio do Amazon DataZone para sua empresa ou várias zonas de dados; domínios para diferentes unidades de negócios ou equipes.

As unidades de domínio permitem que você organize facilmente seus ativos e outras entidades de domínio em unidades de negócios e equipes específicas. A fim de configurar o compartilhamento seguro e eficiente de dados dentro e entre as unidades de negócios da sua organização, você pode criar unidades de domínio no Amazon DataZone e permitir que usuários selecionados em cada unidade de negócios façam login e compartilhem seus ativos no catálogo. As unidades de domínio também podem ser usadas para permitir que proprietários de recursos, como proprietários de contas da AWS, configurem permissões de autorização do Amazon DataZone em seus recursos. As unidades de domínio fornecem uma autoridade delegada dos proprietários da conta aos proprietários da unidade de domínio e podem configurar permissões de autorização em perfis de ambiente (criados usando configurações de esquema), em nome dos proprietários da conta. Para ter mais informações, consulte Unidades de domínio e políticas de autorização na Amazon DataZone.

As políticas de autorização do Amazon DataZone são um conjunto de controles dentro do Amazon DataZone aplicados a entidades como projetos, esquemas, ambientes, glossários e formulários de metadados. Essas políticas definem quem pode criar essas entidades e gerenciar seu ciclo de vida no portal do Amazon DataZone.

Dentro de uma unidade de domínio do Amazon DataZone, você pode atribuir as seguintes políticas de autorização aos seus usuários e grupos para conceder-lhes permissões específicas:

Para ter mais informações, consulte Atribua políticas de autorização a usuários e grupos dentro de uma unidade de DataZone domínio da Amazon.

Dentro de uma unidade de domínio do Amazon DataZone, você pode atribuir as seguintes políticas de autorização aos seus projetos para conceder permissões específicas:

Para ter mais informações, consulte Atribua políticas de autorização a projetos dentro de uma unidade de DataZone domínio da Amazon.

Em uma configuração específica do esquema, você pode atribuir as políticas de autorização a seguir aos projetos e proprietários de unidades de domínio:

Para ter mais informações, consulte Atribua políticas de autorização nas configurações do Amazon DataZone Blueprint.

Associar suas contas da AWS aos domínios do Amazon DataZone permite que você publique dados dessas contas da AWS no catálogo do Amazon DataZone e crie projetos do Amazon DataZone para trabalhar com seus dados em várias contas da AWS. Solicitações de associação de conta só podem ser iniciadas em contas da AWS que possuem um domínio do Amazon DataZone. As solicitações de associação de conta só podem ser aceitas pelos usuários administrativos das contas da AWS convidadas. Depois que uma conta da AWS é associada a um domínio do Amazon DataZone, você pode registrar suas fontes de dados, como o catálogo do AWS Glue e o Amazon Redshift, nessa conta para esse domínio. A associação também permite que uma conta da AWS crie projetos e ambientes do Amazon DataZone.

Uma Conta da AWS pode ser associada a um ou mais domínios do Amazon DataZone.

No Amazon DataZone, você pode usar fontes de dados para importar metadados técnicos de ativos (dados) dos bancos de dados de origem ou data warehouses para o Amazon DataZone. Na versão atual do Amazon DataZone, você pode criar e executar fontes de dados para o AWS Glue e o Amazon Redshift. Ao criar uma fonte de dados, você estabelece uma conexão entre o Amazon DataZone e a fonte (AWS Glue Data Catalog ou Warehouse do Amazon Redshift), o que permite ler metadados técnicos, incluindo nomes de tabelas, nomes de colunas e tipos de dados. Ao criar uma fonte de dados, você também dá início a execução inicial da fonte de dados que cria novos ativos ou atualiza os existentes no Amazon DataZone. Ao criar uma fonte de dados ou após a criação bem-sucedida dela, você também pode definir uma programação para a execução da fonte de dados.

No Amazon DataZone, a execução de uma fonte de dados é uma tarefa que o Amazon DataZone executa para criar ativos nos inventários do projeto e, opcionalmente, publicar ativos do inventário do projeto no catálogo do Amazon DataZone. As execuções da fonte de dados podem ser automatizadas (iniciadas quando uma fonte de dados é criada inicialmente), ou programadas ou manuais. Os critérios de seleção de dados permitem que você ajuste os conjuntos de dados existentes e futuros a serem inseridos nos inventários do projeto ou no catálogo do Amazon DataZone e a frequência das atualizações de metadados desses ativos de inventário ou do catálogo.

No Amazon DataZone, as metas de assinatura permitem que você acesse os dados nos quais se inscreveu em seus projetos. Uma meta de assinatura especifica o local (por exemplo, um banco de dados ou um esquema) e as permissões necessárias (por exemplo, um perfil do IAM) que o Amazon DataZone pode usar para estabelecer uma conexão com os dados de origem e criar as concessões necessárias para que os membros do projeto do Amazon DataZone possam começar a consultar os dados nos quais se inscreveram.

No Amazon DataZone, uma solicitação de assinatura é um processo que um projeto do Amazon DataZone deve seguir para ter acesso a um ativo específico. As solicitações de assinatura podem ser aprovadas, rejeitadas, revogadas ou concedidas.

No Amazon DataZone, um ativo é uma entidade que apresenta um único objeto de dados físicos (por exemplo, uma tabela, um painel, um arquivo) ou um objeto de dados virtual (por exemplo, uma visualização).

Os tipos de ativos definem como os ativos são representados no catálogo do Amazon DataZone. Um tipo de ativo define o esquema para um tipo específico de ativo. Quando os ativos são criados, eles são validados em relação ao esquema definido pelo tipo de ativo (por padrão, a versão mais recente). Quando ocorre uma atualização de ativos, o Amazon DataZone cria uma nova versão do ativo e permite que os usuários do Amazon DataZone operem em todas as versões do ativo.

No Amazon DataZone, um glossário de negócios é uma coleção de termos de negócios que podem estar associados a ativos. Um glossário de negócios ajuda a garantir que os mesmos termos e definições sejam usados em toda a organização em suas várias tarefas de data analytics.

Os termos em um glossário de negócios podem ser adicionados aos ativos e colunas para classificar ou aprimorar a identificação desses atributos durante a pesquisa. O glossário pode ser selecionado como o tipo de valor de um campo em um formulário de metadados associado a um ativo. Quando um termo específico é selecionado como o valor do campo do formulário de metadados de um ativo, os usuários podem pesquisar o termo do glossário de negócios e encontrar os ativos associados.

Um tipo de formulário de metadados é um modelo que define os metadados que são coletados e salvos quando os ativos são criados como inventário ou publicados em um domínio do Amazon DataZone. Os tipos de formulários de metadados podem ser associados a um ativo de dados. Os tipos de formulários de metadados ajudam os administradores de domínio a definir os formulários de metadados necessários para esse domínio, como informações de conformidade, informações regulamentares ou classificações. Permitem que os administradores de domínio personalizem metadados adicionais para seus ativos. O Amazon DataZone tem tipos de formulários de metadados do sistema, como: asset-common-details-form-type, column-business-metadata-form-type, glue-table-form-type, glue-view-form-type, redshift-table-form-type, redshift-view-form-type, s3-object-collection-form-type, subscription-terms-form-type e suggestion-form-type.

No Amazon DataZone, os formulários de metadados definem os metadados que são coletados e salvos quando os ativos são criados como inventário ou publicados em um domínio do Amazon DataZone. As definições do formulário de metadados são criadas no domínio do catálogo por um administrador do domínio. Uma definição de formulário de metadados é composta por uma ou mais definições de campo, com suporte para tipos de dados de valor de campo booliano, de data, decimal, inteiro, sequência de caracteres e glossário de negócios.

Um administrador de domínio aplica um formulário de metadados aos ativos em seu domínio adicionando o formulário de metadados ao domínio. Em seguida, os publicadores de ativos fornecem todos os valores de campo opcionais e obrigatórios no formulário de metadados.

No Amazon DataZone, os projetos permitem que um grupo de usuários colabore em vários casos de uso de negócios que envolvem a criação de ativos em inventários do projeto e, assim, a possibilidade de serem descobertos por todos os membros do projeto e, em seguida, publicação, descoberta, assinatura e consumo de ativos no catálogo Amazon DataZone. Os membros do projeto consomem ativos do catálogo do Amazon DataZone e produzem novos ativos usando um ou mais fluxos de trabalho analíticos. Os membros do projeto podem ser proprietários, colaboradores, consumidores, administradores e visualizadores.

Os proprietários do projeto podem adicionar ou remover outros usuários como proprietários ou colaboradores e podem modificar ou excluir projetos. Outras restrições aos colaboradores podem ser definidas com políticas. Quando um usuário cria um projeto, ele se torna o primeiro proprietário desse projeto.

Um ambiente é uma coleção de recursos configurados (por exemplo, um bucket do Amazon S3, um banco de dados do AWS Glue ou um grupo de trabalho do Amazon Athena), com um determinado conjunto de entidades principais do IAM (com permissões de colaborador atribuídas) que podem operar nesses recursos. Cada ambiente também pode ter entidades principais dos usuários autorizados a acessar os recursos e obter acesso aos dados por meio de assinatura e atendimento. Os ambientes são projetados para armazenar links acionáveis em serviços da AWS, IDEs e consoles externos. Os membros do projeto podem acessar serviços como o console do Amazon Athena e muito mais por meio de links diretos configurados em um ambiente. Os usuários do SSO e os usuários do IAM do projeto podem ser mais detalhados para usar/acessar ambientes específicos.

No Amazon DataZone, um perfil de ambiente é um modelo que você pode usar para criar ambientes. Os perfis de ambiente são criados usando esquemas.

Com os perfis de ambiente, os administradores de domínio podem agrupar esquemas com parâmetros pré-configurados e, em seguida, os operadores de dados podem criar rapidamente qualquer número de novos ambientes selecionando perfis de ambiente existentes e especificando nomes para os novos ambientes. Isso permite que os profissionais de dados gerenciem com eficiência seus projetos e ambientes e, ao mesmo tempo, assegurem que satisfaçam as políticas de governança de dados impostas por seus administradores de domínio.

Um esquema com o qual o ambiente é criado define quais ferramentas e serviços da AWS (por exemplo, o AWS Glue ou o Amazon Redshift) podem ser usados pelos membros do projeto, ao qual o ambiente pertence, ao trabalhar com ativos no catálogo do Amazon DataZone.

Na versão atual do Amazon DataZone, os seguintes esquemas padrão são compatíveis:

Um perfil de usuário representa os usuários do Amazon DataZone. O Amazon DataZone oferece suporte a perfis do IAM e identidades de SSO para interagir com o Console de Gerenciamento do Amazon DataZone e o portal de dados para diferentes propósitos. Os administradores de domínio usam perfis do IAM para realizar o trabalho administrativo inicial relacionado ao domínio no Console de Gerenciamento do Amazon DataZone, incluindo a criação de novos domínios do Amazon DataZone, a configuração de tipos de formulários de metadados e a implementação de políticas. Os profissionais de dados usam suas identidades corporativas de SSO por meio do Identity Center para fazer login no portal de dados do Amazon DataZone e acessar projetos nos quais têm associações.

Os perfis de grupo representam grupos de usuários do Amazon DataZone. Os grupos podem ser criados manualmente ou mapeados para grupos do Active Directory de clientes corporativos. No Amazon DataZone, os grupos têm dois propósitos. Primeiro, um grupo pode mapear uma equipe de usuários no organograma e, assim, reduzir o trabalho administrativo do proprietário de um projeto Amazon DataZone quando há novos funcionários entrando ou saindo de uma equipe. Em segundo lugar, os administradores corporativos usam grupos do Active Directory para gerenciar e atualizar os status dos usuários e, portanto, os administradores de domínio do Amazon DataZone podem usar essas associações de grupos para implementar políticas de domínio do Amazon DataZone.

No Amazon DataZone, uma entidade principal do IAM que cria um domínio do Amazon DataZone é o administrador padrão desse domínio. Os administradores de domínio no Amazon DataZone executam as principais funcionalidades do domínio, incluindo a criação de domínios, a atribuição de outros administradores de domínio, a adição de fontes de dados e metas de assinatura, a criação de projetos e ambientes e a atribuição de proprietários de projetos.

No Amazon DataZone, os publicadores publicam ativos no catálogo do Amazon DataZone e podem editar os metadados dos ativos que publicam. Se essa autoridade for concedida, os publicadores podem aprovar ou rejeitar solicitações de assinatura dos ativos que publicaram no catálogo do Amazon DataZone.

No Amazon DataZone, um assinante é um projeto do Amazon DataZone que quer encontrar, acessar e consumir ativos no catálogo do Amazon DataZone.

No Amazon DataZone, Conta da AWS os proprietários criam perfis, políticas e permissões das Contas da AWS que permitem que essas Contas da AWS sejam associadas aos domínios do Amazon DataZone.