DataZone Terminologia e conceitos da Amazon

Um DataZone domínio da Amazon é a entidade organizadora para conectar seus ativos, usuários e seus projetos. Com os DataZone domínios da Amazon, você tem a flexibilidade de refletir as necessidades de dados e análises de sua estrutura organizacional, seja criando um único DataZone domínio da Amazon para sua empresa ou várias zonas de dados; domínios para diferentes unidades de negócios ou equipes.

As unidades de domínio permitem que você organize facilmente seus ativos e outras entidades de domínio em unidades de negócios e equipes específicas. Para configurar o compartilhamento seguro e eficiente de dados dentro e entre as unidades de negócios da sua organização, você pode criar unidades de domínio na Amazon DataZone e permitir que usuários selecionados em cada unidade de negócios façam login e compartilhem seus ativos no catálogo. As unidades de domínio também podem ser usadas para permitir que proprietários de recursos, como proprietários de AWS contas, configurem permissões de DataZone autorização da Amazon em seus recursos. As unidades de domínio fornecem uma autoridade delegada dos proprietários da conta aos proprietários da unidade de domínio e podem configurar permissões de autorização em perfis de ambiente (criados usando configurações de blueprint), em nome dos proprietários da conta. Para obter mais informações, consulte Unidades de domínio e políticas de autorização na Amazon DataZone.

As políticas de DataZone autorização da Amazon são um conjunto de controles dentro da Amazon DataZone aplicados a entidades como projetos, plantas, ambientes, glossários e formulários de metadados. Essas políticas definem quem pode criar essas entidades e gerenciar seu ciclo de vida no portal da Amazon DataZone.

Dentro de uma unidade de DataZone domínio da Amazon, você pode atribuir as seguintes políticas de autorização aos seus usuários e grupos para conceder-lhes permissões específicas:

Para obter mais informações, consulte Atribua políticas de autorização a usuários e grupos dentro de uma unidade de DataZone domínio da Amazon.

Dentro de uma unidade de DataZone domínio da Amazon, você pode atribuir as seguintes políticas de autorização aos seus projetos para conceder permissões específicas:

Para obter mais informações, consulte Atribua políticas de autorização a projetos dentro de uma unidade de DataZone domínio da Amazon.

Em uma configuração específica do blueprint, você pode atribuir as seguintes políticas de autorização aos projetos e proprietários de unidades de domínio:

Para obter mais informações, consulte Atribua políticas de autorização nas configurações do Amazon DataZone Blueprint.

Associar suas AWS contas aos DataZone domínios da Amazon permite que você publique dados dessas AWS contas no DataZone catálogo da Amazon e crie DataZone projetos da Amazon para trabalhar com seus dados em várias AWS contas. Solicitações de associação de conta só podem ser iniciadas em AWS contas que possuem um DataZone domínio da Amazon. As solicitações de associação de conta só podem ser aceitas pelos usuários administrativos das AWS contas convidadas. Depois que uma AWS conta é associada a um DataZone domínio da Amazon, você pode registrar suas fontes de dados, como o catálogo AWS Glue e o Amazon Redshift, nessa conta para esse domínio. Estar associado também permite que uma AWS conta crie DataZone projetos e ambientes da Amazon.

Um Conta da AWS pode ser associado a um ou mais DataZone domínios da Amazon.

Na Amazon DataZone, você pode usar fontes de dados para importar metadados técnicos de ativos (dados) dos bancos de dados de origem ou armazéns de dados para a Amazon. DataZone Na versão atual da Amazon DataZone, você pode criar e executar fontes de dados para o AWS Glue e o Amazon Redshift. Ao criar uma fonte de dados, você estabelece uma conexão entre a Amazon DataZone e a fonte (AWS Glue Data Catalog ou Amazon Redshift Warehouse) que permite ler metadados técnicos, incluindo nomes de tabelas, nomes de colunas e tipos de dados. Ao criar uma fonte de dados, você também inicia a execução inicial da fonte de dados que cria novos ou atualiza ativos existentes na Amazon DataZone. Ao criar uma fonte de dados ou após a criação bem-sucedida da fonte de dados, você também tem a opção de especificar um cronograma para a execução da fonte de dados.

Na Amazon DataZone, a execução de uma fonte de dados é uma tarefa que DataZone a Amazon executa para criar ativos nos inventários do projeto e, opcionalmente, publicar ativos do inventário do projeto no catálogo da Amazon DataZone . As execuções da fonte de dados podem ser automatizadas (iniciadas quando uma fonte de dados é criada inicialmente) ou programadas ou manuais. Os critérios de seleção de dados permitem que você ajuste os conjuntos de dados existentes e futuros a serem inseridos nos inventários do projeto ou no DataZone catálogo da Amazon e a frequência das atualizações de metadados nesses ativos de inventário ou catálogo.

Na Amazon DataZone, as metas de assinatura permitem que você acesse os dados nos quais você se inscreveu em seus projetos. Uma meta de assinatura especifica a localização (por exemplo, um banco de dados ou um esquema) e as permissões necessárias (por exemplo, uma IAM função) que a Amazon DataZone pode usar para estabelecer uma conexão com os dados de origem e criar as concessões necessárias para que os membros do DataZone projeto da Amazon possam começar a consultar os dados nos quais se inscreveram.

Na Amazon DataZone, uma solicitação de assinatura é um processo que um DataZone projeto da Amazon deve seguir para ter acesso a um ativo específico. As solicitações de assinatura podem ser aprovadas, rejeitadas, revogadas ou concedidas.

Na Amazon DataZone, um ativo é uma entidade que apresenta um único objeto de dados físicos (por exemplo, uma tabela, um painel, um arquivo) ou um objeto de dados virtual (por exemplo, uma visualização).

Os tipos de ativos definem como os ativos são representados no DataZone catálogo da Amazon. Um tipo de ativo define o esquema para um tipo específico de ativo. Quando os ativos são criados, eles são validados em relação ao esquema definido pelo tipo de ativo (por padrão, a versão mais recente). Quando ocorre uma atualização de ativos, a Amazon DataZone cria uma nova versão do ativo e permite que DataZone os usuários da Amazon operem em todas as versões do ativo.

Na Amazon DataZone, um glossário comercial é uma coleção de termos comerciais que podem estar associados a ativos. Um glossário de negócios ajuda a garantir que os mesmos termos e definições sejam usados em toda a organização em suas várias tarefas de análise de dados.

Os termos em um glossário comercial podem ser adicionados aos ativos e colunas para classificar ou aprimorar a identificação desses atributos durante a pesquisa. O glossário pode ser selecionado como o tipo de valor de um campo em um formulário de metadados associado a um ativo. Quando um termo específico é selecionado como o valor do campo do formulário de metadados de um ativo, os usuários podem pesquisar o termo do glossário comercial e encontrar os ativos associados.

Um tipo de formulário de metadados é um modelo que define os metadados que são coletados e salvos quando os ativos são criados como inventário ou publicados em um domínio da Amazon DataZone . Os tipos de formulários de metadados podem ser associados a um ativo de dados. Os tipos de formulários de metadados ajudam os administradores de domínio a definir os formulários de metadados necessários para esse domínio, como informações de conformidade, informações regulamentares ou classificações. Ele permite que os administradores de domínio personalizem metadados adicionais para seus ativos. DataZone A Amazon tem tipos de formulários de metadados do sistema, como asset-common-details-form -type, column-business-metadata-form -type, glue-table-form-type,, glue-view-form-type, redshift-table-form-type redshift-view-form-type, s3-object-collection-form-type, e. subscription-terms-form-type suggestion-form-type

Na Amazon DataZone, os formulários de metadados definem os metadados que são coletados e salvos quando os ativos são criados como inventário ou publicados em um domínio da Amazon DataZone . As definições do formulário de metadados são criadas no domínio do catálogo por um administrador do domínio. Uma definição de formulário de metadados é composta por uma ou mais definições de campo, com suporte para tipos de dados de valor de campo booleano, de data, decimal, inteiro, sequência de caracteres e glossário comercial.

Um administrador de domínio aplica um formulário de metadados aos ativos em seu domínio adicionando o formulário de metadados ao domínio. Em seguida, os editores de ativos fornecem todos os valores de campo opcionais e obrigatórios no formulário de metadados.

Na Amazon DataZone, os projetos permitem que um grupo de usuários colabore em vários casos de uso comercial que envolvem a criação de ativos nos inventários do projeto e, assim, torná-los detectáveis por todos os membros do projeto e, em seguida, publicar, descobrir, assinar e consumir ativos no catálogo da Amazon. DataZone Os membros do projeto consomem ativos do DataZone catálogo da Amazon e produzem novos ativos usando um ou mais fluxos de trabalho analíticos. Os membros do projeto podem ser proprietários, colaboradores, consumidores, administradores e espectadores.

Os proprietários do projeto podem adicionar ou remover outros usuários como proprietários ou colaboradores e podem modificar ou excluir projetos. Outras restrições aos colaboradores podem ser definidas com políticas. Quando um usuário cria um projeto, ele se torna o primeiro proprietário desse projeto.

Um ambiente é uma coleção de recursos configurados (por exemplo, um bucket do Amazon S3, um AWS Glue banco de dados ou um grupo de trabalho do Amazon Athena), com um determinado conjunto IAM de diretores (com permissões de colaborador atribuídas) que podem operar nesses recursos. Cada ambiente também pode ter usuários principais autorizados a acessar os recursos e obter acesso aos dados por meio de assinatura e atendimento. Os ambientes são projetados para armazenar links acionáveis em AWS serviços IDEs e consoles externos. Os membros do projeto podem acessar serviços como o console Amazon Athena e muito mais por meio de links diretos configurados em um ambiente. SSOusuários e IAM usuários do projeto podem ser mais detalhados para usar/acessar ambientes específicos.

Na Amazon DataZone, um perfil de ambiente é um modelo que você pode usar para criar ambientes. Os perfis de ambiente são criados usando blueprints.

Com os perfis de ambiente, os administradores de domínio podem agrupar esquemas com parâmetros pré-configurados e, em seguida, os operadores de dados podem criar rapidamente qualquer número de novos ambientes selecionando perfis de ambiente existentes e especificando nomes para os novos ambientes. Isso permite que os profissionais de dados gerenciem com eficiência seus projetos e ambientes e, ao mesmo tempo, assegurem que satisfaçam as políticas de governança de dados impostas por seus administradores de domínio.

Um plano com o qual o ambiente é criado define quais AWS ferramentas e serviços (por exemplo, AWS Glue ou o Amazon Redshift) os membros do projeto ao qual o ambiente pertence podem usar ao trabalhar com ativos no catálogo da Amazon DataZone .

Na versão atual da Amazon, DataZone os seguintes esquemas padrão são suportados:

Um perfil de usuário representa DataZone os usuários da Amazon. A Amazon DataZone oferece suporte a IAM funções e SSO identidades para interagir com o Amazon DataZone Management Console e o portal de dados para diferentes propósitos. Os administradores de domínio usam IAM funções para realizar o trabalho administrativo inicial relacionado ao domínio no Amazon DataZone Management Console, incluindo a criação de novos DataZone domínios da Amazon, a configuração de tipos de formulários de metadados e a implementação de políticas. Os profissionais de dados usam suas identidades SSO corporativas por meio do Identity Center para fazer login no Amazon DataZone Data Portal e acessar projetos nos quais têm associações.

Os perfis de grupo representam grupos de DataZone usuários da Amazon. Os grupos podem ser criados manualmente ou mapeados para grupos do Active Directory de clientes corporativos. Na Amazon DataZone, os grupos têm dois propósitos. Primeiro, um grupo pode mapear uma equipe de usuários no organograma e, assim, reduzir o trabalho administrativo do proprietário de um DataZone projeto da Amazon quando há novos funcionários entrando ou saindo de uma equipe. Segundo, os administradores corporativos usam grupos do Active Directory para gerenciar e atualizar os status dos usuários e, portanto, os administradores de DataZone domínio da Amazon podem usar essas associações de grupos para implementar políticas de domínio da Amazon. DataZone

Na Amazon DataZone, um IAM diretor que cria um DataZone domínio da Amazon é o administrador de domínio padrão desse domínio. Os administradores de domínio na Amazon DataZone executam as principais funcionalidades do domínio, incluindo a criação de domínios, a atribuição de outros administradores de domínio, a adição de fontes de dados e metas de assinatura, a criação de projetos e ambientes e a designação de proprietários de projetos.

Na Amazon DataZone, os editores publicam ativos no DataZone catálogo da Amazon e podem editar os metadados dos ativos que publicam. Se essa autoridade for concedida, os editores podem aprovar ou rejeitar solicitações de assinatura dos ativos que publicaram no catálogo da Amazon DataZone .

Na Amazon DataZone, um assinante é um DataZone projeto da Amazon que deseja encontrar, acessar e consumir ativos no catálogo da Amazon DataZone .

Na Amazon DataZone, Conta da AWS os proprietários criam funções, políticas e permissões Contas da AWS que permitem que elas Contas da AWS sejam associadas aos DataZone domínios da Amazon.