View a markdown version of this page

Arquitetura de referência de malha de dados com a Amazon DataZone - Arquitetura de referência de malha de dados com a Amazon DataZone

As traduções são geradas por tradução automática. Em caso de conflito entre o conteúdo da tradução e da versão original em inglês, a versão em inglês prevalecerá.

Arquitetura de referência de malha de dados com a Amazon DataZone

Data de publicação: 20 de novembro de 2024 () Histórico do diagrama

A malha de dados é uma estrutura organizacional e arquitetônica descentralizada que ajuda as organizações a acelerar a inovação e gerar valor comercial. Essa arquitetura mostra como usar Amazon DataZone para criar uma solução de dados baseada em malha de dados.

Arquitetura de referência de malha de dados com a Amazon DataZone

Diagrama de arquitetura mostrando uma malha de dados Amazon DataZone usada com Amazon S3, AWS Glue, Amazon Redshift e SageMaker IA.

As etapas a seguir descrevem a arquitetura:

  1. Reúna dados de fontes em toda a empresa por meio de bancos de dados, compartilhamentos de arquivos, dispositivos periféricos, registros, redes sociais, aplicativos SaaS e mídia de streaming.

  2. Com base no sistema de origem e nos requisitos do usuário final, consuma dados brutos usando Amazon AppFlow, AWS Database Migration Service, Amazon Kinesis, AWS IoT Core e Amazon Managed Streaming for. Apache Kafka

  3. Na conta do produtor, transforme dados brutos usando o AWS Glue. Armazene metadados no catálogo de dados do AWS Glue, meça a qualidade dos dados usando o AWS Glue Data Quality e registre dados no Amazon S3, no Amazon Redshift, no Amazon RDS e em fontes de terceiros como ativos no Amazon DataZone catálogo usando trabalhos de fonte de dados.

  4. A conta de governança central hospeda o Amazon DataZone domínio e o portal de dados relacionado. Associe AWS contas de produtores e consumidores de dados ao Amazon DataZone domínio e crie projetos em unidades de domínio relacionadas.

  5. Os usuários finais fazem login no portal de Amazon DataZone dados usando credenciais do IAM ou logon único (SSO) por meio de. https://docs.aws.amazon.com/singlesignon/latest/userguide/what-is.html Eles pesquisam, filtram e visualizam informações de ativos, incluindo qualidade de dados, metadados comerciais e metadados técnicos.

  6. Quando os usuários finais encontram ativos de interesse, eles solicitam acesso usando o recurso de assinatura doAmazon DataZone. O proprietário do ativo aprova ou rejeita a solicitação com base na validade.

  7. Depois que a solicitação de assinatura for concedida e atendida, acesse o ativo na conta do consumidor para desenvolvimento de AI/ML modelos usando SageMaker IA e, para análises e relatórios, use Athena, Amazon Redshift e Quick.

Outras fontes de leitura

Para obter informações adicionais, consulte os seguintes recursos:

Histórico do diagrama

Para ser notificado sobre atualizações nesse diagrama de arquitetura de referência, assine o feed RSS.

AlteraçãoDescriçãoData

Publicação inicial

Diagrama de arquitetura de referência publicado pela primeira vez.

20 de novembro de 2024

nota

Para assinar as atualizações de RSS, você deve ter um plug-in RSS ativado para o navegador que está usando.