DataZone Terminología y conceptos de Amazon

Un DataZone dominio de Amazon es la entidad organizadora que conecta tus activos, usuarios y sus proyectos. Con DataZone los dominios de Amazon, tiene la flexibilidad de reflejar las necesidades de datos y análisis de su estructura organizativa, ya sea que se trate de crear un único DataZone dominio de Amazon para su empresa o varias zonas de datos; dominios para diferentes unidades de negocio o equipos.

Las unidades de dominio le permiten organizar fácilmente sus activos y otras entidades de dominio en unidades de negocio y equipos específicos. Para configurar un intercambio de datos seguro y eficiente dentro y entre las unidades de negocio de su organización, puede crear unidades de dominio en Amazon DataZone y permitir que los usuarios seleccionados de cada unidad de negocio inicien sesión y compartan sus activos en el catálogo. Las unidades de dominio también se pueden utilizar para permitir a los propietarios de los recursos, como los propietarios de AWS cuentas, configurar los permisos de DataZone autorización de Amazon en sus recursos. Las unidades de dominio proporcionan una autoridad delegada de los propietarios de las cuentas a los propietarios de las unidades de dominio y pueden configurar permisos de autorización en los perfiles de entorno (creados mediante configuraciones de planos), en nombre de los propietarios de las cuentas. Para obtener más información, consulte Unidades de dominio y políticas de autorización en Amazon DataZone.

Las políticas de DataZone autorización de Amazon son un conjunto de controles dentro de Amazon que DataZone se aplican a entidades como proyectos, planos, entornos, glosarios y formularios de metadatos. Estas políticas definen quién puede crear estas entidades y gestionar su ciclo de vida en el DataZone portal de Amazon.

Dentro de una unidad de DataZone dominio de Amazon, puedes asignar las siguientes políticas de autorización a tus usuarios y grupos para concederles permisos específicos:

Para obtener más información, consulte Asigne políticas de autorización a los usuarios y grupos de una unidad de DataZone dominio de Amazon.

Dentro de una unidad de DataZone dominio de Amazon, puedes asignar las siguientes políticas de autorización a tus proyectos para concederles permisos específicos:

Para obtener más información, consulte Asigne políticas de autorización a proyectos dentro de una unidad de DataZone dominio de Amazon.

Dentro de una configuración de esquema específica, puede asignar las siguientes políticas de autorización a los propietarios de proyectos y unidades de dominio:

Para obtener más información, consulte Asigne políticas de autorización dentro de las configuraciones del DataZone blueprint de Amazon.

Al asociar tus AWS cuentas a DataZone los dominios de Amazon, podrás publicar datos de estas AWS cuentas en el DataZone catálogo de Amazon y crear DataZone proyectos de Amazon para trabajar con tus datos en varias AWS cuentas. Las solicitudes de asociación de cuentas solo se pueden iniciar en AWS cuentas que posean un DataZone dominio de Amazon. Las solicitudes de asociación de cuentas solo las pueden aceptar los usuarios administrativos de las AWS cuentas invitadas. Una vez que una AWS cuenta esté asociada a un DataZone dominio de Amazon, podrás registrar tus fuentes de datos, como el catálogo de AWS Glue y Amazon Redshift de esta cuenta, en este dominio. Al estar asociada, una AWS cuenta también puede crear DataZone proyectos y entornos de Amazon.

Se Cuenta de AWS puede asociar a uno o más DataZone dominios de Amazon.

En Amazon DataZone, puede utilizar las fuentes de datos para importar metadatos técnicos de los activos (datos) de las bases de datos o almacenes de datos de origen a Amazon DataZone. En la versión actual de Amazon DataZone, puede crear y ejecutar fuentes de datos para AWS Glue y Amazon Redshift. Al crear una fuente de datos, establece una conexión entre Amazon DataZone y la fuente (AWS Glue Data Catalog o Amazon Redshift Warehouse) que le permite leer los metadatos técnicos, incluidos los nombres de las tablas, los nombres de las columnas y los tipos de datos. Al crear una fuente de datos, también se inicia la ejecución inicial de la fuente de datos que crea activos nuevos o actualiza los existentes en Amazon DataZone. Al crear una fuente de datos o después de que la fuente de datos se haya creado correctamente, también tiene la opción de especificar un cronograma para la ejecución de la fuente de datos.

En Amazon DataZone, la ejecución de una fuente de datos es una tarea que Amazon DataZone realiza para crear activos en los inventarios de los proyectos y también, opcionalmente, para publicar los activos del inventario del proyecto en el DataZone catálogo de Amazon. La ejecución de las fuentes de datos puede ser automática (se inicia cuando se crea inicialmente una fuente de datos), programada o manual. Los criterios de selección de datos te permiten ajustar los conjuntos de datos actuales y futuros que se incorporarán a los inventarios de los proyectos o al DataZone catálogo de Amazon, así como la frecuencia de las actualizaciones de los metadatos de esos activos de inventario o catálogo.

En Amazon DataZone, los objetivos de suscripción te permiten acceder a los datos a los que te has suscrito en tus proyectos. Un destino de suscripción especifica la ubicación (por ejemplo, una base de datos o un esquema) y los permisos necesarios (por ejemplo, un IAM rol) que Amazon DataZone puede usar para establecer una conexión con los datos de origen y crear las concesiones necesarias para que los miembros del DataZone proyecto de Amazon puedan empezar a consultar los datos a los que se han suscrito.

En Amazon DataZone, una solicitud de suscripción es un proceso que debe seguir un DataZone proyecto de Amazon para poder acceder a un activo específico. Las solicitudes de suscripción se pueden aprobar, rechazar, revocar o conceder.

En Amazon DataZone, un activo es una entidad que presenta un único objeto de datos físico (por ejemplo, una tabla, un panel o un archivo) o un objeto de datos virtual (por ejemplo, una vista).

Los tipos de activos definen cómo se representan los activos en el DataZone catálogo de Amazon. Un tipo de activo define el esquema de un tipo de activo específico. Cuando se crean los activos, se validan con el esquema definido por su tipo de activo (de forma predeterminada, la última versión). Cuando se produce una actualización de activos, Amazon DataZone crea una nueva versión de activos y permite a DataZone los usuarios de Amazon operar con todas las versiones de activos.

En Amazon DataZone, un glosario empresarial es un conjunto de términos empresariales que pueden estar asociados a los activos. Un glosario empresarial ayuda a garantizar que se utilicen los mismos términos y definiciones en toda la organización en sus distintas tareas de análisis de datos.

Los términos de un glosario empresarial se pueden añadir a los activos y columnas para clasificar o mejorar la identificación de esos atributos durante la búsqueda. El glosario se puede seleccionar como el tipo de valor de un campo en un formulario de metadatos que esté asociado a un activo. Cuando se selecciona un término concreto como valor para el campo del formulario de metadatos de un activo, los usuarios pueden buscar el término del glosario empresarial y encontrar los activos asociados.

Un tipo de formulario de metadatos es una plantilla que define los metadatos que se recopilan y guardan cuando los activos se crean como inventario o se publican en un DataZone dominio de Amazon. Los tipos de formularios de metadatos se pueden asociar a un activo de datos. Los tipos de formularios de metadatos ayudan a los administradores de dominios a definir los formularios de metadatos necesarios para ese dominio, como la información de conformidad, la información reglamentaria o las clasificaciones. Permite a los administradores de dominios personalizar metadatos adicionales para sus activos. Amazon DataZone tiene tipos de formularios de metadatos del sistema como asset-common-details-form -type, column-business-metadata-form -type glue-table-form-type, glue-view-form-type,, redshift-table-form-type redshift-view-form-type, s3- object-collection-form-type subscription-terms-form-type, y. suggestion-form-type

En Amazon DataZone, los formularios de metadatos definen los metadatos que se recopilan y guardan cuando los activos se crean como inventario o se publican en un DataZone dominio de Amazon. Un administrador de dominios crea las definiciones de los formularios de metadatos en el dominio del catálogo. La definición de un formulario de metadatos se compone de una o más definiciones de campo y admite los tipos de datos booleanos, de fecha, decimales, enteros, de cadena y de valores de campo del glosario empresarial.

Un administrador de dominio aplica un formulario de metadatos a los activos de su dominio añadiendo el formulario de metadatos a su dominio. A continuación, los editores de activos proporcionan los valores de campo opcionales y obligatorios en el formulario de metadatos.

En Amazon DataZone, los proyectos permiten a un grupo de usuarios colaborar en varios casos de uso empresarial que implican la creación de activos en los inventarios de los proyectos y, por lo tanto, hacer que todos los miembros del proyecto puedan descubrirlos y, a continuación, publicar, descubrir, suscribirse y consumir los activos del catálogo de Amazon. DataZone Los miembros del proyecto consumen activos del DataZone catálogo de Amazon y producen nuevos activos mediante uno o más flujos de trabajo analíticos. Los miembros del proyecto pueden ser propietarios, colaboradores, consumidores, administradores y espectadores.

Los propietarios de los proyectos pueden añadir o eliminar a otros usuarios como propietarios o colaboradores y pueden modificar o eliminar proyectos. Se pueden definir otras restricciones para los colaboradores mediante políticas. Cuando un usuario crea un proyecto, se convierte en el primer propietario de ese proyecto.

Un entorno es un conjunto de recursos configurados (por ejemplo, un bucket de Amazon S3, una AWS Glue base de datos o un grupo de trabajo de Amazon Athena), con un conjunto determinado de IAM directores (con permisos de colaborador asignados) que pueden operar con esos recursos. Cada entorno también puede tener usuarios principales que estén autorizados a acceder a los recursos y a los datos mediante la suscripción y la gestión logística. Los entornos están diseñados para almacenar enlaces procesables a AWS servicios, dispositivos externos IDEs y consolas. Los miembros del proyecto pueden acceder a servicios como la consola Amazon Athena y más a través de enlaces profundos configurados dentro de un entorno. SSOse puede reducir aún más el alcance de IAM los usuarios y usuarios del proyecto para utilizar entornos específicos o acceder a ellos.

En Amazon DataZone, un perfil de entorno es una plantilla que se puede utilizar para crear entornos. Los perfiles de entorno se crean mediante planos.

Con los perfiles de entorno, los administradores de dominio pueden incluir los planos con parámetros preconfigurados y, a continuación, los trabajadores de datos pueden crear rápidamente cualquier número de entornos nuevos seleccionando los perfiles de entorno existentes y especificando los nombres de los nuevos entornos. Esto permite a los trabajadores de datos administrar sus proyectos y entornos de manera eficiente y, al mismo tiempo, garantizar que cumplen con las políticas de gobierno de datos aplicadas por los administradores de sus dominios.

El plano con el que se crea el entorno define qué AWS herramientas y servicios (por ejemplo, AWS Glue Amazon Redshift) pueden utilizar los miembros del proyecto al que pertenece el entorno cuando trabajan con los activos del catálogo de Amazon DataZone .

En la versión actual de Amazon, se admiten DataZone los siguientes blueprints predeterminados:

Un perfil de usuario representa a DataZone los usuarios de Amazon. Amazon DataZone admite IAM funciones e SSO identidades para interactuar con la consola de DataZone administración de Amazon y el portal de datos para diferentes propósitos. Los administradores de dominios utilizan IAM funciones para realizar el trabajo administrativo inicial relacionado con el dominio en Amazon DataZone Management Console, incluida la creación de nuevos DataZone dominios de Amazon, la configuración de los tipos de formularios de metadatos y la implementación de políticas. Los trabajadores de datos utilizan sus identidades SSO corporativas a través del Centro de Identidad para iniciar sesión en el Amazon DataZone Data Portal y acceder a los proyectos en los que tienen membresías.

Los perfiles de grupo representan grupos de DataZone usuarios de Amazon. Los grupos pueden crearse manualmente o asignarse a grupos de clientes empresariales de Active Directory. En Amazon DataZone, los grupos tienen dos propósitos. En primer lugar, un grupo puede asignarse a un equipo de usuarios del organigrama y, por lo tanto, reducir el trabajo administrativo del propietario de un DataZone proyecto de Amazon cuando hay nuevos empleados que se unen o abandonan un equipo. En segundo lugar, los administradores corporativos utilizan los grupos de Active Directory para gestionar y actualizar los estados de los usuarios, por lo que los administradores de DataZone dominios de Amazon pueden utilizar estas pertenencias a grupos para implementar las políticas de DataZone dominio de Amazon.

En Amazon DataZone, el IAM principal que crea un DataZone dominio de Amazon es el administrador de dominio predeterminado de ese dominio. Los administradores de dominios de Amazon DataZone realizan funciones clave para el dominio, como la creación de dominios, la asignación de otros administradores de dominio, la adición de fuentes de datos y destinos de suscripción, la creación de proyectos y entornos y la asignación de propietarios de proyectos.

En Amazon DataZone, los editores publican activos en el DataZone catálogo de Amazon y pueden editar los metadatos de los activos que publican. Si se les concede esta autorización, los editores pueden aprobar o rechazar las solicitudes de suscripción a los contenidos que publicaron en el DataZone catálogo de Amazon.

En Amazon DataZone, un suscriptor es un DataZone proyecto de Amazon que quiere encontrar activos del DataZone catálogo de Amazon, acceder a ellos y consumirlos.

En Amazon DataZone, Cuenta de AWS los propietarios crean funciones, políticas y permisos en sus dominios Cuentas de AWS que permiten asociarlos Cuentas de AWS a los DataZone dominios de Amazon.