Las traducciones son generadas a través de traducción automática. En caso de conflicto entre la traducción y la version original de inglés, prevalecerá la version en inglés.
Ingesta y procesamiento de lagos de datos con análisis descendentes
Esta arquitectura muestra cómo monitorear las canalizaciones de procesamiento de datos dentro del lago de datos mediante el análisis descendente. Puede publicar registros, métricas y eventos relevantes para detectar comportamientos anormales y visualizar las tendencias casi en tiempo real.
Ingesta y procesamiento de lagos de datos con análisis descendentes
Los siguientes pasos describen la arquitectura:
-
Las canalizaciones de procesamiento de datos dentro del lago de datos producen datos. En este paso se pueden generar cualquier cantidad de canalizaciones de origen.
-
Los componentes de la canalización de datos publican los registros, las métricas o los eventos relevantes en Amazon CloudWatch.
-
Una AWS Lambda función obtiene datos de Amazon Kinesis Data CloudWatch Streams y los envía a Amazon Kinesis Data Streams.
-
La transmisión de datos de Kinesis es el almacenamiento central de datos de transmisión casi en tiempo real.
-
Amazon Kinesis Data Analytics analiza los datos prácticamente en tiempo real y guarda las métricas agregadas en una base de datos de Amazon Timestream para su posterior análisis. Una consulta de Kinesis Data Analytics también puede detectar comportamientos anormales de los datos en proceso.
-
Amazon Timestream admite el análisis de series temporales y define las series temporales como un tipo de datos nativo. Admite agregados avanzados, funciones de ventana y tipos de datos complejos, como matrices y filas.
-
La consulta de umbral de Amazon Kinesis Data Analytics envía análisis casi en tiempo real a Lambda.
-
Según los datos procesados de Kinesis Data Analytics, la función Lambda puede enviar alertas en tiempo real mediante Amazon Simple Notification Service.
-
https://docs.aws.amazon.com/quicksight/latest/user/welcome.htmlLos paneles de Amazon Quick Sight visualizan tendencias como el número de canalizaciones exitosas, la tasa de errores, la distribución de los tipos de error, etc.
Documentación adicional
Para obtener información adicional, consulte los siguientes recursos:
Historial del diagrama
Para recibir notificaciones sobre las actualizaciones de este diagrama de arquitectura de referencia, suscríbase a la fuente RSS.
| Cambio | Descripción | Fecha |
|---|---|---|
El diagrama de arquitectura de referencia se publicó por primera vez. | 15 de julio de 2021 | |
Publicación inicial | El diagrama de arquitectura de referencia se publicó por primera vez. | 15 de julio de 2021 |
nota
Para suscribirse a las actualizaciones de RSS, debe tener un complemento de RSS habilitado para el navegador que esté utilizando.
