Le traduzioni sono generate tramite traduzione automatica. In caso di conflitto tra il contenuto di una traduzione e la versione originale in Inglese, quest'ultima prevarrà.
Monitora Amazon Data Firehose con le metriche CloudWatch
Importante
Assicurati di attivare gli allarmi su tutte le CloudWatch metriche che appartengono alla tua destinazione per identificare gli errori in modo tempestivo.
Amazon Data Firehose si integra con le CloudWatch metriche di Amazon in modo da poter raccogliere, visualizzare e analizzare le CloudWatch metriche per i tuoi stream Firehose. Ad esempio, puoi monitorare le IncomingRecords metriche IncomingBytes e per tenere traccia dei dati inseriti in Amazon Data Firehose dai produttori di dati.
Amazon Data Firehose raccoglie e pubblica le metriche ogni minuto. CloudWatch Tuttavia, se i picchi di dati in entrata si verificano solo per pochi secondi, potrebbero non essere completamente acquisiti o non essere visibili nei parametri di un minuto. Questo perché le CloudWatch metriche vengono aggregate da Amazon Data Firehose a intervalli di un minuto.
Le metriche raccolte per gli stream Firehose sono gratuite. Per informazioni sui parametri dell'agente Kinesis, consulta Monitora lo stato dell'agente Kinesis.
Argomenti
CloudWatch metriche per il partizionamento dinamico
Se il partizionamento dinamico è abilitato, lo spazio dei nomi AWS/Firehose include le seguenti metriche.
| Metrica | Description |
|---|---|
ActivePartitionsLimit |
Il numero massimo di partizioni attive che uno stream Firehose elabora prima di inviare dati al bucket di errore. Statistiche: minimo, massimo, media, somma, esempi Unità: numero |
PartitionCount |
Il numero di partizioni che vengono elaborate, in altre parole, il numero di partizioni attive. Questo numero varia tra 1 e il limite del numero di partizioni di 500 (impostazione predefinita). Statistiche: minimo, massimo, media, somma, esempi Unità: numero |
PartitionCountExceeded |
Questo parametro indica se si sta superando il limite del numero di partizioni. Emette 1 o 0 a seconda che il limite venga violato o meno. |
JQProcessing.Duration |
Restituisce il tempo impiegato per eseguire l'espressione JQ nella funzione JQ Lambda. Unità: millisecondi |
PerPartitionThroughput |
Indica il throughput che viene elaborato per partizione. Questo parametro consente di monitorare la velocità di trasmissione effettiva per ciascuna partizione. Unità: StandardUnit.BytesSecond |
DeliveryToS3.ObjectCount |
Indica il numero di oggetti che vengono distribuiti al bucket S3. Statistiche: minimo, massimo, media, somma, esempi Unità: numero |
CloudWatch metriche per la distribuzione dei dati
Il namespace AWS/Firehose include i parametri a livello di servizio descritti di seguito. Se riscontri lievi cali nella media di BackupToS3.Success, DeliveryToS3.Success, DeliveryToSplunk.Success, DeliveryToAmazonOpenSearchService.Success o DeliveryToRedshift.Success, ciò non indica che vi sia una perdita di dati. Amazon Data Firehose riprova gli errori di consegna e non procede finché i record non vengono consegnati correttamente alla destinazione configurata o al bucket S3 di backup.
Argomenti
OpenSearch Consegna al servizio
| Metrica | Description |
|---|---|
DeliveryToAmazonOpenSearchService.Bytes |
Il numero di byte indicizzati al OpenSearch Servizio nel periodo di tempo specificato. Statistiche: minimo, massimo, media, somma, esempi Unità: byte |
DeliveryToAmazonOpenSearchService.DataFreshness |
L'età (dall'accesso ad Amazon Data Firehose a oggi) del record più vecchio in Amazon Data Firehose. Qualsiasi record più vecchio di questa età è stato consegnato al OpenSearch Servizio. Statistiche: minimo, massimo, media, somma, esempi Unità: secondi |
DeliveryToAmazonOpenSearchService.Records |
Il numero di record indicizzati al OpenSearch Servizio nel periodo di tempo specificato. Statistiche: minimo, massimo, media, somma, esempi Unità: numero |
DeliveryToAmazonOpenSearchService.Success |
La somma dei record indicizzati correttamente. |
DeliveryToS3.Bytes |
Il numero di byte distribuiti ad Amazon S3 durante il periodo di tempo specificato. Amazon Data Firehose emette questa metrica solo quando abiliti il backup per tutti i documenti. Statistiche: minimo, massimo, media, somma, esempi Unità: numero |
DeliveryToS3.DataFreshness |
L'età (dall'accesso ad Amazon Data Firehose a oggi) del record più vecchio in Amazon Data Firehose. Qualsiasi record più vecchio di questa età è stato consegnato al bucket S3. Amazon Data Firehose emette questa metrica solo quando abiliti il backup di tutti i documenti. Unità: secondi |
DeliveryToS3.Records |
Il numero di record distribuiti ad Amazon S3 durante il periodo di tempo specificato. Amazon Data Firehose emette questa metrica solo quando abiliti il backup per tutti i documenti. Statistiche: minimo, massimo, media, somma, esempi Unità: numero |
DeliveryToS3.Success |
La somma dei comandi put di Amazon S3 riusciti. Amazon Data Firehose emette sempre questa metrica indipendentemente dal fatto che il backup sia abilitato solo per i documenti non riusciti o per tutti i documenti. |
DeliveryToAmazonOpenSearchService.AuthFailure |
Authentication/authorization errore. Verifica la politica del OS/ES cluster e le autorizzazioni dei ruoli. 0 indica che non c'è alcun problema. 1 indica un errore di autenticazione. |
DeliveryToAmazonOpenSearchService.DeliveryRejected |
Errore di distribuzione rifiutata. Verifica la politica del OS/ES cluster e le autorizzazioni dei ruoli. 0 indica che non è presente alcun problema. 1 indica un errore di distribuzione. |
Consegna a OpenSearch Serverless
| Metrica | Description |
|---|---|
DeliveryToAmazonOpenSearchServerless.Bytes |
Il numero di byte indicizzati su OpenSearch Serverless nel periodo di tempo specificato. Statistiche: minimo, massimo, media, somma, esempi Unità: byte |
DeliveryToAmazonOpenSearchServerless.DataFreshness |
L'età (dall'accesso ad Amazon Data Firehose a oggi) del record più vecchio in Amazon Data Firehose. Qualsiasi record più vecchio di questa età è stato inviato a OpenSearch Serverless. Unità: secondi |
DeliveryToAmazonOpenSearchServerless.Records |
Il numero di record indicizzati su OpenSearch Serverless nel periodo di tempo specificato. Statistiche: minimo, massimo, media, somma, esempi Unità: numero |
DeliveryToAmazonOpenSearchServerless.Success |
La somma dei record indicizzati correttamente. |
DeliveryToS3.Bytes |
Il numero di byte distribuiti ad Amazon S3 durante il periodo di tempo specificato. Amazon Data Firehose emette questa metrica solo quando abiliti il backup per tutti i documenti. Statistiche: minimo, massimo, media, somma, esempi Unità: numero |
DeliveryToS3.DataFreshness |
L'età (dall'accesso ad Amazon Data Firehose a oggi) del record più vecchio in Amazon Data Firehose. Qualsiasi record più vecchio di questa età è stato consegnato al bucket S3. Amazon Data Firehose emette questa metrica solo quando abiliti il backup di tutti i documenti. Unità: secondi |
DeliveryToS3.Records |
Il numero di record distribuiti ad Amazon S3 durante il periodo di tempo specificato. Amazon Data Firehose emette questa metrica solo quando abiliti il backup per tutti i documenti. Unità: numero |
DeliveryToS3.Success |
La somma dei comandi put di Amazon S3 riusciti. Amazon Data Firehose emette sempre questa metrica indipendentemente dal fatto che il backup sia abilitato solo per i documenti non riusciti o per tutti i documenti. |
DeliveryToAmazonOpenSearchServerless.AuthFailure |
Authentication/authorization errore. Verifica la politica del OS/ES cluster e le autorizzazioni dei ruoli. 0 indica che non c'è alcun problema. 1 indica un errore di autenticazione. |
DeliveryToAmazonOpenSearchServerless.DeliveryRejected |
Errore di distribuzione rifiutata. Verifica la politica del OS/ES cluster e le autorizzazioni dei ruoli. 0 indica che non vi è alcun problema. 1 indica un errore di distribuzione. |
Distribuzione ad Amazon Redshift
| Metrica | Description |
|---|---|
DeliveryToRedshift.Bytes |
Il numero di byte copiati su Amazon Redshift durante il periodo di tempo specificato. Statistiche: minimo, massimo, media, somma, esempi Unità: numero |
DeliveryToRedshift.Records |
Il numero di record copiati su Amazon Redshift durante il periodo di tempo specificato. Statistiche: minimo, massimo, media, somma, esempi Unità: numero |
DeliveryToRedshift.Success |
La somma dei comandi Amazon Redshift COPY riusciti. |
DeliveryToS3.Bytes |
Il numero di byte distribuiti ad Amazon S3 durante il periodo di tempo specificato. Statistiche: minimo, massimo, media, somma, esempi Unità: byte |
DeliveryToS3.DataFreshness |
L'età (dall'accesso ad Amazon Data Firehose a oggi) del record più vecchio in Amazon Data Firehose. Qualsiasi record più vecchio di questa età viene inviato al bucket S3. Unità: secondi |
DeliveryToS3.Records |
Il numero di record distribuiti ad Amazon S3 durante il periodo di tempo specificato. Statistiche: minimo, massimo, media, somma, esempi Unità: numero |
DeliveryToS3.Success |
La somma dei comandi put di Amazon S3 riusciti. |
DeliveryToRedshift.DataFreshness |
L'età (dall'accesso ad Amazon Data Firehose a oggi) del record più vecchio in Amazon Data Firehose. Qualsiasi record più vecchio di questa età viene inviato al cluster Amazon Redshift. |
BackupToS3.Bytes |
Il numero di byte distribuiti ad Amazon S3 per il backup durante il periodo di tempo specificato. Amazon Data Firehose emette questa metrica quando il backup su Amazon S3 è abilitato. Statistiche: minimo, massimo, media, somma, esempi Unità: numero |
BackupToS3.DataFreshness |
L'età (dall'accesso ad Amazon Data Firehose a oggi) del record più vecchio in Amazon Data Firehose. Qualsiasi record più vecchio di questa età è stato distribuito al bucket Amazon S3 per il backup. Amazon Data Firehose emette questa metrica quando il backup su Amazon S3 è abilitato. Statistiche: minimo, massimo, media, esempi Unità: secondi |
BackupToS3.Records |
Il numero di record distribuiti ad Amazon S3 per il backup durante il periodo di tempo specificato. Amazon Data Firehose emette questa metrica quando il backup su Amazon S3 è abilitato. Statistiche: minimo, massimo, media, somma, esempi Unità: numero |
BackupToS3.Success |
La somma dei comandi put di Amazon S3 riusciti per il backup. Amazon Data Firehose emette questa metrica quando il backup su Amazon S3 è abilitato. |
Distribuzione ad Amazon S3
Le metriche nella tabella seguente si riferiscono alla consegna ad Amazon S3 quando è la destinazione principale dello stream Firehose.
| Metrica | Description |
|---|---|
DeliveryToS3.Bytes |
Il numero di byte distribuiti ad Amazon S3 durante il periodo di tempo specificato. Quando la trasformazione dei dati è abilitata, questa metrica riflette la dimensione dei byte preelaborati prima della trasformazione. Statistiche: minimo, massimo, media, somma, esempi Unità: byte |
DeliveryToS3.DataFreshness |
L'età (dall'accesso ad Amazon Data Firehose a oggi) del record più vecchio in Amazon Data Firehose. Qualsiasi record più vecchio di questa età è stato consegnato al bucket S3. Statistiche: minimo, massimo, media, esempi Unità: secondi |
DeliveryToS3.Records |
Il numero di record distribuiti ad Amazon S3 durante il periodo di tempo specificato. Statistiche: minimo, massimo, media, somma, esempi Unità: numero |
DeliveryToS3.Success |
La somma dei comandi put di Amazon S3 riusciti. |
BackupToS3.Bytes |
Il numero di byte distribuiti ad Amazon S3 per il backup durante il periodo di tempo specificato. Amazon Data Firehose emette questa metrica quando il backup è abilitato (il che è possibile solo quando è abilitata anche la trasformazione dei dati). Statistiche: minimo, massimo, media, somma, esempi Unità: numero |
BackupToS3.DataFreshness |
Età (dall'accesso ad Amazon Data Firehose a oggi) del record più vecchio in Amazon Data Firehose. Qualsiasi record più vecchio di questa età è stato distribuito al bucket Amazon S3 per il backup. Amazon Data Firehose emette questa metrica quando il backup è abilitato (il che è possibile solo quando è abilitata anche la trasformazione dei dati). Statistiche: minimo, massimo, media, esempi Unità: secondi |
BackupToS3.Records |
Il numero di record distribuiti ad Amazon S3 per il backup durante il periodo di tempo specificato. Amazon Data Firehose emette questa metrica quando il backup è abilitato (il che è possibile solo quando è abilitata anche la trasformazione dei dati). Statistiche: minimo, massimo, media, somma, esempi Unità: numero |
BackupToS3.Success |
Somma dei comandi put di Amazon S3 riusciti per il backup. Amazon Data Firehose emette questa metrica quando il backup è abilitato (il che è possibile solo quando è abilitata anche la trasformazione dei dati). |
Consegna a Snowflake
| Metrica | Description |
|---|---|
DeliveryToSnowflake.Bytes |
Il numero di byte consegnati a Snowflake nel periodo di tempo specificato. Statistiche: minimo, massimo, media, somma, esempi Unità: byte |
DeliveryToSnowflake.DataFreshness |
Età (dall'ingresso in Firehose a oggi) del record più antico di Firehose. Qualsiasi documento più vecchio di questa età è stato consegnato a Snowflake. Nota che possono essere necessari alcuni secondi per inviare i dati a Snowflake dopo che la chiamata di inserimento di Firehose è avvenuta con successo. Per il tempo necessario per il commit dei dati su Snowflake, fai riferimento alla metrica. Statistiche: minimo, massimo, media, esempi Unità: secondi |
DeliveryToSnowflake.DataCommitLatency |
Il tempo necessario affinché i dati vengano salvati su Snowflake dopo che Firehose ha inserito correttamente i record. Statistiche: minimo, massimo, media, esempi Unità: secondi |
DeliveryToSnowflake.Records |
Il numero di record consegnati a Snowflake nel periodo di tempo specificato. Statistiche: minimo, massimo, media, somma, esempi Unità: numero |
DeliveryToSnowflake.Success |
La somma delle chiamate di inserimento effettuate con successo a Snowflake. |
DeliveryToS3.Bytes |
Il numero di byte distribuiti ad Amazon S3 durante il periodo di tempo specificato. Questa metrica è disponibile solo quando la consegna a Snowflake ha esito negativo e Firehose tenta di eseguire il backup dei dati non riusciti su S3. Statistiche: minimo, massimo, media, somma, esempi Unità: byte |
DeliveryToS3.Records |
Il numero di record distribuiti ad Amazon S3 durante il periodo di tempo specificato. Questa metrica è disponibile solo quando la consegna a Snowflake ha esito negativo e Firehose tenta di eseguire il backup dei dati non riusciti su S3. Statistiche: minimo, massimo, media, somma, esempi Unità: numero |
DeliveryToS3.Success |
La somma dei comandi put di Amazon S3 riusciti. Questa metrica è disponibile solo quando la consegna a Snowflake ha esito negativo e Firehose tenta di eseguire il backup dei dati non riusciti su S3. |
BackupToS3.DataFreshness |
Età (da Firehose a oggi) del record più antico di Firehose. Qualsiasi record più vecchio di questa età viene salvato nel bucket Amazon S3. Questa metrica è disponibile quando lo stream Firehose è configurato per il backup di tutti i dati. Statistiche: minimo, massimo, media, esempi Unità: secondi |
BackupToS3.Records |
Il numero di record distribuiti ad Amazon S3 per il backup durante il periodo di tempo specificato. Questa metrica è disponibile quando lo stream Firehose è configurato per il backup di tutti i dati. Statistiche: minimo, massimo, media, somma, esempi Units:Count |
BackupToS3.Bytes |
Il numero di byte distribuiti ad Amazon S3 per il backup durante il periodo di tempo specificato. Questa metrica è disponibile quando lo stream Firehose è configurato per il backup di tutti i dati. Statistiche: minimo, massimo, media, somma, esempi Units:Count |
BackupToS3.Success |
Somma dei comandi put di Amazon S3 riusciti per il backup. Firehose emette questa metrica quando lo stream Firehose è configurato per il backup di tutti i dati. |
Consegna a Splunk
| Metrica | Description |
|---|---|
DeliveryToSplunk.Bytes |
Il numero di byte consegnati a Splunk durante il periodo di tempo specificato. Statistiche: minimo, massimo, media, somma, esempi Unità: byte |
DeliveryToSplunk.DataAckLatency |
La durata approssimativa necessaria per ricevere una conferma da Splunk dopo l'invio dei dati da Amazon Data Firehose. La tendenza in aumento o in diminuzione per questo parametro è più utile del valore approssimativo assoluto. Le tendenze in aumento possono indicare tassi di indicizzazione e riconoscimento da parte degli indicizzatori Splunk. Statistiche: minimo, massimo, media, esempi Unità: secondi |
DeliveryToSplunk.DataFreshness |
Età (dall'accesso ad Amazon Data Firehose a oggi) del record più vecchio in Amazon Data Firehose. Qualsiasi record più vecchio di questa età è stato consegnato a Splunk. Statistiche: minimo, massimo, media, esempi Unità: secondi |
DeliveryToSplunk.Records |
Il numero di record consegnati a Splunk durante il periodo di tempo specificato. Statistiche: minimo, massimo, media, somma, esempi Unità: numero |
DeliveryToSplunk.Success |
La somma dei record indicizzati correttamente. |
DeliveryToS3.Success |
La somma dei comandi put di Amazon S3 riusciti. Questo parametro viene emesso quando il backup su Amazon S3 è abilitato. |
BackupToS3.Bytes |
Il numero di byte distribuiti ad Amazon S3 per il backup durante il periodo di tempo specificato. Amazon Data Firehose emette questa metrica quando lo stream Firehose è configurato per eseguire il backup di tutti i documenti. Statistiche: minimo, massimo, media, somma, esempi Unità: numero |
BackupToS3.DataFreshness |
Età (dall'accesso ad Amazon Data Firehose a oggi) del record più vecchio in Amazon Data Firehose. Qualsiasi record più vecchio di questa età è stato distribuito al bucket Amazon S3 per il backup. Amazon Data Firehose emette questa metrica quando lo stream Firehose è configurato per il backup di tutti i documenti. Statistiche: minimo, massimo, media, esempi Unità: secondi |
BackupToS3.Records |
Il numero di record distribuiti ad Amazon S3 per il backup durante il periodo di tempo specificato. Amazon Data Firehose emette questa metrica quando lo stream Firehose è configurato per il backup di tutti i documenti. Statistiche: minimo, massimo, media, somma, esempi Unità: numero |
BackupToS3.Success |
Somma dei comandi put di Amazon S3 riusciti per il backup. Amazon Data Firehose emette questa metrica quando lo stream Firehose è configurato per eseguire il backup di tutti i documenti. |
Distribuzione agli endpoint HTTP
| Metrica | Description |
|---|---|
DeliveryToHttpEndpoint.Bytes |
Il numero di byte distribuiti correttamente all'endpoint HTTP. Statistiche: minimo, massimo, media, somma, esempi Unità: byte |
DeliveryToHttpEndpoint.Records |
Il numero di record distribuiti correttamente all'endpoint HTTP. Questa metrica viene emessa solo per i tentativi di consegna riusciti e non viene emessa quando un tentativo di consegna fallisce. Statistiche: minimo, massimo, media, somma, esempi Unità: numero |
DeliveryToHttpEndpoint.DataFreshness |
Età del record più vecchio in Amazon Data Firehose. Statistiche: minimo, massimo, media, esempi Unità: secondi |
DeliveryToHttpEndpoint.Success |
Il numero di record recapitati con successo all'endpoint HTTP per tentativo di consegna. A differenza di questa metrica Statistiche: minimo, massimo, media, somma, esempi Unità: numero |
DeliveryToHttpEndpoint.ProcessedBytes |
Il numero di byte che si è tentato di elaborare, inclusi i nuovi tentativi. |
DeliveryToHttpEndpoint.ProcessedRecords |
Il numero di record tentati, inclusi i nuovi tentativi. |
Metriche relative all'inserimento dei dati
Argomenti
Inserimento di dati tramite Kinesis Data Streams
| Metrica | Description |
|---|---|
DataReadFromKinesisStream.Bytes |
Quando l'origine dati è un flusso di dati Kinesis, questo parametro indica il numero di byte letti dal flusso. Questo numero include le riletture dovute a failover. Statistiche: minimo, massimo, media, somma, esempi Unità: byte |
DataReadFromKinesisStream.Records |
Quando l'origine dati è un flusso di dati Kinesis, questo parametro indica il numero di record letti dal flusso di dati. Questo numero include le riletture dovute a failover. Statistiche: minimo, massimo, media, somma, esempi Unità: numero |
ThrottledDescribeStream |
Il numero totale di volte in cui l'operazione Statistiche: minimo, massimo, media, somma, esempi Unità: numero |
ThrottledGetRecords |
Il numero totale di volte in cui l'operazione Statistiche: minimo, massimo, media, somma, esempi Unità: numero |
ThrottledGetShardIterator |
Il numero totale di volte in cui l'operazione Statistiche: minimo, massimo, media, somma, esempi Unità: numero |
KinesisMillisBehindLatest |
Quando l'origine dati è un flusso di dati Kinesis, questo parametro indica il numero di millisecondi di ritardo dell'ultimo record letto rispetto al record più recente nel flusso di dati Kinesis. Statistiche: minimo, massimo, media, esempi Unità: millisecondi |
Inserimento di dati tramite Direct PUT
| Metrica | Description |
|---|---|
BackupToS3.Bytes |
Il numero di byte distribuiti ad Amazon S3 per il backup durante il periodo di tempo specificato. Amazon Data Firehose emette questa metrica quando la trasformazione dei dati è abilitata per le destinazioni Amazon S3 o Amazon Redshift. Statistiche: minimo, massimo, media, somma, esempi Unità: byte |
BackupToS3.DataFreshness |
Età (dall'accesso ad Amazon Data Firehose a oggi) del record più vecchio in Amazon Data Firehose. Qualsiasi record più vecchio di questa età è stato distribuito al bucket Amazon S3 per il backup. Amazon Data Firehose emette questa metrica quando la trasformazione dei dati è abilitata per le destinazioni Amazon S3 o Amazon Redshift. Statistiche: minimo, massimo, media, esempi Unità: secondi |
BackupToS3.Records |
Il numero di record distribuiti ad Amazon S3 per il backup durante il periodo di tempo specificato. Amazon Data Firehose emette questa metrica quando la trasformazione dei dati è abilitata per le destinazioni Amazon S3 o Amazon Redshift. Statistiche: minimo, massimo, media, somma, esempi Unità: numero |
BackupToS3.Success |
Somma dei comandi put di Amazon S3 riusciti per il backup. Amazon Data Firehose emette questa metrica quando la trasformazione dei dati è abilitata per le destinazioni Amazon S3 o Amazon Redshift. |
BytesPerSecondLimit |
L'attuale numero massimo di byte al secondo che uno stream Firehose può assimilare prima della limitazione. Per richiedere un aumento fino a questo limite, vai al Centro di supporto AWS |
DeliveryToAmazonOpenSearchService.Bytes |
Il numero di byte indicizzati al Servizio nel periodo di tempo specificato. OpenSearch Statistiche: minimo, massimo, media, somma, esempi Unità: byte |
DeliveryToAmazonOpenSearchService.DataFreshness |
L'età (dall'accesso ad Amazon Data Firehose a oggi) del record più vecchio in Amazon Data Firehose. Qualsiasi record più vecchio di questa età è stato consegnato al OpenSearch Servizio. Statistiche: minimo, massimo, media, esempi Unità: secondi |
DeliveryToAmazonOpenSearchService.Records |
Il numero di record indicizzati al OpenSearch Servizio nel periodo di tempo specificato. Statistiche: minimo, massimo, media, somma, esempi Unità: numero |
DeliveryToAmazonOpenSearchService.Success |
La somma dei record indicizzati correttamente. |
DeliveryToRedshift.Bytes |
Il numero di byte copiati su Amazon Redshift durante il periodo di tempo specificato. Statistiche: minimo, massimo, media, somma, esempi Unità: byte |
DeliveryToRedshift.Records |
Il numero di record copiati su Amazon Redshift durante il periodo di tempo specificato. Statistiche: minimo, massimo, media, somma, esempi Unità: numero |
DeliveryToRedshift.Success |
La somma dei comandi Amazon Redshift COPY riusciti. |
DeliveryToS3.Bytes |
Il numero di byte distribuiti ad Amazon S3 durante il periodo di tempo specificato. Statistiche: minimo, massimo, media, somma, esempi Unità: byte |
DeliveryToS3.DataFreshness |
L'età (dall'accesso ad Amazon Data Firehose a oggi) del record più vecchio in Amazon Data Firehose. Qualsiasi record più vecchio di questa età è stato consegnato al bucket S3. Statistiche: minimo, massimo, media, esempi Unità: secondi |
DeliveryToS3.Records |
Il numero di record distribuiti ad Amazon S3 durante il periodo di tempo specificato. Statistiche: minimo, massimo, media, somma, esempi Unità: numero |
DeliveryToS3.Success |
La somma dei comandi put di Amazon S3 riusciti. |
DeliveryToSplunk.Bytes |
Il numero di byte consegnati a Splunk durante il periodo di tempo specificato. Statistiche: minimo, massimo, media, somma, esempi Unità: byte |
DeliveryToSplunk.DataAckLatency |
Il tempo approssimativo necessario per ricevere una conferma da Splunk dopo l'invio dei dati da parte di Amazon Data Firehose. La tendenza in aumento o in diminuzione per questo parametro è più utile del valore approssimativo assoluto. Le tendenze in aumento possono indicare tassi di indicizzazione e riconoscimento da parte degli indicizzatori Splunk. Statistiche: minimo, massimo, media, esempi Unità: secondi |
DeliveryToSplunk.DataFreshness |
Età (dall'accesso ad Amazon Data Firehose a oggi) del record più vecchio in Amazon Data Firehose. Qualsiasi record più vecchio di questa età è stato consegnato a Splunk. Statistiche: minimo, massimo, media, esempi Unità: secondi |
DeliveryToSplunk.Records |
Il numero di record consegnati a Splunk durante il periodo di tempo specificato. Statistiche: minimo, massimo, media, somma, esempi Unità: numero |
DeliveryToSplunk.Success |
La somma dei record indicizzati correttamente. |
IncomingBytes |
Il numero di byte inseriti con successo nello stream Firehose nel periodo di tempo specificato. L'inserimento dei dati potrebbe essere limitato quando supera uno dei limiti di flusso di Firehose. I dati limitati non verranno conteggiati per Statistiche: minimo, massimo, media, somma, esempi Unità: byte |
IncomingPutRequests |
Il numero di PutRecordBatch richieste PutRecord e richieste riuscite in un determinato periodo di tempo. Statistiche: minimo, massimo, media, somma, esempi Unità: numero |
IncomingRecords |
Il numero di record inseriti con successo nello stream Firehose nel periodo di tempo specificato. L'inserimento dei dati potrebbe essere limitato quando supera uno dei limiti di flusso di Firehose. I dati limitati non verranno conteggiati per Statistiche: minimo, massimo, media, somma, esempi Unità: numero |
RecordsPerSecondLimit |
L'attuale numero massimo di record al secondo che uno stream Firehose può acquisire prima della limitazione. Statistiche: minimo, massimo, media, somma, esempi Unità: numero |
ThrottledRecords |
Il numero di record che è stato limitato perché l'inserimento dei dati ha superato uno dei limiti di flusso di Firehose. Statistiche: minimo, massimo, media, somma, esempi Unità: numero |
Inserimento di dati da MSK
| Metrica | Description |
|---|---|
DataReadFromSource.Records
|
Il numero di record letti dall'argomento Kafka di origine. Statistiche: minimo, massimo, media, somma, esempi Unità: numero |
DataReadFromSource.Bytes
|
Il numero di byte letti dall'argomento Kafka di origine. Statistiche: minimo, massimo, media, somma, esempi Unità: byte |
SourceThrottled.Delay
|
Il ritardo con cui il cluster Kafka di origine restituisce i record dall'argomento Kafka di origine. Statistiche: minimo, massimo, media, esempi Unità: millisecondi |
BytesPerSecondLimit
|
Il limite attuale di velocità di trasmissione effettiva al quale Firehose leggerà da ogni partizione dell'argomento Kafka di origine. Statistiche: minimo, massimo, media, somma, esempi Unità: Bytes/sec |
KafkaOffsetLag
|
La differenza tra l'offset più grande del record che Firehose ha letto dall'argomento Kafka di origine e l'offset più grande del record disponibile dall'argomento Kafka di origine. Statistiche: minimo, massimo, media, somma, esempi Unità: numero |
FailedValidation.Records
|
Il numero di record che non hanno superato la convalida del record. Statistiche: minimo, massimo, media, somma, esempi Unità: numero |
FailedValidation.Bytes
|
Il numero di byte che non hanno superato la convalida del record. Statistiche: minimo, massimo, media, somma, esempi Unità: byte |
DataReadFromSource.Backpressured
|
Indica che un flusso Firehose è in ritardo nella lettura dei record dalla partizione di origine perché BytesPerSecondLimit ogni partizione è stata superata o perché il normale flusso di invio è lento o si è interrotto Unità: booleane |
API-level CloudWatch metriche
Il AWS/Firehose namespace include le seguenti metriche. API-level
| Metrica | Description |
|---|---|
DescribeDeliveryStream.Latency |
Il tempo necessario per operazione Statistiche: minimo, massimo, media, esempi Unità: millisecondi |
DescribeDeliveryStream.Requests |
Il numero totale di richieste Statistiche: minimo, massimo, media, somma, esempi Unità: numero |
ListDeliveryStreams.Latency |
Il tempo necessario per operazione Statistiche: minimo, massimo, media, esempi Unità: millisecondi |
ListDeliveryStreams.Requests |
Il numero totale di richieste Statistiche: minimo, massimo, media, somma, esempi Unità: numero |
PutRecord.Bytes |
Il numero di byte inviati allo stream Firehose utilizzando Statistiche: minimo, massimo, media, somma, esempi Unità: byte |
PutRecord.Latency |
Il tempo necessario per operazione Statistiche: minimo, massimo, media, esempi Unità: millisecondi |
PutRecord.Requests |
Il numero totale di richieste Statistiche: minimo, massimo, media, somma, esempi Unità: numero |
PutRecordBatch.Bytes |
Il numero di byte inviati allo stream Firehose utilizzando Statistiche: minimo, massimo, media, somma, esempi Unità: byte |
PutRecordBatch.Latency |
Il tempo necessario per operazione Statistiche: minimo, massimo, media, esempi Unità: millisecondi |
PutRecordBatch.Records |
Il numero totale di record da operazioni Statistiche: minimo, massimo, media, somma, esempi Unità: numero |
PutRecordBatch.Requests |
Il numero totale di richieste Statistiche: minimo, massimo, media, somma, esempi Unità: numero |
PutRequestsPerSecondLimit |
Il numero massimo di richieste put al secondo che uno stream Firehose può gestire prima della limitazione. Questo numero include PutRecord e richieste. PutRecordBatch Statistiche: minimo, massimo, media, somma, esempi Unità: numero |
ThrottledDescribeStream |
Il numero totale di volte in cui l'operazione Statistiche: minimo, massimo, media, somma, esempi Unità: numero |
ThrottledGetRecords |
Il numero totale di volte in cui l'operazione Statistiche: minimo, massimo, media, somma, esempi Unità: numero |
ThrottledGetShardIterator |
Il numero totale di volte in cui l'operazione Statistiche: minimo, massimo, media, somma, esempi Unità: numero |
UpdateDeliveryStream.Latency |
Il tempo necessario per operazione Statistiche: minimo, massimo, media, esempi Unità: millisecondi |
UpdateDeliveryStream.Requests |
Il numero totale di richieste Statistiche: minimo, massimo, media, somma, esempi Unità: numero |
CloudWatch Metriche di trasformazione dei dati
Se la trasformazione dei dati con Lambda è abilitata, lo spazio dei nomi AWS/Firehose include i seguenti parametri.
| Metrica | Description |
|---|---|
ExecuteProcessing.Duration |
Il tempo necessario per ogni chiamata della funzione Lambda eseguita da Firehose. Unità: millisecondi |
ExecuteProcessing.Success |
La somma delle invocazioni della funzione Lambda riuscite rispetto alla somma delle invocazioni totali della funzione Lambda. |
SucceedProcessing.Records |
Il numero di record elaborati correttamente durante il periodo di tempo specificato. Unità: numero |
SucceedProcessing.Bytes |
Il numero di byte elaborati correttamente durante il periodo di tempo specificato. Unità: byte |
CloudWatch Registra le metriche di decompressione
Se la decompressione è abilitata per la distribuzione CloudWatch dei log, lo spazio dei AWS/Firehose nomi include le seguenti metriche.
| Metrica | Description |
|---|---|
OutputDecompressedBytes.Success |
Dati decompressi in byte con successo Statistiche: minimo, massimo, media, somma, esempi Unità: byte |
OutputDecompressedBytes.Failed |
Dati decompressi in byte non riusciti Statistiche: minimo, massimo, media, somma, esempi Unità: byte |
OutputDecompressedRecords.Success |
Numero di record decompressi con successo Statistiche: minimo, massimo, media, somma, esempi Unità: numero |
OutputDecompressedRecords.Failed |
Numero di record decompressi non riusciti Statistiche: minimo, massimo, media, somma, esempi Unità: numero |
Metriche di conversione del CloudWatch formato
Se la conversione del formato è abilitata, lo spazio dei nomi di AWS/Firehose include i seguenti parametri.
| Metrica | Description |
|---|---|
SucceedConversion.Records |
Il numero di record convertiti correttamente. Unità: numero |
SucceedConversion.Bytes |
La dimensione dei record convertiti correttamente. Unità: byte |
FailedConversion.Records |
Il numero di record che non è stato possibile convertire. Unità: numero |
FailedConversion.Bytes |
La dimensione dei record che non è stato possibile convertire. Unità: byte |
Server-Side Metriche di crittografia (SSE) CloudWatch
Lo spazio dei nomi AWS/Firehose include le seguenti metriche correlate a SSE.
| Metrica | Description |
|---|---|
KMSKeyAccessDenied |
Il numero di volte in cui il servizio incontra un segnale Statistiche: minimo, massimo, media, somma, esempi Unità: numero |
KMSKeyDisabled |
Il numero di volte in cui il servizio incontra un Statistiche: minimo, massimo, media, somma, esempi Unità: numero |
KMSKeyInvalidState |
Il numero di volte in cui il servizio incontra un Statistiche: minimo, massimo, media, somma, esempi Unità: numero |
KMSKeyNotFound |
Il numero di volte in cui il servizio incontra un Statistiche: minimo, massimo, media, somma, esempi Unità: numero |
Dimensioni per Amazon Data Firehose
Per filtrare le metriche in base allo stream Firehose, utilizza la dimensione. DeliveryStreamName
Metriche di utilizzo di Amazon Data Firehose
Puoi utilizzare le metriche CloudWatch di utilizzo per fornire visibilità sull'utilizzo delle risorse da parte del tuo account. Utilizza queste metriche per visualizzare l'attuale utilizzo del servizio su CloudWatch grafici e dashboard.
Le metriche di utilizzo delle quote di servizio si trovano nel namespace AWS/Usage e vengono raccolte ogni tre minuti.
Attualmente, l'unico nome di metrica in questo namespace che viene pubblicato è. CloudWatch ResourceCount Questo parametro viene pubblicato con le dimensioni Service, Class, Type e Resource.
| Metrica | Descrizione |
|---|---|
ResourceCount |
Il numero delle risorse specificate in esecuzione nell'account. Le risorse sono definite dalle dimensioni associate al parametro. La statistica più utile per questa metrica è MAXIMUM, che rappresenta il numero massimo di risorse utilizzate durante il periodo di 3 minuti. |
Le seguenti dimensioni vengono utilizzate per perfezionare le metriche di utilizzo pubblicate da Amazon Data Firehose.
| Dimensione | Description |
|---|---|
Service |
Il nome del AWS servizio che contiene la risorsa. Per le metriche di utilizzo di Amazon Data Firehose, il valore di questa dimensione è. |
Class |
La classe della risorsa monitorata. Le metriche di utilizzo dell'API Amazon Data Firehose utilizzano questa dimensione con un valore di. |
Type |
Il tipo di risorsa monitorata. Attualmente, quando la dimensione Service è |
Resource |
Il nome della risorsa. AWS Attualmente, quando la dimensione Service è |
