Il servizio gestito da Amazon per Apache Flink era precedentemente noto come Analisi dei dati Amazon Kinesis per Apache Flink.
Le traduzioni sono generate tramite traduzione automatica. In caso di conflitto tra il contenuto di una traduzione e la versione originale in Inglese, quest'ultima prevarrà.
Usa i connettori per spostare i dati in Managed Service for Apache Flink con DataStream API
In Amazon Managed Service for Apache Flink DataStream API, i connettori sono componenti software che spostano i dati da e verso un'applicazione Managed Service for Apache Flink. I connettori sono integrazioni flessibili che consentono di leggere da file e directory. I connettori sono costituiti da moduli completi per l'interazione con i servizi Amazon e i sistemi di terze parti.
I tipi di connettori comprendono:
Aggiungi sorgenti di dati in streaming: invio di dati all'applicazione da un flusso di dati, un file o un'altra origine dati Kinesis.
Scrivi dati utilizzando i lavandini: invia dati dall'applicazione a un flusso di dati Kinesis, a un flusso Firehose o a un'altra destinazione di dati.
Usa I/O asincrono: fornisce l'accesso asincrono a un'origine dati (ad esempio, un database) per arricchire gli eventi di flusso.
Connettori disponibili
Il framework Apache Flink contiene connettori per l'accesso ai dati da vari tipi di origini. Per informazioni sui connettori disponibili nel framework Apache Flink, consulta Connettori
avvertimento
Se disponi di applicazioni in esecuzione su Flink 1.6, 1.8, 1.11 o 1.13 e desideri eseguirle nelle regioni del Medio Oriente (UAE), Asia Pacifico (Hyderabad), Israele (Tel Aviv), Europa (Zurigo), Medio Oriente (), Asia Pacifico (MelbourneUAE) o Asia Pacifico (Giacarta), potrebbe essere necessario ricostruire l'archivio delle applicazioni con un connettore aggiornato o eseguire l'aggiornamento a Flink 1.18.
I connettori Apache Flink sono archiviati nei propri archivi open source. Se stai eseguendo l'aggiornamento alla versione 1.18 o successiva, devi aggiornare le tue dipendenze. Per accedere al repository per i connettori Apache Flink, vedi. AWS flink-connector-aws
Di seguito sono riportate le linee guida consigliate:
Versione di Flink | Connettore usato | Risoluzione |
---|---|---|
1.15 | EFO |
Quando esegui l'aggiornamento ad Amazon Managed Service for Apache Flink versione 1.15, assicurati di utilizzare il connettore più recente. EFO Deve essere una qualsiasi versione 1.15.3 o successiva. Per ulteriori informazioni, consultare: |
1.15 | Lavello Amazon Data Firehose |
Quando esegui l'aggiornamento ad Amazon Managed Service for Apache Flink versione 1.15, assicurati di utilizzare l'Amazon Data Firehose Sink più recente. |
1.15 | Connettori Kafka |
Quando esegui l'aggiornamento ad Amazon Managed Service for Apache Flink versione 1.15, assicurati di utilizzare il connettore Kafka più recente. APIs Apache Flink è obsoleto e. FlinkKafkaConsumerFlinkKafkaProducer |
1.6 - 1.13 | Firehose |
L'applicazione dipende da una versione obsoleta del connettore Firehose che non riconosce le regioni più recenti. AWS Ricostruisci l'archivio delle applicazioni con il connettore Firehose versione 2.1.0. |
1.8 | Kinesis |
L'applicazione dipende da una versione obsoleta del connettore Flink Kinesis che non riconosce le regioni più recenti. AWS Ricostruisci l'archivio dell'applicazione con il connettore Flink Kinesis versione 1.6.1. https://github.com/awslabs/amazon-kinesis-connector-flink/tree/1.6.1 |
1.11 | Kinesis |
L'applicazione dipende da una versione obsoleta del connettore Flink Kinesis che non riconosce le regioni più recenti. AWS Ricostruisci l'archivio dell'applicazione con il connettore Flink Kinesis versione 2.4.1. https://github.com/awslabs/amazon-kinesis-connector-flink/tree/2.4.1 |
1.6 e 1.13 | Kinesis |
L'applicazione dipende da una versione obsoleta del connettore Flink Kinesis che non riconosce le regioni più recenti. AWS Sfortunatamente, Flink non rilascia più patch o correzioni di bug per i connettori 1.6/1.13. Ti consigliamo di eseguire l'aggiornamento a Flink 1.15 ricostruendo l'archivio dell'applicazione con Flink 1.15. |