Apache Flink

Fokusmodus

Apache Flink - Amazon EMR

Die vorliegende Übersetzung wurde maschinell erstellt. Im Falle eines Konflikts oder eines Widerspruchs zwischen dieser übersetzten Fassung und der englischen Fassung (einschließlich infolge von Verzögerungen bei der Übersetzung) ist die englische Fassung maßgeblich.

Apache Flink ist eine Streaming-Datenfluss-Engine, die mittels Datenquellen mit hohem Durchsatz die Echtzeitverarbeitung von Streams ermöglicht. Flink unterstützt Ereigniszeitsemantik für out-of-order Ereignisse, Exactly-Once-Semantik und Gegendruckkontrolle und ist für das Schreiben von Streaming- und APIs Batch-Anwendungen optimiert.

Außerdem verfügt Flink über Konnektoren für Datenquellen von Drittanbieter, wie z. B. die folgenden:

Amazon EMR unterstützt Flink als YARN-Anwendung, sodass Sie Ressourcen zusammen mit anderen Anwendungen innerhalb eines Clusters verwalten können. Flink-on-YARNermöglicht es Ihnen, vorübergehende Flink-Jobs einzureichen, oder Sie können einen Cluster mit langer Laufzeit erstellen, der mehrere Jobs akzeptiert und Ressourcen entsprechend der gesamten YARN-Reservierung zuweist.

Flink ist in Amazon EMR Version 5.1.0 und höher enthalten.

Anmerkung

Support für die FlinkKinesisConsumer-Klasse wurde mit Amazon-EMR-Version 5.2.1 bereitgestellt.

Die folgende Tabelle listet die Version von Flink auf, die in der neuesten Version der Amazon-EMR-7.x-Serie enthalten ist, zusammen mit den Komponenten, die Amazon EMR mit Flink installiert.

Die Version der Komponenten, die in dieser Version mit Flink installiert wurden, finden Sie unter Komponentenversionen von Version 7.8.0.

Flink-Versionsinformationen für emr-7.8.0
Amazon-EMR-Versionsbezeichnung	Flink-Version	Mit Flink installierte Komponenten
emr-7.8.0	Flink 1.20.0	emrfs, hadoop-client, hadoop-mapred, hadoop-hdfs-datanode, hadoop-hdfs-library, hadoop-hdfs-namenode, hadoop-httpfs-server, hadoop-kms-server, hadoop-yarn-nodemanager, hadoop-yarn-resourcemanager, hadoop-yarn-timeline-server, flink-client, flink-jobmanager-config, hudi, delta

Die folgende Tabelle listet die Version von Flink auf, die in der neuesten Version der Amazon-EMR-6.x-Serie enthalten ist, zusammen mit den Komponenten, die Amazon EMR mit Flink installiert.

Die Version der Komponenten, die mit Flink in dieser Version installiert wurden, finden Sie unter Komponentenversionen der Version 6.15.0.

Flink-Versionsinformationen für emr-6.15.0
Amazon-EMR-Versionsbezeichnung	Flink-Version	Mit Flink installierte Komponenten
emr-6.15.0	Flink 1.17.1	emrfs, hadoop-client, hadoop-mapred, hadoop-hdfs-datanode, hadoop-hdfs-library, hadoop-hdfs-namenode, hadoop-httpfs-server, hadoop-kms-server, hadoop-yarn-nodemanager, hadoop-yarn-resourcemanager, hadoop-yarn-timeline-server, flink-client, flink-jobmanager-config, hudi, delta-standalone-connectors

Die folgende Tabelle listet die Version von Flink auf, die in der neuesten Version der Amazon-EMR-5.x-Serie enthalten ist, zusammen mit den Komponenten, die Amazon EMR mit Flink installiert.

Informationen zur Version der Komponenten, die in dieser Version mit Flink installiert wurden, finden Sie unter Komponentenversionen von Version 5.36.2.

Flink-Versionsinformationen für emr-5.36.2
Amazon-EMR-Versionsbezeichnung	Flink-Version	Mit Flink installierte Komponenten
emr-5.36.2	Flink 1.14.2	emrfs, hadoop-client, hadoop-mapred, hadoop-hdfs-datanode, hadoop-hdfs-library, hadoop-hdfs-namenode, hadoop-httpfs-server, hadoop-kms-server, hadoop-yarn-nodemanager, hadoop-yarn-resourcemanager, hadoop-yarn-timeline-server, flink-client, flink-jobmanager-config