Apache Flink - Amazon EMR

Terjemahan disediakan oleh mesin penerjemah. Jika konten terjemahan yang diberikan bertentangan dengan versi bahasa Inggris aslinya, utamakan versi bahasa Inggris.

Apache Flink

Apache Flink adalah mesin dataflow streaming yang dapat Anda gunakan untuk menjalankan proses pengaliran waktu nyata pada sumber data throughput tinggi. Flink mendukung semantik waktu acara untuk out-of-order acara, semantik persis sekali, kontrol tekanan balik, dan API yang dioptimalkan untuk menulis aplikasi streaming dan batch.

Selain itu, Flink memiliki konektor untuk sumber data pihak ketiga, seperti berikut:

Amazon EMR mendukung Flink sebagai aplikasi YARN sehingga Anda dapat mengelola sumber daya bersama dengan aplikasi lain dalam sebuah klaster. Flink-on-YARN mengizinkan Anda untuk mengirimkan pekerjaan Flink sementara, atau Anda dapat membuat klaster yang berjalan lama yang menerima beberapa pekerjaan dan mengalokasikan sumber daya sesuai dengan keseluruhan reservasi YARN.

Livy termasuk dalam rilis Amazon EMR versi 5.1.0 dan versi yang lebih tinggi.

catatan

Support untuk FlinkKinesisConsumer kelas ditambahkan di Amazon EMR rilis versi 5.2.1.

Tabel berikut mencantumkan versi Flink yang termasuk dalam rilis terbaru seri Amazon EMR 7.x, bersama dengan komponen yang dipasang Amazon EMR dengan Flink.

Untuk versi komponen yang diinstal dengan Flink dalam rilis ini, lihat Rilis Versi Komponen 7.1.0.

Informasi versi Flink untuk emr-7.1.0
Label Rilis Amazon EMR Versi Flink Komponen Dipasang Dengan Flink

emr-7.1.0

Flink 1.18.1

emrfs, hadoop-client, hadoop-mapred, hadoop-hdfs-datanode, hadoop-hdfs-library, hadoop-hdfs-namenode, hadoop-httpfs-server, hadoop-kms-server, hadoop-yarn-nodemanager, hadoop-yarn-resourcemanager, hadoop-yarn-timeline-server, flink-client, flink-jobmanager-config, hudi, delta

Tabel berikut mencantumkan versi Flink yang termasuk dalam rilis terbaru seri Amazon EMR 6.x, bersama dengan komponen yang dipasang Amazon EMR dengan Flink.

Untuk versi komponen yang diinstal dengan Flink dalam rilis ini, lihat Rilis Versi Komponen 6.15.0.

Informasi versi Flink untuk emr-6.15.0
Label Rilis Amazon EMR Versi Flink Komponen Dipasang Dengan Flink

emr-6.15.0

Flink 1.17.1

emrfs, hadoop-client, hadoop-mapred, hadoop-hdfs-datanode, hadoop-hdfs-library, hadoop-hdfs-namenode, hadoop-httpfs-server, hadoop-kms-server, hadoop-yarn-nodemanager, hadoop-yarn-resourcemanager, hadoop-yarn-timeline-server, flink-client, flink-jobmanager-config, hudi, delta-standalone-connectors

Tabel berikut mencantumkan versi Flink yang termasuk dalam rilis terbaru seri Amazon EMR 5.x, bersama dengan komponen yang dipasang Amazon EMR dengan Flink.

Untuk versi komponen yang diinstal dengan Flink dalam rilis ini, lihat Rilis 5.36.2 Versi Komponen.

Informasi versi Flink untuk emr-5.36.2
Label Rilis Amazon EMR Versi Flink Komponen Dipasang Dengan Flink

emr-5.36.2

Flink 1.14.2

emrfs, hadoop-client, hadoop-mapred, hadoop-hdfs-datanode, hadoop-hdfs-library, hadoop-hdfs-namenode, hadoop-httpfs-server, hadoop-kms-server, hadoop-yarn-nodemanager, hadoop-yarn-resourcemanager, hadoop-yarn-timeline-server, flink-client, flink-jobmanager-config