変更可能な Flink 設定プロパティ - Managed Service for Apache Flink

Amazon Managed Service for Apache Flink は、以前は Amazon Kinesis Data Analytics for Apache Flink と呼ばれていました。

翻訳は機械翻訳により提供されています。提供された翻訳内容と英語版の間で齟齬、不一致または矛盾がある場合、英語版が優先します。

変更可能な Flink 設定プロパティ

サポートケース を使用して変更できる Flink 設定は次のとおりです。アプリケーションプレフィックスを指定することで、1 以上のプロパティを一度に変更できます。また、複数のアプリケーションを同時に変更できます。このリスト以外に変更する Flink 設定プロパティがある場合は、ケースに正確なプロパティを指定します。

再起動戦略

Flink 1.19 以降では、デフォルトでexponential-delay再起動戦略を使用します。以前のバージョンはすべて、デフォルトでfixed-delay再起動戦略を使用します。

restart-strategy:

restart-strategy.fixed-delay.delay:

restart-strategy.exponential-delay.backoff-muliplier:

restart-strategy.exponential-delay.initial-backoff:

restart-strategy.exponential-delay.jitter-factor:

restart-strategy.exponential-delay.reset-backoff-threshold:

チェックポイントと状態のバックエンド

state.backend:

state.backend.fs.memory-threshold:

state.backend.incremental:

Checkpointing

execution.checkpointing.unaligned:

execution.checkpointing.interval-during-backlog:

RocksDB ネイティブメトリクス

RocksDB ネイティブメトリクスは に配送されません CloudWatch。有効にすると、これらのメトリクスには Flink ダッシュボードまたはカスタムツールRESTAPIを使用した Flink からアクセスできます。

Managed Service for Apache Flink を使用すると、 を使用して、読み取り専用モードで最新の Flink REST API (または使用しているサポートされているバージョン) CreateApplicationPresignedUrl にアクセスできますAPI。API これは Flink 独自のダッシュボードで使用されますが、カスタムモニタリングツールでも使用できます。

state.backend.rocksdb.compaction.style:

state.backend.rocksdb.memory.partitioned-index-filters:

state.backend.rocksdb.metrics.actual-delayed-write-rate:

state.backend.rocksdb.metrics.background-errors:

state.backend.rocksdb.metrics.block-cache-capacity:

state.backend.rocksdb.metrics.block-cache-pinned-usage:

state.backend.rocksdb.metrics.block-cache-usage:

state.backend.rocksdb.metrics.column-family-as-variable:

state.backend.rocksdb.metrics.compaction-pending:

state.backend.rocksdb.metrics.cur-size-active-mem-table:

state.backend.rocksdb.metrics.cur-size-all-mem-tables:

state.backend.rocksdb.metrics.estimate-live-data-size:

state.backend.rocksdb.metrics.estimate-num-keys:

state.backend.rocksdb.metrics.estimate-pending-compaction-bytes:

state.backend.rocksdb.metrics.estimate-table-readers-mem:

state.backend.rocksdb.metrics.is-write-stopped:

state.backend.rocksdb.metrics.mem-table-flush-pending:

state.backend.rocksdb.metrics.num-deletes-active-mem-table:

state.backend.rocksdb.metrics.num-deletes-imm-mem-tables:

state.backend.rocksdb.metrics.num-entries-active-mem-table:

state.backend.rocksdb.metrics.num-entries-imm-mem-tables:

state.backend.rocksdb.metrics.num-immutable-mem-table:

state.backend.rocksdb.metrics.num-live-versions:

state.backend.rocksdb.metrics.num-running-compactions:

state.backend.rocksdb.metrics.num-running-flushes:

state.backend.rocksdb.metrics.num-snapshots:

state.backend.rocksdb.metrics.size-all-mem-tables:

state.backend.rocksdb.thread.num:

アドバンストステートのバックエンドオプション

state.storage.fs.memory-threshold:

フル TaskManager オプション

task.cancellation.timeout:

taskmanager.jvm-exit-on-oom:

taskmanager.numberOfTaskSlots:

taskmanager.slot.timeout:

taskmanager.network.memory.fraction:

taskmanager.network.memory.max:

taskmanager.network.request-backoff.initial:

taskmanager.network.request-backoff.max:

taskmanager.network.memory.buffer-debloat.enabled:

taskmanager.network.memory.buffer-debloat.period:

taskmanager.network.memory.buffer-debloat.samples:

taskmanager.network.memory.buffer-debloat.threshold-percentages:

メモリ設定

taskmanager.memory.jvm-metaspace.size:

taskmanager.memory.jvm-overhead.fraction:

taskmanager.memory.jvm-overhead.max:

taskmanager.memory.managed.consumer-weights:

taskmanager.memory.managed.fraction:

taskmanager.memory.network.fraction:

taskmanager.memory.network.max:

taskmanager.memory.segment-size:

taskmanager.memory.task.off-heap.size:

RPC / アクカ

akka.ask.timeout:

akka.client.timeout:

akka.framesize:

akka.lookup.timeout:

akka.tcp.timeout:

クライアント

client.timeout:

高度なクラスターオプション

cluster.intercept-user-system-exit:

cluster.processes.halt-on-fatal-error:

ファイルシステム設定

fs.s3.connection.maximum:

fs.s3a.connection.maximum:

fs.s3a.threads.max:

s3.upload.max.concurrent.uploads:

高度な耐障害性オプション

heartbeat.timeout:

jobmanager.execution.failover-strategy:

メモリ設定

jobmanager.memory.heap.size:

メトリクス

metrics.latency.interval:

REST エンドポイントとクライアントの高度なオプション

rest.flamegraph.enabled:

rest.server.numThreads:

高度なSSLセキュリティオプション

security.ssl.internal.handshake-timeout:

高度なスケジューリングオプション

slot.request.timeout:

Flink ウェブ UI の詳細オプション

web.timeout: