Amazon Chime SDK で背景フィルタをクライアントアプリケーションに統合する

このセクションでは、背景ぼかし 2.0 と背景置換 2.0 を使用して動画の背景をプログラムでフィルタリングする方法について説明します。動画ストリームに背景フィルタを追加するには、VideoFxConfig オブジェクトを含む VideoFxProcessor を作成します。次に、そのプロセッサを VideoTransformDevice に挿入します。

背景フィルタプロセッサでは、TensorFlow Lite 機械学習モデル、JavaScript ウェブワーカー、WebAssembly を使用し、動画ストリームで各フレームの背景にフィルタを適用します。これらのアセットは、VideoFxProcessor を作成すると実行時にダウンロードされます。

GitHub のブラウザデモアプリケーションでは、新しい背景ぼかしフィルタと置換フィルタが使用されています。これらを試すには、npm run start でデモを起動して、会議に参加し、カメラをクリックして動画を有効にします。[フィルタを適用] メニュー ( ) を開き、[背景ぼかし 2.0] または [背景置換 2.0] オプションのいずれかを選択します。