View a markdown version of this page

Ray メトリクスコレクションのセットアップ - Amazon SageMaker AI

翻訳は機械翻訳により提供されています。提供された翻訳内容と英語版の間で齟齬、不一致または矛盾がある場合、英語版が優先します。

Ray メトリクスコレクションのセットアップ

Ray メトリクスを収集するには、SageMaker HyperPod Observability アドオンをインストールまたは更新し、Ray メトリクスをオンにします。アドオンは、Ray ヘッドポッド、ワーカーポッド、KubeRay 演算子のスクレイプ設定を持つコレクターをデプロイするため、クラスターごとにスクレイプ設定を手動で作成しません。メトリクスは Amazon Managed Service for Prometheus にあり、Amazon Managed Grafana で視覚化されます。

前提条件

  • HyperPod クラスターにインストールされている KubeRay 演算子。詳細については、「HyperPod Amazon EKS への KubeRay のインストール」を参照してください。

  • バージョン 1.0.6 以降のオブザーバビリティアドオン。以前のバージョンは実行されますが、Ray メトリクスは表示されません。

Ray メトリクスを有効にする

注記

コンソールでクイックセットアップまたはカスタムセットアップを使用して新しく作成された HyperPod クラスターでは、Ray メトリクスがデフォルトでオンになっています。別の方法で作成されたクラスター、または Ray メトリクスがオフになっているクラスターの場合は、次の手順を使用します。

Ray メトリクスを有効にするには
  1. コンソールで HyperPod クラスターを開き、アドオンまたはダッシュボードタブのオブザーバビリティアドオン設定に移動します。

  2. アドオンをインストールするか、既にインストールされている場合は更新します。

  3. Ray メトリクスチェックボックスが選択されていることを確認します。デフォルトでは選択されています。

  4. 設定を保存します。

重要

Observability アドオンが既にインストールされている場合は、バージョン 1.0.6 以降にアップグレードしてから、SageMaker AI コンソールから Grafana ダッシュボードをアップグレードします。新しい Ray メトリクスとダッシュボードパネルは、アドオンとダッシュボードの両方がアップグレードされるまで表示されません。

ダッシュボードをアップグレードするには、SageMaker AI コンソールでクラスターを開き、ダッシュボードタブを選択し、HyperPod Observability セクションでアクションを選択し、ダッシュボードをアップグレードします。ダイアログでアップグレードを確認します。アップグレードすると、Ray Core、Ray Data、Ray Train、Ray Serve ダッシュボードが上書きされるため、最初にカスタマイズをコピーします。

SageMaker AI コンソールのアップグレードダッシュボードダイアログには、アップグレードする Ray Core、Ray Data、Ray Train、Ray Serve ダッシュボードが一覧表示されます。

一般的なアドオンのセットアップとコンソールの手順については、オブザーバビリティ「」および「」を参照してくださいAmazon EKS がオーケストレーションした Amazon SageMaker HyperPod クラスターのオブザーバビリティ。

検証

アドオンが Ray ポッドをスクレイプターゲットとして報告し、Grafana を開き、実行中のクラスターのデータが Ray ダッシュボードに表示されることを確認します。ダッシュボードが空の場合は、まずアドオンがバージョン 1.0.6 以降であることを確認します。