기계 번역으로 제공되는 번역입니다. 제공된 번역과 원본 영어의 내용이 상충하는 경우에는 영어 버전이 우선합니다.
Ray 지표 수집 설정
Ray 지표를 수집하려면 SageMaker HyperPod Observability 추가 기능을 설치 또는 업데이트하고 Ray 지표를 켭니다. 추가 기능은 Ray 헤드 포드, 작업자 포드 및 KubeRay 연산자에 대한 스크레이프 구성이 있는 수집기를 배포하므로 클러스터당 스크레이프 구성을 수동으로 작성하지 않습니다. 지표는 Amazon Managed Service for Prometheus에 있으며 Amazon Managed Grafana에서 시각화됩니다.
사전 조건
-
HyperPod 클러스터에 설치된 KubeRay 연산자입니다. 자세한 내용은 HyperPod Amazon EKS에 KubeRay 설치 단원을 참조하십시오.
-
버전 1.0.6 이상의 관찰성 추가 기능입니다. 이전 버전이 실행되지만 Ray 지표는 표시되지 않습니다.
Ray 지표 켜기
참고
콘솔에서 빠른 설정 또는 사용자 지정 설정으로 새로 생성된 HyperPod 클러스터에는 기본적으로 Ray 지표가 켜져 있습니다. 다른 방식으로 생성된 클러스터 또는 Ray 지표가 꺼져 있는 클러스터에 대해 다음 단계를 사용합니다.
Ray 지표를 켜려면
-
콘솔에서 HyperPod 클러스터를 연 다음 추가 기능 또는 대시보드 탭에서 관찰성 추가 기능 구성으로 이동합니다.
-
추가 기능을 설치하거나 이미 설치된 경우 업데이트합니다.
-
Ray 지표 확인란이 선택되어 있는지 확인합니다. 기본적으로 선택됩니다.
-
구성을 저장합니다.
중요
관찰성 추가 기능이 이미 설치되어 있는 경우 버전 1.0.6 이상으로 업그레이드한 다음 SageMaker AI 콘솔에서 Grafana 대시보드를 업그레이드합니다. 새 Ray 지표와 대시보드 패널은 추가 기능과 대시보드가 모두 업그레이드될 때까지 표시되지 않습니다.
대시보드를 업그레이드하려면 SageMaker AI 콘솔에서 클러스터를 열고 대시보드 탭을 선택한 다음 HyperPod 관찰성 섹션에서 작업을 선택한 다음 대시보드 업그레이드를 선택합니다. 대화 상자에서 업그레이드를 확인합니다. 업그레이드하면 Ray Core, Ray Data, Ray Train 및 Ray Serve 대시보드를 덮어쓰므로 사용자 지정을 먼저 복사합니다.
일반적인 추가 기능 설정 및 콘솔 단계는 관찰성 및 섹션을 참조하세요Amazon EKS에 의해 오케스트레이션된 Amazon SageMaker HyperPod 클러스터에 대한 관찰성.
확인
추가 기능이 Ray 포드를 스크레이프 대상으로 보고하는지 확인한 다음 Grafana를 열고 Ray 대시보드에 실행 중인 클러스터에 대한 데이터가 표시되는지 확인합니다. 대시보드가 비어 있는 경우 먼저 추가 기능이 버전 1.0.6 이상인지 확인합니다.
