View a markdown version of this page

AWS PCS에서 클러스터의 스케줄러 버전 업데이트 - AWS PCS
개요제한 사항버전 호환성실행 중인 작업에 미치는 영향버전 업데이트와 구성 변경 사항 결합

기계 번역으로 제공되는 번역입니다. 제공된 번역과 원본 영어의 내용이 상충하는 경우에는 영어 버전이 우선합니다.

AWS PCS에서 클러스터의 스케줄러 버전 업데이트

AWS PCS를 사용하면 인프라를 재구축하지 않고도 기존 클러스터에서 스케줄러 버전을 업데이트할 수 있습니다. 버전 업데이트는 클러스터 컨트롤러를 최신 Slurm 메이저 버전으로 이동하여 새로운 기능, 성능 개선 및 보안 패치에 액세스할 수 있도록 합니다. 또한 최신 버전은 수명이 다하기 전에 지원 수명이 더 깁니다.

개요

스케줄러 버전 업데이트에는 다음 세 가지 작업이 포함됩니다.

  1. 대상 AMIs- 대상 Slurm 버전과 최신 AWS PCS 에이전트가 포함된 AMIs를 빌드하거나 식별합니다.

  2. 클러스터 업데이트(UpdateCluster) - 컨트롤러를 대상 Slurm 메이저 버전으로 이동합니다.

  3. 컴퓨팅 노드 그룹 업데이트(UpdateComputeNodeGroup) - 새 노드가 대상 버전을 사용하도록 각 컴퓨팅 노드 그룹을 새 AMI로 가리킵니다. 자세한 내용은 AWS PCS 컴퓨팅 노드 그룹 업데이트 단원을 참조하십시오.

두 가지 경로를 따를 수 있습니다. 작업 중단을 허용할 수 있는지 여부와 이중 버전 AMI(현재 및 대상 Slurm 버전 모두 포함)를 사용할지 여부에 따라를 선택합니다.

선택한 옵션에 관계없이 프로세스가 시작되기 전에 클러스터의 모든 노드는 동일한 버전 "A"를 실행해야 하며, 프로세스가 끝나면 모든 노드는 동일한 버전 "B"를 실행해야 합니다. 옵션 2는 클러스터 구성에 관계없이 작동합니다.

옵션 1: 롤링 업데이트 옵션 2: 전체 플릿 휴지통
작업 실행 작업 종료가 필요하지 않음 실행 중인 모든 작업이 종료됨
AMI 요구 사항 현재 및 대상 Slurm 버전을 모두 포함해야 합니다. 대상 Slurm 버전만 필요
최소 클러스터 컨트롤러 버전 24.05 제한 없음
컨트롤러 업데이트 후 컴퓨팅 플릿 혼합 버전 임시, 드레이닝 단계 필요. 클러스터에서 혼합 버전이 사용되는 시간을 최소화하는 것이 좋습니다. 모든 노드가 대상 버전에서 새로 시작
참고

시작하기 전에 모든 컴퓨팅 노드가 Slurm 버전 A의 최신 패치와 최신 AWS PCS 에이전트에 있는지 확인합니다.

제한 사항

다음 구성에는 추가 단계가 필요하거나 옵션 1(롤링 업데이트)과 호환되지 않습니다. 참고된 해결 방법이 없으면 옵션 2(풀 플릿 휴지통)를 대신 사용해야 합니다.

  • 스팬크 플러그인 - 클러스터가 스팬크 플러그인(플러그스택 구성)을 사용하는 경우 옵션 1이 지원되지 않습니다. 롤링 업데이트로 인해 플러그 스택 구성 버전 불일치 및 플러그인 장애가 발생할 수 있습니다.

  • CLI 필터 플러그인 25.11로 업데이트 - 클러스터가 CLI 필터 플러그인을 사용하고 버전 25.11로 업데이트하는 경우 옵션 1(롤링 업데이트)을 사용하려면 업데이트 중에 클러스터의 Slurm 설정에서를 CliFilterParameters 명시적으로 설정해야 합니다. 를 사용하지 않으면 컨트롤러 업데이트 후 이전 버전을 실행하는 CliFilterParameters노드가 CLI 필터 스크립트 경로를 확인할 수 없어 sbatch 오류가 발생합니다. 자세한 내용은 Slurm CLI 필터 플러그인을 사용하여 AWS PCS에서 작업 제출 사용자 지정 단원을 참조하십시오.

버전 호환성

다음 표에는 현재 클러스터 버전에 따라 업데이트할 수 있는 대상 버전이 나와 있습니다. 항상 허용되는 최신 버전(굵게 표시됨)으로 업그레이드하는 것이 좋습니다.

클러스터와 모든 컴퓨팅 노드는 업데이트를 시작하기 전에 항상 동일한 Slurm 버전을 실행해야 합니다.

현재 클러스터 버전 호환되는 대상 버전
25.11 해당 사항 없음
25.05 25.11
24.11(EOL) 25.11, 25.05
24.05(EOL) 25.11, 25.05, 24.11
23.11(EOL) (옵션 2를 통해서만) 25.05, 24.11, 24.05

지원되는 버전 및 end-of-life 날짜에 대한 자세한 내용은 섹션을 참조하세요AWS PCS의 Slurm 버전.

단일 업데이트에서는 세 가지 메이저 버전을 건너뛸 수 없습니다. 대상 버전이 현재 버전보다 3개 이상 앞선 메이저 버전인 경우 연속으로 여러 단계로 업데이트를 수행합니다. 다단계 예제는 섹션을 참조하세요예: 여러 버전에서 업데이트.

실행 중인 작업에 미치는 영향

업데이트 중에 Slurm 컨트롤러를 잠시 사용할 수 없습니다. 이렇게 하면 다음과 같은 효과가 발생합니다.

  • 작업 실행 - 옵션 1(롤링 업데이트)의 경우 컴퓨팅 노드에서 이미 실행 중인 작업은 계속 실행됩니다. 컴퓨팅 노드는 활성 작업 실행에 컨트롤러를 사용할 필요가 없습니다. 옵션 2(풀 플릿 휴지통)의 경우 플릿이 축소되면 실행 중인 모든 작업이 종료됩니다.

  • 새 작업 제출 - 컨트롤러를 사용할 수 없는 동안에는 새 작업을 제출하거나 스케줄러 명령을 실행할 수 없습니다.

  • 조정 - 업데이트 중에 자동 조정이 일시 중지됩니다. 새 인스턴스가 시작되지 않으며 업데이트가 완료될 때까지 축소를 위해 인스턴스가 종료되지 않습니다.

  • 회계 데이터 - 회계가 활성화된 경우 업데이트 전반에 걸쳐 회계 데이터가 보존됩니다. 회계 데이터베이스에 저장된 작업 레코드는 버전 변경 후에도 유지됩니다.

  • Slurm REST API - 클러스터에서 Slurm REST API가 활성화된 경우 UpdateCluster 작업의 일부로 새 스케줄러 버전으로 자동 업데이트됩니다. 업데이트 중에는 REST API 엔드포인트를 사용할 수 없으며 클러스터가 ACTIVE 상태로 돌아가면 재개됩니다. 자세한 내용은 AWS PCS의 Slurm REST API 단원을 참조하십시오.

버전 업데이트와 구성 변경 사항 결합

단일 UpdateCluster 요청으로 버전 업데이트를 다른 구성 변경 사항과 결합할 수 있습니다. 예를 들어 스케줄러 버전을 업데이트하고 동일한 작업에서 회계를 활성화할 수 있습니다.

참고

플릿에 이전 버전의 노드가 여전히 포함되어 있는 동안에는 대상 버전에 고유한 Slurm 설정을 추가하지 마십시오. 구성은 모든 노드에 배포되며, 이전 노드는 새 파라미터를 인식하지 못할 slurmd 수 있습니다.

주제