문제 해결
문제 해결 방법은 다음 섹션을 참조하세요.
로깅
EMR Serverless는 Spark 리소스 프로파일을 사용하여 작업 실행을 분할합니다. EMR Serverless는 사용자 프로파일을 사용하여 사용자가 제공한 코드를 실행하는 반면, 시스템 프로필은 Lake Formation 정책을 적용합니다. 사용자 프로파일로 실행된 태스크의 로그에 액세스할 수 있습니다.
Live UI 및 Spark 기록 서버
Live UI 및 Spark 기록 서버에는 사용자 프로파일에서 생성된 모든 Spark 이벤트 및 시스템 드라이버에서 생성된 수정된 이벤트가 있습니다.
실행기 탭에서 사용자 및 시스템 드라이버의 모든 태스크를 볼 수 있습니다. 그러나 로그 링크는 사용자 프로파일에서만 사용할 수 있습니다. 또한 출력 레코드 수와 같은 일부 정보는 Live UI에서 수정됩니다.
Lake Formation 권한이 부족하여 작업 실패
작업 런타임 역할에 액세스 중인 테이블에서 SELECT 및 DESCRIBE를 실행할 권한이 있는지 확인합니다.
RDD 실행이 실패한 작업
EMR Serverless는 현재 Lake Formation 지원 작업에서 탄력적 분산 데이터세트(RDD) 작업을 지원하지 않습니다.
Amazon S3의 데이터 파일에 액세스할 수 없음
Lake Formation에서 데이터 레이크의 위치를 등록했는지 확인합니다.
보안 검증 예외
EMR Serverless에서 보안 검증 오류를 탐지했습니다. AWS Support에 문의하여 지원을 받으세요.
여러 계정에서 AWS Glue Data Catalog 및 테이블 공유
여러 계정에서 데이터베이스와 테이블을 공유하고 Lake Formation을 계속 사용할 수 있습니다. 자세한 내용은 Cross-account data sharing in Lake Formation 및 AWS Lake Formation을 사용하여 AWS Glue Data Catalog 데이터베이스 및 테이블 교차 계정을 공유하려면 어떻게 해야 합니까?
