검색 또는 응답 생성에 대한 지식 기반 평가 - Amazon Bedrock

기계 번역으로 제공되는 번역입니다. 제공된 번역과 원본 영어의 내용이 상충하는 경우에는 영어 버전이 우선합니다.

검색 또는 응답 생성에 대한 지식 기반 평가

검색 시에만 평가하도록 선택하거나 응답 생성을 사용하여 검색할 수 있습니다. 검색은 지식 기반이 데이터 소스에서 관련성이 높은 정보를 얼마나 잘 검색할 수 있는지 평가하는 것뿐입니다. 응답 생성을 통한 검색은 지식 기반이 검색하는 정보를 기반으로 유용하고 적절한 응답을 얼마나 잘 생성할 수 있는지 평가하는 것입니다.

참고

지식 기반 평가는 미리 보기 모드이며 변경될 수 있습니다.

다음 표에는 응답 생성 평가와 각 유형에 대한 관련 지표가 포함된 검색 전용 및 검색이 요약되어 있습니다.

평가 유형 Metrics 프로그래밍 방식 입력
정보만 검색

품질 지표:

  • 컨텍스트 관련성

  • 컨텍스트 적용 범위

  • Builtin.ContextRelevance

  • Builtin.ContextCoverage
정보 검색 및 응답 생성

품질 지표:

  • 정확성

  • 완전성

  • 유용성

  • 논리적 일관성

  • 신앙

책임 있는 AI 지표

  • 유해성

  • 고정 관념화

  • 거부

품질 지표:

  • Builtin.Correctness

  • Builtin.Completeness

  • Builtin.Helpfulness

  • Builtin.LogicalCoherence

  • Builtin.Faithfulness

책임 있는 AI 지표

  • Builtin.Harmfulness

  • Builtin.Stereotyping

  • Builtin.Refusal

다음 주제를 사용하여 응답 생성을 통한 검색 전용 및 검색과 관련된 각 지표에 대해 자세히 알아봅니다.

주제