Évaluation de l'extraction ou de la génération de réponses dans la base de connaissances - Amazon Bedrock

Les traductions sont fournies par des outils de traduction automatique. En cas de conflit entre le contenu d'une traduction et celui de la version originale en anglais, la version anglaise prévaudra.

Évaluation de l'extraction ou de la génération de réponses dans la base de connaissances

Vous pouvez choisir d'évaluer uniquement lors de la récupération ou d'une extraction avec génération de réponses. La récupération consiste uniquement à évaluer dans quelle mesure votre base de connaissances peut extraire des informations très pertinentes de vos sources de données. La récupération avec génération de réponses consiste à évaluer dans quelle mesure votre base de connaissances peut générer des réponses utiles et appropriées en fonction des informations qu'elle extrait.

Note

L'évaluation de la base de connaissances est en mode aperçu et est sujette à modification.

Le tableau suivant résume uniquement l'extraction et l'extraction avec les évaluations de génération de réponses, ainsi que les mesures pertinentes pour chaque type.

Type d'évaluation Métriques Entrée programmatique
Récupérez uniquement les informations

Indicateurs de qualité :

  • Pertinence du contexte

  • Couverture du contexte

  • Builtin.ContextRelevance

  • Builtin.ContextCoverage

Récupérez des informations et générez des réponses

Indicateurs de qualité :

  • Exactitude

  • Intégralité

  • Utilité

  • Cohérence logique

  • Fidélité

Métriques responsables en matière d'IA

  • Nocivité

  • Stéréotypes

  • Refus

Indicateurs de qualité :

  • Builtin.Correctness

  • Builtin.Completeness

  • Builtin.Helpfulness

  • Builtin.LogicalCoherence

  • Builtin.Faithfulness

Métriques responsables en matière d'IA

  • Builtin.Harmfulness

  • Builtin.Stereotyping

  • Builtin.Refusal

Consultez les rubriques suivantes pour en savoir plus sur chaque métrique liée à la récupération uniquement et à la récupération avec génération de réponses