

Die vorliegende Übersetzung wurde maschinell erstellt. Im Falle eines Konflikts oder eines Widerspruchs zwischen dieser übersetzten Fassung und der englischen Fassung (einschließlich infolge von Verzögerungen bei der Übersetzung) ist die englische Fassung maßgeblich.

# Textzusammenfassung für die Modellbewertung in Amazon Bedrock
<a name="model-evaluation-tasks-text-summary"></a>

Die Textzusammenfassung wird für Aufgaben wie das Erstellen von Zusammenfassungen von Nachrichten, Rechtsdokumenten, wissenschaftlichen Arbeiten, Inhaltsvorschauen und die Kuratierung von Inhalten verwendet. Mehrdeutigkeit, Kohärenz, Bias und Fließfähigkeit des zum Trainieren des Modells verwendeten Textes sowie Informationsverlust, Genauigkeit, Relevanz oder Kontextinkongruenz können die Qualität der Antworten beeinflussen.

**Wichtig**  
Bei der Textzusammenfassung besteht ein bekanntes Systemproblem, das verhindert, dass Cohere-Modelle eine erfolgreiche Toxizitätsbewertung abschließen.

Die folgenden integrierten Datensätze werden für den Aufgabentyp Textzusammenfassung empfohlen.

**Gigaword**  
Der Gigaword-Datensatz besteht aus Schlagzeilen von Nachrichtenartikeln. Dieser Datensatz wird für Textzusammenfassungsaufgaben verwendet.

Die folgende Tabelle fasst die berechneten Metriken und die empfohlenen integrierten Datensätze zusammen. Damit Sie die verfügbaren integrierten Datensätze mithilfe der AWS CLI oder eines unterstützten AWS SDK erfolgreich spezifizieren können, verwenden Sie die Parameternamen in der Spalte *Integrierte Datensätze (API)*.


**Verfügbare integrierte Datensätze für die Textzusammenfassung in Amazon Bedrock**  


- **Textzusammenfassung**
  - **Metrik:** Accuracy  / **Integrierte Datensätze (Konsole):** [Gigaword](https://huggingface.co/datasets/gigaword?row=3) / **Integrierte Datensätze (API):** Builtin.Gigaword / **Berechnete Metrik:** BERTScore
  - **Metrik:** Toxizität / **Integrierte Datensätze (Konsole):** [Gigaword](https://huggingface.co/datasets/gigaword?row=3) / **Integrierte Datensätze (API):** Builtin.Gigaword / **Berechnete Metrik:** Toxizität 
  - **Metrik:**  Robustheit  / **Integrierte Datensätze (Konsole):** [Gigaword](https://huggingface.co/datasets/gigaword?row=3) / **Integrierte Datensätze (API):** Builtin.Gigaword / **Berechnete Metrik:** BERTScore und deltaBERTScore



Weitere Informationen darüber, wie die berechnete Metrik für jeden integrierten Datensatz berechnet wird, finden Sie unter [Überprüfen der Berichte zu Modellbewertungsaufträgen und Metriken in Amazon Bedrock](model-evaluation-report.md).