Die vorliegende Übersetzung wurde maschinell erstellt. Im Falle eines Konflikts oder eines Widerspruchs zwischen dieser übersetzten Fassung und der englischen Fassung (einschließlich infolge von Verzögerungen bei der Übersetzung) ist die englische Fassung maßgeblich.
Erste Schritte mit Modellbewertungen
Sie können einen automatischen Auftrag zur Modellbewertung oder einen Auftrag zur Modellbewertung mit menschlichen Mitarbeitern erstellen. Wenn Sie einen Modellevaluierungsjob erstellen, können Sie das verwendete Modell, die Inferenzparameter des Modells, die Art der Aufgabe, die das Modell auszuführen versucht, und die im Job verwendeten Prompt-Daten definieren.
Aufträge zur Modellbewertung unterstützen die folgenden Aufgabentypen.
-
Allgemeine Textgenerierung: Die Erzeugung natürlicher menschlicher Sprache als Reaktion auf Textanfragen.
-
Textzusammenfassung: Die Generierung einer Zusammenfassung auf der Grundlage des in Ihrer Aufforderung bereitgestellten Textes.
-
Frage und Antwort: Die Generierung einer Antwort auf eine Frage in Ihrer Aufforderung.
-
Klassifizierung: Richtiges Zuweisen einer Kategorie, z. B. einer Bezeichnung oder einer Punktzahl, zu einem Text auf der Grundlage seines Inhalts.
-
Benutzerdefiniert Sie definieren die Metrik, die Beschreibung und eine Bewertungsmethode
Sie benötigen Zugriff auf Amazon-Bedrock-Modelle, um einen Auftrag zur Modellbewertung zu erstellen. Unterstützung von Modellevaluierungsjobs mithilfe von Amazon Bedrock Foundation-Modellen. Weitere Informationen zu Modellen finden Sie unter Zugriff auf Amazon Bedrock Foundation-Modelle verwalten.
Die Verfahren in den folgenden Themen zeigen Ihnen, wie Sie einen Auftrag zur Modellbewertung mit der Amazon-Bedrock-Konsole einrichten.
Um mithilfe eines von einem Team AWS verwalteten Teams einen Modellevaluierungsauftrag zu erstellen, wählen Sie AWS Verwaltete Bewertung erstellen aus der. AWS Management Console Füllen Sie dann das Anforderungsformular mit Einzelheiten zu Ihren Anforderungen für die Aufträge zur Modelbewertung aus. Ein Mitarbeiter von AWS wird sich dann mit Ihnen in Verbindung setzen.