Managen Sie ein Arbeitsteam für menschliche Bewertungen von Modellen in Amazon Bedrock - Amazon Bedrock

Die vorliegende Übersetzung wurde maschinell erstellt. Im Falle eines Konflikts oder eines Widerspruchs zwischen dieser übersetzten Fassung und der englischen Fassung (einschließlich infolge von Verzögerungen bei der Übersetzung) ist die englische Fassung maßgeblich.

Managen Sie ein Arbeitsteam für menschliche Bewertungen von Modellen in Amazon Bedrock

Für Bewertungsjobs, bei denen menschliche Mitarbeiter eingesetzt werden, benötigen Sie ein Arbeitsteam. Ein Arbeitsteam ist eine Gruppe von Arbeitnehmern, die Sie auswählen. Dabei kann es sich um Mitarbeiter Ihres Unternehmens oder eine Gruppe von Experten aus Ihrer Branche handeln.

Benachrichtigungen für Mitarbeiter in Amazon Bedrock
  • Wenn Sie einen Bewertungsjob in Amazon Bedrock erstellen, werden Mitarbeiter nur dann über ihren zugewiesenen Job informiert, wenn Sie sie zum ersten Mal zu einem Arbeitsteam hinzufügen.

  • Wenn Sie während der Erstellung eines Bewertungsauftrags einen Mitarbeiter aus einem Arbeitsteam löschen, verliert er auch den Zugriff auf alle Bewertungsjobs, denen er zugewiesen wurde.

  • Bei allen neuen Bewertungsaufträgen, die Sie einem vorhandenen menschlichen Mitarbeiter zuweisen, müssen Sie ihn direkt benachrichtigen und ihn im Mitarbeiterportal URL zur Verfügung stellen. Mitarbeiter müssen ihre zuvor erstellten Anmeldeinformationen für das Mitarbeiterportal verwenden. Dieses Mitarbeiterportal ist für alle Bewertungsjobs in Ihrem AWS Konto pro Region identisch

Sie können ein menschliches Arbeitsteam zusammenstellen oder ein bestehendes verwalten und gleichzeitig einen Evaluierungsjob einrichten, bis hin zu einer privaten Belegschaft, die von Amazon SageMaker Ground Truth verwaltet wird. Amazon SageMaker Ground Truth unterstützt erweiterte Funktionen für das Personalmanagement. Weitere Informationen zur Verwaltung Ihrer Belegschaft in Amazon SageMaker Ground Truth finden Sie unter Belegschaften erstellen und verwalten.

Sie können Mitarbeiter aus einem Arbeitsteam löschen, während Sie einen neuen Bewertungsjob einrichten. Andernfalls müssen Sie entweder die Amazon Cognito-Konsole oder die Amazon SageMaker Ground Truth Konsole verwenden, um Arbeitsteams zu verwalten, die Sie in Amazon Bedrock erstellt haben.

Wenn der IAM Benutzer, die Gruppe oder die Rolle über die erforderlichen Berechtigungen verfügt, werden vorhandene private Belegschaften und Arbeitsteams, die Sie in Amazon Cognito, Amazon SageMaker Ground Truth oder Amazon Augmented AI erstellt haben, sichtbar angezeigt, wenn Sie einen Bewertungsauftrag erstellen, für den menschliche Mitarbeiter eingesetzt werden.

Amazon Bedrock unterstützt maximal 50 Mitarbeiter pro Arbeitsteam.

Im Feld E-Mail-Adressen können Sie bis zu 50 E-Mail-Adressen eingeben. Verwenden Sie die Amazon Cognito Cognito-Konsole oder die Ground Truth Truth-Konsole, um Ihrem Bewertungsjob weitere Mitarbeiter hinzuzufügen. Die Adressen müssen durch ein Komma voneinander getrennt werden. Sie sollten Ihre eigene E-Mail-Adresse hinzufügen, damit Sie Teil der Belegschaft sind und Einsicht in die Kennzeichnungsaufträge haben.

Erstellen Sie Anweisungen für menschliche Mitarbeiter

Durch Erstellen guter Anweisungen für Aufträge zur Modellbewertung wird die Genauigkeit Ihrer Arbeitnehmer bei der Ausführung ihrer Aufgabe verbessert. Sie können die Standardanweisungen ändern, die in der Konsole angezeigt werden, wenn Sie einen Auftrag zur Modellbewertung erstellen. Die Anweisungen werden dem Auftragnehmer auf der Seite angezeigt, auf der er seine Labeling-Aufgabe durchführt.

Sie können Anweisungen an zwei Stellen bereitstellen, um Mitarbeitern bei der Erledigung der ihnen zugewiesenen Aufgaben zu helfen.

Geben Sie für jede Auswertungs- und Bewertungsmethode eine aussagekräftige Beschreibung ein.

Die Beschreibungen sollten eine kurze Erläuterung der ausgewählten Metriken enthalten. In der Beschreibung sollte die Metrik näher erläutert und deutlich gemacht werden, wie Arbeitnehmer die gewählte Bewertungsmethode auswerten sollen.

Bereitstellen allgemeiner Auswertungsanweisungen für Ihre Mitarbeiter

Diese Anweisungen werden auf derselben Webseite angezeigt, auf der Arbeitnehmer eine Aufgabe durchführen. Sie können diesen Bereich verwenden, um allgemeine Anweisungen für den Auftrag zur Modellbewertung vorzugeben und die Ground-Truth-Antworten zu beschreiben, sofern Sie sie in Ihren Prompt-Datensatz aufgenommen haben.