View a markdown version of this page

Überwachen Sie KI-Programmieragenten mit Amazon CloudWatch Coding Agent Insights - Amazon CloudWatch

Die vorliegende Übersetzung wurde maschinell erstellt. Im Falle eines Konflikts oder eines Widerspruchs zwischen dieser übersetzten Fassung und der englischen Fassung (einschließlich infolge von Verzögerungen bei der Übersetzung) ist die englische Fassung maßgeblich.

Überwachen Sie KI-Programmieragenten mit Amazon CloudWatch Coding Agent Insights

KI-Codierungsagenten wie OpenAI Codex, Claude Code und GitHub Copilot senden OpenTelemetry (OTel) Telemetrie darüber aus, wie Ihre Entwickler sie verwenden — Token-Verbrauch, Latenz pro Spielzug, Tool-Aufrufe, API-Anfragen und Genehmigungen. Wenn Sie diese Telemetrie an Amazon senden, können Sie die Akzeptanz überwachen CloudWatch, Nutzung und Kosten Teams und Abteilungen zuordnen und Leistungs- oder Zuverlässigkeitsprobleme in Ihrer gesamten Entwicklerflotte erkennen.

CloudWatch bietet Coding Agent Insights, eine Reihe gebrauchsfertiger Dashboards in der Konsole unter GenAI Observability, Coding Agent Insights. Mit den Dashboards können Sie die Nutzung anhand organisatorischer Merkmale wie Organisation, Abteilung, Team, Kostenstelle und Benutzer aufteilen, sodass Sie Akzeptanz und Kosten in Ihrer gesamten Flotte vergleichen können. Sie können die zugrunde liegenden Daten auch als CSV zur weiteren Analyse exportieren. Sie erstellen oder importieren diese Dashboards nicht. Sie werden automatisch angezeigt und gefüllt, sobald Ihre Agenten Kennzahlen in der erwarteten Form senden. Ihre einzige Aufgabe besteht darin, jeden Agenten so zu konfigurieren, dass er seine OTel-Metriken veröffentlicht. CloudWatch

Wichtig

Die Coding Agent Insights-Dashboards basieren auf einer bestimmten Metrik und Attributform. Die systemeigenen OTel-Metriken jedes Agenten enthalten die Kerndimensionen des Dashboards (wie model undtoken_type). Identitäts- und Organisationsattribute (wie user.email team.iddepartment,cost_center, undorganization) müssen als OTel-Ressourcenattribute gesendet werden. In den Einrichtungsleitfäden in diesem Abschnitt wird jeder Agent so konfiguriert, dass er Telemetrie in dieser Form aussendet. Wenn Sie die Metriknamen ändern oder Identitätsattribute aus der Ressource entfernen, werden die Dashboards möglicherweise nicht gefüllt.

Voraussetzungen

Codierungsagenten senden Metriken an den CloudWatch systemeigenen OTLP-Metriken-Endpunkt. Machen Sie sich mit dem Endpunkt vertraut, bevor Sie einen Agenten konfigurieren. Weitere Informationen erhalten Sie unter OTLP-Endpunkte und Erste Schritte.

Anleitungen zur Einrichtung

Wählen Sie die Anleitung für Ihren Codierungsagenten. Jede Anleitung behandelt einen oder mehrere Einrichtungspfade, sodass Sie den Ansatz wählen können, der der Art und Weise entspricht, wie Ihre Entwickler den Agenten ausführen.

Themen
    • Claude Code— Konfigurieren Sie Claude Code mithilfe eines Inhaber-Tokens (Einzelpersonen und kleine Teams) oder mithilfe eines unternehmensweiten Rollouts mit Unternehmens-SSO.

    • OpenTelemetry Für OpenAI Codex einrichten— Konfigurieren Sie OpenAI Codex mithilfe eines Inhaber-Tokens (Einzelpersonen und kleine Teams) oder mithilfe eines Unternehmens-Rollouts mit Single Sign-On (SSO) für Unternehmen.

    • OpenTelemetry Für GitHub Copilot einrichten— Konfigurieren Sie GitHub Copilot mithilfe eines Bearer-Tokens.

    Sehen Sie sich die Dashboards an

    Nachdem ein Agent mit dem Senden von Metriken begonnen hat, sehen Sie sich die Dashboards in der Konsole an.

    Um die Coding Agent Insights-Dashboards anzuzeigen
    1. Öffnen Sie die CloudWatch Konsole unter. https://console.aws.amazon.com/cloudwatch/

    2. Wählen Sie im Navigationsbereich GenAI Observability und dann Coding Agent Insights aus.

    3. Wählen Sie den Tab für Ihren Coding-Agenten. Metriken werden in der Regel innerhalb weniger Minuten nach dem Senden der Daten durch den Agenten angezeigt.

    Anmerkung

    Metriken können mit PromQL abgefragt werden, sodass Sie auch Ihre eigenen Dashboards und Alarme erstellen können. Weitere Informationen finden Sie unter PromQL-Abfrage.