AgentCore optimización: mejore el ciclo de calidad de los agentes con recomendaciones y A/B pruebas
AgentCore La optimización de Amazon Bedrock proporciona herramientas para mejorar continuamente el rendimiento de su agente mediante cambios de configuración basados en datos. En lugar de volver a escribir manualmente las instrucciones y realizar las pruebas a mano, se utilizan las trazas de los agentes para generar mejoras y validarlas mediante experimentos controlados.
AgentCore la optimización se basa en AgentCore las evaluaciones e introduce tres capacidades:
-
Recomendaciones: AI-generated mejoras en las instrucciones del sistema y en las descripciones de las herramientas basadas en el seguimiento real de los agentes y en un evaluador objetivo. El servicio analiza los patrones de error en función del evaluador objetivo y produce una variante optimizada del mensaje del sistema o de las descripciones de las herramientas.
-
Paquetes de configuración: instantáneas versionadas e inmutables de la configuración del agente (indicaciones del sistema, identificadores de modelos, descripciones de herramientas) que desvinculan el comportamiento del agente del código, lo que permite realizar cambios en el comportamiento sin necesidad de volver a desplegarlos. Los paquetes de configuración son opcionales; también puede validar los cambios implementándolos en un punto final de ejecución independiente.
-
A/B pruebas: se controló el tráfico dividiendo el tráfico entre dos variantes a través de AgentCore Gateway, con una valoración en línea para cada sesión y un informe de significación estadística. Las variantes pueden ser diferentes versiones de paquetes de configuración en el mismo tiempo de ejecución o diferentes destinos de puerta de enlace que apuntan a diferentes puntos finales del tiempo de ejecución.
Juntas, estas capacidades forman un ciclo de mejora continua:
Temas
