AgentCore otimização: melhore o ciclo de qualidade do agente com recomendações e A/B testes
A AgentCore otimização do Amazon Bedrock fornece ferramentas para melhorar continuamente o desempenho do seu agente por meio de alterações de configuração baseadas em dados. Em vez de reescrever manualmente as solicitações e testar manualmente, você usa rastreamentos de agentes para gerar melhorias e validá-las com experimentos controlados.
AgentCore a otimização se baseia nas AgentCore avaliações e apresenta três recursos:
-
Recomendações: AI-generated melhorias nas instruções do sistema e nas descrições das ferramentas com base em rastreamentos reais de agentes e em um avaliador alvo. O serviço analisa os padrões de falha com base no avaliador alvo e produz uma variante otimizada do prompt do sistema ou das descrições da ferramenta.
-
Pacotes de configuração: instantâneos versionados e imutáveis da configuração do agente (solicitações do sistema, IDs de modelo, descrições de ferramentas) que separam o comportamento do agente do código, permitindo mudanças comportamentais sem a necessidade de reimplantação. Os pacotes de configuração são opcionais; você também pode validar as alterações implantando em um endpoint de tempo de execução separado.
-
A/B teste: divisão controlada do tráfego entre duas variantes por meio do AgentCore Gateway, com pontuação de avaliação on-line para cada sessão e relatórios de significância estatística. As variantes podem ser versões diferentes do pacote de configuração no mesmo tempo de execução ou destinos de gateway diferentes apontando para diferentes endpoints de tempo de execução.
Juntos, esses recursos formam um ciclo de melhoria contínua:
Tópicos
