Optimisation des invites système des agents avec Amazon Bedrock AgentCore
aws ·
Amazon Bedrock AgentCore introduit une nouvelle capacité d'optimisation qui automatise l'amélioration des invites système des agents à partir de traces de production et de signaux de récompense. Ce flux de travail permet aux développeurs de proposer des modifications de configuration, de les valider par une évaluation par lots hors ligne, puis de les tester via des tests A/B en ligne avant leur déploiement. Le système propose deux architectures de réflecteur : le Single Agent Reflector, qui offre une grande efficacité et rapidité, et le Sub-Agent Reflector expérimental, qui utilise un essaim d'agents pour atteindre une qualité supérieure grâce à une analyse indépendante des traces. Ces deux méthodes sont protégées par des garde-fous visant à empêcher le gonflement des invites, les violations de sécurité et le surapprentissage sur les données de trace. Les résultats d'évaluation sur les benchmarks AppWorld et WebShop montrent que le Single Agent Reflector offre le meilleur compromis qualité-coût, tandis que le Sub-Agent Reflector obtient les taux de réussite les plus élevés. AWS recommande de commencer par de petits ensembles de traces et d'intégrer des signaux de feedback diversifiés, tels que des justifications en texte libre, pour améliorer la réflexion. Ces outils visent à simplifier le processus manuel de réglage des composants des agents, tels que les invites, les descriptions d'outils et les compétences.
aws