Un agent se dégrade sans changement de code : modèle remplacé, prompt modifié, outil qui dérive. Construire le harnais qui le détecte, et ses limites.
Le jour où un agent se dégrade, il ne se passe rien. Aucune exception, aucune alerte, aucun déploiement. Les tickets montent un peu la semaine suivante, et quelqu'un finit par dire que l'assistant a l'air moins bon qu'avant. À ce moment-là, le changement responsable date de trois semaines, il est réparti sur des systèmes appartenant à trois équipes différentes, et personne ne sait le nommer. C'est le cas normal, pas le cas pathologique. Presque tout ce qui s'écrit sur les agents porte sur leur construction. Presque rien ne porte sur ce qui décide de leur survie après un an de production : savoir un mardi ordinaire, preuves à l'appui, que l'agent d'aujourd'hui est moins bon que celui du mois dernier. Voici la partie ingénierie de cette question. Je construis et j'exploite ces systèmes comme consultant indépendant, et je signale les endroits où je donne un jugement professionnel plutôt qu'une norme…