IA & ML · 28 sept.
Les agents de codage de dépôt ont besoin d’un système d’exploitation d’évaluation
Avant de laisser des agents explorer des dépôts entiers, les équipes ont besoin de petits tests répétables qui détectent les régressions avant qu’elles n’atteignent la production.
- Constituez de petites suites d’évaluation locales avant de donner aux agents un large accès au dépôt.
- Stratifiez les évaluations par type de tâche, car la documentation et le travail sur les fonctionnalités peuvent donner des résultats très différents.
- Utilisez les échecs en production pour élargir la couverture des évaluations, mais auditez les tests instables avant de faire confiance au signal.