IA & ML · 21 oct.
Solaiman de Hugging Face affirme que les évaluateurs intégrés à l’IA ont besoin de tests ouverts et standardisés
À TechCrunch Disrupt, Irene Solaiman a soutenu que la confiance dans les tests de modèles dépend de l’accès, de la reproductibilité et de règles communes.
- Traitez l’évaluation de l’IA comme un processus opérationnel, et non comme une affirmation de fournisseur avec de plus jolies polices.
- Privilégiez les tests reproductibles et un accès adéquat au modèle avant de faire confiance aux scores de référence.
- Vérifiez si les évaluations couvrent l’ensemble du système, et pas seulement le modèle autonome.