IA y ML · 21 oct
Solaiman de Hugging Face dice que los evaluadores de IA integrados necesitan pruebas con estándares abiertos
En TechCrunch Disrupt, Irene Solaiman argumentó que la confianza en las pruebas de modelos depende del acceso, la reproducibilidad y las reglas compartidas.
- Trata la evaluación de la IA como un proceso operativo, no como una afirmación de un proveedor con fuentes más bonitas.
- Prioriza las pruebas reproducibles y el acceso adecuado al modelo antes de confiar en las puntuaciones de los benchmarks.
- Comprueba si las evaluaciones abarcan todo el sistema, no solo el modelo independiente.