AI & ML · 21 Okt
Solaiman dari Hugging Face mengatakan evaluator AI bawaan membutuhkan tes standar terbuka
Di TechCrunch Disrupt, Irene Solaiman berpendapat bahwa kepercayaan dalam pengujian model bergantung pada akses, reproduksibilitas, dan aturan bersama.
- Perlakukan evaluasi AI sebagai proses operasional, bukan klaim vendor dengan tampilan yang lebih menarik.
- Prioritaskan pengujian yang dapat direproduksi dan akses model yang memadai sebelum memercayai skor tolok ukur.
- Periksa apakah evaluasi mencakup seluruh sistem, bukan hanya model yang berdiri sendiri.