AI & ML · 29 Okt
Bahasa manusia mungkin membentuk penalaran fisik LLM, hingga ke jebakan ikatan hidrogen
Sebuah studi arXiv menemukan bahwa 28 model dapat memberi peringkat konformer molekul dengan baik, sampai kata-kata kimia menarik intuisi mereka keluar jalur.
- Uji LLM pada kasus-kasus ketika heuristik ilmiah yang familier gagal, bukan hanya pada kinerja tolok ukur rata-rata.
- Perlakukan penjelasan kimia yang lancar sebagai hipotesis sampai penjelasan itu bertahan terhadap contoh tandingan kuantitatif.
- Perhatikan apakah model bernalar dari koordinat atau dari pola bahasa yang dipelajari dalam teks ilmiah.