IA & ML · 29 oct.
Le langage humain pourrait façonner le raisonnement physique des LLM, jusque dans les pièges des liaisons hydrogène
Une étude arXiv révèle que 28 modèles peuvent bien classer les conformères moléculaires, jusqu’à ce que des mots de chimie détournent leur intuition.
- Tester les LLM sur des cas où les heuristiques scientifiques familières échouent, et pas seulement sur la performance moyenne aux benchmarks.
- Traiter les explications chimiques fluides comme des hypothèses jusqu’à ce qu’elles résistent à des contre-exemples quantitatifs.
- Observer si les modèles raisonnent à partir des coordonnées ou à partir de schémas linguistiques appris dans des textes scientifiques.