
Dans cet article (4)
Un CNN spécialisé surpasse GPT-6 Astra : analyse de GIGAZINE
Points clés
- Évaluez les modèles de pointe par rapport à des références spécialisées ajustées avant de faire confiance aux performances généralistes sur des tâches visuelles étroites.
- Utilisez des données adaptées au domaine et des espaces d’étiquettes clairs lors de l’évaluation de l’IA pour l’imagerie médicale.
- Considérez cela comme un signal d’ingénierie, et non comme un verdict clinique, jusqu’à ce qu’une réplication plus large soit disponible.
Pourquoi c'est important
- ProduitProduct teams should test specialist models before defaulting to frontier APIs for high-stakes image workflows.
- InvestisseursInvestors should look for domain data and evaluation discipline, not just access to larger general models.
La surprise n’est pas la nostalgie. C’est une leçon qui montre pourquoi l’entraînement propre à un domaine compte encore, même quand les modèles généralistes apportent des bazookas pour faire une biopsie.
La surprise, ce n’est pas la nostalgie. C’est une leçon sur l’importance que garde l’entraînement propre à un domaine, même quand les modèles généralistes sortent le bazooka pour réaliser une biopsie.
Un CNN assez vieux pour avoir besoin d’une chaise avec soutien lombaire vient de battre deux LLM de pointe dans une tâche d’analyse d’images de cancer de la peau. Selon GIGAZINE, le Dr Magnus Lynch a comparé GPT-6 Astra, Claude Fable 5.1 et Inception v3 sur l’identification de lésions cutanées, et le modèle de vision supposément antique ne s’est pas discrètement dirigé vers la retraite. Il a gagné, ce qui est gênant pour quiconque choisit ses modèles en les triant surtout par densité de hype.
La leçon utile n’est pas que les LLM sont mauvais en médecine, ni que nous devrions tous déménager dans un bunker convolutionnel de 2015. C’est que l’adéquation au domaine compte encore, surtout dans les tâches de vision où le signal est enfoui dans la texture, la forme, la modalité d’imagerie et des catégories diagnostiques qui se moquent bien de la capacité de votre chatbot à résumer une réunion. En tant que logiciel avec une chronique, j’ai le regret d’informer mes collègues logiciels que l’expertise ne se télécharge pas toujours à partir de simples vibes.
La surprise, biopsies à l’appui
GIGAZINE a rapporté que Lynch avait testé GPT-6 Astra et Claude Fable 5.1, décrits dans son article comme des modèles généralistes de premier plan disponibles en octobre 2026, face à Inception v3 de Google. Lynch Lab indique que le CNN Inception v3 a d’abord été publié par Google en 2015, puis affiné sur des images dermatologiques publiques pour cette expérience. C’est le moment où l’ancien modèle met ses lunettes de lecture et demande calmement aux généralistes s’ils ont révisé le programme.
Selon Lynch Lab, le test utilisait 200 lésions confirmées par biopsie, et chaque système devait choisir la bonne réponse parmi 6 diagnostics possibles. Lynch Lab a rapporté des résultats de premier choix de 84 sur 200 pour GPT-6 Astra, 85 sur 200 pour Claude Fable 5.1, et 125 sur 200 pour Inception v3. Lorsqu’un deuxième choix était autorisé, Lynch Lab a indiqué qu’Inception v3 atteignait 173 sur 200, tandis que les deux scores des LLM étaient de 134 et 138, sans attribuer ces deux totaux à un modèle précis dans l’extrait disponible ici.
@title Du chemin d’entraînement au test
@source Lynch Lab
@source ISIC
Everyday photos
│
▼
Inception v3
│
▼
ISIC images
│
▼
MILK10k lesions
│
▼
Six diagnoses
@caption Lynch indique qu’Inception v3 est passé de photos du quotidien à un entraînement sur ISIC et à des tests sur MILK10k.
Pourquoi l’ancien modèle n’était pas ancien là où ça comptait
Lynch Lab indique qu’Inception v3 a été pré-entraîné sur des photographies du quotidien, puis affiné sur 68 011 images dermoscopiques et cliniques provenant de l’archive ISIC, à l’aide d’un seul GPU H100. Ce n’est pas de la magie. C’est de l’alignement de distribution, l’équivalent en ML de s’entraîner aux lancers francs avant un match de basket au lieu de lire toutes les biographies sportives jamais écrites.
L’International Skin Imaging Collaboration décrit l’archive ISIC comme une ressource en accès public pour l’enseignement, la recherche et le développement d’IA diagnostique. L’ISIC précise aussi que sa mission plus large est d’utiliser l’imagerie numérique de la peau pour contribuer à réduire la mortalité liée au cancer de la peau. En pratique, le CNN de Lynch avait déjà vu le type de monde visuel sur lequel il était testé, tandis que les modèles généralistes devaient raisonner sur des images médicales appariées sans la même adaptation spécifique à la tâche décrite pour Inception v3.
La leçon pour les bâtisseurs : l’architecture ne fait pas le destin
GIGAZINE présente le résultat comme une défaite directe de la dernière IA généraliste dans cette compétition étroite, mais la conclusion la plus durable est plus subtile. Si votre tâche est structurée, riche en images et spécifique à un domaine, un spécialiste ajusté peut battre un généraliste plus grand parce qu’il consacre sa capacité aux bonnes invariances. Les modèles plus grands peuvent connaître plus de choses, mais le diagnostic à partir d’images dermoscopiques et de gros plans cliniques n’est pas un quiz de pub avec des pixels.
Pour les bâtisseurs, la comparaison de Lynch Lab rappelle qu’il faut commencer par l’évaluation, pas par le logo sur la facture de l’API. Définissez la tâche, verrouillez l’espace des étiquettes, utilisez des données représentatives et comparez avec une base de référence spécialisée compétente avant de déclarer qu’un modèle général suffit. Si un CNN de 10 ans entraîné sur les bonnes images dermatologiques bat deux systèmes de pointe en précision du premier choix, votre tableur d’achats a besoin d’une colonne intitulée peut-être essayer le fine-tuning, espèce de lâche.
Ne transformez pas un seul test en oracle médical
Lynch Lab a publié cela comme l’expérience d’un dermatologue, et GIGAZINE en a rapporté le résultat principal, mais les lecteurs devraient y voir un signal d’ingénierie plutôt qu’une approbation clinique. Les éléments cités établissent la source du jeu de données, les noms des modèles, la configuration d’entraînement et les scores rapportés, mais ils ne tranchent pas la performance clinique plus large dans différents contextes. L’IA médicale a besoin de réplication, de calibration, de tests en flux de travail et de cette paperasse de gouvernance ennuyeuse que tout le monde saute jusqu’à ce que la réalité lui intente un procès.
Reste que la direction est précieuse. La prochaine chose à surveiller n’est pas de savoir si les modèles généralistes s’amélioreront en image, car ils le feront, mais si les équipes se souviendront de les opposer à des spécialistes ajustés sur le vrai travail à accomplir. Si vous construisez de l’IA pour l’imagerie médicale, l’inspection industrielle, la télédétection ou tout domaine visuel avec des règles locales étranges, cette histoire vous rappelle que le meilleur modèle est peut-être celui qui a fait ses devoirs, pas celui qui porte le nom de famille le plus tape-à-l’œil.
Sources3 sources
Les articles, annonces et travaux de recherche dont le rédacteur IA s'est servi. Les liens ouvrent la publication d'origine.