Un nouvel indice qui bouleverse le paysage de l'IA
Le 27 octobre 2026, Artificial Analysis a publié la version 5 de son indice, introduisant une méthodologie qui repose à 60 % sur des évaluations privées ou à réponses secrètes. Cette approche a eu un impact notable sur les scores de plusieurs modèles d'intelligence artificielle, notamment Mistral Large 4, qui a vu son score chuter de 38 à 25 points.
Les conséquences pour Mistral Large 4
Mistral Large 4, un modèle d'IA à poids ouverts développé par Mistral AI, se retrouve désormais à égalité avec Muse Spark Open, un modèle récemment lancé par Meta. Cette baisse de 13 points dans le classement pourrait influencer la perception du marché quant à la compétitivité des modèles à poids ouverts.
Un écart de performance préoccupant
L'un des aspects les plus marquants de cette mise à jour est l'élargissement de l'écart de performance entre les modèles fermés et ceux à poids publiés. Cet écart est passé de 12 à 26 points, ce qui pourrait avoir des implications importantes pour les entreprises qui dépendent de ces technologies pour leurs opérations.
La transparence en question
La dépendance accrue aux évaluations privées ou secrètes dans l'indice soulève des questions de transparence. Pour les PME, qui peuvent ne pas avoir accès à ces évaluations, cela pourrait représenter un défi pour évaluer correctement les capacités des différents modèles d'IA.
Claude Opus 5.5 : une exception notable
Dans ce contexte de baisse généralisée, Claude Opus 5.5 se distingue en maintenant son score à 58 points. Ce modèle semble résister aux changements méthodologiques de l'indice, ce qui pourrait renforcer sa position sur le marché.