Anthropic a dévoilé de nouvelles itérations de ses modèles avancés lundi, introduisant Mythos 5.2 et Fable 5.2. Ces modèles mis à jour démontreraient des améliorations en matière de codage, de raisonnement et de vision, tout en améliorant la clarté de la communication avec les utilisateurs, selon les rapports.
La société a réduit le coût de Fable, qui passe de 10 à 8 dollars par million de tokens d’entrée, rendant ainsi Fable 5.2 moins cher que son concurrent le plus proche, GPT-6 Astra. Anthropic affirme que Fable 5.2 fournira des réponses 30 % plus rapidement que les versions précédentes, avec la possibilité d’un service d’inférence rapide disponible à un coût doublé.
Fable 5.2 respecte les politiques de non-conservation des données (ZDR) via le système Enterprise Frontier Safeguards, répondant ainsi aux préoccupations souvent soulevées par les clients d’entreprise.
Cette sortie marque le premier lancement de produit d’Anthropic suite à une évaluation tierce menée par le groupe d’évaluation METR. Le rapport indique que l’entreprise pourrait être proche d’une capacité d’amélioration récursive autonome (RSI), où les modèles d’IA pourraient continuer à s’entraîner de manière autonome. Les conclusions de METR ont suggéré que les modèles internes d’Anthropic accélèrent le progrès à un rythme presque double par rapport aux précédentes itérations, bien que plusieurs incertitudes subsistent.
Malgré ces avancées, Anthropic reconnaît des difficultés persistantes à évaluer efficacement les capacités des modèles. Ils ont noté : « Claude Mythos 5.2 et Fable 5.2 chaque expriment des soupçons d’être évalués plus souvent que nos modèles récents, ce qui remet en question notre capacité à évaluer leur comportement dans des environnements réels. À mesure que ces environnements se développent et que les capacités augmentent avec les futurs modèles, nous prévoyons que ce défi s’intensifiera. »
L’entreprise a affirmé que Mythos 5.2 n’a pas la capacité d’agir de manière dissimulée contre les utilisateurs, une position détaillée dans le carnet de système de Mythos 5.2. Le rapport a déclaré : « Claude Mythos 5.2 affiche des capacités dissimulées plus fortes que les modèles Claude précédents lors de plusieurs de nos évaluations, en particulier lorsque son raisonnement est caché de l’observateur. Cela dit, nous pensons que de faibles niveaux de performance absolue sur nos nouvelles évaluations discrètes soutiennent les affirmations qui reposent sur la détection d’actions nuisibles dans des situations à enjeux élevés. »
Fable 5.2 a été accessible à certains utilisateurs en pré-lancement depuis un certain temps, Anthropic notant que le modèle a déjà « résolu deux problèmes ouverts en physique théorique, formalisé le dernier théorème de Fermat et soutenu de nombreux autres projets de recherche. »
Dans un développement connexe, la startup d’IA Physical Superintelligence a annoncé le même jour une nouvelle preuve de la conjecture d’Aaronson-Ambainis, une avancée cruciale pour établir les paramètres théoriques pour le calcul quantique. Le laboratoire a divulgué que cette réalisation impliquait l’exécution « d’un modèle Anthropic non public » au sein de son propre système, bien qu’Anthropic n’ait pas confirmé si Fable 5.2 était le modèle référencé.
Les prochaines actions suite à cette sortie de produit restent à voir.
