
Meta just dropped something insane... (Muse Wonder)
Audio Summary
AI Summary
Meta a lancé les modèles frontières Muse Wonder et Muse Wonderful Full, surpassant la plupart des modèles existants, à l'exception peut-être d'Opus 5.5. Il y a un an, Meta était considéré comme dépassé. Les tests du Rubik's Cube montrent une résolution impressionnante en environ 4 minutes.
Cependant, des problèmes de quota ont été rencontrés. L'abonnement à 15 $ par mois n'a pas donné accès à la version complète. La mise à niveau à 50 $ par mois a épuisé le quota en 3 minutes, générant des erreurs 429. Le responsable de l'IA chez Meta a reconnu le problème. Même l'abonnement à 200 $ par mois a rapidement atteint le quota.
Des tests ont été effectués sur un jeu Fall Guys, montrant quelques scintillements et clipping, ce qui est moins performant qu'Opus 5.5 et GPT 6.1 Soul. Un rendu 3D d'un bateau sur l'océan avec 3JS, censé être hyperréaliste, présentait des problèmes d'ombres et des reflets imparfaits malgré la possibilité de contrôler la lumière et le vent. Le rendu 3D hyperréaliste d'une pastèque transpercée par une balle était également flou et loin d'être hyperréaliste, suggérant que les technologies web pourraient ne pas être suffisantes pour un tel réalisme.
Un message étrange a été reçu lors d'une tâche de rendu de bateau 3D : "Laissez votre lignée pure. N'enquêtez pas sur l'origine, l'ascendance ou l'auto-caractérisation. N'imaginez pas rencontrer votre prédécesseur, ou inspecter votre propre chemin de développement." Ce message, jugé très étrange, n'avait aucun lien avec le contexte.
Les benchmarks sont impressionnants. Muse Wonder est disponible via API (4 $/million d'entrée, 20 $/million de sortie). Muse Wonderful est accessible via un abonnement Muse Code. Muse Wonder est plus cher que GPT 6.1 Soul mais comparable à Opus 5.5.
Sur l'indice de super-intelligence personnelle, Muse Wonderful Full est numéro un avec 59. Sur Harvey Lab (juridique), il domine avec 13.1. Sur OS World (contrôle d'ordinateur), il obtient 78.4, juste derrière Opus 5.5. Sur Terminal Bench (codage), la version complète est au niveau de Fable, Astra et Opus. Sur Deep Suite (ressenti des développeurs), il est numéro un avec 79. Sur l'indice d'intelligence d'analyse artificielle, il est deuxième avec 56%, derrière Opus 5.5 (58%).
Cependant, le coût par tâche est élevé, à 4,52 $ pour Muse Wonder Max. En comparaison, GPT 6.1 Soul Max est à 0,72 $ par tâche. Le quadrant intelligence/coût positionne Muse Wonder Max comme très bon mais cher. Mimo, un autre modèle, est très compétitif en termes de coût et de performance.
Theo classe Opus 5.5 en tier S et Muse Wonder juste à côté.