
Sonnet 5.5 Is Here. Look What It Can Build.
Audio Summary
AI Summary
Sonnet 5.5 est arrivé et pourrait être le meilleur modèle globalement. Le présentateur a eu un accès anticipé et a testé ses capacités et ses limites.
La première démo est une simulation 3D d'océan en temps réel dans un navigateur, créée à partir d'une seule invite. L'objectif était de créer un océan photoréaliste avec des simulations de vagues, des états de mer allant du calme plat à la tempête, des moutons, un ciel réaliste, des nuages projetant des ombres sur l'eau, des moments de la journée, de la pluie, des éclairs, un voilier avec un sillage, et une vue sous-marine avec des rayons lumineux et des poissons. La démo est visuellement incroyable, avec des paramètres ajustables pour le comportement de la mer (calme, brise, tempête), l'heure de la journée (lever du soleil, midi, nuit au clair de lune), la couverture nuageuse, la houle, la direction et la hauteur des vagues. Les reflets et les détails sont impressionnants. La démo inclut même un œuf de Pâques où un clic sur l'eau provoque une éclaboussure et une vue sous-marine avec des colonnes de lumière. Sonnet a également créé des vidéos de démonstration entièrement éditées pour chaque scénario.
Ensuite, un clone de Fall Guys a été créé avec 3JS. L'invite demandait un jeu jouable de type Fall Guys avec 59 bots sur cinq manches, se terminant par une cérémonie de couronnement. Il était crucial de demander explicitement au modèle de vérifier son travail au fur et à mesure. Le jeu est fonctionnel et amusant, et l'édition Sonnet est considérée comme plus agréable que la version Opus. Le jeu offre plusieurs niveaux différents.
Le présentateur introduit Code Rabbit, un outil pour réviser le code généré par l'IA. Il aide les développeurs à gérer la complexité croissante des revues de code grâce à des fonctionnalités comme les "cohortes" pour diviser les modifications importantes en petites unités, les "couches" pour un ordre de lecture naturel, un "aperçu" pour un résumé des changements, un détecteur de "rayon d'explosion" pour identifier les impacts potentiels sur d'autres parties du code, et un "chat génératif" pour poser des questions sur les requêtes de tirage (PR).
Une autre démo est un créateur Lego. L'application web permet de concevoir n'importe quel modèle Lego à partir d'une description en langage naturel ou d'une image. Elle identifie les pièces réelles, les couleurs et fournit des instructions de construction étape par étape, ainsi qu'une liste de pièces pour BrickLink. La démo montre un canard en caoutchouc avec 281 étapes de construction, des vues 3D, et des options d'exportation (PDF, CSV, JSON).
Une recréation hyperréaliste du centre-ville de San Francisco avec Unreal Engine 5.8 a été tentée. L'invite demandait une ville à l'échelle réelle, avec 120 000 personnes et 2 400 véhicules, réagissant à des événements spécifiques comme un incendie. Bien que le rendu soit impressionnant et réaliste, avec des piétons et des voitures détaillés, il y a quelques problèmes visuels mineurs, comme des reflets scintillants sur les bâtiments. La création de cette ville a pris plusieurs jours et des millions de tokens.
L'équipe a également créé d'autres jeux : "Crownfall", un jeu de stratégie de type Age of Empires, où l'on peut construire des troupes et des bâtiments ; un monde de Batman Arkham Knight avec une ville détaillée et des mouvements de type grappin ; et un monde Mario réaliste dans Unreal Engine. Enfin, un jeu de course de type Forza a été présenté. Un point faible commun à toutes ces créations est la qualité médiocre des sons et de la musique.
Les benchmarks montrent que Sonnet 5.5 a battu Opus 5.5 sur Terminal Bench 4.0, un benchmark crucial pour le codage. Sur d'autres benchmarks comme Frontier Code 1.1, Cursor Bench et GDP val, les scores sont presque identiques. Sonnet 5.5 est aussi performant qu'Opus 5.5, mais à un coût nettement inférieur (environ 50 % moins cher). Le modèle a une tendance à utiliser l'orthographe britannique dans ses écrits, mais cela peut être corrigé par l'utilisateur.
En conclusion, Sonnet 5.5 est fortement recommandé. Il offre une qualité comparable à Opus 5.5, mais est beaucoup plus rapide et moins cher, ce qui en fait une option très attrayante.