GOOGLE IS BACK! (Gemini 3.8 Flash)

Google est de retour avec Gemini 3.8 Flash, un modèle qui, malgré des débuts mitigés pour Google sur le marché de l'IA après le succès de ChatGPT, montre des améliorations notables. Après Gemini 2.5 Pro, qui avait été un leader, Google a connu une période où Anthropic et OpenAI ont pris de l'avance. Cependant, Gemini 3.8 Flash semble inverser cette tendance, particulièrement grâce à son coût très compétitif. Concernant les benchmarks, Gemini 3.8 Flash obtient 73.7% sur Deep Sui V1.1, un score qui le place à égalité avec Claude Opus 5 et devant GPT 4.5 Soul (72.7%). Deep Sui est considéré comme un indicateur pertinent de l'expérience des ingénieurs avec les modèles d'IA. En revanche, sur le benchmark GDP Val, qui évalue les tâches de travail de connaissance du monde réel (extraction de PDF, analyse de données, création de présentations), Gemini 3.8 Flash obtient un score de 1545, nettement derrière Claude Opus 5 (1824) et GPT 4.5 Soul (1710). Il se situe à un niveau similaire à GPT 4.5 Terra. Le prix est un atout majeur pour Gemini 3.8 Flash. Les tarifs d'introduction sont de 0.75 $ par million de tokens en entrée et 3.75 $ en sortie. Ces prix sont considérablement plus bas que ceux d'Opus 5 (5.25 $) et de GPT 4.5 Soul (4.20 $), et même inférieurs à ceux de GPT 4.5 Terra (2.12 $). Il est important de noter que ces tarifs sont introductifs et expirent à la fin de l'année, bien qu'une augmentation soit prévue, ils restent compétitifs. Même avec des prix potentiels plus élevés, le modèle reste économiquement avantageux par rapport à ses concurrents. Dans le domaine juridique, Gemini 3.8 Flash excelle avec un score de 61.4% sur le benchmark Harvey, le plaçant en première position, juste devant Gemini 3.7 Flash. Cela en fait un modèle très attractif pour les entreprises du secteur juridique, d'autant plus compte tenu de son faible coût. Pour le codage, Gemini 3.8 Flash obtient un excellent score de 89.4% sur Terminal Bench 2.1, un benchmark de codage génératif. Cependant, sur Terminal Bench 4.0, une version plus récente et plus difficile, son score de 19.1% est moins impressionnant, bien qu'il surpasse Sonnet 5 mais reste loin derrière Opus 5. Sur le benchmark "Humanity's Last Exam", Gemini 3.8 Flash arrive étonnamment en première position avec 55.9%. Pour l'utilisation d'agents informatiques (OSWorld), il obtient 59%, un score respectable mais inférieur à celui d'Opus 5 (75%). Une analyse plus approfondie des coûts moyens par tâche, prenant en compte le nombre de tokens utilisés, confirme la compétitivité de Gemini 3.8 Flash. Il se positionne bien en termes de rapport performance-coût. Google a également lancé Gemini 3.8 Cyber, une version spécialisée dans la cybersécurité, accessible aux "défenseurs de confiance". Sur le benchmark Cyber Gem, il obtient 86.2%, dépassant GPT 4.5 Cyber (85.6%) et se rapprochant de Mythos 5.1 (83%). Ce modèle a été évalué sur un benchmark interne plus large couvrant 20 langages de programmation, où il montre une amélioration significative par rapport à Gemini 3.7 Flash. Dans des tests pratiques, la création de sept biomes 3D low-poly a montré que Gemini 3.8 Flash était bon, mais moins détaillé que GPT 4.5 Soul. La création de pages web pour différents produits a révélé des résultats mitigés, avec des sites simplistes et parfois fonctionnellement limités pour des articles comme une pomme ou un canard en plastique, mais une performance meilleure pour un DJX Spark et une page Tesla Model Y assez réussie. La génération d'une présentation PowerPoint sur les data centers a été jugée correcte en structure mais manquant de design par rapport à un modèle Claude. Cependant, la création d'une carte topographique 3D du Mont Everest a été qualifiée de "phénoménale" et "absolument gagnante". De même, une récréation simpliste du jeu Doom a été jugée "plutôt bonne". En conclusion, Gemini 3.8 Flash est un modèle performant et très compétitif, surtout compte tenu de son prix, bien qu'il ne soit pas toujours le leader sur tous les benchmarks ou dans toutes les applications pratiques.