Une nouvelle avancée a été enregistrée dans le monde de l'intelligence artificielle. Le modèle GPT 5.4 a pris la tête du classement avec un résultat de 67,42 % lors des tests Vibe Code Bench v1.1. Ce chiffre est supérieur de 5,7 % à celui du précédent détenteur du record, le modèle GPT 5.3 Codex. La troisième place a été occupée par le modèle Claude Opus 4.6 avec un résultat de 57,57 %. À ce sujet habr.com rapporte.
Contrairement à l'écriture de code simple ou à la correction d'erreurs, ce test évalue la capacité du modèle à créer une application web entière à partir de zéro. Le programme doit réaliser indépendamment le processus, du dossier vide au service prêt à l'emploi. Pendant le test, des tâches complexes telles que l'authentification, les bases de données et les systèmes de paiement sont confiées à l'intelligence artificielle. Jusqu'à cinq heures sont allouées pour chaque projet et le résultat final est vérifié par un agent spécial.
Les analyses montrent qu'une haute précision ne signifie pas toujours une efficacité économique. Par exemple, le modèle Claude Opus 4.6 obtient des résultats presque équivalents en utilisant moins de ressources que GPT 5.4. C'est un facteur important pour l'optimisation des coûts pour les développeurs. Néanmoins, le rythme de développement de l'intelligence artificielle est surprenant : en seulement six mois, les meilleurs indicateurs ont doublé.
Actuellement, GPT 5.4 commet encore des erreurs dans certaines tâches. Environ un tiers des applications créées par le modèle ne fonctionnent pas complètement. Malgré cela, il est prévu que la technologie transforme radicalement le processus de programmation et facilite considérablement le travail humain à l'avenir.
Lisez “Zamin” sur Telegram !
