GPT-5.6 Sol Ultra perd face à GPT-5.5 lors des tests de physique
Les tests comparatifs révèlent que le nouveau modèle GPT-5.6 Sol Ultra sous-performe en simulation physique malgré un coût supérieur, laissant l'avantage au précédent GPT-5.5.
GPT-5.6 Sol Ultra perd face à GPT-5.5 lors des tests de physique
Les testeurs ont soumis quatre modèles d'IA à la même consigne : créer trois scènes autonomes sur HTML5 Canvas avec une simulation physique réaliste.
Consignes :
- Un monster truck effectue un backflip et atterrit sur une voiture garée.
- Une voiture de cascade saute par-dessus six bus et percute un mur de briques.
- Un train dérape sur un pont cassé et tombe dans l'eau.
Résultats :
- GPT-5.6 Sol Ultra : 32,9k tokens, 0,33 $
- Opus 4.8 : 9,2k tokens, 0,24 $
- GPT-5.5 : 12,4k tokens, 0,11 $
- Grok 4.5 : 7,0k tokens, 0,08 $
Sol Ultra génère des images presque aussi bien que GPT-5.5, mais avec plus de détails. Cette différence est particulièrement visible dans la scène du saut par-dessus les bus, où les résultats des deux modèles sont quasi identiques. Cependant, lors des autres tests, Sol Ultra a moins bien performé que son prédécesseur, avec une qualité de simulation physique nettement dégradée. Selon les évaluateurs, GPT-5.5 remporte clairement les scènes impliquant le flip du monster truck et l'accident de train.
Ils concluent que Sol Ultra est essentiellement un GPT-5.5 avec une physique plus faible mais un rendu visuel plus attrayant, pour un prix trois fois supérieur. 🤣
Le Grok 4.5, récemment lancé, a échoué à deux des trois tests et n'a offert une performance adéquate que dans la scène du train.
Pourquoi c'est important
AnalyseCette comparaison met en lumière les compromis entre coût, qualité visuelle et précision scientifique, aidant les développeurs à choisir les outils adaptés à leurs besoins spécifiques. Les résultats pourraient influencer les décisions d'adoption technologique des entreprises, privilégiant la fiabilité fonctionnelle sur l'esthétique brute.
Discuter dans la communauté
Partagez vos questions et vos idées avec les développeurs