GPT-5.6 Sol Ultra perde para GPT-5.5 em testes de física
Testes comparativos revelaram que o novo modelo GPT-5.6 Sol Ultra teve desempenho inferior ao do GPT-5.5 em simulações físicas, apesar de seu custo significativamente mais elevado.
GPT-5.6 Sol Ultra perde para GPT-5.5 em testes de física
Os avaliadores forneceram a quatro modelos o mesmo prompt: criar três cenas autônomas em HTML5 Canvas com simulação de física realista.
Prompts:
- Um monster truck faz um backflip e pousa sobre um carro estacionado.
- Um carro de stunt salta por cima de seis ônibus e colide contra uma parede de tijolos.
- Um trem descarrila em uma ponte quebrada e cai na água.
Resultados:
- GPT-5.6 Sol Ultra: 32.9k tokens, $0.33
- Opus 4.8: 9.2k tokens, $0.24
- GPT-5.5: 12.4k tokens, $0.11
- Grok 4.5: 7.0k tokens, $0.08
O Sol Ultra apresenta gráficos quase tão bons quanto os do GPT-5.5, mas com maior nível de detalhe. Essa qualidade é especialmente notável na cena do salto dos ônibus, onde os resultados dos dois modelos parecem quase idênticos. No entanto, nos demais testes, o Sol Ultra teve desempenho inferior ao de seu predecessor, com uma queda perceptível na qualidade da simulação física. Na avaliação dos especialistas, o GPT-5.5 vence com confiança nas cenas envolvendo o backflip do monster truck e o descarrilamento do trem.
Concluíram que o Sol Ultra é essencialmente um GPT-5.5 com física mais fraca, porém com imagens mais bonitas, custando três vezes mais. 🤣
O Grok 4.5, lançado recentemente, falhou em dois dos três testes e apresentou desempenho apenas adequado na cena do trem.
Por que isso importa
AnáliseA comparação entre modelos de IA é crucial para identificar suas forças e fraquezas, orientando escolhas tecnológicas estratégicas. Os resultados desses testes podem influenciar diretamente as decisões corporativas sobre a adoção de novas soluções em projetos de desenvolvimento.
Debater na comunidade
Compartilhe suas dúvidas e insights com desenvolvedores