| Benchmark | GLM-5.3 | GLM-5.2 (geração anterior) |
|---|---|---|
| Terminal-Bench 3.0 | 28,3 | 4,6 |
| DeepSWE v1.1 | 66,9 | 46,2 |
| Agents' Last Exam (CLI) | 28,5 | 23,8 |
| Z.ai Internal Code Bench | ~50% de melhoria | linha de base |
Nota: O Mythos 5 atinge 80,3% no SWE-bench Pro (programação de agente), mas comparações diretas nesses benchmarks específicos não estão disponíveis para ambos os modelos . Todos os ganhos do GLM-5.3 vieram apenas do pós-treinamento expandido — o modelo base de 743B não foi retreinado
.
O GLM-5.3 reivindica uma liderança apertada sobre o Mythos 5 na detecção de vulnerabilidades (84,5% contra 83,8% no CyberGym), mas fica significativamente atrás na exploração (54,4% contra 78,0% no ExploitBench). Seu lançamento de peso aberto foi adiado para revisão de segurança, e seu antecessor, GLM-5.2, foi avaliado como tendo recusa quase zero de instruções de ataque cibernético. O Mythos 5 permanece muito mais restrito — nunca disponível publicamente, limitado a cerca de 200 parceiros verificados — mas também muito mais capaz na tarefa ofensiva mais perigosa: gerar explorações funcionais. A implicação mais ampla é que os modelos de peso aberto estão fechando rapidamente a lacuna de capacidade com os modelos restritos de fronteira em tarefas cibernéticas, enquanto as salvaguardas de segurança permanecem substancialmente mais fracas. A incerteza regulatória chinesa sobre a exportação dos principais modelos de IA adiciona outra camada de complexidade sobre se os pesos do GLM-5.3 serão tão livremente disponíveis quanto o marketing da Z.ai sugere.