| Benchmark | GLM-5.3 | GLM-5.2 (generazione precedente) |
|---|---|---|
| Terminal-Bench 3.0 | 28,3 | 4,6 |
| DeepSWE v1.1 | 66,9 | 46,2 |
| Agents' Last Exam (CLI) | 28,5 | 23,8 |
| Z.ai Internal Code Bench | ~50% di miglioramento | baseline |
Nota: Mythos 5 ottiene l'80,3% su SWE-bench Pro (coding agentico), ma non sono disponibili confronti diretti su questi benchmark specifici tra i due modelli . Tutti i miglioramenti di GLM-5.3 derivano esclusivamente da un potenziamento del post-training — il modello base da 743 miliardi di parametri non è stato riaddestrato .
GLM-5.3 rivendica un vantaggio di misura su Mythos 5 nel rilevamento delle vulnerabilità (84,5% contro 83,8% su CyberGym), ma è nettamente in svantaggio nello sfruttamento (54,4% contro 78,0% su ExploitBench). Il rilascio dei suoi pesi aperti è stato ritardato per una revisione della sicurezza e il suo predecessore GLM-5.2 è stato valutato come avente una capacità di rifiuto prossima allo zero per le istruzioni di attacco informatico. Mythos 5 rimane molto più limitato — mai disponibile pubblicamente, riservato a circa 200 partner verificati — ma anche molto più capace nel compito offensivo più pericoloso: generare exploit funzionanti. La conseguenza più ampia è che i modelli a pesi aperti stanno rapidamente colmando il divario di capacità con i modelli ristretti di frontiera nei compiti cyber, mentre le salvaguardie di sicurezza rimangono sostanzialmente più deboli. L'incertezza normativa cinese sull'esportazione dei migliori modelli di AI aggiunge un ulteriore livello di complessità sulla questione se i pesi di GLM-5.3 saranno mai così liberamente disponibili come suggerisce il marketing di Z.ai.
| Benchmark | GLM-5.3 | GLM-5.2 (generazione precedente) |
|---|---|---|
| Terminal-Bench 3.0 | 28,3 | 4,6 |
| DeepSWE v1.1 | 66,9 | 46,2 |
| Agents' Last Exam (CLI) | 28,5 | 23,8 |
| Z.ai Internal Code Bench | ~50% di miglioramento | baseline |
Nota: Mythos 5 ottiene l'80,3% su SWE-bench Pro (coding agentico), ma non sono disponibili confronti diretti su questi benchmark specifici tra i due modelli . Tutti i miglioramenti di GLM-5.3 derivano esclusivamente da un potenziamento del post-training — il modello base da 743 miliardi di parametri non è stato riaddestrato .
GLM-5.3 rivendica un vantaggio di misura su Mythos 5 nel rilevamento delle vulnerabilità (84,5% contro 83,8% su CyberGym), ma è nettamente in svantaggio nello sfruttamento (54,4% contro 78,0% su ExploitBench). Il rilascio dei suoi pesi aperti è stato ritardato per una revisione della sicurezza e il suo predecessore GLM-5.2 è stato valutato come avente una capacità di rifiuto prossima allo zero per le istruzioni di attacco informatico. Mythos 5 rimane molto più limitato — mai disponibile pubblicamente, riservato a circa 200 partner verificati — ma anche molto più capace nel compito offensivo più pericoloso: generare exploit funzionanti. La conseguenza più ampia è che i modelli a pesi aperti stanno rapidamente colmando il divario di capacità con i modelli ristretti di frontiera nei compiti cyber, mentre le salvaguardie di sicurezza rimangono sostanzialmente più deboli. L'incertezza normativa cinese sull'esportazione dei migliori modelli di AI aggiunge un ulteriore livello di complessità sulla questione se i pesi di GLM-5.3 saranno mai così liberamente disponibili come suggerisce il marketing di Z.ai.