| Vertailuarvo | GLM-5.3 | GLM-5.2 (edellinen sukupolvi) |
|---|---|---|
| Terminal-Bench 3.0 | 28,3 | 4,6 |
| DeepSWE v1.1 | 66,9 | 46,2 |
| Agents' Last Exam (CLI) | 28,5 | 23,8 |
| Z.ai Internal Code Bench | ~50 % parannus | perustaso |
Huom: Mythos 5 sai 80,3 % SWE-bench Pro -testissä (agenttinen koodaus), mutta suoria vertailuja näillä mittareilla ei ole molemmista malleista . Kaikki GLM-5.3:n parannukset tulivat laajennetusta jälkitrainauksesta – perusmallia (743B) ei koulutettu uudelleen .
GLM-5.3 väittää olevansa niukasti Mythos 5:tä edellä haavoittuvuuksien havaitsemisessa (84,5 % vs. 83,8 % CyberGymissä), mutta jää selvästi jälkeen hyödyntämisessä (54,4 % vs. 78,0 % ExploitBenchissä). Sen avoimien painojen julkaisu on viivästynyt turvallisuustarkastuksen vuoksi, ja edeltäjän GLM-5.2:n on todettu olevan lähes kyvytön kieltäytymään kyberhyökkäysohjeista. Mythos 5 on edelleen paljon rajoitetumpi – ei koskaan julkisesti saatavilla, rajoitettu noin 200:aan tarkistettuun kumppaniin – mutta myös paljon kyvykkäämpi vaarallisimmassa hyökkäystehtävässä: toimivien hyödyntämistapojen luomisessa. Laajempi viesti on, että avoimen painon mallit kuromat umpeen kyvykkyyseroa huippuluokan rajoitettuihin malleihin kybertehtävissä, samalla kun turvatoimet ovat edelleen huomattavasti heikompia. Kiinan sääntelyepävarmuus huipputason tekoälymallien viennistä lisää oman kerroksensa siihen, tulevatko GLM-5.3:n painot koskaan olemaan yhtä vapaasti saatavilla kuin Z.ai:n markkinointi väittää.
| Vertailuarvo | GLM-5.3 | GLM-5.2 (edellinen sukupolvi) |
|---|---|---|
| Terminal-Bench 3.0 | 28,3 | 4,6 |
| DeepSWE v1.1 | 66,9 | 46,2 |
| Agents' Last Exam (CLI) | 28,5 | 23,8 |
| Z.ai Internal Code Bench | ~50 % parannus | perustaso |
Huom: Mythos 5 sai 80,3 % SWE-bench Pro -testissä (agenttinen koodaus), mutta suoria vertailuja näillä mittareilla ei ole molemmista malleista . Kaikki GLM-5.3:n parannukset tulivat laajennetusta jälkitrainauksesta – perusmallia (743B) ei koulutettu uudelleen .
GLM-5.3 väittää olevansa niukasti Mythos 5:tä edellä haavoittuvuuksien havaitsemisessa (84,5 % vs. 83,8 % CyberGymissä), mutta jää selvästi jälkeen hyödyntämisessä (54,4 % vs. 78,0 % ExploitBenchissä). Sen avoimien painojen julkaisu on viivästynyt turvallisuustarkastuksen vuoksi, ja edeltäjän GLM-5.2:n on todettu olevan lähes kyvytön kieltäytymään kyberhyökkäysohjeista. Mythos 5 on edelleen paljon rajoitetumpi – ei koskaan julkisesti saatavilla, rajoitettu noin 200:aan tarkistettuun kumppaniin – mutta myös paljon kyvykkäämpi vaarallisimmassa hyökkäystehtävässä: toimivien hyödyntämistapojen luomisessa. Laajempi viesti on, että avoimen painon mallit kuromat umpeen kyvykkyyseroa huippuluokan rajoitettuihin malleihin kybertehtävissä, samalla kun turvatoimet ovat edelleen huomattavasti heikompia. Kiinan sääntelyepävarmuus huipputason tekoälymallien viennistä lisää oman kerroksensa siihen, tulevatko GLM-5.3:n painot koskaan olemaan yhtä vapaasti saatavilla kuin Z.ai:n markkinointi väittää.