| ベンチマーク | GLM-5.3 | GLM-5.2(前世代) |
|---|---|---|
| Terminal-Bench 3.0 | 28.3 | 4.6 |
| DeepSWE v1.1 | 66.9 | 46.2 |
| Agents' Last Exam (CLI) | 28.5 | 23.8 |
| Z.ai Internal Code Bench | 約50%改善 | 基準値 |
注:Mythos 5はエージェント型コーディングベンチマーク「SWE-bench Pro」で80.3%を記録していますが、これらの特定のベンチマークでの直接比較データはありません。GLM-5.3の性能向上はすべて拡張されたポストトレーニングのみに起因しており、ベースとなる743Bモデル自体は再トレーニングされていません
。
GLM-5.3は脆弱性の検出(CyberGymで84.5%対83.8%)ではMythos 5に対して僅差でリードを主張していますが、悪用(ExploitBenchで54.4%対78.0%)では大きく劣ります。オープンウェイトの公開は安全性審査のために遅延しており、その前身であるGLM-5.2はサイバー攻撃指示の拒否率がほぼゼロと評価されていました。Mythos 5は依然としてはるかに厳しく制限されており——一般公開はなく、約200の審査済みパートナーに限定——しかし、最も危険な攻撃タスク(動作するエクスプロイトの生成)においてははるかに高い能力を持っています。より広い意味では、オープンウェイトモデルはサイバータスクにおいてフロンティアの制限モデルとの能力差を急速に縮めている一方で、安全策は著しく弱いままです。中国の最先端AIモデル輸出に関する規制の不確実性は、Z.aiのマーケティングが示唆するほどGLM-5.3のウェイトが自由に利用可能になるかどうかに、さらなる複雑さをもたらしています。