لا ينبغي قراءة 93.9% باعتبارها «درجة عامة» لـ Claude Mythos Preview. معيار برمجي مثل SWE-bench لا يقيس وحده التفكير العام، السلامة، الكلفة التشغيلية، التوافر، أو الأداء في مهام بعيدة عن كتابة الكود ومراجعته وتعديله .
ولهذا، فقاعدة المقارنة العادلة بسيطة: قارن النماذج داخل المعيار نفسه وبشروط تشغيل متقاربة. إذا كان نموذج يعمل مع أدوات لقراءة الملفات وتشغيل الاختبارات والتكرار، بينما يُختبر نموذج آخر من دون هذه الأدوات، فقد تكون المقارنة مضللة حتى لو بدت الأرقام واضحة .
الأرقام الخاصة بالأمن السيبراني لا يجب خلطها مباشرة مع SWE-bench. أحد التقارير يذكر أن Claude Mythos Preview حقق 83.1% في معايير قدرات الأمن السيبراني، مقابل 66.6% لـ Claude Opus 4.6 . كما يذكر مصدر آخر أن Mythos حقق 100% في Cybench، وهو معيار يصفه المصدر بأنه مخصص لتحديات الأمن السيبراني
.
مصادر Anthropic المتاحة هنا تميل أيضًا إلى هذا الاتجاه: فريق Anthropic Red Team نشر تقييمًا لقدرات Claude Mythos Preview في الأمن السيبراني، بينما يتضمن Project Glasswing عملًا حول تحديد الثغرات والاستغلالات باستخدام النموذج . هذا مهم جدًا لفرق الأمن، لكنه لا يجعل كل هذه الأرقام رقمًا واحدًا موحدًا لأداء النموذج.
إذا كان استخدامك يشبه وكيلًا يعمل على مستودعات برمجية، يقرأ الملفات، يعدّل الكود، يشغّل الاختبارات، ثم يحسن الحل، فإن 93.9% في SWE-bench هو الرقم الأنسب للبدء منه . أما إذا كان اهتمامك منصبًا على تحليل الثغرات، مراجعة أمان الكود، أو أبحاث الاستغلال، فالأجدر النظر إلى مقاييس الأمن السيبراني والوثائق المرتبطة بها
.
الخلاصة العملية: Claude Mythos Preview يُذكر معه رقم 93.9% في SWE-bench، وهذه هي الإجابة القصيرة عن أشهر benchmark مرتبط به . أما القراءة الأدق فهي أضيق: الرقم إشارة قوية في مهام البرمجة وتحت شروط تقييم محددة، وليس دليلًا تلقائيًا على تفوق عام في كل المجالات.