Humanity’s Last Exam, atau HLE, adalah benchmark akademik multimodal berisi 2.500 pertanyaan matematika, humaniora, dan sains alam, yang dirancang untuk menguji kemampuan model frontier dengan jawaban yang jelas dan dapat diverifikasi . SWE-Bench Pro menguji kemampuan rekayasa perangkat lunak multibahasa memakai issue GitHub dunia nyata, menurut deskripsi yang dikutip DocsBot
. Terminal-Bench 2.0 muncul dalam laporan VentureBeat sebagai bagian dari hasil agentic dan software engineering
.
Kesimpulan praktisnya: Claude Opus 4.7 memberi sinyal kualitas umum terkuat dalam data yang sebanding, GPT-5.5 punya keunggulan jelas di Terminal-Bench 2.0, Kimi K2.6 menonjol karena rasio performa-harga untuk coding, dan DeepSeek V4 lebih menarik ketika biaya serta konteks panjang menjadi penentu .
Pada workflow agen yang melakukan banyak panggilan, harga per token bisa lebih menentukan daripada selisih benchmark beberapa poin. Sumber yang tersedia menempatkan Kimi K2.6 dan DeepSeek V4 di area biaya agresif, sementara GPT-5.5 dan Claude Opus 4.7 berada di kelas premium .
Ada perbedaan penting untuk Claude: lembar Artificial Analysis melaporkan $5/$25 dan konteks 1 juta token, sementara tabel CodeRouter yang dipakai untuk membandingkan Kimi mencantumkan nilai Claude yang berbeda . Untuk produksi, selalu pakai harga dan kontrak terbaru dari penyedia yang benar-benar Anda gunakan.
Claude Opus 4.7 adalah kandidat pertama untuk review kode kompleks, analisis panjang, dan tugas yang menuntut pencarian cacat tersembunyi. Alasannya: ia unggul di HLE dibanding GPT-5.5 dan DeepSeek dalam data VentureBeat, memimpin SWE-Bench Pro menurut CodeRouter, dan oleh Artificial Analysis ditempatkan di antara model pemimpin kecerdasan meski dengan biaya, latensi, dan verbositas tinggi . Claude Opus 4.7 juga dilaporkan memiliki konteks 1 juta token dan tersedia melalui API Anthropic serta platform cloud seperti Amazon Bedrock, Microsoft Azure, dan Google Vertex
.
GPT-5.5 tidak mengalahkan Claude Opus 4.7 di HLE dalam data VentureBeat, tetapi punya hasil Terminal-Bench 2.0 terbaik yang tersedia: 82,7%, dibanding 69,4% untuk Claude Opus 4.7 dan 67,9% untuk DeepSeek V4 . Jika tim Anda sudah memakai ChatGPT atau Codex, sebuah panduan praktis menempatkan GPT-5.5 sebagai opsi yang masuk akal untuk tetap berada di alur tersebut sebelum berpindah sepenuhnya ke penyedia lain
.
Kimi K2.6 adalah kasus biaya-performa paling jelas dalam sumber yang tersedia. CodeRouter menempatkannya setara GPT-5.5 di SWE-Bench Pro dengan 58,6%, tetapi mencantumkan harga $0.60/$4.00 per 1 juta token . Jendela konteksnya 256K, lebih kecil daripada 1 juta token yang dilaporkan untuk GPT-5.5 dan DeepSeek V4-Pro di tabel yang sama, tetapi masih bisa cukup jika basis kode dan konteks kerja Anda muat di sana
. Jika Anda perlu menjalankan model sendiri, Verdent melaporkan bobot K2.6 tersedia di Hugging Face dan berjalan dengan vLLM, SGLang, atau KTransformers, dengan 4× H100 sebagai perangkat minimum yang layak untuk varian INT4 pada konteks yang diperkecil
.
DeepSeek V4 Pro/Pro-Max berada di belakang Claude Opus 4.7 dan GPT-5.5 pada HLE, Terminal-Bench 2.0, dan SWE-Bench Pro dalam angka VentureBeat, tetapi kombinasi harga dan konteks 1 juta token membuatnya kompetitif untuk pipeline volume tinggi . Jika targetnya biaya serendah mungkin, V4 Flash terlihat lebih murah lagi di CodeRouter, meski harus diperlakukan sebagai varian terpisah dari V4-Pro
.
Jika kualitas adalah prioritas utama, mulai dari Claude Opus 4.7. Jika pekerjaan Anda bergantung pada terminal, agen, atau kontinuitas dengan OpenAI, uji GPT-5.5. Jika Anda membutuhkan coding kompetitif dengan biaya rendah, Kimi K2.6 layak menjadi evaluasi pertama. Jika hambatan utama adalah volume panggilan murah dengan konteks panjang, DeepSeek V4-Pro atau V4 Flash adalah rute yang perlu divalidasi—dengan catatan bahwa keduanya tidak memimpin benchmark paling berat dalam sumber yang tersedia .