TrueForge vs Claude Managed Agents: Mana yang Lebih Cocok untuk Perusahaan?

TrueForge adalah agent harness open source dari TrueFoundry—lapisan operasional yang mengatur penggunaan tools, konteks, subagen, eksekusi kode, persetujuan, sesi, state, dan trace di sekitar model bahasa. Perangkat lunak ini didistribusikan di bawah lisensi MIT dan dirancang untuk berjalan di infrastruktur yang dikendalikan pelanggan, bukan terikat pada satu penyedia model.

Jadi, pertanyaan praktisnya bukan apakah TrueForge selalu dapat menggantikan Claude Managed Agents. Pertanyaannya adalah: apakah perusahaan bersedia mengambil alih lebih banyak bagian dari tumpukan agen AI demi fleksibilitas model, kontrol data, dan kemungkinan biaya tugas yang lebih rendah?

Perbandingan TrueForge dan Claude Managed Agents

Aspek	TrueForge	Claude Managed Agents
Runtime	Harness open source yang dapat diperiksa, diubah, dan dioperasikan oleh pelanggan	Runtime agen terkelola yang di-hosting Anthropic
Pilihan model	Netral terhadap vendor; dapat digunakan dengan berbagai model proprietary maupun open-weight	Dibangun di sekitar model-model Claude dari Anthropic
Deployment	Berjalan di infrastruktur yang dikontrol perusahaan	Runtime dan infrastruktur sandbox dikelola Anthropic
Beban operasional	Perusahaan menangani scaling, patching, konfigurasi keamanan, observability, dan respons insiden	Penyedia menangani sebagian besar operasi platform
Model biaya	Perangkat lunaknya gratis, tetapi compute, inferensi, penyimpanan, monitoring, dan engineering tetap membutuhkan biaya	Tarif token Claude standar ditambah biaya runtime sesi aktif; tools tertentu dapat menambah biaya terpisah

Diferensiasi TrueForge karena itu lebih bersifat arsitektural, bukan sekadar soal model. Tim dapat memakai harness yang sama dengan berbagai endpoint model sekaligus menentukan lokasi runtime, data, dan kontrol keamanan. Claude Managed Agents menawarkan jalur yang lebih terintegrasi secara vertikal: lebih sedikit infrastruktur yang perlu dirakit, tetapi ketergantungan pada platform dan ekosistem model Anthropic menjadi lebih besar.

Apa yang sebenarnya ditunjukkan benchmark?

TrueFoundry mengatakan telah membandingkan kedua harness menggunakan 14 tugas level satu dan level dua dari Enterprise-Bench milik DevRev. Tugas-tugas tersebut mengharuskan agen bekerja lintas sistem perusahaan, memanggil server MCP, lalu menggabungkan informasi menjadi jawaban akhir. Menurut perusahaan, setiap konfigurasi menerima tugas yang sama dan diuji tiga kali.

Hasil yang dilaporkan adalah sebagai berikut:

• Model Opus 4.8 yang sama: TrueForge dan Claude Managed Agents masing-masing menyelesaikan sekitar 11 dari 14 tugas. Biaya rata-rata TrueForge dilaporkan sekitar US$8,50 per proses, dibandingkan US$11,80 untuk Claude Managed Agents—sekitar 30% lebih rendah.
• TrueForge dengan GLM-5.2: TrueFoundry melaporkan sekitar 11 dari 14 tugas selesai dengan biaya rata-rata sekitar US$2,90 per proses, atau kira-kira 75% lebih rendah dibandingkan konfigurasi Claude Managed Agents dengan Opus.
• Perbandingan model terpisah: TrueFoundry juga menerbitkan perbandingan sebelumnya atas GLM-5.2 dan Opus 4.8 menggunakan 10 tugas yang dibagi ke kategori baseline, sulit, dan long-context. Pengujian tersebut dibuat oleh perusahaan, bukan validasi netral.

Angka-angka ini berguna untuk memahami hasil pengujian TrueFoundry, tetapi bukan jaminan harga universal. Benchmark tersebut berukuran kecil. Selain itu, perbandingan penghematan 75% mengubah dua variabel sekaligus: runtime dan model. Karena itu, hasilnya tidak dapat memisahkan dampak harness TrueForge dari dampak penggunaan GLM-5.2 alih-alih Opus 4.8. Laporan lain juga mengingatkan bahwa penurunan biaya operasi yang diklaim belum tentu mencakup infrastruktur, tenaga kerja, dan biaya perusahaan lainnya.

Dari mana klaim penghematan TrueForge berasal?

Tesis TrueFoundry adalah bahwa runtime agen dapat menekan pengeluaran dengan mengatur seberapa banyak pekerjaan yang dilakukan model dan membuat pemilihan model dapat dikonfigurasi. Ada dua sumber penghematan yang berbeda:

1. Efisiensi runtime. Harness dapat mengelola sesi, tools, state, dan konteks, alih-alih mengulang seluruh interaksi secara tidak terstruktur pada setiap langkah. Diskusi benchmark publik TrueFoundry menekankan perilaku agent loop dan melaporkan lebih sedikit langkah perencanaan dalam salah satu perbandingan. Namun, materi yang tersedia belum memverifikasi secara independen implementasi maupun dampaknya pada berbagai jenis workload.
2. Routing model. Tim dapat menyimpan model frontier untuk tugas yang memang membutuhkannya, lalu mengarahkan pekerjaan yang lebih sempit atau berisiko rendah ke model yang lebih murah, termasuk model open-weight seperti GLM-5.2. Inilah alasan utama mengapa penghematan yang dilaporkan lebih besar ketika TrueForge dengan GLM-5.2 dibandingkan dengan Claude Managed Agents menggunakan Opus.

Pembedaan ini penting saat menyusun anggaran. Perusahaan yang ingin mengulang pengujian sebaiknya mengukur token prompt dan completion, pertumbuhan konteks, jumlah pemanggilan tools, retry, latensi, biaya hosting model, serta tinjauan manusia—bukan hanya harga lisensi perangkat lunak.

Bukti publik mendukung klaim benchmark TrueFoundry sebagaimana dilaporkan, tetapi belum membuktikan bahwa persentase penghematan yang sama berlaku untuk setiap agen, model, workload, atau tingkat konkurensi.

Deployment dan tata kelola: kendali selalu disertai tanggung jawab

Self-hosting mengubah pihak yang mengendalikan lingkungan eksekusi agen. Dengan TrueForge, perusahaan dapat menempatkan runtime di infrastruktur yang dimiliki atau dikelolanya sendiri, menetapkan batas jaringan, serta menentukan bagaimana prompt, dokumen, output tools, dan trace ditangani. Hal ini dapat membantu perusahaan memenuhi kebutuhan residensi data dan akses internal, tetapi self-hosting tidak otomatis membuat sistem menjadi patuh terhadap regulasi. Kontrol akses, retensi data, audit, tata kelola model, dan izin tools yang aman tetap harus dirancang serta dioperasikan pelanggan.

Konsekuensinya adalah bertambahnya tanggung jawab operasional. Deployment TrueForge dapat mengharuskan perusahaan menangani:

• upgrade runtime dan patch keamanan;
• ketersediaan layanan, scaling, dan perencanaan kapasitas;
• secrets serta integrasi identitas;
• sandboxing dan izin konektor;
• observability, retensi trace, dan respons insiden;
• endpoint model, kapasitas GPU, dan perubahan performa model.

Layanan terkelola mengurangi sebagian besar pekerjaan tersebut dan dapat mempercepat perjalanan dari prototipe menuju produksi. Imbalannya adalah kontrol runtime yang lebih terbatas dan ketergantungan yang lebih erat pada platform penyedia. Perbandingan industri antara agen terkelola dan self-hosted umumnya menilai kepatuhan, kepemilikan data, routing model, kapasitas operasional, dan kesesuaian workload—bukan harga perangkat lunak semata.

Workload mana yang lebih cocok?

TrueForge lebih layak dipertimbangkan ketika organisasi membutuhkan:

• batas jaringan atau residensi data yang ketat;
• kemampuan berganti penyedia model atau menggunakan model open-weight;
• alur persetujuan, audit, dan observability yang dapat dikustomisasi;
• agen yang persisten, kaya tools, atau ber-volume tinggi;
• tim platform, keamanan, atau SRE yang mampu mengoperasikan stack tersebut.

Claude Managed Agents lebih sesuai ketika tim memprioritaskan:

• deployment awal yang cepat;
• sandbox dan runtime yang sudah di-hosting;
• minimnya pengelolaan infrastruktur;
• workload standar yang tidak membutuhkan portabilitas model tinggi;
• pengurangan kebutuhan staffing dan kewajiban on-call untuk self-hosting.

Self-hosting tidak otomatis lebih murah. Layanan terkelola dapat lebih ekonomis pada volume rendah atau tidak menentu karena penyedia menyerap kapasitas menganggur dan sebagian besar biaya tenaga kerja platform. Self-hosting menjadi lebih menarik ketika pemakaian berlangsung stabil, pilihan model menghasilkan penghematan berarti, dan organisasi sudah memiliki kemampuan infrastruktur untuk menjalankan sistem tersebut.

Pendiri, pendanaan, dan pengguna awal TrueFoundry

TrueFoundry didirikan pada 2021 oleh mantan engineer Meta, yaitu Nikunj Bajaj, Abhishek Choudhary, dan Anuraag Gutgutia. Perusahaan ini mengumumkan pendanaan Series A senilai US$19 juta yang dipimpin Intel Capital, dengan partisipasi Peak XV, Eniac Ventures, dan Jump Capital, serta sejumlah investor malaikat.

Pengguna produksi awal TrueForge yang dilaporkan mencakup NetApp, Automatiq, dan sistem internal TrueFoundry bernama Ask TFY. Referensi tersebut menunjukkan penggunaan awal di lingkungan perusahaan, tetapi belum sama dengan bukti independen mengenai keandalan TrueForge pada berbagai deployment produksi.

Posisi TrueForge di pasar agen AI

TrueForge berada di lapisan agent runtime, yang berbeda dari model dasar maupun tools yang terutama membantu developer menyusun logika agen.

• Claude Managed Agents menggabungkan model Anthropic, eksekusi ter-hosting, dan infrastruktur terkelola. Daya tariknya adalah jalur deployment yang terintegrasi; komprominya berupa portabilitas model dan runtime yang lebih terbatas.
• TrueForge menekankan runtime yang dimiliki perusahaan, netral terhadap model, dapat di-hosting sendiri, serta mendukung routing model dan kontrol enterprise.
• Harness terkait DeepSeek merupakan bagian dari gerakan yang lebih luas menuju model dan runtime terbuka. Namun, bukti yang tersedia belum cukup untuk perbandingan fitur demi fitur yang ketat dengan TrueForge.
• OpenAI Codex CLI terutama merupakan agen coding yang ditujukan untuk developer dan workflow command line, bukan pengganti langsung control plane enterprise untuk agen bisnis multi-tools.
• LangChain Deep Agents lebih tepat dipahami sebagai framework untuk membangun workflow terencana atau berbasis subagen. Framework ini dapat melengkapi production runtime, bukan menjadi padanan langsung TrueForge.

Kesimpulan untuk pembeli enterprise

Proposisi TrueForge yang paling masuk akal bukan bahwa agen terkelola sudah tidak relevan. Nilainya adalah memberi pilihan bagi perusahaan untuk memiliki harness di bawah agen mereka sendiri, sehingga mereka dapat memilih model, mengendalikan deployment, dan menyesuaikan agent loop dengan kebutuhan tata kelola.

Headline benchmark—sekitar 30% biaya lebih rendah dengan model Opus yang sama dan hingga 75% lebih rendah saat beralih ke GLM-5.2—layak diuji, tetapi sebaiknya tetap dianggap sebagai hipotesis sampai direplikasi pada tugas perusahaan yang representatif.

Evaluasi yang tepat perlu menggunakan tools dan data nyata, lalu membandingkan tingkat keberhasilan tugas, mode kegagalan, tail latency, konsumsi token dan konteks, biaya model serta infrastruktur, kontrol keamanan, beban operasional, dan tinjauan manusia.

Bagi tim yang tidak memiliki kapasitas atau kebutuhan untuk mengoperasikan stack tersebut, Claude Managed Agents mungkin tetap menjadi pilihan produk yang lebih praktis. Bagi perusahaan yang paling membutuhkan kendali, portabilitas, dan efisiensi biaya pada workload berkelanjutan, TrueForge merupakan kandidat yang layak untuk pilot enterprise terbatas—bukan jalan pintas yang menjamin keandalan produksi.