Databricks Genie tidak sedang berusaha mengalahkan coding agent dengan menjadi penulis kode generik yang lebih hebat. Argumennya lebih spesifik: analitik perusahaan adalah soal konteks. Agen harus tahu arti istilah bisnis, menemukan aset data yang benar, membuat query yang sesuai, lalu menalar hasilnya.
Databricks mengklaim Genie meningkatkan akurasi keseluruhan dari 32% untuk salah satu coding agent terkemuka menjadi lebih dari 90% pada benchmark internal berisi tugas analisis data dunia nyata. Namun, angka ini penting dibaca dengan hati-hati karena berasal dari benchmark yang dilaporkan Databricks sendiri, bukan evaluasi pihak ketiga independen [3].
Intinya: konteks data lebih penting daripada sekadar lancar menulis kode
Coding agent generik bisa membantu menulis SQL atau Python. Masalahnya, pertanyaan data di perusahaan jarang sesederhana “buatkan query”. Pertanyaan seperti “kenapa revenue turun?” bisa bergantung pada definisi revenue yang disetujui, segmen pelanggan yang relevan, periode waktu yang dipakai, dan tabel mana yang dianggap sumber kebenaran.
Di sinilah Genie mengambil posisi berbeda. Dokumentasi Microsoft untuk Azure Databricks menjelaskan Genie sebagai AI generatif yang disesuaikan dengan terminologi dan data organisasi. Genie space dikonfigurasi oleh pakar domain menggunakan dataset, contoh query, dan panduan teks agar Genie dapat menerjemahkan pertanyaan bisnis menjadi query analitik [7]. Dengan kata lain, ruang masalahnya dipersempit sebelum model mulai menjawab.
1. Genie memakai semantik perusahaan, bukan hanya prompt
Dalam organisasi besar, satu istilah bisa punya banyak makna. “Pelanggan aktif”, “pendapatan bersih”, atau “churn” sering kali memiliki definisi resmi yang berbeda antarperusahaan, bahkan antardivisi.
Genie space memungkinkan pakar domain memasukkan dataset, contoh, dan arahan yang membentuk cara Genie memahami pertanyaan [7]. Dokumentasi yang sama juga menyebut bahwa organisasi dapat memantau dan menyempurnakan performa Genie melalui feedback pengguna . Jadi, akurasi Genie tidak berdiri sendiri; ia sangat bergantung pada apakah konteks bisnis yang benar sudah dikodekan ke dalam lingkungan kerja agen.
