Cara Braintrust ubah permintaan pelanggan jadi kode via Codex

Braintrust adalah platform observabilitas dan evaluasi untuk meluncurkan produk AI berkualitas.

Dengan Codex, para engineer-nya kini dapat mengambil permintaan fitur dari pelanggan dan membuat cabang pratinjau untuk menunjukkan ide yang berfungsi kepada pelanggan dalam hitungan menit.

Dalam satu bulan, separuh tim Braintrust beralih ke Codex. Bagi pendiri dan CEO Ankur Goyal, perubahan terbesar bukan sekadar pengodean yang lebih cepat. Ini adalah loop umpan balik yang lebih cepat dengan pelanggan.

“Kedengarannya sederhana, tetapi Codex benar-benar dapat mencetak lebih banyak teks di terminal tanpa menjadi lambat, dan model lain tidak bisa menirunya,” kata Goyal.

Kecepatan sering dianggap sebagai sifat sebuah alat, sesuatu yang terpisah dari fungsi intinya, tetapi bagi Goyal, perbedaan kecepatan itu “mengubah cara saya berinteraksi dengan Codex dibandingkan dengan model lain.”

Dengan Codex, tim Braintrust dapat mengintegrasikan iterasi ke dalam alur kerja pengembangannya, alih-alih membiarkan permintaan tertunda dan menunggu. “Codex membuka kemampuan kami untuk mencoba permintaan fitur pelanggan secara real time,” kata Goyal. “Sebelumnya, jika seseorang memberi kami permintaan fitur, permintaan itu akan masuk ke backlog dan diprioritaskan belakangan.”

Sebagai gantinya, tim dapat menyalin dan menempelkan permintaan ke Codex, membuat cabang pratinjau, dan menunjukkan permintaan yang telah selesai kepada pelanggan dalam hitungan menit. “Hal yang sangat menarik dari Codex adalah kami bisa beriterasi dan menggali ide atas permintaan fitur bersama pelanggan secara real time,” kata Goyal.

Bagi Goyal, Codex mengubah seberapa banyak penyiapan yang diperlukan untuk mencoba ide baru. “Dengan model lain, saya harus mencoba memberi prompt kepada model untuk menyelesaikan masalah tertentu,” katanya. Alat yang lebih lambat membutuhkan lebih banyak panduan langsung, sehingga meningkatkan biaya eksperimen.

“Dengan Codex, saya beralih ke menulis pengujian yang menunjukkan suatu masalah, membuat lingkungan sandbox, lalu membiarkan Codex berjalan di lingkungan itu,” kata Goyal. “Ini adalah kasus penggunaan baru bagi saya, dan saya bisa menjalankan eksperimen karena kecepatannya.”

Kecepatan itu memberi tim Braintrust lebih banyak ruang untuk bereksperimen. Alih-alih memberi prompt langkah demi langkah, engineer dapat mendefinisikan masalah, membiarkan Codex bekerja di lingkungan terkendali, dan bergerak lebih cepat dari ide ke solusi yang berfungsi.