Wie Braintrust Anfragen von Kund:innen mit Codex in Code umsetzt

Braintrust ist die Observability- und Eval-Plattform für die Bereitstellung hochwertiger KI-Produkte.

Mit Codex können die Entwickler:innen jetzt Feature-Anfragen von Kund:innen aufnehmen und Preview-Branches erstellen, um Kund:innen binnen Minuten funktionierende Ansätze zu zeigen.

Innerhalb eines Monats wechselte die Hälfte des Braintrust-Teams zu Codex. Für Gründer und CEO Ankur Goyal besteht die größte Veränderung nicht nur im schnelleren Programmieren. Es ist eine schnellere Feedbackschleife mit Kund:innen.

„Es klingt simpel, aber Codex kann im Terminal buchstäblich mehr Text ausgeben, ohne langsam zu werden, und andere Modelle können das einfach nicht nachbilden“, sagt Goyal.

Geschwindigkeit wird oft als Eigenschaft eines Tools behandelt, die getrennt von seiner Kernfunktionalität existiert, doch für Goyal „verändert der Geschwindigkeitsunterschied die Art, wie ich mit Codex im Vergleich zu anderen Modellen interagiere“.

Mit Codex kann das Braintrust-Team Iteration in seinen Entwicklungsworkflow integrieren, statt Anfragen einfach warten zu lassen. „Codex hat uns ermöglicht, Feature-Anfragen von Kund:innen in Echtzeit auszuprobieren“, sagt Goyal. „Wenn uns früher jemand eine Feature-Anfrage stellte, landete sie in einem Backlog und wurde später priorisiert.“

Stattdessen kann das Team Anfragen kopieren und in Codex einfügen, einen Preview-Branch erstellen und Kund:innen die umgesetzte Anfrage binnen Minuten zeigen. „Das wirklich Coole an Codex ist, dass wir Feature-Anfragen gemeinsam mit Kund:innen in Echtzeit iterieren und weiterdenken können“, sagt Goyal.

Für Goyal verändert Codex, wie viel Vorbereitung nötig ist, um neue Ideen auszuprobieren. „Bei anderen Modellen musste ich versuchen, das Modell per Prompt dazu zu bringen, ein bestimmtes Problem zu lösen“, sagt er. Langsamere Tools erfordern mehr praktische Anleitung, was die Kosten des Experimentierens erhöht.

„Mit Codex bin ich dazu übergegangen, einen Test zu schreiben, der ein Problem demonstriert, eine Sandbox-Umgebung zu erstellen und Codex dann in dieser Umgebung laufen zu lassen“, sagt Goyal. „Das ist für mich ein neuer Anwendungsfall, und dank der Geschwindigkeit kann ich Experimente durchführen.“

Diese Geschwindigkeit gibt dem Braintrust-Team mehr Raum zum Experimentieren. Statt Schritt für Schritt Prompts zu formulieren, können Entwickler:innen das Problem definieren, Codex in einer kontrollierten Umgebung arbeiten lassen und schneller von der Idee zur funktionierenden Lösung gelangen.