Braintrust : des demandes clients au code avec Codex

Braintrust est la plateforme d’observabilité et d’évaluation pour livrer des produits d’IA de qualité.

Avec Codex, ses ingénieurs peuvent maintenant prendre les demandes de fonctionnalités des clients et créer des branches d’aperçu pour leur montrer des idées fonctionnelles en quelques minutes.

En un mois, la moitié de l’équipe de Braintrust est passée à Codex. Pour Ankur Goyal, fondateur et chef de la direction, le plus grand changement ne se limite pas à coder plus vite. C’est une boucle de rétroaction plus rapide avec les clients.

« Ça semble simple, mais Codex peut littéralement afficher plus de texte dans le terminal sans ralentir, ce que les autres modèles ne peuvent tout simplement pas reproduire », dit Goyal.

La vitesse est souvent traitée comme une propriété d’un outil, distincte de sa fonctionnalité de base, mais pour Goyal, l’écart de vitesse « change ma façon d’interagir avec Codex par rapport aux autres modèles ».

Avec Codex, l’équipe de Braintrust peut intégrer l’itération à son flux de développement au lieu de laisser les demandes en attente. « Codex nous a donné la capacité d’essayer les demandes de fonctionnalités des clients en temps réel », dit Goyal. « Avant, si quelqu’un nous soumettait une demande de fonctionnalité, elle était ajoutée à l’arriéré puis priorisée plus tard. »

Au lieu de cela, l’équipe peut copier-coller les demandes dans Codex, créer une branche d’aperçu et montrer la demande réalisée au client en quelques minutes. « Ce qui est vraiment génial avec Codex, c’est que nous pouvons itérer et imaginer des solutions aux demandes de fonctionnalités avec le client en temps réel », dit Goyal.

Pour Goyal, Codex change la quantité de préparation nécessaire pour essayer de nouvelles idées. « Avec d’autres modèles, je devais essayer de formuler une invite pour que le modèle résolve un problème précis », dit-il. Les outils plus lents exigent plus d’encadrement pratique, ce qui augmente le coût de l’expérimentation.

« Avec Codex, je suis passé à l’écriture d’un test qui démontre un problème, à la création d’un environnement bac à sable, puis au fait de laisser Codex s’exécuter dans cet environnement », dit Goyal. « C’est un nouveau cas d’utilisation pour moi, et je peux mener des expériences grâce à la vitesse. »

Cette vitesse donne à l’équipe de Braintrust plus de marge pour expérimenter. Au lieu de rédiger des invites étape par étape, les ingénieurs peuvent définir le problème, laisser Codex travailler dans un environnement contrôlé et passer plus vite de l’idée à une solution fonctionnelle.