1Password, Codex로 엔지니어링 생산성 21% 향상

1Password는 계획부터 프로덕션까지 걸리는 시간을 단축하기 위해 소프트웨어 제공 수명 주기 전반에 Codex를 통합했으며, 이를 통해 새로운 기능을 빠르게 개발하고 있습니다. 1Password 팀은 핵심 사용자 집단에서 pull request 주기 시간 중앙값을 약 11% 단축하고 엔지니어링 생산성을 약 21% 높였습니다.

엔지니어링 부문의 성과를 바탕으로 1Password 경영진은 Codex 이용 범위를 다른 직무로 확대해 재무 및 마케팅 등의 팀도 자체 도구와 기능을 개발할 수 있도록 지원하고 있습니다. 이 모든 과정에서 1Password는 엄격한 보안 기준을 유지하며 속도 향상과 데이터 보호 중 어느 것도 포기하지 않았습니다.

1Password는 Codex를 활용해 아이디어를 계획에서 구현 단계로 더 빠르게 옮기고, 엔지니어가 명확히 정의된 사용자 스토리를 실제 작동하는 기능으로 만들도록 지원합니다.

1Password의 CTO 낸시 왕은 이렇게 설명합니다. “이전에는 프로젝트에 착수하면 작업을 여러 스프린트로 나눌 방법을 고민하고, 각 스프린트를 엔지니어링 스크럼 팀에 배정해야 했습니다.” “Codex를 사용하면 아이디어에서 프로토타입을 거쳐 프로덕션에서 완벽하게 작동하는 기능까지 실제로 한 번에 구현할 수 있습니다.”

왕은 이렇게 말합니다. “저희 워크플로에서는 사용자 스토리와 원하는 사용자 경험에 관한 지침을 Codex에 제공함으로써 기능을 더 빠르고 쉽게 한 번에 구현하고, 엔지니어링 검토 전까지 필요한 반복 작업을 줄일 수 있었습니다.”

그 결과 내부 도구와 고객용 제품을 아우르는 수많은 새 기능이 탄생했습니다. 그중 하나인 Knox는 1Password 팀이 새로운 인터페이스를 구축하도록 돕는 완전 자율형 에이전트 프런트엔드 디자인 시스템입니다. 이 밖에도 내부 AI 사이트 신뢰성 엔지니어링(SRE) 에이전트와 AI 지출 관리 도구가 있습니다.

1Password는 명확히 정의된 엔지니어링 및 보안 경계 안에서 Codex가 자율적으로 작업할 수 있도록 합니다. 왕은 이렇게 말합니다. “Codex는 요청받은 기능을 기능 명세로 세분화하고 거의 완성된 프로토타입을 만든 뒤, 시스템 엔지니어가 이를 백엔드에 구현할 수 있도록 전달합니다.” 이러한 접근 방식은 인계 시간을 단축하고 엔지니어링 생산성을 높였습니다. 엔지니어는 코드를 더 빠르게 작성하고 계획, 구현, 검토 단계 사이의 인계에는 더 적은 시간을 쓰고 있습니다.

Codex는 계획부터 프로덕션까지 모든 단계에 관여합니다.

• 계획 및 기술 설계: 요청을 명세, 종속성 검사, 작업 항목으로 전환합니다.
• 여러 기술 스택에서의 구현: 엔지니어가 CLI를 통해 익숙하지 않은 Rust 및 TypeScript 코드를 탐색하도록 지원하며, 병렬 워크트리가 여러 작업을 동시에 실행합니다.
• pull request 검토: 사람보다 먼저 변경 사항을 검토하고 논리 문제와 누락된 맥락을 표시합니다.
• 테스트 및 릴리스 준비: 다른 작업과 병행해 인수 기준과 자동화 테스트를 실행합니다.
• 보안 및 액세스: 1Password의 내부 AppSec 하네스와 연동되며, 보안 정보 참조를 사용해 평문 자격 증명이 모델 컨텍스트에 들어가지 않도록 합니다.
• 프로덕션 조사: 인시던트 관리, 텔레메트리, 소스 제어, 호출 알림, 기능 플래그 전반에서 증거를 수집합니다.

1Password가 소프트웨어 개발 수명 주기 전반에 Codex를 통합한 결과, 엔지니어링 팀의 생산성은 20.9% 향상되고 pull request 주기 시간 중앙값은 10.9% 단축되었습니다. 평소와 다른 기술 스택에 기여한 한 엔지니어는 일반적으로 3일 걸리던 병합을 하루 만에 완료했으며, 베타 출시일이 고정된 한 팀은 평소 예상치인 약 2건이 아니라 릴리스에 필수적인 티켓 4건을 완료했습니다.

10개가 넘는 마이크로서비스에 걸친 결함의 경우 조사 시간이 약 2시간에서 5~20분으로 줄었습니다. Codex 사용자 50명으로 모델링한 집단을 기준으로 1Password는 연간 엔지니어링 역량 가치가 약 $784,000, ROI가 553%에 이를 것으로 추산하며, 확보한 역량은 제품 개발과 내부 혁신에 재투자됩니다. 측정된 생산성 향상에서 Codex가 차지하는 비중이 더 크다고 가정하면, 지속적으로 사용하는 사용자 100명 기준 모델링된 연간 역량 가치는 약 $3.1 million에 이를 수 있습니다.

1Password는 OpenAI 도구를 재무, 마케팅 및 기타 팀에도 도입하고 있으며, 이들 팀에서는 채팅 인터페이스 사용이 이미 자연스러운 일상이 되었습니다.

1Password에서 보안 모델은 사용 확대 후 추가하는 통제 수단이 아니라 도입을 위한 필수 설계 요건입니다. 왕은 “저희는 제품 개발 방식에 매우 엄격한 보안 태세를 적용합니다”라고 말합니다. 예를 들어 자격 증명이나 보안 정보를 다루는 모든 제품은 고객만 자신의 민감한 데이터를 복호화하고 이용할 수 있도록 설계된 영지식 아키텍처를 준수해야 합니다.

1Password는 저장소에 자격 증명 대신 보안 정보 참조를 보관하는 방식으로 이 원칙을 구현합니다. Codex가 승인된 내부 도구를 호출하면 1Password는 작업 시점에 자격 증명을 확인해 주입하므로 평문 값은 모델 컨텍스트에 절대 들어가지 않습니다.

왕의 설명에 따르면 1Password 엔지니어들은 보안을 더욱 강화하기 위해 회사의 보안 정책을 “재사용 가능한 AppSec 스킬에 내재화”하여 개발 워크플로 전반에서 회사 표준이 일관되게 적용되도록 했습니다. “이는 판도를 바꿨습니다.”

왕과 1Password 팀은 가까운 미래에 더 많은 직무가 소프트웨어를 만들 수 있는 ‘개발의 민주화’를 통해 소프트웨어 제작의 문턱이 낮아질 것으로 전망합니다. 왕은 첫 번째 물결이 엔지니어가 AI의 지원을 받는 개발자로 거듭나는 것이었다면, “이제 우리는 확실히 두 번째 물결에 접어들었습니다. 제품, 디자인, 연구, 개발 분야의 모든 사람이 개발자가 되고 있습니다. PM이 제품을 출시하고 디자이너가 프런트엔드 코드를 배포하기 시작했습니다”라고 말합니다.

왕은 이러한 추세가 모든 직무로 확산될 것으로 내다봅니다. 그녀는 “마지막 단계는 회사의 모든 사람이 실제로 무언가를 만들게 하는 것이라고 생각합니다”라고 말합니다. “앞으로 12개월 동안 보게 될 모습은 바로 이것입니다. 전통적으로 코드를 작성하지 않았거나 자신을 개발자라고 생각하지 않았던 사람들이 AI 도구에 익숙해져 자신 있게 코드를 배포하게 될 것입니다.”