Terminal X s GPT‑6.1: 88,6 % zhoda s úsudkom skúsených investorov

Konkurenčná výhoda investičnej spoločnosti sa buduje obchod po obchode, no úsudok, z ktorého vychádza každé rozhodnutie, zvyčajne zostáva v hlavách niekoľkých skúsených investorov. Keď odídu, spoločnosti vzniká to, čo Terminal X⁠(otvorí sa v novom okne) nazýva pamäťovým dlhom: dokumenty si síce môže ponechať, no prichádza o uvažovanie, ktoré za nimi stojí.

Operačný systém Capital Memory od Terminal X je navrhnutý tak, aby tento dlh znižoval. Inžinieri spoločnosti pôsobiaci priamo u zákazníkov, bývalí odborníci na financie a investície z JPMorgan a Blackstone, pracujú s investičnými tímami každého zákazníka. Navrhujú architektúru agentov a spôsob investovania spoločnosti premieňajú na agentov, ktorých spoločnosť vlastní a prevádzkuje vo vlastnej infraštruktúre alebo cloude.

Uvažovanie v týchto agentoch zabezpečujú modely OpenAI vrátane GPT‑6.1 Sol a GPT‑6 Luna. Eval Agent od Terminal X potom hodnotí výstupy agentov podľa štandardov spoločnosti. GPT‑6.1 Sol pomohol nástroju Eval Agent zachytiť približne o 25 % viac odporúčaní, ktoré sa odchyľovali od mandátu fondu, a rovnaké pracovné postupy vykonával s približne o 30 % nižšími nákladmi na dopyt než druhý najlepší model.

Terminal X vytvára pre každého zákazníka agentov navrhnutých tak, aby investovali ako najlepší investori danej spoločnosti. Inžinieri Terminal X trávia týždne priamo u zákazníka. Z osvedčených memoránd spoločnosti spätne odvodzujú spôsob ich tvorby a zachytávajú procesy, ktoré nikdy neboli spísané, napríklad ako úverový tím preveruje dlžníka alebo z ktorých zdrojov čerpá koinvestičný tím pred prípravou memoranda.

Tieto procesy sa následne zakódujú do stoviek agentov prispôsobených triede aktív a stratégii, s podagentmi pre každú fázu investovania. GPT‑6.1 Sol zabezpečuje fázy vyžadujúce úsudok a obrovské kontextové okno: syntézu investičnej tézy, identifikáciu kľúčových faktorov a posúdenie súladu s mandátom spoločnosti. GPT‑6 Luna vykonáva kroky spracúvané vo veľkom objeme, pri ktorých je efektívne využívanie tokenov dôležitejšie než hĺbka spracovania.

Agenti pracujú v súkromnej dátovej miestnosti každej spoločnosti, vo vyhradenom prostredí na zdieľanie a správu citlivých investičných údajov. Agenti spracúvajú dokumenty v angličtine, kórejčine, japončine a čínštine a naučené poznatky ukladajú ako firemný pamäťový záznam. Ide o verziovaný záznam toho, ako konkrétny tím prijíma určitý typ rozhodnutí, vrátane jeho minulých analýz, rozhodnutí výboru, pokynov k pracovným postupom a investičných pohľadov spoločnosti.

Inžinieri premieňajú každý pamäťový záznam na opakovateľný pracovný postup na platforme Terminal X, kde možno každý dopyt v produkčnej prevádzke auditovať s úplnou históriou: vykonanými krokmi, získanými zdrojmi, použitým modelom aj uvažovaním.

Podľa Terminal X dosahujú zákazníci vďaka tomuto prístupu výrazné úspory. Patrí medzi nich aj spoločnosť investujúca do súkromného kapitálu, ktorá vykázala úspory 2,4 milióna dolárov v prepočte na rok vďaka automatizácii hĺbkovej previerky a tvorby investičných memoránd.

Terminal X vytvoril Eval Agent na kontrolu odpovedí agentov podľa vlastných štandardov spoločnosti. Ide o koordinovaný pracovný postup využívajúci GPT‑6.1 Sol a ďalšie modely OpenAI, ktorý posudzuje každý výstup agenta tak, ako viceprezident posudzuje prácu analytika.

Eval Agent kontroluje každý výstup podľa súboru 54 hodnotiacich kritérií. Pýta sa: Pochádzajú číselné údaje, porovnania s podobnými spoločnosťami, konsenzuálne odhady a citácie zo správnych zdrojov? Obstojí argumentácia? Je odporúčanie v súlade s investičným pohľadom spoločnosti?

Každá kontrola sa končí výsledkom vyhovel alebo nevyhovel. Každý nevyhovujúci výsledok obsahuje jednoriadkové zdôvodnenie a lepší zdroj alebo opravený text a stáva sa pamäťovým záznamom. Napríklad prehliadnutý zdroj, nesprávne zvolená porovnateľná spoločnosť alebo investičná téza odkláňajúca sa od pohľadu spoločnosti sa premení na nový pokyn v pracovnom postupe alebo nový testovací prípad pre daný tím.

„Každá odpoveď sa vyhodnotí a každá oprava analytika naučí systém o niečo viac o tom, ako daná spoločnosť funguje,“ hovorí Ken Lee, spoluzakladateľ a technický riaditeľ Terminal X. „Čím dlhšie ho teda spoločnosť používa, tým viac uvažuje ako jej vlastný tím.“

Terminal X vyberá modely na základe výsledkov vlastných hodnotení. Pri 500 hodnotených rozhodnutiach sa Eval Agent s GPT‑6.1 Sol zhodol so skúseným ľudským hodnotiteľom v 88,6 % prípadov, kým druhý najlepší model v 86,4 %. To predstavuje zlepšenie o 220 bázických bodov.

Jednou z kategórií chýb, pri ktorých GPT‑6.1 Sol dosahoval lepšie výsledky, bol odklon od investičného štýlu. Napríklad mandátom fondu zameraného na odkupy spoločností je hľadať kandidátov na odkúpenie a stiahnutie z burzy, ktorí sa obchodujú pod čistou hodnotou aktív (NAV), posúdiť podnik a zostaviť štruktúru financovania. Keď scenárové modely naznačia obrat na trhu, návrhy obchodov začnú odporúčať investíciu do problémového dlhu alebo záchranné financovanie. Eval Agent s GPT‑6.1 Sol zachytil približne o 25 % viac týchto odchýlok než druhý najlepší model.

Efektívne využívanie tokenov modelom GPT‑6.1 Sol pri práci s dlhým kontextom umožnilo Terminal X vytvoriť dôkladnejší kontrolný postup pri rovnakom rozpočte. Investičná téza sa najprv overuje voči mandátu fondu a potom voči jeho nedávnym obchodom. Pri neistých verdiktoch sa hodnotenie opakuje a agent pred predložením správy zosúladí výsledky.

Táto dôkladnejšia kontrola odhalila problematické obchody, ktoré jednorazová kontrola porovnateľným modelom schválila. GPT‑6.1 Sol tiež vykonával rovnaké pracovné postupy pri podobnej rýchlosti s približne o 30 % nižšími nákladmi na dopyt než druhý najlepší model.

Pomocou GPT‑6.1 Sol a GPT‑6 Luna vytvoril Terminal X 1 700 firemných pamäťových záznamov, vykonal viac než milión pracovných postupov na mieru a dosiahol počet týždenne aktívnych používateľov zodpovedajúci 81 % mesačne aktívnych používateľov.

Ďalším krokom Terminal X je rozšíriť firemné pamäťové záznamy z tímov na jednotlivcov, aby zachytávali štandardy každého investičného odborníka tak, ako ich uplatňuje v praxi, nielen tak, ako ich opisuje.

Pre Hyuna, spoluzakladateľa a generálneho riaditeľa Terminal X, je práve toto podstatné: „V nasledujúcom desaťročí uspejú spoločnosti, ktoré budú vlastniť svoj úsudok v podobe dát. Našou úlohou je urobiť tento úsudok merateľným, aby sa dal uchovávať, zlepšovať a opakovane využívať.“