Morgan Stanley uses AI evals to shape the future of financial services
Morgan Stanley(osclaíonn i bhfuinneog nua) chomhoibrigh le OpenAI chun réitigh AI a thógáil a chumhachtaíonn comhairleoirí airgeadais le léargais níos tapúla, cinntí níos eolaí, agus uirlisí achoimrithe éifeachtúla chun caidrimh le cliaint a dhoimhniú. Bhí a rath bunaithe ar chreat meastóireachta láidir a chinntíonn go bhfeidhmíonn AI go hiontaofa, go comhsheasmhach, agus de réir na gcaighdeán arda a bhfuil comhairleoirí ag súil leo.
Trí GPT‑4 a leabú ina sreafaí oibre, tá Morgan Stanley Wealth Management tar éis feabhas a chur ar an gcaoi a bhfaigheann comhairleoirí airgeadais rochtain ar bhonn eolais na cuideachta agus ar an gcaoi a bhfreagraíonn siad do riachtanais na gcliant. Inniu, úsáideann breis agus 98% d’fhoirne comhairleoirí AI @ Morgan Stanley Assistant go gníomhach—chatbot inmheánach Morgan Stanley chun ceisteanna comhairleoirí airgeadais a fhreagairt—le haghaidh aisghabháil faisnéise inmheánaí gan uaim.
“Cuireann an teicneolaíocht seo ar do chumas a bheith chomh cliste leis an duine is cliste san eagraíocht. Tá gach cliant difriúil, agus cabhraíonn AI linn freastal ar riachtanais uathúla gach cliaint.”
Chun AI a chur i bhfeidhm i seirbhísí airgeadais bhí gá le muinín go seachadfadh an teicneolaíocht luach thar na bearta agus go gcomhlíonfadh sí dianchaighdeáin na cuideachta maidir le cáilíocht agus iontaofacht.
Thug Morgan Stanley faoin dúshlán seo trí chreat meastóireachta (eval) a chur i bhfeidhm chun gach cás úsáide AI a thástáil sular imscaradh é. Tomhaiseann evalanna conas a fheidhmíonn samhlacha i gcoinne cásanna úsáide sa saol fíor agus treoraíonn siad feabhsuithe, le haiseolas saineolaithe, ag gach céim.
Thosaigh an fhoireann le trí sprioc dhírithe dá gcéad chásanna úsáide AI:
- Aisghabháil faisnéise níos tapúla chun uaireanta cuardaigh doiciméad a shábháil do chomhairleoirí.
- Uathoibriú tascanna athchleachtacha cosúil le hachoimriú tuarascálacha taighde.
- Léargais fheabhsaithe atá oiriúnaithe do riachtanais na gcliant.
Chun feidhmíocht GPT‑4 a mheas i gcoinne a saineolaithe, reáchtáil Morgan Stanley evalanna achoimrithe chun tástáil a dhéanamh ar cé chomh héifeachtach agus a chomhdhlúthaigh an tsamhail méid ollmhór de chaipiteal intleachtúil agus d’ábhar bunaithe ar phróisis ina achoimrí gonta. Rinne comhairleoirí agus innealtóirí leide freagraí AI a ghrádú ó thaobh cruinnis agus comhleanúnachais de, rud a chuir ar chumas na foirne leideanna a bheachtú agus cáilíocht aschuir a fheabhsú.
Ní raibh an creat eval statach; d’fhorbair sé de réir mar a d’fhoghlaim an fhoireann. Ansin thug siad isteach evalanna aistriúcháin do chliaint ilteangacha agus d’oibrigh siad go dlúth le OpenAI chun modhanna aisghabhála a mhionchoigeartú, ag cinntiú go bhféadfadh AI láimhseáil a dhéanamh ar leabharlann doiciméad a bhí ag leathnú i gcónaí.
“Chuamar ó bheith in ann 7,000 ceist a fhreagairt go pointe inar féidir linn anois beagnach aon cheist a fhreagairt go héifeachtach ó chorpais de 100,000 doiciméad,” a deir David Wu, Ceannaire Straitéise Táirgí agus Ailtireachta AI ar fud na cuideachta ag Morgan Stanley.
Tugann McMillan faoi deara an tionchar a bhí ag freagraí tapa iontaofa ó AI @ Morgan Stanley Assistant ar chomhráite comhairleoirí. “Anois, is féidir le comhairleoirí cliaint a mhealladh ar thopaicí nár phléigh siad riamh roimhe seo toisc go bhfuil an fhrithchuimilt idir eolas agus cumarsáid imithe go nialas.”
Ag tógáil ar rath AI @ Morgan Stanley Assistant, chatbot inmheánach Morgan Stanley chun ceisteanna comhairleoirí airgeadais a fhreagairt, sheol an fhoireann AI @ Morgan Stanley Debrief, uirlis achoimre cruinnithe do chomhairleoirí airgeadais faoi chumhacht Whisper agus GPT‑4.
Tiontaíonn Debrief taifeadtaí Zoom, le toiliú an chliaint, ina n-aschuir inghníomhaithe cosúil le nótaí cliant, a chomhtháthaítear go huathoibríoch i gcórais CRM, agus i ndréacht-obair leantach a dhéanann achoimre ar phríomh-mhíreanna gníomhaíochta is féidir le comhairleoirí a bheachtú agus a sheoladh.
Déanann comhairleoirí athbhreithniú agus coigeartú ar aschuir a ghintear le AI sula gcuireann siad bailchríoch orthu, rud a choinníonn cothromaíocht idir uathoibriú agus maoirseacht dhaonna.
Bhain an dá uirlis leas as cur chuige Morgan Stanley atá tiomáinte ag eval. Maidir le Debrief, d’fhorbair an fhoireann tacair sonraí meastóireachta a léirigh cineálacha éagsúla cruinnithe agus rinne siad tástáil dhian ar chumas na samhla míreanna gníomhaíochta criticiúla a ghabháil gan earráidí a thabhairt isteach.
“Tá an t-aiseolas ó chomhairleoirí thar a bheith dearfach. Tá siad níos rannpháirtí le cliaint, agus tarlaíonn obair leantach a thógadh laethanta roimhe seo anois laistigh d’uaireanta.”
Chun caighdeáin dhiana chomhlíonta na seirbhísí airgeadais a chomhlíonadh, d’ionchorpraigh Morgan Stanley dearbhú cáilíochta ina gcreat eval. D’aithin tástáil laethúil le sraith aischéimnithí de cheisteanna samplacha laigí féideartha agus chuir sí feabhas ar chumas an chórais aschuir chomhlíontacha a sholáthar.
“Bunaithe ar na ceisteanna uile a chuireamar isteach agus ar na haschuir atá á bhfáil againn, shuímis le OpenAI agus déarfaimis, ‘Cad is féidir linn a athrú inár modhanna aisghabhála chun an cruinneas atá de dhíth orainn ag Morgan Stanley a bhaint amach?’” a deir Elliott.
Thug polasaí gan coinneáil sonraí OpenAI aghaidh freisin ar phríomhábhair imní slándála, ag cinntiú go bhfanann sonraí dílseánaigh Morgan Stanley príobháideach.
“Ceann de na chéad cheisteanna a fhaighimid ná, an mbeidh OpenAI ag úsáid ár gcuid faisnéise chun an ChatGPT poiblí a oiliúint?” a deir Wu. “Bhí toilteanas fhoireann OpenAI gan coinneáil sonraí a chinntiú thar a bheith tioncharach.”
Mar gheall ar fhócas Morgan Stanley ar cháilíocht agus ar iontaofacht, cruthaíodh réitigh shlána iontaofa atá fostaithe ag iarraidh a úsáid:
- Úsáideann beagnach gach foireann comhairleoirí uirlisí AI cosúil leis an Assistant go laethúil anois, agus glactar leo i mbainistíocht rachmais ag ráta os cionn 98%.
- Tá rochtain ar dhoiciméid tar éis léim ó 20% go 80%, rud a laghdaíonn go mór an t-am cuardaigh agus a mhéadaíonn éifeachtúlacht aisghabhála doiciméad.
- Caitheann comhairleoirí níos mó ama ar chaidrimh le cliaint, a bhuí le huathoibriú tascanna agus léargais níos tapúla.
Tá roth luais díghlasáilte ag a gcreat láidir eval freisin do réitigh agus seirbhísí amach anseo. Agus AI @ Morgan Stanley ag éirí ina “sár-aip” d’fhostaithe, samhlaíonn Morgan Stanley gan áireamh cásanna úsáide ar fud ranna agus tá feidhmiúlacht Assistant á scálú aige cheana dá ghrúpa urrús institiúideach.
“Táimid ag tógáil ardáin a thacóidh le go leor cásanna úsáide eile,” a deir Wu. “Tá Debrief ann faoi láthair do chomhairleoirí atá ag labhairt le cliaint, ach cén fáth nach bhféadfaimis é sin a chur ar fáil don bhaincéir infheistíochta atá ag labhairt leis an CFO?”
“Is athrú bunúsach é a fheabhsaíonn cáilíocht ár n-ábhair agus a chruthaíonn táirgí agus seirbhísí nua nach bhféadfadh ach daoine atá gar don fhadhb a shamhlú,” a deir McMillan.
