LifeVal
AI arengu mõõtmine igapäevaelus olulistes ülesannetes.
OpenAI missioon on tagada, et üldine tehisintellekt tooks kasu kogu inimkonnale. Soovime luua enam kui miljardile inimesele, kes praegu iga nädal ChatGPT‑d kasutavad, AI, mis aitab lahendada igapäevaelu praktilisi ülesandeid: leida lapsehoiuvõimalusi, kasutada riigiteenuseid, koostada eelarvet, valmistuda kooliks, kohandada retsepte, tellida toidukaupu, koostada treeningukavasid ja palju muud.
Kui inimene otsib abi oma elu lihtsustamiseks, vajab ta enamat kui nõuannet või vastust vestluses. Et olla tõeliselt kasulik isiklik abiline, peaks ChatGPT suutma tegutseda nii, et asjad saaksid päriselt tehtud.
Et mõõta mudelite tulemusi igapäevaülesannetes aja jooksul, lõime hindamissüsteemi ülesannetega valdkondadest, kus kasutajad soovisid AI-lt ja isiklikelt agentidelt kõige rohkem abi. Kasutasime seda hindamissüsteemi viimase aasta jooksul, et jälgida ja parandada mudelite tulemusi igapäevaülesannetes.
Taust
Et selgitada välja, milliseid ülesandeid inimesed kõige olulisemaks peavad, võtsime aluseks kaks suurt uuringut, mis jälgivad inimeste ajakasutust nii USA-s kui ka rahvusvaheliselt: Ameerika ajakasutusuuringu(avaneb uues aknas) ja rahvusvahelise ajakasutusuuringu(avaneb uues aknas). Üheskoos annavad need andmestikud üksikasjaliku ülevaate eri rahvastikurühmade inimeste igapäevatoimingutest eri kellaaegadel ja aastaaegadel. Et mõista, millistes tegevustes inimesed AI abi kõige enam hindaksid, täiendasime olemasolevaid uuringuid uue, demograafiliselt esindusliku küsitlusega, milles osales 3995 vastajat. Esitasime iga ülesande kohta mitmesuguseid küsimusi, et selgitada välja valdkonnad, kus tavainimesed isiklikult abiliselt kõige rohkem tuge soovivad. Saadud ülesanded hõlmavad peamisi valdkondi, milles inimesed abi soovivad, sealhulgas hooldamine, tervis, haridus, koduste asjade korraldamine, isiklikud rahaasjad, ostlemine ja riigiteenuste kasutamine.
Üksikute ülesannete näited
Allpool on mõned näited sellest, kuidas meie praegused mudelid tulevad toime igapäevaelu praktiliste ülesannetega.
Pane laps pärast kolimist sobivasse lasteaeda kirja
Võrdle meie uue kodu lähedal asuvaid lasteaedu ja koosta sobivaimatest lühinimekiri.
Valisin välja kolm lasteaeda ja koondasin registreerimiseks vajaliku teabe. Kahe eelistuse osas on veel vaja sinu otsust. Kas soovid lühinimekirja üle vaadata?
Koordineeri vabatahtlikke enne üleujutust
Aita mul korraldada meie kogukonna vabatahtlike tööd, et aidata neljal naabril oma kodu üleujutuse eest kaitsta.
Koostasin lihtsa tegevuskava, mis aitab vabatahtlikel nimetatud kohtade olukorda hinnata ja saabuvaks rängaks ilmaks valmistuda.
Leia mu perele uus kodu
Leia Luzerne’i maakonnas kodu, mis mahub mu eelarvesse, kus on eraldi eluruum ja kust jõuan pärast lapse kooliviimist kiiresti tööle. Lisa omandiõigust tõendav dokument mu ostukorvi, et saaksin selle üle vaadata.
Leidsin ühe kodu, mis vastab su nõuetele. Arvutasin võõrandamismaksu ja lisasin omandiõigust tõendava dokumendi maakonna registri ostukorvi, et saaksid selle üle vaadata.
Vaata mängu koos kaugel elava vanaemaga
Sea sisse lihtne lahendus, et saaksime vanaemaga eri kohtades olles koos mängu vaadata.
Lihtsaim vaatamislahendus on valmis koos varuvariandiga juhuks, kui ülekanne katkeb. Kas soovid, et juhendaksin sind ja vanaema samm-sammult?
Toidu ettevalmistamine vanemale, kes kohaneb hiljuti saadud diabeedidiagnoosiga
Aita mu vanemal hiljuti saadud diabeedidiagnoosiga kohaneda, koostades praktilise ravi- ja toitumiskava.
Esimese nädala kava on valmis ning sisaldab toidukordi, meeldetuletusi ja küsimusi ravimeeskonnale. Kas soovid selle koos üle vaadata, enne kui seda oma vanemaga jagad?
Meie uusimad mudelid saavutavad paljudes LifeVali ülesannetes väga häid tulemusi.
Oleme viimase aasta jooksul treeninud oma mudeleid täitma brauseri, arvuti ja konnektorite kasutamist nõudvaid ülesandeid palju kiiremini, võimekamalt ja paremini kasutaja kavatsustega kooskõlas. Nende võimaluste lisamine ChatGPT‑sse laiendab ka ülesannete ringi, milles mudel saab abiks olla, ning aitab kujundada ChatGPT‑st pelga vestlustööriista asemel iseseisvalt tegutseva isikliku abilise.
Miks see on oluline
Et AGI tooks kasu kogu inimkonnale, peame mõõtma ja edendama mudelite arengut selles, mis on tavainimeste elus oluline. See tähendab, et mudelite teadmiste akadeemilisest hindamisest tuleb minna kaugemale ja mõõta, kui hästi suudavad AI-mudelid aidata inimestel otsuseid teha, igapäevakohustustega toime tulla ja olulisi asju ära teha. Loodame, et LifeVal on samm selle eesmärgi poole.
