LifeVal
Meriame pokrok AI pri úlohách, na ktorých v každodennom živote záleží.
Poslaním OpenAI je zabezpečiť, aby všeobecná umelá inteligencia prinášala úžitok celému ľudstvu. Pre viac než miliardu ľudí, ktorí dnes každý týždeň používajú ChatGPT, chceme vytvoriť AI, ktorá pomôže s praktickými výzvami každodenného života: nájsť starostlivosť o deti, využiť služby štátnej správy, zostaviť rozpočet, pripraviť sa do školy, upraviť recepty, objednať potraviny, navrhnúť tréningový plán a mnoho ďalšieho.
Keď niekto hľadá pomoc, ktorá mu uľahčí život, potrebuje viac než radu či odpoveď v čete. Aby bol ChatGPT skutočne užitočným osobným asistentom, mal by dokázať konať a veci naozaj vybaviť.
Na meranie vývoja výkonnosti modelov pri každodenných úlohách sme vytvorili hodnotenie zahŕňajúce úlohy z oblastí, v ktorých používatelia najviac žiadali pomoc od AI a osobných agentov. Toto hodnotenie sme v uplynulom roku používali na sledovanie a cielené zlepšovanie výkonnosti modelov pri každodenných úlohách.
Východiská
Aby sme určili, ktoré úlohy ľudia považujú za najdôležitejšie, vychádzali sme z dvoch rozsiahlych štúdií sledujúcich, ako ľudia trávia čas v USA aj vo svete: Amerického prieskumu využívania času(otvorí sa v novom okne) a Medzinárodnej štúdie využívania času(otvorí sa v novom okne). Tieto súbory údajov spoločne poskytujú podrobný prehľad každodenných činností ľudí z rôznych demografických skupín v rôznych častiach dňa a ročných obdobiach. Aby sme pochopili, kde by ľudia pomoc AI ocenili najviac, doplnili sme tieto existujúce prieskumy o nový demograficky reprezentatívny prieskum s 3 995 respondentmi. Pri každej úlohe sme kládli rôzne otázky, aby sme zistili, v ktorých oblastiach by bežní ľudia najviac uvítali pomoc osobného asistenta. Výsledný súbor úloh pokrýva najdôležitejšie oblasti, v ktorých ľudia potrebujú pomoc, vrátane opatrovania, zdravia, vzdelávania, správy domácnosti, osobných financií, nakupovania a využívania služieb štátnej správy.
Príklady jednotlivých úloh
Nižšie uvádzame niekoľko príkladov, ako si naše súčasné modely poradia s praktickými úlohami z každodenného života.
Naše najnovšie modely dosahujú v mnohých úlohách LifeVal veľmi vysoké skóre. Zobraziť viac
Za posledný rok sme naše modely trénovali tak, aby boli pri práci s prehliadačom, počítačom a konektormi oveľa rýchlejšie, schopnejšie a lepšie zosúladené s ľudskými zámermi. Sprístupnením týchto schopností v ChatGPT sa rozširuje aj okruh úloh, s ktorými model dokáže pomôcť. ChatGPT sa tak posúva od nástroja na četovanie k skutočnému osobnému asistentovi schopnému samostatne konať.
Prečo je to dôležité
Ak má AGI prinášať úžitok celému ľudstvu, musíme merať a podporovať pokrok modelov v tom, na čom v živote bežných ľudí záleží. To znamená ísť nad rámec akademického hodnotenia znalostí modelov a skutočne merať, ako dobre dokážu modely AI pomáhať ľuďom rozhodovať sa, zvládať každodenné povinnosti a dosahovať zmysluplné výsledky. Dúfame, že LifeVal predstavuje krok k tomuto cieľu.



























