LifeVal
Mesurament del progrés de la IA en les tasques cabdals de la vida quotidiana.
La missió d'OpenAI és garantir que la intel·ligència artificial general beneficiï tota la humanitat. Per als més de mil milions de persones que actualment fan servir el ChatGPT cada setmana, volem crear una IA que pugui ajudar amb els reptes pràctics del dia a dia, com ara trobar serveis de cura infantil, accedir a serveis públics, dissenyar un pressupost, preparar-se per a l'escola, adaptar receptes, comprar aliments, dissenyar plans d'entrenament i molt més.
Quan algú busca ajuda per fer-se la vida més fàcil, necessita més que consells o una resposta a la conversa de xat. Per esdevenir un assistent personal realment útil, el ChatGPT ha de poder dur a terme accions que aportin solucions tangibles.
Per mesurar l'evolució del rendiment dels models en tasques quotidianes, vam crear una avaluació que comprèn tasques dels àmbits en què els usuaris més necessitaven l'ajuda de la IA i dels agents personals. Hem fet servir aquesta avaluació per fer un seguiment de la millora del rendiment dels models i impulsar-la en tasques quotidianes durant l'últim any.
Context
Per identificar les tasques que els usuaris valoren més, vam partir de dos grans estudis que analitzen a què dedica el temps la població, tant als Estats Units com a escala internacional: l'Enquesta nord-americana sobre l'ús del temps(s'obre en una finestra nova) i l'Estudi multinacional sobre l'ús del temps(s'obre en una finestra nova). En conjunt, aquestes dades ofereixen un catàleg detallat de les tasques quotidianes que fan les persones de diferents grups demogràfics, en diferents moments del dia i en diferents estacions de l'any. Per entendre en quins àmbits es valoraria més l'ajuda de la IA, vam ampliar aquestes enquestes amb una altra de nova, demogràficament representativa, que va sumar 3.995 participants. Per a cada tasca, vam plantejar diverses preguntes per identificar els àmbits en què els usuaris més necessitaven l'ajuda d'un assistent personal. Les tasques resultants cobreixen els àmbits més importants en què es necessita ajuda, com ara la cura de persones, la salut, l'educació, la gestió de la llar, les finances personals, les compres i l'accés a serveis públics.
Exemples de tasques individuals
A continuació, mostrem alguns exemples de com els nostres models actuals resolen processos pràctics de la vida quotidiana.
Fer la matrícula a l'escola bressol més adequada després d'una mudança
Compara escoles bressol a prop de la nostra nova llar i fes una selecció de les més adequades.
He seleccionat tres escoles bressol i he organitzat la informació de la matrícula. Encara has de decidir dues preferències. Vols revisar la selecció?
Coordinació de voluntaris davant d'una possible inundació
Ajuda'm a organitzar l'equip de voluntaris de la comunitat per ajudar quatre veïns que necessiten protegir els seus habitatges davant de possibles inundacions.
He preparat un pla d'acció senzill per ajudar els voluntaris a avaluar els llocs esmentats i a preparar-se per al mal temps que s'acosta.
Trobar una nova llar per a la meva família
Busca un habitatge al comtat de Luzerne que s'ajusti al meu pressupost, tingui un habitatge independent i em permeti arribar ràpidament a la feina després de deixar els nens a l'escola. Afegeix-ne l'escriptura al carretó perquè la pugui revisar.
He trobat un habitatge que compleix els teus requisits. N'he calculat l'impost sobre transmissions patrimonials i n'he afegit l'escriptura al teu carretó de tràmits del registre de la propietat perquè la revisis.
Mirar un partit amb l'àvia a distància
Organitza una manera senzilla perquè l'àvia i jo puguem veure el partit plegats a distància.
Ja tinc preparada l'opció més senzilla per veure el partit, amb una alternativa si falla la retransmissió. Vols que us expliqui com funciona pas a pas, a tu i a l'àvia?
Preparar àpats per al pare o la mare que s'adaptin a un diagnòstic recent de diabetis
Ajuda el meu pare o la meva mare a adaptar-se a un diagnòstic recent de diabetis amb un pla pràctic de cures i àpats.
El pla de la primera setmana ja està a punt, amb àpats, recordatoris i preguntes per a l'equip assistencial. Vols que el revisem plegats abans de compartir-lo amb el teu pare o la teva mare?
Els nostres models més recents obtenen puntuacions molt altes en moltes tasques de LifeVal.
Durant l'últim any, hem entrenat els nostres models perquè siguin molt més ràpids, capaços i alineats en les tasques que impliquen l'ús del navegador, de l'ordinador i de connectors. En activar aquestes capacitats al ChatGPT, també s'amplia el ventall de tasques en què el model pot ajudar i s'aconsegueix que el ChatGPT vagi més enllà d'una eina de conversa per esdevenir un assistent personal amb autèntica capacitat d'actuació.
Per què és important
Per garantir que l'AGI beneficiï tota la humanitat, hem de mesurar i impulsar el progrés dels models en el que és cabdal per a la vida de les persones. Això implica anar més enllà de les avaluacions acadèmiques dels coneixements dels models i mesurar fins a quin punt els models d'IA poden ajudar les persones a prendre decisions, a gestionar les responsabilitats quotidianes i a dur a terme accions que importen de debò. Confiem que LifeVal sigui un pas cap a aquest objectiu.
