LifeVal
Misurare i progressi dell'IA nelle attività che contano nella vita quotidiana.
La missione di OpenAI è garantire che l'intelligenza artificiale generale porti benefici a tutta l'umanità. Per gli oltre un miliardo di persone che oggi usano ChatGPT ogni settimana, vogliamo creare un'IA che possa aiutare ad affrontare le sfide pratiche della vita quotidiana: trovare servizi per l'infanzia, accedere ai servizi pubblici, definire un budget, prepararsi per la scuola, adattare ricette, ordinare la spesa, creare programmi di allenamento e molto altro.
Chi cerca un aiuto per semplificarsi la vita ha bisogno di qualcosa di più di un consiglio o di una risposta in chat. Per essere un assistente personale davvero utile, ChatGPT dovrebbe poter compiere azioni che portino a risultati concreti.
Per misurare nel tempo le prestazioni dei modelli nelle attività quotidiane, abbiamo creato una valutazione basata su attività negli ambiti in cui gli utenti desideravano maggiormente l'aiuto dell'IA e degli agenti personali. Nell'ultimo anno abbiamo usato questa valutazione per monitorare e guidare il miglioramento delle prestazioni dei modelli nelle attività quotidiane.
Il contesto
Per individuare le attività a cui le persone attribuiscono più valore, siamo partiti da due ampi studi che rilevano come le persone impiegano il proprio tempo negli Stati Uniti e a livello internazionale: l'American Time Use Survey(si apre in una nuova finestra) e il Multinational Time Use Study(si apre in una nuova finestra). Insieme, questi set di dati offrono un catalogo dettagliato delle attività quotidiane svolte dalle persone di diversi gruppi demografici, in vari momenti della giornata e nelle diverse stagioni. Per capire in quali ambiti l'assistenza dell'IA sarebbe più apprezzata, abbiamo integrato queste indagini con un nuovo sondaggio su un campione demograficamente rappresentativo di 3.995 persone. Per ogni attività, abbiamo posto diverse domande per individuare gli ambiti in cui le persone comuni desideravano maggiormente l'aiuto di un assistente personale. Le attività così individuate coprono gli ambiti più importanti in cui le persone cercano aiuto, tra cui l'assistenza ai propri cari, la salute, l'istruzione, la gestione domestica, le finanze personali, gli acquisti e l'accesso ai servizi pubblici.
Esempi di singole attività
Ecco alcuni esempi di come i nostri modelli attuali svolgono attività pratiche della vita quotidiana.
Iscriversi alla scuola dell'infanzia giusta dopo un trasloco
Confronta le scuole dell'infanzia vicino alla nostra nuova casa e seleziona le più adatte.
Ho ristretto la scelta a tre scuole dell'infanzia e organizzato le informazioni per l'iscrizione. Restano due preferenze su cui devi decidere. Vuoi esaminare le opzioni selezionate?
Coordinare i volontari in vista di un'alluvione
Aiutami a organizzare il gruppo di volontari della nostra comunità in vista di un'alluvione, per assistere quattro vicini che hanno bisogno di proteggere le loro case.
Ho preparato un semplice piano d'azione per aiutare i volontari a valutare i luoghi indicati e a prepararsi al maltempo in arrivo.
Trovare una nuova casa per la mia famiglia
Trova una casa nella contea di Luzerne che rientri nel mio budget, abbia un'unità abitativa indipendente e mi permetta di raggiungere rapidamente il lavoro dopo aver accompagnato i bambini a scuola. Aggiungi l'atto di proprietà al mio carrello, così posso esaminarlo.
Ho trovato una casa che soddisfa i tuoi requisiti. Ho calcolato l'imposta sul trasferimento e aggiunto l'atto di proprietà al tuo carrello sul portale dei registri della contea, così puoi esaminarlo.
Guardare una partita con la nonna a distanza
Prepara un modo semplice per guardare la partita insieme alla nonna a distanza.
La configurazione più semplice per guardare la partita è pronta, con un'alternativa in caso di problemi con lo streaming. Vuoi che spieghi a te e alla nonna come funziona, passo passo?
Preparare i pasti per un genitore che affronta una recente diagnosi di diabete
Aiuta un mio genitore ad affrontare una recente diagnosi di diabete con un piano pratico per le cure e l'alimentazione.
Il piano per la prima settimana è pronto e comprende pasti, promemoria e domande per l'équipe curante. Vuoi rivederlo insieme prima di condividerlo con il tuo genitore?
I nostri modelli più recenti ottengono punteggi molto alti in numerose attività di LifeVal.
Nell'ultimo anno abbiamo addestrato i nostri modelli a essere molto più veloci, capaci e allineati nelle attività che richiedono l'uso del browser, del computer e dei connettori. Abilitare queste capacità in ChatGPT amplia anche la gamma di attività in cui il modello può essere d'aiuto, contribuendo a trasformare ChatGPT da strumento di chat in un assistente personale davvero in grado di agire.
Perché è importante
Per garantire che l'AGI porti benefici a tutta l'umanità, dobbiamo misurare e favorire i progressi dei modelli in ciò che conta nella vita delle persone comuni. Questo significa andare oltre le valutazioni accademiche delle conoscenze dei modelli e misurare concretamente quanto i modelli di IA siano in grado di aiutare le persone a prendere decisioni, gestire le responsabilità quotidiane e portare a termine attività importanti. Ci auguriamo che LifeVal rappresenti un passo verso questo obiettivo.
