LifeVal
Мерење напретка AI-ја у задацима важним за свакодневни живот.
Мисија компаније OpenAI је да обезбеди да општа вештачка интелигенција користи целом човечанству. За више од милијарду људи који тренутно користе ChatGPT сваке недеље желимо да развијемо AI који може да помогне у решавању практичних изазова свакодневног живота: проналажењу некога ко ће чувати децу, приступу државним услугама, планирању буџета, припреми за школу, прилагођавању рецепата, наручивању намирница, осмишљавању планова вежбања и још много тога.
Када неко тражи помоћ да себи олакша живот, потребно му је више од савета или одговора у ћаскању. Да би био заиста користан лични асистент, ChatGPT треба да буде у стању да предузима радње којима се послови стварно обављају.
Да бисмо пратили учинак модела на свакодневним задацима током времена, направили смо евалуацију која обухвата области у којима су корисници највише желели помоћ AI-ја и личних агената. Током протекле године користили смо ову евалуацију да пратимо и подстичемо побољшање учинка модела на свакодневним задацима.
Контекст
Да бисмо утврдили који су задаци људима најважнији, кренули смо од две велике студије које прате како људи проводе време у САД и широм света: Америчке анкете о коришћењу времена(отвара се у новом прозору) и Мултинационалне студије о коришћењу времена(отвара се у новом прозору). Заједно, ови скупови података пружају детаљан преглед свакодневних задатака које људи обављају у различитим демографским групама, деловима дана и годишњим добима. Да бисмо разумели у чему би људима помоћ AI-ја највише значила, допунили смо постојећа истраживања новом анкетом на демографски репрезентативном узорку од 3.995 испитаника. За сваки задатак поставили смо низ питања како бисмо утврдили у којим областима људи највише желе помоћ личног асистента. Тако добијени задаци обухватају најважније области у којима људи желе помоћ, укључујући бригу о другима, здравље, образовање, вођење домаћинства, личне финансије, куповину и приступ државним услугама.
Примери појединачних задатака
У наставку су примери како наши актуелни модели обављају практичне задатке из свакодневног живота.
Наши најновији модели постижу веома високе резултате на многим задацима у оквиру LifeVal-а.
Током протекле године обучавали смо наше моделе да буду знатно бржи, способнији и усклађенији са намерама корисника у задацима који укључују коришћење прегледача, рачунара и конектора. Омогућавање ових способности у ChatGPT‑у проширује и распон задатака у којима модел може да помогне, па ChatGPT од алатке за ћаскање постаје лични асистент који заиста може самостално да делује.
Зашто је ово важно
Да бисмо обезбедили да AGI користи целом човечанству, морамо да меримо и подстичемо напредак модела у ономе што је важно у животу обичних људи. То значи да треба да одемо даље од академских процена знања модела и заиста меримо колико добро AI модели помажу људима да доносе одлуке, управљају свакодневним обавезама и обаве оно што им је важно. Надамо се да LifeVal представља корак ка том циљу.



























