LifeVal
Мерење на напредокот на ВИ во задачите што се важни во секојдневниот живот.
Мисијата на OpenAI е да обезбеди општата вештачка интелигенција да му користи на целото човештво. За повеќе од една милијарда луѓе што моментално го користат ChatGPT секоја недела, сакаме да создадеме ВИ што може да помогне со практичните предизвици во секојдневниот живот: наоѓање грижа за деца, пристап до државни услуги, составување буџет, подготовка за училиште, приспособување рецепти, нарачување намирници, изработка на планови за вежбање и друго.
Кога некој бара помош за да си го олесни животот, потребно му е повеќе од совет или одговор во разговор. За да биде навистина корисен личен асистент, ChatGPT треба да може да презема дејства со кои работите навистина се завршуваат.
За да ја мериме успешноста на моделите во секојдневни задачи низ времето, создадовме евалуација со задачи од областите во кои корисниците најмногу сакаа помош од ВИ и лични агенти. Во изминатата година ја користевме оваа евалуација за да го следиме и поттикнеме подобрувањето на успешноста на моделите во секојдневни задачи.
Контекст
За да ги утврдиме задачите што луѓето ги сметаат за најкорисни, почнавме со две големи истражувања што следат како луѓето го поминуваат времето во САД и на меѓународно ниво: Американската анкета за користење на времето(се отвора во нов прозорец) и Мултинационалната студија за користење на времето(се отвора во нов прозорец). Заедно, овие збирки податоци даваат детален преглед на секојдневните задачи што ги извршуваат луѓе од различни демографски групи, во различни периоди од денот и годишни времиња. За да разбереме каде помошта од ВИ би им била најкорисна на луѓето, ги надополнивме постојните анкети со нова анкета на демографски репрезентативен примерок од 3.995 испитаници. За секоја задача поставивме различни прашања за да ги утврдиме областите во кои обичните луѓе најмногу сакаат помош од личен асистент. Избраните задачи ги опфаќаат најважните области во кои луѓето сакаат помош, вклучувајќи грижа за други, здравје, образование, водење на домаќинството, лични финансии, пазарење и пристап до државни услуги.
Примери за поединечни задачи
Подолу се дадени примери за тоа како нашите тековни модели извршуваат практични работни процеси од секојдневниот живот.
Запиши го детето во соодветна градинка по преселбата
Спореди ги градинките во близина на нашиот нов дом и направи потесен избор на најсоодветните.
Го стеснив изборот на три градинки и ги средив информациите за упис. Треба да одлучите уште за две ваши претпочитања. Сакате да го прегледате потесниот избор?
Организирај волонтери пред поплава
Помогни ми да ги организирам волонтерите од нашата заедница за подготовка за поплави, за да им помогнеме на четворица соседи да ги заштитат своите домови.
Подготвив едноставен акциски план за да им помогнам на волонтерите да ги проценат наведените локации и да се подготват за претстојното невреме.
Најди нов дом за моето семејство
Најди дом во округот Лузерн што се вклопува во мојот буџет, има посебна станбена единица и ми овозможува кратко патување до работа откако ќе ги оставам децата на училиште. Додај го имотниот лист во мојата кошничка за да го прегледам.
Најдов еден дом што ги исполнува вашите барања. Го пресметав данокот на пренос на сопственост и го додадов имотниот лист во вашата кошничка на окружниот регистар за да го прегледате.
Гледај натпревар со баба од далечина
Подготви лесен начин јас и баба да го гледаме натпреварот заедно од далечина.
Наједноставната поставка за гледање е подготвена, со резервна опција ако преносот прекине. Сакате да ви објаснам како се користи, вам и на баба ви?
Подготовка на оброци за родител што се приспособува на неодамнешна дијагноза за дијабетес
Помогни му на мојот родител да се приспособи на неодамнешната дијагноза дијабетес со практичен план за нега и оброци.
Планот за првата недела е подготвен и вклучува оброци, потсетници и прашања за медицинскиот тим. Сакате да го прегледаме заедно пред да го споделите со вашиот родител?
Нашите најнови модели постигнуваат многу високи резултати на многу задачи од LifeVal.
Во изминатата година ги обучувавме нашите модели да бидат многу побрзи, поспособни и поусогласени со намерите на корисниците при задачи со прелистувач, компјутер и конектори. Овозможувањето на овие способности во ChatGPT го проширува и опсегот на задачи со кои моделот може да помогне, претворајќи го ChatGPT од алатка за разговор во вистински личен асистент што може самостојно да дејствува.
Зошто е ова важно
За да обезбедиме AGI да му користи на целото човештво, треба да го мериме и унапредуваме напредокот на моделите во она што е важно во животот на обичните луѓе. Тоа значи да одиме подалеку од академските процени на знаењето на моделите и навистина да мериме колку добро моделите на ВИ им помагаат на луѓето да носат одлуки, да се справуваат со секојдневните обврски и да завршуваат значајни работи. Се надеваме дека LifeVal е чекор кон таа цел.
