LifeVal
Измерване на напредъка на AI при задачите, които имат значение в ежедневието.
Мисията на OpenAI е да гарантира, че изкуственият общ интелект е от полза за цялото човечество. За над един милиард души, които днес използват ChatGPT всяка седмица, искаме да създадем AI, който помага с практическите предизвикателства на ежедневието: намиране на грижа за децата, достъп до държавни услуги, съставяне на бюджет, подготовка за училище, адаптиране на рецепти, поръчване на хранителни продукти, изготвяне на тренировъчни планове и други.
Когато човек търси помощ, за да улесни живота си, той се нуждае от нещо повече от съвет или отговор в чата. За да бъде наистина полезен личен асистент, ChatGPT трябва да може да предприема действия, които действително вършат работа.
За да измерваме представянето на моделите при ежедневни задачи във времето, създадохме тест със задачи в областите, в които потребителите най-много искат помощ от AI и лични агенти. През изминалата година използвахме този тест, за да проследяваме и насърчаваме подобряването на моделите при ежедневни задачи.
Предистория
За да определим кои задачи са най-важни за хората, започнахме с две мащабни проучвания, които проследяват как хората разпределят времето си в САЩ и по света: Американското проучване на използването на времето(отваря се в нов прозорец) и Международното проучване на използването на времето(отваря се в нов прозорец). Заедно тези набори от данни дават подробен каталог на ежедневните задачи, които хората от различни демографски групи изпълняват през различните часове на деня и сезони. За да разберем къде хората биха оценили най-високо помощта на AI, допълнихме съществуващите проучвания с ново демографски представително проучване сред 3995 респонденти. За всяка задача зададохме разнообразни въпроси, за да определим областите, в които обикновените хора най-много искат помощ от личен асистент. Полученият набор от задачи обхваща най-важните области, в които хората искат помощ, включително полагане на грижи, здраве, образование, административни въпроси на домакинството, лични финанси, пазаруване и достъп до държавни услуги.
Примери за отделни задачи
По-долу са дадени примери за това как настоящите ни модели се справят с практически задачи от ежедневието.
Записване в подходящата детска градина след преместване
Сравни детските градини близо до новия ни дом и подбери най-подходящите.
Подбрах три детски градини и систематизирах информацията за записване. Остават два въпроса, по които трябва да посочиш предпочитанията си. Искаш ли да прегледаш подбраните варианти?
Организиране на доброволци преди наводнение
Помогни ми да организирам доброволците в нашата общност, за да помогнат на четирима съседи да защитят домовете си от наводнение.
Подготвих лесен за следване план за действие, който да помогне на доброволците да оценят посочените обекти и да се подготвят за очакваното опасно време.
Намери нов дом за семейството ми
Намери дом в окръг Лузърн, който е в рамките на бюджета ми, има отделно жилищно помещение и ми позволява да стигам бързо до работа, след като оставя децата на училище. Добави документа за собственост в количката ми, за да го прегледам.
Намерих един дом, който отговаря на изискванията ти. Изчислих данъка при прехвърляне и добавих документа за собственост в количката ти в окръжния регистър, за да го прегледаш.
Гледане на мач заедно с баба от разстояние
Подготви лесен начин с баба да гледаме мача заедно от разстояние.
Най-лесният вариант за гледане е готов, с резервно решение, ако излъчването прекъсне. Искаш ли да обясня стъпките на теб и баба ти?
Подготовка на храна за родител, който се адаптира към наскоро поставена диагноза диабет
Помогни на моя родител да се адаптира към наскоро поставената диагноза диабет с практичен план за грижи и хранене.
Планът за първата седмица е готов и включва меню, напомняния и въпроси към медицинския екип. Искаш ли да го прегледаме заедно, преди да го споделиш с родителя си?
Най-новите ни модели постигат много високи резултати при много от задачите в LifeVal.
През изминалата година обучавахме моделите си да работят много по-бързо, по-умело и в по-голямо съответствие с намеренията на потребителите при задачи с браузър, компютър и конектори. Въвеждането на тези възможности в ChatGPT разширява и кръга от задачи, с които моделът може да помага, превръщайки ChatGPT от инструмент за чат в истински личен асистент, способен да действа самостоятелно.
Защо това е важно
За да гарантираме, че AGI е от полза за цялото човечество, трябва да измерваме и насърчаваме напредъка на моделите в нещата, които имат значение в живота на обикновените хора. Това означава да надхвърлим академичните оценки на знанията на моделите и да измерваме доколко AI моделите действително помагат на хората да вземат решения, да се справят с ежедневните си отговорности и да вършат значими за тях неща. Надяваме се, че LifeVal е стъпка към тази цел.
