LifeVal
Оцінюємо прогрес ШІ в завданнях, важливих у повсякденному житті.
Місія OpenAI — забезпечити, щоб штучний загальний інтелект приносив користь усьому людству. Для понад мільярда людей, які щотижня користуються ChatGPT, ми прагнемо створити ШІ, що допомагатиме з практичними повсякденними завданнями: пошуком догляду за дітьми, отриманням державних послуг, складанням бюджету, підготовкою до школи, адаптацією рецептів, замовленням продуктів, розробкою планів тренувань тощо.
Коли людина шукає допомоги, щоб полегшити своє життя, їй потрібно більше, ніж порада чи відповідь у чаті. Щоб бути справді корисним персональним помічником, ChatGPT має вміти діяти й доводити справи до кінця.
Щоб відстежувати результати моделей у повсякденних завданнях із плином часу, ми створили набір тестів, що охоплює сфери, у яких користувачі найбільше потребували допомоги ШІ та персональних агентів. Протягом останнього року ми використовували ці тести, щоб відстежувати й покращувати результати моделей у повсякденних завданнях.
Передумови
Щоб визначити найважливіші для людей завдання, ми почали з двох великих досліджень того, як люди витрачають час у США та інших країнах: Американського дослідження використання часу(відкривається у новому вікні) та Міжнародного дослідження використання часу(відкривається у новому вікні). Разом ці набори даних дають докладний перелік повсякденних справ людей із різних демографічних груп у різний час доби та різні пори року. Щоб зрозуміти, у чому люди найбільше цінували б допомогу ШІ, ми доповнили наявні дослідження новим демографічно репрезентативним опитуванням 3 995 респондентів. Для кожного завдання ми ставили низку запитань, щоб визначити сфери, у яких звичайні люди найбільше хотіли б отримувати допомогу персонального помічника. Відібрані завдання охоплюють найважливіші сфери, у яких люди потребують допомоги: догляд за близькими, здоров’я, освіту, ведення домашніх справ, особисті фінанси, покупки й отримання державних послуг.
Приклади окремих завдань
Нижче наведено кілька прикладів того, як наші поточні моделі виконують практичні повсякденні завдання.
Записати дитину до відповідного садка після переїзду
Порівняй дитячі садки поблизу нашого нового дому й добери найкращі варіанти.
Я відібрав три дитячі садки й упорядкував інформацію про зарахування. Два побажання ще потребують вашого рішення. Хочете переглянути добірку?
Скоординувати волонтерів перед повінню
Допоможи мені організувати волонтерів нашої громади для підготовки до повені: чотирьом сусідам потрібна допомога із захистом будинків від затоплення.
Я підготував простий план дій, який допоможе волонтерам оцінити стан зазначених об'єктів і підготуватися до сильної негоди.
Знайти новий дім для моєї сім’ї
Знайди будинок в окрузі Люцерн у межах мого бюджету, з окремим житловим блоком і недовгою дорогою на роботу після того, як відвезу дитину до школи. Додай документ про право власності до мого кошика для перегляду.
Я знайшов один будинок, що відповідає вашим вимогам. Я розрахував податок на передачу права власності й додав документ про право власності до вашого кошика на сайті реєстру округу для перегляду.
Подивитися матч разом із бабусею на відстані
Виконай найпростіші налаштування, щоб ми з бабусею могли дистанційно подивитися матч.
Найпростіший варіант перегляду готовий, із запасним планом на випадок збою трансляції. Хочете, щоб я пояснив вам із бабусею все крок за кроком?
Підготувати їжу для одного із батьків, який пристосовується до життя з нещодавно діагностованим діабетом
Допоможи одному з моїх батьків пристосуватися до життя з нещодавно діагностованим діабетом, склавши практичний план догляду й харчування.
План на перший тиждень готовий: харчування, нагадування й запитання до медичної команди. Хочете переглянути його разом, перш ніж передати одному з батьків?
Наші найновіші моделі отримують дуже високі оцінки в багатьох завданнях LifeVal.
За останній рік завдяки навчанню наші моделі стали значно швидшими, вправнішими й краще узгодженими з намірами користувачів у завданнях із використанням браузера, комп’ютера та конекторів. Упровадження цих можливостей у ChatGPT також розширює коло завдань, із якими може допомогти модель, перетворюючи ChatGPT з інструмента для спілкування на справжнього персонального помічника, здатного самостійно діяти.
Чому це важливо
Щоб AGI приносив користь усьому людству, нам потрібно вимірювати прогрес моделей і вдосконалювати їх у тому, що важливо в житті звичайних людей. Для цього слід вийти за межі академічних оцінок знань моделей і вимірювати, наскільки добре моделі ШІ допомагають людям ухвалювати рішення, справлятися з повсякденними обов’язками й виконувати важливі справи. Ми сподіваємося, що LifeVal стане кроком до цієї мети.
