LifeVal
Оцениваем прогресс ИИ в задачах, важных в повседневной жизни.
Миссия OpenAI — сделать так, чтобы общий искусственный интеллект приносил пользу всему человечеству. Сегодня более миллиарда человек пользуются ChatGPT каждую неделю. Для них мы хотим создать ИИ, который поможет решать практические задачи повседневной жизни: искать варианты ухода за детьми, получать государственные услуги, составлять бюджет, готовиться к школе, адаптировать рецепты, заказывать продукты, разрабатывать планы тренировок и многое другое.
Когда человек ищет помощь, чтобы облегчить свою жизнь, ему нужно больше, чем совет или ответ в чате. Чтобы стать по-настоящему полезным персональным помощником, ChatGPT должен уметь действовать и доводить дела до результата.
Чтобы отслеживать результаты моделей в повседневных задачах, мы создали тест, охватывающий области, в которых пользователи больше всего хотели бы получать помощь от ИИ и персональных агентов. В течение последнего года мы использовали этот тест, чтобы отслеживать и улучшать результаты моделей в повседневных задачах.
Предпосылки
Чтобы определить наиболее значимые для людей задачи, мы начали с двух крупных исследований того, как люди проводят время в США и других странах: Американского исследования использования времени(открывается в новом окне) и Международного исследования использования времени(открывается в новом окне). Вместе эти наборы данных дают подробный перечень повседневных дел людей из разных демографических групп в разное время суток и года. Чтобы понять, где помощь ИИ была бы наиболее ценной, мы дополнили эти исследования новым опросом 3 995 респондентов с демографически репрезентативной выборкой. По каждой задаче мы задавали ряд вопросов, чтобы определить, в каких областях обычные люди больше всего хотели бы получить помощь персонального помощника. Отобранные задачи охватывают важнейшие области, в которых людям нужна помощь: уход за близкими, здоровье, образование, ведение домашних дел, личные финансы, покупки и получение государственных услуг.
Примеры отдельных задач
Ниже приведены примеры того, как наши текущие модели справляются с практическими задачами из повседневной жизни.
Записать ребёнка в подходящий детский сад после переезда
Сравни детские сады рядом с нашим новым домом и выбери самые подходящие.
Я отобрал три детских сада и собрал информацию о порядке зачисления. Вам осталось принять решение по двум вопросам. Хотите посмотреть список?
Организовать работу волонтёров перед наводнением
Помоги организовать работу волонтёров нашего района по подготовке к наводнению: четырём соседям нужна помощь в защите домов от затопления.
Я подготовил простой план действий, который поможет волонтёрам оценить состояние указанных объектов и подготовиться к надвигающейся непогоде.
Найти новый дом для моей семьи
Найди дом в округе Лузерн в пределах моего бюджета, с отдельным жилым блоком и недалеко от работы, чтобы дорога туда после того, как я отвезу ребёнка в школу, не занимала много времени. Добавь документ о праве собственности в мою корзину, чтобы я мог его проверить.
Я нашёл один дом, который соответствует вашим требованиям. Я рассчитал налог на передачу собственности и добавил документ о праве собственности в вашу корзину на сайте окружного реестра для проверки.
Посмотреть матч вместе с бабушкой на расстоянии
Настрой простой способ смотреть матч вместе с бабушкой на расстоянии.
Всё готово для просмотра самым простым способом. Есть и запасной вариант на случай сбоя трансляции. Хотите, я объясню вам с бабушкой всё по шагам?
Организовать питание для родителя, которому недавно диагностировали диабет
Помоги одному из моих родителей адаптироваться к недавно поставленному диагнозу «диабет»: составь практичный план ухода и питания.
План на первую неделю готов: в него входят питание, напоминания и вопросы для лечащих специалистов. Хотите вместе проверить его, прежде чем передать родителю?
Наши новейшие модели показывают очень высокие результаты во многих задачах LifeVal.
За последний год благодаря обучению наши модели стали работать гораздо быстрее, эффективнее и точнее следовать намерениям пользователей в задачах с браузером, компьютером и коннекторами. Добавление этих возможностей в ChatGPT расширяет круг задач, с которыми модель может помочь, превращая ChatGPT из инструмента для общения в полноценного персонального помощника, способного действовать самостоятельно.
Почему это важно
Чтобы AGI приносил пользу всему человечеству, мы должны оценивать и улучшать результаты моделей в том, что важно в жизни обычных людей. Для этого нужно выйти за рамки академических проверок знаний моделей и оценивать, насколько хорошо модели ИИ помогают людям принимать решения, справляться с повседневными обязанностями и решать значимые задачи. Мы надеемся, что LifeVal станет шагом к этой цели.
