OpenAI 的使命是確保通用人工智慧造福全人類。目前每週有超過十億人使用 ChatGPT。我們希望打造的 AI,能協助他們應對日常生活中的實際挑戰,例如尋找托育服務、申辦政府服務、編列預算、準備上學、調整食譜、訂購食材、設計健身計畫等。
當人們尋求協助,希望讓生活更輕鬆時,所需的不只是建議或聊天回覆。要成為真正有幫助的個人助理,ChatGPT 應該能採取行動,切實把事情辦好。
為了持續衡量模型在日常任務上的表現,我們建立了一套任務評測,涵蓋使用者最希望 AI 和個人代理提供協助的領域。過去一年,我們運用這套評測,追蹤並推動模型在日常任務上的表現進步。
背景
為了找出人們最重視的任務,我們從兩項追蹤美國及國際民眾時間運用情況的大型研究著手:美國時間運用調查(在新視窗中開啟)和多國時間運用研究(在新視窗中開啟)。這些資料集共同提供了一份詳盡的日常生活任務清單,涵蓋不同人口群體在一天中不同時段及不同季節從事的活動。為了了解人們最看重 AI 在哪些方面的協助,我們在現有調查的基礎上,另行訪問了 3,995 位具人口代表性的受訪者。針對每項任務,我們提出多種問題,以找出一般民眾最希望個人助理提供協助的領域。最終選出的任務涵蓋人們最需要協助的重要領域,包括照護、健康、教育、家務管理、個人財務、購物,以及申辦政府服務。
個別任務範例
以下範例展示我們現有模型在日常生活實際工作流程中的表現。
我們最新的模型在許多 LifeVal 任務中都取得了很高的分數。
過去一年,我們透過訓練,讓模型在使用瀏覽器、操作電腦和運用連接器執行任務時,速度大幅提升、能力更強,也更符合使用者的意圖。在 ChatGPT 中啟用這些能力,也擴大了模型能協助處理的任務範圍,讓 ChatGPT 不再只是聊天工具,而是逐步成為能真正自主執行任務的個人助理。
這為何重要
為了確保 AGI 造福全人類,我們必須針對一般民眾生活中重要的事,衡量並推動模型進步。這表示我們不能只從學術角度評估模型的知識,還要實際衡量 AI 模型能在多大程度上協助人們做決定、處理日常事務,以及完成有意義的事。我們期盼 LifeVal 能成為邁向這個目標的一步。



























