LifeVal
Mengukur kemajuan AI dalam tugasan yang penting dalam kehidupan seharian.
Misi OpenAI adalah untuk memastikan kecerdasan am buatan memberi manfaat kepada seluruh umat manusia. Untuk lebih daripada satu bilion orang yang kini menggunakan ChatGPT setiap minggu, kami mahu membangunkan AI yang dapat membantu menangani cabaran praktikal kehidupan seharian, seperti mencari penjagaan anak, mengakses perkhidmatan kerajaan, mencipta belanjawan, membuat persediaan sekolah, mengubah suai resipi, memesan barang dapur, merangka pelan senaman dan banyak lagi.
Apabila seseorang mencari bantuan untuk memudahkan hidup, mereka memerlukan lebih daripada sekadar nasihat atau jawapan dalam sembang. Untuk menjadi pembantu peribadi yang benar-benar berguna, ChatGPT seharusnya mampu mengambil tindakan yang benar-benar menyelesaikan urusan.
Untuk mengukur prestasi model dalam tugasan harian dari semasa ke semasa, kami membangunkan penilaian tugasan yang merangkumi bidang yang paling memerlukan bantuan AI dan ejen peribadi menurut pengguna. Kami menggunakan penilaian ini untuk menjejak dan mendorong peningkatan prestasi model dalam tugasan harian sepanjang tahun lalu.
Latar belakang
Untuk mengenal pasti tugasan yang paling penting bagi orang ramai, kami bermula dengan dua kajian besar yang menjejak cara orang menggunakan masa di A.S. dan di peringkat antarabangsa: Tinjauan Penggunaan Masa Amerika(dibuka dalam tetingkap baru) dan Kajian Penggunaan Masa Multinasional(dibuka dalam tetingkap baru). Bersama-sama, set data ini menyediakan katalog terperinci tugasan kehidupan seharian yang dilakukan orang ramai merentas pelbagai kumpulan demografi, waktu dalam sehari dan musim. Untuk memahami bidang yang paling dihargai oleh orang ramai apabila mendapat bantuan AI, kami memperluas tinjauan sedia ada ini dengan tinjauan baharu terhadap 3,995 responden yang mewakili demografi penduduk. Bagi setiap tugasan, kami mengemukakan pelbagai soalan untuk mengenal pasti bidang yang paling diingini oleh orang biasa untuk mendapatkan bantuan daripada pembantu peribadi. Tugasan yang dikenal pasti merangkumi bidang terpenting yang memerlukan bantuan menurut orang ramai, termasuk penjagaan, kesihatan, pendidikan, pengurusan rumah tangga, kewangan peribadi, membeli-belah dan akses kepada perkhidmatan kerajaan.
Contoh tugasan individu
Berikut ialah beberapa contoh prestasi model semasa kami dalam aliran kerja praktikal kehidupan seharian.
Model terkini kami mendapat skor yang sangat tinggi dalam banyak tugasan LifeVal.
Sepanjang tahun lalu, kami telah melatih model kami agar jauh lebih pantas, lebih berkeupayaan dan lebih selaras dengan kehendak pengguna dalam tugasan yang melibatkan penggunaan pelayar, komputer dan penyambung. Mengaktifkan keupayaan ini dalam ChatGPT turut meluaskan jenis tugasan yang model boleh bantu, serta membawa ChatGPT melangkaui alat sembang ke arah pembantu peribadi yang benar-benar mampu bertindak sebagai ejen.
Mengapa ini penting
Untuk memastikan AGI memberi manfaat kepada seluruh umat manusia, kami perlu mengukur dan meningkatkan kemajuan model dalam perkara yang penting dalam kehidupan orang biasa. Ini bermakna kami perlu melangkaui penilaian akademik terhadap pengetahuan model dan benar-benar mengukur sejauh mana model AI dapat membantu orang membuat keputusan, mengurus tanggungjawab harian dan menyelesaikan perkara yang bermakna. Kami berharap LifeVal merupakan satu langkah ke arah matlamat tersebut.



























