LifeVal
Ngukur kemajuan AI ing tugas sing penting tumrap urip saben dina.
Misi OpenAI yaiku mesthèkaké kecerdhasan umum tiruan migunani kanggo kabèh manungsa. Kanggo luwih saka samilyar wong sing saiki nganggo ChatGPT saben minggu, kita kepéngin mbangun AI sing bisa mbantu ngrampungaké tantangan praktis ing urip saben dina, kayata golek pangasuhan anak, ngaksès layanan pamaréntah, nyusun anggaran, nyiapaké kabutuhan sekolah, ngowahi resèp, mesen bahan pangan, ngrancang latihan olahraga, lan liya-liyané.
Nalika wong golek pitulungan supaya uripé luwih gampang, sing dibutuhaké ora mung saran utawa wangsulan ing pacelathon. Supaya dadi asisten pribadi sing tenan migunani, ChatGPT kudu bisa tumindak lan ngrampungaké pakaryan kanthi nyata.
Kanggo ngukur kinerja model ing tugas saben dina saka wektu menyang wektu, kita nyusun évaluasi tugas sing nyakup babagan-babagan sing paling dikarepaké pangguna kanggo njaluk pitulungan saka AI lan agen pribadi. Sajroning setaun pungkasan, kita nganggo évaluasi iki kanggo nglacak lan nyurung paningkatan kinerja model ing tugas saben dina.
Lelandhesan
Kanggo ngenali tugas sing paling dianggep penting, kita miwiti saka rong panaliten gedhé sing nglacak panganggoné wektu wong ing AS lan ing donya: Survei Panganggoné Wektu ing Amerika(mbukak ing jendhela anyar) lan Panaliten Panganggoné Wektu ing Manéka Negara(mbukak ing jendhela anyar). Gabungan kumpulan data iki nyedhiyakaké katalog rinci tugas urip saben dina sing ditindakaké wong saka manéka klompok démografi, ing manéka wektu lan mangsa. Kanggo mangertèni ing babagan apa pitulungan AI paling diajeni, kita ngembangaké survei mau kanthi survei anyar marang 3.995 respondèn sing makili démografi masyarakat. Kanggo saben tugas, kita ngajokaké manéka pitakon kanggo ngenali babagan sing paling dikarepaké masyarakat umum kanggo njaluk pitulungan saka asisten pribadi. Tugas-tugas sing dipikolehi nyakup babagan paling penting sing dibutuhaké wong kanggo njaluk pitulungan, kalebu pangasuhan lan perawatan, kasarasan, pendhidhikan, administrasi omah tangga, keuangan pribadi, blanja, lan ngaksès layanan pamaréntah.
Conto tugas siji-siji
Ing ngisor iki ana sawetara conto kinerja model saiki kanggo ngrampungaké rerangkening tugas praktis ing urip saben dina.
Model paling anyar kita éntuk skor dhuwur banget ing akèh tugas LifeVal.
Sajroning setaun pungkasan, kita wis nglatih model supaya luwih cepet, luwih mumpuni, lan luwih selaras karo karepé pangguna nalika nindakaké tugas nganggo browser, komputer, lan konektor. Ngaktifaké kabisan iki ing ChatGPT uga nambahi jinis tugas sing bisa dibantu model, saéngga ChatGPT ora mung dadi piranti pacelathon, nanging saya cedhak dadi asisten pribadi sing tenan bisa tumindak kanthi mandhiri.
Ngapa iki penting
Kanggo mesthèkaké AGI migunani kanggo kabèh manungsa, kita kudu ngukur lan ningkataké kemajuan model ing babagan sing penting tumrap uripé masyarakat umum. Tegesé, kita ora cukup mung mbiji kawruh model sacara akademis, nanging kudu tenan ngukur sepira apike model AI bisa mbantu wong njupuk kaputusan, ngatur tanggung jawab saben dina, lan ngrampungaké perkara sing migunani. Kita ngarep-arep LifeVal dadi salah siji langkah tumuju ancas kasebut.



























