LifeVal
Չափում ենք ԱԲ-ի առաջընթացն առօրյա կյանքում կարևոր առաջադրանքներում։
OpenAI-ի առաքելությունն է ապահովել, որ արհեստական ընդհանուր բանականությունը օգուտ բերի ողջ մարդկությանը։ Այսօր ամեն շաբաթ ChatGPT‑ից օգտվում է ավելի քան մեկ միլիարդ մարդ։ Նրանց համար ուզում ենք ստեղծել ԱԲ, որը կօգնի լուծել առօրյա գործնական խնդիրները՝ գտնել երեխաների խնամքի ծառայություն, օգտվել պետական ծառայություններից, կազմել բյուջե, պատրաստվել դպրոցին, հարմարեցնել բաղադրատոմսերը, պատվիրել մթերք, կազմել մարզումների ծրագրեր և ավելին։
Երբ մարդն օգնություն է փնտրում իր կյանքը հեշտացնելու համար, միայն խորհուրդը կամ զրույցում ստացած պատասխանը բավարար չեն։ Իսկապես օգտակար անձնական օգնական լինելու համար ChatGPT‑ն պետք է կարողանա գործել և գործն իրականում ավարտին հասցնել։
Առօրյա առաջադրանքներում մոդելների արդյունքները ժամանակի ընթացքում չափելու համար մենք ստեղծել ենք գնահատման համակարգ։ Այն ընդգրկում է այն ոլորտների առաջադրանքները, որտեղ օգտատերերն ամենից շատ էին ցանկանում օգնություն ստանալ ԱԲ-ից և անձնական գործակալներից։ Անցած տարվա ընթացքում այս գնահատման համակարգով հետևել ենք առօրյա առաջադրանքներում մոդելների արդյունքներին և ուղղորդել դրանց բարելավումը։
Նախապատմություն
Պարզելու համար, թե մարդիկ որ առաջադրանքներն են առավել կարևոր համարում, մենք նախ ուսումնասիրեցինք երկու լայնածավալ հետազոտություն, որոնք հետևում են, թե ինչպես են մարդիկ տնօրինում իրենց ժամանակը ԱՄՆ-ում և աշխարհի տարբեր երկրներում՝ Ժամանակի օգտագործման ամերիկյան հետազոտությունը(բացվում է նոր պատուհանում) և Ժամանակի օգտագործման բազմազգ հետազոտությունը(բացվում է նոր պատուհանում)։ Այս երկու հետազոտությունների տվյալների հավաքածուները միասին մանրամասն պատկերացում են տալիս առօրյա կյանքում մարդկանց կատարած առաջադրանքների մասին՝ ըստ ժողովրդագրական տարբեր խմբերի, օրվա ժամերի և տարվա եղանակների։ Հասկանալու համար, թե որ ոլորտներում մարդիկ առավել կգնահատեն արհեստական բանականության աջակցությունը, մենք լրացրինք այս հետազոտությունները նոր հարցմամբ, որին մասնակցել է 3995 մարդ՝ ժողովրդագրական կազմով բնակչությունը ներկայացնող ընտրանքից։ Յուրաքանչյուր առաջադրանքի վերաբերյալ մենք տարբեր հարցեր տվեցինք՝ պարզելու, թե առօրյա կյանքում մարդիկ հատկապես որ հարցերում կցանկանային օգտվել անձնական օգնականի աջակցությունից։ Արդյունքում առանձնացված առաջադրանքներն ընդգրկում են այն կարևորագույն ոլորտները, որոնցում մարդիկ ցանկանում են աջակցություն ստանալ, այդ թվում՝ խնամք, առողջապահություն, կրթություն, տնային տնտեսության կառավարում, անձնական ֆինանսներ, գնումներ և պետական ծառայություններից օգտվելը։
Առանձին առաջադրանքների օրինակներ
Ստորև բերված են օրինակներ, թե ինչպես են մեր ներկայիս մոդելները կատարում առօրյա կյանքի գործնական առաջադրանքները։
Մեր նորագույն մոդելները LifeVal-ի բազմաթիվ առաջադրանքներում շատ բարձր միավորներ են ստանում։
Անցած տարվա ընթացքում մեր մոդելներն ուսուցանել ենք, որպեսզի դրանք շատ ավելի արագ ու հմուտ կատարեն դիտարկիչի, համակարգչի և միակցիչների օգտագործմամբ առաջադրանքները՝ ավելի լավ համապատասխանելով մարդու մտադրություններին։ Այս հնարավորությունները ChatGPT‑ում հասանելի դարձնելով՝ ընդլայնում ենք նաև այն առաջադրանքների շրջանակը, որոնցում մոդելը կարող է օգնել։ Այդպես ChatGPT‑ն զրույցի գործիքից վերածվում է ինքնուրույն գործելու ունակ անձնական օգնականի։
Ինչու է սա կարևոր
Որպեսզի AGI-ն օգուտ բերի ողջ մարդկությանը, պետք է չափենք և խթանենք մոդելների առաջընթացն այն հարցերում, որոնք կարևոր են սովորական մարդկանց կյանքում։ Դա նշանակում է չսահմանափակվել մոդելների գիտելիքների ակադեմիական գնահատմամբ, այլ իրականում չափել, թե ԱԲ մոդելները որքան լավ կարող են օգնել մարդկանց որոշումներ կայացնել, կատարել առօրյա պարտականությունները և կարևոր գործեր ավարտին հասցնել։ Հուսով ենք՝ LifeVal-ը քայլ է դեպի այդ նպատակը։



























