LifeVal
Matja e progresit të IA-së në detyrat që kanë rëndësi në jetën e përditshme.
Misioni i OpenAI është të sigurojë që inteligjenca e përgjithshme artificiale t'i sjellë dobi mbarë njerëzimit. Për më shumë se një miliard njerëz që e përdorin aktualisht ChatGPT çdo javë, ne duam të ndërtojmë një IA që mund të ndihmojë në sfidat praktike të jetës së përditshme, si gjetja e kujdesit për fëmijët, përdorimi i shërbimeve shtetërore, hartimi i një buxheti, përgatitja për shkollë, përshtatja e recetave, porositja e ushqimeve, hartimi i planeve të stërvitjes etj.
Kur dikush kërkon ndihmë për ta bërë jetën më të lehtë, ka nevojë për më shumë se këshilla ose një përgjigje në bisedë. Për të qenë një asistent personal vërtet i dobishëm, ChatGPT duhet të arrijë të kryejë veprime që t'i realizojnë vërtet punët.
Për të matur performancën e modeleve me kalimin e kohës në detyrat e përditshme, ne ndërtuam një vlerësim të detyrave që mbulonin fushat ku përdoruesit kërkonin më shumë ndihmë nga IA-ja dhe agjentët personalë. Gjatë vitit të fundit, ne e përdorëm këtë vlerësim për të monitoruar dhe për të nxitur përmirësimin e performancës së modeleve në detyrat e përditshme.
Konteksti
Për të identifikuar detyrat që njerëzit vlerësojnë më shumë, ne filluam me dy studime të mëdha që monitorojnë se si e shpenzojnë njerëzit kohën në SHBA dhe në shtete të tjera: Anketa amerikane e përdorimit të kohës(hapet në një dritare të re) dhe Studimi ndërkombëtar i përdorimit të kohës(hapet në një dritare të re). Së bashku, këto grupe të dhënash ofrojnë një katalog të detajuar të detyrave në jetën e përditshme që njerëzit kryejnë në grupe demografike, orare dhe stinë të ndryshme. Për të kuptuar se ku do ta vlerësonin njerëzit më shumë ndihmën e IA-së, ne i zgjeruam këto anketa ekzistuese me një anketë të re përfaqësuese në aspektin demografik me 3995 të anketuar. Për secilën detyrë, ne bëmë një sërë pyetjesh për të identifikuar fushat ku njerëzit e zakonshëm kërkonin më shumë ndihmë nga një asistent personal. Detyrat e identifikuara mbulojnë fushat kryesore ku njerëzit kërkojnë ndihmë, duke përfshirë kujdesin, shëndetin, arsimin, administrimin e shtëpisë, financat personale, blerjet dhe përdorimin e shërbimeve shtetërore.
Shembuj të detyrave individuale
Më poshtë janë disa shembuj të performancës së modeleve tona aktuale në kryerjen e detyrave praktike të jetës së përditshme.
Modelet tona më të fundit arrijnë rezultate shumë të larta në shumë detyra të LifeVal.
Gjatë vitit të fundit, ne i kemi trajnuar modelet tona që të jenë shumë më të shpejta, më të afta dhe më në përputhje me synimet e përdoruesve në detyrat që përfshijnë përdorimin e shfletuesit, kompjuterit dhe lidhësve. Aktivizimi i këtyre aftësive në ChatGPT zgjeron po ashtu llojet e detyrave ku modeli mund të ndihmojë, duke ndihmuar për ta bërë ChatGPT jo thjesht një mjet bisede, por një asistent personal që vepron vërtet si agjent.
Pse ka rëndësi kjo
Që AGI t'i sjellë dobi mbarë njerëzimit, duhet të matim dhe të përmirësojmë ecurinë e modeleve në ato që kanë rëndësi në jetën e njerëzve të zakonshëm. Kjo do të thotë të shkojmë përtej vlerësimeve akademike të njohurive të modeleve dhe të matim realisht sa mirë mund t'i ndihmojnë modelet e IA-së njerëzit të marrin vendime, të menaxhojnë përgjegjësitë e përditshme dhe të kryejnë punë me rëndësi. Ne shpresojmë që LifeVal të jetë një hap drejt këtij qëllimi.



























