LifeVal
Mittaamme tekoälyn kehitystä arjen kannalta tärkeissä tehtävissä.
OpenAI:n tehtävänä on varmistaa, että yleinen tekoäly hyödyttää koko ihmiskuntaa. Haluamme kehittää tekoälyä, joka auttaa ChatGPT:n yli miljardia viikoittaista käyttäjää arjen käytännön haasteissa. Näitä ovat esimerkiksi lastenhoidon löytäminen, viranomaispalvelujen käyttö, budjetin laatiminen, kouluun valmistautuminen, reseptien muokkaaminen, ruokaostosten tilaaminen ja treeniohjelmien suunnittelu.
Arjen helpottamiseen tarvitaan muutakin kuin neuvoja tai vastaus keskustelussa. Ollakseen aidosti hyödyllinen henkilökohtainen avustaja ChatGPT:n pitäisi pystyä toimimaan niin, että asiat todella tulevat hoidetuiksi.
Rakensimme arvioinnin, jolla voimme mitata mallien suorituskyvyn kehitystä arjen tehtävissä. Sen tehtävät kattavat alueet, joilla käyttäjät kaipasivat eniten apua tekoälyltä ja henkilökohtaisilta agenteilta. Olemme viime vuoden aikana käyttäneet tätä arviointia mallien suorituskyvyn seuraamiseen ja parantamiseen arjen tehtävissä.
Taustaa
Selvittääksemme, mitä tehtäviä ihmiset pitävät tärkeimpinä, otimme lähtökohdaksi kaksi laajaa ajankäyttötutkimusta. Ne seuraavat ihmisten ajankäyttöä Yhdysvalloissa ja kansainvälisesti: Yhdysvaltain ajankäyttötutkimus(avautuu uudessa ikkunassa) ja monikansallinen ajankäyttötutkimus(avautuu uudessa ikkunassa). Yhdessä nämä aineistot tarjoavat yksityiskohtaisen luettelon arjen tehtävistä, joita eri väestöryhmiin kuuluvat ihmiset tekevät eri vuorokauden- ja vuodenaikoina. Selvittääksemme, missä tekoälyn apua arvostettaisiin eniten, täydensimme näitä tutkimuksia uudella, väestörakennetta edustavalla kyselyllä, johon vastasi 3 995 henkilöä. Esitimme kustakin tehtävästä useita kysymyksiä tunnistaaksemme ne alueet, joilla tavalliset ihmiset kaipasivat eniten apua henkilökohtaiselta avustajalta. Näin valitut tehtävät kattavat tärkeimmät alueet, joilla ihmiset haluavat apua: hoivan, terveyden, koulutuksen, kotitalouden asioiden hoidon, henkilökohtaisen talouden, ostokset ja viranomaispalvelujen käytön.
Yksittäisiä tehtäväesimerkkejä
Alla on esimerkkejä siitä, miten nykyiset mallimme suoriutuvat käytännön tehtäväkokonaisuuksista arjessa.
Uusimmat mallimme saavat erittäin hyviä tuloksia monissa LifeVal-tehtävissä.
Olemme viime vuoden aikana kouluttaneet mallejamme huomattavasti nopeammiksi, kyvykkäämmiksi ja paremmin käyttäjien tavoitteiden mukaisesti toimiviksi selaimen, tietokoneen ja liittimien käyttöä vaativissa tehtävissä. Näiden kykyjen käyttöönotto ChatGPT:ssä laajentaa myös niiden tehtävien kirjoa, joissa malli voi auttaa. Samalla ChatGPT kehittyy keskustelutyökalusta kohti aidosti toimivaa henkilökohtaista agenttiavustajaa.
Miksi tämä on tärkeää
Varmistaaksemme, että AGI hyödyttää koko ihmiskuntaa, meidän on mitattava ja edistettävä mallien kehitystä tavallisten ihmisten elämän kannalta tärkeissä asioissa. Se tarkoittaa, ettei mallien tietämystä arvioida vain akateemisesti. On myös mitattava, kuinka hyvin tekoälymallit todella auttavat ihmisiä tekemään päätöksiä, hoitamaan arjen velvollisuuksia ja saamaan merkityksellisiä asioita aikaan. Toivomme, että LifeVal on askel kohti tätä tavoitetta.



























