LifeVal
Mierzymy postępy AI w zadaniach ważnych w codziennym życiu.
Misją OpenAI jest zapewnienie, by ogólna sztuczna inteligencja przynosiła korzyści całej ludzkości. Z ChatGPT korzysta obecnie co tydzień ponad miliard osób. Chcemy tworzyć dla nich AI, która pomaga w praktycznych wyzwaniach codzienności: znajdowaniu opieki nad dziećmi, korzystaniu z usług publicznych, planowaniu budżetu, przygotowaniach do szkoły, modyfikowaniu przepisów kulinarnych, zamawianiu zakupów spożywczych, układaniu planów treningowych i wielu innych sprawach.
Kto szuka pomocy w ułatwieniu sobie życia, potrzebuje czegoś więcej niż porady czy odpowiedzi na czacie. Aby być naprawdę pomocnym osobistym asystentem, ChatGPT powinien umieć podejmować działania, które pozwalają faktycznie załatwiać sprawy.
Aby śledzić wyniki modeli w codziennych zadaniach, opracowaliśmy test obejmujący obszary, w których użytkownicy najbardziej potrzebowali pomocy AI i osobistych agentów. Przez ostatni rok korzystaliśmy z tego testu, by śledzić i ukierunkowywać poprawę wyników modeli w codziennych zadaniach.
Kontekst
Aby ustalić, które zadania są dla ludzi najważniejsze, zaczęliśmy od dwóch dużych badań dotyczących sposobów spędzania czasu w USA i na świecie: Amerykańskiego Badania Wykorzystania Czasu(otwiera nowe okno) oraz Międzynarodowego Badania Wykorzystania Czasu(otwiera nowe okno). Łącznie te zbiory danych tworzą szczegółowy katalog codziennych czynności wykonywanych przez osoby z różnych grup demograficznych, o różnych porach dnia i roku. Aby zrozumieć, w jakich obszarach pomoc AI byłaby najbardziej ceniona, uzupełniliśmy te badania o nową ankietę przeprowadzoną na reprezentatywnej demograficznie próbie 3995 respondentów. Przy każdym zadaniu zadawaliśmy szereg pytań, by ustalić, w jakich obszarach zwykli ludzie najbardziej potrzebują pomocy osobistego asystenta. Wyłonione w ten sposób zadania obejmują najważniejsze obszary, w których ludzie potrzebują wsparcia: opiekę nad bliskimi, zdrowie, edukację, zarządzanie gospodarstwem domowym, finanse osobiste, zakupy i korzystanie z usług publicznych.
Przykłady poszczególnych zadań
Poniżej przedstawiamy przykłady tego, jak nasze obecne modele radzą sobie z praktycznymi zadaniami z życia codziennego.
Nasze najnowsze modele osiągają bardzo wysokie wyniki w wielu zadaniach LifeVal.
Przez ostatni rok trenowaliśmy nasze modele, by działały znacznie szybciej, sprawniej i bardziej zgodnie z intencjami użytkowników w zadaniach wymagających korzystania z przeglądarki, komputera i konektorów. Udostępnienie tych możliwości w ChatGPT poszerza też zakres zadań, w których model może pomagać. Dzięki temu ChatGPT staje się czymś więcej niż narzędziem do rozmowy — zmierza w stronę osobistego asystenta, który potrafi rzeczywiście działać.
Dlaczego to ważne
Aby AGI przynosiła korzyści całej ludzkości, musimy mierzyć i przyspieszać postępy modeli w sprawach ważnych w życiu zwykłych ludzi. Oznacza to wyjście poza akademickie testy wiedzy modeli i mierzenie tego, jak skutecznie modele AI pomagają ludziom podejmować decyzje, radzić sobie z codziennymi obowiązkami i załatwiać istotne sprawy. Mamy nadzieję, że LifeVal jest krokiem w stronę tego celu.



























