LifeVal
AI'ın günlük yaşamda önem taşıyan görevlerdeki ilerlemesini ölçüyoruz.
OpenAI'ın misyonu, genel yapay zekanın tüm insanlığa fayda sağlamasını güvence altına almaktır. Bugün her hafta ChatGPT kullanan bir milyardan fazla kişi için çocuk bakımı bulma, kamu hizmetlerine erişme, bütçe oluşturma, okula hazırlanma, yemek tariflerini uyarlama, market siparişi verme, egzersiz planı hazırlama ve daha pek çok günlük işte yardımcı olabilecek AI geliştirmek istiyoruz.
Hayatını kolaylaştırmak için yardım arayan birinin, tavsiyeden veya bir sohbet yanıtından fazlasına ihtiyacı vardır. ChatGPT, gerçekten faydalı bir kişisel asistan olmak için işleri sonuca ulaştıracak eylemlerde bulunabilmelidir.
Modellerin günlük görevlerdeki performansını zaman içinde ölçmek için kullanıcıların AI ve kişisel ajanlardan en çok yardım istediği alanları kapsayan bir görev değerlendirmesi oluşturduk. Geçtiğimiz yıl modellerin günlük görevlerdeki performansını takip etmek ve geliştirmek için bu değerlendirmeyi kullandık.
Arka plan
İnsanların en çok önem verdiği görevleri belirlemek için hem ABD'de hem de uluslararası düzeyde insanların zamanlarını nasıl geçirdiğini izleyen iki büyük araştırmadan yola çıktık: Amerikan Zaman Kullanımı Anketi(yeni bir pencerede açılır) ve Çok Uluslu Zaman Kullanımı Araştırması(yeni bir pencerede açılır). Bu veri kümeleri birlikte, farklı demografik gruplardan insanların günün farklı saatlerinde ve farklı mevsimlerde yaptığı günlük işleri ayrıntılı biçimde ortaya koyuyor. İnsanların AI desteğini en çok hangi alanlarda değerli bulacağını anlamak için bu mevcut anketleri, demografik açıdan temsili 3.995 katılımcıyla gerçekleştirdiğimiz yeni bir anketle genişlettik. İnsanların günlük yaşamlarında kişisel bir asistandan en çok hangi alanlarda yardım istediğini belirlemek için her görev hakkında çeşitli sorular sorduk. Ortaya çıkan görevler; bakım verme, sağlık, eğitim, ev işlerinin yönetimi, kişisel finans, alışveriş ve kamu hizmetlerine erişim dahil, insanların yardım almak istediği en önemli alanları kapsıyor.
Tekil görev örnekleri
Aşağıda, mevcut modellerimizin günlük hayattaki pratik iş akışlarında nasıl performans gösterdiğine dair örnekler yer alıyor.
En yeni modellerimiz birçok LifeVal görevinde çok yüksek puanlar alıyor.
Son bir yılda modellerimizi tarayıcı kullanımı, bilgisayar kullanımı ve bağlayıcılarla ilgili görevlerde çok daha hızlı, daha yetenekli ve kullanıcı niyetiyle daha uyumlu olacak şekilde eğittik. Bu yeteneklerin ChatGPT'de etkinleştirilmesi, modelin yardımcı olabileceği görev türlerini de genişletiyor. Böylece ChatGPT, bir sohbet aracının ötesine geçerek kendi başına harekete geçebilen gerçek bir kişisel asistana dönüşüyor.
Neden önemli?
AGI (genel yapay zeka) teknolojisinin tüm insanlığa fayda sağlaması için modellerin, insanların günlük yaşamlarında önem taşıyan konulardaki ilerlemesini ölçmemiz ve geliştirmemiz gerekiyor. Bu da model bilgisini akademik açıdan değerlendirmenin ötesine geçerek AI modellerinin insanlara karar verme, günlük sorumluluklarını yönetme ve anlamlı işleri tamamlama konusunda ne kadar yardımcı olabildiğini ölçmek demek. LifeVal'ın bu hedefe doğru bir adım olmasını umuyoruz.



























