LifeVal
KI-Fortschritte bei den Aufgaben messen, die im Alltag wichtig sind.
Die Mission von OpenAI ist es, sicherzustellen, dass künstliche allgemeine Intelligenz der gesamten Menschheit zugutekommt. Für die mehr als eine Milliarde Menschen, die ChatGPT derzeit jede Woche nutzen, wollen wir KI entwickeln, die bei praktischen Herausforderungen im Alltag hilft: etwa Kinderbetreuung finden, staatliche Leistungen in Anspruch nehmen, ein Budget erstellen, sich auf die Schule vorbereiten, Rezepte anpassen, Lebensmittel bestellen oder Trainingspläne entwerfen.
Wer Unterstützung sucht, um sich das Leben zu erleichtern, braucht mehr als Ratschläge oder eine Antwort im Chat. Um als persönliche Assistenz wirklich hilfreich zu sein, sollte ChatGPT Aktionen ausführen können, die Aufgaben tatsächlich erledigen.
Um die Modellleistung bei Alltagsaufgaben im Zeitverlauf zu messen, haben wir eine Evaluation entwickelt. Sie umfasst Aufgaben aus den Bereichen, in denen sich Menschen am meisten Unterstützung durch KI und persönliche Agenten wünschen. Mit dieser Evaluation haben wir im vergangenen Jahr die Fortschritte unserer Modelle bei Alltagsaufgaben verfolgt und gezielt vorangetrieben.
Hintergrund
Um herauszufinden, welche Aufgaben Menschen besonders wichtig sind, haben wir zunächst zwei große Studien herangezogen, die die Zeitverwendung in den USA und international erfassen: die American Time Use Survey(wird in einem neuen Fenster geöffnet) und die Multinational Time Use Study(wird in einem neuen Fenster geöffnet). Zusammen liefern diese Datensätze einen detaillierten Katalog von Alltagsaufgaben, die Menschen verschiedener Bevölkerungsgruppen zu unterschiedlichen Tages- und Jahreszeiten erledigen. Um zu verstehen, wo Menschen KI-Unterstützung am meisten schätzen würden, haben wir diese bestehenden Erhebungen um eine neue, demografisch repräsentative Umfrage mit 3.995 Befragten ergänzt. Zu jeder Aufgabe stellten wir verschiedene Fragen. So wollten wir die Bereiche ermitteln, in denen sich Menschen im Alltag am meisten Unterstützung durch eine persönliche Assistenz wünschen. Die daraus abgeleiteten Aufgaben decken die wichtigsten Bereiche ab, in denen Menschen Hilfe wünschen: Pflege und Betreuung, Gesundheit, Bildung, Haushaltsorganisation, persönliche Finanzen, Einkaufen und den Zugang zu staatlichen Leistungen.
Beispiele einzelner Aufgaben
Die folgenden Beispiele zeigen, wie unsere aktuellen Modelle praktische Aufgaben im Alltag bewältigen.
Nach dem Umzug ein Kind im passenden Kindergarten anmelden
Vergleiche die Kindergärten in der Nähe unseres neuen Zuhauses und nimm die passendsten in die engere Auswahl auf.
Ich habe die Auswahl auf drei Kindergärten eingegrenzt und die Informationen zur Anmeldung zusammengestellt. Bei zwei Punkten musst du noch entscheiden, was dir lieber ist. Möchtest du dir die engere Auswahl ansehen?
Freiwillige vor einem Hochwasser koordinieren
Hilf mir, die Freiwilligen in unserer Gemeinde zu koordinieren, damit sie vier Menschen aus der Nachbarschaft bei Hochwasserschutzmaßnahmen unterstützen können.
Ich habe einen einfachen Maßnahmenplan erstellt, der Freiwilligen hilft, die genannten Standorte zu beurteilen und sich auf das bevorstehende Unwetter vorzubereiten.
Ein neues Zuhause für meine Familie finden
Finde ein Zuhause in Luzerne County, das in mein Budget passt, eine separate Wohneinheit hat und mir nach dem Absetzen meines Kindes an der Schule einen kurzen Arbeitsweg ermöglicht. Lege die Eigentumsurkunde in meinen Warenkorb, damit ich sie prüfen kann.
Ich habe ein Zuhause gefunden, das deinen Anforderungen entspricht. Ich habe die Grunderwerbsteuer berechnet und die Eigentumsurkunde zur Prüfung in deinen Warenkorb im Urkundenportal des Countys gelegt.
Trotz Entfernung gemeinsam mit Oma ein Spiel anschauen
Richte es so ein, dass Oma und ich das Spiel ganz einfach gemeinsam anschauen können.
Die einfachste Möglichkeit, das Spiel gemeinsam anzuschauen, steht fest. Falls der Stream ausfällt, gibt es eine Alternative. Soll ich dir und Oma zeigen, wie es geht?
Mahlzeiten für einen Elternteil vorbereiten, der sich auf eine neue Diabetesdiagnose einstellt
Hilf meinem Elternteil, sich mit einem praktischen Betreuungs- und Ernährungsplan auf die neue Diabetesdiagnose einzustellen.
Der Plan für die erste Woche steht. Er enthält Mahlzeiten, Erinnerungen und Fragen an das Behandlungsteam. Möchtest du ihn gemeinsam durchgehen, bevor du ihn mit deinem Elternteil teilst?
Unsere neuesten Modelle erzielen bei vielen LifeVal-Aufgaben sehr hohe Bewertungen.
Im vergangenen Jahr haben wir unsere Modelle so trainiert, dass sie Aufgaben mit Browsern, Computern und Konnektoren deutlich schneller, leistungsfähiger und besser auf menschliche Absichten abgestimmt bearbeiten. Mit diesen Fähigkeiten kann ChatGPT bei mehr Arten von Aufgaben helfen. So entwickelt sich ChatGPT über ein Chat-Tool hinaus zu einer persönlichen Assistenz, die tatsächlich eigenständig Aktionen ausführen kann.
Warum das wichtig ist
Damit AGI der gesamten Menschheit zugutekommt, müssen wir die Fortschritte der Modelle bei dem messen und verbessern, was Menschen im Alltag wichtig ist. Dafür müssen wir über akademische Wissenstests für Modelle hinausgehen und messen, wie gut KI-Modelle Menschen tatsächlich dabei helfen, Entscheidungen zu treffen, alltägliche Pflichten zu bewältigen und wichtige Aufgaben zu erledigen. Wir hoffen, dass LifeVal ein Schritt auf dem Weg zu diesem Ziel ist.
