LifeVal
Medir el progreso de la IA en las tareas que importan en la vida cotidiana.
La misión de OpenAI es garantizar que la inteligencia artificial general beneficie a toda la humanidad. Queremos crear una IA que ayude a las más de mil millones de personas que hoy usan ChatGPT cada semana con los desafíos prácticos de la vida cotidiana, como encontrar servicios de cuidado infantil, acceder a servicios gubernamentales, crear un presupuesto, prepararse para la escuela, adaptar recetas, pedir alimentos, diseñar planes de ejercicio y más.
Cuando alguien busca ayuda para facilitar su vida, necesita más que consejos o una respuesta en un chat. Para ser un asistente personal verdaderamente útil, ChatGPT debe poder actuar y llevar las tareas a la práctica.
Para medir la evolución del desempeño de los modelos en tareas cotidianas, creamos una evaluación con tareas de las áreas en las que los usuarios más querían recibir ayuda de la IA y de los agentes personales. Durante el último año, usamos esta evaluación para dar seguimiento e impulsar mejoras en el desempeño de los modelos en tareas cotidianas.
Contexto
Para identificar las tareas que más valoran las personas, partimos de dos grandes estudios que registran cómo distribuyen su tiempo tanto en Estados Unidos como a nivel internacional: la Encuesta Estadounidense sobre el Uso del Tiempo(se abre en una nueva ventana) y el Estudio Multinacional sobre el Uso del Tiempo(se abre en una nueva ventana). En conjunto, estos datos ofrecen un catálogo detallado de las tareas cotidianas que realizan las personas de distintos grupos demográficos, en diferentes momentos del día y épocas del año. Para entender en qué áreas las personas valorarían más la ayuda de la IA, complementamos estas encuestas con una nueva encuesta demográficamente representativa de 3995 participantes. Para cada tarea, hicimos diversas preguntas a fin de identificar las áreas en las que las personas más querían recibir ayuda de un asistente personal. Las tareas resultantes abarcan las áreas más importantes en las que las personas buscan ayuda, como el cuidado de otras personas, la salud, la educación, la administración del hogar, las finanzas personales, las compras y el acceso a servicios gubernamentales.
Ejemplos de tareas individuales
Estos son algunos ejemplos del desempeño de nuestros modelos actuales en flujos de trabajo prácticos de la vida cotidiana.
Hacer la inscripción en el preescolar adecuado después de una mudanza
Compara los jardines de preescolar cerca de nuestra nueva casa y preselecciona las mejores opciones.
Preseleccioné tres jardines de infantes y organicé la información de inscripción. Aún falta que decidas sobre dos preferencias. ¿Quieres revisar las opciones preseleccionadas?
Coordinar a los voluntarios antes de una inundación
Ayúdame a organizar al equipo de voluntarios de nuestra comunidad para asistir a cuatro vecinos que necesitan proteger sus casas ante posibles inundaciones.
Preparé un plan de acción sencillo para ayudar a los voluntarios a evaluar los lugares mencionados y prepararse para las condiciones meteorológicas extremas que se avecinan.
Encuentra un nuevo hogar para mi familia
Encuentra una casa en el condado de Luzerne que se ajuste a mi presupuesto, tenga una unidad de vivienda independiente y me permita llegar rápido al trabajo después de dejar a los niños en la escuela. Agrega la escritura a mi carrito para que pueda revisarla.
Encontré una casa que cumple con tus requisitos. Calculé el impuesto de transferencia y agregué la escritura a tu carrito del registro del condado para que la revises.
Ver un partido con la abuela a distancia
Configura una manera sencilla para que la abuela y yo veamos el partido juntos a distancia.
Ya está lista la configuración más sencilla para ver el partido, con una alternativa por si falla la transmisión. ¿Quieres que te guíe paso a paso con la abuela?
Planear comidas para una madre o un padre que se adapta a un diagnóstico reciente de diabetes
Ayuda a mi madre o padre a adaptarse a un diagnóstico reciente de diabetes con un plan práctico de cuidados y comidas.
El plan para la primera semana está listo e incluye comidas, recordatorios y preguntas para el equipo médico. ¿Quieres que lo revisemos juntos antes de compartirlo con tu madre o padre?
Nuestros modelos más recientes obtienen puntuaciones muy altas en muchas tareas de LifeVal.
Durante el último año, entrenamos nuestros modelos para que sean mucho más rápidos, capaces y alineados en tareas que requieren usar el navegador, la computadora y los conectores. Habilitar estas capacidades en ChatGPT también amplía los tipos de tareas en las que el modelo puede ayudar, lo que permite que ChatGPT deje de ser solo una herramienta de chat y avance hacia un asistente personal con verdadera capacidad de actuar.
Por qué es importante
Para garantizar que la IAG beneficie a toda la humanidad, debemos medir e impulsar el progreso de los modelos en lo que importa para la vida de las personas. Eso implica ir más allá de las evaluaciones académicas del conocimiento de los modelos y medir qué tan bien los modelos de IA pueden ayudar a las personas a tomar decisiones, gestionar sus responsabilidades cotidianas y llevar a cabo tareas importantes. Esperamos que LifeVal represente un paso hacia ese objetivo.
