LifeVal
Medir el progreso de la IA en las tareas que importan en la vida cotidiana.
La misión de OpenAI es garantizar que la inteligencia artificial general beneficie a toda la humanidad. Queremos crear una IA que ayude a los más de mil millones de personas que actualmente usan ChatGPT cada semana a afrontar los retos prácticos de la vida cotidiana: encontrar servicios de cuidado infantil, acceder a servicios públicos, elaborar un presupuesto, prepararse para las clases, adaptar recetas, hacer la compra, diseñar planes de entrenamiento y mucho más.
Quien busca ayuda para hacer su vida más fácil necesita algo más que consejos o una respuesta en un chat. Para ser un asistente personal realmente útil, ChatGPT debería ser capaz de actuar y llevar a cabo tareas de verdad.
Para medir la evolución del rendimiento de los modelos en tareas cotidianas, creamos una evaluación con tareas de los ámbitos en los que los usuarios más ayuda querían recibir de la IA y los agentes personales. Durante el último año, hemos utilizado esta evaluación para seguir e impulsar la mejora del rendimiento de los modelos en tareas cotidianas.
Contexto
Para identificar las tareas que más valoran las personas, partimos de dos grandes estudios que analizan cómo se distribuye el tiempo tanto en Estados Unidos como en otros países: la Encuesta estadounidense sobre el uso del tiempo(se abre en una ventana nueva) y el Estudio multinacional sobre el uso del tiempo(se abre en una ventana nueva). En conjunto, estos datos ofrecen un catálogo detallado de las tareas cotidianas que realizan las personas de distintos grupos demográficos, en distintos momentos del día y épocas del año. Para comprender en qué ámbitos se valoraría más la ayuda de la IA, ampliamos estas encuestas con una nueva encuesta a una muestra demográficamente representativa de 3995 personas. Para cada tarea, planteamos diversas preguntas con el fin de identificar los ámbitos en los que la gente más deseaba recibir ayuda de un asistente personal. Las tareas resultantes abarcan los principales ámbitos en los que las personas quieren ayuda, como los cuidados, la salud, la educación, la gestión del hogar, las finanzas personales, las compras y el acceso a servicios públicos.
Ejemplos de tareas individuales
Estos son algunos ejemplos de cómo se desenvuelven nuestros modelos actuales en tareas prácticas de la vida cotidiana.
Nuestros modelos más recientes obtienen puntuaciones muy altas en muchas de las tareas de LifeVal.
Durante el último año, hemos entrenado nuestros modelos para que sean mucho más rápidos, capaces y acordes con las intenciones del usuario en tareas que requieren usar el navegador, el ordenador y los conectores. Activar estas capacidades en ChatGPT también amplía los tipos de tareas en los que el modelo puede ayudar y permite que ChatGPT deje de ser solo una herramienta de chat para convertirse en un asistente personal con verdadera capacidad de actuar.
Por qué es importante
Para garantizar que la IAG beneficie a toda la humanidad, debemos medir e impulsar los avances de los modelos en lo que importa en la vida de la gente. Esto implica ir más allá de las evaluaciones académicas de los conocimientos de los modelos y medir hasta qué punto los modelos de IA pueden ayudar a las personas a tomar decisiones, gestionar sus responsabilidades cotidianas y llevar a cabo tareas que realmente importan. Esperamos que LifeVal suponga un paso hacia ese objetivo.



























