'Strawberry' es un proyecto secreto para que la IA pueda «ver el mundo como los humanos»

OpenAI, la empresa participada por Microsoft, está desarrollando un nuevo enfoque en sus modelos de inteligencia artificial bajo el nombre en clave «Strawberry». La noticia la ha desvelado Reuters, que ha citado a fuentes cercanas a la investigación.

Este proyecto, que no había sido desvelado previamente, busca demostrar que los modelos de OpenAI pueden ofrecer capacidades avanzadas de razonamiento, una característica en la que llevan trabajando desde hace tiempo para mejorar las capacidades de la IA.

Busca demostrar que los modelos de OpenAI pueden ofrecer capacidades avanzadas de razonamiento

El documento interno data de mayo de 2024 y detalla que «Strawberry» tiene como objetivo ir más allá de generar respuestas a preguntas. La intención es que el modelo pueda planificar y navegar por internet de manera autónoma para llevar a cabo investigaciones profundas.

Un portavoz de OpenAI comentó que la empresa busca que sus modelos vean y comprendan el mundo de manera similar a los humanos, y que la investigación continua en capacidades de IA es una práctica común en la industria.

Evolución del proyecto Q*

Este proyecto fue conocido anteriormente como Q*, y fue definido como un avance importante por empleados de la compañía. Algunas demostraciones de Q* mostraban la capacidad de responder preguntas complejas en Ciencia y Matemáticas, superando a los modelos comerciales actuales. OpenAI ha testeado internamente modelos de IA que lograron una puntuación superior al 90 % en conjuntos de datos matemáticos avanzados, aunque no se ha confirmado si estos resultados corresponden a «Strawberry».

Según Reuters, en una reciente reunión interna, OpenAI presentó una demostración de un proyecto de investigación que supuestamente mostró nuevas habilidades de razonamiento humanoide, aunque no se confirmó si dicho proyecto era «Strawberry».

El desafío del razonamiento

Mejorar las capacidades de razonamiento en los modelos de IA es visto como un paso clave para alcanzar niveles de inteligencia similares o superiores a los humanos. El CEO de OpenAI, Sam Altman, ha señalado que el progreso más importante en IA será en la capacidad de razonamiento.

Sin embargo, empresas como Google, Meta y Microsoft también están trabajando en sus propias IA para mejorar estas capacidades, con grandes modelos de lenguaje (LLM) que permitan realizar planificación a largo plazo.

Google, Meta y Microsoft también están trabajando en sus propias IA

«Strawberry» utiliza un método especializado de post-entrenamiento que reajusta el rendimiento de los modelos tras haber sido entrenados en grandes conjuntos de datos. Esta técnica, similar a la «Self-Taught Reasoner» desarrollada en Stanford en 2022, podría permitir a los modelos de lenguaje alcanzar niveles de inteligencia superiores a los humanos mediante la creación de sus propios datos de entrenamiento.

Tareas a largo plazo

Entre las capacidades que OpenAI busca desarrollar con «Strawberry» se encuentran las tareas de largo plazo (LHT), que implican planificar y ejecutar una serie de acciones durante un periodo prolongado. El documento interno de OpenAI menciona la creación y evaluación de modelos en un conjunto de datos de «investigación profunda».

El proyecto también pretende que los modelos puedan llevar a cabo investigaciones autónomas navegando por internet con la ayuda de un «agente de uso computacional» (CUA), capaz de tomar decisiones basadas en sus hallazgos. Además, OpenAI probará estas capacidades en tareas relacionadas con la ingeniería de software y el aprendizaje automático.