Investigadores de la Universidad de Tel Aviv y la Universidad de Stanford informan que los sistemas de inteligencia artificial pueden desarrollar habilidades de aprendizaje genuinas a través de material de capacitación generado íntegramente por otros modelos de IA, sin texto escrito por humanos, fotografías ni ningún otro dato externo involucrado.
Los hallazgos, publicados en la plataforma científica de preimpresión arXiv y descritos por The Media Line, sugieren que un modelo puede desarrollar sus capacidades predictivas centrales antes de encontrar material del mundo real, un resultado que podría cambiar la forma en que se entrenan los futuros sistemas de IA. Para obtener más información sobre investigaciones de última hora, consulte la página de inicio de AI Buzz Wire.
Cómo funciona el circuito de autoformación
El equipo probó el concepto con un sistema de entrenamiento construido a partir de dos modelos de IA. A uno se le asignó la tarea de generar secuencias de símbolos; el otro intentó predecir qué símbolo aparecería a continuación. Ninguno de los modelos consultó documentos escritos, fotografías o cualquier otra fuente externa: cada ejercicio del plan de estudios se produjo dentro del propio sistema.
A medida que avanzaban los ejercicios, el generador se volvió cada vez más sofisticado en la creación de desafíos que mejoraban el desempeño de su compañero, mientras que el predictor desarrolló habilidades más fuertes al intentar repetidamente resolver esos problemas. El enfoque permite efectivamente que un sistema de IA mejore su forma de aprender a través de un ciclo continuo de generación y resolución de ejercicios de dificultad creciente.
Habilidades sin conocimiento
Para determinar si esas habilidades podrían aplicarse más allá del entorno de entrenamiento artificial, los investigadores evaluaron el modelo resultante frente a varios tipos de información real: lenguaje escrito, imágenes, audio, música, código informático y secuencias de ADN.
Los experimentos demostraron que la precisión predictiva siguió aumentando a medida que se asignaron recursos informáticos adicionales a la capacitación: evidencia de que el método se amplía y podría volverse más efectivo a medida que se expande la capacidad computacional.
Los resultados también trazan una línea importante. Los modelos desarrollaron la capacidad de reconocer patrones, pero no adquirieron de forma independiente información objetiva sobre sujetos del mundo real; Ese tipo de conocimiento, encontraron los investigadores, aún requiere exposición a datos reales. En otras palabras, la formación autogenerada puede enseñarle a un modelo cómo aprender, pero no lo que contiene el mundo.
Sin embargo, los investigadores creen que la técnica podría hacer que los futuros sistemas de IA sean más eficientes, al fortalecer sus capacidades de aprendizaje subyacentes antes de que comiencen a procesar información del mundo real, lo que podría reducir la cantidad de material generado por humanos que se requiere para las carreras de entrenamiento en la frontera al frente del proceso.
Por qué es importante "aprender a aprender"
Existe una analogía útil en la educación humana: un estudiante que ha practicado la resolución de problemas desconocidos generalmente extrae más de un libro de texto fijo que uno que simplemente lo ha memorizado. Lo que la configuración Tel Aviv-Stanford demuestra, según esta lectura, es una versión mecánica de esa separación: una fase en la que un modelo adquiere habilidad predictiva general a partir de ejercicios fabricados, antes de que cualquier corpus real entre en escena.
El hallazgo también es un recordatorio de que la capacitación previa y el conocimiento no son lo mismo, una distinción que se ha vuelto más importante a medida que los laboratorios mezclan datos sintéticos en sus procesos. Si un modelo puede llegar a la etapa de datos reales y ya sabe cómo extraer señales de secuencias, el mismo corpus podría llegar más lejos, aunque esa sigue siendo una hipótesis hasta que trabajos futuros la prueben.
Como ocurre con cualquier preimpresión, el resultado espera replicación y escrutinio por parte de la comunidad de investigación en general, y la evaluación cubrió tareas predictivas en lugar de la generación abierta que define a los chatbots comerciales.
Una industria ávida de datos toma nota
El resultado llega en medio de un debate activo sobre los datos de entrenamiento. El conjunto accesible de texto humano de alta calidad se ha minado en gran medida, y se han propuesto acuerdos de licencia, datos sintéticos y métodos de reproducción automática como formas de seguir mejorando los modelos cuando el suministro de la web abierta se agota. Una demostración de que pueden surgir habilidades de aprendizaje útiles a partir de ejercicios puramente generados por máquinas añade un dato concreto a ese argumento.
La propia advertencia de los investigadores marca el límite de la afirmación: el conocimiento del mundo todavía requiere datos reales. Según esta evidencia, la autoformación es una forma de hacer que los modelos aprendan mejor, no una forma de reemplazar la verdad básica que proviene del mundo real.
Israel se inclina hacia la IA
El anuncio llega mientras Israel trabaja para fortalecer su posición en inteligencia artificial. El 3 de noviembre, el presidente Isaac Herzog convocó la sesión inaugural del foro "Más allá de la inteligencia", establecido con la Dirección Nacional de IA en la Oficina del Primer Ministro y el Instituto Mosaic para la Política de IA para examinar el impacto de la IA en el empleo, la seguridad económica y la sociedad.
"Israel debe ocupar su lugar a la vanguardia de la inteligencia artificial", instó Herzog en la sesión, según The Media Line. "Este tren no nos esperará y el mundo entero está mirando en nuestra dirección".
Por ahora, el resultado de Tel Aviv-Stanford ocupa un lugar destacado en la columna de investigación: una preimpresión a la espera del escrutinio del campo, que describe un principio de capacitación más que un producto. Pero si los planes de estudio autogenerados pueden sustituir de manera significativa parte del flujo de datos, el insumo más controvertido de la industria (los datos creados por humanos) puede importar algo menos que el más escaso: la computación.
---
Manténgase a la vanguardia de la IAObtenga las últimas noticias, análisis y avances en IA, todo en un solo lugar.
Leer más noticias sobre IA →
