Modelo del mundoWorld Model
Un modelo que guarda cómo funciona el mundo y lo ensaya antes
- Un modelo del mundo es un modelo que guarda por dentro cómo funcionan las cosas. Entrega la respuesta a "si hago esto, después pasa aquello".
- Sirve para ensayar antes de actuar de verdad. Sin moverse en la realidad, se prueban varias jugadas por dentro y se elige una.
- Aprender a puro ensayo y error en el mundo real es lento, caro y arriesgado. Dentro del modelo se pueden repetir miles de intentos, rápido, barato y sin peligro.
- El resultado se desvía tanto como el modelo se aparte de la realidad, y cuanto más pasos se encadenan hacia adelante, más crece el error, como una bola de nieve.
- Hoy se está cruzando con la generación de video. También aparece en forma de una imagen siguiente que se genera con cada acción.
Contenido
1La analogía
Antes de plantar en el campo, se mete la semilla primero en un invernadero. Adentro hay tierra, sol y viento parecidos a los de afuera, así que se puede ver cómo va a crecer esa semilla sin esperar todo un invierno. Se le puede dar más agua, o menos, o cambiarla de lugar, y probar todo eso sin perder un solo surco del campo.
Lo que importa es cuánto se parece el invernadero al mundo de afuera. Si adentro siempre hace calor y no sopla el viento, lo que creció bien ahí se cae apenas sale afuera. El invernadero solo vale la pena cuando refleja de forma verosímil las condiciones reales.
Y el invernadero es más confiable cuando mira una temporada hacia adelante; si se le pide adivinar varios años después, empieza a fallar, porque las pequeñas diferencias crecen con el tiempo.
2En detalle
Un modelo que guarda qué viene después
Lo que hace un modelo del mundo se resume en una frase: recibe el estado actual y la acción que se tomó, y entrega el estado siguiente. Empujas un vaso, el vaso se desliza; empujas más, cae por el borde; al caer, hace un ruido. Es esa cadena de causas la que queda guardada adentro.
Este modelo no lo arma una persona escribiendo reglas. Se le muestran montones de registros de lo vivido y se le hace practicar adivinar el instante siguiente; para adivinar bien hace falta saber qué afecta a qué, así que repetir ese ejercicio va dejando la cadena de causas grabada por dentro.
Lo que queda guardado no es una fórmula de física, sino algo mucho más parecido a una intuición general. Sin fórmulas de por medio, el modelo acierta bastante bien cuánto rueda algo si se empuja de tal manera.
Por qué conviene ensayar primero
Aprender a puro ensayo y error solo revela el resultado cuando se intenta de verdad. En un juego de pantalla se puede repetir miles de veces sin problema, pero con una máquina real, un solo error rompe una pieza y cada intento tarda varios minutos.
Con un modelo, esa carga desaparece. Por dentro se pueden abrir varias ramas —"si voy a la izquierda", "si freno", "si espero"— y solo se hace de verdad la que parece mejor. Es como añadir cientos de ensayos imaginados a cada intento real, así que se aprende con mucha menos experiencia.
La seguridad también pesa. Cuanto más peligrosa es una situación, más difícil es dejar que se viva de verdad; dentro del modelo, chocar no tiene ninguna consecuencia. Incluso se puede provocar a propósito una situación difícil de vivir en la realidad, solo para practicarla.
Qué se guarda y qué se descarta
Intentar predecir la imagen completa, tal cual, es demasiado. Por eso lo habitual es comprimir la observación en una representación mucho más pequeña y predecir lo siguiente desde ese lugar reducido. Se conserva algo como dónde está cada cosa y a qué velocidad se mueve, y se descarta el patrón del papel tapiz o una sombra cualquiera.
Qué se descarta decide el éxito o el fracaso. Si se descarta algo que después resulta importante, esa parte queda fuera del alcance de la predicción, como una marca pequeña en una esquina que era, en realidad, la pista decisiva.
Comprimir también trae una ventaja grande: al aligerar la predicción, se pueden hacer muchísimos ensayos imaginados muy rápido. Esa compresión es la que permite mirar hacia adelante miles de veces más rápido que el tiempo real.
El error se acumula
Un solo paso hacia adelante se predice bien. El problema aparece al encadenar varios: el pequeño error del primer paso se convierte en la entrada siguiente, y sobre ese error se apila otro más. A los diez pasos, el mundo dentro del modelo puede ser muy distinto del real.
Por eso lo normal es imaginar en tramos cortos: se mira apenas unos pasos hacia adelante, se da un paso de verdad, se reajusta el estado con el resultado real y se vuelve a imaginar unos pasos más. La observación real es la que va sujetando el error todo el tiempo.
También se usa un método en el que el propio modelo dice cuánta confianza tiene en su predicción. Donde el modelo duda de sí mismo, conviene no confiar en la imaginación y probar de verdad en su lugar.
El cruce con la generación de video
Últimamente aparece una forma que genera directamente la siguiente imagen. Cada vez que se presiona una tecla de dirección, se genera la escena que corresponde: la pantalla misma es el resultado de la predicción.
Vale la pena distinguir entre lo que se ve convincente y lo que sirve de verdad. Aunque a la vista se vea fluido, si no responde de forma consistente a las acciones, o si al volver a un lugar recién visitado aparece distinto, no sirve para planear nada. La capacidad de generar una imagen linda y la capacidad de sostener la coherencia del mundo son cosas que hay que evaluar por separado.
3Con más precisión
El modelo del mundo viene de la idea de entrenar un modelo del entorno y usarlo para planear o para aprender una política de acción dentro de él. Es habitual comprimir la observación en una representación latente y predecir, en ese espacio latente, tanto el estado siguiente como la recompensa que se recibiría. La planificación suele consistir en simular varias acciones candidatas hasta el final dentro de la imaginación y elegir la rama con el mejor resultado.
La analogía del invernadero también tiene grietas. El invernadero lo diseña una persona, así que se puede revisar en un plano qué está imitando; el modelo del mundo, en cambio, se arma solo a partir de registros, y aunque se abra por dentro, es difícil saber qué guarda. En el invernadero crece una planta real, pero dentro del modelo no hay nada real: solo hay una conjetura sobre la observación siguiente, y donde esa conjetura falla, el mundo se desvía en silencio. Y mientras el invernadero corre al mismo ritmo que el exterior, el modelo puede correr mucho más rápido que la realidad, e incluso rebobinar y repetir la misma situación varias veces.
4Pruébalo
5Malentendidos comunes
Es fácil pensar que predecir bien es entender el mundo, pero en realidad encadenar bien lo que suele pasar es distinto de conocer la causa, y por eso se derrumba ante una situación nunca vivida.
Es fácil pensar que un video convincente ya es un modelo del mundo, pero en realidad hace falta comprobar aparte si responde de forma consistente a las acciones y si mantiene los lugares ya visitados.
Es fácil pensar que rendir bien dentro del modelo garantiza rendir bien en la realidad, pero en realidad el resultado cae tanto como haya distancia entre el modelo y la realidad, y hay que reajustarlo con intentos reales.
7Resumen en una línea
En resumenEl modelo del mundo es un invernadero que imita el exterior: permite ensayar muchas veces por dentro antes de actuar de verdad, pero el resultado se desvía tanto como el invernadero se aparte de lo real.
¿Has visto un error o tienes una analogía mejor? Sugerir una corrección · Última actualización2026-09-02