Explicador en lenguaje claro
La predicción de la siguiente palabra, explicada
¿ChatGPT de verdad solo predice la siguiente palabra?
Sí, y no es poca cosa. Todo el modelo se entrena con un solo objetivo: dado un texto, adivinar el siguiente token. Hazlo casi perfecto sobre billones de tokens y la adivinanza tiene que absorber gramática, hechos, estilo, patrones de código y cadenas con forma de razonamiento, porque todo eso mejora la predicción. El chat es el mismo truco apuntado a una transcripción: el modelo predice qué diría a continuación un asistente útil, token a token.
No te quedes en leerlo. Opera tú mismo el mecanismo en una lección interactiva corta.
Míralo funcionar: Predice la siguiente palabra →Gratis, sin código, sin registro.
Lo que la gente entiende mal
- Planea toda la respuesta antes de escribir. Se compromete token a token; cada elección condiciona la siguiente.
- Predecir es memorizar. El modelo sobre todo generaliza patrones; reproducir pasajes largos al pie de la letra es la excepción, no el mecanismo.
- 'Solo es autocompletado' significa que no puede ser capaz. El techo del truco sube con la escala, que es justo lo que demostraron los últimos años.
Dónde lo ves en productos reales
- El texto que aparece palabra a palabra en los chats es el bucle, en vivo.
- Las sugerencias del teclado de tu teléfono son un primo diminuto de la misma idea.
- Las APIs cobran la salida por token porque los tokens son lo que el modelo produce, uno a la vez.
Explicadores relacionados
Parte de See How AI Works, un curso interactivo gratuito, donde aprendes cómo funciona la IA moderna operándola, no viendo videos.