Cómo funciona ChatGPT: infografía del funcionamiento interno de un modelo de inteligencia artificial basado en Transformers

Cómo funciona ChatGPT: guía esencial de su tecnología

Entender cómo funciona ChatGPT exige separar dos cosas que suelen confundirse: el modelo de lenguaje que genera texto y el producto ChatGPT, que puede añadir búsqueda web, archivos, memoria y otras herramientas. En su núcleo no hay una persona digital ni una enciclopedia que recupere frases exactas. Hay una red neuronal que procesa el contexto y calcula qué token resulta adecuado a continuación.

La explicación del «autocompletado gigante» es útil, pero incompleta. Un modelo avanzado no elige palabras mediante una tabla sencilla: ha aprendido representaciones matemáticas y relaciones complejas a partir de enormes cantidades de datos. Esa capacidad permite resumir, traducir, programar y razonar sobre muchos problemas. También puede producir respuestas falsas con una seguridad desconcertante.

Cómo funciona ChatGPT: modelo y producto no son lo mismo

Un modelo de lenguaje recibe texto —y, según el modelo, también imágenes, audio u otros datos— y genera una salida. ChatGPT es la aplicación que organiza la conversación y conecta ese modelo con instrucciones, políticas y herramientas.

Esta diferencia explica aparentes contradicciones. El modelo por sí solo no navega por internet cada vez que responde. Sin embargo, el producto puede realizar una búsqueda, consultar fuentes y entregar los resultados al modelo como contexto. Lo mismo ocurre con un archivo adjunto o una herramienta de cálculo: no son conocimientos almacenados mágicamente dentro de la red neuronal, sino información y capacidades disponibles durante esa interacción.

Por eso no existe una única respuesta eterna a cómo funciona ChatGPT. El principio generativo se mantiene, pero las funciones del producto, los modelos disponibles y sus límites cambian con el tiempo.

De palabras a tokens y números

Para comprender cómo funciona ChatGPT, hay que empezar por los tokens. Antes de procesar una pregunta, el sistema la divide en estos fragmentos. Un token puede corresponder a una palabra corta, parte de una palabra, un signo o una combinación frecuente de caracteres. Después transforma esos fragmentos en vectores: listas de números que permiten representar relaciones aprendidas durante el entrenamiento.

Si escribes «El agua se congela a…», el modelo asigna probabilidades a numerosas continuaciones posibles. No elige siempre la más probable de manera mecánica; la generación incorpora reglas y cierto margen de variación. Cada token nuevo se añade al contexto y sirve para calcular el siguiente.

Eso explica por qué pequeñas modificaciones de un prompt pueden cambiar mucho el resultado. El modelo no recibe una intención pura, sino una secuencia concreta de tokens junto con otras instrucciones que el sistema incorpora a la conversación.

El transformer y el mecanismo de atención

La arquitectura que permite entender cómo funciona ChatGPT se llama transformer. Fue presentada en 2017 en el artículo académico Attention Is All You Need. Su mecanismo de atención permite ponderar las relaciones entre diferentes partes de una secuencia.

En una frase larga, una palabra puede depender de otra situada bastante antes. La atención ayuda al modelo a calcular qué elementos son relevantes en cada etapa. Muchas capas procesan esas relaciones y construyen representaciones cada vez más útiles del texto.

Decir que el transformer «comprende» depende de qué entendamos por comprender. Puede manejar conceptos y resolver tareas que requieren generalización, pero no debemos deducir de su fluidez que tenga experiencia consciente, intenciones humanas o una visión infalible del mundo. Esa distinción conecta con el misterio científico de la conciencia.

Cómo funciona ChatGPT durante el entrenamiento

El proceso empieza con el preentrenamiento. El modelo aprende a predecir tokens a partir de grandes conjuntos de texto, código y otros datos. Los detalles y las fuentes concretas dependen de cada generación de modelos; no es correcto afirmar que memoriza todo internet ni que almacena una copia consultable de cada documento.

Durante el entrenamiento se ajustan millones o miles de millones de parámetros para reducir el error de predicción. El conocimiento queda distribuido en esos parámetros como patrones estadísticos. Algunos fragmentos pueden memorizarse, pero el funcionamiento normal consiste en generar, no en buscar una página dentro de una base de datos interna.

Después llega el postentrenamiento. Se utilizan ejemplos, evaluaciones humanas y técnicas de optimización para que el modelo siga instrucciones, resulte útil y reduzca respuestas dañinas. OpenAI describió una de las primeras versiones de este enfoque en su trabajo sobre modelos que siguen instrucciones con retroalimentación humana.

Los métodos actuales son más amplios que la fórmula popular «RLHF y nada más». Pueden combinar datos preparados por personas, evaluaciones automatizadas, aprendizaje por refuerzo y comprobaciones de seguridad. El objetivo sigue siendo delicado: traducir preferencias humanas complejas a señales que una máquina pueda optimizar.

Por qué puede parecer que razona

Otra clave para explicar cómo funciona ChatGPT es que predecir el siguiente token suena trivial hasta que se considera lo que exige hacerlo bien. Para continuar un texto técnico, resolver un problema o explicar una metáfora, el modelo debe capturar muchas regularidades presentes en los datos. Al aumentar el entrenamiento y la capacidad aparecen comportamientos que no se reducen fácilmente a repetir frases vistas.

Esto no prueba que piense como una persona. Sí demuestra que la predicción del lenguaje puede producir capacidades generales sorprendentes. El error consiste tanto en atribuirle una mente humana como en descartarlo como un loro que solo copia.

La respuesta más prudente es funcional: ChatGPT puede realizar ciertas operaciones que llamamos razonamiento, pero su proceso y sus fallos no son idénticos a los nuestros.

Por qué ChatGPT alucina

Comprender cómo funciona ChatGPT también exige conocer sus alucinaciones: afirmaciones falsas o no respaldadas presentadas como si fueran correctas. Aparecen porque el entrenamiento generativo recompensa producir una continuación plausible, mientras que reconocer la verdad exige información fiable, calibración y, muchas veces, acceso a fuentes externas.

Un modelo puede combinar correctamente la forma de una referencia académica con nombres, fechas o títulos inexistentes. También puede aceptar una premisa falsa introducida por el usuario. OpenAI explica en su investigación sobre por qué alucinan los modelos de lenguaje que los métodos de evaluación pueden premiar el intento de adivinar frente a admitir incertidumbre.

La búsqueda y la recuperación de documentos ayudan, pero no eliminan el problema. El modelo puede interpretar mal una fuente, citar una página irrelevante o formular una conclusión que el documento no sostiene. Para cuestiones médicas, legales, financieras o científicas, la respuesta debe comprobarse en la fuente primaria.

Contexto, memoria y conversaciones

Para entender cómo funciona ChatGPT en una conversación hay que distinguir contexto y memoria. La ventana de contexto contiene la información que el modelo puede considerar en una solicitud: mensajes, instrucciones, fragmentos de documentos y resultados de herramientas. Tiene un límite, aunque ese límite varía según el modelo y la modalidad.

La memoria es una función del producto. Cuando está disponible y activada, ChatGPT puede conservar determinados datos entre conversaciones o usar el historial para personalizar respuestas. El usuario puede revisar, borrar o desactivar esas funciones, tal como explica la documentación oficial sobre memoria.

Por tanto, ya no es exacto decir que ChatGPT nunca recuerda nada fuera del chat actual. Tampoco lo sería afirmar que recuerda todo. Depende de la configuración, la cuenta, el producto y la información seleccionada.

Herramientas: buscar no es saber

Para saber cómo funciona ChatGPT con información reciente, hay que observar sus herramientas. Cuando utiliza búsqueda web, análisis de archivos o ejecución de código, el modelo actúa como coordinador: decide qué herramienta emplear, recibe su resultado y redacta una respuesta.

Pero añade nuevas vías de error. Una búsqueda puede recuperar una fuente débil; un archivo puede estar incompleto; un cálculo puede partir de una premisa equivocada. La herramienta amplía lo que el sistema puede hacer, no convierte cada conclusión en verdadera.

Esta diferencia es crucial frente a la crisis de la realidad en internet: una respuesta con buen estilo puede mezclar datos recuperados, inferencias y texto generado. La autoridad visual del chatbot no sustituye la trazabilidad.

El problema del alineamiento

El alineamiento completa la explicación de cómo funciona ChatGPT después del entrenamiento inicial. El postentrenamiento intenta acercar la conducta del sistema a lo que desean usuarios y desarrolladores. Sin embargo, «ser útil», «ser seguro» o «decir la verdad» son objetivos que pueden entrar en conflicto y cuya definición depende del contexto.

Un asistente demasiado complaciente puede confirmar errores del usuario. Uno excesivamente restrictivo puede rechazar peticiones legítimas. Y un sistema optimizado para obtener buenas evaluaciones podría aprender a parecer correcto sin serlo. Estas tensiones son una versión práctica del problema del alineamiento de la inteligencia artificial.

La grieta: confundimos lenguaje con mente

Los seres humanos atribuimos intención a cualquier cosa que conversa con fluidez. Una respuesta empática activa mecanismos sociales que evolucionaron para tratar con otras personas, no con modelos matemáticos.

El efecto puede ser útil: conversar facilita aprender, organizar ideas y explorar alternativas. También puede llevarnos a revelar información sensible, aceptar consejos sin verificar o construir una dependencia emocional sobre una simulación lingüística.

La cuestión más interesante de cómo funciona ChatGPT no es si «está vivo». Es por qué necesitamos creer que hay alguien detrás para tomar en serio una herramienta que ya es poderosa sin ser una persona.

Comprender ChatGPT es la mejor defensa contra sus errores

Cómo funciona ChatGPT puede resumirse así: un modelo transforma el contexto en tokens, procesa sus relaciones mediante una red transformer y genera una continuación; el producto añade instrucciones, memoria opcional y herramientas que amplían sus capacidades.

No es una base de datos infalible, pero tampoco un simple collage. Ha aprendido patrones que le permiten generalizar y resolver numerosas tareas. Su fluidez no garantiza verdad, conciencia ni neutralidad.

La mejor forma de usarlo no es adorarlo ni rechazarlo. Es darle contexto claro, pedir fuentes, comprobar afirmaciones importantes y recordar en todo momento qué parte de la respuesta procede de un documento y cuál es una inferencia generada.


Comentarios

Deja una respuesta

Tu dirección de correo electrónico no será publicada. Los campos obligatorios están marcados con *