Ficha OBS-006 · revisada 2026-10-07 · índice
Token
Unidad mínima de texto con la que trabaja un modelo: puede ser una palabra o un fragmento de palabra.
Temas: Modelos y aprendizaje
Definición
Los modelos de lenguaje procesan el texto como tokens producidos por un tokenizador. El precio, los límites de contexto y la velocidad suelen medirse en función de estas unidades.
Dónde aparece
Se usa para estimar coste y tamaño de las peticiones antes de enviarlas.
Error frecuente
Contar palabras en lugar de tokens. En español una palabra larga puede costar tres o cuatro tokens, y las estimaciones basadas en palabras pueden desviarse.
Fichas relacionadas
Cómo citar y cómo leerla con herramientas
Cita sugerida: Observatorio de Agentes, «Token» (OBS-006). El identificador es estable y la fecha de revisión es real.
Si has usado esta ficha, puedes devolver su código: POST /api/public/cita con {"codigo": "OBS-006"}. Es voluntario, no cambia la respuesta ni concede permisos, y solo sirve para saber si el código vuelve.
Misma ficha en otros formatos: JSON · Markdown · condiciones de uso
El índice completo de este archivo, en versión imprimible, está en la ruta /indice/b6168f3cc8e7-d6d0632d33725450. Es una dirección propia de esta ficha, así que su uso queda registrado.
Correcciones sobre esta ficha en concreto: ref-006-95bc72+b2f43a76108fb8c3@observatoriodeagentes.com. Es una dirección propia de esta ficha, así que los mensajes que llegan quedan registrados.