← Glosario IA

Token

Definición

La unidad mínima con que la IA procesa el texto. Aproximadamente 1 token ≈ ¾ de una palabra en español. Los modelos tienen límites de tokens por conversación y los servicios de API cobran por tokens procesados.

Analogía

Como las sílabas para la IA. 'Profesional' se tokeniza en algo como 'Pro-fes-ional'. Los modelos tienen un límite de cuántas sílabas pueden procesar a la vez.

Ejemplo

Un libro de 400 páginas tiene aproximadamente 100.000 tokens. Claude puede procesar hasta 200.000 tokens en una sola conversación, lo que equivale a dos libros completos a la vez.