Token
Definición
La unidad mínima con que la IA procesa el texto. Aproximadamente 1 token ≈ ¾ de una palabra en español. Los modelos tienen límites de tokens por conversación y los servicios de API cobran por tokens procesados.
Analogía
Como las sílabas para la IA. 'Profesional' se tokeniza en algo como 'Pro-fes-ional'. Los modelos tienen un límite de cuántas sílabas pueden procesar a la vez.
Ejemplo
Un libro de 400 páginas tiene aproximadamente 100.000 tokens. Claude puede procesar hasta 200.000 tokens en una sola conversación, lo que equivale a dos libros completos a la vez.