Fragmentación de Documentos

Fragmentación Basada en Tokens

Estrategia de segmentación que utiliza tokens como unidad base, esencial para respetar los límites de contexto de modelos de lenguaje como GPT o BERT.

← Volver