Tokenización

Tokens Especiales

Tokens reservados como [CLS], [SEP], [MASK], [PAD] utilizados para delimitar secuencias, ocultar elementos o rellenar los lotes hasta una longitud uniforme.

← Volver