BERT и его варианты
ERNIE
Китайская модель, интегрирующая структурированные и иерархические знания в базовую архитектуру Transformer. Одновременно маскирует слова, сущности и фразы для захвата многоуровневой семантики.
← Назад