自监督预训练

多模态预训练

同时使用多种类型数据（文本、图像、音频）进行预训练，以创建统一表示，增强跨模态迁移能力。

← 返回