跳到正文
arXiv · ML· Anders Eklund·· 4 小时前AI 评分26

联邦学习处理非配对多模态数据的新型框架

Federated learning for unpaired multimodal data

AI 导读

提出利用公共锚点和中心核对齐训练全局多模态Transformer的框架。 使用公钥对齐分离的私有流形,配合子空间稳定微调和精度加权平均处理大型模型。 确立联邦非配对基础模型的数学基础,实现无集中存储下的统一表征学习。

来源:arXiv · ML · arxiv.org