研究人员引入了一个名为MFedPBA的新框架,以改进多模态联邦学习。该方法解决了现有方法在模型同质性和跨模态数据平衡方面的局限性。MFedPBA使用双重对齐机制来协同知识,通过投影编码器对齐特征空间,并在logit原型层面聚合决策。实验表明,在模型异构和模态不平衡的情况下,MFedPBA的性能优于当前方法。 AI
影响 该框架可以提高在分布式、异构数据上训练的AI模型的性能,尤其是在模态不平衡的情况下。
排序理由 该集群描述了一篇详细介绍多模态联邦学习新框架的研究论文。[lever_c_demoted from research: ic=1 ai=1.0]
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →