研究人员开发了FedTopo,一个新颖的联邦学习框架,旨在解决本地模型架构异构带来的挑战。与现有通过模型参数、蒸馏预测或类别原型共享知识的方法不同,FedTopo将全局知识编码为类别关系拓扑。这种方法捕捉了每个客户端数据中类别之间的关系,而不是它们在特征空间中的绝对位置(这在模型架构不同时可能不可靠)。实验表明,FedTopo在各种数据集和异构骨干网络上均优于传统的共享方法,并且通信开销低,推理开销为零。 AI
影响 这项研究有望提高在多样化、去中心化数据集上进行协作式AI模型训练的效率和有效性。
排序理由 该集群描述了一篇介绍新联邦学习框架的新研究论文。[lever_c_demoted from research: ic=1 ai=1.0]
在 Hugging Face Daily Papers 阅读 →
- class relation topology
- class statistics
- distillation-sharing baselines
- federated learning
- FedTopo
- GitHub
- parameter-sharing baselines
- Prototypes
- prototype-sharing baselines
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →