研究人员发现了一种方法,通过利用添加到参数更新中的噪声来提高联邦学习在非独立同分布(non-IID)数据上的泛化能力,这是一种以前在此场景中未被使用过的技术。他们证明,标准的联邦平均(federated averaging)会显著削弱这种正则化的有效性,削弱程度取决于群体大小和梯度多样性。在 CIFAR-10 上的实验表明,保持正则化有效的配置表现不佳,这表明当前方法存在局限性。 AI
影响 这项研究强调了将正则化技术应用于联邦学习所面临的挑战,这可能会影响在去中心化 AI 系统中开发更健壮、更具泛化能力的模型。
排序理由 该集群包含一篇发表在 arXiv 上的学术论文。[lever_c_demoted from research: ic=1 ai=1.0]
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →