实体
Fisher information matrices
Fisher information matrices
PulseAugur coverage of Fisher information matrices — every cluster mentioning Fisher information matrices across labs, papers, and developer communities, ranked by signal.
总计 · 30天
2
90 天内 3
发布 · 30天
0
90 天内 0
论文 · 30天
2
90 天内 3
层级分布 · 90 天
主题
情绪 · 30 天
2 天有情绪数据
最近 · 第 1/1 页 · 共 3 条
-
新下界揭示了 Bandit 凸优化的复杂性
研究人员为涉及欧几里得球上的 Lipschitz 函数的 Bandit 凸优化问题建立了一个新的下界。导出的下界 $\widetilde{\Omega}(d^{5/4}\sqrt{T})$ 表明该问题比线性 Bandit 问题更复杂。该构造涉及一类函数，这些函数在学习未知线性变换和识别动作空间中的特定管之间存在权衡，从而导致找到 $\varepsilon$-最优动作的样本复杂度下界为 $\widetilde{\Omega}(d^{5/…
-
新研究解决多模态大语言模型的联邦持续学习问题 · 跟踪到2个来源
两篇新研究论文解决了多模态大语言模型（MLLMs）联邦持续学习中的挑战。第一篇论文介绍了FedCMM，一个通过实现模态感知弹性权重巩固、用于重放的合成数据生成以及任务相似性感知梯度聚合来对抗MLLMs灾难性遗忘的框架。第二篇论文提出了HERO，一个通过分离任务分割、客户端数据分割和客户端任务顺序来标准化联邦持续学习评估的基准库，旨在提高不同FCL方法之间的可比性和可复现性。
-
ReLU 网络分析将 Fisher 信息与球谐函数联系起来
研究人员分析了具有随机隐藏权重的简单两层 ReLU 神经网络的 Fisher 信息矩阵。他们发现特征值分布显著地集中在特定的特征空间上，其中前三个特征空间几乎占了矩阵迹的全部。该研究确定这些主导特征空间对应于二阶或更低阶的球谐函数，并将其与神经切线核的 Mercer 分解联系起来。