新框架统一理解表示学习中的子模信息度量

研究人员开发了一个统一的理论框架来理解表示学习中的子模信息度量（SIMs）。该研究将SIMs与表示学习和统计模式识别中的经典概念联系起来，详细说明了不同的SIM目标如何表征类内和类间结构。具体而言，总信息（TI）目标与类内方差和广义协方差体积相关，而互信息（MI）目标则捕捉类间分离和表示重叠的概念。这些理论发现通过合成实验得到了验证，为选择基于SIM的目标提供了指导。 AI

影响 为表示学习中目标的选择和设计提供了理论基础，有可能提高模型性能。

排序理由 该集群包含一篇详细介绍表示学习理论进展的研究论文。[lever_c_demoted from research: ic=1 ai=1.0]

在 arXiv cs.LG 阅读 →

• arXiv
• Facility Location MI
• Facility Location TI
• Graph Cut MI
• Graph Cut TI
• LogDet MI
• LogDet TI
• Mahalanobis distance
• Mutual Information
• Submodular Information Measures

• 论文
• 其他

AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →