Graph Cut MI

新框架统一理解表示学习中的子模信息度量

研究人员开发了一个统一的理论框架来理解表示学习中的子模信息度量（SIMs）。该研究将SIMs与表示学习和统计模式识别中的经典概念联系起来，详细说明了不同的SIM目标如何表征类内和类间结构。具体而言，总信息（TI）目标与类内方差和广义协方差体积相关，而互信息（MI）目标则捕捉类间分离和表示重叠的概念。这些理论发现通过合成实验得到了验证，为选择基于SIM的目标提供了指导。