实体 Nick Whiteley

Nick Whiteley

PulseAugur coverage of Nick Whiteley — every cluster mentioning Nick Whiteley across labs, papers, and developer communities, ranked by signal.

总计 · 30天

1

90 天内 1

发布 · 30天

0

90 天内 0

论文 · 30天

1

90 天内 1

层级分布 · 90 天

主题

情绪 · 30 天

1 天有情绪数据

最近 · 第 1/1 页 · 共 1 条

RESEARCH · CL_139164 · Jul 10 · 13:37

分析对比学习中InfoNCE损失的泛化能力

Nick Whiteley 的一篇新论文探讨了对比学习中相似性搜索的泛化能力，特别关注 InfoNCE 损失函数。研究表明，在使用 k 个负样本时，InfoNCE 的总体风险与预期的交叉熵度量密切相关。该度量量化了使用学习到的嵌入在未见数据上执行的相似性搜索与使用正样本生成器的隐式相似性进行的理想化搜索之间的偏差。该研究还引入了一个新颖的 InfoNCE 损失连续性界限，有助于在负样本数量增加时稳定泛化误差。