NDCG@K
PulseAugur coverage of NDCG@K — every cluster mentioning NDCG@K across labs, papers, and developer communities, ranked by signal.
-
群体推荐评估偏差被揭露,影响已报告的进展
一篇新发表在arXiv上的论文强调了群体推荐系统中潜在的评估偏差。研究表明,像HR@K和NDCG@K这样的标准指标可能对评估期间如何解决平局过于敏感,从而可能夸大已报告的进展。作者提出了一种考虑平局的评估协议,并表明在考虑了这种偏差后,许多已报告的改进会显著减弱,从而导致对方法排名的重新理解。他们还建议,温度缩放的BPR可以在没有严重平局膨胀的情况下提供好处。
-
TimeRoute 研究解决了推荐中不断变化的模态相关性问题
一篇新的研究论文介绍了一种名为 TimeRoute 的新型基于扩散的推荐系统,旨在解决模态相关性随时间变化的挑战。TimeRoute 采用时间感知模态路由器,根据时间上下文(例如情人节等节假日期间用户行为的变化)为用户个性化模态比例。该系统还利用了具有双流去噪头的基于扩散的图重建器,以减轻来自不相关模态的过时或误导性信号。在 TikTok、Amazon-Baby 和 Amazon-Sports 等平台上的实验显示,推荐准确性指标有了显著提高。
-
TimeRoute系统通过适应时间变化来个性化多模态推荐
研究人员开发了TimeRoute,一种新颖的基于扩散的推荐系统,旨在解决多模态推荐中模态效用随时间变化的问题。与使用静态融合权重的先前方法不同,TimeRoute采用时间感知的模态路由器,根据用户行为和时间上下文个性化模态分布。该系统还利用具有双流去噪头的特征级线性调制(FiLM)来抑制过时信号。在TikTok、Amazon-Baby和Amazon-Sports数据集上的实验显示,推荐指标有了显著的改进。
-
新的PCA-GAT方法增强了工业工艺规划推荐
研究人员开发了PCA-GAT,一种通过整合事实和规范工业知识来推荐加工工艺规划的新方法。该方法将工艺规划推荐视为一个知识图增强的协同过滤问题,利用贝叶斯个性化排序作为其学习目标,并使用Recall@K和NDCG@K进行评估。该系统将四种领域约束——材料兼容性、精度要求、特征适用性和操作排序——作为图传播中的注意力偏差,以提高准确性,尤其是在协作信号稀疏的情况下。在航空航天数据集上进行的测试表明,与现有方法相比,PCA-GAT在推荐准确…
-
SalesLoop RL框架提升销售线索排名性能
研究人员开发了SalesLoop,一个新颖的强化学习框架,旨在通过弥合离线模型准确性与现实世界性能之间的差距来改进销售线索排名。该框架通过整合面向性能的奖励系统和列表式优化目标,解决了指标不匹配和时间分布漂移等问题。一家新能源汽车制造商的生产A/B测试表明,线索转化率显著累积提升,其排名骨干比基线方法实现了更高的召回率,并更有效地挖掘出高意向线索。
-
检索评估指标详解:P@K、MRR、NDCG
本文解释了用于评估检索系统性能的关键检索评估指标,包括 Precision@K (P@K)、Recall@k、Mean Reciprocal Rank (MRR) 和 Normalized Discounted Cumulative Gain (NDCG@K)。文章强调了这些指标如何捕捉排名的不同方面,并且有时会产生冲突的结果。该教程还提供了 Python 代码来构建一个评估框架,用于计算这些指标,模拟不同检索架构之间的比较,并为部署…