实体
Perspective API
Perspective API
PulseAugur coverage of Perspective API — every cluster mentioning Perspective API across labs, papers, and developer communities, ranked by signal.
总计 · 30天
3
90 天内 3
发布 · 30天
0
90 天内 0
论文 · 30天
3
90 天内 3
层级分布 · 90 天
主题
最近 · 第 1/1 页 · 共 3 条
-
研究论文批评 Perspective API 在 NLP 和 LLM 评估中的终结
一篇题为《再见 Perspective API：对 NLP、CSS 和 LLM 评估中衡量基础设施的启示》的研究论文，讨论了 Perspective API 停用所带来的挑战和经验教训。该论文探讨了在自然语言处理、CSS 和更广泛的 LLM 评估背景下构建稳健衡量基础设施的意义。它强调了在快速发展的 AI 领域中，适应性和可持续的评估方法的重要性。
-
新的ThreatCore基准凸显AI在隐式威胁检测方面的挣扎
研究人员推出了ThreatCore，这是一个用于自然语言处理中细粒度威胁检测的新基准数据集。该数据集旨在为识别显式威胁、隐式威胁和非威胁提供更一致和标准化的方法，以解决现有标签中的不一致之处。在ThreatCore上的评估表明，当前的语言模型在检测隐式威胁方面仍然存在困难，而引入语义角色标注（Semantic Role Labeling）可能通过阐明有害意图结构来提高性能。
-
研究人员批评对专有工具在NLP和LLM评估中的依赖
两篇新研究论文探讨了NLP的进展和挑战。一篇论文介绍了ImCoref-CeS，一个结合了监督神经方法和基于LLM的推理以改进共指消解的新框架。另一篇论文讨论了Perspective API关闭的影响，强调了在毒性测量中依赖专有工具的风险，并倡导独立的、可复现的基础设施。