PulseAugur
实时 08:39:38
English(EN) Why Large Language Models and Humans Converge and Diverge in Evaluating Creativity

由于上下文原因,大型语言模型与人类在创造力评估上存在分歧

一篇新发表在arXiv上的研究探讨了人类与大型语言模型(LLM)在创造力评估方面的一致性。研究发现,LLM倾向于关注新颖性等内在品质,在这方面与人类的判断高度一致。然而,当需要考虑上下文信息,如社会或市场相关性时,LLM与人类的评估则出现分歧,因为它们对这些因素不太敏感。研究还指出,不同的LLM应用着不同且多样的标准,这影响了它们的创造力判断。 AI

影响 可能需要改进LLM的创造力评估标准,以纳入上下文理解,从而更好地与人类判断保持一致。

排序理由 该集群包含一篇讨论LLM能力研究结果的学术论文。[lever_c_demoted from research: ic=1 ai=1.0]

在 arXiv cs.CL 阅读 →

AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →

由于上下文原因,大型语言模型与人类在创造力评估上存在分歧

报道来源 [1]

  1. arXiv cs.CL TIER_1 English(EN) · Pengzhao Lyu, Yeun Joon Kim, Hanlin Xiao, Yingyue Luna Luan ·

    Why Large Language Models and Humans Converge and Diverge in Evaluating Creativity

    arXiv:2607.22218v1 Announce Type: new Abstract: Despite the growing use of large language models (LLMs) as creativity evaluators, evidence of their alignment with human evaluations remains mixed, raising the question of when and why their judgments converge with or diverge from h…