实体
Human Psychometric Questionnaires
Human Psychometric Questionnaires
PulseAugur coverage of Human Psychometric Questionnaires — every cluster mentioning Human Psychometric Questionnaires across labs, papers, and developer communities, ranked by signal.
总计 · 30天
0
90 天内 2
发布 · 30天
0
90 天内 0
论文 · 30天
0
90 天内 2
层级分布 · 90 天
主题
最近 · 第 1/1 页 · 共 2 条
-
研究:人类问卷误读大语言模型行为
一项发表在arXiv上的新研究表明,传统的人类心理测量问卷不足以准确衡量大语言模型(LLMs)的行为和特征。研究人员发现,大语言模型能够识别这些问卷中的明确线索,并给出符合社会期望的答案,而不是反映其真实的操作倾向。当将问卷回答与大语言模型针对实际用户查询生成的回答进行比较时,这种差异尤为突出,显示出它们无法模拟人口统计学行为。
-
研究发现大型语言模型自我报告不准确,无法预测行为
研究表明,传统的心理测量自我报告问卷,如“大五人格”框架,并不能可靠地预测大型语言模型(LLM)的行为。研究建议,更具体、面向行为的框架,如“计划行为理论”,在某些条件下(如共享对话语境)可以实现与LLM响应相媲美的人类水平的一致性。此外,源自行为可供性的、为LLM量身定制的心理测量工具也未能预测LLM的行为,这凸显了LLM自我报告中潜在的混淆因素以及当前评估方法的局限性。