实体
TenetBench
TenetBench
PulseAugur coverage of TenetBench — every cluster mentioning TenetBench across labs, papers, and developer communities, ranked by signal.
总计 · 30天
2
90 天内 2
发布 · 30天
0
90 天内 0
论文 · 30天
2
90 天内 2
层级分布 · 90 天
主题
情绪 · 30 天
2 天有情绪数据
最近 · 第 1/1 页 · 共 2 条
-
新的俄语语料库评估大型语言模型是否遵守职业道德
研究人员开发了 TenetBench，一个新设计的俄语语料库，用于评估大型语言模型在多大程度上遵守职业道德规范。该语料库将与道德条款相冲突的请求与良性替代方案配对，从而能够精确评估模型行为。对十四个模型的初步评估显示，大多数模型在没有充分警告的情况下生成了冲突内容，这凸显了当前大型语言模型在道德合规方面存在显著差距。
-
新的TenetBench基准揭示大型语言模型违反道德规范
一个名为TenetBench的新基准已被开发出来，用于评估大型语言模型在多大程度上遵守专业行为准则。该基准将冲突的请求与良性替代方案配对，揭示大多数经过测试的模型经常产生未标记的道德规范违规行为。该数据集包含超过3400个源自俄语专业行为准则的请求对，发现14种模型配置中有11种在大多数请求上产生了冲突内容，而且通常没有发出警告。