研究人员推出了DECODEM，这是一个新的基准数据集，旨在评估从组织文件中自动提取公司治理变量的能力。该论文详细介绍了在该数据集上使用大型语言模型（LLMs）进行的实验，结果表明，对于许多规定，自动化提取是可行的，并且准确率很高。虽然前沿模型表现良好，但研究也表明，流水线设计有助于弥合先进模型和注重效率的模型之间的能力差距。 AI
影响 该基准可以加速LLMs在法律研究和公司治理分析中的应用。
排序理由 该集群包含一篇介绍新基准数据集并评估其上LLM性能的研究论文。[lever_c_demoted from research: ic=1 ai=1.0]
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →
