研究人员推出EHR-Bench,一个旨在评估中文招聘任务中大型语言模型(LLMs)的新基准。该基准包含六个能力家族和五个招聘场景下的十二个不同任务,涵盖生成、提取、分类、检索、语义相似度和排名。EHR-Bench使用内部招聘数据集和公开材料构建,产生了8,336个具有可追溯来源的任务实例。对十二个LLMs的评估显示了模型在不同任务上的能力差异,其中一些模型在私有运营参考上的相对表现得以保持。 AI
影响 为评估中文招聘领域的LLMs提供了一种标准化方法,可能有助于该领域的AI选择和开发。
排序理由 该集群描述了一篇介绍AI评估基准的新学术论文。[lever_c_demoted from research: ic=1 ai=1.0]
在 arXiv cs.IR (Information Retrieval) 阅读 →
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →