研究人员开发了ReviewMap,一个旨在对学术论文的同行评审意见进行分类的新框架。该系统区分了评估论文主张和学术标准的意见,以及评估其贡献价值和特定发表场所适用性的意见。该框架在评估层面上展示了可靠的自动化能力,实现了0.75的交互模型Kappa分数,而属性层仍需要人工监督。这种区分对于负责任地分析LLM辅助的评审至关重要,并为评审人、作者和领域主席提供了新的工作流程。 AI
影响 提供了一种分析同行评审意见的结构化方法,有可能提高学术出版的效率和公平性。
排序理由 该集群描述了一篇学术论文中提出的新框架和方法论,符合研究类别。[lever_c_demoted from research: ic=1 ai=1.0]
- arXivLabs
- International Conference on Learning Representations
- LLM
- natural language processing
- ReviewMap
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →