PulseAugur
实时 02:22:15
English(EN) AI Overviews in Academic Search: Evaluating AI-generated Summaries of Search Results in a Domain-specific Search Engine

学术搜索中的AI摘要在社会科学研究中表现好坏参半

一项发表在arXiv上的新研究探讨了AI生成的摘要在社会科学领域学术搜索结果中的有效性。研究人员评估了两个通用AI模型(一个商业模型和一个开源模型),以开发用于学术部署的错误分类法和安全措施。一项包含30名参与者的用户研究表明,虽然AI摘要并未显著提高工作量或满意度等指标,但它们在降低心智负担和挫败感方面呈现出趋势。参与者很少展开摘要,点击和查询重述次数略有减少,这表明AI摘要可能通过集中信息线索来帮助早期筛选。 AI

影响 AI摘要可能有助于学术搜索结果的早期筛选,但其有效性取决于上下文和用户。

排序理由 学术论文,详细介绍AI在特定领域应用的调研结果。[lever_c_demoted from research: ic=1 ai=1.0]

在 arXiv cs.IR (Information Retrieval) 阅读 →

AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →

学术搜索中的AI摘要在社会科学研究中表现好坏参半

报道来源 [1]

  1. arXiv cs.IR (Information Retrieval) TIER_1 English(EN) · Daniel Hienert ·

    学术搜索中的AI概览:在特定领域搜索引擎中评估AI生成的搜索结果摘要

    Evaluating search engine results pages (SERPs) to assess result relevance is a demanding step in academic search. In a formative mixed-methods design study, we examine AI-generated SERP-level summaries as a support feature in an academic search engine for social science informati…