研究人员推出SWARM，一个新推出的多语言数据集，旨在检测搜索引擎结果中的俄罗斯宣传。该数据集包含九种语言的2,183个搜索引擎结果，每个条目都由训练有素的编码员标注，以识别对反复出现的俄罗斯宣传叙事的支持。使用基于来源的阻止列表、监督分类器和大型语言模型（LLM）进行的基准测试显示，阻止列表不足以应对宣传出现在主流网站上，而不仅仅是标记的出口。虽然内容级分析更有效，但LLM的F1分数（0.73）高于监督分类器（约0.5），并且较小的LLM有时会混淆主题相关性与认可。 AI
影响 该数据集可以提高AI模型识别和减轻国家支持的虚假信息在不同语言和在线平台上传播的能力。
排序理由 该集群包含一篇介绍新数据集和评估方法的论文。[lever_c_demoted from research: ic=1 ai=1.0]
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →
