DeBERTa-v3-base
PulseAugur coverage of DeBERTa-v3-base — every cluster mentioning DeBERTa-v3-base across labs, papers, and developer communities, ranked by signal.
-
新的1.84亿参数安全分类器Semalith v1.4在提示注入方面优于Llama-Guard-3-8B
研究人员推出Semalith v1.4,这是一款专为大型语言模型设计的新型安全分类器。这款基于DeBERTa-v3-base构建的1.84亿参数模型在检测提示注入攻击和确保合规性方面表现出色,尤其是在金融服务领域。在评估中,Semalith v1.4在提示注入基准测试中优于Llama-Guard-3-8B,同时使用的参数量显著减少,尽管Llama-Guard-3-8B在一般危害检测方面表现更强。
-
RAKSHAK 系统在 ACL 2026 的有毒意图分类任务中获得第七名
研究人员为 ACL 2026 的 GameTox 共享任务开发了 RAKSHAK 和 M1 两个系统,专注于对《坦克世界》聊天中的有毒意图进行分类。RAKSHAK 是主要系统,它使用 DeBERTa-v3-base 模型,并结合了来自 Qwen2.5-14B 的推理蒸馏、监督对比损失以及针对稀有类别的专用头部。它还整合了来自 Jigsaw Toxic Comment 数据集的跨域迁移以及用于极端主义的 LLM 生成样本。RAKSHAK…
-
新管道采用神经符号方法解决游戏毒性问题
研究人员开发了一种新颖的神经符号管道,用于检测在线游戏聊天中的毒性,取得了0.6441的宏F1分数和0.9062的准确率。该系统在EEUCA 2026共享任务中,宏F1排名第三,准确率排名第一。它结合了Transformer模型和一个语言信息中介。该中介专门针对仇恨言论和威胁等关键少数类别,采用词汇规范化和主体定位分析等技术。该管道设计用于领域可移植性,只需对不同的游戏平台进行微调。
-
AI模型利用Schwartz理论几何改进人类价值观检测
研究人员开发了一种名为Schwartz-Geometry解码的新方法,以改进AI模型中的人类价值观检测。该方法利用了Schwartz价值观的理论结构,该结构将其描述为连续体而非独立标签。通过将这种几何形状作为软偏置应用,特别是通过事后能量解码器,该方法在不牺牲分类准确性的情况下,增强了预测标签集与理论模型的一致性。
-
研究:上下文、道德知识有助于政治价值观检测
一项新近发表在 arXiv 上的研究,调查了上下文、模型大小和道德知识在政治文本中检测 Schwartz 值(Schwartz values)的有效性。研究人员发现,虽然增加上下文能改进监督式 DeBERTa 编码器,但对更大的零样本 LLM(zero-shot LLMs)并未带来持续的益处。检索到的道德知识在各种模型和上下文条件下被证明更有持续的用处,特别是对于复杂或社会情境化的价值观。该研究表明,要达到最佳性能,需要联合评估上下文…
-
新的ADE框架为LLM扩展多锚点词表示
研究人员开发了自适应词典嵌入(ADE),一个旨在为大型语言模型扩展多锚点词表示的新框架。ADE引入了词汇投影和分组位置编码等技术,以提高效率和语义表达能力,解决了传统单向量嵌入的局限性。该框架已集成到Segment-Aware Transformer(SAT)中,并在文本分类基准测试中展现出具有竞争力的性能,且参数量显著少于现有模型。