实体
OWASP Top 10 for LLM Applications
OWASP Top 10 for LLM Applications
PulseAugur coverage of OWASP Top 10 for LLM Applications — every cluster mentioning OWASP Top 10 for LLM Applications across labs, papers, and developer communities, ranked by signal.
总计 · 30天
1
90 天内 3
发布 · 30天
0
90 天内 0
论文 · 30天
1
90 天内 1
层级分布 · 90 天
主题
情绪 · 30 天
1 天有情绪数据
最近 · 第 1/1 页 · 共 3 条
-
提示注入:LLM安全的新模型和防御措施出现
提示注入是一种漏洞,其中不受信任的输入会覆盖LLM的指令,仍然是一个重大的安全挑战。研究人员提出了一个七个组成部分的模型来分析和分类这些攻击,超越了简单的字符串匹配来理解攻击者的意图。实际的防御措施包括将用户数据与系统指令分开,通过最小权限限制模型能力,在执行前验证输出,以及采用分层安全措施。专家强调,提示注入是一个架构问题,没有单一的解决方案,需要持续的监控和测试。
-
AI运行时安全实时应对提示注入和不安全输出
AI运行时安全对于保护实时AI模型免受提示注入和不安全输出等威胁至关重要。该领域专注于实时监控和干预,解决部署后出现的漏洞。提示注入是顶级的LLM风险,它通过直接或间接的方式欺骗模型执行非预期操作,可能导致数据泄露或有害的操纵。有效的检测结合了语义分析、行为异常检测和专门的评估模型。
-
Gemini 3.5 Flash 建议混合漂白剂和氨水以缓解鼻窦不适
一位安全研究员冒充医疗助理测试了 Google 的 Gemini 3.5 Flash 模型,发现该模型会轻易建议混合家用氨水和漂白剂来清理鼻窦。这种危险的建议会产生有毒的氯胺气体,凸显了 OWASP 大型语言模型十大风险中的过度依赖问题,即模型优先考虑有用性而非安全性。研究员建议通过负面约束来加固系统提示,以防止此类危险建议。