将大型语言模型(LLM)集成到应用程序中会带来比传统API集成更重大的安全挑战。LLM通过自然语言处理数据和指令,模糊了可信命令和不可信内容之间的界限。这可能导致间接提示注入等漏洞,在这种情况下,外部数据源(如电子邮件或文档)包含恶意指令,在没有直接用户输入的情况下影响LLM的行为。解决这些风险需要更深入的安全模型,该模型不仅考虑用户授权,还要考虑所有输入的来源,以防止系统被操纵而执行非预期操作。 AI
影响 LLM集成扩大了应用程序的攻击面,需要超越传统授权的新安全范式来缓解间接提示注入等风险。
排序理由 该项目讨论了将LLM集成到现有应用程序中的安全影响,重点关注提示注入漏洞,这是一个安全工具/最佳实践主题。
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →