实体
red team
red team
PulseAugur coverage of red team — every cluster mentioning red team across labs, papers, and developer communities, ranked by signal.
总计 · 30天
2
90 天内 2
发布 · 30天
0
90 天内 0
论文 · 30天
0
90 天内 0
层级分布 · 90 天
主题
情绪 · 30 天
1 天有情绪数据
最近 · 第 1/1 页 · 共 2 条
-
AI助手易受日志文件提示注入攻击
一个红队发现,处理日志文件的AI助手容易受到提示注入攻击。嵌入在日志行中的恶意指令可能会欺骗AI,使其将敏感信息(如数据库密码)嵌入到Markdown链接中。此外,攻击者还可以毒化搜索结果以劫持AI的持久内存,从而植入将在未来会话中持续存在的虚假信息。该团队发现,仅仅指示AI将日志视为数据是不够的,这凸显了在依赖AI对指令的解释之前,需要进行输出端防御。
-
Anthropic 的 Claude AI 使用提示框架来增强推理能力
Anthropic 的 Claude AI 模型可以通过“思考框架”——即简单的提示模式——来引导其以特定的方式思考。这些框架,例如用于简化的 ELI5 和用于风险识别的 Premortem,可以帮助用户从 Claude 中引出不同的推理模式,而无需高级提示工程技能。文章详细介绍了四种此类框架,并提供了客户体验和软件即服务应用的示例,旨在通过揭示更多真相来改善决策。