实体
AutoTokenizer
AutoTokenizer
PulseAugur coverage of AutoTokenizer — every cluster mentioning AutoTokenizer across labs, papers, and developer communities, ranked by signal.
总计 · 30天
2
90 天内 2
发布 · 30天
0
90 天内 0
论文 · 30天
0
90 天内 0
层级分布 · 90 天
主题
情绪 · 30 天
2 天有情绪数据
最近 · 第 1/1 页 · 共 2 条
-
新的reskSecure方法在令牌级别阻止LLM越狱
一种名为reskSecure的新安全方法已被开发出来，用于防止针对LLM代理的提示注入攻击。与依赖提示过滤或后生成审核的传统方法不同，reskSecure在令牌级别于模型的生成循环内运行。它使用位掩码来强制执行权限，在生成不允许的短语和工具调用之前进行阻止或惩罚，从而防止敏感信息泄露。
-
Qwen 模型使用 ChatML 格式，社区改进模板
Qwen 模型（包括 Qwen2.5 系列）使用 ChatML 格式来构建对话提示，这与 OpenAI 的早期模型类似。该格式依赖于像 和 这样的特定 token，并且需要精确的换行约定才能正常工作。开发者指出，格式不正确可能导致模型输出和性能出现细微但显著的问题。此外，最近社区的努力集中在为 Qwen 模型改进和优化 Jinja 聊天模板，旨在通过严格遵循原始训练格式来确保兼容性和最佳性能。