PulseAugur
中
实时 15:25:11
实体 natural-language--to--CLI

natural-language--to--CLI

PulseAugur coverage of natural-language--to--CLI — every cluster mentioning natural-language--to--CLI across labs, papers, and developer communities, ranked by signal.

Show in brief
总计 · 30天
1
90 天内 1
发布 · 30天
0
90 天内 0
论文 · 30天
1
90 天内 1
层级分布 · 90 天
主题
最近 · 第 1/1 页 · 共 1 条
  1. RESEARCH · CL_275207 ·

    新的 KaliBench 基准测试对 LLM 的网络安全 CLI 命令生成能力进行测试

    研究人员推出了 KaliBench,这是一个旨在评估大型语言模型 (LLM) 生成网络安全工具精确命令行界面 (CLI) 命令能力的新基准测试。该基准测试包含 1,642 个工具的 8,504 个查询-命令对,重点关注网络安全操作中准确命令语法和参数绑定的关键方面。初步评估显示,当前的开源模型在此任务上面临困难,没有一个模型的精确命令准确率超过 42%。然而,使用 KaliBench 的可验证奖励进行微调,显著提高了 8B 模型的性能…