实体
EffiBench-X
EffiBench-X
PulseAugur coverage of EffiBench-X — every cluster mentioning EffiBench-X across labs, papers, and developer communities, ranked by signal.
总计 · 30天
2
90 天内 2
发布 · 30天
0
90 天内 0
论文 · 30天
2
90 天内 2
层级分布 · 90 天
主题
情绪 · 30 天
1 天有情绪数据
最近 · 第 1/1 页 · 共 2 条
-
新基准揭示大型语言模型在多种语言中生成低效代码
一个名为EffiBench-X的新基准已被开发出来，用于评估大型语言模型在多种编程语言中生成代码的效率。与之前主要关注功能正确性的基准不同，EffiBench-X包含了具有人类专家解决方案作为效率基线的竞技编程任务。评估显示，包括Qwen3-32B在内的当前大型语言模型生成的代码效率远低于人类编写的代码，平均仅达到人类效率的62%左右。与Java、C++和Golang相比，模型在Python、Ruby和JavaScript等语言中的表…
-
新的AI方法训练模型以实现高效代码生成 · 已追踪2个来源
研究人员开发了新的方法来训练AI模型，使其不仅能生成正确的代码，还能生成高效的代码。一种方法RLPF（来自性能反馈的强化学习）使用分阶段的奖励系统，该系统优先考虑程序的执行进度而非正确性，然后按效率对正确程序进行排名。该方法在应用于Qwen3-32B时，显著提高了正确且可运行解决方案的生成及其相对效率。另一项研究侧重于通过改进代码的测试方式以及速度如何转化为奖励，来克服将强化学习应用于代码优化时遇到的挑战，例如测量噪声和奖励稀疏性。这…