PulseAugur
实时 10:25:07
English(EN) Selective Left-Shift: Turning Test-Time Compute and Difficulty-based Curation into Training Data for Low-Resource Code Generation

新流程改进了 LLM 的低资源代码生成能力

研究人员开发了一种新颖的三阶段流程,以增强 Julia 等编程语言的低资源代码生成能力。该方法解决了训练较少见的语言的小型语言模型所面临的数据稀缺和高计算成本问题。该流程利用编译器和测试反馈合成经过验证的训练数据,使用这些数据微调小型语言模型以建立语法理解,然后采用基于输入/输出测试的可验证奖励的强化学习。这种方法在 Julia 和其他低资源语言的基准测试中显著提高了性能,同时比以前最先进的方法使用了更少的数据和计算资源。 AI

影响 这项研究为训练较少见的编程语言的 LLM 提供了一种更有效的方法,有可能拓宽它们的适用范围。

排序理由 学术论文,详细介绍了改进 LLM 代码生成的新方法。[lever_c_demoted from research: ic=1 ai=1.0]

在 arXiv cs.LG 阅读 →

AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →

新流程改进了 LLM 的低资源代码生成能力

报道来源 [1]

  1. arXiv cs.LG TIER_1 English(EN) · Didula Samaraweera, Anjana Supun, Srinath Perera ·

    Selective Left-Shift: Turning Test-Time Compute and Difficulty-based Curation into Training Data for Low-Resource Code Generation

    arXiv:2607.07748v1 Announce Type: new Abstract: Large Language Models achieve strong code generation for high resource languages like Python and Java but suffer sharp performance drops on Low-Resource Programming Languages~(LRPLs) such as Julia. Improving Small Language Models~(S…