Sunway

LLM在为专用架构生成高效代码方面遇到困难

研究人员推出了CodegenBench，这是一个新的基准套件，用于评估大型语言模型（LLM）在不同硬件架构上生成高效并行代码的能力。该基准包括x86_64、Sunway和Kunpeng平台的标准BLAS例程和专用内核。初步评估表明，虽然LLM在常见架构上表现良好，但它们在缺乏广泛公开文档和训练数据的特定领域架构上遇到困难，这表明其跨平台泛化能力存在局限性。