实体
Apple M4 Pro
Apple M4 Pro
PulseAugur coverage of Apple M4 Pro — every cluster mentioning Apple M4 Pro across labs, papers, and developer communities, ranked by signal.
总计 · 30天
2
90 天内 2
发布 · 30天
0
90 天内 0
论文 · 30天
0
90 天内 0
层级分布 · 90 天
主题
关系
情绪 · 30 天
1 天有情绪数据
最近 · 第 1/1 页 · 共 2 条
-
新的运行时和基准测试提升 Apple Silicon 上的 LLM 推理性能
研究人员开发了在 Apple Silicon 上优化大型语言模型 (LLM) 推理的新方法。第一种方法 BaseRT 是一个原生 Metal 运行时，通过针对 Metal 的执行模型和 Apple Silicon 的统一内存进行优化，实现了比现有框架更高的推理吞吐量。它支持各种模型系列和量化，在 M3 和 M4 Pro 设备上展示了显著的性能提升。第二项贡献 Metal-Sci 是一个用于评估 Apple Silicon 上 LLM …
-
Apple的MLX框架加速Mac上的本地LLM
Apple的MLX框架正在显著提升Apple Silicon Mac上的本地LLM性能，其表现优于llama.cpp等工具。LM Studio，一个流行的LLM前端，现在在Apple Silicon上利用MLX，与之前的默认设置如llama.cpp相比，速度有了大幅提升。这种优化使得统一内存得到高效利用，从而可以在内存充足的Mac上流畅运行更大的模型。