PulseAugur
中
实时 20:04:39
English(EN) Running Language Models Directly in the Browser

LLM 在浏览器中运行，提升隐私和本地处理能力

作者 PulseAugur 编辑部 · [1 个来源] ·

新的进展使得大型语言模型（LLMs）可以直接在网页浏览器中运行，解决了与云服务相关的隐私担忧。SmolLM2 等项目正在创建更小、更高效的模型，这些模型可以利用浏览器的 GPU，或者通过 WebAssembly 回退到 CPU 处理。虽然这些浏览器内模型尚未达到其云端对应模型的强大程度，但它们为私密和本地化的 AI 交互提供了一条有前景的道路。 AI

影响 实现私密的、设备上的 AI 交互，减少对云提供商的依赖，并可能降低基础设施成本。

排序理由 该集群讨论了在浏览器中本地运行 LLM 的研究和开发，这是现有模型和技术的一种新颖应用。 [lever_c_demoted from research: ic=1 ai=1.0]

在 dev.to — LLM tag 阅读 →

AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →

LLM 在浏览器中运行，提升隐私和本地处理能力

报道来源 [1]

  1. dev.to — LLM tag TIER_1 English(EN) · Jaime ·

    Running Language Models Directly in the Browser

    <h2> TLDR </h2> <p>LLMs are everywhere, but every time they are used, we are giving our data away for free. There are projects like <code>SmolLM2</code> working on Small Language Models that can run completely in the browser, leveraging the GPU when possible and falling back to C…

相关实体

相关话题