Gemma 4 26B-A4B
PulseAugur coverage of Gemma 4 26B-A4B — every cluster mentioning Gemma 4 26B-A4B across labs, papers, and developer communities, ranked by signal.
8 天有情绪数据
-
LLM 上下文基准测试:预填充速度和 KV 缓存对代理最重要
对 13 种不同的大型语言模型在 65K 至 128K 令牌的上下文长度下进行的基准测试显示,对于代理工作负载而言,提示处理(预填充)速度是最关键的因素,而不是令牌生成速度。使用 llama.cpp 在 RX 7900 XT GPU 上进行的测试表明,KV 缓存配置和模型架构(特别是 MoE 模型)显著影响了性能。结果表明,优化预填充效率是需要广泛上下文处理的应用程序的关键。
-
开发者使用本地 LLM 构建了与游戏无关的 NPC 引擎
一位开发者创建了一个与游戏无关的 NPC 引擎,该引擎利用小型本地语言模型来增强 RPG 体验。该引擎使用 NVIDIA Parakeet 0.6 进行语音转文本,使用 Gemma 4 26B A4B 作为语言模型,并使用 Qwen3-TTS 进行语音输出,从而实现了快速响应。通过仅注入相关的游戏内操作来优化提示,防止模型过载,从而使用了检索增强生成 (RAG)。
-
新AI架构量化法律结果预测中的司法自由裁量权
研究人员开发了一种新颖的法官感知门控多任务学习架构,通过区分事实案件证据和司法自由裁量权来更好地预测法律结果。该方法在13,937个英国就业法庭判决上进行了评估,其性能优于Gemma-4 26B-A4B等大型语言模型的标准监督微调。门控架构的参数效率更高,可解释性更强,能够定位司法背景显著影响预测的案件。
-
DistilledGemma系统在人物地名关系抽取中实现高精度 · 跟踪2个来源
研究人员开发了DistilledGemma,一个从多语言历史文章中抽取人物地名关系的高效系统,在HIPE-2026共享任务中取得了0.688的平均分。该系统采用三阶段知识蒸馏流程,首先在大型语言模型上进行提示工程,然后使用QLoRA对Gemma 4 26B模型进行监督微调,最后将响应级蒸馏到一个更小的Gemma 4 E2B学生模型中。这种方法成功地减小了模型尺寸,同时保持了强大的推理能力,在标准和二元测试集的效率-准确性方面均排名第二。
-
Google Gemma 4 模型详解:从手机到高端 GPU 的显存需求
Google 发布了 Gemma 4,提供四种不同显存需求的模型变体。最小的模型适用于内存极小的设备,而最大的 31B Dense 模型需要至少 22GB 显存,最适合 RTX 5090 等 GPU。26B-A4B MoE 变体被强调为一种平衡选择,通过仔细的上下文管理可安装在 16GB 显卡上,推荐给拥有 16GB 或 24GB GPU 的用户。
-
Google DeepMind 的 Gemma 4 模型现已在 Amazon Bedrock 上可用
Amazon Bedrock 现在提供由 Google DeepMind 开发的 Gemma 4 系列开放权重模型。这些模型专为各种部署场景的高效性能而设计,包括指令微调的变体,如 Gemma 4 31B、Gemma 4 26B-A4B 和 Gemma 4 E2B。它们具有内置推理、原生函数调用以及文本和图像的多模态输入功能。Gemma 4 模型在 Apache 2.0 许可下提供,通过 AWS 的托管服务为用户提供数据保护和运营控制。
-
Google DeepMind 发布 DiffusionGemma 26B 多模态模型
Google DeepMind 发布了 DiffusionGemma 26B A4B IT,这是一个开源的多模态生成模型,能够处理文本、图像和视频输入以生成文本输出。该模型基于 Gemma 4 26B A4B Mixture-of-Experts 架构构建,拥有 252 亿个总参数和 38 亿个激活参数。它支持 256K token 的上下文窗口,跨 35 种以上语言的多语言推理,并且可以在 NVIDIA H100 GPU 上每秒生成…
-
用户寻求本地AI处理复杂文档,提及Gemma 4的局限性
一位Reddit用户正在寻求本地AI解决方案的建议,用于处理复杂的工业文档,特别是轧钢厂的试验证明。他们的目标是用一个系统替换商业产品,该系统能够将多页PDF拆分成单独的报告,提取关键元数据(如批号和合金类型),并将这些信息存储在可搜索的数据库中。用户已经尝试了Gemma 4 26B A4B,但发现它在确定页面边界和处理不同文档格式方面存在困难,尽管在对单个报告使用结构化提示时表现良好。他们正在考虑构建代理工具,并正在寻找精通工具调用…
-
Google DeepMind 发布 DiffusionGemma 26B 多模态人工智能模型
Google DeepMind 发布了 DiffusionGemma 26B A4B IT,这是一个开放权重多模态生成模型,能够处理文本、图像和视频输入以生成文本输出。该模型基于 Gemma 4 26B A4B 混合专家架构构建,拥有 252 亿个总参数和 38 亿个激活参数。它支持 256K token 上下文窗口、原生函数调用以及超过 35 种语言的多语言推理,在 NVIDIA H100 GPU 上实现了超过 1,100 toke…
-
用户在无 GPU 的旧 PC 上运行先进 LLM
Reddit 的 r/LocalLLaMA 社区的一名用户分享了他们在没有独立 GPU 的低配置电脑上运行 Gemma-4-26B-A4B 语言模型的经验。该用户报告了令人印象深刻的性能,在配备 32GB RAM 的旧款 i5 处理器上实现了约 7 T/s 的速度,这表明利用先进 LLM 可能并非必须使用高端 GPU。
-
Google Gemma 4 12B 在用户测试中接近 26B 性能
Reddit r/LocalLLaMA 版块的一位用户分享了他们测试 Google 新款 Gemma 4 模型(特别是 12B 和 26B-A4B 版本)的经验。该用户发现,尽管 26B-A4B 模型仅使用了 40 亿个活跃参数,但在生成具有物理效果的复杂 HTML5 Canvas 动画方面,其性能优于 12B 模型。虽然 26B-A4B 速度更快,但 12B 模型在显存占用方面显著降低的情况下提供了可比的性能,使其成为 16GB R…
-
用户测试 LLM 辅助文章写作,使用假设的 Star Fox 评测
一位 Mastodon 用户正在试验使用大型语言模型来辅助撰写文章,并以一篇假设性的 Star Fox 游戏评测作为测试案例。他们发现 LLM 在事实核查、重写和组织想法等任务上很有用。该用户计划发布这篇评测,并在之后评估其娱乐性的预测准确性。