gemma3:4b
PulseAugur coverage of gemma3:4b — every cluster mentioning gemma3:4b across labs, papers, and developer communities, ranked by signal.
2 天有情绪数据
-
新基准 P3Bench 解决了大语言模型的个性化隐私问题
研究人员引入了一个名为 P3Bench 的新基准,以解决大语言模型 (LLM) 中的个性化隐私控制问题。该基准扩展了上下文隐私策略,纳入了用户特定的披露偏好,认识到即使在同一上下文中,个体之间可接受的信息披露程度也可能存在显著差异。实验表明,基于提示的策略在强制执行这些个性化隐私设置方面并不可靠,Qwen2.5-7B 和 Gemma3-4B 等模型表现出很高的策略忽略率。为了克服这一问题,开发了一种名为 Repair 的新颖推理时方法…
-
Ollama 生产环境设置详情介绍 GPU 内存管理和负载均衡
本文详细介绍了 Ollama 的生产环境设置,重点关注 GPU 内存管理和并发负载。作者描述了一种混合 GPU 驻留策略,将 qwen3:8b 和 BGE M3-Embedding 等常用模型固定在内存中,同时在单独的实例上运行不太常用的模型。他们强调调整 Ollama 的 `OLLAMA_MAX_LOADED_MODELS` 参数以防止 VRAM 抖动,并引用了一个生产事件,其中延迟显著增加。该架构利用 Kong API Gatew…
-
神经符号AI管道简化LEED v4.1 BD+C认证
研究人员开发了一个神经符号AI管道,以简化LEED v4.1 BD+C认证过程,该过程通常涉及对项目文档进行广泛的手动审查。该系统将项目PDF与LEED信用部分对齐,检索证据,并使用本地托管的40亿参数语言模型验证合规性。实验表明,虽然40亿参数模型(gemma3:4b)在基于文本的验证方面表现强劲,但完整的神经符号配置的准确性受到提取失败和定性类别挑战的影响。研究发现,包含低分辨率图像会持续降低准确性。
-
新的MET方法增强了AI模型的多语言道德推理能力
研究人员开发了一种新颖的两步提示方法MET(Multilingual Ethics with Theory-grounded reasoning,基于理论的道德多语言推理),旨在提高语言模型在不同文化和语言中的道德推理能力。该方法通过融入特定文化的道德基础,并将推理 grounding 在已建立的哲学和心理学理论中,解决了当前多语言评估基准和推理时间方法的局限性。此外,MET-D,一种蒸馏技术,通过无外部监督的自蒸馏来增强这一过程,从…
-
新AI框架增强玻利维亚车牌识别能力
研究人员开发了BLPR,一个用于鲁棒车牌识别的深度学习框架,专门针对玻利维亚的独特条件而设计。该系统采用基于置信度的方法,利用基于YOLO的检测器和字符识别器,并在模糊情况下采用Gemma3 4B视觉语言模型作为回退机制。该框架包含自适应几何校正和光照校正,并在Blender生成的合成数据和玻利维亚拉巴斯市的真实街道数据上进行了训练。BLPR系统在真实数据上实现了89.6%的字符级识别准确率,并附带了首个公开的玻利维亚LPDR数据集。
-
研究发现对比提示可提升非洲语言NLI性能
一项新近发表在arXiv上的研究,探讨了低资源非洲语言(特别是斯瓦希里语、约鲁巴语和豪萨语)的自然语言推断(NLI)的提示策略。研究人员在Llama3.2-3B和Gemma3-4B模型上评估了五种不同的提示技术,发现对比提示始终能获得最佳结果。研究强调了提示构建在实现这些语言稳健的NLI性能方面起着至关重要的作用,甚至优于具有少样本示例或思维链推理的模型。
-
AI使用集合距离奖励改进放射学报告生成
研究人员开发了一种名为集合距离奖励(SDR)的新型奖励系统,用于利用AI改进放射学报告生成。该方法将报告视为无序发现的集合,使用生成嵌入与参考嵌入之间的集合到集合距离作为奖励。SDR已在多个模型和数据集上展示了持续的改进,其表现优于标准的监督微调和精确匹配奖励。
-
集合距离奖励提升放射报告AI生成能力
研究人员开发了一种新颖的基于集合的奖励系统,用于使用视觉语言模型生成放射报告。该方法将报告句子嵌入集合中,并使用集合到集合的距离作为奖励,克服了传统精确匹配指标在无序发现方面的局限性。该方法在多种模型(包括闭源LLM)的训练后和测试时选择方面均显示出显著改进,并且还可以优化生成效率。
-
RAG 管道在引用方面遇到困难,开发者提出修复方案
一位开发者在 GitHub 上详细介绍了一个复杂的父子 RAG 管道,尽管它拥有混合向量存储和 LangGraph 等高级组件,但仍存在引用不准确和幻觉的问题。确定的核心问题是检索单元(子块)、生成单元(父文档)和引用单元之间的不匹配,导致页面引用错误。提出的解决方案包括预先捕获子块的精细页面引用,并将其与用于生成的扩展父文档相关联,以确保引用的准确性。
-
Ollama 用户寻求在不进行推理的情况下获取令牌计数
用户正在询问是否可以在不启动完整推理过程的情况下从 Ollama 获取令牌计数。当前的 API 结构似乎需要一个提示,即使只想要令牌估算也会导致推理。这表明对于需要精确令牌计算以进行提示优化或成本管理的开发者来说,可能存在功能差距。