实体
Quokka Labs
Quokka Labs
PulseAugur coverage of Quokka Labs — every cluster mentioning Quokka Labs across labs, papers, and developer communities, ranked by signal.
总计 · 30天
2
90 天内 2
发布 · 30天
0
90 天内 0
论文 · 30天
0
90 天内 0
层级分布 · 90 天
主题
最近 · 第 1/1 页 · 共 2 条
-
LLM 生产就绪性需要超越基准测试的 10 项测试
一份 2026 年的 LLM 评估清单强调，要超越简单的基准分数，进行全面的生产就绪性测试。Quokka Labs 开发的这种方法侧重于评估整个 AI 系统，包括其数据检索、工具、护栏和失败路径，而不仅仅是模型固有的能力。关键测试包括从实际工作中构建黄金数据集、衡量任务成功率而非写作质量、区分幻觉和 RAG 基础评估、打破输出合同以及进行安全和策略边界的红队测试。
-
Snowflake Cortex AI Gateway通过动态模型路由提高效率
Snowflake 增强了其 Cortex AI Gateway 的动态模型路由功能，旨在显著降低 LLM 的运营成本。该公司声称内部测试显示，在某些工程任务中，Token 效率可提高高达三倍。这一发展表明，为每个请求都依赖最强大的模型可能是一种过时且低效的策略，强调了优化 LLM 使用以改善单位经济效益的重要性。