实体
GPT-3.5-Turbo-16K
GPT-3.5-Turbo-16K
PulseAugur coverage of GPT-3.5-Turbo-16K — every cluster mentioning GPT-3.5-Turbo-16K across labs, papers, and developer communities, ranked by signal.
总计 · 30天
1
90 天内 2
发布 · 30天
0
90 天内 0
论文 · 30天
0
90 天内 1
层级分布 · 90 天
主题
情绪 · 30 天
1 天有情绪数据
最近 · 第 1/1 页 · 共 2 条
-
AI模型定价在OpenRouter上差异巨大，最高相差14倍
对OpenRouter平台的新分析显示，相同的AI模型存在显著的价格差异，根据提供服务的供应商不同，成本最高可达14倍。这些价格差异源于模型精度（例如fp4 vs. bfloat16）、供应商正常运行时间保证以及数据驻留政策等因素，而这些因素仅凭模型名称无法清晰体现。研究还强调了延迟测量和韩语输出质量方面的问题，并指出标准基准测试无法预测在细微语言任务上的表现。
-
新的HiCI模块将LLaMA-2的上下文扩展到10万个token
研究人员开发了一种名为HiCI（分层构建-集成）的新型注意力模块，旨在改进长上下文语言建模。该模块显式地分层构建信息，构建片段级表示，将它们集成到全局上下文中，然后广播该上下文以条件化注意力。当以极少的参数添加应用于LLaMA-2时，HiCI将上下文窗口扩展到10万和6.4万个token，在各种基准测试中显示出一致的改进。