PulseAugur
中
实时 16:56:13
English(EN) Mistral Small: 58 empty replies in 300 tool calls, and the retry loop

Mistral Small 在函数调用方面遇到困难,导致成本高昂和重试次数增加

Mistral Small 模型,其定价为每百万输入 token 0.15 美元,在函数调用方面表现出显著问题,即使在多次重试后,仍有 19.3% 的任务返回空回复。这导致每次成功任务的成本(0.000098 美元)高于 GPT-6 Luna(0.000051 美元),后者在无需重试的情况下通过了 93.0% 的任务。分析显示,Mistral Small 的重试占其支出的 23.9%,并且其中至少四分之三的重试仍然无法读取,这表明该模型在函数调用方面存在特定的行为问题,而不是像其他更便宜的模型那样普遍存在函数调用困难。 AI

影响 突显了特定 LLM 在函数调用任务中潜在的可靠性和成本问题,影响开发者的选择。

排序理由 对特定模型在特定任务(函数调用)上的性能及其成本影响的分析。

在 dev.to — LLM tag 阅读 →

AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →

Mistral Small 在函数调用方面遇到困难,导致成本高昂和重试次数增加

本文如何被排名

Signal score
5 / 100
Composite score across the factors below. Higher = stronger signal that this story matters right now.
Newsworthiness bucket
Tool
对特定模型在特定任务(函数调用)上的性能及其成本影响的分析。
Source corroboration
Single-source cluster
Only one publisher covered this so far. Single-source stories can still rank when the publisher is high-authority, but they lack cross-source corroboration.
Topics
model release, product
Editorial topic classification. Feeds into how the story surfaces on /topic/<slug> hub pages and into the per-entity coverage mix.
AI-industry relevance
High
Clearly on-topic for AI-industry coverage.
Story freshness
Same-day
Cluster formed today. Ranking reflects the current source set at time of score.

完整方法见我们的编辑标准。

报道来源 [1]

  1. dev.to — LLM tag TIER_1 English(EN) · Grain64 ·

    Mistral Small:300次工具调用中出现58次空回复,以及重试循环

    <p>On 300 public function-calling tasks, Mistral Small (2603) returned an empty reply 58 times, even after two retries. That is 19.3% of tasks with nothing to parse, and it is why a model priced at $0.15 per million input tokens ended up at $0.000098 per successful task against $…