PulseAugur
中
实时 11:45:50
English(EN) Dermatologist Magnus Lynch gave 200 biopsy-proven skin lesions to GPT-6 Astra, Claude Fable 5.1 and a 2015 Google image network fine-tuned for about twenty minu

LLM Claude Fable 5.1 和 GPT-6 Astra 在皮肤病变诊断方面落后于旧版 CNN

一位皮肤科医生将两种大型语言模型 GPT-6 Astra 和 Claude Fable 5.1 的诊断准确性与一个 2015 年的 Google 图像网络在 200 个经活检证实的皮肤病变上进行了比较。旧的 Google 网络准确率为 62%,而两种 LLM 的准确率均为 42%。这项研究的数据和代码均公开可用,突显了当前 LLM 在医学诊断方面的局限性,因为在设定的阈值下,CNN 会漏诊 30 例黑色素瘤中的 18 例。 AI

影响 与较旧的专业模型相比,当前的 LLM 在皮肤病学方面的诊断准确性有限,表明医学 AI 应用需要进一步发展。

排序理由 比较 LLM 在特定医疗任务上相对于现有模型的性能。[lever_c_demoted from research: ic=1 ai=1.0]

在 Mastodon — sigmoid.social 阅读 →

AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →

LLM Claude Fable 5.1 和 GPT-6 Astra 在皮肤病变诊断方面落后于旧版 CNN

本文如何被排名

Signal score
13 / 100
Composite score across the factors below. Higher = stronger signal that this story matters right now.
Newsworthiness bucket
Tool
比较 LLM 在特定医疗任务上相对于现有模型的性能。[lever_c_demoted from research: ic=1 ai=1.0]
Source corroboration
Single-source cluster
Only one publisher covered this so far. Single-source stories can still rank when the publisher is high-authority, but they lack cross-source corroboration.
Topics
model release, product, other
Editorial topic classification. Feeds into how the story surfaces on /topic/<slug> hub pages and into the per-entity coverage mix.
AI-industry relevance
High
Clearly on-topic for AI-industry coverage.
Story freshness
Breaking (< 6h)
Fresh story with cross-source coverage still developing. Ranking may shift as more sources report.

完整方法见我们的编辑标准。

报道来源 [1]

  1. Mastodon — sigmoid.social TIER_1 English(EN) · [email protected] ·

    皮肤科医生 Magnus Lynch 将 200 个经活检证实的皮肤病变提供给 GPT-6 Astra、Claude Fable 5.1 以及一个经过约二十分钟微调的 2015 年 Google 图像网络

    Dermatologist Magnus Lynch gave 200 biopsy-proven skin lesions to GPT-6 Astra, Claude Fable 5.1 and a 2015 Google image network fine-tuned for about twenty minutes. The old network named the right diagnosis for 62%. Both chatbots got 42%. Not a clean win. It's a small sample, and…