English(EN) We Asked ChatGPT, Claude, Gemini and Perplexity the Same Question in 33 Categories. Here's How (and What Broke)

AI聊天机器人在 33 个类别中的推荐存在显著差异

作者 PulseAugur 编辑部 · [1 个来源] · 2026-10-30 01:42

一项研究比较了 ChatGPT、Claude、Gemini 和 Perplexity 在 33 个类别中回答相同问题时的响应。这些 AI 工具在推荐方面表现出显著差异，只有 12 个类别得出了相同的排名第一的建议。研究方法包括使用官方 API、标准化的系统提示以及将自由文本答案规范化为可比较列表的过程，包括处理品牌名称变体和别名。遇到的问题包括 API 错误、意外的 token 使用、已停用的端点以及模型提出澄清性问题。 AI

影响强调了 AI 聊天机器人推荐的可变性，建议用户在依赖它们进行产品推荐时要谨慎。

排序理由该条目详细介绍了 AI 模型在特定查询输出的比较研究，包括方法论和遇到的问题。[lever_c_demoted from research: ic=1 ai=1.0]

在 dev.to — LLM tag 阅读 →

AI 生成摘要 · Google Gemini · 来自 1 个来源。我们如何撰写摘要 →

本文如何被排名

Signal score: 29 / 100; Composite score across the factors below. Higher = stronger signal that this story matters right now.
Newsworthiness bucket: Tool; 该条目详细介绍了 AI 模型在特定查询输出的比较研究，包括方法论和遇到的问题。[lever_c_demoted from research: ic=1 ai=1.0]
Source corroboration: Single-source cluster; Only one publisher covered this so far. Single-source stories can still rank when the publisher is high-authority, but they lack cross-source corroboration.
Topics: product, other; Editorial topic classification. Feeds into how the story surfaces on /topic/<slug> hub pages and into the per-entity coverage mix.
AI-industry relevance: High; Clearly on-topic for AI-industry coverage.
Story freshness: Breaking (< 6h); Fresh story with cross-source coverage still developing. Ranking may shift as more sources report.

完整方法见我们的编辑标准。

报道来源 [1]

dev.to — LLM tag TIER_1 English(EN) · AI Search Analyzer · 2026-10-30 01:42

我们向 ChatGPT、Claude、Gemini 和 Perplexity 提出了 33 个类别的相同问题。结果如何（以及哪些出了问题）

<p>"What is the best CRM software for a small business?" Ask four AI tools and you'd expect four similar lists. We asked ChatGPT, Claude, Gemini and Perplexity the same "what is the best..." question in 33 categories, from CRM to password managers, and compared every name they ga…

本文如何被排名

报道来源 [1]

我们向 ChatGPT、Claude、Gemini 和 Perplexity 提出了 33 个类别的相同问题。结果如何（以及哪些出了问题）

相关实体

相关话题