一篇新的研究论文探讨了大型语言模型在预测网页设计A/B测试结果方面的有效性。研究发现，虽然Gemini 3 Flash模型可以与测试结果达成中等程度的一致，但其预测往往基于非显著性测试。即使只关注统计学上的显著结果，该模型的表现也尚无定论。研究还指出，转化率优化（CRO）领域的人类专家也表现出类似的局限性，他们之间的共识度高于与实际测试结果的一致度，这表明共识本身并不等同于预测准确性。 AI
影响 强调了LLM可靠预测现实世界结果的能力局限性，建议在部署它们进行关键决策时需谨慎。
排序理由 学术论文，详细介绍了新的方法论和实验结果。[lever_c_demoted from research: ic=1 ai=1.0]
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →
