Heatseeker

ChatGPT和Gemini等LLM在广告测试中难以预测客户行为

Heatseeker首席执行官Kate O'Keeffe进行的一项研究测试了大型语言模型ChatGPT、Claude和Gemini对11项过往广告实验的预测能力。这些模型总体表现不佳，三者在六项测试中均给出错误答案，并在四次测试中选择了相同的错误答案。这项研究表明，尽管LLM可以生成看似合理的解释，但它们根据提供的数据准确预测实际客户行为的能力有限，这引发了对其在实际应用中输出可信度的质疑。