GEM-Bench

新基准测试评估生成式AI营销中的广告整合

研究人员推出GEM-Bench，一个旨在评估生成引擎营销（GEM）系统中广告注入响应生成的新基准测试。GEM涉及将广告整合到像聊天机器人这样的生成式AI模型的输出中。该基准测试包括聊天机器人和搜索场景的数据集、用户满意度和参与度的指标体系以及基线实现。初步研究结果表明，虽然简单的广告插入可以提高点击率，但可能会降低用户满意度，这凸显了一个需要进一步研究的权衡。