Clarification Questioning

新的基准DiscoBench评估LLM搜索代理的澄清能力

引入了一个名为DiscoBench的新基准，用于评估搜索代理（特别是由LLM驱动的代理）处理模糊查询的能力。DiscoBench评估这些代理识别模糊性、提出澄清性问题以及通过用户交互恢复正确推理路径的有效性。实验表明，代理经常在模糊性检测方面遇到困难，并且重复搜索可能不如寻求澄清甚至猜测有效，这突显了当前代理在交互式问题解决能力方面的差距。