PAL-Bench

新的基准 PAL-Bench 解决了从个人照片相册中进行个人资料重建的问题

研究人员推出了 PAL-Bench，这是一个用于从纵向个人相册重建个人资料的新基准。该基准解决了评估个人资料重建任务的挑战，由于真实相册的私密性，这项任务很难进行。PAL-Bench 利用受控环境和合成用户及照片记录，来测试智能体提取事实、身份和关系的能力，同时保护隐私。目前的系统在总结用户事实方面显示出潜力，但在处理重复身份和证据引用方面存在困难，这表明在合理总结和忠实社交重建之间存在差距。