OpenHHI

新的Inter-X++基准推动了多模态人际交互分析的发展

研究人员推出Inter-X++，这是一个旨在改进数字系统中人际交互分析的新基准数据集。该数据集包含超过11,000个高保真交互序列，具有详细的动作捕捉，包括手势，并富含多模态注释，如文本描述、交互类别和主体关系。为了解决评估中的不一致问题，研究人员还提出了OpenHHI，一个统一的表示和建模框架，可同时优化交互重建和语义理解，并展示了最先进的性能。