Bolun Zhang

新框架使用希尔数量化社会科学中LLM的不确定性

一篇新的研究论文提出了一个框架，用于评估大型语言模型（LLM）在应用于社会科学研究时产生的不确定性。该论文认为，明确评估不确定性对于科学探究至关重要，这一原则在社会科学和机器学习领域早已确立。所提出的框架利用希尔数（Hill numbers），这是一类多样性度量方法，可以在共同的尺度上统一现有的不确定性量化指标，并适应各种语义相似性和输出分布敏感性的概念。该方法通过在社会科学中的四个实证应用进行了展示。