PulseAugur
实时 20:36:46
English(EN) What does a Bayes-filtered transformer believe? A predictive Monte Carlo approach

新研究探讨贝叶斯滤波的Transformer模型及其不确定性分解

两篇新的arXiv论文探讨了贝叶斯滤波的Transformer模型(BFTs),这是一种旨在近似贝叶斯后验预测分布的Transformer模型。第一篇论文介绍了预测性蒙特卡洛(PMC)作为一种解释BFTs内化的先验和后验信念的工具,并将其应用于风格化的任务族。第二篇论文利用贝叶斯预测推理和预测中心极限定理来分离偶然不确定性和认知不确定性,解决了如何分解BFTs(特别是像TabPFN这样的模型)中的不确定性问题。 AI

影响 这些论文在Transformer模型的可解释性和不确定性量化方面取得了进展,这对于可靠的AI部署至关重要。

排序理由 两篇arXiv论文详细介绍了用于解释和分解贝叶斯滤波的Transformer模型中不确定性的新方法。

在 arXiv cs.LG 阅读 →

AI 生成摘要 · Google Gemini · 来自 2 个来源。 我们如何撰写摘要 →

新研究探讨贝叶斯滤波的Transformer模型及其不确定性分解

报道来源 [2]

  1. arXiv cs.LG TIER_1 English(EN) · Afiq Abdillah Effiezal Aswadi, Haotong Ma, Susan Wei ·

    贝叶斯滤波的Transformer模型相信什么?一种预测性蒙特卡洛方法

    arXiv:2607.17060v1 Announce Type: new Abstract: A Bayes-filtered transformer (BFT) is a transformer trained on sequences that are generated in two steps: first a latent task is drawn from a prior, then observations are drawn conditional on that task. Trained under autoregressive …

  2. arXiv stat.ML TIER_1 English(EN) · Sandra Fortini, Kenyon Ng, Sonia Petrone, Judith Rousseau, Susan Wei ·

    通过贝叶斯预测推理对贝叶斯滤波 Transformer 进行不确定性分解

    arXiv:2602.04596v2 Announce Type: replace Abstract: Bayes-filtered transformers are transformers meta-learned on sequences from a prior predictive distribution to approximate the corresponding posterior predictive distribution. They output total predictive uncertainty in a single…