实体
AstroPT
AstroPT
PulseAugur coverage of AstroPT — every cluster mentioning AstroPT across labs, papers, and developer communities, ranked by signal.
总计 · 30天
2
90 天内 2
发布 · 30天
0
90 天内 0
论文 · 30天
2
90 天内 2
层级分布 · 90 天
主题
最近 · 第 1/1 页 · 共 2 条
-
AstroPT 利用星系数据探究 LLM 可解释性
一项新研究提出利用天文数据来更好地理解大型语言模型 (LLM) 的可解释性。研究人员在一个名为 AstroPT 的 Transformer 模型上训练了星系图像，利用天文学中已知的物理关系和概念难度作为受控环境。研究结果表明，概念在训练过程中以可预测的顺序出现，并与其已知难度相呼应，这可能有助于校准 LLM 的可解释性方法。
-
新基准测试评估科学基础模型的tokenizer
一篇新论文介绍了“星系的tokenizer指南”，评估了用于Transformer基础模型的 Astronomical 图像的四种分词方法。研究发现，虽然 JetFormer 等方法在重建方面表现出色，VQ-VAE 在预测物理特性方面表现良好，但没有一种方法能在所有指标上普遍优于其他方法。这项研究强调了重建质量与下游任务性能的分离，并表明需要更先进的探测技术来充分利用科学基础模型。