Johannes Jakubik

TerraMind：首个面向地球观测的任意到任意多模态基础模型

研究人员推出了TerraMind，一个专为地球观测任务设计的新型多模态基础模型。该模型独特地结合了令牌级和像素级数据表示，使其能够捕捉高级上下文信息和细粒度的空间细节。TerraMind展示了强大的零样本和少样本学习能力，引入了一种称为“模态内思考”（TiM）的新技术，用于微调和推理期间的数据增强，并在PANGAEA等基准测试中取得了最先进的性能。该模型、其预训练数据集以及相关代码均在宽松许可下公开提供。