Text-to-Seed

Text-to-Seed框架使用扩散模型进行开放词汇量分割

研究人员开发了一种新颖的、无需训练的开放词汇量语义分割框架，名为Text-to-Seed (T2S)。该方法重新利用扩散模型（特别是Stable Diffusion）来生成文本引导的种子点。然后，这些种子点被用作Segment Anything Model (SAM)的提示，以生成精确的对象掩码。T2S在标准基准测试中表现出色，无需进行特定任务的训练或额外的标注，突显了语义基础与种子驱动的空间分割之间的协同作用。