Bin Xia

DreamOmni3：新框架支持基于涂鸦的图像编辑与生成

研究人员推出了 DreamOmni3，一个专为基于涂鸦的图像编辑与生成而设计的新框架。该模型通过结合手绘草图、文本和原始图像，克服了仅使用文本提示的局限性，从而实现对编辑和内容创作更精确的控制。DreamOmni3 采用了一种新颖的联合输入方案，将原始图像和涂鸦源图像输入模型，通过颜色区分区域，并使用位置编码精确定位编辑。该项目还为这些任务建立了新的基准，并计划公开发布其模型和代码。