FlowTranslator 是一个新颖的框架,通过利用扩散模型和基于流的编辑技术,实现了训练免费的图像内机器翻译。与以前的方法不同,这种方法在图像内生成准确的翻译,而无需配对的训练数据。通过使用 OCR 和 LLM 进行提示生成,并引入区域耦合释放和耦合扩展轨迹控制,FlowTranslator 在 PRIM BLEU 和 COMET 等基准测试中取得了有竞争力的性能,并在真实的场景照片上展示了强大的结果。 AI
影响 这项研究可能带来更高效、更易于访问的图像内文本翻译工具,减少对专业训练数据的需求。
排序理由 该项目描述了一篇详细介绍图像内机器翻译新颖框架的研究论文。[lever_c_demoted from research: ic=1 ai=1.0]
在 Hugging Face Daily Papers 阅读 →
- COMET
- Coupling Expansion
- diffusion models
- FlowTranslator
- in-image machine translation
- LLM
- OCR
- PRIM BLEU
- Region Coupling Release
- ScenePair
- Standard Chinese
- UniTranslator
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →