研究人员开发了 Vague2Detect,这是一个旨在改进开放世界物体检测中模糊提示解释的新颖系统。与 YOLO 等仅限于固定类别列表的传统模型不同,Vague2Detect 通过集成知识库和大型语言模型来增强 YOLO-World 等模型。该系统使用 Sentence-BERT 查询知识库以获取候选对象,然后使用 YOLO-World 进行验证。对于知识库未涵盖的提示,GPT-3.5 Turbo 会动态地用新概念扩展知识库。这种方法将模糊提示成功率 (VPSR) 从单独使用 YOLO-World 的 32% 显著提高到 61%,通过 GPT 回退可高达 85%,尤其是在家庭场景检测任务中。 AI
影响 增强了人工智能系统理解和执行细致、现实世界指令的能力,有可能改善人机在视觉任务中的交互。
排序理由 该集群描述了一篇详细介绍改进物体检测新方法的最新研究论文。
在 Hugging Face Daily Papers 阅读 →
- GPT-3.5 Turbo
- Ibrohimjon Muminov
- knowledge base
- Open Images V7
- Sentence-BERT: Sentence Embeddings using Siamese BERT-Networks
- Vague2Detect
- YOLO
- YOLO-World
- Commonsense-Guided Open-World Object Detection Using LLMs and Visual-Semantic Matching
AI 生成摘要 · Google Gemini · 来自 2 个来源。 我们如何撰写摘要 →