Databricks 在其 Databricks Runtime 中引入了一项新的向量搜索功能,旨在优化面向批处理的向量搜索工作负载。此功能名为 NEAREST BY Join,将向量搜索作为一等 SQL 连接操作进行集成,利用 Photon 的深度内核优化和向量索引的开放存储格式。新方法旨在提高实体解析和数据丰富等任务的性能、可靠性和成本效益,超越了传统的实时单查询优化。 AI
影响 提高了面向批处理的向量搜索工作负载的效率,这对于实体解析和数据丰富等 AI 应用至关重要。
排序理由 Databricks 是主要的 AI 平台供应商,这是其核心运行时的一次重要产品功能发布。它不是前沿模型发布,而是对其 AI 工作负载数据处理能力的重大改进。
- Akash Nayar
- Alexis Schlomer
- Apache Spark
- Databricks
- Databricks Runtime
- NEAREST BY Join
- Photon
- Yingyi Bu
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →