Arnav Singhvi

Databricks通过AI Classify和向量搜索增强文档分类能力

Databricks开发了一种新颖的文档分类方法，能够处理拥有超过10万个标签的分类体系，克服了现有方法的局限性。他们的解决方案结合了向量搜索和Databricks AI Classify函数，首先检索潜在标签的短名单，然后使用AI Classify从缩减的集合中选择最合适的标签。与直接调用前沿模型相比，该方法在三个基准用例中表现出更高的准确性和显著更低的成本。