5B-active model

AI模型评估从知识回忆转向工具使用能力

一位Reddit用户改变了对小型AI模型的看法，不再基于它们的知识回忆来评估，而是评估它们利用外部工具的能力。该用户指出，虽然小型模型（约50亿活跃参数）可能没有广泛的内部知识，但它们可以被训练来有效地调用外部文档或代码库，而不是编造看似合理但错误的答案。这种方法被认为对于信息可以动态检索和审计的实际应用更有价值，尽管仍然存在一个挑战，即确保模型能够识别它们不知道某事并需要使用工具。