Feng Xiao

新基准评估LLM嵌入在文本异常检测中的性能

研究人员推出了Text-ADBench，一个旨在评估文本异常检测方法的新基准。该基准利用了来自不同大型语言模型（LLMs）在包括新闻、社交媒体和科学出版物在内的各种文本数据集上的嵌入。实验表明，嵌入的质量显著影响异常检测性能，并且在使用LLM嵌入时，传统的浅层算法与深度学习方法的性能相当。该研究还基于跨模型性能矩阵中的低秩特征，识别出一种高效的模型评估策略，并且包括嵌入和代码的工具包已开源，以支持未来的研究。