一项新的研究论文介绍SITO,这是一个旨在评估商业文本安全API有效性的合成基准。该研究重点关注Tuteliq Detect,评估其在英语、乌克兰语和混合语言中的六类危害类别上的表现。SITO发现,虽然Tuteliq Detect在英语文本上表现良好,但其对第三方报告的持续危害的召回率显著较低,并且因文本生成器而异。研究人员还注意到重复运行中的不一致性,并建议平台自行衡量其流量的误报。 AI
影响 凸显了商业文本安全API中潜在的不准确性,影响了内容审核和用户安全平台。
排序理由 研究论文,详细介绍了评估文本安全API的新基准。 [lever_c_demoted from research: ic=1 ai=1.0]
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →