Classification
PulseAugur coverage of Classification — every cluster mentioning Classification across labs, papers, and developer communities, ranked by signal.
4 天有情绪数据
-
机器学习模型需要比准确率更好的评估方法
本文批评了在机器学习中仅依赖准确率指标的普遍做法,认为这无法全面反映模型性能。文章强调了评估校准误差和概率预测的重要性,并指出这些方面常常被忽视但对理解模型可靠性至关重要。作者主张在简单准确率分数之外,采取更细致的模型评估方法。
-
优化AI模型大小:避免为不必要的推理能力过度付费
许多AI管道为强大的“前沿模型”过度付费,而对于分类或实体识别等任务,更简单、更紧凑的模型就足够了。选择合适大小的模型可以降低成本,通过支持本地处理来提高数据隐私,并简化治理。组织应根据推理需求、使用频率、数据敏感性和错误成本仔细评估工作负载,以避免过度支出和配置不足。
-
新模型使用合成数据进行贝叶斯生存分析
研究人员推出了一种新颖的摊销贝叶斯生存分析方法——Survival In-Context (SIC)。该方法利用预先拟合的范式,在合成数据上进行预训练,从而实现高效的上下文学习,用于事件发生时间建模。SIC旨在通过在单次前向传播中近似贝叶斯后验预测推断,而无需针对特定任务进行训练,来解决医学应用中的挑战,例如数据有限和复杂的协变量交互。
-
数据科学学习俱乐部发布R、Python和AI视频教程
数据科学学习俱乐部(DSLC)发布了一系列教育视频,涵盖高级R语言编程主题,包括拟代(quasiquotation)和数据清洗。此外,他们还提供关于Python深度学习的内容,重点关注对象检测,以及“R语言统计学习导论”(ISLR)系列中的分类部分。这些资源可通过YouTube链接获取,并得到其Patreon社区的支持。
-
为审核聊天机器人设计可靠的四层 LLM API
本文提出了一种用于 LLM 驱动的审核聊天机器人的健壮的四层 API 设计。作者强调,可靠性源于严格的输出契约、明确的回退机制和经过衡量的评估集,而不仅仅是模型性能基准。这种方法关键在于定义清晰的、由策略驱动的标签,并处理格式错误的输入或不确定的分类等边缘情况,将它们路由给人工审核,确保 API 的输出始终可用。
-
Pairwise Difference Learning for Classification 详细介绍见新的 arXiv 论文 · 跟踪 3 个来源
研究人员开发并分析了用于分类任务的成对差分学习 (PDL),这是一种元学习技术,它预测两个输入实例结果之间的差异,而不是直接将实例映射到结果。一篇论文侧重于通过将不确定性分解为随机不确定性和认知不确定性分量来量化 PDL 分类器中的不确定性,分析预测准确性和不确定性感知。另一项研究通过比较各种编码策略和配对选择方法来研究高效的 PDL,发现特定的绝对差值编码器和将训练限制在上三角配对可以显著提高效率,同时准确性损失最小。PDL 分类器…
-
新的FastCDTW算法加速了机器学习的连续动态时间规整
研究人员开发了FastCDTW,一种用于连续动态时间规整(CDTW)的高效近似算法。这种新方法解决了现有CDTW和Soft-DTW变体的计算限制,使其在机器学习的大型数据集上更具实用性。FastCDTW提供了两种计算策略:一种是分段线性规整函数的精确闭式解,另一种是平滑函数的无偏蒙特卡洛估计器,两者都为规整函数和输入时间序列提供了梯度。该算法设计为GPU友好,并已在时间序列平均、分类和深度域适应等应用中得到证明。
-
Credal 机器学习在 AI 决策中提供可靠的风险规避能力
研究人员开发了一种名为 Credal 机器学习的新方法,以解决机器学习应用中风险规避的决策问题。该方法旨在通过最小化条件风险价值 (CVaR) 来减少损失,而不是仅仅关注平均性能。该方法使用 Credal 集(概率分布的集合)来表示认知不确定性,并包含一种用于最小化 CVaR 的新颖决策规则。在分类、分布变化和强化学习中的实验表明,该技术在保持良好预期性能的同时,能够可靠地避免灾难性决策。
-
新的“视界损失”方法通过交叉熵提高了分类器精度
一篇新研究论文介绍了一种名为“视界损失”(horizon loss)的新方法,作为训练分类器的交叉熵替代方案,特别是在强化学习和大型语言模型的背景下。该方法旨在通过考虑学习更新的长期影响,而非仅仅是即时收益,来提高准确性。在MNIST和ImageNet数据集上使用ResNet和ViT等各种架构进行的实验表明,与标准的交叉熵相比,其Top-1准确率有所提高,并且在存在噪声标签的情况下,收益会增加。
-
新研究探索自监督学习在公平性、效率和多样化输出方面的应用
多篇研究论文探讨了自监督学习(SSL)的进展,这是一种在无标签数据上训练模型的技术。其中一项研究FairSSL,通过利用数据异质性和主题感知正则化,引入了一个框架来提高多模态SSL的公平性。另一篇论文研究了增加网络宽度如何使贪婪的逐层训练在SSL中能与端到端反向传播相媲美,尤其是在更宽的网络中。进一步的研究深入探讨了哪些下游任务最能从SSL中受益,发现它在异常检测和分类方面有效,但在预测方面效果不佳。此外,一种名为DRY-SFT的新方…
-
多代理AI系统与单代理相比未显示出性能提升
一项将单个AI代理与多代理系统进行客户支持任务比较的实验显示,在安全性、意图准确性和事实依据性等关键指标上,两者性能没有显著差异。尽管将复杂性从一个代理增加到五个,增加了代码量和额外的协调环节,但评估套件对两个版本的评分完全相同。研究得出结论,分割调用者并未改变系统的确定性边界提供的核心功能或保证,这表明对于此特定应用,多代理方法的额外复杂性并未带来切实的益处。
-
新理论详述长程依赖数据的机器学习
一篇新研究论文介绍了一种精确的学习理论,用于在具有长程依赖性的数据上,使用加权经验风险最小化训练的平滑参数模型。该研究关注具有规则变化样本权重的平稳高斯序列,详细说明了学习过程如何收敛以及学习轨迹的几何形状。研究结果通过时间序列预测和分类的示例进行了说明。
-
AgentSelfEdit 工具在泛化超出表面提示编辑方面遇到困难
开源工具 AgentSelfEdit 旨在根据执行反馈重写自己的系统提示,但在各种任务中表现出持续的失败模式。初步测试集中在分类问题上,但对提取、生成和混合领域语料库的进一步评估表明,该工具的弱点并非特定于分类。在这些领域中,AgentSelfEdit 倾向于提出局部措辞调整,这些调整只能带来微小的改进,有时甚至会降低性能,这表明其搜索策略较浅,难以泛化超出表面编辑的范围。
-
Node.js Webhook 使用幂等性栅栏进行 LLM JSON 记录去重
本文详细介绍了一种在 Node.js Webhook 中确保处理 LLM 生成的 JSON 记录(特别是审核报告)的幂等性的方法。它提出了一种涉及接受具有稳定身份密钥的原始报告、使用 LLM 对其进行分类,然后提交分类的三步流程。每个步骤都设计为可独立重试,即使在阶段之间发生故障也能防止重复记录。这种方法关键在于为每个审核报告建立一个持久、不可变的身份,该身份源自租户 ID 和源报告 ID 等稳定字段,而不是依赖于队列消息 ID 等瞬态标识符。
-
新方法用语音令牌增强语言模型以用于分类任务
研究人员开发了一种新颖的方法,将语音令牌集成到预训练语言模型中用于分类任务。该方法通过采用基于套索的特征选择来识别最相关的音频令牌,从而解决了长音频序列与文本融合的挑战。经过自监督目标微调的适应性语言模型,在论证谬误检测和情感计算等任务上表现出改进的性能,优于单一模态模型和其他语音集成技术。
-
新的分析方法通过音素声学识别歌唱音乐中的语言
研究人员开发了一种名为音素条件分析的新方法,用于研究不同语言声乐的声学差异。该技术通过比较同一首歌曲内的音节,控制歌手、旋律和流派等因素,来分离特定音素的影响。研究发现,这些音位结构在歌唱语言中留下了可衡量的痕迹,能够以85.5%的准确率准确分类歌曲的语言。
-
研究人员建议不要在机器学习中使用高斯核
最近的一篇论文认为,在回归和分类等机器学习任务中不应广泛使用高斯核。作者认为,这种核(也称为平方指数核或径向基函数核)会导致条件方差不切实际地小,从而导致预测不确定性过度自信。此外,这种平滑性会导致数值病态,在实际应用中需要引入金块项等变通方法。该论文广泛建议由于这些问题而避免使用解析核。
-
UltraPIPS 库利用领域特定模型增强 B 模式超声图像分析
研究人员开发了 UltraPIPS,这是一个专门为 B 模式超声数据设计的新型感知图像相似性度量库。与在自然图像上训练的模型不同,UltraPIPS 利用了在超声影像上微调的基础模型,这能更好地捕捉该医学成像模态的独特特征。实验表明,UltraPIPS 度量与下游任务(如分类和重建)的性能相关性更强,并在用于损失优化时能提高图像质量和真实感。
-
端侧小型语言模型获得关注,减少对云API的依赖
用于AI驱动的应用程序的大型云端语言模型的默认架构正转向用于特定任务的端侧小型语言模型。这一趋势是由小型模型能力的提高所驱动的,它们现在可以在本地设备上高效地处理分类、提取和摘要等任务。这种方法在降低延迟、降低成本、增强隐私和离线功能方面提供了显著的好处,同时仍然允许在需要复杂推理或广泛知识的任务中升级到更大的云模型。
-
PerFact方法通过事实提示改进3D脑部MRI报告生成
研究人员开发了一种名为PerFact的新方法,用于从3D脑部MRI扫描生成报告。与以往侧重于改进视觉语言模型本身的方法不同,PerFact强调了提示信息的重要性。通过使用上游3D分割和分类提取结构化事实,PerFact调整视觉语言模型以生成更准确有效的报告。这种方法表明,信息基础(而非模型架构或大小)是提高复杂医学影像报告质量的主要因素。