Catboost
PulseAugur coverage of Catboost — every cluster mentioning Catboost across labs, papers, and developer communities, ranked by signal.
4 天有情绪数据
-
新AI框架通过可解释性增强胸部X光片分类
研究人员开发了PulmoSight-XAI，一个用于胸部X光片分类的新颖框架，解决了类别不平衡和特征丢失等挑战。该系统利用多视图注意力集成和梯度提升元学习，并结合了卷积块注意力模块和混合损失函数等技术。在大型数据集上进行评估，PulmoSight-XAI取得了最先进的性能，并通过可解释性分析展示了强大的解剖学一致性。
-
基础模型与放射组学在肺部CT分析中的基准测试
一篇新发布的arXiv基准研究，将基础模型与传统的放射组学技术在肺部CT扫描分析方面进行了比较。该研究评估了五种特征提取器、七种分类头和三种分割方法，涵盖了肿瘤分类和生存预测等五个任务。研究结果表明，分割对于体积和分期分类至关重要，而分类器的选择显著影响生存和组织学预测。研究建议在临床任务中，默认采用Curia结合肿瘤分割和CatBoost的流程，并在缺乏肿瘤描绘时提供替代方案。
-
实体嵌入在高基数欺诈检测基准测试中领先
一篇新的研究论文探讨了不同类别编码方法在高基数欺诈检测中的有效性。该研究在IEEE-CIS欺诈基准数据集上测试了七种编码器，并使用LightGBM和CatBoost学习器比较了它们的性能。实体嵌入达到了最高的AUC-ROC得分，紧随其后的是CatBoost，并且显著优于层级分组编码。然而，在AUC-PR方面，CatBoost领先，表明没有一种编码器在两项指标上都占主导地位。研究表明，实体嵌入由于能够捕获联合多列表示而具有优势。
-
机器学习算法在复杂非线性回归任务上进行测试
举办了一场机器学习锦标赛，在由图像定义的、高度非线性的复杂回归任务上测试了二十一种算法。比赛包括线性回归、k-NN、Random Forest以及梯度提升方法（XGBoost、LightGBM、CatBoost）等标准算法，以及神经网络。一种源自随机函数理论的新型深度架构Polyharmonic Cascade被引入，作为一匹黑马。
-
发布CatBoost面试题及答案指南
本系列文章分为两部分，为CatBoost面试题及答案提供了全面的指南，涵盖了机器学习专业人士所需掌握的关键概念。内容旨在帮助面试准备，深入了解CatBoost算法的实际应用和理论基础。
-
AI预测亚特兰大机场飞机滑行路线
研究人员开发了一个两阶段AI系统，用于预测哈茨菲尔德-杰克逊亚特兰大国际机场的飞机滑行路线。该系统使用包括XGBoost和LightGBM在内的机器学习模型，预测飞机将使用哪个跑道出口以及是否会穿越起飞跑道。模型在ASDE-X表面轨迹数据、飞机特性和天气条件下进行训练，预测准确率在0.70-0.89之间，具体取决于阶段。该研究旨在通过提供经过校准的、可解释的预测来增强空中交通管制员的态势感知能力。
-
人工智能预测果胶生产参数，减少实验需求
研究人员开发了一个机器学习流程来预测果胶水解-提取过程中的参数，利用了包含1000次实验室实验的数据库。测试了十一种算法，经过超参数优化后，CatBoost模型达到了最高的准确率（R方值约为0.946）。研究发现，原材料的类型是最重要的因素，其次是温度和保持时间，这表明人工智能有潜力减少工业生产控制中对大量物理实验的需求。
-
机器学习通过CT扫描预测心脏病
研究人员开发了一个机器学习框架，利用CT扫描来预测阻塞性冠状动脉疾病（CAD）。该模型分析冠状动脉钙化和心外膜脂肪的特征，从最初的424个特征中识别出14个关键预测因子。该方法实现了高准确率、敏感性和特异性，有望改善临床决策并可能减少侵入性手术的需求。
-
表格基础模型在近红外化学传感校准方面展现出潜力
研究人员探索了使用表格基础模型（特别是TabPFN）作为近红外（NIR）化学传感的新型校准策略。在一项涉及66个NIR数据集的研究中，TabPFN表现出强大的性能，尤其是在回归任务中，其性能优于多种传统方法。尽管TabPFN显示出潜力，但其有效性会随着光谱异常值和外推样本而降低，这表明在这些情况下，经典的化学计量模型仍然具有竞争力。研究结果表明，表格基础模型可以增强现有的NIR传感工作流程，尤其是在较小的数据集方面，但强调了对光谱学特…
-
CatBoost机器学习面试准备：25个问答指南
本文提供了一系列25个问答对，旨在帮助个人准备机器学习面试，特别是专注于CatBoost算法。它通过涵盖这个流行的梯度提升框架的关键方面，来帮助候选人建立信心。
-
研究人员将大型AI模型蒸馏为更快的CPU就绪梯度提升树
研究人员开发了一种方法，可以将大型表格基础模型（TFMs）蒸馏成更小、更快的梯度提升树模型，这些模型可以在CPU上运行。该技术解决了TFMs的延迟问题，因为它们对于欺诈评分等实时应用来说速度太慢。通过使用分层离群教师标签来防止标签泄露，蒸馏后的模型达到了接近原始TFMs的性能，但推理时间却大大缩短。
-
TabH2O基础模型统一表格预测任务
研究人员推出TabH2O，这是一种新颖的基础模型，专为表格数据预测任务（如分类和回归）而设计。该模型采用统一的训练方法和双头架构，能够通过上下文学习在单次前向传播中处理这两种任务类型。关键改进包括用于增强稳定性的单阶段预训练和用于构建对无关特征鲁棒性的噪声感知预训练。在TALENT基准测试中，TabH2O表现出竞争力，优于多种既有方法，并在相当一部分测试数据集上获得前三名。
-
新的检索增强Transformer模型助力航运物流
研究人员开发了一个名为CCRE的新型深度学习框架，用于改进全球航运物流中的多步挂靠港序列预测。该框架利用受检索增强生成启发的检索增强历史编码器，查询海事数据库以获取相似的航行先例，从而解决数据稀疏性和航线歧义问题。该模型将此与基于Transformer的轨迹编码器和自回归Transformer解码器相结合，在一个全球数据集上实现了最先进的准确性。
-
新的校准框架简化了近红外光谱数据预处理
研究人员开发了一种名为算子自适应校准的新框架，用于简化近红外光谱（NIRS）中的光谱预处理方法的选择。该方法将预处理选择直接集成到校准模型中，减少了对成本高昂且耗时的外部流程搜索的依赖。新模型通过生成可追溯的算子选择并保留可解释的系数，提供了更快、更稳健且可审计的 NIRS 方法开发。
-
指南详解从决策树到梯度提升的树模型
本文提供了一份树模型指南，解释了它们在表格数据上的有效性以及从简单的决策树到XGBoost、LightGBM和CatBoost等高级梯度提升算法的演变过程。文章详细介绍了决策树如何通过基于特征的分割来工作，并介绍了用于确定分类数据的最佳分割点的基尼指数和熵等不纯度度量。
-
Manokhin 概率矩阵为分类器质量提供新框架
研究人员引入了 Manokhin 概率矩阵，这是一个旨在评估分类器概率预测质量的新诊断框架。该框架区分了可靠性和分辨率，将分类器分为四种原型：Eagle、Bull、Sloth 和 Mole。一项对 21 个分类器和 30 个任务进行的实证研究发现，像 CatBoost 和 Random Forest 这样的模型是 Eagles，而 XGBoost 和 LightGBM 是 Bulls，这对事后校准具有特定意义。
-
新的基准测试通过供体感知scRNA-seq分析改进了IBD分类
研究人员开发了一种用于使用单细胞RNA测序（scRNA-seq）数据分类炎症性肠病（IBD）的供体感知基准测试。该新基准测试通过确保训练和测试数据来自不同的供体，解决了假复制问题。该研究评估了三种特征表示，包括居中对数比（CLR）转换的细胞类型组成和GatedStructuralCFN依赖性嵌入，跨越两个独立的IBD队列。
-
新版《机器学习橙皮书》涵盖监督回归和分类
一本题为《机器学习橙皮书 - 绿色版》的新书已发布，重点关注表格数据的监督回归和分类。本书由 Carl McBride Ellis 撰写，涵盖了基本的预测技术。它使用了包括 Python、pandas、scikit-learn、CatBoost、LightGBM 和 XGBoost 在内的技术栈。
-
机器学习模型在预测波动剧烈的澳大利亚电力价格方面面临困难
一项新研究对澳大利亚国家电力市场六种用于短期电力价格预测的机器学习模型进行了基准测试。研究强调，由于价格波动剧烈、模式不规则以及市场结构性变化，预测面临重大挑战。与LSTM和SVR相比，GBRT等基于树的模型在价格预测方面表现更优，R平方值达到0.88，但总体预测准确性仍然较低，误差率很高。
-
用于可解释、公平和可观察医院再入院预测的集成框架：在 MIMIC-IV 上的开发与验证
研究人员开发了一种新的梯度正则化牛顿方案，以确保梯度提升决策树 (GBDT) 的全局收敛性，这是一种广泛用于表格机器学习的技术。该方法引入了一个自适应 L2 正则化项，实现了与 Nesterov 动量等一阶提升方法相当的收敛速度。数值实验表明，该新方案在标准牛顿提升可能发散的地方也能收敛。此外，另一项研究提出了一个用于从心电图中诊断射血分数的模态机器学习框架，实现了高精度并提供了可解释的特征。