什么是决策树？
决策树是一种监督学习算法，用于解决分类或回归问题，它通过构建树状结构来模拟决策过程。每个内部节点代表一个特征测试，每个分支对应测试结果，而叶节点则输出最终预测值；算法递归地分割数据以最小化不纯度（如基尼指数或熵），生成直观、可解释的模型，便 […]
分类： AI产品术语
什么是随机森林？
随机森林（Random Forest）是一种高效的机器学习集成算法，通过构建多个决策树并综合其预测结果来提升模型的准确性和鲁棒性。具体而言，它采用bootstrap抽样方法从训练数据中随机抽取多个样本集，每个样本集用于训练一个独立的决策树； […]
什么是逻辑回归？
逻辑回归是一种用于解决二分类问题的经典机器学习算法，其核心是通过逻辑函数（如sigmoid函数）将线性模型的输出映射到0到1之间的概率值，从而预测某个事件发生的可能性。例如，在用户行为分析中，它可以估计用户点击广告或购买产品的概率。该模型基 […]
什么是梯度提升树（Gradient Boosting Decision Tree, GBDT）？
梯度提升树（Gradient Boosting Decision Tree, GBDT）是一种先进的集成学习算法，它通过迭代地训练多个决策树来构建强预测模型，每个新树都专注于纠正前一棵树的残差误差，使用梯度下降方法最小化损失函数。GBDT的 […]
什么是LightGBM？
LightGBM（Light Gradient Boosting Machine）是一种高效的开源梯度提升框架，由微软开发，专为处理大规模数据和高维特征而优化。它基于决策树算法，通过直方图近似、梯度单侧采样（GOSS）和互斥特征捆绑（EFB […]
什么是贝叶斯网络？
贝叶斯网络（Bayesian Network）是一种概率图模型，它通过有向无环图表示随机变量之间的条件依赖关系，基于贝叶斯定理进行不确定性推理。每个节点代表一个变量，边指示直接影响，结合条件概率表可计算联合分布并推断未观测变量的后验概率，适 […]
什么是支持向量机（Support Vector Machine, SVM）？
支持向量机（Support Vector Machine, SVM）是一种监督学习算法，主要用于分类任务，也可应用于回归问题。其核心思想是通过寻找一个最优超平面来分隔不同类别的数据点，并最大化类间的间隔（margin），支持向量则是距离该超 […]
什么是线性回归？
线性回归是一种基础的统计学习方法，用于建立因变量（目标变量）与一个或多个自变量（特征）之间的线性关系模型。它通过最小化预测值与实际值之间的平方误差来估计系数，从而预测连续型目标变量。模型的核心表达式为 y = β₀ + β₁x₁ + β₂x […]
什么是XGBoost？
XGBoost（Extreme Gradient Boosting）是一种高效的梯度提升决策树算法，由陈天奇等人提出，它通过迭代地添加弱学习器（通常是决策树）并优化正则化目标函数来提升模型性能，特别擅长处理分类、回归和排序任务。该算法结合了 […]
什么是CatBoost？
CatBoost是一种基于梯度提升框架的开源机器学习算法，由俄罗斯科技公司Yandex开发，专为高效处理分类特征（categorical features）而设计。它通过创新的有序目标编码（Ordered Target Encoding）技 […]