武子康

GBDT是Boosting家族的核心算法，通过多棵决策树逐步拟合残差来减少预测误差。2024年主流版本如XGBoost、LightGBM均基于此思想扩展。本文以身高预测为案例，详解初始化学习器（均值）

梯度提升树（GBDT，Gradient Boosting Decision Tree）是机器学习领域最成功的集成学习算法之一。本文系统讲解提升树到梯度提升树的演进路径，深入剖析GBDT的算法原理：如何

本文深入对比Bagging与Boosting两大集成学习范式的核心差异，从数据采样、投票机制、学习顺序三大维度系统解析。Bagging通过数据采样和平权投票解决过拟合问题，Boosting通过调整样本

集成学习是机器学习中提升模型泛化能力的核心技术，2024年仍广泛应用于Kaggle竞赛与工业生产。通过构建多个弱分类器并进行投票或加权组合，相比单模型可显著提升稳定性与鲁棒性。本文详解Bagging

决策树剪枝是防止模型过拟合的关键技术，本文详解预剪枝和后剪枝两种方法的原理、优缺点及适用场景。预剪枝通过限制树的最大深度、节点样本数等指标提前停止树的生长，计算高效但可能引入欠拟合；后剪枝在树构建完成

决策树作为机器学习最经典的监督学习算法之一，广泛应用于分类与回归任务。本文详解 ID3、C4.5、CART 三种主流决策树算法的分裂准则（信息增益、信息增益率、基尼系数），以及条件熵、信息增益的计算原

本文深入讲解 Spark MLlib 中逻辑回归（Logistic Regression）的原理与实战应用。逻辑回归是机器学习中经典的二分类算法，以其简单高效的特点广泛应用于广告点击率预测、垃圾邮件识

线性回归是机器学习中最基础的有监督学习算法，用于预测连续值输出。本文详解线性回归的定义、公式与几何意义，涵盖单变量与多变量线性关系、非线性关系分析。重点阐述损失函数（最小二乘法）的原理，以及两种优化算

Spark MLlib 是 Apache Spark 的机器学习库，2026年最新版本支持分布式机器学习算法训练。本文介绍 Spark MLlib 环境配置、pyspark 编程基础，以及分类算法（决