模型评估

  在将学习到的模型进行投入使用前，需要对模型进行性能评估，测试模型对新样本的泛化能力。用来做测试的“测试集”应当与训练集保持互斥。而拆分训练集和测试的方法有留出法，交叉验证法和自主法

1. 评估方法

1. 留出法

2. 交叉验证法

  将数据集分层采样划分为k个大小相似的互斥子集，每次用k-1个子集的并集作为训练集，余下的子集作为测试集，最终返回k个测试结果的均值，k最常用的取值是10

3. 自主法

2. 评估指标

1. 准确率

2. 错误率

3. 比较检验