第四讲_模型选择

十折交叉验证的概念

一般实验中不会做这么多折，一般5折或者3折交叉验证

偏差和方差

alt text

1. 偏差：模型预测值与真实值之间的误差，越小越好。
2. 方差：模型预测值与真实值之间的方差，越小越好。

欠拟合

• 使用更加复杂的模型
• 增加更多的维度（特征）

过拟合

• 收集更多的数据可以优化
• 降低模型复杂度
• regularization 正则化

面对欠拟合和过拟合问题，对应的解决策略

对于过拟合的问题：

从数据的角度：增加训练数据； 从模型选择的角度：选择更加合适、简单的模型； 从损失函数的角度：使用正则化表达式