给狂奔的马勒缰
目录 · 2
不让它跑得过分顺溜,反而更稳当。
箭师教阿莽射箭。阿莽为了每箭都中红心,动作越练越怪:弓拉得溢了弦,身子扭成麻花,碰上点风偏就全盘皆乱。箭师便立规矩:弓不许拉太满,架子不许太歪。阿莽起初嫌束手束脚,可几场风过,他的箭反而支支落点相近——那些花哨动作,本就是对着一阵偶然的风,过度较劲罢了。
揭示
这则故事想说的概念是:正则化(Regularization)。
英文定义(Regularization):A technique that adds a penalty term to a model’s loss function to constrain complexity and reduce overfitting.
它属于哪个领域:机器学习 / 统计学习(Machine Learning / Statistical Learning)
正则化通过惩罚过大的参数,迫使模型更平滑、更简单,从而在未知数据上更稳健。
故事里的隐喻对应什么
- 立下规矩限制动作 → 在损失函数中加入惩罚项
- 过度补偿风偏 → 过拟合噪声
- 成绩更稳定 → 提升泛化能力
- 花哨极端动作 → 模型复杂度过高