以下关于正则化的描述正确的是（）

[不定项选择题]

以下关于正则化的描述正确的是（）

```
正则化可以防止过拟合
```
```
L1正则化能得到稀疏解
```
```
L2正则化约束了解空间
```
```
Dropout也是一种正则化方法
```

查看答案及解析

门扣

L2本质是参数解的2阶范数，以二维为例，L2的最优解就是一个圆；如果你还记得话，loss func的组成是两部分一部分是预测值和真实值之间的error，一部分是正则项，前一部分的解空间可以看作是一个梯度下降的等高线，这样一来，loss func的所有局部解就是每层等高线和这个圆之间的切点，所以说约束了解空间。这也是为啥L2会让解平滑，L1会让解稀疏（因为L1的解是一个四个顶点在坐标轴上的正方形，等高线与它的交点多半落在坐标轴上，意味着某一维会变成零）
————————————————
版权声明：本文为CSDN博主「张哲瑞」的原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接及本声明。
原文链接：https://blog.csdn.net/weixin_41791402/java/article/details/102765445

编辑于 2020-04-08 00:06:46 回复(0)