LeakyRelU是修正线性单元(Rectified Linear Unit,ReLU)的特殊版本,当不激活时,LeakyReLU仍然会有非零输出值,从而获得一个小梯度,避免ReLU可能出现的神经元“死亡”现象。
基于8个网页-相关网页
The Rectified Linear Unit 修正线性单元
应用推荐
模块上移
模块下移
不移动