leakyrelu
应用漏纠正线性单元激活
描述
漏漏校正线性单元(ReLU)激活操作执行非线性阈值操作,其中任何小于零的输入值都乘以一个固定的比例因子。
这个操作相当于
请注意
该函数将泄漏的ReLU操作应用于<一个href="//www.ru-cchi.com/help/deeplearning/ref/dlarray.html">dlarray
数据。如果您想应用泄漏ReLU激活<一个href="//www.ru-cchi.com/help/deeplearning/ref/nnet.cnn.layergraph.html">layerGraph
对象或<一个href="//www.ru-cchi.com/help/deeplearning/ref/nnet.cnn.layer.layer.html">层
数组,使用以下层:
计算输入的泄漏ReLU激活Y
= leakyrelu (<一个href="#mw_c2dfd3c0-23ae-4595-a3b7-987c63934bbb_sep_mw_6f734774-5538-44ff-ad05-7e744f97893a" class="intrnllnk">X
)X
通过应用阈值运算。中所有的值X
小于0则乘上默认的比例因子0.01
.
例子
输入参数
输出参数
扩展功能
版本历史
介绍了R2019b
另请参阅
dlarray
|<年代pan itemscope itemtype="//www.ru-cchi.com/help/schema/MathWorksDocPage/SeeAlso" itemprop="seealso">dlconv
|<年代pan itemscope itemtype="//www.ru-cchi.com/help/schema/MathWorksDocPage/SeeAlso" itemprop="seealso">batchnorm
|<年代pan itemscope itemtype="//www.ru-cchi.com/help/schema/MathWorksDocPage/SeeAlso" itemprop="seealso">线性整流函数(Rectified Linear Unit)
|<年代pan itemscope itemtype="//www.ru-cchi.com/help/schema/MathWorksDocPage/SeeAlso" itemprop="seealso">gelu
|<年代pan itemscope itemtype="//www.ru-cchi.com/help/schema/MathWorksDocPage/SeeAlso" itemprop="seealso">dlgradient
|<年代pan itemscope itemtype="//www.ru-cchi.com/help/schema/MathWorksDocPage/SeeAlso" itemprop="seealso">dlfeval