python中ReLU函数的作用是什么

python中 ReLU函数的作用是什么,很多新手对此不是很清楚,为了帮助大家解决这个难题,下面小编将为大家详细讲解,有这方面需求的人可以来学习下,希望你能有所收获。

创新互联-专业网站定制、快速模板网站建设、高性价比金川网站开发、企业建站全套包干低至880元,成熟完善的模板库,直接使用。一站式金川网站制作公司更省心,省钱,快速模板网站建设找我们,业务覆盖金川地区。费用合理售后完善,十载实体公司更值得信赖。

1、说明

线性整流函数,又称为修正性线性单元,ReLU是一个分段函数,其公式为:f(x)=max(0,x)。

2、优缺点

优点

比Sigmoid函数收敛速度更快。

输出以0为中心。

缺点:

由于饱和性产生的梯度消失。

3、实例

import numpy as np
import matplotlib.pyplot as plot
 
 
def relu(x):
    return np.maximum(0, x)
 
 
if __name__ == "__main__":
    a = np.arange(-20, 20, 0.1)
    b = relu(a)
 
    plot.plot(a, b, label="ReLU", color="red")
    plot.legend()
    plot.grid()
    plot.show()

看完上述内容是否对您有帮助呢?如果还想对相关知识有进一步的了解或阅读更多相关文章,请关注创新互联行业资讯频道,感谢您对创新互联的支持。


网站标题:python中ReLU函数的作用是什么
本文URL:http://hbruida.cn/article/jpcsis.html