MainPage Back Go2Paperlist

  • ALL >Computer and Education >courses >university courses >undergraduate courses >模式识别与人工智能 >zstu-(2021-2022)-1 >学生作业目录 >2019339964032谢秀淮

  • 2019339964032 谢秀淮 作业三

    激活函数

    Sigmoid函数

    优点:所有元素都被压缩在[0,1]范围内,当输入数字很大或者很小时图像都趋于平滑,在0附近趋于线性
    缺点:容易过饱和并且造成梯度消失;sigmoid函数不是以0为中心的;Sigmoid函数包含exp函数,计算exp函数的开销很大
    应用:输出层是一个二分类问题

    Tanh函数

    优点:对Sigmoid函数进行了改进,以0为中心的
    缺点:仍有过饱和的可能,也可能会造成梯


    全文(Full Article): https://yvsou.com/dc/single.php?groupid=28.218.81608.81609.81613.85931.86408.83744.86593&pid=1341433&startgroup=