主页 返回 进入列表

  • 总根 >计算机与教育 >课程 >高等教育课程 >本科课程 >模式识别与人工智能 >zstu-(2021-2022)-1 >学生作业目录 >2019329621282周哲瑜

  • 2019329621282周哲瑜 作业3

    激活函数


    sigmoid函数

    优点:处处连续,便于求导;可以压缩数据,且幅度不变;便于前向传输。

    缺点:容易过饱和并且造成梯度消失;不是以0为中心的;包含exp函数,计算exp函数的开销很大。

    应用场景:最早使用的激活函数,现在不常用。如果模型输出为非互斥类别,且可以同时选择多个类别,则采用Sigmoid函数计算该网络的原始输出值。

    2.ReLU函数

    优点:能


    全文(Full Article): https://yvsou.com/dc/single.php?groupid=28.218.81608.81609.81613.85931.86408.83744.86608&pid=1341618&startgroup=