神经网络中梯度消失的解决办法  

作　　者：李文 

机构地区：[1]青岛理工大学,山东青岛266000

出　　处：《电脑知识与技术》2023年第10期19-21,28,共4页Computer Knowledge and Technology

摘　　要：针对神经元中的“梯度消失”的问题,文章提出了两种解决方案:用leaky-relu做激活函数和在网络中添加BN层。通过对实验数据的对比,发现这两种方案能够提高网络分类的正确率,有效解决了梯度消失的问题。

关 键 词：神经网络 梯度消失 激活函数 BN层 

分 类 号：TP183[自动化与计算机技术—控制理论与控制工程]