登录    |    注册

激增梯度问题(Exploding Gradient Problem)

2020-09-09 15:58:08

这与消失的梯度问题完全相反,激活函数的梯度过大。在反向传播期间,它使特定节点的权重相对于其他节点的权重非常高,这使得它们不重要。这可以通过剪切梯度来轻松解决,使其不超过一定值