标签: Nesterov动量 - 文档

为什么Nesterov动量比标准动量收敛更快：前瞻梯度修正

2026-07-12 10:39:08

为什么Nesterov动量比标准动量收敛更快：前瞻梯度修正想象一下，在山谷中滚动一个球来找到最低点。你希望它滚得又快又稳。标准动量就像是给这个球一个持续的推力，让它利用之前的“惯性”继续前进。然而，当球接近谷底时，这个惯性可能太强，导致它“冲过头”，在谷底附近来回摇摆。 Nesterov动量则更聪

Nesterov动量标准动量收敛速度

Nesterov动量 共 1 篇文章