但“参数空间非欧性”6字 共 1 篇文章

自然梯度法与Fisher信息矩阵的参数空间黎曼几何
2026-07-27 22:44:01
自然梯度法与Fisher信息矩阵的参数空间黎曼几何 在机器学习优化中,传统的梯度下降法假设参数空间是平坦的、均匀的欧几里得空间。但实际情况并非如此——参数微小的变化在不同方向上造成的“信息”影响差异巨大。自然梯度法正是为了解决这一矛盾而诞生,它借用了Fisher信息矩阵来测量参数空间的局部曲率,从而
但“参数空间非欧性”6字 可以。“概率分布度量”5字。“优化几何”
41 0