Adam一种随机优化算法

1.什么是adam

adam的全称是adaptive moment estimation (适应性矩估计),是一种随机优化算法,高级的梯度下降优化算法,首次提出于Diederik P . Kingma和Jimmy Lei Ba的“ADAM: A METHOD FOR STOCHASTIC OPTIMIZATION”论文中。

2.梯度下降算法框架

在这里插入图片描述在这里插入图片描述

3.Adam流程

在这里插入图片描述


本文来自互联网用户投稿,文章观点仅代表作者本人,不代表本站立场,不承担相关法律责任。如若转载,请注明出处。 如若内容造成侵权/违法违规/事实不符,请点击【内容举报】进行投诉反馈!

相关文章

立即
投稿

微信公众账号

微信扫一扫加关注

返回
顶部