优化器怎么选？一文教你选择适合不同ML项目的优化器
选自lightly.ai 机器之心编译 编辑：小舟、杜伟 为机器学习项目选择合适的优化器不是一件简单的事。 优化器是深度学习领域的重要组成模块之一，执行深度学习任务时采用不同的优化器会产生截然不同的效果。这也是研究者们不遗余力「炼丹」的原因之一。常见的优化算法包括梯度下降（变体 BGD、SGD 和 MBGD）、Adagrad、Adam、Momentum 等，如此繁多的优化器应该如何做出抉择呢？ 不
ai
机器之心 . 2021-01-05 1345
- 1