论文Agent 与开发者12:42临界阻尼 Polyak 步长:让梯度下降收敛到更平坦极小值的新算法搞训练的朋友可以看看这篇:不用 SAM 的两次前向,一个改过的 Polyak 步长就能压低 sharpness,连 LLM 微调都验证过,还带一致时间收敛证明。#Polyak步长#SAM#梯度下降#优化算法aarXiv cs.LG@Francesco Caporali 等 3 人原文稍后读已读值得跟进有用关注 Polyak步长