论文09:57研究:Transformer 的 CoT 训练中自发涌现 Heavy-Ball 加速算法这篇理论论文挺有意思:CoT 推理不只是抄老师算法,训练后自己悟出了比梯度下降更快的 Heavy-Ball 方法,说明推理过程真能发现新算法。#CoT推理#Heavy-Ball#Transformer#算法涌现aarXiv cs.LG@Yuxuan Cai, Yuan Cao原文稍后读已读值得跟进有用关注 CoT推理