论文Agent 与开发者10:24GEAR:用切向-法向分解改进 LoRA 动态秩分配GEAR 这个新微调方法把 LoRA 动态秩问题做成了几何问题,参数只用三分之一,分数还涨了近 2 分,搞微调的可以看看。#LoRA#GEAR#LLaMA3-8B#微调aarXiv cs.LG@Peng Xue 等 4 人原文稍后读已读值得跟进有用关注 LoRA
论文13:00GEAR:证据感知奖励减少长上下文推理重复复制这篇论文发现了LLM长上下文推理时爱复制原文的毛病,用GEAR奖励方法逼模型关注关键证据,效果立竿见影,适合做RL调优的参考。#GEAR#证据感知#强化学习#长上下文推理aarXiv cs.AI@Lizhe Fang 等 4 人原文稍后读已读值得跟进有用关注 GEAR