技巧精选
模型做研究数学的方式:写脚本搜索大空间,靠 ICL 配 oracle 验证
精选理由
teortaxesTex 拆解了模型做数学的门道:让它写脚本暴力搜索,再配 oracle 反馈,不止数学题管用。
X 用户 teortaxesTex 概括了模型做研究数学(research math)的实际方式:不是在小搜索空间里硬推理,也不是用超级大脑直接搜大空间,而是批量写脚本去搜索那些人工写起来很麻烦的空间。他表示这套做法不限于研究数学,在其他任务上同样有效。核心机制是模型擅长通过 oracle(可验证的结果反馈)完成 ICL(上下文学习)。
原文 · Teortaxes
> They don't work in a small search space, and they aren't using a gigabrain directly on a large search space. They're just writing lots of scripts to search large spaces that would be annoying to do.
This works beyond research math btw Models are good at ICL via oracles