#Scaling Law

Hinton 亲口认错，说当年 Ilya 坚持堆规模是对的，算力比他想的快了十亿倍，视频里讲得很实在。

Gary Marcus@GaryMarcus11 个信源在谈原文

这篇用分层贝叶斯方法量化了 DeepSeek-R1-Distill 系列的推理能力与 token 消耗，结论是加大模型只提升能力不提升效率，做选型或研究 scaling 的朋友可以看看。