Circuits 是 Anthropic 以 Transformer Circuits 之名持续发布的可解释性研究系列,它尝试把大语言模型的内部计算拆解为注意力头、特征等可追踪单元,从而打开模型"黑箱"。它是目前业界最系统的机制可解释性研究线之一,成果公开更新延续至 2025 年。
Transformer Circuits 近期进展
Circuits 研究的当前焦点与观察点
技术上,字典学习与稀疏自编码器(SAE)仍是主线,2025 年 1 月更新汇总了相关优化技术;但密集特征的讨论显示,稀疏特征假设正被重新审视。争议集中在找到的特征是否真对应模型真实计算,以及如何建立可靠的可解释性评估标准。
应用层面,features-as-classifiers 研究显示字典特征做分类器比原始激活更准,模型差异分析若成为常规流程,或可纳入安全评估。不过从论文到工程落地仍有距离,值得持续观察。