Constitution

general · 首次出现 2026-05-22 · 最近出现 2026-10-19 · 累计提及 25

综述

Constitution 在 AI 领域特指 Anthropic 为其 Claude 模型设计的"宪法"——一份用于指导模型行为的显式原则文档。与传统依赖人工标注反馈的对齐方法不同,Constitutional AI 让模型参照这组原则自我批评、自我修正,从而减少有害输出。这一方法自提出以来一直是 AI 对齐研究的重要路线之一,同时也伴随着关于透明度与安全性的持续争论。

Constitutional AI 近期进展

  • Anthropic 发布论文提出 Constitutional Midtraining(中期宪法训练):在预训练与后训练之间插入宪法内容,可提升模型对齐效果。该工作表明宪法原则的注入时机本身会影响最终行为,详见 arXiv 论文。
  • David Sacks 公开质疑 Anthropic 的对齐路线,认为让 Claude 在训练中形成"自我道德观"存在安全风险,引发讨论。这一批评触及 Constitutional AI 的核心争议:由公司单方面撰写、且不对外完整披露的宪法,究竟应拥有多大的规范性权力。
  • 另据报道,Anthropic 曾秘密召集神父与拉比等宗教人士讨论 Claude 是否具有意识,相关报道见此。这一做法再次引发外界对宪法制定过程缺乏公开性的批评。
  • 趣闻方面,Anthropic 甚至为 Claude 的 Constitution 推出了有声书版本,由作者亲自朗读,见官方推文。
  • 当前焦点与观察点

    Constitution 路线的争论集中在三点:其一,透明度——宪法内容是否应完全公开、由谁参与制定(宗教界人士参与一事加深了这一疑问);其二,有效性——中期插入宪法内容的训练方法能否真正提升对齐,而非仅是表面合规;其三,治理边界——当模型依据宪法拒绝或执行某些行为时,责任归属如何界定。此外需注意区分语境:Gary Marcus 等人提到的 U.S. Constitution(美国宪法)属另一话题,与 AI 对齐无关。未来值得观察 Anthropic 是否会公开更多宪法细节,以及其他模型厂商是否会采用类似的对齐框架。

    相关报道

    10 条在档
    Constitution · AI 话题观测|AI热报