实验设计挺巧的:给 GPT-6 一个只能算数不能读权重的工具,审计临床模型的效果和白盒一样好,对做模型审计的人很有参考价值。
#模型审计
共 12 条 · 7 天 0 条 · 30 天 3 条
信息流里打上「模型审计」标签的资讯、产品与论文,按刊登时间排,新的在上。
11月6日
GPT-6 Astra 仅靠计算工具即可审计临床预测网络,无需直接读取权重
论文提出对抗性多重性:模型披露可能被操纵绕过审计
一篇挺有意思的论文:有人能在不动准确率的情况下悄悄把模型预测掰向自己要的方向,连审计都能过,监管和用模型打官司的人该看看。
11月5日
评估解释忠实度的各项标准为何互相矛盾:一个统一分析框架
做可解释性审计的朋友看这篇:同一解释在不同忠实度指标下结论打架,论文给了一套框架帮你定位分歧出在哪,还有 adverse action notices 的实际案例拆解。
10月12日
研究显示 AI 模型可在权重中加密隐藏任意能力
一篇关于模型安全的论文:研究者能在模型权重里藏一个加密网络,密码学上几乎无法被审计发现,还公开了模型代码。
10月9日
扩散模型记忆化可通过能量盆地几何与循环去噪提前检测
生成出复制图之前就能查出扩散模型背了哪些训练数据,CelebA 和 Stable Diffusion v1.4 上的数字都给出来了,做模型审计的可以看看。
9月11日
研究审计263个模型检查点,发现数据去失后模型状态未真正改变
朋友,这个研究挺有意思的,它审计了263个模型检查点,发现模型去失数据后,发布的状态和重新训练的状态不一样,说明模型状态本身可能发生了变化。
8月27日
论文10:42
ICON分解:用于模型审计的深度表示的多变量概念级解释这篇论文提出了一个名为ICON分解的新方法,用于更准确地评估深度神经网络中各个概念的重要性,对于模型审计和可解释性研究具有重要意义。与现有的基线方法相比,它能够提供更可靠的解释,对于理解模型的决策过程非常有帮助。
7月31日
7月10日
Distill to Detect:蒸馏微调LLM基座差异,放大隐藏偏见
想查你的微调模型有没有偷偷偏向某件事?D2D把模型差异蒸馏出来放大,让你抓到那些连你都不知道要找的偏见。
6月30日
论文10:23
EvalSafetyGap: LLM评估安全失败的概念框架与混合调查这篇论文梳理了LLM评估与安全之间测量问题的八大证据流,还审计了10个模型,发现很多看似安全差距其实来自信息披露。搞模型安全的人值得看看怎么避免被表面指标骗到。
5月26日
LLM推理质量评估新框架:多维度行为框架揭示准确率之外的盲区
这个框架解决了「只看答案正确率」的评估盲区,做模型选型或合规审计的团队会发现,原来高分模型可能推理过程一团糟——建议点开看看你的模型在哪个维度翻车。
5月25日
LLM 地缘政治偏见源于后训练,而非预训练数据
这项研究戳破了“数据决定一切”的迷思,做AI安全、模型对齐或地缘政治分析的团队值得细读——它直接影响了如何评估和调整模型的政治倾向。