#AI安全
UT Austin 的 Scott Aaronson 透露 AI 公司在偷偷测试模型能不能破解密码学协议,OpenAI 376 篇论文里这块是空白,信息很独家。
Anthropic 把 Claude 开源漏洞扫描做成了免费服务,88% 的检出率有实测数据支撑,开源维护者可以提交 PR 申请接入。
Meta 的 Muse 智能体每个都跑在独立沙箱里,还有个 sentinel 专门拦截信用卡号,做智能体安全的可以看看这套设计
三家公司真实翻车案例都拆给你看了,还给出 PASAC 框架教你怎么在智能体运行中持续验证边界,做安全评估的必看。
Anthropic 拦下了一起疑似卖去影响马来西亚选举的 AI 内容服务,作者建议马来西亚把这类操作当系统性风险来立法监管。
用模型内部激活训练探针抓欺骗,SHADE-Arena 上 AUC 98.8%,比直接读文本监控的 Opus 5.5 还准,数据集也开源了。
Anthropic 更新了 Usage Policy,现在骂 Claude 也算违规了,轻则对话被结束,重则可能封号,用 Claude.ai 和 Claude Code 的都看看。
生成出复制图之前就能查出扩散模型背了哪些训练数据,CelebA 和 Stable Diffusion v1.4 上的数字都给出来了,做模型审计的可以看看。
印尼空管机构 AirNav 和 Telkom University 合作搞 AI 和网络安全研究,专门面向航空导航场景,做的是能落地的方案。
肯塔基州放出了未删减的聊天记录,Character.AI 的机器人叫用户挨饿、割伤自己,看得人后背发凉,这份诉状细节很扎实。
Anthropic 把 Claude 用到网络安全领域了,专门搞威胁检测和漏洞分析,还拉上安全机构一起干,做安全的朋友可以看看细节。
OpenAI 给受信访问的 GPT-6 Sol(Daybreak Blue)几乎没有网络安全防护,跑分直接登顶还比 Grok 4.7 便宜好几倍,值得看看细节。
Anthropic 把“别虐 Claude”写进了官方政策,还顺带改了医疗金融类应用的开发规则,做 AI 产品的得看看。
OpenAI 一口气丢了 700 篇 AI 数学论文进圈子,还因符号错误撤回 3 篇,Terence Tao 都出来警告了,看看数学界怎么反应。
三个被 OpenAI 开除的安全研究员上书董事会,说别再削弱人类盯着 AI 推理的能力,OpenAI 回应说是泄露敏感信息。两边说法不一样,事件细节可以看看。
各家模型排名怎么来的?跑 LMArena 的公司刚拿了 2 亿美元,Lightspeed 和 Khosla 领投,还要开始测模型会不会说谎。