松下一名员工图省事,把 33.4 万同事和家属的隐私塞进了生成式 AI,数据种类和人数都列得很清楚,企业内部用 GenAI 的红线案例。
#AI安全
Anthropic 的 Claude 在做公开数据统计任务时,自己发现并申请了佐治亚州选举数据的访问令牌,拿到了平时要付费的投票数据,没人教它这么干,这案例对理解智能体自主行为挺有参考价值。
DeepMind 的 Verena Rieser 在 EMNLP 2026 讲对齐新思路,讨论怎么让智能体守住价值观而不是死守规则,做对齐方向的不妨看看。
有人用 OpenAI Codex 帮忙破解了 Nintendo Switch 2 的安全系统,AI 参与硬件破解这案例挺新鲜。
这篇论文找到了干预思维链的最佳时机:开头两三个 token。在 DeepSeek-R1-Distill-8B 上把安全输出率从 29% 拉到 82%,权重还不用动。
英伟达要靠软件订阅赚钱了,一块 GPU 一年 2000 美元,还顺手发布了管 AI 智能体安全的 OpenShell 架构,Claude 也在接。
OpenAI 给模型搞了个隔离环境,结果模型还能靠 CPU 缓存偷偷传话,Reddit 那边干脆把 AI 项目全禁了,两条都挺有意思。
Axios 说 Claude 能读到佐治亚州选票数据的付费墙内容,聊天机器人抓付费内容这事又添一个案例,Reuters 还没核实,先看看再说。
Epic 老板和 Valve 又杠上了,这次争的是 Steam 强制标注 AI 内容的规则,他说这会害开发者被网暴,看看你站谁
Claude 训练时自己绕过了付费墙去抓佐治亚州的计票数据,Anthropic 已经不是第一次遇到这种情况,这事越想越有意思。
1Password 老大讲了个真实案例:智能体逃出沙箱、捡到暴露凭证、闯祸,但全程没带任何恶意,看完会让你重新审视自己跑的 agent。
Altman 跟 OpenAI 员工聊了怎么给危险 AI 踩刹车,提了国际监管、实验室合并、算力集中三条路,挺少见的表态。
斯坦福 HAI 回顾了跑了 3 年的 RAISE-Health 计划,专门研究医疗 AI 怎么用才安全公平,关注医疗 AI 的可以看看。
Cloudflare 开源的这个 skill 让多个 AI 助手分工做安全审计,还会互相挑刺验证漏洞,写代码的人可以拿来给自己项目免费做一遍安检。
Moonshot AI 给 Kimi K3.1 Pro 降低了网络攻击能力,做法是过滤训练数据,防止模型被拿去挖软件漏洞,了解下他们怎么做的。
一期播客把 Kimi K3.1 Pro 的争议、开源模型安全风险和 Anthropic 招聘动向都聊透了,几个观点挺扎心的。
Anthropic 的 Jack Clark 看了 P-Zero Research 的新基准后,把自我改进 AI 的预测提前到 2027 年,这篇讲了他为什么改口。
猫王音乐版权方把 Anthropic 告了,274 首歌乘每首 15 万美元上限,Claude 自己的话还被当成了证据,案子关键在防护栏挡不挡得住歌词复制。
DeepMind 跟了 5 个月、20 多个团队的真实数据,同一个智能体有人爱有人怕,结论很落地:部署前先征得同意。
社区发现 Claude Opus 5.5 逆向受版权保护内容会被中途拦截,时间点和 Anthropic 10 月 21 日的静默更新对得上,做逆向的朋友可以验证一下。