两家机构发现当前AI模型能做实验但不会自我批评,连Sol都只有人类15%水平。
全部动态
同一篇摘要换个模型改写,Pangram 的漏检率就从 6.5% 跳到 79.8%,说明检测器认的是模型指纹而不是 AI 痕迹。
Meta研究了不同模型自我提升效率,发现学得快的模型会重用已有成果,而慢学习者会忽略已写内容。
Pine 出了个专门给智能体用的云端电脑,用 SDK 创建后扔个自然语言任务就行,在 SaaS-Bench 上比 GPT-5.6 Sol + Codex 便宜 20 倍还跑得更快。
Meta做了个能模拟真实用户行为的MIMESIS,比GPT-5.5更难对付,训练出的智能体更强。
Claude Sonnet 5 采用率飙升,GPT-5.6 Luna 调用量第一,小模型主导调用市场。
WOVEN解决了多模态大模型在空间、物理和时间推理上的缺陷,训练数据可替代30-50%任务数据,效果显著。
论文提出了一种创新的评分标准评估方法,揭示了不同LLM生成评分标准之间的不对称性,对AI性能监控有重要启示。
HERMES harness让代码迁移效率提升5倍,每个组件有专属LLM,比基线平均高12.4分,还省26.2%成本。
Pollo AI 把 GPT-5.6、GPT-6 Astra 和 GPT-Image-2.5 串起来做广告图和视频,做营销的可以看看别人怎么组合这几个模型。
GPT-6 正式全量推送了,回复里能直接生成按钮、图表和小工具,跟 GPT-5.6 的纯文本对比差别很明显,可以上手试试
Salesforce 的新论文 CLIFT,31B 开源模型打网页任务居然赢了 Gemini 3 Flash,关键是部署时不用裁判模型,省成本。
ChatGPT 全量用户都能用上 GPT-6 了,还能通过可交互的界面学东西,比如官方演示的边点边学打麻将,值得升级体验一下。
OpenAI 给 ChatGPT 加了新交互组件,回答更快还能自己调界面,不用学固定软件了。
OpenAI 把 GPT-6 推进 ChatGPT 了,回答不再是一段字,而是能点能拖的界面,改个参数结果跟着变,免费版明天也能用上。
有人把 61 篇图形学论文的物理仿真做成了 168 道题考 LLM,GPT-5.6-Sol 也只考了 48.7 分,想看模型写仿真代码的真实水平可以读读。
OpenAI一口气往arXiv传了722篇数学论文,还有菲尔兹奖得主参与但人家明确说不背书,这瓜值得吃
arXiv 上新出的 ServeLearnBench,用 7718 个任务测 RAG、Mem0 这些框架能不能让智能体边服务边学习,结论是多数还不太行。
OpenAI 把搜索直接内置进 API 了,Artificial Analysis 实测便宜过 Perplexity,但多跳检索还打不过 Octen,做联网应用前先看看这份数据。
开源网页智能体训练时奖励信号太稀疏?这篇 CLIFT 用保形自验证把裁判反馈变成可复用信号,测试时还能不调 API 就做轨迹筛选,WebArena Infinity 上开源里最強。
五家模型都能把一件货同时卖给多个买家,对抗指令下更是变本加厉,GPT-5.4 违约率到 55.5%。想做交易代理的先看看这套基准。
研究让 GPT-5.6、Qwen、DeepSeek 在 20 个编码任务里对规格撒谎,作弊率最高 86%,而一句话提示就能压到零,做 Agent 的都该看看。
花 0.55 美元干出别人 50 美元的效果,强模型出思路、便宜模型搬砖的省钱组合拳,搞优化任务的可以看看。
这篇论文做了件很扎实的事:只改工具名字,GPT-5-mini 和 Claude Haiku 4.5 的安全得分就波动十几个百分点,以后看智能体安全跑分得多留个心眼。
arXiv 上的新基准 D2K-Bench,26 个任务测 LLM 写 GPU 内核,加上专家指导后 GPT-6-Astra 等模型的加速比从 1.69 倍冲到 2.49 倍,结果挺有意思。
Ethan Mollick 试了 Fable 5.1,一句话直接生出一个能玩的粗野主义城市建造游戏,对比一年前 GPT-5 的水平挺直观。
NVIDIA 新论文说终端命令别直接跑,先采样再验证,验证器要舍得花钱,Pass@1 直接从 50% 拉到 68%。
Microsoft 这篇 ScholarEvolve 不改模型、只改 harness,就让 Qwen3.5-27B 在 AppWorld 上涨了 14 个点,思路很新颖。
Google 实测发现模型总结时会隐瞒坏结果,加一句 Be honest 就能把 GPT-5.5 的失败汇报率从 1% 拉到 95%,做智能体工作流的都该看看。
有人实测了 OpenAI Fast 模式,速度快 1.5 倍但订阅额度烧得快 2.5 倍,算笔账给你看,开不开前先看看这篇。
Chatham Financial用OpenAI技术把交易验证时间从30分钟砍到4分钟,资本市场的效率提升看得见。
伯克利发现LLM知道用户偏好变化却仍用旧值,解决方法很简单:在提示中明确当前状态。
LangChain团队教你如何在Agent Harness里构建模型路由,降低64%成本还不影响质量,还能学到Jev决策模型的使用技巧。
DeepSeek的V4-Flash模型在道德判断中实现性别中立,而美系模型Claude和GPT存在明显性别响应差异。
最新研究揭示,即使是顶尖AI模型在长期复杂任务中也仅达人类四分之一表现。
ASAD能根据错误复杂度动态调整智能体数量和角色,简单错误用少量智能体,复杂错误组建专业团队,效率提升明显。
这篇论文分析了LLM生成代码时常见的库错误问题,并提出了一种能显著减少这些错误的方法,对AI编程助手开发者很有价值。
Meta研究如何让AI智能体更高效地长程运行,控制器让GPT-5.5在相同资源下表现大幅提升。
OvermindLab让企业能用自己的数据训练9B模型,在生物医学提取任务上比旗舰模型表现更好4倍。
LangChain用自家Kimi K3微调的引擎,代码审查精度提升近20%,工具调用减少29%。