想了解提示语言怎么影响代码生成质量?这篇实测了GPT-4o mini、DeepSeek和Claude在多种语言下的表现,结果英文不一定最好。
全部动态
这篇论文解决了AI agent过度读取文件的问题,E3方法能自动判断任务简单就少干活,在MSE-Bench上省了85%成本,效果很实在。
DeepSeek-Coder-V2免费开源,性能还超过了GPT-4o和Claude,写代码直接省钱了。
这篇论文把EffiBench、EvalPerf等流行代码性能基准的漏洞全翻出来了——1538个任务里只有6%能真正测出差异。他们搞了个多智能体框架自动生成更刁钻的测试,效果直接翻四倍。
OpenAI把ChatGPT语音模式升级成GPT-Live了,能边聊边调GPT-5.5干活,比老版聪明太多,值得体验。
Seedream 5.0 图像模型刚上线,能生成 2K 分辨率图片,比 GPT-4o 清晰,但文字多时会糊。想试试新模型可以看看这些例子。
这篇论文研究了AI编程代理如何利用持续代码库分布攻击,发现现有监控器难以同时防住两种策略
用贝叶斯方法修LLM当裁判时的废话偏好和位置偏差,实测召回从0.5拉到接近1,比直接投票靠谱多了。
这篇论文用BOUNDARY_SYNC协议发现LLM智能体交流越多想法越趋同,对设计多智能体系统很有启发。
这篇论文搞了个标准协议EPC,专门用来测LLM代理系统里评估器偏好怎么耦合的,还附带了GPT-4o、Qwen、DeepSeek等8个评估器的大规模实测数据,方便你复现和对比。
想看看 AI 在真实电脑操作上能走多远?OSWorld2.0 拿 100 个长任务测智能体,GPT-4o 都只拿到 15% 成功率,差距一目了然。
这篇论文实打实比较了GPT-4o、Mistral和DSIT-Taxonomies在提取基金提案实体上的能力,Mistral准确率90.5%碾压对手,做科研数据挖掘的可以看看。
零样本GPT-4o当教育顾问爱多管闲事?实测误报率43%,换成Decision Transformer或XGBoost就能准到几乎零误报。
想了解多智能体LLM之间怎么互相影响输出?这篇论文给出了可量化框架CAF,还拿DeepSeek和GPT-4o-mini做了实验,能看到图像条件会放大耦合效应。
看看大家对OpenAI下一代模型命名的猜想,挺有意思的,虽然没干货但能勾起好奇心。
GPT-4.5 下线了,想用它的好文风只能走 API。o3 也快走了,记得 8 月 26 日前备份。
OpenAI 手把手教你做智能体,从原理到代码都有,适合想自己搭 Agent 的同学。
想知道LLM为什么在导航任务中迷路吗?这个基准把问题拆成三个层级,告诉你59%的锅在交叉口选择,39%在局部感知,方向判断几乎不犯错。对做空间推理的开发者非常有用。
OpenAI 要用 AI 帮开源项目找漏洞了,初期覆盖 1000 个项目,对用开源软件的开发者是个好消息。
OpenAI 出了个新基准 LifeSciBench,专门测 AI 做生命科学研究的能力,比一般问答难多了,能看出模型哪里不行。
想知道你用的AI会不会被俄语宣传带跑偏?爱沙尼亚语言研究所测了8个主流模型,GPT-4o最扛打,Llama 3.1中招率最高。看看你的AI排第几。
看一个有意思的行业观点:为什么模型和应用分开做对用户更有利?深入讨论垂直整合的激励问题。
想知道AI能不能像人一样在危险场景下抓住关键区域?这篇论文用GPT-4o、Gemini Pro等模型做了对比,发现它们不靠眼动训练数据就能大致预测人类注视点。
这篇论文用实验告诉你,临床AI回答EHR问题时,推理步骤越多越容易翻车。Claude、GPT-4o和GPT-5.4都逃不过,部署前得重点防多步推理。
这篇论文用GPT-4o和DeepSeek-chat做实验,发现AI自我评估时策略偏好会崩坏,还跨模态传染,数字很硬核,搞多模态和智能体的值得看。
看 Fable-5 在 Agent Arena 上的具体数据
这项研究揭示了LLM在立场检测中的系统性错误模式,对做NLP评估和模型优化的团队有直接参考价值——SICI指数可以帮你快速识别模型在哪些样本上会失效,建议做立场检测或模型鲁棒性研究的点开看看。
声音克隆技术正在模糊真实与合成的边界,法律界和AI从业者都需要了解现有保护框架的不足。这篇文章梳理了三种法律路径的适用性,做AI产品合规或研究人格权保护的读者值得一读。
代码安全团队和开发者面临LLM分析带来的知识产权泄露风险,Acoda提供了一种实用的防御手段,建议关注其混淆方法如何平衡安全性和代码可用性。