行业Agent 与开发者06:35Artificial Analysis在韩国举办首届AI活动Artificial Analysis在首尔办了场AI聚会,有美国专家讲任务成本,SK电信和TrillionLabs展示了他们的AI模型进展。#Artificial Analysis#A.X K2#Gravity#物理AI官方账号Artificial Analysis@ArtificialAnlys原文稍后读已读值得跟进有用关注 Artificial Analysis+3
模型中美对照21:16Vals AI 推出 AI 基准测试平台Andreessen Horowitz 资助的 Vals AI 要做 AI 基准测试平台,能更中立地评估模型性能,和现在很多公司自己做的测试比更可信。#Vals#AI基准测试#Andreessen Horowitztechcrunch@Lucas Ropek原文稍后读已读值得跟进有用关注 Vals
论文Agent 与开发者11:12IBIB协议:评估企业AI系统的新方法IBIB协议解决了企业AI系统评估的测量误差问题,提供了新的评估方法和算法,对AI系统开发者很有参考价值。#IBIB#企业AI系统#评估协议#AI基准测试aarXiv cs.LG@Blake Stenstrom 等 3 人原文稍后读已读值得跟进有用关注 IBIB
产品Agent 与开发者09:55AI基准测试与Vercel合作活动Benchmark和Vercel联手搞AI基准测试,看看哪家模型更靠谱,帮你选对工具。#Benchmark#Vercel#AI基准测试Guillermo Rauch@rauchg原文稍后读已读值得跟进有用关注 Benchmark
论文21:41Apodex发布AI基准测试平台Apodex发布了包含218个测试场景的AI基准平台,首批聚焦生物医学等三大领域,提供真实世界问题评估。#Apodex#AI基准测试#生物医学#临床转化elvis@omarsar0原文稍后读已读值得跟进有用关注 Apodex
模型21:21Apodex发布TRACES基准测试Apodex新出的TRACES基准,专门测AI在答案不确定时的发现能力,对研究型智能体很重要。#TRACES#Apodex_AI#AI基准测试#智能体elvis@omarsar0原文稍后读已读值得跟进有用关注 TRACES
模型Agent 与开发者13:48Opus 4.7在14小时内完成2-17周人类工作,成本251美元Opus 4.7只用14小时和251块就干完了人类几周的活,虽然还有瑕疵,但进步真的快。#Opus 4.7#编程助手#编码能力#AI基准测试Ethan Mollick@emollick原文稍后读已读值得跟进有用关注 Opus 4.7+2