主要来源Y Combinator
查看原文事件专题 ·单一信源
YC 访谈:Intelligence 用 Design Arena 评测 AI 创意能力,年化收入达 6000 万美元
YC 公司 Intelligence(2025 春季批次)正在为 AI 中最难量化的部分构建基准测试。其首个产品 Design Arena 让用户用前沿模型生成网站、图像、视频等创意作品,再把真实交互数据反馈给模型厂商,帮助他们了解模型在哪些场景成功、哪些场景失败。目前 Design Arena 已覆盖 192 个国家、超过 700 万用户。 产品机制上,Design Arena 通过真实用户的大规模使用来衡量“人类品味”,而非传统的静态基准测试。用户用多个前沿模型完成同一创意任务,其选择偏好沉淀为评测数据,随用户规模增长持续累积。这类“对齐人类偏好”的评测方式,区别于 SWE-bench 等以客观任务得分为主的基准。 商业层面,Intelligence 在约一年内达到 6000 万美元年化收入,团队规模保持小型。访谈还讨论了随着模型数量增多、领域专业化,专门化评测市场的发展方向,以及小团队在 AI 前沿创业中快速迭代的价值。
当前结论
700 万用户在 Design Arena 上用前沿模型做创意任务,偏好数据反过来帮模型厂商定位短板,一年做到 6000 万美元年化收入。喜欢 SWE-bench 之外另一种“真人评测”思路的话值得看看这场访谈,小团队打法部分对创业者也有参考。
2 个信源47° AI 热度最后更新 2026/11/13 16:30:33
证据链
2 个信源相关来源 1Recraft
查看原文冲突核查
现有去重数据只说明这些来源讨论同一事件,不代表立场相同。当前没有结构化的支持或反驳证据,不自动推断冲突。