AI Engineer NY 是 AI Engineer 系列在纽约举办的 AI 工程师大会,聚焦大模型应用、AI Agent 与工程实践,是北美 AI 工程领域的主要行业会议之一。该系列大会以"面向工程师的 AI 会议"定位,内容覆盖检索评估、代码质量、Agent 自治与风控等落地话题,吸引了金融、科技等行业的工程团队参与。
AI Engineer New York 近期进展
当前焦点与观察点
从本次大会的演讲内容看,讨论重心已经从"要不要用大模型"转向"如何评估和管控"。一个被广泛引用的细节是:某实际项目中数值准确率达到 81.3%,但业务门槛是 85%,评估关卡因此判定失败——这场后续讨论说明评测(eval)正在成为 AI 工程的核心环节,而非附属工作。类似地,另一场演讲讨论了如何把用户对搜索质量的抱怨转化为可度量的评估指标。
行业观察者普遍注意到,金融等强合规行业在大会中的存在感增强,Apollo、Wells Fargo 等机构的分享表明,企业级 AI 落地的关键矛盾集中在 Agent 的自主范围界定、风控误判成本与质量控制上。对于关注 AI 工程方向的人来说,后续值得跟踪的是:评估体系是否会形成行业标准,以及 Agent 自治边界的相关实践能否沉淀为可复用的工程范式。