DeNA 用 Milvus 构建 DAAQ,测试设计工时平均削减约 50%
DeNA 把规格书和历史测试知识喂给 Milvus,用多段式 LLM 流程自动生成测试用例,测试设计工时省了一半。文章最值钱的是他们逐段排查哪些步骤根本不需要 LLM 的思路,做内部 AI 工具的工程师都该看看。
DeNA IT 本部开发的 DAAQ 将 LLM 处理拆分为多段步骤,自动从规格书和画面设计书中提取测试观点并生成测试用例,内部测试设计工时平均减少约 50%。部分项目中被判定为无需修改的测试用例比例达到 95%。
技术细节上,团队借助 Milvus 把规格文档和历史测试知识引入生成流程,让 QA 的工作从“从零编写”转为“确认并完善”。一个关键经验是:原本以为必须用 LLM 判断的环节,有些用规则引擎或批量汇总处理就足够,团队因此逐段重新审视了整个处理流程,而不是默认全程依赖 LLM。
对要在业务系统中落地 LLM 并长期维护的工程团队来说,这篇文章提供了处理流程拆分、成本与可靠性权衡的实际案例。测试质量长期受制于个人经验和领域知识的痛点,也是许多 QA 团队的共性问题。
We’re proud to see DeNAxTech use Milvus to bring specs and past testing knowledge into DAAQ, giving QA engineers more time to think through risks and edge cases. Thanks for sharing how you built it, and we’d love to see where you take DAAQ next! DeNA Tech @DeNAxTech DAAQ で QA の仕事は「ゼロから書く」から「確かめて仕上げる」へ🧪 仕様書や画面設計書を読み解き、テスト観点を洗い出してテストケースに落とし込む作業は、QA 業務の中でもとくに工数のかかる工程です。 できあがるテストの品質が、担当者の経験やドメイン知識に左右されやすいことも長年の課題でした。 DeNA の IT 本部が開発した「DAAQ」は、LLM の処理を多段のステップに分けてテストを生成し、社内のテスト設計工数を平均で約 50% 削減しました。 生成されたテストの 95% が修正不要と判定されたプロジェクトもあります📉 LLM による判断が必要だと考えていた処理でも、ルールベースや複数件のまとめ処理で足りる場面がありました。 LLM の利用を前提にせず、処理フローごと見直してきた経緯を紹介しています。 LLM を業務システムに組み込み、現場で使われ続ける形に育てたい方に読んでほしい記事です� engineering.dena.com/blog/2026/10/d… MYp 🔗 View Quoted Tweet
本条情报归属 AITOP「技巧」核心追踪栏目。在跨区域产业观察坐标中,该动态直接关联「AI 开发者工具链、Coding Agent 与工程化实践」研究主线,反映出当前技术演进与商业落地的最新风向。涉及核心实体与技术议题包括:Milvus、DeNA、DAAQ、测试自动化,读者可通过下方标签进入对应专题页查阅历史脉络与关联对比。
信源核验说明:本文原始线索采编自「Milvus」(@milvusio),经 AITOP 多维评分管线结构化提炼。