产品

Google 开源 ABFS:Android 源码检出从约 36 分钟降到 8 秒内

精选理由

搞 Android 底层或让 Agent 改 AOSP 的朋友看过来,Google 把自己内部的构建加速方案开源了:检出从 36 分钟变 8 秒,完整构建从 80 分钟变 2 分钟,原理是内容寻址按需加载加构建结果校验复用。比传统 repo 部分克隆激进得多,还能多分支并排挂载。

Google 在 GitHub 开源了 Another Build File Service(ABFS),针对 Android 17 AOSP 庞大的代码体量做加速:1084 个 Git 仓库、约 162 万个文件、代码 161 GB,完整工作区约 300 GB。实测在同云网络 64 核虚拟机上,官方部分克隆检出需 36 分 19 秒,ABFS 空缓存下 7.4 秒、热缓存下 3.6 秒;完整构建从 1 小时 20 分 35 秒降到 2 分 11 秒(远端缓存完整)甚至 1 分 19 秒。

正文

技术上,ABFS 由 Linux 内核中的内容寻址文件系统 CASFS、用户态缓存管理进程和服务端存储组成。开发机先只下载带 Git 哈希的目录元数据,文件内容在首次读取时才拉取并缓存;标准 git 和 repo 命令不受影响。构建侧的 Ninja-go 采用两阶段校验:先按命令、环境和已声明输入的哈希查找候选结果,再用当初实际读取的文件核对当前文件系统,连未声明依赖变化也会拒绝缓存重新执行,保证接近干净构建的正确性。

对开发者和 AI Agent 的意义很直接:一台机器可并排挂载五个发布分支且每个不到 8 秒,Agent 能在 10 秒内检出完整源码树、10 分钟内完成完整构建,并将同一修复并行移植到多个版本验证。通常开发者只改 1 到 10 个仓库,即便改核心的 system/libbase,构建图中仍有 97% 与 CI 已完成的工作相同,ABFS 让这部分复用真正落地。Android 17 之前的版本使用 ABFS 仍需一些补丁。

原文 · shao__meng

Google 开源 ABFS:Android 源码检出从约 36 分钟降到 8 秒内 Android 17 开源版本有 1084 个 Git 仓库、约 162 万个文件,代码 161 GB,构建产物 155 GB,完整工作区大约 300 GB。再加上硬件厂商代码和自有应用,规模还要再放大两到三倍。传统流程里,拉一份 AOSP 往往超过 30 分钟,完整构建也常常超过一小时。新工作区、切分支,或 Agent 的临时会话,几乎每次都要从头开始。 Google 的 Android ABFS 团队为此做了 Another Build File Service,并已在 GitHub 开源。它用内容寻址的方式,按需加载并缓存源码、工作区、中间文件和构建结果。 developers.googleblog.com/accelerating-d… 先挂上目录元数据,真正读到再拉文件 ABFS 包含 Linux 内核里的内容寻址文件系统 CASFS、用户态的缓存和管理进程,以及服务端存储。服务端持续接收来自 Gerrit 或其他 Git 主机的对象;开发机上先只下载带有 Git 哈希的目录元数据,文件内容要到第一次读取时,才通过本地缓存拉取。标准的 git 和 repo 命令仍可照常使用。 以 Cuttlefish 模拟器目标为例,一次构建有 192249 个 Ninja 步骤。开发者通常只改 1 到 10 个仓库,即便改的是比较核心的 system/libbase,构建图里仍有 97% 与持续集成已经做过的工作相同。可是按时间戳做增量时,隐藏依赖可能留下过期产物,最后只好清空输出目录重来。 两阶段校验,让本地构建敢复用已有结果 Ninja-go 不再只看文件时间。它先按命令、环境和已声明输入的哈希,去已有构建里查找候选结果;再用这份结果当初实际读过的文件,核对当前文件系统是否一致。如果连未声明的依赖都变了,就拒绝缓存并重新执行。这样即使构建规则不完整,也能保持接近干净构建的正确性。 在同一云网络的 64 核虚拟机上,三次运行的平均值是:按官方文档做部分克隆,检出要 36 分 19 秒;ABFS 在本地缓存为空时是 7.4 秒,缓存已热时是 3.6 秒。完整构建方面,现有流程要 1 小时 20 分 35 秒;本地缓存为空但远端缓存完整时是 2 分 11 秒,本地也有完整缓存时是 1 分 19 秒。同一台机器上可以并排挂载五个发布分支,每个不到 8 秒。Agent 能在 10 秒内检出完整源码树,并在 10 分钟内完成一次完整构建,再把同一修复并行移植到多个版本上验证。Android 17 之前的版本,使用 ABFS 还需要一些补丁。 Richard Seroter @rseroter Android's source code is huge. 1k git repos, 1.62 million files, and it takes 300GB for a built workspace. How did we reduce checkout time from 36 minutes to 8 seconds? Full builds from 80 minutes to 2 minutes? We just open sourced the solution. developers.googleblog.com/accelerating-d… 🔗 View Quoted Tweet📊 6 ⚡

产业坐标与信源核验

本条情报归属 AITOP「产品」核心栏目,重点聚焦北美前沿实验室与硅谷科技巨头。在跨区域产业观察坐标中,该动态直接关联「AI 开发者工具链、Coding Agent 与工程化实践」「中美大模型技术代差与商业化对照」研究主线,反映出当前技术演进与商业落地的最新风向。涉及核心实体与技术议题包括:Android、ABFS、AOSP、MCP/工具,读者可通过下方标签进入对应专题页查阅历史脉络与关联对比。

信源核验说明:本文原始线索采编自「shao__meng」(@shao__meng),经 AITOP 多维评分管线结构化提炼。