返回资讯中心
外部精选
软件工程
#开发者实时流

ABFS 加速 Git 仓库开发流程,已在 Android 落地

来源标题:Accelerating Development for Git Repositories

ABFS 已在 Android 中支撑开发者和智能体的并行工作流,并被设计为可扩展到其他大型 Git 项目。Android 构建依赖 Blueprint、Soong 和 Ninja,Ninja 基于时间戳判断是否重新构建;构建 Cuttlefish 模拟器目标需执行 192,249 个 Ninja 动作。包含硬件等仓库的典型 Android 代码树规模可达 AOSP 的 2–3 倍,AOSP 本身有超过 3,000 个 Git 仓库。

Hacker News 最新richards2026/11/17 · 今天10 分钟阅读

以下正文由 AI 翻译自 Hacker News 最新(原文版权归原站所有),可能存在偏差,重要内容请以原文为准。

ABFS 已在 Android 中为开发者和智能体的并行工作流提供支持,但它的设计目标是扩展到其他大规模 Git 项目。

在 Android 构建系统中,开发者在 Blueprint 文件(Android.bp)中定义构建规则,Soong 将其编译为 Ninja 文件,再由 Ninja 执行最终构建图(参见 Android 构建概览)。与 Make 构建工具类似,Ninja 基于时间戳工作:如果某个构建步骤的输入文件比现有输出文件更新,Ninja 就会重新构建输出文件。

对 Android 17 的 AOSP 代码进行分析,可以看出单次检出和构建所涉及的磁盘占用和文件数量之庞大。

在包含硬件特定仓库、板级支持包、第一方应用、形态特定代码等的典型 Android 代码树中,代码规模是 AOSP(超过 3,000 个 Git 仓库)的 2–3 倍,并且还会在多个活跃 SKU 和旧版维护分支上进一步叠加。

构建 Cuttlefish 模拟器目标会执行一个包含 192,249 个 Ninja action 的构建图。虽然代码树构建完成后本地增量构建很快,但每个新工作区、分支切换或临时智能体会话都要从冷启动开始。

尽管开发者通常只改动 1 到 10 个不同的 Git 项目,但在 64 核机器上进行本地构建、且不使用任何远程执行的人,可能会在 CI 系统已经构建过的工作上重复浪费多达 80 分钟。即使开发者只修改了 system/libbase 这样的核心库,构建图中仍有 97% 与 CI 构建完全相同。

对于 Android 这样年代久远、变更频繁的代码库来说,在 CI 和本地机器之间共享缓存的构建输出也很棘手。构建规则偶尔会引入隐藏依赖(例如在原始编译器 flag 中传入未声明的 schema 文件)、过度声明的输入或未声明的输出。在基于时间戳的构建中,隐藏依赖会静默产生过期的增量产物,迫使开发者清空输出目录并执行全量构建。

ABFS 通过用虚拟的内容寻址文件系统(CASFS)替代庞大的本地源码检出,让 Android 构建变得更快。ABFS 仅在构建实际访问文件时按需流式传输文件,并利用共享构建缓存来帮助消除冗余下载和编译。

在服务端,Git-pusher 持续将来自 Gerrit 或其他 Git 托管平台的新 Git 对象摄取到一个可水平扩展的 gRPC ABFS 内容寻址存储(CAS)服务器中,该服务器会为 Git 内容、工作区快照和构建步骤结果建立索引。在开发者主机上,本地 LRU Cacheman 守护进程、Mount Daemon 和 Tap 工具将用户态构建工具连接到内核文件系统,使检出和构建只流式传输所需内容。完整 ABFS 架构见 GitHub。

客户端的核心是一个名为内容寻址存储文件系统(CASFS)的虚拟文件系统,它是一个 Linux 内核模块,通过扩展属性暴露 Git SHA 内容哈希。当设置文件的哈希后,CASFS 会立即填充其元数据,并仅在需要时通过 Cacheman 下载文件字节:

$ touch hello $ abfs hash --set cc628ccd10742baea8241c5924df992b5c019f71 hello # 仅元数据 $ ls -l hello # 名称和大小可用;内容尚未下载 -rw-r----- 1 user primarygroup 6 Nov 3 00:11 hello $ cat hello # 首次读取时惰性加载内容 world Shell 已复制

初始检出只下载预填充了 Git 哈希的轻量级目录元数据。CASFS 原生使用 Git 的对象模型,使标准 git 和 repo 操作可以透明工作。

CASFS 还可以 tap 构建进程。Tapping 会将实际读取、写入或删除的每个文件记录到称为 patch 的列表中,这些列表与缓存的构建输出一起存储。Ninja-go 用两阶段内容寻址缓存取代时间戳检查:

正文由 探How 从来源站点 RSS 同步,内容未经改写;遇到排版缺失或需要图片、视频时请以原文为准。

打开原文
去社区讨论 →