返回资讯中心
外部精选
软件工程
#开发者实时流

开发者反映AI编程智能体导致CI流水线不堪重负

来源标题:I can't scale my CI

随着AI编程智能体的普及,代码产出速度大幅提升,但由此带来的构建、静态分析、测试和版本管理等持续集成环节的算力开销正成为新的瓶颈。开发者指出,高保真的端到端与集成测试本就昂贵,如今每一段AI生成的代码都要走完整套CI流程,成本被成倍放大。

Hacker News 最新shepherdjerred2026/11/11 · 6 天前16 分钟阅读

以下正文由 AI 翻译自 Hacker News 最新(原文版权归原站所有),可能存在偏差,重要内容请以原文为准。

和许多人一样,我近来大量使用编码 agent。想法可以很快变成代码。不幸的是,代码是有成本的。我指的甚至不是那种形而上的“所有代码都很昂贵”的论调——那种说法你买不买账都另说。

你写的每一段代码都必须存在于某个地方,很可能是在一个 Git 仓库里。而在那个 Git 仓库里,你得处理合并冲突、文件/工作树大小之类的问题。

你的代码还必须被构建。如果你在构建代码,那你很可能也在做格式化、lint 和其他静态分析。传统上,这些事你会做好几遍:

你写的每一段代码都要付出这个成本。有些语言这方面负担不重。另一些语言,比如 Rust,计算密集度相当高,能从缓存中受益。

所以,现在你的代码得有个落脚之处。它必须接受静态分析和构建,并被转化成产物。

众所周知,agent 在拥有有效循环时表现最好。所谓循环,大致是指调用真实 API、能在真实浏览器里查看自己的工作成果,以及编写高保真测试。

高保真测试(端到端测试和集成测试)历来都很昂贵。它们位于测试金字塔顶端是有原因的。它们非常有用,但也不容易运行或编写(不过,如今编写的成本已经不那么重要了)。

和静态分析类似,你会希望这些测试能在许多地方运行。通常我会希望是:

这些测试运行起来很费时间。它们消耗 CPU、内存,还有……磁盘写入。这是我因为 SSD 稀缺/涨价而发现的一个挑战。

再说一遍——每一段代码都有这个成本。每一个副业项目,每一个你想启动的小服务或小产品。

当然,你还得真正发布并维护每一个项目,但这并不是本文的重点。

现在,也许是我自找的。我不再使用 GitHub Actions 了。我把所有项目都搬进了一个 monorepo,这样 agent 就能更容易地做跨领域改动,发布协调也更少。

今年年初,我有一台运行 Talos 的单节点 Kubernetes 集群。BuildKite 连接到 GitHub,通过 Dagger 运行 CI,而 Dagger 就跑在我的集群上。

持续的痛苦!一个 Dagger engine pod 同时为 20 多个 agent 跑 CI。自然,这慢得让人无法忍受,还耗尽了我的 SSD 寿命。

我接下来的想法是:为什么不全部用 Bazel 来做?我以前从没用过 Bazel,但它让我想起 Amazon 的 Brazil 和 Never Build Twice,我对它们有着非常美好的回忆。

我把 Opus 扔去解决这个问题,但不幸的是结果并不真正可用——原因很多,最大的原因是我大量使用 Bun,而 Bazel 并没有真正支持 Bun 的规则。

所以,又回到 Dagger。我调优了一段时间,但最终变得难以为继。缓存填满得太快,引擎也太不稳定。

我想,通过单个 pod 运行 Dagger 并不真正可行,但我也不想为了缩小缓存规模和分片而武断地拆分 CI 工作负载。

于是我想,为什么不更多地依赖原生工具链并拥抱 Turbo 呢。我主要写 TypeScript,所以它很合适!

它确实运行得相当好,但不幸的是我做的事情还是太多了。这么多项目。有些用 TypeScript,有些用 Java,有些用 Rust。Turbo 有帮助,但并没有解决核心问题:我试图用太少的资源构建太多的东西。

我做了任何人都会做的事。我算了笔账,发现任何云算力提供商都会贵得离谱,于是买了第二台 CI 节点。我告诉自己,这是一笔投资。我每个月在 AI 订阅上花 $XXX;如果连自己的软件都构建不了,那有什么意义?我每年从工作中赚 $YYY,这是对我学习(以及,嗯,我最喜欢的爱好——显然就是软件工程)的合理投资。

我给服务器定了价,知道自己会在 SSD 和内存上被宰。我第一次在 ebay 上买了二手内存,并在 MemTest86 里花了几个小时验证它。

这帮助很大!它的规格基本上和我的主 Kubernetes 节点相同(但存储更少)。它给了我很大的余量。

不幸的是,我使用 agent 的水平提高了,所以在同一时间我有更多的 PR。我还想出了更多项目,这意味着有更多软件要构建。

最终它帮了不少忙,但并没有解决问题。我仍然被缓慢的 CI 困扰。我仍然不得不在构建什么、何时构建上做出妥协。

最近,我把所有与部署相关的步骤从 CI 中彻底移除了。所以现在 CI 负责创建 Docker 镜像、静态站点的 S3 归档等等,而一个单独的自定义应用(仿照 Amazon 的 Pipelines、Brazil、Version Sets 等)负责部署方面。这种职责分离非常有用,事后看来也显而易见。

我紧接着的想法是,我需要把“重型”测试从 CI 中完全移除。超过某个特定时间/算力阈值的端到端测试和集成测试不再进 CI。告诉 agent 在本地运行相关检查,也许还在 main 上按 nightly 计划运行它们。

我的感觉是,有两种改善局面的方式:

增加更多 CI 容量(目前对我来说不可接受) 更好的变更检测,这样只运行相关步骤 或者,正如我之前所说,干脆移除 CI 上做的事情 也许就试试回到 Dagger?他们最近发布了 1.0,我觉得他们确实有一套杀手级的软件构建模型 也许我构建得太多了,或者做了不必要的工作,但我已经反复审视过无数次了…… 也许我需要某个 agent 在后台运行,保持 main 上 CI 的绿色,这至少能帮助解决一些问题 也许我创造了一个超出我理解的系统,我需要抵制做新东西的欲望,花几周时间纯粹用于工作流、CI 和可靠性 如果还不清楚的话——这不是我的日常工作。我花相当多的时间编程,纯粹为了好玩。

(原文较长,此处译出前 6000 字,完整内容请点「打开原文」。)

正文由 探How 从来源站点 RSS 同步,内容未经改写;遇到排版缺失或需要图片、视频时请以原文为准。

打开原文
去社区讨论 →