返回资讯中心
外部精选
后端
#Rust#版本发布

Rust 编译器在 nightly 版本默认启用并行前端

来源标题:Enabling the parallel frontend on nightly

Rust 编译器在 nightly 版本中默认启用并行前端,以在稳定化前发现遗留问题。此前前端(类型检查和借用检查)长期单线程运行,三年前已可手动启用,去年 Vadim Petrochenkov 等人协调修复了多项长期问题。

Rust BlogJakub Beránek2026/11/16 · 2 天前19 分钟阅读

以下正文由 AI 翻译自 Rust Blog(原文版权归原站所有),可能存在偏差,重要内容请以原文为准。

TL;DR:我们将在 nightly 上默认启用 Rust 编译器的并行前端,以便在其稳定化之前找出遗留问题。

背景

Rust 编译器长期以来一直在“后端”部分(使用 LLVM)使用多线程来编译代码。然而,它的“前端”部分(包括类型检查和借用检查)一直是单线程顺序执行的,这自然会限制编译器的性能。如果你对 Rust 编译器中并行化的更深入解释感兴趣,可以查看之前的这篇文章。

编译器前端实际上早就支持并行运行,但由于各种问题,一直没有默认启用。三年前,我们让用户可以在 nightly 通道上选择启用并行前端,并计划在 2024 年将其稳定化。显然,我们没有实现这个目标,但在此期间,并行前端的工作仍在缓慢推进。

去年,Vadim Petrochenkov 与其他几位贡献者一起,开始了一项协调努力,试图最终让并行前端冲过终点线。自那以后,许多长期存在的问题得到了修复,其性能也得到了改善。现在我们已经到了希望将其广泛可用的阶段。但在此之前,我们想了解人们在实际使用中是否会遇到问题,因此我们只在 nightly 通道上默认启用它。一旦我们确信它运行良好,就打算将其稳定化。

优势

启用并行前端的首要好处当然是加快 Rust 程序的编译速度。

我们在基准测试套件中对并行前端进行了基准测试,该套件测量的是编译 crate 图中叶子 crate 的耗时。和往常一样,结果参差不齐。在一些基准测试中,并行前端几乎没有帮助。而在另一些基准测试中,例如对 nalgebra、cargo 或 diesel crate 执行 cargo check 时,使用 8 个线程,编译速度几乎快了三倍。

在下表中,你可以看到我们套件中真实世界基准测试的聚合墙钟时间平均变化,即在多种配置下从头构建单个 crate 时,与使用顺序前端的相同构建相比的结果。

前端线程数 / Profile check clippy debug opt
2 -21.95 % -20.74 % -14.2 % -12.51 %
4 -37.99 % -36.01 % -29.14 % -23.67 %
8 -44.23 % -41.76 % -36.1 % -27.88 %

很明显,并行化并不完美,我们绝对计划投入更多精力来改善其性能。尽管如此,使用 8 个线程时,对于我们测试的几个 crate,它可以使 cargo check 的端到端编译时间快约 2 倍,这仍然是相当大的改进。

增量重建的性能收益则要小得多,而且也很难比较,因为重建的性能取决于改动了什么以及代码生成单元是如何布局的。在我们的基准测试套件中,我们看到增量重建的平均改进为 3-5%。但我们目前还没有针对这种用例的好的基准测试,所以你的结果可能会有所不同。

我们还可以放大观察单个 crate。下图展示了在多种构建配置下编译 nalgebra 0.33 crate 时,完整非增量构建(full)、完整增量构建(incr-full)和增量重建(incr-patched)的墙钟时间如何变化:

值得注意的是,启用并行前端实际上也可以让后端变得更快,原因在此处有解释。

需要重点注意的是,上面展示的所有基准测试结果只测量了单个 crate 的编译。当编译整个 crate 图时,你的 CPU 核心可能已经因为后端(LLVM)并行化或 Cargo 并行编译多个 crate 而饱和了。因此,最终的性能效果将很大程度上取决于你运行的工作负载以及你可用的核心数量。

我们还在 8 核 CPU 的机器上对 cargo crate 本身进行了端到端的 cargo check(检查整个 crate 图)基准测试。使用 8 个线程时,端到端性能提升了约 15%:

  • 1 个前端线程:36.7 秒
  • 2 个前端线程:35.1 秒
  • 4 个前端线程:31.9 秒
  • 8 个前端线程:30.8 秒

从上述结果可以看出,当 CPU 核心已经被并行 crate 编译和 LLVM 饱和时,并行前端的正面效果会减弱。

调整线程数

一开始,nightly 工具链将默认使用并行前端,但只使用 2 个线程。这是一个保守的选择,应该仍然能让我们发现潜在问题,同时不会大幅增加内存使用。

如果你想测试不同线程数下的性能,可以使用 --jobs-frontend 编译器标志来覆盖前端使用的线程数。可以在 RUSTFLAGS 环境变量中指定,也可以将其放入 .cargo/config.toml 文件:

[build]
rustflags = ["-Zunstable-options", "--jobs-frontend=8"]

目前,并行前端的性能在超过约 8 个线程后可能不会很好地扩展,但你可以在自己的工作负载上尝试,看看会发生什么。请注意,使用更高的线程数可能会导致编译器的内存使用量增加,在极端情况下可能会导致内存耗尽。

限制和已知问题

由于使用了并行化,使用并行前端时,产生的诊断信息的顺序可能是不确定的。

在某些情况下,生成的二进制文件也可能无法重现,不过我们目前认为这些情况是 bug,并希望识别并修复它们。

目前还有一些与使用并行前端时 Rust 编译器的可重现性相关的已知问题,正在处理中。

如何退出?

(原文较长,此处译出前 6000 字,完整内容请点「打开原文」。)

正文由 探How 从来源站点 RSS 同步,内容未经改写;遇到排版缺失或需要图片、视频时请以原文为准。

打开原文
去社区讨论 →