返回资讯中心
外部精选
软件工程
#开发者实时流

iOS 27 新 RAW 9 解码器对比 RAW 8 与 ProRAW,低光噪点最多降 96%

来源标题:Comparing iOS 27's RAW 9 decoder with RAW 8 and ProRAW

iOS 27 的 Core Image 新解码器 RAW 9 相比 2017 年的 RAW 8,在 ISO 800 下亮度噪点减少 46–62%,彩色噪点减少 68–96%。代价是每张照片后期处理多约 0.5 秒,不影响快门。但单帧 RAW 在低光下仍不敌 ProRAW,测试中 ProRAW 曝光时间约为其 5 倍。

Hacker News 最新danlng2026/11/20 · 今天30 分钟阅读

以下正文由 AI 翻译自 Hacker News 最新(原文版权归原站所有),可能存在偏差,重要内容请以原文为准。

iOS 相机应用通过 Apple 的 Core Image 框架能用 RAW 做什么、不能做什么。来自 M-MODE 构建的一次详尽对比:在弱光和高对比场景下,单帧 RAW 能接近 ProRAW 到什么程度?哪些做成了,哪些没做成,以及原因。

iOS 相机应用拿不到 Apple 照片管线背后的帧缓冲。AVFoundation 的照片拍摄只能在按下快门后给应用单独的 RAW 采集。要像 ProRAW 那样做多帧融合,应用必须自己采集并保存一路 raw 帧流。Android 的 Camera2 API 给应用提供 RAW 连拍,Google 的 HDR+ 会把它们融合。[1][2][3] 在 iPhone 上,Adobe 的 Project Indigo 证明这是可行的:它在取景器运行时采集 raw 帧,最多融合 32 帧。[4]

RAW 9 是 iOS 27 中新的 Core Image 解码器。RAW 8 来自 iOS 11(2017 年),老了将近十年。在 ISO 800 下,RAW 9 的亮度颗粒少 46–62%,彩色斑点少 68–96%。它花的是开发时间,不是快门时间:每张照片在拍摄后多花约 0.5 秒做显影,快门本身不需要等待。

但在弱光下,单帧仍然不是 ProRAW 的对手。在一项测试中,ProRAW 的曝光时间约为单帧的 5 倍:ISO 400、1/121s 对 ISO 2000、1/638s。文件没有说明那是一帧还是多帧。按每个 DNG 中的噪声模型(NoiseProfile),ProRAW 大约干净 2.9 档。

阴影混合、神经降噪器以及独立采集之间的融合都失败了,因此没有发布。对于街头摄影——主体和相机都在移动——下面的测试表明单帧是最合适的选择。Apple 的 ProRes RAW 视频流是个未解的问题:在早期的弱光测试中,一帧视频流比一帧 RAW 照片干净 1.7 到 3.2 档,但更软。

在 iOS 上,相机应用通过一个 API 访问相机:AVFoundation;而 Apple 的 RAW 显影器是 Core Image 的 CIRAWFilter。这给应用提供了三种从 RAW 得到照片的途径:

在 iOS 27 上,这些测试中的每个 DNG(Bayer 和 ProRAW)都提供 RAW 9。Apple 将 RAW 9 描述为神经去马赛克与降噪的联合体。[5] 它在可用时作为 Core ML 模型在 Neural Engine 上运行。

目标是单帧、自然的渲染:不锐化、不做局部色调映射,高光像胶片一样平滑过渡。因此 M-MODE 关掉 Apple 添加的一切,平坦地显影这一帧:

// M-MODE.swift (BayerRecipe). Version helper inlined; comments shortened. static let headroomEV = 3.0 static func configure(_ decoder: CIRAWFilter, noiseReduction: Double, colorNoiseReduction: Double? = nil) { // First: setting decoderVersion resets every other CIRAWFilter setting. if let version = decoder.supportedDecoderVersions.first(where: { $0.rawValue == "9.dng" }) { decoder.decoderVersion = version let amount = Float(min(1, max(0, noiseReduction))) let colourAmount = Float(min(1, max(0, colorNoiseReduction ?? noiseReduction))) // Decode 3 EV dark: CIRAWFilter caps its output at 1.0. decoder.exposure = Float(-headroomEV) decoder.boostAmount = 0 decoder.boostShadowAmount = 1 decoder.shadowBias = 0 if decoder.isLocalToneMapSupported { decoder.localToneMapAmount = 0 } if decoder.isContrastSupported { decoder.contrastAmount = 0 } if decoder.isDetailSupported { decoder.detailAmount = 0 } if decoder.isSharpnessSupported { decoder.sharpnessAmount = 0 } if decoder.isLuminanceNoiseReductionSupported { decoder.luminanceNoiseReductionAmount = amount * 0.75 } if decoder.isColorNoiseReductionSupported { decoder.colorNoiseReductionAmount = colourAmount } if decoder.isMoireReductionSupported { decoder.moireReductionAmount = 0 } if decoder.isDespeckleSupported { decoder.despeckleAmount = 0 } // White balance, baseline exposure and lens correction stay as captured. // After decoding: add the 3 EV back in extended linear space, before the shoulder curve. static func restoreHeadroom(_ image: CIImage) -> CIImage { image.applyingFilter("CIExposureAdjust", parameters: [kCIInputEVKey: headroomEV]) 比白高 2 到 3 档的明亮天空显影出来是平的,尽管 Bayer 数据仍然保留着它们。这就是 M-MODE 要暗 3 档显影的原因。在 M-MODE 把 3 档加回来之后,一条肩部曲线 x / (0.82 + x) 会压缩所有高于白的值。中灰保持在 0.18。高光平滑过渡,不会硬切。

中灰 46%白 77%+3 过曝 96%在 +2.5 EV → M-RAW 77% · 裁切 100% M-RAW 基础曲线在白色处硬裁切检测点 01 / 一次采集,两个解码器RAW 8 对 RAW 9 同一批 DNG,用两个解码器和相同设置显影,不加 LUT:2026 年的解码器对 2017 年的。RAW 9 在每个测试过的 ISO 下都更干净,且差距随 ISO 增大。

每一对中,色彩都保持在 0.1 到 3 个色阶(共 255)以内。

一次采集。RAW 8 在暗部保留彩色斑点;RAW 9 给出更暗的背景和更干净的白色。

一种常见做法:把一帧显影两次,按亮度混合结果。目的是对每个色调使用更合适的解码器,这里是去除近黑区域的噪声。

在 ISO 3200 和 6400 下,RAW 9 在近黑区域出现粗糙的暗色斑块。逐一测试各项设置找到了原因。RAW 9 的输出在近黑区域会低于零,而解码器会裁掉负值。M-MODE 的阴影偏移设为 0 就暴露了这一点。Apple 的默认值 5 会掩盖它,但也会压死阴影、让整帧发黄。

下一项测试是对同一个 DNG 的两次显影做混合:0.004 线性以下用 RAW 8,0.02 以上用 RAW 9,中间用平滑蒙版过渡。斑块消失了。但 RAW 9 能让一面近黑的墙落成干净、深邃的黑色,而每次混合都会把它重新填满彩色斑点。混合还需要第二次显影,所以最终保留了纯 RAW 9。

按 ISO 分界也没有帮助。ISO 400 以下用 RAW 8 每张照片省约 0.4 秒,但在 ISO 125 下,RAW 9 已经干净 32%。

每次混合都会把 RAW 8 的彩色斑点带回阴影里。 260px 裁切,已放大。混合分界为 0.004–0.02、0.01–0.04 和 0.02–0.08 线性。

(原文较长,此处译出前 6000 字,完整内容请点「打开原文」。)

正文由 探How 从来源站点 RSS 同步,内容未经改写;遇到排版缺失或需要图片、视频时请以原文为准。

打开原文
去社区讨论 →