返回资讯中心
外部精选
软件工程
#开发者实时流

技术文章:如何逐步解决低延迟 HLS 的高延迟问题

来源标题:Low Latency HLS: How to Fix High Latency Issue Step by Step

这篇技术文章介绍了如何逐步修复低延迟 HLS 的高延迟问题。文章先回顾 HLS 原理:视频被切分为通常 2 到 6 秒的媒体分片,通过 manifest 播放列表按序下载播放。文章随后给出优化延迟的具体步骤。

Hacker News 最新mondainx2026/11/9 · 8 天前19 分钟阅读

以下正文由 AI 翻译自 Hacker News 最新(原文版权归原站所有),可能存在偏差,重要内容请以原文为准。

众所周知,开发功能完善的软件可能涉及高度的复杂性。在直播领域尤其如此,这里有各种方法、协议和方案可供选择,例如低延迟 HLS。从后端架构到前端 UI 的每一个决策都可能产生深远影响。缺乏周密的规划和研究,极有可能出现意料之外的结果,对产品造成负面影响。

HLS(也称为 HTTP Streaming)是一种用于发送和接收实时视频的传输技术。它最初由 Apple 开发,用于其自家设备,后来被广泛采用,扩展到浏览器、智能电视、机顶盒和游戏主机。

为了传输视频流,它会被分割成一个个小的媒体分片。传输多个长度相同的小文件,比发送一个连续的文件要高效得多。这类分片的长度通常在 2 到 6 秒之间,其最大长度被称为 Target Duration。要观看视频流,播放器会依次下载这些 HLS 分片,并按照一个称为 manifest 文件的播放列表以正确的顺序播放它们。对于直播流,新的分片会被添加到 manifest 文件的末尾。当播放器更新 manifest 文件时(协议规定大约每隔一个 Target Duration 就应重新加载一次),它就会看到列出的新分片可供下载和播放。

虽然 HLS 提供了稳定的性能,但它付出了高延迟的代价,部分原因在于 HLS 规范要求播放器维持一个足够大的缓冲区,并从最后一个 manifest 末尾往前数第三个 Target Duration 处开始播放。设置这个缓冲区是为了在网络或服务器出现问题时仍能保持较好的性能。此外,还可以再配置一个额外的第四段分片,以便主动缓冲并避免播放卡顿。所有这些通常会导致 10 到 30 秒的延迟。访问这个演示,亲自体验一下这种延迟。从实际事件发生到观众看到画面之间,存在相当长的延迟。考虑到信息高速流动,还有那些剧透式的短信和提醒,我们需要更好的方案。

更多内容请参阅“What is HLS streaming?”这篇博客。

你可能会想,直接减小分片大小不就行了。只要相应缩短视频中关键帧之间的间隔,这种做法短期内确实有效。但遗憾的是,由于增加了更多关键帧,延迟最终还是会再次上升。每个分片都以一个 Intra 帧(IDR 帧)开头,它比预测帧(P 帧)大得多。关键帧被插入流中进行编码,最终会降低视频的压缩率。因此,关键帧的效用下降,同时带宽却增加了。到了那个地步,按顺序直接发送 jpeg 图片反而更简单,效果也差不多。

降低直播延迟往往需要在传输延迟与网络容量和码率需求之间做权衡;参见我们关于带宽与延迟的指南。

于是,HLS.js 社区与 Mux、JWPlayer、Wowza、Elemental 和 Akamai 等各方共同努力,协作探索出一种由社区驱动的方式,用 HLS 实现低延迟流媒体。其成果就是 Community Low Latency HLS(LHLS)。

第一个迭代版本由 Twitter 的 Periscope 在 2017 年中期实现,用于他们自己的平台。LHLS 的目标是在 2 到 5 秒范围内提供低延迟,同时保持可扩展性,并与标准 HLS 向后兼容,以便播放器在需要时可以回退到标准 HLS。

LHLS 通过两种方法来降低延迟:

分块传输允许在分片还在生成的过程中就进行下载。在编码器交付帧的同时就访问这些帧,避免了对多秒视频进行处理并填入缓冲区的等待。此外,如果播放器请求的分片当时不可用或不存在,该分片会在可用时立即自动发送。

这种方法与 CMAF 非常相似,主要区别在于 LHLS 使用 MPEG Transport Stream 容器。

这种方法旨在减少缓冲区偏移带来的延迟。造成这种偏移的原因之一是,播放器既需要加载 manifest,又需要加载实际分片,然后才能填满其缓冲区。因此,播放器应尽可能早地知道分片的位置。

通过预先推断分片的生成,并提前列出未来分片的位置,播放器可以预判需要加载哪些文件。当播放器以分块传输方式流式播放前一个分片时,它就知道前一个分片完全下载后,下一个分片即可使用。通过提前公布分片,不支持 LHLS 的播放器仍可像播放普通 HLS 流一样播放,同时仍能获得延迟上的改善。

这两种方法的结果简单却有效。它既消除了视频流分片带来的延迟,也消除了 manifest 带来的延迟。此外,只要标准 CDN 支持 HTTP/1.1 分块传输,这种方法就可以在标准 CDN 上扩展。

虽然 LHLS 是迈向低延迟视频流的一步,相比标准 HLS 可达到的延迟有相当大的改善,但它仍远不适合要求延迟低于 500 毫秒的实时视频体验。在当今这个即时信息和持续通信的世界里,每一秒(甚至不足一秒)都很重要。无人机监控、社交媒体聊天、在线拍卖、直播活动以及许多其他用例,都需要接近实时的延迟。

(原文较长,此处译出前 6000 字,完整内容请点「打开原文」。)

正文由 探How 从来源站点 RSS 同步,内容未经改写;遇到排版缺失或需要图片、视频时请以原文为准。

打开原文
去社区讨论 →