JPEG XS 与小波技术
在AV over IP与指挥中心建设中，如何在有限的带宽下实现4K零延迟传输并兼顾监看需求，一直是行业痛点。Recent 比特瑞旺深入解析JPEG XS小波技术，揭示其超越传统H.264/H.265的核心能力——小波可扩展性（Wavelet Scalability）。这一特性允许接收端从单路压缩码流中直接提取全分辨率主流、低分辨率代理流（PROXY）或特定裁剪画面，无需发送端重新编码，真正实现高效、灵活的视频分发。
小波技术的独特之处
传统的视频编解码器（如 H.264、H.265，甚至多数配置下的 JPEG 2000）通常通过预测帧间或块间的差异来压缩画面。因此，接收端若要解码图像的任意部分，通常需要获取该帧完整的压缩码流。
JPEG XS 是一种基于小波的编解码器。小波变换将图像分解为频率子带的层级结构——低频分量承载图像的整体结构，而逐级递增的高频分量则补充精细细节。这种层级结构被完整地保留在压缩码流之中。
关键洞见：由于码流是按频率子带构建的，接收端可以选择性地仅解码其中一部分，即可获得有效且完整的低分辨率图像。仅使用低频子带就能重建出图像的缩小版，而增加更多子带则可逐级提升分辨率。这被称为分辨率可扩展性，它是小波架构与生俱来的特性——而非附加功能。
实际应用价值
在 JPEG XS 码流中，通过小波分解，单一路压缩码流便同时包含了：
- 全分辨率图像 —— 4K、1080p 或源端的任何分辨率；
- 内嵌的半分辨率层级 —— 例如从 4K 流中提取的 HD 信号；
- 内嵌的四分之一分辨率层级 —— 依此类推，贯穿整个层级结构；
- 区域裁剪能力 —— 无需解码整帧画面，仅解码帧内的特定空间区域。
至关重要的是，这些子图像并非独立的码流，而是内嵌在同一路压缩码流之中。如果一个接收端仅需 4K 源中的 HD 信号，它可以通过部分解码现有的码流来实现 —— 发送端无需重新编码，无需单独的网络路径，也无需额外的带宽。
小波子带层级结构 - 位于单路 JPEG XS 码流内部
PROXY 代理码流 —— 一个可落地的场景
在 Recent 分布式发送/编码节点内部，FPGA 进行的 JPEG‑XS 小波编码天然保留频率层级结构，因此我们能做到：
- MAIN 流（主用）：通过单根 1 GbE 链路传输 MAIN（主）码流 —— 通常是 4K60 的 JPEG XS，码率约 500–700 Mbps。面向大屏解码墙、操作席、录像/回放等高要求通道，传 全分辨率 4K60、零延迟、视觉无损。
- PROXY 流（预览）：从同一编码过程派生出 低分辨率代理层（如 qHD 级），作为独立可寻址流输出，无需单独编码，专供：
- 网管/运维的实时预览
- 多画面轮询、电子地图点位监看
- 移动平板/轻量客户端（避免把 4K 流量灌进弱终端）
两路码流在同一条 1 GbE 链路上传输。接收端可通过 SDP 或 NMOS IS-04/IS-05 协议独立订阅任意一路码流。PTZ 控制器或多画面分割器仅订阅 PROXY 流 —— 它永远不会接收到其不需要的 4K 数据。制作切换台则订阅 MAIN 流。两者互不干扰。
带宽优势：在传统的非压缩或基于 DCT 的工作流中，要提供低分辨率监看信号，需要单独的降频器、单独的编码器、单独的带宽和单独的线缆。而利用 JPEG XS 的小波可扩展性，这只是编码过程的副产品 —— 除了 PROXY 流本身的带宽外，无需额外的硬件，也无需额外的带宽。
在 MAIN 码流内部解码 —— 4K、HD、qHD 或裁剪
PROXY 是一路独立的流，但 MAIN 码流本身也携带了内嵌的可扩展能力。解码 MAIN 流的接收端可以通过简单地处理更少的小波子带来选择降低分辨率解码：
- 全 4K —— 解码所有子带，细节完整，处理成本最高；
- 从 4K 提取 HD（或 qHD） —— 仅解码低频子带，即可获得有效的 1920×1080 图像，解码复杂度仅为四分之一，或获得 960x540 图像，复杂度仅为十六分之一。
- 空间裁剪 —— 仅解码与帧内特定感兴趣区域对应的子带，无需解码整幅图像 —— 适用于 PTZ 数字变焦、取证分析或感兴趣区域工作流。
这对于处理能力有限的接收端尤为关键 —— 如嵌入式系统、SoC，或那些需要在不承担完整 4K 解码管线成本的情况下监控 4K 信号的应用场景。
注：JPEG 2000 同样使用小波技术并支持可扩展性，但其硬件和软件的编码复杂度及延迟使其无法满足 JPEG XS 所实现的 5 毫秒以内 的端到端（glass-to-glass）目标。JPEG XS 的设计初衷便是能以极少的门数在硬件中实现 —— 这也是为何它能轻松适配 FPGA，且无需占用大量的可编程逻辑资源。
实际场景应用
