作者设计了一款名为PyroWave的超低延迟游戏流媒体视频编解码器，旨在优化网络游戏流媒体的传输效率。通过减少每一步的延迟，如控制器输入传输、GPU渲染、帧编码与解码等，PyroWave在固定比特率下实现了极速处理，目标是在约20毫秒内完成整个流程，从而提升游戏体验。

文章标题：我设计了自己的超快游戏流媒体视频编解码器——PyroWave

主要内容：

作者Maister在文章中详细介绍了自己设计的超低延迟游戏流媒体视频编解码器PyroWave。该编解码器专为本地游戏流媒体设计，旨在实现极低的延迟，确保游戏体验的流畅性。

核心内容：

1. 游戏流媒体的需求与挑战
   游戏流媒体需要在极短的时间内完成多个步骤，包括控制器输入传输、GPU渲染、帧编码、网络传输、解码和显示。每个步骤都会增加延迟，因此需要尽可能减少每个环节的时间。通常，GPU加速的视频压缩编解码器（如H.264、HEVC或AV1）被用于此场景，但这些编解码器在低延迟场景下表现不佳，因为它们依赖于缓冲区和B帧等技术，而这些技术会增加延迟。

2. PyroWave的设计思路
   为了应对这些挑战，作者决定设计一个专注于本地流媒体的编解码器，抛弃了传统的运动预测和熵编码技术。PyroWave采用了帧内编码（intra-only）的方式，虽然这种方式会导致比特率大幅增加，但它带来了以下优势：

   • 出色的错误恢复能力：即使在本地WiFi环境下，也能有效应对数据包丢失。
   • 简单性：编码和解码过程更加简单。
   • 一致的画质：在固定比特率（CBR）下，画质不会因运动估计的差异而波动。

3. 离散小波变换（DWT）的应用
   与传统的基于离散余弦变换（DCT）的编解码器不同，PyroWave采用了离散小波变换（DWT）。DWT通过将图像分解为不同频带，利用人类视觉系统的特性，对高频带进行更强的量化，从而在保持画质的同时减少数据量。

4. 快速编码与解码
   PyroWave的编码和解码速度极快，作者在AMD RX 9070 XT显卡上测试，1080p60视频的编码时间仅为0.13毫秒，解码时间不到100微秒。这种速度的提升直接降低了流媒体的延迟，使得游戏体验更加流畅。

5. 与其他编解码器的对比
   作者将PyroWave与NVENC（NVIDIA的硬件编码器）进行了对比，发现PyroWave在低延迟场景下的表现优于传统的H.264/HEVC/AV1编解码器。尤其是在高比特率（200Mbps）下，PyroWave几乎看不出压缩痕迹，画质表现非常出色。

结论：
作者对PyroWave的表现感到满意，认为它是一款专为低延迟游戏流媒体设计的优秀编解码器。虽然它的应用场景较为小众，但对于本地游戏流媒体来说，PyroWave提供了一种高效且低延迟的解决方案。

关键词： 游戏流媒体、低延迟、PyroWave、帧内编码、离散小波变换、快速编码

评论主要围绕视频编码技术的创新、应用场景及其与其他技术的比较展开。以下是主要观点总结：

1. 对新技术的高度认可

   • 评论者普遍认为该技术展示了令人印象深刻的编码速度和低延迟，特别是在游戏流媒体等场景中具有潜力。
   • 引用：
     • "The sample screenshot of Expedition 33 is really impressive quality considering it appears to be encoding at around 1 bit per pixel." (评论3)
     • "Very cool work explained well." (评论3)
     • "I love this. The widely used standards for video compression are focused on compression efficiency, but sometimes latency and low complexity is more important." (评论5)

2. 与其他技术的比较与质疑

   • 一些评论者提出疑问，认为硬件编码（如NVENC）可能仍然是更快的选择，并希望看到更多基准测试数据。
   • 引用：
     • "Isn’t the solution usually hardware encoding?" (评论6)
     • "You’re doing something wrong if nvenc is any slower, the llhp preset should be all you need." (评论12)
   • 还有人提到JPEG-XS和NDI等现有技术，认为它们可能是更成熟的选择。
   • 引用：
     • "The closest competition would be NDI from NewTek, now Vizrt." (评论8)
     • "JPEG-XS... might be a safer choice for commercial projects, given that there is a patent pool around it." (评论9)

3. 对游戏流媒体的优化建议

   • 部分评论者提出，游戏流媒体可以通过与游戏引擎深度集成来优化，例如利用运动预测缓冲区或直接传输渲染指令而非视频帧。
   • 引用：
     • "Things like motion prediction would be free since most rendering engines already have a dedicated buffer just for that." (评论4)
     • "Are there any solutions to game streaming that build an RPC on top of the DirectX/Vulkan API and data structures?" (评论10)

4. 对技术发展的期待与反思

   • 评论者表达了对视频编码技术持续发展的兴奋，同时也提到专利和创新之间的潜在冲突。
   • 引用：
     • "I’m so happy that this still has such active development and boundaries are still being pushed." (评论13)
     • "But there’s probably some nasty patent hampering innovation there, so might as well forget it!" (评论4)

5. 对网络延迟的讨论

   • 有评论者指出，网络延迟可能是影响流媒体体验的主要因素，优化编码技术的影响有限。
   • 引用：
     • "I think in practice network latency dominates so much that this kind of optimization is fairly low impact." (评论17)

总结：评论者对该技术的创新性和潜力表示认可，但也提出了与其他技术比较的质疑，并建议在游戏流媒体等场景中进一步优化。同时，专利问题和网络延迟被认为是技术发展的潜在障碍。