围绕Vulkan Video向 Vulkan API 添加 GPU 加速视频编码/解码的 兴趣和支持一直(遗憾地)相当缓慢。但至少 Mesa Radeon Vulkan 驱动程序“RADV”已经看到了一些围绕在 Vulkan Video 上启用 H.264 和 H.265 视频解码的新工作。
最初的 Vulkan 视频扩展于 2021 年初发布,实际上仍处于测试阶段。随着时间的推移,已经添加了一些内容,例如H.265 编码,但到目前为止,还没有任何已发布的 AV1 或 VP9 编码/解码扩展,这是一个不幸的限制。NVIDIA 为 Vulkan beta 驱动程序提供了 Vulkan Video 支持,而桌面 GPU 驱动程序中其他地方的支持至少相当有限。
回到去年年底,有一些 RADV Vulkan Video 启用工作正在进行,但不是优先事项。现在临近 2022 年底,Red Hat 的 David Airlie 已返回致力于 RADV Vulkan Video 支持,并一直与 FFmpeg 开发人员 Lynne 合作。
Khronos Group 幻灯片概述了 Vulkan 视频解码过程。
目前代码通过 Airlie 的个人 Mesa Git 分支暂存,RADV Vulkan Video 支持针对当前的 beta 扩展进行了更新,并且 H.264 和 H.265 视频解码的初始实施已经到位。此 Vulkan Video H264/H265 支持通过 RDNA2 GPU 适用于 AMD Tonga。基本视频一致性测试正在通过,但针对此 Vulkan 视频支持的更复杂测试目前未通过。
那些有兴趣结合 FFmpeg 试验 Vulkan Video 对 Mesa 的 RADV 驱动程序的支持的人可以通过Airlie 的博客找到所有构建说明。