Unity在Windows平台播放HEVC/H.265格式视频的底层原理

本文主要是介绍Unity在Windows平台播放HEVC/H.265格式视频的底层原理，希望对大家解决编程问题提供一定的参考价值，需要的开发者们随着小编来一起学习吧！

了解视频文件

视频文件更准确的描述为“容器”。这是因为它们不仅可包含视频本身，还可包含其他轨道，包括音频、字幕和其他视频素材。而且，容器中每种类型的轨道也可以有多个，例如：

多个视点
立体声或 5.1 版本的混音
不同语言的字幕
不同语言的对话
为了节省带宽和存储空间，每个轨道的内容都使用“编解码器”进行编码；该编解码器可根据需要压缩和解压缩数据
所以，播放不同格式的视频就会使用到不同的“解码器”

Unity的原生视频播放器（VideoPlayer）组件是如何播放视频的

在官方文档目标平台的兼容性的“供应商针对媒体支持的建议”中可以知道：

对于在Windows中播放视频，Unity播放视频使用的是Microsoft Media Foundation提供的API能力进行解码支持。
Media Foundation支持的媒体&解码格式见支持的媒体格式

Unity如何播放HEVC/H.265格式的视频

在官方手册视频文件兼容性提及到：为了让 Unity 正确预览视频文件，这些文件必须与平台（运行 Unity 编辑器的平台）兼容。文件还必须与目标构建平台兼容。
也就是说，能否播放HEVC/H.265格式的视频与Unity自身没关，只与运行Unity的设备环境有关。
同时，官方也给出了针对Windows平台如何兼容HEVC/H.265格式视频的结论，安装HEVC的解码器扩展即可
在这里插入图片描述

如何选择HEVC/H.265扩展版本

免费版本（来自设备制造商的 HEVC 视频扩展）：适用于具有 HEVC 硬件解码能力的现代显卡 (GPU)
$1版本（HEVC 视频扩展）：适用于其他情况

安装第三方解码器工具能否对Unity播放HEVC视频起到作用？（为什么用其他视频播放器可以正常播放，而Unity不能播放且提示错误 0xc00d5212）

不能。
像K-Lite codec pack等第三方工具包均是提供一系列的DirectShow Filters（DirectShow过滤器），比较常见的就是LAV Filters通常作为默认的解码器和过滤器之一在系统中注册为DirectShow过滤器，以扩展Windows系统上的解码能力，使得基于DirectShow框架的媒体播放器能够更好地支持和播放各种音频和视频格式。
如上面所说，Unity的VideoPlayer播视频依赖的是Media Foundation，虽然Media Foundation是DirectShow的继承者，但是两者并没有直接的关系，本质上不是同一个东西。
也就是说，尽管使用K-Lite codec pack安装了对HEVC的解码器，在Unity中还是依旧不能正常解码，除非安装了微软应用商店的HEVC扩展。

为什么Windows上的WMP和Media Center不使用 LAV 过滤器和 ffdshow？

K-Lite官方给出的回答：

Windows 捆绑了多种视频格式的解码器，包括 H.264 和 Xvid。大多数 DirectShow 应用程序（包括 Windows
Media Player 和 Media Center）默认使用这些 Microsoft 解码器。如果您更喜欢使用 LAV
视频解码器、ffdshow 或其他第三方解码器，则可以使用Codec Tweak Tool调整 Windows 7/8/10
中的首选解码器设置。此工具包含在 K-Lite Codec Pack 中，也可作为独立应用程序使用。 K-Lite
编解码器包已经自动调整了最常见视频格式的首选编解码器设置。它使用特殊设置让 Windows 根据过滤器的优点选择解码器。这与旧版
Windows 的工作方式类似。但是，首选解码器设置仅在 WMP 使用 DirectShow 播放时才有效。在许多情况下，它实际上使用与
Microsoft 不同的编解码器类型，即 Media Foundation。例如，它对 AVI、MP4、M4V、MOV、M2TS 和
WMV 文件执行此操作。在 Windows 10 上也适用于 MKV 文件。有几种方法可以让 WMP 使用 DirectShow 而不是
Media Foundation：

重命名文件。为其指定一个不使用 Media Foundation 的文件扩展名。例如，使用.video而不是.mkv 或使用.mpv4而不是.mp4
使用 Codec Tweak Tool 禁用 Media Foundation。不建议这样做，因为某些应用程序和游戏需要 Media Foundation 才能播放视频。与 WMP 不同，它们无法恢复使用 DirectShow。
使用 Codec Tweak Tool 禁用 Microsoft 的解码器。同样不推荐。

能否通过修改Media Foundation首选项使用LAV过滤器从而达到Unity播放视频时使用第三方解码器呢

不行。
尽管像K-Lite提供了Codec Tweak Tool工具，在I want to make Windows Media Player use LAV codec to run WMV中也同样提及到，可以配置首选解码器（见下图）来达到WMP不使用Media Foundation而使用其他的解码器。
[图片]
但是，这些设置仅适用于使用标准DirectShow图形构建器的应用程序。也就是说，这些设置仅在播放器使用DirectShow框架进行播放时才生效。而如上文所说，Unity的VideoPlayer播放使用的是Media Foundation，并没有使用DirectShow的方式来播放，也就是说，就算设置了解码器首选项，在Unity上播放也不会生效。
[图片]

替代方案：AvPro插件+DirectShow+第三方解码器

对于不想使用Media Foundation来解码播放HEVC/H.265格式视频文件的话，可以考虑以下方法：

在机子上安装第三方的HEVC解码器（如K-Lite codec pack、LAV Filters等）
使用AvPro插件进行视频播放代替VideoPlayer
在AVPro的MediaPlayer的Windows平台设置中：
- 将Video API默认的“Media Foundation”改为“Direct Show”
完成以上设置即可