openh264 Pskip 模式决策过程源码分析

2024-06-19 17:04

本文主要是介绍openh264 Pskip 模式决策过程源码分析,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

skip模式

视频编码中的 “skip” 模式是一种优化技术,用于提高编码效率,减少不必要的编码工作。当编码器确定某个宏块(Macroblock,
MB)在当前帧和参考帧之间没有显著的运动或变化时,可以采用skip模式。以下是skip模式的一些关键点:

  1. 宏块未变化:在视频序列中,许多宏块在连续的帧之间可能看起来相同或非常相似。如果编码器检测到这种情况,它可以决定不对这些宏块进行编码。

  2. 运动向量(Motion Vector, MV):编码器会计算当前宏块和参考帧中相应宏块之间的运动向量。如果运动向量为零或非常小,表明宏块没有显著运动,可以考虑使用skip模式。

  3. 编码效率:使用skip模式可以减少编码器需要处理的数据量,从而提高编码效率。由于不需要对这些宏块进行变换、量化和编码,编码器可以将资源集中在那些确实发生变化的宏块上。

  4. P-skip和B-skip

    • P-skip:在P帧(预测帧)中,如果宏块与前一帧中的对应宏块相同或非常相似,可以使用P-skip模式。
    • B-skip:在B帧(双向预测帧)中,如果宏块与前后两个参考帧中的对应宏块相同或非常相似,可以使用B-skip模式。
  5. 条件判断:编码器通常会根据一些条件来判断是否使用skip模式,例如宏块的运动向量、编码成本、宏块类型等。

  6. 预测和更新:在决定使用skip模式之前,编码器可能需要进行一些预测和成本计算。如果预测的成本低于实际编码的成本,编码器可能会选择skip模式。此外,编码器还需要更新相关的状态和缓存信息,以确保解码器能够正确地重建视频帧。

  7. 编码器复杂性:虽然skip模式可以提高编码效率,但它也可能增加编码器的复杂性,因为编码器需要准确地判断何时使用skip模式。

  8. 编码标准:不同的视频编码标准(如H.264/AVC, H.265/HEVC, VP9等)可能有不同的skip模式实现和优化策略。

总的来说,skip模式是一种有效的视频编码技术,可以在保持视频质量的同时减少编码工作量和提高编码速度。

openh264 中 Pskip 决策过程分析

Pskip 判断逻辑的函数关系图

在这里插入图片描述

  • 说明:可以看到Pskip 决策的核心函数是WelsMdInterJudgePskipWelsMdInterDecidedPskip两个函数。

Pskip 判断的逻辑原理

在这里插入图片描述

skip 类型判断的核心函数

  1. WelsMdInterJudgePskip函数
  • 功能:判断当前宏块是否应该尝试使用P-skip模式进行编码。
  • 原理
    • 函数的返回值bRet初始化为true;
    • 如果参考帧是P-slice类型,并且宏块缓存中的参考宏块类型是P-skip或背景类型,或者bTrySkip为true,则进入判断逻辑;
      • 调用PredictSadSkip函数来预测P-skip宏块的SAD成本;
      • 调用WelsMdPSkipEnc函数尝试P-skip编码。如果成功,则bRet保持true;如果失败,则设置为false;
      • return 返回值 bRet;
    • return 返回 false;
  • 源码
//
//  try the ordinary Pskip
//
bool WelsMdInterJudgePskip (sWelsEncCtx* pEncCtx, SWelsMD* pWelsMd, SSlice* pSlice, SMB* pCurMb, SMbCache* pMbCache,bool bTrySkip) {bool bRet = true;if (((pEncCtx->pRefPic->iPictureType == P_SLICE) && (pMbCache->uiRefMbType == MB_TYPE_SKIP|| pMbCache->uiRefMbType == MB_TYPE_BACKGROUND)) ||bTrySkip) {PredictSadSkip (pMbCache->sMvComponents.iRefIndexCache, pMbCache->bMbTypeSkip, pMbCache->iSadCostSkip, 0,& (pWelsMd->iSadPredSkip));bRet = WelsMdPSkipEnc (pEncCtx, pWelsMd, pCurMb, pMbCache) ? true : false;return bRet;}return false;
}
  1. WelsMdInterDecidedPskip函数
  • 功能:将一个宏块标记为P-skip,并执行与此相关的编码操作。
  • 原理
    • 从编码上下文中获取当前解码层(Decoding Queue Layer)的指针;
    • 将当前宏块的类型设置为 MB_TYPE_SKIP,表明这是一个P-skip宏块;
    • 调用 WelsRecPskip 函数来记录P-skip宏块;
    • 调用 WelsMdInterUpdatePskip 函数来更新P-skip宏块的编码信息。
  • 源码
//
//  Pskip mb encode
//
void WelsMdInterDecidedPskip (sWelsEncCtx* pEncCtx, SSlice* pSlice, SMB* pCurMb, SMbCache* pMbCache) {SDqLayer* pCurDqLayer = pEncCtx->pCurDqLayer;pCurMb->uiMbType = MB_TYPE_SKIP;WelsRecPskip (pCurDqLayer, pEncCtx->pFuncList, pCurMb, pMbCache);WelsMdInterUpdatePskip (pCurDqLayer, pSlice, pCurMb, pMbCache);
}
  1. WelsMdInterDoubleCheckPskip函数
  • 功能:在特定条件下检查并可能更新宏块的类型为P-skip。
  • 原理
    • 检查当前宏块的类型是否为16x16模式,并且宏块的CBP(Coded Block Pattern)是否为0。如果都满足,表示宏块没有被编码,可能是由于没有显著变化;
      • 检查当前宏块的参考帧索引是否为0,这可能表示宏块使用的是帧内预测;
        • 初始化一个运动向量结构体sMvp;
        • 调用PredSkipMv函数预测跳过的宏块的运动向量,并将结果存储在sMvp中;
        • 比较预测的运动向量和当前宏块的运动向量是否相同;
          • 如果运动向量相同,将宏块类型设置为P-skip;
      • 根据当前宏块的运动向量是否为0,设置一个标志bCollocatedPredFlag,表示是否使用了同位置的预测。
  • 源码
//
//  doublecheck if current MBTYPE is Pskip
//
void WelsMdInterDoubleCheckPskip (SMB* pCurMb, SMbCache* pMbCache) {if (MB_TYPE_16x16 == pCurMb->uiMbType && 0 == pCurMb->uiCbp) {if (0 == pCurMb->pRefIndex[0]) {SMVUnitXY sMvp = { 0 };PredSkipMv (pMbCache, &sMvp);if (LD32 (&sMvp) == LD32 (&pCurMb->sMv[0])) {pCurMb->uiMbType = MB_TYPE_SKIP;}}pMbCache->bCollocatedPredFlag = (LD32 (&pCurMb->sMv[0]) == 0);}
}

这篇关于openh264 Pskip 模式决策过程源码分析的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1075617

相关文章

Spring AI集成DeepSeek三步搞定Java智能应用的详细过程

《SpringAI集成DeepSeek三步搞定Java智能应用的详细过程》本文介绍了如何使用SpringAI集成DeepSeek,一个国内顶尖的多模态大模型,SpringAI提供了一套统一的接口,简... 目录DeepSeek 介绍Spring AI 是什么?Spring AI 的主要功能包括1、环境准备2

SpringBoot集成图片验证码框架easy-captcha的详细过程

《SpringBoot集成图片验证码框架easy-captcha的详细过程》本文介绍了如何将Easy-Captcha框架集成到SpringBoot项目中,实现图片验证码功能,Easy-Captcha是... 目录SpringBoot集成图片验证码框架easy-captcha一、引言二、依赖三、代码1. Ea

Go使用pprof进行CPU,内存和阻塞情况分析

《Go使用pprof进行CPU,内存和阻塞情况分析》Go语言提供了强大的pprof工具,用于分析CPU、内存、Goroutine阻塞等性能问题,帮助开发者优化程序,提高运行效率,下面我们就来深入了解下... 目录1. pprof 介绍2. 快速上手:启用 pprof3. CPU Profiling:分析 C

MySQL表锁、页面锁和行锁的作用及其优缺点对比分析

《MySQL表锁、页面锁和行锁的作用及其优缺点对比分析》MySQL中的表锁、页面锁和行锁各有特点,适用于不同的场景,表锁锁定整个表,适用于批量操作和MyISAM存储引擎,页面锁锁定数据页,适用于旧版本... 目录1. 表锁(Table Lock)2. 页面锁(Page Lock)3. 行锁(Row Lock

pycharm远程连接服务器运行pytorch的过程详解

《pycharm远程连接服务器运行pytorch的过程详解》:本文主要介绍在Linux环境下使用Anaconda管理不同版本的Python环境,并通过PyCharm远程连接服务器来运行PyTorc... 目录linux部署pytorch背景介绍Anaconda安装Linux安装pytorch虚拟环境安装cu

SpringBoot项目注入 traceId 追踪整个请求的日志链路(过程详解)

《SpringBoot项目注入traceId追踪整个请求的日志链路(过程详解)》本文介绍了如何在单体SpringBoot项目中通过手动实现过滤器或拦截器来注入traceId,以追踪整个请求的日志链... SpringBoot项目注入 traceId 来追踪整个请求的日志链路,有了 traceId, 我们在排

Spring Boot 3 整合 Spring Cloud Gateway实践过程

《SpringBoot3整合SpringCloudGateway实践过程》本文介绍了如何使用SpringCloudAlibaba2023.0.0.0版本构建一个微服务网关,包括统一路由、限... 目录引子为什么需要微服务网关实践1.统一路由2.限流防刷3.登录鉴权小结引子当前微服务架构已成为中大型系统的标

Java中对象的创建和销毁过程详析

《Java中对象的创建和销毁过程详析》:本文主要介绍Java中对象的创建和销毁过程,对象的创建过程包括类加载检查、内存分配、初始化零值内存、设置对象头和执行init方法,对象的销毁过程由垃圾回收机... 目录前言对象的创建过程1. 类加载检查2China编程. 分配内存3. 初始化零值4. 设置对象头5. 执行

SpringBoot整合easy-es的详细过程

《SpringBoot整合easy-es的详细过程》本文介绍了EasyES,一个基于Elasticsearch的ORM框架,旨在简化开发流程并提高效率,EasyES支持SpringBoot框架,并提供... 目录一、easy-es简介二、实现基于Spring Boot框架的应用程序代码1.添加相关依赖2.添

SpringBoot中整合RabbitMQ(测试+部署上线最新完整)的过程

《SpringBoot中整合RabbitMQ(测试+部署上线最新完整)的过程》本文详细介绍了如何在虚拟机和宝塔面板中安装RabbitMQ,并使用Java代码实现消息的发送和接收,通过异步通讯,可以优化... 目录一、RabbitMQ安装二、启动RabbitMQ三、javascript编写Java代码1、引入