【海思SS528 | VDEC】MPP媒体处理软件V5.0 | 视频解码模块——学习笔记

本文主要是介绍【海思SS528 | VDEC】MPP媒体处理软件V5.0 | 视频解码模块——学习笔记,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

😁博客主页😁:🚀https://blog.csdn.net/wkd_007🚀
🤑博客内容🤑:🍭嵌入式开发、Linux、C语言、C++、数据结构、音视频🍭
🤣本文内容🤣:🍭介绍🍭
😎金句分享😎:🍭你不能选择最好的,但最好的会来选择你——泰戈尔🍭

目录

  • 🎄一、概述
    • ✨1.1 VDEC模块
    • ✨1.2 什么是视频解码
  • 🎄二、码流发送方式
    • ✨ 2.1 流式发送(OT_VDEC_SEND_MODE_STREAM)
    • ✨ 2.2 按帧发送(OT_VDEC_SEND_MODE_FRAME)
    • ✨ 2.3 按兼容模式发送(OT_VDEC_SEND_MODE_COMPAT)
  • 🎄三、时间戳(PTS)处理
  • 🎄四、用户图片
  • 🎄五、解码帧存分配方式
  • 🎄六、总结


在这里插入图片描述

🎄一、概述

✨1.1 VDEC模块

海思平台的视频解码是硬件解码。VDEC模块提供驱动视频解码硬件工作的MPI接口,实现视频解码功能。
硬件解码模块有VDH、JPEGD,可支持解码协议有:H.264/H.265JPEG/MJPEG
VDEC模块支持解码最大通道数为128个,支持的最大最小分辨率分别为:

  • H.264/H.265:max 8192x8192, min 96x96;
  • JPEG/MJPEG:max 16384x16384,min 8x8。

本文涉及到的SDK文档:《MPP媒体处理软件V5.0》

✨1.2 什么是视频解码

一段连续的视频是由一张张画面组成的,每一张的画面称为一帧。一秒钟的画面总数称为帧率。
由于完整地保存视频的每一帧画面会使得数据量很大,不利于传输和保存。所以人们就把视频进行压缩编码。
常见的编码有:H.264/H.265JPEG/MJPEG
将视频编码数据(H.264/H.265JPEG/MJPEG)解析成YUV格式或RGB格式的数据的整个过程就是视频解码。


在这里插入图片描述

🎄二、码流发送方式

码流发送方式决定了我们怎样将编码帧发送给VDEC模块,VDEC模块一共提供了三种方式:

✨ 2.1 流式发送(OT_VDEC_SEND_MODE_STREAM)

用户每次可发送任意长度码流到解码器,由解码器内部完成一帧码流的识别过程

  • 优点:不需自己检查帧的开始、结束;
  • 缺点:不能希望马上开始解码图像,也就是解码可能会稍微延时。

✨ 2.2 按帧发送(OT_VDEC_SEND_MODE_FRAME)

用户每次发送完整一帧码流到解码器,每调用一次发送接口,解码器就认为该帧码流已经结束,开始解码图像,因此需保证每次调用发送接口发送的码流必须为一帧,否则会出现解码错误。

  • 优点:可以达到快速解码的目的;
  • 缺点:需要自己判断是否为完整的编码帧,要等一帧完整数据才可发送。

✨ 2.3 按兼容模式发送(OT_VDEC_SEND_MODE_COMPAT)

支持一帧码流分多次发送给解码器,但是每帧码流结束时必须配置帧结束标志end_of_frame为TD_TRUE,否则认为当前帧码流还未结束。

  • 优点:不需要等到一帧数据都到了才发送。
  • 缺点:需要自己判断是否编码帧结束。

在这里插入图片描述

🎄三、时间戳(PTS)处理

在模式OT_VDEC_SEND_MODE_FRAME下发送码流时,解码输出的图像时间戳PTS为发送码流接口(ss_mpi_vdec_send_stream)中用户送入的PTS,解码器不会更改此值;

如果用户配置的PTS值为0,则表示用户不进行帧率控制,而是由视频输出模块( VO)进行帧率控制;

当VDEC为回放模式且VPSS为AUTO模式时,如果用户送入的PTS值为-1,则表示此图像不会被视频输出模块( VO)显示;

如果是其他值,则表示视频输出模块( VO)根据用户设置的PTS值进行帧率控制。

注意:不能出现PTS值为0和非0混合的情况。


在这里插入图片描述

🎄四、用户图片

如果出现没有视频流发送给解码器了,这时解码器允许用户设置一帧图像,来表示当前没有新的视频帧。

当网络异常断开,前端没有码流送来时,用户可通过设置插入用户图片显示在VO上,以提示当前网络异常或没有码流可解码。 VDEC提供两种插入用户图片方式:

  • 立刻插入用户图片: VDEC会先清空解码器内部的码流和图像,然后插入用户
    图片。
  • 延迟插入用户图片: VDEC会先把解码器内部的码流全部解完,待解码图像全
    部输出之后再插入用户图片。

在这里插入图片描述

🎄五、解码帧存分配方式

  • 解码ModuleVB池:OT_VB_SRC_MOD
    创建解码通道时不分配图像Buffer,而是由用户调用相应的MPI接口创建专属于解码模块的ModuleVB池,该VB池只允许VDEC获取VB块,其它模块只能使用不能获取。
  • 解码PrivateVB池:OT_VB_SRC_PRIVATE
    创建解码通道时由VDEC创建私有VB池作为该通道的图像Buffer,用户可以在创建通道接口ss_mpi_vdec_create_chn中设置私有VB池的个数frame_buf_cnt和VB块的大小frame_buf_size
  • 解码UserVB池:OT_VB_SRC_USER
    创建解码通道时不分配图像Buffer,而是由用户调用接口ss_mpi_vb_create_pool创建一个视频缓存VB池,再通过调用接口ss_mpi_vdec_attach_vb_pool把某个解码通道绑定到固定的视频缓存VB池中。

三种解码帧存分配方式可通过接口ss_mpi_vdec_set_mod_param的参数vb_src来设置。当解码帧存使用ModuleVB池或者UserVB池方式时,可以不用销毁解码通道直接销毁VB池,但是销毁解码VB池前用户必须保证没有任何模块正在使用这个VB池里的任何一块VB(可通过复位解码通道,以及复位解码直接绑定的后级模块实现,如VDEC绑定VPSS,则就要同时复位VDEC和VPSS;如果用户是从VDEC里获取图像上去,也必须保证全部图像释放回VDEC。),否则会出现程序异常的情况。

在这里插入图片描述

🎄六、总结

本文记录海思SS528 的 VDEC 模块的一些基础知识,用于日后复习。
在这里插入图片描述
如果文章有帮助的话,点赞👍、收藏⭐,支持一波,谢谢 😁😁😁

这篇关于【海思SS528 | VDEC】MPP媒体处理软件V5.0 | 视频解码模块——学习笔记的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/435984

相关文章

Python使用自带的base64库进行base64编码和解码

《Python使用自带的base64库进行base64编码和解码》在Python中,处理数据的编码和解码是数据传输和存储中非常普遍的需求,其中,Base64是一种常用的编码方案,本文我将详细介绍如何使... 目录引言使用python的base64库进行编码和解码编码函数解码函数Base64编码的应用场景注意

用js控制视频播放进度基本示例代码

《用js控制视频播放进度基本示例代码》写前端的时候,很多的时候是需要支持要网页视频播放的功能,下面这篇文章主要给大家介绍了关于用js控制视频播放进度的相关资料,文中通过代码介绍的非常详细,需要的朋友可... 目录前言html部分:JavaScript部分:注意:总结前言在javascript中控制视频播放

Python基于wxPython和FFmpeg开发一个视频标签工具

《Python基于wxPython和FFmpeg开发一个视频标签工具》在当今数字媒体时代,视频内容的管理和标记变得越来越重要,无论是研究人员需要对实验视频进行时间点标记,还是个人用户希望对家庭视频进行... 目录引言1. 应用概述2. 技术栈分析2.1 核心库和模块2.2 wxpython作为GUI选择的优

Python使用date模块进行日期处理的终极指南

《Python使用date模块进行日期处理的终极指南》在处理与时间相关的数据时,Python的date模块是开发者最趁手的工具之一,本文将用通俗的语言,结合真实案例,带您掌握date模块的六大核心功能... 目录引言一、date模块的核心功能1.1 日期表示1.2 日期计算1.3 日期比较二、六大常用方法详

python中time模块的常用方法及应用详解

《python中time模块的常用方法及应用详解》在Python开发中,时间处理是绕不开的刚需场景,从性能计时到定时任务,从日志记录到数据同步,时间模块始终是开发者最得力的工具之一,本文将通过真实案例... 目录一、时间基石:time.time()典型场景:程序性能分析进阶技巧:结合上下文管理器实现自动计时

Java进阶学习之如何开启远程调式

《Java进阶学习之如何开启远程调式》Java开发中的远程调试是一项至关重要的技能,特别是在处理生产环境的问题或者协作开发时,:本文主要介绍Java进阶学习之如何开启远程调式的相关资料,需要的朋友... 目录概述Java远程调试的开启与底层原理开启Java远程调试底层原理JVM参数总结&nbsMbKKXJx

Node.js net模块的使用示例

《Node.jsnet模块的使用示例》本文主要介绍了Node.jsnet模块的使用示例,net模块支持TCP通信,处理TCP连接和数据传输,具有一定的参考价值,感兴趣的可以了解一下... 目录简介引入 net 模块核心概念TCP (传输控制协议)Socket服务器TCP 服务器创建基本服务器服务器配置选项服

Java深度学习库DJL实现Python的NumPy方式

《Java深度学习库DJL实现Python的NumPy方式》本文介绍了DJL库的背景和基本功能,包括NDArray的创建、数学运算、数据获取和设置等,同时,还展示了如何使用NDArray进行数据预处理... 目录1 NDArray 的背景介绍1.1 架构2 JavaDJL使用2.1 安装DJL2.2 基本操

Java如何获取视频文件的视频时长

《Java如何获取视频文件的视频时长》文章介绍了如何使用Java获取视频文件的视频时长,包括导入maven依赖和代码案例,同时,也讨论了在运行过程中遇到的SLF4J加载问题,并给出了解决方案... 目录Java获取视频文件的视频时长1、导入maven依赖2、代码案例3、SLF4J: Failed to lo

Python实现多路视频多窗口播放功能

《Python实现多路视频多窗口播放功能》这篇文章主要为大家详细介绍了Python实现多路视频多窗口播放功能的相关知识,文中的示例代码讲解详细,有需要的小伙伴可以跟随小编一起学习一下... 目录一、python实现多路视频播放功能二、代码实现三、打包代码实现总结一、python实现多路视频播放功能服务端开