海康大华摄像头高起播低延时RTSP网页无插件流媒体播放器EasyPlayer-RTSP-Win录像和抓图实现线程优化方案分享

本文主要是介绍海康大华摄像头高起播低延时RTSP网页无插件流媒体播放器EasyPlayer-RTSP-Win录像和抓图实现线程优化方案分享,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

EasyPlayer-RTSP播放器是一套RTSP专用的播放器,包括有:Windows(支持IE插件,npapi插件)、Android、iOS三个平台,是由青犀TSINGSEE开放平台开发和维护的区别于市面上大部分的通用播放器,EasyPlayer-RTSP系列从2014年初发展至今得到了各行各业(尤其是安防行业)的广泛应用,其主要原因是EasyPlayer-RTSP更加精炼、更加专注,具备低延时和高RTSP协议兼容性。

EasyPlayerRTSP.png

EasyPlayer-RTSP-Win录像和抓图实现线程优化

测试发现,通过EasyPlayer-RTSP-Win拉取网络摄像机的流, 其音频可能是G711,G726等,而写MP4或者转推RTMP等都不支持这些音频格式,那么我们就需要将其音频转码成AAC,可以使用libEasyAACEncoder库进行转码,然后写MP4或者推送;

然而,在实际应用中,我们发现转码过程其实还是比较耗时的,它甚至会导致解码线程来不及从而使直播延时增大,所以,我们采用队列缓存+线程的方式来优化录像和抓图。

实现如下:

1、录像优化
1> 开启录像

if (pThread->manuRecording == 0x01 && NULL==pThread->m_pMP4Writer && frameinfo.type==EASY_SDK_VIDEO_FRAME_I)//开启录制{//EnterCriticalSection(&pThread->critRecQueue);				if (!pThread->m_pMP4Writer){pThread->m_pMP4Writer = new EasyMP4Writer();}unsigned int timestamp = (unsigned int)time(NULL);time_t tt = timestamp;struct tm *_time = localtime(&tt);char szTime[64] = {0,};strftime(szTime, 32, "%Y%m%d%H%M%S", _time);int nRecordPathLen = strlen(pThread->manuRecordingPath);if (nRecordPathLen==0 || (pThread->manuRecordingPath[nRecordPathLen-1] != '/' && pThread->manuRecordingPath[nRecordPathLen-1] != '\\') ){pThread->manuRecordingPath[nRecordPathLen] = '/';}char sFileName[512] = {0,};sprintf(sFileName, "%sch%d_%s.mp4", pThread->manuRecordingPath, pThread->channelId, szTime);if (!pThread->m_pMP4Writer->CreateMP4File(sFileName, ZOUTFILE_FLAG_FULL)){delete pThread->m_pMP4Writer;pThread->m_pMP4Writer = NULL;//return -1;}		else{}//LeaveCriticalSection(&pThread->critRecQueue);}

2> 录像数据写缓存

					if (NULL != pThread->pRecAVQueue){SSQ_AddData(pThread->pRecAVQueue, channelid, MEDIA_TYPE_VIDEO, (MEDIA_FRAME_INFO*)&frameinfo, pbuf);}

3> 录像线程处理

LPTHREAD_START_ROUTINE CChannelManager::_lpRecordThread( LPVOID _pParam )
{PLAY_THREAD_OBJ *pThread = (PLAY_THREAD_OBJ*)_pParam;if (NULL == pThread)			return 0;pThread->recordThread.flag	=	0x02;#ifdef _DEBUG_TRACE("录像线程[%d]已启动. ThreadId:%d ...\n", pThread->channelId, GetCurrentThreadId());
#endifEasyAACEncoder_Handle m_pAACEncoderHandle = NULL;int buf_size = 1024*1024;char *pbuf = new char[buf_size];if (NULL == pbuf){pThread->recordThread.flag	=	0x00;return 0;}char* m_pAACEncBufer = new char[buf_size];memset(m_pAACEncBufer, 0x00, buf_size);//#define AVCODEC_MAX_AUDIO_FRAME_SIZE	(192000)
#define AVCODEC_MAX_AUDIO_FRAME_SIZE	(64000)int audbuf_len = (AVCODEC_MAX_AUDIO_FRAME_SIZE * 3) / 2;unsigned char *audio_buf = new unsigned char[audbuf_len+1];memset(audio_buf, 0x00, audbuf_len);MEDIA_FRAME_INFO frameinfo;unsigned int channelid = 0;unsigned int mediatype = 0;while (1){if (pThread->recordThread.flag == 0x03)		break;int ret = SSQ_GetData(pThread->pRecAVQueue, &channelid, &mediatype, &frameinfo, pbuf);if (ret < 0){_VS_BEGIN_TIME_PERIOD(1);__VS_Delay(1);_VS_END_TIME_PERIOD(1);continue;}long long nTimeStamp = frameinfo.timestamp_sec*1000+frameinfo.timestamp_usec/1000;byte*pdata=NULL;int datasize=0;bool keyframe=false;try{	if (mediatype == MEDIA_TYPE_VIDEO){pdata = (byte*)pbuf;//获取到的编码数据datasize = frameinfo.length;int nVideoWidth     = frameinfo.width;int nVideoHeight    = frameinfo.height;keyframe = frameinfo.type==EASY_SDK_VIDEO_FRAME_I?true:false;if (pThread->m_pMP4Writer){pThread->m_pMP4Writer->WriteMp4File((unsigned char*)pdata, datasize, keyframe,  nTimeStamp, nVideoWidth, nVideoHeight);}}else //音频{pdata = (byte*)pbuf;//获取到的编码数据datasize = frameinfo.length;int bits_per_sample = frameinfo.bits_per_sample;int channels = frameinfo.channels;int sampleRate = frameinfo.sample_rate;if (EASY_SDK_AUDIO_CODEC_G711U == frameinfo.codec|| EASY_SDK_AUDIO_CODEC_G726 == frameinfo.codec || EASY_SDK_AUDIO_CODEC_G711A == frameinfo.codec ) {if (!m_pAACEncoderHandle){InitParam initParam;initParam.u32AudioSamplerate=frameinfo.sample_rate;initParam.ucAudioChannel=frameinfo.channels;initParam.u32PCMBitSize=frameinfo.bits_per_sample;if (frameinfo.codec == EASY_SDK_AUDIO_CODEC_G711U){initParam.ucAudioCodec = Law_ULaw;} else if (frameinfo.codec == EASY_SDK_AUDIO_CODEC_G726){initParam.ucAudioCodec = Law_G726;}else if (frameinfo.codec == EASY_SDK_AUDIO_CODEC_G711A){initParam.ucAudioCodec = Law_ALaw;}m_pAACEncoderHandle = Easy_AACEncoder_Init( initParam);}unsigned int out_len = 0;int nRet = Easy_AACEncoder_Encode(m_pAACEncoderHandle, (unsigned char*)pbuf, frameinfo.length, (unsigned char*)m_pAACEncBufer, &out_len) ;if (nRet>0&&out_len>0){pdata = (byte*)m_pAACEncBufer;datasize = out_len;frameinfo.codec = EASY_SDK_AUDIO_CODEC_AAC;} else{continue;}}if (pThread->m_pMP4Writer){if (pThread->m_pMP4Writer->CanWrite()){pThread->m_pMP4Writer->WriteAACToMp4File((unsigned char*)pdata, datasize, nTimeStamp, sampleRate, channels, bits_per_sample);}}}}catch (...){continue;}}pThread->recordThread.flag	=	0x00;#ifdef _DEBUG_TRACE("录像线程[%d]已退出 ThreadId:%d.\n", pThread->channelId, GetCurrentThreadId());
#endifreturn 0;
}

2、抓图原理同录像,唯一区别是直接数据传入线程,进行jpg编码存文件,详见EasyPlayer-RTSP的代码(这个代码大部分是开源的)。

这篇关于海康大华摄像头高起播低延时RTSP网页无插件流媒体播放器EasyPlayer-RTSP-Win录像和抓图实现线程优化方案分享的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/930874

相关文章

Springboot的ThreadPoolTaskScheduler线程池轻松搞定15分钟不操作自动取消订单

《Springboot的ThreadPoolTaskScheduler线程池轻松搞定15分钟不操作自动取消订单》:本文主要介绍Springboot的ThreadPoolTaskScheduler线... 目录ThreadPoolTaskScheduler线程池实现15分钟不操作自动取消订单概要1,创建订单后

python使用watchdog实现文件资源监控

《python使用watchdog实现文件资源监控》watchdog支持跨平台文件资源监控,可以检测指定文件夹下文件及文件夹变动,下面我们来看看Python如何使用watchdog实现文件资源监控吧... python文件监控库watchdogs简介随着Python在各种应用领域中的广泛使用,其生态环境也

el-select下拉选择缓存的实现

《el-select下拉选择缓存的实现》本文主要介绍了在使用el-select实现下拉选择缓存时遇到的问题及解决方案,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的... 目录项目场景:问题描述解决方案:项目场景:从左侧列表中选取字段填入右侧下拉多选框,用户可以对右侧

Python pyinstaller实现图形化打包工具

《Pythonpyinstaller实现图形化打包工具》:本文主要介绍一个使用PythonPYQT5制作的关于pyinstaller打包工具,代替传统的cmd黑窗口模式打包页面,实现更快捷方便的... 目录1.简介2.运行效果3.相关源码1.简介一个使用python PYQT5制作的关于pyinstall

使用Python实现大文件切片上传及断点续传的方法

《使用Python实现大文件切片上传及断点续传的方法》本文介绍了使用Python实现大文件切片上传及断点续传的方法,包括功能模块划分(获取上传文件接口状态、临时文件夹状态信息、切片上传、切片合并)、整... 目录概要整体架构流程技术细节获取上传文件状态接口获取临时文件夹状态信息接口切片上传功能文件合并功能小

Golang使用etcd构建分布式锁的示例分享

《Golang使用etcd构建分布式锁的示例分享》在本教程中,我们将学习如何使用Go和etcd构建分布式锁系统,分布式锁系统对于管理对分布式系统中共享资源的并发访问至关重要,它有助于维护一致性,防止竞... 目录引言环境准备新建Go项目实现加锁和解锁功能测试分布式锁重构实现失败重试总结引言我们将使用Go作

python实现自动登录12306自动抢票功能

《python实现自动登录12306自动抢票功能》随着互联网技术的发展,越来越多的人选择通过网络平台购票,特别是在中国,12306作为官方火车票预订平台,承担了巨大的访问量,对于热门线路或者节假日出行... 目录一、遇到的问题?二、改进三、进阶–展望总结一、遇到的问题?1.url-正确的表头:就是首先ur

C#实现文件读写到SQLite数据库

《C#实现文件读写到SQLite数据库》这篇文章主要为大家详细介绍了使用C#将文件读写到SQLite数据库的几种方法,文中的示例代码讲解详细,感兴趣的小伙伴可以参考一下... 目录1. 使用 BLOB 存储文件2. 存储文件路径3. 分块存储文件《文件读写到SQLite数据库China编程的方法》博客中,介绍了文

Redis主从复制实现原理分析

《Redis主从复制实现原理分析》Redis主从复制通过Sync和CommandPropagate阶段实现数据同步,2.8版本后引入Psync指令,根据复制偏移量进行全量或部分同步,优化了数据传输效率... 目录Redis主DodMIK从复制实现原理实现原理Psync: 2.8版本后总结Redis主从复制实

JAVA利用顺序表实现“杨辉三角”的思路及代码示例

《JAVA利用顺序表实现“杨辉三角”的思路及代码示例》杨辉三角形是中国古代数学的杰出研究成果之一,是我国北宋数学家贾宪于1050年首先发现并使用的,:本文主要介绍JAVA利用顺序表实现杨辉三角的思... 目录一:“杨辉三角”题目链接二:题解代码:三:题解思路:总结一:“杨辉三角”题目链接题目链接:点击这里