qt+ffmpeg视频播放器实现音视频倍速功能

2023-10-31 09:20

本文主要是介绍qt+ffmpeg视频播放器实现音视频倍速功能,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

目录

一、前言

二、开发环境参考源码

开发环境:

参考源码:

三、添加倍速控件

四、倍速调节代码

五、视频倍速调节

六、音频倍速方案一

七、音频倍速方案二

八、最终效果

九、参考文献

十、结语


一、前言

        参考了云天之巅的FFMPEG Qt视频播放器源码,大佬的文章很久没更新了,该代码实现了ffmpeg qt音视频播放器功能,视频音频的播放、暂停、进度调节功能都齐全,非常值得参考。

        该播放器没有音视频倍速功能,我在网上找了很多ffmpeg音视频倍速功能资料,视频倍速还比较容易实现,但是音频倍速的资料太少了,费了一番功夫基本实现了ffmpeg的音频倍速功能,不是很完善,有ffmpeg方面的大佬欢迎留言,相互提升。

二、开发环境参考源码

开发环境:

        Qt5.12.10(vs2017/mingw) + ffmpeg4.1 + SDL2

参考源码:

        https://github.com/yundiantech/VideoPlayer

        大佬的源码中包含了ffmpeg和sdl2的库,不需要自己配置ffmpeg环境,直接用qt编译即可。

三、添加倍速控件

        在原有的MainWindow.ui界面中添加一个QComboBox控件,添加1、1.25、1.5、2.0、2.5倍速调节,并直接简单设置了样式,用于界面调节倍速。

        QComboBox样式表:

QComboBox{
color: rgb(255, 255, 255);
border:0px;
padding-left:20px; 
background-color:rgba(0, 0, 0, 0);
}QComboBox QAbstractItemView::item { 
font-size:13pt;
border-radius:0px; 
color: rgb(255,255,255);
background-color:rgb(20, 20, 20);
height:25px;
padding-left:15px;
}
QComboBox QAbstractItemView::item:selected { 
color: rgb(242, 211, 34);
}
QComboBox QAbstractItemView {outline: 0px;border: 0px;
}QComboBox::drop-down {
border:0px;
}

        界面截图: 

四、倍速调节代码

        在VideoPlayer.h添加一个私有变量mSpeed用于倍速控制,初始值为1.0:

private:float mSpeed = 1.0;

        在MainWindow.cpp构造函数中添加diamond,连接combobox信号槽,初始combobox选项:

    ui->comboBox_speed->setView(new QListView());//用于样式表设置ui->comboBox_speed->setCurrentIndex(4);connect(ui->comboBox_speed,&QComboBox::currentTextChanged,this,&MainWindow::slotComboboxSetSpeed);

        添加槽函数代码,更新倍速值:

void MainWindow::slotComboboxSetSpeed(QString arg)
{float speed = arg.remove("x").toFloat();mPlayer->setSpeed(speed);
}

        在VideoPlayer.h添加公共成员函数setSpeed(float speed)更新mSpeed倍速值:

void VideoPlayer::setSpeed(float speed)
{mSpeed = speed;
}

五、视频倍速调节

        通过修改视频流中的时间基准,可以简单轻松实现视频倍速控制:

void VideoPlayer::setSpeed(float speed)
{mSpeed = speed;AVRational time_base = { 1, int(100000 * mSpeed)};mVideoStream->time_base = time_base;
}

        通过上述代码即可实现视频倍速控制,但仅仅是视频倍速,音频并没有倍速,如果你播放的是无声视频,那么已经很完美了。

        在源码中有音视频同步代码:        

///音视频同步,实现的原理就是,判断是否到显示此帧图像的时间了,没到则休眠5ms,然后继续判断
while(1)
{if (mIsQuit){break;}if (mAudioStream != NULL && !mIsAudioThreadFinished){if (mIsReadFinished && mAudioPacktList.size() <= 0){//读取完了 且音频数据也播放完了 就剩下视频数据了  直接显示出来了 不用同步了break;}///有音频的情况下,将视频同步到音频///跟音频的pts做对比,比视频快则做延时audio_pts = audio_clock;}else{///没有音频的情况下,直接同步到外部时钟audio_pts = (av_gettime() - mVideoStartTime) / 1000000.0;audio_clock = audio_pts;    }//OUTPUT("%s %f %f \n", __FUNCTION__, video_pts, audio_pts);//主要是 跳转的时候 我们把video_clock设置成0了//因此这里需要更新video_pts//否则当从后面跳转到前面的时候 会卡在这里video_pts = video_clock;if (video_pts <= audio_pts) break;int delayTime = (video_pts - audio_pts) * 1000;delayTime = delayTime > 5 ? 5:delayTime;if (!mIsNeedPause){mSleep(delayTime);}
}

        因此有了音视频同步,我们只要能够控制声音倍速久好了,视频会与声音自动同步,所以视频倍速的代码意义不大了,关键是如何控制音频倍速。

六、音频倍速方案一

        在VideoPlayer_AudioThread.cpp的音频线程中,int VideoPlayer::decodeAudioFrame(bool isBlock)解码音频函数中可以通过倍速调整重采样后的音频数据大小值来达到音频倍速的目的:

// 根据倍速调整重采样后的音频数据大小
int resampled_data_size_speed_up = static_cast<int>(resampled_data_size * mSpeed); // 通过乘以倍速计算新的音频数据大小
audioBufferSize = resampled_data_size_speed_up;

        上述代码的改动很小,只添加了 * mSpeed,运行之后我们发现通过调节combbox选项能够调节音视频倍速了,音视频是同步的,但是会发现有一个bug,调节倍速时会听见声音有点卡顿,有时声音有点刺耳和杂音,并不完美。

七、音频倍速方案二

        在VideoPlayer.cpp的int VideoPlayer::openSDL()函数中,通过调节采样率的值达到调节倍速的目的:

int VideoPlayer::openSDL()
{///打开SDL,并设置播放的格式为:AUDIO_S16LSB 双声道,44100hz///后期使用ffmpeg解码完音频后,需要重采样成和这个一样的格式,否则播放会有杂音int wanted_nb_channels = 2;//    int samplerate = 44100;int samplerate = out_sample_rate * mSpeed;SDL_AudioSpec wanted_spec, spec;wanted_spec.channels = wanted_nb_channels;wanted_spec.samples = FFMAX(512, 2 << av_log2(wanted_spec.freq / 30));wanted_spec.freq = samplerate;wanted_spec.format = AUDIO_S16SYS; // 具体含义请查看“SDL宏定义”部分wanted_spec.silence = 0;            // 0指示静音//    wanted_spec.samples = SDL_AUDIO_BUFFER_SIZE;  // 自定义SDL缓冲区大小wanted_spec.callback = sdlAudioCallBackFunc;  // 回调函数wanted_spec.userdata = this;                  // 传给上面回调函数的外带数据int num = SDL_GetNumAudioDevices(0);for (int i=0;i<num;i++){mAudioID = SDL_OpenAudioDevice(SDL_GetAudioDeviceName(i,0), false, &wanted_spec, &spec,0);if (mAudioID > 0){break;}}/* 检查实际使用的配置(保存在spec,由SDL_OpenAudio()填充) *///    if (spec.format != AUDIO_S16SYS)if (mAudioID <= 0){mIsAudioThreadFinished = true;return -1;}fprintf(stderr, "mAudioID=%d\n\n\n\n\n\n", mAudioID);return 0;
}

        上述代码在源码基础上的改动只有int samplerate = out_sample_rate * mSpeed;这一行,添加了* mSpeed。

        由于openSDL()操作是在打开文件时执行的,所以只有在打开文件前先修改倍速,为了在播放过程中调节倍速,也可以在combobox选项改变的槽函数中停止播放,再修改mSpeed值后重新播放视频,并偏移到之前播放的位置。        

void MainWindow::slotComboboxSetSpeed(QString arg)
{mSpeed = arg.remove("x").toFloat();mPlayer->setSpeed(mSpeed);if(!isOpened){isSetSpeed = true;int value = ui->horizontalSlider->value() + 1;mPlayer->stop(true);mPlayer->replay();mPlayer->seek((qint64)value * 1000000);}
}

        上述代码中还添加了一个变量isSetSpeed ,此时停止播放和正常停止播放进行区分,不做停止播放时控件改变重置操作:

///播放器状态改变的时候回调此函数
void MainWindow::onPlayerStateChanged(const VideoPlayerState &state, const bool &hasVideo, const bool &hasAudio)
{FunctionTransfer::runInMainThread([=](){qDebug()<<__FUNCTION__<<state<<mIsNeedPlayNext;qDebug() << "--------" << state;if (state == VideoPlayer_Stop){if(isSetSpeed){isSetSpeed = false;}else{ui->stackedWidget->setCurrentWidget(ui->page_open);ui->pushButton_pause->hide();ui->widget_videoPlayer->clear();ui->horizontalSlider->setValue(0);ui->label_currenttime->setText("00:00");ui->label_totaltime->setText("00:00");}/*其他代码.............*/}/*其他代码.............*/
}

        该方案完成后视频音频倍速控制正常,但是还要一个bug,就是倍速播放后,倍速大于1.5后感觉声音音色是电音,不是原来的音色了。。。

八、最终效果

qt+ffmpeg播放器倍速

九、参考文献

        参考大佬主页:http://blog.yundiantech.com/?log=index

        参考大佬源码:https://github.com/yundiantech/VideoPlayer

十、结语

         通过一番折腾基本目标已经实现了,但是还是有bug,并不完善,我对ffmpeg了解的还是不多,若大家有好的想法,欢迎大家留言交流,希望共同进步。

这篇关于qt+ffmpeg视频播放器实现音视频倍速功能的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/314332

相关文章

流媒体平台/视频监控/安防视频汇聚EasyCVR播放暂停后视频画面黑屏是什么原因?

视频智能分析/视频监控/安防监控综合管理系统EasyCVR视频汇聚融合平台,是TSINGSEE青犀视频垂直深耕音视频流媒体技术、AI智能技术领域的杰出成果。该平台以其强大的视频处理、汇聚与融合能力,在构建全栈视频监控系统中展现出了独特的优势。视频监控管理系统EasyCVR平台内置了强大的视频解码、转码、压缩等技术,能够处理多种视频流格式,并以多种格式(RTMP、RTSP、HTTP-FLV、WebS

hdu1043(八数码问题,广搜 + hash(实现状态压缩) )

利用康拓展开将一个排列映射成一个自然数,然后就变成了普通的广搜题。 #include<iostream>#include<algorithm>#include<string>#include<stack>#include<queue>#include<map>#include<stdio.h>#include<stdlib.h>#include<ctype.h>#inclu

综合安防管理平台LntonAIServer视频监控汇聚抖动检测算法优势

LntonAIServer视频质量诊断功能中的抖动检测是一个专门针对视频稳定性进行分析的功能。抖动通常是指视频帧之间的不必要运动,这种运动可能是由于摄像机的移动、传输中的错误或编解码问题导致的。抖动检测对于确保视频内容的平滑性和观看体验至关重要。 优势 1. 提高图像质量 - 清晰度提升:减少抖动,提高图像的清晰度和细节表现力,使得监控画面更加真实可信。 - 细节增强:在低光条件下,抖

嵌入式QT开发:构建高效智能的嵌入式系统

摘要: 本文深入探讨了嵌入式 QT 相关的各个方面。从 QT 框架的基础架构和核心概念出发,详细阐述了其在嵌入式环境中的优势与特点。文中分析了嵌入式 QT 的开发环境搭建过程,包括交叉编译工具链的配置等关键步骤。进一步探讨了嵌入式 QT 的界面设计与开发,涵盖了从基本控件的使用到复杂界面布局的构建。同时也深入研究了信号与槽机制在嵌入式系统中的应用,以及嵌入式 QT 与硬件设备的交互,包括输入输出设

C++11第三弹:lambda表达式 | 新的类功能 | 模板的可变参数

🌈个人主页: 南桥几晴秋 🌈C++专栏: 南桥谈C++ 🌈C语言专栏: C语言学习系列 🌈Linux学习专栏: 南桥谈Linux 🌈数据结构学习专栏: 数据结构杂谈 🌈数据库学习专栏: 南桥谈MySQL 🌈Qt学习专栏: 南桥谈Qt 🌈菜鸡代码练习: 练习随想记录 🌈git学习: 南桥谈Git 🌈🌈🌈🌈🌈🌈🌈🌈🌈🌈🌈🌈🌈�

【C++】_list常用方法解析及模拟实现

相信自己的力量,只要对自己始终保持信心,尽自己最大努力去完成任何事,就算事情最终结果是失败了,努力了也不留遗憾。💓💓💓 目录   ✨说在前面 🍋知识点一:什么是list? •🌰1.list的定义 •🌰2.list的基本特性 •🌰3.常用接口介绍 🍋知识点二:list常用接口 •🌰1.默认成员函数 🔥构造函数(⭐) 🔥析构函数 •🌰2.list对象

【Prometheus】PromQL向量匹配实现不同标签的向量数据进行运算

✨✨ 欢迎大家来到景天科技苑✨✨ 🎈🎈 养成好习惯,先赞后看哦~🎈🎈 🏆 作者简介:景天科技苑 🏆《头衔》:大厂架构师,华为云开发者社区专家博主,阿里云开发者社区专家博主,CSDN全栈领域优质创作者,掘金优秀博主,51CTO博客专家等。 🏆《博客》:Python全栈,前后端开发,小程序开发,人工智能,js逆向,App逆向,网络系统安全,数据分析,Django,fastapi

让树莓派智能语音助手实现定时提醒功能

最初的时候是想直接在rasa 的chatbot上实现,因为rasa本身是带有remindschedule模块的。不过经过一番折腾后,忽然发现,chatbot上实现的定时,语音助手不一定会有响应。因为,我目前语音助手的代码设置了长时间无应答会结束对话,这样一来,chatbot定时提醒的触发就不会被语音助手获悉。那怎么让语音助手也具有定时提醒功能呢? 我最后选择的方法是用threading.Time

Android实现任意版本设置默认的锁屏壁纸和桌面壁纸(两张壁纸可不一致)

客户有些需求需要设置默认壁纸和锁屏壁纸  在默认情况下 这两个壁纸是相同的  如果需要默认的锁屏壁纸和桌面壁纸不一样 需要额外修改 Android13实现 替换默认桌面壁纸: 将图片文件替换frameworks/base/core/res/res/drawable-nodpi/default_wallpaper.*  (注意不能是bmp格式) 替换默认锁屏壁纸: 将图片资源放入vendo

C#实战|大乐透选号器[6]:实现实时显示已选择的红蓝球数量

哈喽,你好啊,我是雷工。 关于大乐透选号器在前面已经记录了5篇笔记,这是第6篇; 接下来实现实时显示当前选中红球数量,蓝球数量; 以下为练习笔记。 01 效果演示 当选择和取消选择红球或蓝球时,在对应的位置显示实时已选择的红球、蓝球的数量; 02 标签名称 分别设置Label标签名称为:lblRedCount、lblBlueCount