FFplay源码分析-read_thread

2024-06-24 01:58
文章标签 源码 ffplay read thread 分析

本文主要是介绍FFplay源码分析-read_thread,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

《FFmpeg原理》的社群来了,想加入社群的朋友请购买 VIP 版,VIP 版有更高级的内容与答疑服务。


本系列 以 ffmpeg4.2 源码为准,下载地址:链接:百度网盘 提取码:g3k8

FFplay 源码分析系列以一条简单的命令开始,ffplay -i a.mp4。a.mp4下载链接:百度网盘,提取码:nl0s 。


如下图所示,本文主要讲解 read_thread() 函数的内部逻辑。这个流程图是根据上面的命令ffplay -i a.mp4 画的,有些流程我省略了,因为不会执行某些代码,所以有些if判断我没画出来,为了简洁。

在这里插入图片描述

从上面的流程图可以看出, read_thread() 做了一些初始化赋值工作之后,打开视频文件。就会调 stream_component_open() 开启解码线程,这个函数特别重要,下面会仔细讲解。然后就会进去一个 for() 死循环,不断从文件读取 AVPacket,然调用 packet_queue_put() 把 AVPacket 插进去 PacketQueuepacket_queue_put() 也是重点函数,会仔细讲解。

read_thread 线程做的工作其实就这些,非常地简单。

重点函数:

  • stream_component_open()
  • packet_queue_put()

重要知识点:

avformat_open_input() 函数里面的 options 是一个二级指针,他会改变你传进去options,改成没用到的options。然后在后面调用 av_dict_get() 判断返回的options是不是还有值,如果有就报错给出提示。

ffmpeg 很多函数都是如此设计,例如 avcodec_open2(),也是传递一个 二级指针的 options,返回值也会改成没用到的options。

在这里插入图片描述


下面开始讲解 stream_component_open() 的内部逻辑,流程图如下:

在这里插入图片描述

从流程图可以看出, stream_component_open() 做的事情就是这样,先做一些解码器相关的参数赋值,然后调 avcodec_open2() 打开解码器。然后根据音频或者视频做不同处理。视频就直接开线程 video_thread() 进行后续处理。音频就比较复杂一些,会创建 filter_graph,虽然我们的命令参数没用到 filter,但ffplay为了通用,还是会创建一个空的filter graph,暂时不仔细讲解 configure_audio_filters() 函数的实现,后面再写一篇文章结合一条带 -af 参数的ffplay命令进行讲解。现在只需要知道 解码出来的 AVFrame 会经过 in_audio_filter ,然后从 out_audio_filter 出来就行,因为是空的 filter_graph,所以AVFrame是没变化的。audio_open() 函数用来打开音频设备,其内部实现比较复杂,下面会仔细讲解。

重点函数:

  • audio_open()

audio_open() 的代码比较少,所以不画流程图,直接贴代码讲解。

if (!wanted_channel_layout || wanted_nb_channels != av_get_channel_layout_nb_channels(wanted_channel_layout)) {wanted_channel_layout = av_get_default_channel_layout(wanted_nb_channels);wanted_channel_layout &= ~AV_CH_LAYOUT_STEREO_DOWNMIX;
}

上面这段代码特别有意思,在 ffplay.c 里面经常看到这样的判断,判断 channel_layout 跟 channels 是否匹配。应该是一些兼容处理,历史遗留问题。其实我也很疑惑,写入mp4 或 flv 文件的时候,channel_layout 跟 channels字段 难道还会写错,所以需要播放的时候需要纠正一下?我现在写项目,都是照抄这种代码。

wanted_spec.format = AUDIO_S16SYS;

ffplay 只支持 AUDIO_S16SYS 播放格式,原文件如果不是这种格式,后面都会用重采样进行转换格式。

wanted_spec.samples = FFMAX(SDL_AUDIO_MIN_BUFFER_SIZE, 2 << av_log2(wanted_spec.freq / SDL_AUDIO_MAX_CALLBACKS_PER_SEC));

上面的 wanted_spec.samples 是设置 SDL 音频 call_back函数每次回调需要传递多少个 samples 给SDL。这个计算方式比较难懂,我仔细讲一下。wanted_spec.freq 是采用率,如果 freq 等于48000,就是说SDL 每秒播放 48000个sample。SDL_AUDIO_MAX_CALLBACKS_PER_SEC 代表SDL每秒回调多少callback,SDL_AUDIO_MAX_CALLBACKS_PER_SEC 在代码里设置为 30,每秒回调30次。那 (wanted_spec.freq / SDL_AUDIO_MAX_CALLBACKS_PER_SEC) 自然就等于每次回调需要传递的sample数量。那为什么还要用 av_log2() 取指数,然后又用 << 左位移取幂呢?是因为这样做可以把 samples 转换成 2的倍数。例如 48000 / 30 = 1600,1600 并不是 2的倍数,av_log2(1600) 等于 10,然后 2 << 10 等于 2048,最后 wanted_spec.samples 等 2048 ,是2的倍数。为什么要设置成 2的倍数,估计是为了对齐内存,请看SDL 的文档 https://wiki.libsdl.org/SDL_OpenAudioDevice,文档建议设置成2的倍数。

接下来是 audio_open() 里面最难懂的逻辑,请看代码。

static const int next_nb_channels[] = {0, 0, 1, 6, 2, 6, 4, 6};
static const int next_sample_rates[] = {0, 44100, 48000, 96000, 192000};
.....省略代码..
while (!(audio_dev = SDL_OpenAudioDevice(NULL, 0, &wanted_spec, &spec, SDL_AUDIO_ALLOW_FREQUENCY_CHANGE | SDL_AUDIO_ALLOW_CHANNELS_CHANGE))) {av_log(NULL, AV_LOG_WARNING, "SDL_OpenAudio (%d channels, %d Hz): %s\n",wanted_spec.channels, wanted_spec.freq, SDL_GetError());wanted_spec.channels = next_nb_channels[FFMIN(7, wanted_spec.channels)];if (!wanted_spec.channels) {//注意这句代码。wanted_spec.freq = next_sample_rates[next_sample_rate_idx--]; //注意这句代码。wanted_spec.channels = wanted_nb_channels;if (!wanted_spec.freq) {av_log(NULL, AV_LOG_ERROR,"No more combinations to try, audio open failed\n");return -1;}}wanted_channel_layout = av_get_default_channel_layout(wanted_spec.channels);
}

audio_open() 在入口就定义了这么一个数组 next_nb_channels[],0,0,1,6,2,6,4,6。咋一看,不太容易看出来是干啥的。其实就像他那句报错提示说的。

“No more combinations to try, audio open failed”

next_nb_channelsnext_sample_rates 是一个 combination,组合尝试。不断用 不同的采样率,不同的声道来打开音频设备。为什么这样做?

因为有些设备,不支持播放双声道,只支持单声道。但是原文件的音频是双声道的。这种情况下 audio_open() 是如何处理的呢?这时候,next_nb_channelsnext_sample_rates 就排上用场了。

在 audio_open() 的逻辑里,会先尝试用双声道打开音频设备,但是音频设备不支持双声道,while 那里就会失败。然后请注意这句代码。

wanted_spec.channels = next_nb_channels[FFMIN(7, wanted_spec.channels)];

因为 wanted_spec.channels 等于2,所以 next_nb_channels[FFMIN(7, wanted_spec.channels)] 计算出来的结果是 1,所以从逻辑上,就会从双声道变成单声道,重新调 SDL_OpenAudioDevice() 函数尝试打开音频设备。

解析到这里,应该比较清楚 next_nb_channels[] 这个数组那堆0,0,1,6,2,6,4,6 是干什么了,没错,next_nb_channels 其实是一个map表,声道切换映射表。

  • next_nb_channels[7] = 6,从7声道切换到6声道打开音频设备
  • next_nb_channels[6] = 4,从6声道切换到4声道打开音频设备
  • next_nb_channels[5] = 6,从5声道切换到6声道打开音频设备
  • next_nb_channels[4] = 2,从4声道切换到2声道打开音频设备
  • next_nb_channels[3] = 6,从3声道切换到6声道打开音频设备
  • next_nb_channels[2] = 1,从双声道切换到单声道打开音频设备
  • next_nb_channels[1] = 0,单声道都打不开音频设备,无法再切换,需要降低采样率播放。
  • next_nb_channels[0] = 0,0声道都打不开音频设备,无法再切换,需要降低采样率播放。

为什么后面两个 是 0,是因为切换到后面的时候,已经没法再切换了,就会尝试降低采样率。请看代码

 if (!wanted_spec.channels) {//注意这句代码。wanted_spec.freq = next_sample_rates[next_sample_rate_idx--]; //注意这句代码。wanted_spec.channels = wanted_nb_channels;if (!wanted_spec.freq) {av_log(NULL, AV_LOG_ERROR,"No more combinations to try, audio open failed\n");return -1;}
}

next_sample_rate_idx 在开头就赋值为 比 want 采样率小的 index。然后声道都尝试完了,还打不开音频设备,就会尝试更小的采样率,再用新的采样率结合之前的声道都尝试一下打开音频设备。

所以说 next_nb_channelsnext_sample_rates 是一个 combination,组合尝试。


ffplay 源码分析,stream_component_open() 分析完毕。

由于笔者的水平有限, 加之编写的同时还要参与开发工作,文中难免会出现一些错误或者不准确的地方,恳请读者批评指正。

这篇关于FFplay源码分析-read_thread的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1088870

相关文章

[职场] 公务员的利弊分析 #知识分享#经验分享#其他

公务员的利弊分析     公务员作为一种稳定的职业选择,一直备受人们的关注。然而,就像任何其他职业一样,公务员职位也有其利与弊。本文将对公务员的利弊进行分析,帮助读者更好地了解这一职业的特点。 利: 1. 稳定的职业:公务员职位通常具有较高的稳定性,一旦进入公务员队伍,往往可以享受到稳定的工作环境和薪资待遇。这对于那些追求稳定的人来说,是一个很大的优势。 2. 薪资福利优厚:公务员的薪资和

springboot家政服务管理平台 LW +PPT+源码+讲解

3系统的可行性研究及需求分析 3.1可行性研究 3.1.1技术可行性分析 经过大学四年的学习,已经掌握了JAVA、Mysql数据库等方面的编程技巧和方法,对于这些技术该有的软硬件配置也是齐全的,能够满足开发的需要。 本家政服务管理平台采用的是Mysql作为数据库,可以绝对地保证用户数据的安全;可以与Mysql数据库进行无缝连接。 所以,家政服务管理平台在技术上是可以实施的。 3.1

高仿精仿愤怒的小鸟android版游戏源码

这是一款很完美的高仿精仿愤怒的小鸟android版游戏源码,大家可以研究一下吧、 为了报复偷走鸟蛋的肥猪们,鸟儿以自己的身体为武器,仿佛炮弹一样去攻击肥猪们的堡垒。游戏是十分卡通的2D画面,看着愤怒的红色小鸟,奋不顾身的往绿色的肥猪的堡垒砸去,那种奇妙的感觉还真是令人感到很欢乐。而游戏的配乐同样充满了欢乐的感觉,轻松的节奏,欢快的风格。 源码下载

高度内卷下,企业如何通过VOC(客户之声)做好竞争分析?

VOC,即客户之声,是一种通过收集和分析客户反馈、需求和期望,来洞察市场趋势和竞争对手动态的方法。在高度内卷的市场环境下,VOC不仅能够帮助企业了解客户的真实需求,还能为企业提供宝贵的竞争情报,助力企业在竞争中占据有利地位。 那么,企业该如何通过VOC(客户之声)做好竞争分析呢?深圳天行健企业管理咨询公司解析如下: 首先,要建立完善的VOC收集机制。这包括通过线上渠道(如社交媒体、官网留言

基于Java医院药品交易系统详细设计和实现(源码+LW+调试文档+讲解等)

💗博主介绍:✌全网粉丝10W+,CSDN作者、博客专家、全栈领域优质创作者,博客之星、平台优质作者、专注于Java、小程序技术领域和毕业项目实战✌💗 🌟文末获取源码+数据库🌟 感兴趣的可以先收藏起来,还有大家在毕设选题,项目以及论文编写等相关问题都可以给我留言咨询,希望帮助更多的人  Java精品实战案例《600套》 2023-2025年最值得选择的Java毕业设计选题大全:1000个热

美容美发店营销版微信小程序源码

打造线上生意新篇章 一、引言:微信小程序,开启美容美发行业新纪元 在数字化时代,微信小程序以其便捷、高效的特点,成为了美容美发行业营销的新宠。本文将带您深入了解美容美发营销微信小程序,探讨其独特优势及如何助力商家实现业务增长。 二、微信小程序:美容美发行业的得力助手 拓宽客源渠道:微信小程序基于微信社交平台,轻松实现线上线下融合,帮助商家快速吸引潜在客户,拓宽客源渠道。 提升用户体验:

风水研究会官网源码系统-可展示自己的领域内容-商品售卖等

一款用于展示风水行业,周易测算行业,玄学行业的系统,并支持售卖自己的商品。 整洁大气,非常漂亮,前端内容均可通过后台修改。 大致功能: 支持前端内容通过后端自定义支持开启关闭会员功能,会员等级设置支持对接官方支付支持添加商品类支持添加虚拟下载类支持自定义其他类型字段支持生成虚拟激活卡支持采集其他站点文章支持对接收益广告支持文章评论支持积分功能支持推广功能更多功能,搭建完成自行体验吧! 原文

HTML5文旅文化旅游网站模板源码

文章目录 1.设计来源文旅宣传1.1 登录界面演示1.2 注册界面演示1.3 首页界面演示1.4 文旅之行界面演示1.5 文旅之行文章内容界面演示1.6 关于我们界面演示1.7 文旅博客界面演示1.8 文旅博客文章内容界面演示1.9 联系我们界面演示 2.效果和源码2.1 动态效果2.2 源代码2.3 源码目录 源码下载万套模板,程序开发,在线开发,在线沟通 作者:xcLeigh

打包体积分析和优化

webpack分析工具:webpack-bundle-analyzer 1. 通过<script src="./vue.js"></script>方式引入vue、vuex、vue-router等包(CDN) // webpack.config.jsif(process.env.NODE_ENV==='production') {module.exports = {devtool: 'none

Java中的大数据处理与分析架构

Java中的大数据处理与分析架构 大家好,我是免费搭建查券返利机器人省钱赚佣金就用微赚淘客系统3.0的小编,也是冬天不穿秋裤,天冷也要风度的程序猿!今天我们来讨论Java中的大数据处理与分析架构。随着大数据时代的到来,海量数据的存储、处理和分析变得至关重要。Java作为一门广泛使用的编程语言,在大数据领域有着广泛的应用。本文将介绍Java在大数据处理和分析中的关键技术和架构设计。 大数据处理与