SILK SDK + Qt 将QQ/微信的 silk/amr 音频转为 wav 格式

2023-10-20 23:30

本文主要是介绍SILK SDK + Qt 将QQ/微信的 silk/amr 音频转为 wav 格式,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

0.前言

SILK 编码最早在 Skype 中使用,它在编码效率和质量之间取得了很好的平衡,因此被广泛应用在互联网的音频相关产品中。SILK 的最新版本是 2012 年发布的 SDK 1.0.9,即SILK V3。

腾讯系产品,包括QQ、微信、小程序,在语音相关的实现中,也大量使用到 SILK 编码,不过他在标准的 SILK 文件头加了一个字节的 0x02 ,所以在解码的时候要多判断一次。虽然腾讯的音频文件格式后缀也可能叫 AMR,不过并不是真的 AMR格式,还是 SILK 格式的。

下图是一个微信 AMR 文件的文件头,以 0x02 开头,然后是九个固定字符: #!SILK_V3,接下来就是语音数据。

还要注意的是 SILK 编码的采样频率和码率是自适应的,参见 翻译的文档。

WAV 格式就相对方便点,可以直接存放 PCM 数据,将 SLIK 解码为 PCM 后加一个 WAV 头就成了一个 wav 音频文件( WAV 头的格式参考 WAV格式分析 )。

参考示例:SILK_SDK_SRC_v1.0.9\SILK_SDK_SRC_ARM_v1.0.9\test\Decoder.c

参考博客(转载):https://blog.csdn.net/weixin_34292924/article/details/87987436

参考博客:https://www.cnblogs.com/protosec/p/11673358.html

参考博客:https://blog.csdn.net/wanggp_2007/article/details/5536818

参考博客(翻译):https://blog.csdn.net/zhaosipei/article/details/7467810

别人fork的SDK源码:https://gitee.com/alvis/SILK_SDK_SRC

别人做的decoder:https://github.com/kn007/silk-v3-decoder

1.实现

下载好 SILK SDK 后,可以直接用 VS 打开工程文件进行编译为静态库,然后将 interface 文件夹和库文件导入到我们的应用工程中。也可以自己建一个 DLL 工程把那些原文件 copy 过去,然后导出 SKP_Silk_SDK_API.h 文件中的函数接口,生成动态或者静态库。

借助 SLIK 库,解码主要有两步,初始化解码器+循环解码为 PCM 数据。

转为 WAV 也两步,生成文件头+写入 PCM 数据。

代码链接(github):https://github.com/gongjianbo/MyTestCode/tree/master/Qt/SilkToWav

工程链接(CSDN):https://download.csdn.net/download/gongjianbo1992/13206416

主要代码:

#ifndef MAINWINDOW_H
#define MAINWINDOW_H#include <QMainWindow>QT_BEGIN_NAMESPACE
namespace Ui { class MainWindow; }
QT_END_NAMESPACE/*** @brief wav文件头结构体* @author 龚建波* @date 2020-11-12* @details* wav头是不定长格式,不过这里用的比较简单的格式* (数值以小端存储,不过pc一般是小端存储,暂不特殊处理)* 参照:https://www.cnblogs.com/ranson7zop/p/7657874.html* 参照:https://www.cnblogs.com/Ph-one/p/6839892.html*/
struct EasyWavHead
{char riffFlag[4]; //文档标识,大写"RIFF"//从下一个字段首地址开始到文件末尾的总字节数。//该字段的数值加 8 为当前文件的实际长度。unsigned int riffSize; //数据长度char waveFlag[4]; //文件格式标识,大写"WAVE"char fmtFlag[4]; //格式块标识,小写"fmt "unsigned int fmtSize; //格式块长度,可以是 16、 18 、20、40 等unsigned short compressionCode; //编码格式代码,1为pcmunsigned short numChannels; //通道个数unsigned int sampleRate; //采样频率//该数值为:声道数×采样频率×每样本的数据位数/8。//播放软件利用此值可以估计缓冲区的大小。unsigned int bytesPerSecond; //码率(数据传输速率)//采样帧大小。该数值为:声道数×位数/8。//播放软件需要一次处理多个该值大小的字节数据,用该数值调整缓冲区。unsigned short blockAlign; //数据块对其单位//存储每个采样值所用的二进制数位数。常见的位数有 4、8、12、16、24、32unsigned short bitsPerSample; //采样位数(采样深度)char dataFlag[4]; //表示数据开头,小写"data"unsigned int dataSize; //数据部分的长度
};class MainWindow : public QMainWindow
{Q_OBJECTpublic:MainWindow(QWidget *parent = nullptr);~MainWindow();void paintEvent(QPaintEvent *event) override;//silk解码为pcmvoid decodeSilk(const QString &filepath);//生成wav(pcm)文件头信息//sampleRate: 采样频率//dataSize: pcm数据字节长度//return EasyWavHead: wav头static EasyWavHead createWavHead(int sampleRate,unsigned int dataSize);private:Ui::MainWindow *ui;QByteArray pcmData;
};
#endif // MAINWINDOW_H
#include "mainwindow.h"
#include "ui_mainwindow.h"#include <QFileDialog>
#include <QFile>
#include <QTime>
#include <QPainter>
#include <QDebug>#include "SKP_Silk_SDK_API.h"#define MAX_BYTES_PER_FRAME     1024
#define MAX_INPUT_FRAMES        5
#define MAX_FRAME_LENGTH        480
#define FRAME_LENGTH_MS         20
#define MAX_API_FS_KHZ          48MainWindow::MainWindow(QWidget *parent): QMainWindow(parent), ui(new Ui::MainWindow)
{ui->setupUi(this);ui->lineEdit->setText(qApp->applicationDirPath()+"/weixin.amr");//选择文件connect(ui->btnFile,&QPushButton::clicked,[=]{const QString filepath=QFileDialog::getOpenFileName(this);if(!filepath.isEmpty())ui->lineEdit->setText(filepath);});//解码connect(ui->btnDecode,&QPushButton::clicked,[=]{const QString filepath=ui->lineEdit->text();if(filepath.isEmpty())return;qDebug()<<"---------------------------------";qDebug()<<"sdk version"<<SKP_Silk_SDK_get_version();qDebug()<<"begin decode"<<QTime::currentTime();decodeSilk(filepath);qDebug()<<"end decode"<<QTime::currentTime();qDebug()<<"data size"<<pcmData.size();update();});
}MainWindow::~MainWindow()
{delete ui;
}void MainWindow::paintEvent(QPaintEvent *event)
{Q_UNUSED(event);QPainter painter(this);if(pcmData.count()<4)return;painter.translate(0,height()/2);const int length=pcmData.count()/2;const short *datas=(const short *)pcmData.constData();//点的x间隔double xspace=width()/(double)length;//绘制采样点步进,测试用的固定值,文件比较大懒得算const int step=1;//qDebug()<<"step"<<step;for(int i=0;i<length-step;i+=step){painter.drawLine(xspace*i,-datas[i]/150,xspace*(i+step),-datas[i+step]/150);}
}void MainWindow::decodeSilk(const QString &filepath)
{//SDK地址:https://gitee.com/alvis/SILK_SDK_SRC//参照示例:SILK_SDK_SRC_v1.0.9\SILK_SDK_SRC_ARM_v1.0.9\test\Decoder.c//参照博客:https://blog.csdn.net/weixin_34292924/article/details/87987436QFile file(filepath);qDebug()<<"Filepath"<<filepath<<"exists"<<file.exists();if(file.size()<10||!file.open(QIODevice::ReadOnly))return;//先判断silk头//#!SILK_V3QByteArray read_temp=file.read(1);if(read_temp=="#"){read_temp+=file.read(8);}else{//微信的silk前面加个一个字节的0x02read_temp=file.read(9);}if(read_temp!="#!SILK_V3"){file.close();return;}SKP_SILK_SDK_DecControlStruct dec_ctrl;//采样率,可作为参数传入//Valid values are 8000,12000, 16000, 24000, 32000, 44100, and 48000.const int sample_rate=8000;dec_ctrl.API_sampleRate = sample_rate;dec_ctrl.framesPerPacket = 1;//创建解码器SKP_int32 dec_size;int ret = SKP_Silk_SDK_Get_Decoder_Size(&dec_size);qDebug()<<"SKP_Silk_SDK_Get_Decoder_Size return"<<ret<<"size"<<dec_size;SKP_uint8 *dec_state=new SKP_uint8[dec_size];//初始化解码器ret=SKP_Silk_SDK_InitDecoder(dec_state);qDebug()<<"SKP_Silk_SDK_InitDecoder return"<<ret;//默认解出来貌似是16bit的精度SKP_uint8 payload[MAX_BYTES_PER_FRAME * MAX_INPUT_FRAMES], *payload_ptr = NULL;SKP_int16 out[((FRAME_LENGTH_MS * MAX_API_FS_KHZ) << 1) * MAX_INPUT_FRAMES], *out_ptr = NULL;SKP_int16 n_bytes=0;SKP_int32 read_counter=0;SKP_int16 len=0;SKP_int16 total_len=0;SKP_int32 frames=0;pcmData.clear();//循环读取并解码while (true) {//读取有效数据大小read_counter=file.read((char*)&n_bytes,sizeof(SKP_int16));if(n_bytes<1||read_counter<1)break;//读取有效数据read_counter=file.read((char*)payload,n_bytes);//qDebug()<<"read_counter"<<read_counter<<n_bytes<<QByteArray((char*)dec_state,sizeof(SKP_uint8)).toHex();if( (SKP_int16)read_counter < n_bytes ) {break;}payload_ptr=payload;out_ptr=out;total_len = 0;frames = 0;do {//解码ret = SKP_Silk_SDK_Decode(dec_state, &dec_ctrl, 0, payload_ptr, n_bytes, out_ptr, &len);if (ret) {qDebug()<<"SKP_Silk_SDK_Decode returned"<<ret;}frames++;out_ptr += len;total_len += len;if (frames > MAX_INPUT_FRAMES) {qDebug()<<"frames > MAX_INPUT_FRAMES"<<frames<<total_len;out_ptr = out;total_len = 0;frames = 0;}} while (dec_ctrl.moreInternalDecoderFrames);//将解码后的数据pcm保存pcmData.append((const char *)out,total_len*2);}//清理file.close();delete[]dec_state;//以wav(pcm s16)格式写入file.setFileName(filepath+".pcm.wav");if(file.open(QIODevice::WriteOnly)){//自定义的wav头结构体EasyWavHead head=createWavHead(sample_rate,pcmData.count());file.write((const char*)&head,sizeof(head));file.write(pcmData);file.close();}
}EasyWavHead MainWindow::createWavHead(int sampleRate, unsigned int dataSize)
{//默认貌似是16位精度,单通道const int bits=16;const int channels=1;const int head_size = sizeof(EasyWavHead);EasyWavHead wav_head;memset(&wav_head, 0, head_size);memcpy(wav_head.riffFlag, "RIFF", 4);memcpy(wav_head.waveFlag, "WAVE", 4);memcpy(wav_head.fmtFlag, "fmt ", 4);memcpy(wav_head.dataFlag, "data", 4);//出去头部前8个字节的长度,用的44字节的格式头,所以+44-8=36wav_head.riffSize = dataSize + 36;//不知道干嘛的wav_head.fmtSize = 16;//1为pcmwav_head.compressionCode = 0x01;wav_head.numChannels = channels;wav_head.sampleRate = sampleRate;wav_head.bytesPerSecond = (bits / 8) * channels * sampleRate;wav_head.blockAlign = (bits / 8) * channels;wav_head.bitsPerSample = bits;//除去头的数据长度wav_head.dataSize = dataSize;return wav_head;
}

 

这篇关于SILK SDK + Qt 将QQ/微信的 silk/amr 音频转为 wav 格式的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/250399

相关文章

W外链微信推广短连接怎么做?

制作微信推广链接的难点分析 一、内容创作难度 制作微信推广链接时,首先需要创作有吸引力的内容。这不仅要求内容本身有趣、有价值,还要能够激起人们的分享欲望。对于许多企业和个人来说,尤其是那些缺乏创意和写作能力的人来说,这是制作微信推广链接的一大难点。 二、精准定位难度 微信用户群体庞大,不同用户的需求和兴趣各异。因此,制作推广链接时需要精准定位目标受众,以便更有效地吸引他们点击并分享链接

嵌入式QT开发:构建高效智能的嵌入式系统

摘要: 本文深入探讨了嵌入式 QT 相关的各个方面。从 QT 框架的基础架构和核心概念出发,详细阐述了其在嵌入式环境中的优势与特点。文中分析了嵌入式 QT 的开发环境搭建过程,包括交叉编译工具链的配置等关键步骤。进一步探讨了嵌入式 QT 的界面设计与开发,涵盖了从基本控件的使用到复杂界面布局的构建。同时也深入研究了信号与槽机制在嵌入式系统中的应用,以及嵌入式 QT 与硬件设备的交互,包括输入输出设

easyui同时验证账户格式和ajax是否存在

accountName: {validator: function (value, param) {if (!/^[a-zA-Z][a-zA-Z0-9_]{3,15}$/i.test(value)) {$.fn.validatebox.defaults.rules.accountName.message = '账户名称不合法(字母开头,允许4-16字节,允许字母数字下划线)';return fal

音视频入门基础:WAV专题(10)——FFmpeg源码中计算WAV音频文件每个packet的pts、dts的实现

一、引言 从文章《音视频入门基础:WAV专题(6)——通过FFprobe显示WAV音频文件每个数据包的信息》中我们可以知道,通过FFprobe命令可以打印WAV音频文件每个packet(也称为数据包或多媒体包)的信息,这些信息包含该packet的pts、dts: 打印出来的“pts”实际是AVPacket结构体中的成员变量pts,是以AVStream->time_base为单位的显

消除安卓SDK更新时的“https://dl-ssl.google.com refused”异常的方法

消除安卓SDK更新时的“https://dl-ssl.google.com refused”异常的方法   消除安卓SDK更新时的“https://dl-ssl.google.com refused”异常的方法 [转载]原地址:http://blog.csdn.net/x605940745/article/details/17911115 消除SDK更新时的“

uniapp设置微信小程序的交互反馈

链接:uni.showToast(OBJECT) | uni-app官网 (dcloud.net.cn) 设置操作成功的弹窗: title是我们弹窗提示的文字 showToast是我们在加载的时候进入就会弹出的提示。 2.设置失败的提示窗口和标签 icon:'error'是设置我们失败的logo 设置的文字上限是7个文字,如果需要设置的提示文字过长就需要设置icon并给

【QT】基础入门学习

文章目录 浅析Qt应用程序的主函数使用qDebug()函数常用快捷键Qt 编码风格信号槽连接模型实现方案 信号和槽的工作机制Qt对象树机制 浅析Qt应用程序的主函数 #include "mywindow.h"#include <QApplication>// 程序的入口int main(int argc, char *argv[]){// argc是命令行参数个数,argv是

Python QT实现A-star寻路算法

目录 1、界面使用方法 2、注意事项 3、补充说明 用Qt5搭建一个图形化测试寻路算法的测试环境。 1、界面使用方法 设定起点: 鼠标左键双击,设定红色的起点。左键双击设定起点,用红色标记。 设定终点: 鼠标右键双击,设定蓝色的终点。右键双击设定终点,用蓝色标记。 设置障碍点: 鼠标左键或者右键按着不放,拖动可以设置黑色的障碍点。按住左键或右键并拖动,设置一系列黑色障碍点

使用Qt编程QtNetwork无法使用

使用 VS 构建 Qt 项目时 QtNetwork 无法使用的问题 - 摘叶飞镖 - 博客园 (cnblogs.com) 另外,强烈建议在使用QNetworkAccessManager之前看看这篇文章: Qt 之 QNetworkAccessManager踏坑记录-CSDN博客 C++ Qt开发:QNetworkAccessManager网络接口组件 阅读目录 1.1 通用API函数

[数据集][目标检测]血细胞检测数据集VOC+YOLO格式2757张4类别

数据集格式:Pascal VOC格式+YOLO格式(不包含分割路径的txt文件,仅仅包含jpg图片以及对应的VOC格式xml文件和yolo格式txt文件) 图片数量(jpg文件个数):2757 标注数量(xml文件个数):2757 标注数量(txt文件个数):2757 标注类别数:4 标注类别名称:["Platelets","RBC","WBC","sickle cell"] 每个类别标注的框数: