WebRTC与QttAudio的回声消除技术在 Android 可视对讲程序中的应用与对比

本文主要是介绍WebRTC与QttAudio的回声消除技术在 Android 可视对讲程序中的应用与对比,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

1 引言

随着移动互联技术的成熟和发展,智能手机上基于无线网络的可视对讲功能的应用已经开始逐步兴起。在Android系统上的此类应用程序的开发过程中,都会遇到声学回声问题。由于AEC技术非常复杂,需要非常专业的声学和音频处理技术。WebRTC的发布改变了这一局面,而QttAudio SDK的诞生,则完全将回声消除、声学音频处理等复杂技术降至最低,轻松集成,使任何开发者都可以快速的开发出音视频对讲功能的应用。

2 WebRTC简介

WebRTC是谷歌公司2011年发布的一项技术。WebRTC技术主要用于在支持HTML5的浏览器上实现实时音视频对话。功能包括会话初始化协议SIP的实现、音视频编解码和音视频数据处理等等。经过源代码分析,将AEC部分的代码单独摘取出来,并编译成动态链接库,通过jni技术使Java代码调用动态链接库,实现高质量回声消除。

3 WebRTC的AEC模块实现原理

WebRTC的AEC模块采用自适应滤波算法实现回声消除。该算法以输出到扬声器的音频数据为依据,根据现场的回声路径特征,模拟出回声信号。以模拟回声信号为依据,从麦克风采集到的音频数据中滤除模拟回声信号。算法的实现原理如图1所示。y(n)代表远端语音数据,y(n)在交给近端扬声器播放的同时,还送到自适应滤波器,产生回声估计值d^(n)。x(n)代表近端有用语音,麦克风采集的数据是x(n)和y(n)产生的回声d(n)的叠加,即x(n)+d(n)。经滤波处理,最终近端语音数据为:u(n)=x(n)+d(n)-d^(n)。其中e(n)=d(n)-d^(n),称为回声消除误差。理想状态下,e(n)应为0。但现实中e(n)不可能为0。滤波器会根据e(n)的值自动调整滤波系数。

WebRTC 的回声消除技术在 Android 可视对讲程序中的应用

 

4 WebRTC的移植

我们将AEC模块分成了两个大块,第一个大块是音频处理的通用模块WebTRC_audio(该模块编译成功后生成“libwebrtc_spl.so”动态库,供第二大块调用),源代码位于WebRTC源代码根路径下的“common_audio\signal_processing”中。第二大块是WebRTC_aec(该模块编译成功后生成“libwebrtc_aec.so”动态库),源代码位于WebRTC源代码根路径下的“modules\audio_processing\aec”中。
如下是WebRTC_aec模块的编译脚本主要部分:
LOCAL_PATH:=$(call my-dir)
include $(CLEAR_VARS)
LOCAL_MODULE:=signal_prebuilt
LOCAL_SRC_FILES:=webrtc_signal/libwebrtc_spl.so
include $(PREBUILT_SHARED_LIBRARY)
include $(CLEAR_VARS)
LOCAL_MODULE := libwebrtc_aec
LOCAL_SHARED_LIBRARIES := signal_prebuilt
include $(BUILD_SHARED_LIBRARY)
先看编译脚本的前五行,定义了一个预编译模块,即WebRTC_
a u d i o 块, 然后通过L O C A L _ S H A R E D _ L I B R A R I E S :=signal_prebuilt来导入该模块。

5 应用层多线程实现回声消除

如果想要成功消除回声,必须将近端数据和远端数据之间的时间差控制在合理范围内。在Android应用开发中,使用AudioRecord进行音频采集,使用AudiorTrack进行远端音频播放。协调好这两个类的输入输出时间同步,是回声消除功能实现的重要保障。为了保证时间上的连续性和时间差,需要使用两个单独线程ReadThread和WriteThread来分别进行音频采集和音频播放。另外还有两个单独的线程InTrhead和OutThread来完成数据的接收和发送,还有一个线程AecThread完成回声消除操作。线程之间的数据交换使用队列来完成。

6 使用QttAudio SDK解决回声消除问题

上文可以看出,使用webrtc消除回音是一个很复杂的工作,编译复杂,使用复杂,很不好控制近端与远端时间差值,而且如何跨平台的使用,同时满足android,ios, linux, windows等平台的需求,对于需要开发可视对讲,音视频通话等应用的企业或开发者来说,回音消除问题简直无异于一个巨大的高山拦在面前。

使用QttAudio SDK就很简单了,跨平台使用,10分钟就可轻松集成,再也无需担心回音、噪音、混音等恼人问题,具体使用文档可点击:链接


顺便也是帮他们打广告了

转自:http://www.qttaudio.com/webrtc-android.html

这篇关于WebRTC与QttAudio的回声消除技术在 Android 可视对讲程序中的应用与对比的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/887411

相关文章

Android实现在线预览office文档的示例详解

《Android实现在线预览office文档的示例详解》在移动端展示在线Office文档(如Word、Excel、PPT)是一项常见需求,这篇文章为大家重点介绍了两种方案的实现方法,希望对大家有一定的... 目录一、项目概述二、相关技术知识三、实现思路3.1 方案一:WebView + Office Onl

Java中的Lambda表达式及其应用小结

《Java中的Lambda表达式及其应用小结》Java中的Lambda表达式是一项极具创新性的特性,它使得Java代码更加简洁和高效,尤其是在集合操作和并行处理方面,:本文主要介绍Java中的La... 目录前言1. 什么是Lambda表达式?2. Lambda表达式的基本语法例子1:最简单的Lambda表

Android实现两台手机屏幕共享和远程控制功能

《Android实现两台手机屏幕共享和远程控制功能》在远程协助、在线教学、技术支持等多种场景下,实时获得另一部移动设备的屏幕画面,并对其进行操作,具有极高的应用价值,本项目旨在实现两台Android手... 目录一、项目概述二、相关知识2.1 MediaProjection API2.2 Socket 网络

将Java程序打包成EXE文件的实现方式

《将Java程序打包成EXE文件的实现方式》:本文主要介绍将Java程序打包成EXE文件的实现方式,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录如何将Java程序编程打包成EXE文件1.准备Java程序2.生成JAR包3.选择并安装打包工具4.配置Launch4

Java程序进程起来了但是不打印日志的原因分析

《Java程序进程起来了但是不打印日志的原因分析》:本文主要介绍Java程序进程起来了但是不打印日志的原因分析,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录Java程序进程起来了但是不打印日志的原因1、日志配置问题2、日志文件权限问题3、日志文件路径问题4、程序

Android实现悬浮按钮功能

《Android实现悬浮按钮功能》在很多场景中,我们希望在应用或系统任意界面上都能看到一个小的“悬浮按钮”(FloatingButton),用来快速启动工具、展示未读信息或快捷操作,所以本文给大家介绍... 目录一、项目概述二、相关技术知识三、实现思路四、整合代码4.1 Java 代码(MainActivi

Python结合PyWebView库打造跨平台桌面应用

《Python结合PyWebView库打造跨平台桌面应用》随着Web技术的发展,将HTML/CSS/JavaScript与Python结合构建桌面应用成为可能,本文将系统讲解如何使用PyWebView... 目录一、技术原理与优势分析1.1 架构原理1.2 核心优势二、开发环境搭建2.1 安装依赖2.2 验

Java字符串操作技巧之语法、示例与应用场景分析

《Java字符串操作技巧之语法、示例与应用场景分析》在Java算法题和日常开发中,字符串处理是必备的核心技能,本文全面梳理Java中字符串的常用操作语法,结合代码示例、应用场景和避坑指南,可快速掌握字... 目录引言1. 基础操作1.1 创建字符串1.2 获取长度1.3 访问字符2. 字符串处理2.1 子字

Android Mainline基础简介

《AndroidMainline基础简介》AndroidMainline是通过模块化更新Android核心组件的框架,可能提高安全性,本文给大家介绍AndroidMainline基础简介,感兴趣的朋... 目录关键要点什么是 android Mainline?Android Mainline 的工作原理关键

如何解决idea的Module:‘:app‘platform‘android-32‘not found.问题

《如何解决idea的Module:‘:app‘platform‘android-32‘notfound.问题》:本文主要介绍如何解决idea的Module:‘:app‘platform‘andr... 目录idea的Module:‘:app‘pwww.chinasem.cnlatform‘android-32