WebRTC之端对端通话

2024-08-22 15:32
文章标签 通话 webrtc 之端

本文主要是介绍WebRTC之端对端通话,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

前言

在前面《WebRTC之服务器搭建》 我们已经搭建好了WebRTC所需的服务器环境,主要是三个服务器:
房间服务器、信令服务器以及TURN穿透服务器。

下面我们就使用搭建好的服务器来使用WebRTC实现Android端的1对1实时通话。

WebRTC通信流程

一对一音视频通话步骤

通过上图可以看出WebRTC的通信流程还是很繁琐的,总结下来主要是三大步骤:信令服务注册、SDP协商以及ICE交换三大过程。

下文的解析主要是针对该图的解析。

信令服务注册:

在整个 WebRTC 双方交互的过程中,其业务逻辑的核心是信令, 所有的模块都是通过信令串联起来的。比喻在媒体协商,ICE交换的过程中就是
依靠信令完成的。

在本实践中笔者使用了okHttp的WebSocket来完成信令通讯。主要做了以下几件事情:

1、房间消息通知,比如加入房间、离开房间等
2、发送offer信息
3、接收answer信息
4、发送交换ICE等相关信息

注意:信令的交换过程不是WebRTC的规范标准,开发者只需要能够完成相关信息的及时交换即可,并非是一定要使用WebSocket

ICE交换:

更多关于ICE的相关知识可以查看笔者之前的文章:
《WebRTC之STUN、TURN以及ICE》

在ICE交换和SDP协商的过程中都使用到的一个重要的类就是PeerConnection,在创建PeerConnection的时候需要传递一个回调参数PeerConnection.Observer,
我们只需要在回调方法onIceCandidate方法中将IceCandidate信息通过PeerConnection的addIceCandidate方法添加到PeerConnection中去,同时将IceCandidate信息
发送给信令服务器。

信令服务器接收到IceCandidate信息后将IceCandidate信息下发到房间内的其他用户终端,
其他用户接收到信令服务器下发的IceCandidate信息后通过PeerConnection的addIceCandidate方法添加到PeerConnection中去,至此双方就完成了ICE的交换。

SDP协商:

为什么需要SDP,以及更多关于SDP的知识可以参考笔者之前的文章:《WebRTC之SDP协议》

SDP的交互过程主要是以下几个步骤:

1、邀请者创建一个offer,也就是使用PeerConnection调用createOffer的API
2、在createOffer创建成功的回调中设置本地SDP,也就是调用PeerConnection的setLocalDescription方法
3、在本地SDP设置成功的回调中讲offer信息发送到信令服务器,让信令服务器通知被邀请方
4、被邀请方通过信令拿到offer信息后,通过PeerConnection的setRemoteDescription方法设置远端SDP
5、在设置远端SDP成功的回调中通过PeerConnection的createAnswer方法创建一个answer,并且将answer设置为本地的SDP
6、被邀请方将创建成功的answer以信令的方式发送给邀请方,待邀请方接收到answer后通过PeerConnection的setRemoteDescription方法设置远端SDP就完成了SDP的交互

至此双方信息交换完毕,如果顺利就能进入P2P通话阶段。

主要用到的依赖库

// okhttp,主要使用它的webSocket
implementation("com.squareup.okhttp3:okhttp:4.9.0")
// WebRTC的依赖
implementation 'org.webrtc:google-webrtc:1.0.+'

运行成功截图

获取完整源码

因为代码有点多,所以笔者在这里就不贴了,如果感兴趣的童鞋可以在公号发送WebRTC通话demo获取。

遇到的问题

1、使用okhttp链接webSocket时报wss 403的错误

在请求参数中添加一个请求头key为"Origin" value为"http://*******"即可。

2、调用PeerConnection.setLocalDescription时崩溃的问题

这是因为缺少权限:android.permission.ACCESS_NETWORK_STATE导致的。

关注我,一起进步,人生不止coding!!!

微信扫码关注

这篇关于WebRTC之端对端通话的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1096671

相关文章

雷动WEBRTC产品

http://www.rtcpower.com/html/leidongwebrtc.html ; 1.前言      WebRTC是一项在浏览器内部进行实时视频和音频通信的技术,是谷歌2010年以6820万美元收购Global IP Solutions公司而获得一项技术。WebRTC实现了基于网页的视频会议,标准是WHATWG 协议,目的是通过浏览器提供简单的javascript就可以

Apple quietly slips WebRTC audio, video into Safari's WebKit spec

转自:http://www.zdnet.com/article/apple-quietly-slips-webrtc-audio-video-into-safaris-webkit-spec/?from=timeline&isappinstalled=0 http://www.zdnet.com/article/apple-quietly-slips-webrtc-audio-video-

WebRTC-nack机制详解

1.NACK的含义 丢包重传(NACK)是抵抗网络错误的重要手段。NACK在接收端检测到数据丢包后,发送NACK报文到发送端;发送端根据NACK报文中的序列号,在发送缓冲区找到对应的数据包,重新发送到接收端。NACK需要发送端,发送缓冲区的支持。 WebRTC中支持音频和视频的NACK重传。我们这里只分析nack机制,不分析jitterbuffer或者neteq的更多实现。 2.WebRTC

828华为云征文|华为云Flexus X实例docker部署srs6并调优,协议使用webrtc与rtmp

828华为云征文|华为云Flexus X实例docker部署srs6并调优,协议使用webrtc与rtmp 华为云最近正在举办828 B2B企业节,Flexus X实例的促销力度非常大,特别适合那些对算力性能有高要求的小伙伴。如果你有自建MySQL、Redis、Nginx等服务的需求,一定不要错过这个机会。赶紧去看看吧! 什么是华为云Flexus X实例 华为云Flexus X实例云服务是新

安卓通话状态监控之挂电话部分

挂电话部分 在app/phone下 <span style="font-size:18px;"> void handleOnscreenButtonClick(int id) {if (DBG) log("handleOnscreenButtonClick(id " + id + ")...");switch (id) {// Actions while an incoming call

WebRTC协议下的视频汇聚融合技术:EasyCVR构建高效视频交互体验

视频汇聚融合技术是指将来自不同源、不同格式、不同网络环境的视频流进行集中处理、整合和展示的技术。随着视频监控、远程会议、在线教育、直播娱乐等领域的快速发展,视频数据的规模急剧增长,对视频处理能力和效率提出了更高要求。视频汇聚融合技术通过统一的平台或系统,实现了视频资源的有效整合与高效利用,为用户提供了更加丰富、灵活的视频服务体验。 一、EasyCVR视频汇聚平台关键技术 视频编解码:采用高效的

华为云征文|华为云Flexus X实例docker部署srs6并调优,协议使用webrtc与rtmp

华为云征文|华为云Flexus X实例docker部署srs6并调优,协议使用webrtc与rtmp 什么是华为云Flexus X实例 华为云Flexus X实例云服务是新一代开箱即用、体验跃级、面向中小企业和开发者打造的高品价比云服务产品。Flexus云服务器X实例是新一代面向中小企业和开发者打造的柔性算力云服务器,可智能感知业务负载,适用于电商直播、企业建站、开发测试环境、游戏服务器、音视

RK3568笔记五十八:基于SIP的视频通话测试

若该文为原创文章,转载请注明原文出处。 一、简介 记录SIP的视频通话测试过程,以前有做过GB28181了解过SIP协议,后面由于一些原因,没有在做了,在安防领域上,有很多终端设备使用SIP协议实现视频对讲等功能。 此篇记录交叉编译eXosip和osip,并编写检测的SIP客户端,通过microSIP软件模拟和板子交互过程。 demo有两个功能: 一是:microSIP呼叫设备,设备把语

WebRTC协议下的视频汇聚融合技术:EasyCVR视频技术构建高效视频交互体验

视频汇聚融合技术是指将来自不同源、不同格式、不同网络环境的视频流进行集中处理、整合和展示的技术。随着视频监控、远程会议、在线教育、直播娱乐等领域的快速发展,视频数据的规模急剧增长,对视频处理能力和效率提出了更高要求。视频汇聚融合技术通过统一的平台或系统,实现了视频资源的有效整合与高效利用,为用户提供了更加丰富、灵活的视频服务体验。 一、EasyCVR视频汇聚平台关键技术 视频编解码:采用高效的

浅析WebRTC技术在智慧园区视频管理场景中的应用

随着科技的飞速发展,智慧园区作为城市智慧化的重要组成部分,正逐步成为现代化管理的重要方向。智慧园区的建设不仅涉及硬件设施的智能化升级,还离不开高效的视频管理和实时通信技术。在这一背景下,WebRTC(Web Real-Time Communication)技术以其低延迟、高互动性的优势,在智慧园区的视频管理场景中展现出了巨大的应用潜力。 一、WebRTC技术概述 WebRTC是一种开源的网页实