流媒体协议之RTMP

2024-08-26 19:04
文章标签 协议 rtmp 流媒体

本文主要是介绍流媒体协议之RTMP,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

一、RTMP 协议概述

今天我们要一起了解的这个协议叫 RTMP 协议,它并不复杂,对于拉流相关的协议,我们可以先思考一下拉流一般要交互什么,我理解有以下几项,

  1. 连接信息:包括服务器的地址、端口号等,以建立与流媒体源的连接。
  2. 认证信息:如果需要进行用户认证或授权访问,可能需要交互用户名、密码或令牌等认证凭据。
  3. 流标识:明确要拉取的具体流媒体内容的标识,例如频道号、视频 ID 等,这个也可以在协议中直接约定。
  4. 控制指令:例如播放、暂停、快进、快退等控制操作的指令。
  5. 媒体描述:指定所需的视频或音频质量,如分辨率、帧率、码率等。
  6. 缓冲设置:包括缓冲区大小、缓冲策略等,以优化流媒体播放的流畅性。
  7. 错误报告和状态反馈:向服务器报告拉流过程中出现的错误,同时接收服务器关于流的状态信息,如是否可用、是否中断等。
    知道了协议设计的目的,对协议的理解就更加方便了。

1.1 RTMP 协议

RTMP 是 Real Time Messaging Protocol( 实时消息传输协议) 的首字母缩写。该协议基于 TCP,是一个协议族,包括 RTMP 基本协议及 RTMPT/RTMPS/RTMPE 等多种变种。

RTMP(Real Time Messaging Protocol)实时消息传送协议是 Adobe Systems 公司为 Flash 播放器和服务器之间音频、视频和数据传输开发的开放协议。

作为应用层协议,RTMP是建立在TCP上的,在TCP建立完成后,RTMP通过握手,来见RTMP的connection。

在这个connection上,会传输一些控制信息,比如SetChunkSize,SetAckWinowSize,其中CreateStream命令会创建一个Stream连接,

RTMP 协议传输时会对数据格式化,而实际传输的时候为了更好地实现多路复用、分包和信息的公平性,发送端会把 Message 划分为带有 Message ID 的 Chunk,每个 Chunk 可能是一个单独的 Message,也可能是 Message 的一部分,在接收端会根据 Chunk 中包含的 data 的长度,message id 和 message 的长度把 chunk 还原成完整的 Message,从而实现信息的收发。 即RTMP基本的逻辑单元是Message,基本的传输单元是Chunk。

1.2、变种

它有多种变种:

  • RTMP 工作在 TCP 之上,默认使用端口 1935;
  • RTMPE 在 RTMP 的基础上增加了加密功能;encrypt
  • RTMPT 封装在 HTTP 请求之上,可穿透防火墙;http–rtmp
  • RTMPS 类似 RTMPT,增加了 TLS/SSL 的安全功能;

1.3 RTMP和RTSP的区别

RTMP 和 RTSP 都是流媒体传输协议,它们在实时音视频传输方面有着广泛的应用。以下是它们之间的主要区别:

  1. 实时传输协议:RTMP 是一种基于 TCP 的实时传输协议,而 RTSP 是一种基于 UDP 的实时传输协议。

  2. 传输方式:RTMP 是一种单向传输协议,信息只能从服务器端传输到客户端。而 RTSP 支持双向传输,允许服务器端和客户端之间进行实时通信。

  3. 控制协议:RTSP 是一种控制协议,它可以用于控制媒体流的播放、暂停、停止等操作。而 RTMP 不是一种控制协议,它只负责媒体流的传输。

  4. 安全性:RTMP 提供了较低的安全性,因为它使用 TCP 协议进行传输,容易受到中间人攻击。而 RTSP 提供了较高的安全性,因为它使用 UDP 协议进行传输,并支持加密和认证。

  5. 应用场景:RTMP 主要用于直播和视频点播应用,而 RTSP 主要用于实时视频监控和安防监控等应用。

二、RTMP协议详解

RTMP传输的数据被称为消息(Message),这些消息包括音视频数据和信令,但某些消息可能很大,所以这些Message还会被分块传输,这样的块被称为Chunk。Chunk中带有message id,用于指示它属于哪个消息,接收端根据这个id来组成完整的消息。

即RTMP基本的逻辑单元是Message,基本的传输单元是Chunk。

2.1 Chunk的基本组成

请添加图片描述

  • 基本头:基本头包含了分块的基本信息。chunk stream ID(流通道Id)和chunk type(chunk的类型)
  • 消息头:消息头包含了分块的扩展时间戳(如果有)和分块的长度信息。
  • 扩展时间戳:如果消息头中的时间戳字段取值为0xFFFFFF,则表示时间戳需要通过扩展时间戳字段来传输。*
  • 负载(Payload):负载部分包含了分块的实际数据,可能是音视频数据或者是控制信令。
2.1.1 Basic Header

包含了chunk stream ID(流通道Id)和chunk type(chunk的类型),chunk stream id⼀般被简写为CSID,⽤来唯⼀标识⼀个特定的流通道,chunk type决定了后⾯Message Header的格式。BasicHeader的⻓度可能是1,2,或3个字节,其中chunk type的⻓度是固定的(占2位),Basic Header是变⻓的,其⻓度取决于CSID的⼤⼩,在⾜够存储这两个字段的前提下最好⽤尽量少的字节从⽽减少由于引⼊Header增加的数据量。
长度如何计算再此不赘述。

2.1.2 Message Header

包含了要发送的实际信息(可能是完整的,也可能是⼀部分)的描述信息。Message Header的格式和⻓度取决于Basic Header的chunk type,共有4种不同的格式,由上⾯所提到的Basic Header中的fmt字段控制。其中第⼀种格式可以表示其他三种表示的所有数据,但由于其他三种格式是基于对之前chunk的差量化的表示,因此可以更简洁地表示相同的数据,实际使⽤的时候还是应该采⽤尽量少的字节表示相同意义的数据。以下按照字节数从多到少的顺序分别介绍这4种格式的Message Header。

  • type 0 :11bit

type=0时Message Header占⽤11个字节,其他三种能表示的数据它都能表示,但一般在chunk stream的开始的第⼀个chunk会采用这种类型。请添加图片描述
比如onMetaData Message
请添加图片描述

  • type = 1:7bit
    请添加图片描述
  • 其他
    其它类似,在此也不赘述了。
2.1.3 Extended Timestamp(扩展时间戳)

当chunk中的时间戳或者时间戳差值大于3字节能表示的最大数值(0xFFFFFF = 16777215)时,用这个字段来表示真正的时间戳。

2.1.4 Chunk Data

实际数据

三、RTMP的建连流程

1、建立一个连接,2、建立一个网络流

3.1 建立连接

包括握手和连接相关的参数设置。

3.1.1 握手

要建立一个有效的RTMP连接,首先要握手。客户端向服务器发送C0 C1 C2三个chunk,服务器向客户端发送S0、S1、S2三个chunk,才能开始数据传输。

RTMP协议没有规定这6个MESSAGE的顺序,但是需要保证几点。

1、客户端要收到S1才能发送C2

2、客户端要收到S2后才能发送其他信息

3、服务端要收到C0才能发送S1

4、服务端要收到C2后才能发送其他信息。

但实际中为了尽量减少通信的次数,一般发送顺序是这样的,
请添加图片描述
其中C0和S0主要是为了交互双方的RTMP协议版本
C1和S1是为了交互双方的时间戳和随机数据,时间戳用于计算双方协议交互的延迟(基本不用),随机数据用于在密钥协商过程中生成密钥。
C2、S2和C1、S1格式是一样的,主要是为了确认回复。

3.1.2 建立网络连接
  • S1. 发送connect到服务器,请求和服务应用实例建立连接
    在这里插入图片描述

  • S2. 服务端设置客户端的应答窗口大小、发送带宽大小、接收块大小
    请添加图片描述

  • S3 服务端响应创建网络连接的结果
    请添加图片描述

  • S4 客户端设置服务器的接收块大小

请添加图片描述

3.1.3 建立网络流
  • S1 客户端发送命令消息中的“创建流” (createStream) 命令到服务器端。
    请添加图片描述

  • S2. 服务器端接收到“创建流” 命令后, 发送命令消息中的“结果” (_result), 通知客户端流的状态
    请添加图片描述

  • S3. 客户端向服务器获取指定流的长度
    请添加图片描述

3.1.4 播放
  • S1 客户端发送播放请求play
    请添加图片描述
  • S2 服务端发送stream begin,告知客户端流id

请添加图片描述

  • S3 服务端开始发送数据
    在这里插入图片描述

四、RTMP和HLS以及HTTP-FLV的比较

请添加图片描述

五、总结

本文主要介绍了RTMP协议的相关内容,包括协议概述、协议详解、建连流程以及与其他协议的比较,RTMP是基于TCP的实时消息传输协议,是一个协议族,包括多种变种,变种包括RTMPT、RTMPS、RTMPE等,它们在功能上有所不同。。作为应用层协议,建立在TCP之上,通过握手建立connection,传输控制信息,如SetChunkSize、SetAckWinowSize等,CreateStream命令创建Stream连接。RTMP协议传输时对数据格式化,将Message划分为Chunk,接收端再还原。建连包括建立连接和建立网络流,建立连接包含握手和连接相关的参数设置。握手时客户端和服务器交互C0、C1、C2、S0、S1、S2六个chunk,并遵循一定的顺序和规则。立网络连接和网络流时,客户端和服务器会进行相应的消息交互和参数设置。播放时客户端发送请求,服务器响应并开始发送数据。

这篇关于流媒体协议之RTMP的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1109414

相关文章

流媒体平台/视频监控/安防视频汇聚EasyCVR播放暂停后视频画面黑屏是什么原因?

视频智能分析/视频监控/安防监控综合管理系统EasyCVR视频汇聚融合平台,是TSINGSEE青犀视频垂直深耕音视频流媒体技术、AI智能技术领域的杰出成果。该平台以其强大的视频处理、汇聚与融合能力,在构建全栈视频监控系统中展现出了独特的优势。视频监控管理系统EasyCVR平台内置了强大的视频解码、转码、压缩等技术,能够处理多种视频流格式,并以多种格式(RTMP、RTSP、HTTP-FLV、WebS

【Linux】应用层http协议

一、HTTP协议 1.1 简要介绍一下HTTP        我们在网络的应用层中可以自己定义协议,但是,已经有大佬定义了一些现成的,非常好用的应用层协议,供我们直接使用,HTTP(超文本传输协议)就是其中之一。        在互联网世界中,HTTP(超文本传输协议)是一个至关重要的协议,他定义了客户端(如浏览器)与服务器之间如何进行通信,以交换或者传输超文本(比如HTML文档)。

【Go】go连接clickhouse使用TCP协议

离开你是傻是对是错 是看破是软弱 这结果是爱是恨或者是什么 如果是种解脱 怎么会还有眷恋在我心窝 那么爱你为什么                      🎵 黄品源/莫文蔚《那么爱你为什么》 package mainimport ("context""fmt""log""time""github.com/ClickHouse/clickhouse-go/v2")func main(

2024.9.8 TCP/IP协议学习笔记

1.所谓的层就是数据交换的深度,电脑点对点就是单层,物理层,加上集线器还是物理层,加上交换机就变成链路层了,有地址表,路由器就到了第三层网络层,每个端口都有一个mac地址 2.A 给 C 发数据包,怎么知道是否要通过路由器转发呢?答案:子网 3.将源 IP 与目的 IP 分别同这个子网掩码进行与运算****,相等则是在一个子网,不相等就是在不同子网 4.A 如何知道,哪个设备是路由器?答案:在 A

CRtmpServer转推流到Nginx Rtmp及SRS(SimpleRtmpServer)的经历

转自:http://blog.csdn.net/fengyily/article/details/42557841 本人一直用的是CRtmpServer服务,在CRtmpServer服务中根据自已的想法也加入了许多功能,如通过http接口来加载配置等,苦于不支持HLS,自已添加ts分片水平又有限,思来想去决定借助SimpleRtmpServer的HLS功能。说干就干,马上查找相关资源

rtmp流媒体编程相关整理2013(crtmpserver,rtmpdump,x264,faac)

转自:http://blog.163.com/zhujiatc@126/blog/static/1834638201392335213119/ 相关资料在线版(不定时更新,其实也不会很多,也许一两个月也不会改) http://www.zhujiatc.esy.es/crtmpserver/index.htm 去年在这进行rtmp相关整理,其实内容早有了,只是整理一下看着方

RTMP流媒体服务器 crtmpserver

http://www.oschina.net/p/crtmpserver crtmpserver又称rtmpd是Evostream Media Server(www.evostream.com)的社区版本采用GPLV3授权 其主要作用为一个高性能的RTMP流媒体服务器,可以实现直播与点播功能多终端支持功能,在特定情况下是FMS的良好替代品。 支持RTMP的一堆协议(RT

Modbus-RTU协议

一、协议概述 Modbus-RTU(Remote Terminal Unit)是一种基于主从架构的通信协议,采用二进制数据表示,消息中的每个8位字节含有两个4位十六进制字符。它主要通过RS-485、RS-232、RS-422等物理接口实现数据的传输,传输距离远、抗干扰能力强、通信效率高。 二、报文结构 一个标准的Modbus-RTU报文通常包含以下部分: 地址域:单个字节,表示从站设备

网络原理之TCP协议(万字详解!!!)

目录 前言 TCP协议段格式 TCP协议相关特性 1.确认应答 2.超时重传 3.连接管理(三次握手、四次挥手) 三次握手(建立TCP连接) 四次挥手(断开连接)  4.滑动窗口 5.流量控制 6.拥塞控制 7.延迟应答 8.捎带应答  9.基于字节流 10.异常情况的处理 小结  前言 在前面,我们已经讲解了有关UDP协议的相关知识,但是在传输层,还有

DNS协议基础笔记

1.定义 DNS(Domain Name System,域名系统)是互联网的一项核心服务,它作为将域名和 IP 地址相互映射的一个分布式数据库,能够使人更方便地访问互联网。 2.域名解析过程 当用户在浏览器中输入一个域名,浏览器首先会检查自己的缓存中是否有该域名对应的 IP 地址。本地 DNS 服务器收到查询请求后,首先会检查自己的缓存中是否有该域名对应的 IP 地址。根域名服务器收到查询请