音视频开发—RTMP推流详解

2024-06-20 17:44

本文主要是介绍音视频开发—RTMP推流详解,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

RTMP(Real-Time Messaging Protocol,实时消息传输协议)是一种用于音视频和数据在互联网进行实时传输的协议,最初由Macromedia(现Adobe)开发,用于与Adobe Flash Player进行通信。RTMP被广泛用于流媒体传输,特别是在直播和点播视频领域。以下是RTMP协议的详细介绍:

RTMP协议的基本原理

RTMP协议是基于TCP的协议,通过分段传输数据以实现低延迟的实时传输。其主要功能是支持多路复用和流控制,使音视频数据可以同步传输并在接收端及时播放。

RTMP的基本结构

RTMP协议将数据分为消息(Message)和消息流(Message Stream),并在较低层次上定义了Chunk(块)的概念。

  • Chunk:RTMP数据传输的基本单位,一个大消息可以被分割成多个Chunk以便传输。
  • Message:由多个Chunk组成,表示一个完整的RTMP数据单元,比如音频数据、视频数据或控制信息。
  • Message Stream:用来传输一系列相关的消息,比如一个音频流或一个视频流。

RTMP协议的通信过程

在这里插入图片描述

RTMP协议的通信过程分为以下几个阶段:

  • 握手阶段:客户端和服务器首先进行握手以建立连接,完成版本和时间戳的同步。

握手过程 官方文档示例如下:

在这里插入图片描述

RTMP 真实握手过程:

在这里插入图片描述

  • 连接阶段:握手完成后,客户端发送连接命令(connect),包括应用信息等,服务器响应连接成功或失败。

官方文档仅供参考:

在这里插入图片描述

实际抓包分析:

在这里插入图片描述

  • 创建流阶段:连接建立后,并不是发送裸数据,而是客户端请求创建一个或多个流,用于音视频数据的传输。

官方文档,仅供参考:

在这里插入图片描述

通过抓包分析:

在这里插入图片描述

  • 音视频数据传输阶段:客户端和服务器通过已经建立的流传输音频、视频和数据消息。

推流过程如下:

在这里插入图片描述

拉流过程如下:Buffer Size 播放越平滑,不易出现卡顿,但是延迟相对会较高

在这里插入图片描述

RTMP消息格式

总体框图如下:

在这里插入图片描述

RTMP消息格式主要由以下几个部分组成:

1. Chunk(块)格式

RTMP协议使用Chunk来分割和传输数据。Chunk是RTMP数据传输的基本单位,一个消息可以被分割成多个Chunk传输。每个Chunk包含以下几个部分:

  • Basic Header:包含Chunk Stream ID和Chunk的基本信息。
  • Message Header:包含消息的元数据,比如时间戳、消息长度、消息类型等。
  • Extended Timestamp(可选):用于扩展时间戳,当时间戳超过24位时使用。
  • Message Data:实际的数据内容。
Basic Header

Basic Header由1到3个字节组成:

  • 第1字节

    :格式(Format)和Chunk Stream ID(CSID)。

    • Format:2位,表示Chunk的格式。
    • CSID:6位或更长,表示Chunk流ID。

如果CSID为0,则需要使用1个额外字节表示CSID(范围为64-319)。如果CSID为1,则需要使用2个额外字节表示CSID(范围为64-65599)。

Message Header

Message Header的长度取决于Basic Header中的Format字段,可能为0、3、7或11字节:

  • Format 0(11字节):包含时间戳、消息长度、消息类型ID、消息流ID。
  • Format 1(7字节):包含时间戳差值、消息长度、消息类型ID。
  • Format 2(3字节):仅包含时间戳差值。
  • Format 3(0字节):不包含任何头部信息,仅复用之前Chunk的头部信息。
Extended Timestamp

Extended Timestamp(4字节):仅当时间戳或时间戳差值超过24位时使用。

2. Message(消息)格式

RTMP消息包含消息头和消息体,消息头定义了消息的元数据,消息体包含实际的数据。

Message Header

消息头包含以下字段:

  • Timestamp(3字节):消息的时间戳,单位为毫秒。
  • Message Length(3字节):消息体的长度,单位为字节。
  • Message Type ID(1字节):表示消息的类型,比如音频、视频、命令等。
  • Message Stream ID(4字节):表示消息流的ID。
Message Body

消息体是实际的数据内容,其长度由消息头中的Message Length字段指定。

3. 消息类型

RTMP定义了多种消息类型,每种类型都有特定的用途:

  • Audio Message(8):用于传输音频数据。
  • Video Message(9):用于传输视频数据。
  • Data Message(18):用于传输元数据或自定义数据,比如时间戳、脚本数据等。 RMTP命令消息
  • Command Message(20):用于命令和控制消息,比如连接、发布、播放等。RTMP命令消息
  • User Control Message(4):用于用户控制事件,比如流开始、流结束、Ping等。
  • Aggregate Message(22):用于聚合多个消息成一个传输。
  • Set Chunk Size(1):控制消息
  • Abort Message(2):控制消息

这篇关于音视频开发—RTMP推流详解的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1078818

相关文章

PHP轻松处理千万行数据的方法详解

《PHP轻松处理千万行数据的方法详解》说到处理大数据集,PHP通常不是第一个想到的语言,但如果你曾经需要处理数百万行数据而不让服务器崩溃或内存耗尽,你就会知道PHP用对了工具有多强大,下面小编就... 目录问题的本质php 中的数据流处理:为什么必不可少生成器:内存高效的迭代方式流量控制:避免系统过载一次性

基于 Cursor 开发 Spring Boot 项目详细攻略

《基于Cursor开发SpringBoot项目详细攻略》Cursor是集成GPT4、Claude3.5等LLM的VSCode类AI编程工具,支持SpringBoot项目开发全流程,涵盖环境配... 目录cursor是什么?基于 Cursor 开发 Spring Boot 项目完整指南1. 环境准备2. 创建

MySQL的JDBC编程详解

《MySQL的JDBC编程详解》:本文主要介绍MySQL的JDBC编程,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录前言一、前置知识1. 引入依赖2. 认识 url二、JDBC 操作流程1. JDBC 的写操作2. JDBC 的读操作总结前言本文介绍了mysq

Redis 的 SUBSCRIBE命令详解

《Redis的SUBSCRIBE命令详解》Redis的SUBSCRIBE命令用于订阅一个或多个频道,以便接收发送到这些频道的消息,本文给大家介绍Redis的SUBSCRIBE命令,感兴趣的朋友跟随... 目录基本语法工作原理示例消息格式相关命令python 示例Redis 的 SUBSCRIBE 命令用于订

使用Python批量将.ncm格式的音频文件转换为.mp3格式的实战详解

《使用Python批量将.ncm格式的音频文件转换为.mp3格式的实战详解》本文详细介绍了如何使用Python通过ncmdump工具批量将.ncm音频转换为.mp3的步骤,包括安装、配置ffmpeg环... 目录1. 前言2. 安装 ncmdump3. 实现 .ncm 转 .mp34. 执行过程5. 执行结

Python中 try / except / else / finally 异常处理方法详解

《Python中try/except/else/finally异常处理方法详解》:本文主要介绍Python中try/except/else/finally异常处理方法的相关资料,涵... 目录1. 基本结构2. 各部分的作用tryexceptelsefinally3. 执行流程总结4. 常见用法(1)多个e

SpringBoot日志级别与日志分组详解

《SpringBoot日志级别与日志分组详解》文章介绍了日志级别(ALL至OFF)及其作用,说明SpringBoot默认日志级别为INFO,可通过application.properties调整全局或... 目录日志级别1、级别内容2、调整日志级别调整默认日志级别调整指定类的日志级别项目开发过程中,利用日志

Java中的抽象类与abstract 关键字使用详解

《Java中的抽象类与abstract关键字使用详解》:本文主要介绍Java中的抽象类与abstract关键字使用详解,本文通过实例代码给大家介绍的非常详细,感兴趣的朋友跟随小编一起看看吧... 目录一、抽象类的概念二、使用 abstract2.1 修饰类 => 抽象类2.2 修饰方法 => 抽象方法,没有

SpringBoot 多环境开发实战(从配置、管理与控制)

《SpringBoot多环境开发实战(从配置、管理与控制)》本文详解SpringBoot多环境配置,涵盖单文件YAML、多文件模式、MavenProfile分组及激活策略,通过优先级控制灵活切换环境... 目录一、多环境开发基础(单文件 YAML 版)(一)配置原理与优势(二)实操示例二、多环境开发多文件版

使用docker搭建嵌入式Linux开发环境

《使用docker搭建嵌入式Linux开发环境》本文主要介绍了使用docker搭建嵌入式Linux开发环境,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友们下面... 目录1、前言2、安装docker3、编写容器管理脚本4、创建容器1、前言在日常开发全志、rk等不同