美文网首页janus
WebRTC(四)流媒体传输技术

WebRTC(四)流媒体传输技术

作者: Seacen_Liu | 来源:发表于2020-07-07 00:58 被阅读0次

WebRTC作为一个实时音视频传输技术,实时性是RTC技术的主要评判标准。在整个实时音视频系统中,对实时性影响最大的就是传输层。当今通信技术众多,但是都离不开两个基础的协议,即TCP(Transmission Control Protocol)和UDP(User Datagram Protocol)。

众所周知,TCP协议是一个在不可靠的网络上提供可靠的端对端数据传输协议。为了可靠性,TCP有三次握手、超时重传、流量控制和拥塞控制等机制,这些都都打打影响到了实时性。

虽然UDP不是可靠的传输协议,但是却保证了实时性,并且有极高的自由度。因此WebRTC技术中传输层采用的基于UDP协议的RTP协议(Real-time Transport Protocol,实时传输协议)。

RTP 协议

由于UDP是无序传输的,因此RTP协议主要的作用是记录UDP包的序号,方便应用层后续的操作。RTP协议的规范如下图所示。

RTP协议结构图

下面将按照从左到右从上到下的顺序介绍各个字段的具体含义:

  1. Version(版本号):占2 bits,表示 RTP 的具体版本号;
  2. Padding(填充标记位):占1bit,若该值为1,则表示该包的尾部含有一个或一个以上的额外填充字节;
  3. Extension(扩展标记位):占1bit,若该值为1,则表示在RTP包的头部前面还存在一个扩展头部;
  4. CSRC(计数器):占4bits,表示在RTP头部后的计数器数量;
  5. Maker(标记位):占1bit,一个充当保留位的标记位,默认为0,一般没有作用;
  6. Payload type(负载类型):占7bits,表示RTP包的数据负载类型;
  7. Sequence number(序列号):占16bits,表示RTP包的序列号,接收方不经可通过序列号来重新排序RTP数据包,还可以判断是否丢包。RTP序列号并不是从0开始,而是从一个随机数开始,按发送的顺序加1进行顺序的标记;
  8. Timestap(时间戳):占32bits,表示当前RTP包中第一个字节的写入时间。
  9. SSRC(共享媒体流标识符):占32bits,表示共享媒体流的源,它是全局唯一的。
  10. CSRC(共享源标识符):占32bits,表示共享源,一般用在混音或混屏上,区别不同人的声音与画面。

在使用RTP包进行数据传输时,难免会发生丢包、乱序、抖动等问题。这些问题一般都是因为网络状态变化而出现的,例如网络线路质量问题导致丢包率高、传输的数据超过带宽的负载引起丢包问题和信号干扰引起丢包问题等等。虽然WebRTC对这些问题再底层都有相应的处理策略,但在处理这些问题之前,它首先需要让各端知道自己的网络质量,这就需要使用到RTCP协议。

RTCP 协议

RTCP(Real-Time Transport Control Protocol),即实时传输控制协议,它用于为RTP协议的服务质量提供保障,在传输层对音视频流进行同步并且检测网络质量。在进行RTP会话时,发送方和接收方都会周期性地发送RTCP包,该包中包含了已发送的数据包的数量和丢失包的数量等信息。由于RTCP包只包含一些控制信息,因此包的容量比较小,多个RTCP包可以跟随一个UDP一起传输。

RTCP有五种分组类型:

  • SR(Sender Report)
  • RR(Receiver Report)
  • SDES(Sourse Description Items)
  • BYE
  • APP

其中SR与RR是最重要的报文类型,通过这个两个报文,各端可以知道自己的网络质量状况。

综上所述,RTC协议可以保证数据传输的实时性,RTCP协议可以保证数据传输的可靠性,WebRTC 将上述两个协议进行配合使用的确能在较小的开销内取得优秀的传输效率。

相关文章

  • WebRTC(四)流媒体传输技术

    WebRTC作为一个实时音视频传输技术,实时性是RTC技术的主要评判标准。在整个实时音视频系统中,对实时性影响最大...

  • Open WebRTC 服务端搭建成功

    Open WebRTC Toolkit是英特尔在Github上开源的流媒体发布平台。基于WebRTC技术,并兼容目...

  • 流媒体智能后视镜 可以真正消除后视盲区

    凌度A928流媒体智能后视镜是一款9.88英寸大小的高清流媒体后视镜,采用流媒体技术,实时高速传输,突破传统后视镜...

  • 浅谈Webrtc,这些你了解嘛

    随着低延时流媒体技术的不断进步,在线教育行业持续升温。阐述了基于WebRTC架构的低延时直播技术突破以及其在教育行...

  • WebRTC直播课堂实践:实时互动是核心

    随着低延时流媒体技术的不断进步,在线教育行业持续升温。基于WebRTC架构的低延时直播技术突破以及其在教育行业中的...

  • 如何在 Android 上创建视频聊天?WebRTC 初学者指南

    WebRTC简介 WebRTC 是一种视频聊天和会议开发技术。它允许您在移动设备和浏览器之间创建点对点连接以传输媒...

  • 视频开发知识储备

    1,rtp实时传输协议,用于传输流媒体数据,基于udp.2,rtsp实时流媒体协议,用于发起流媒体会话,交互信息,...

  • 超低延迟实时流媒体传输技术

    现在云游戏,云应用越来越火,所以超低延迟实时流媒体传输技术的需求应用场景会越来越多。腾讯专家工程师刘泓昊老师在Li...

  • 零基础入门

    音视频技术主要包含以下几点:封装技术,视频压缩编码技术以及音频压缩编码技术,如果考虑到网络传输,还包括流媒体协议技...

  • RTSP/RTP/RTCP

    流媒体之RTSP/RTP/RTCP,RTSP是发起/终结流媒体、RTP是传输流媒体、RTCP是对RTP进行控制,同...

网友评论

    本文标题:WebRTC(四)流媒体传输技术

    本文链接:https://www.haomeiwen.com/subject/diznqktx.html