網路流媒體協議之——RTSP協議

来源:https://www.cnblogs.com/linhaostudy/archive/2019/07/05/11140823.html
-Advertisement-
Play Games

RTSP(Real Time Stream Protocol)協議是一個基於文本的多媒體播放控制協議，屬於應用層。RTSP以客戶端方式工作，對流媒體提供播放、暫停、後退、前進等操作。該標準由IETF指定，對應的協議是RFC2326。 RTSP作為一個應用層協議，提供了一個可供擴展的框架，使得流媒體的 ...


RTSP(Real-Time Stream Protocol)協議是一個基於文本的多媒體播放控制協議，屬於應用層。RTSP以客戶端方式工作，對流媒體提供播放、暫停、後退、前進等操作。該標準由IETF指定，對應的協議是RFC2326。

RTSP作為一個應用層協議，提供了一個可供擴展的框架，使得流媒體的受控和點播變得可能，它主要用來控制具有實時特性的數據的發送，但其本身並不用於傳送流媒體數據，而必須依賴下層傳輸協議(如RTP/RTCP)所提供的服務來完成流媒體數據的傳送。RTSP負責定義具體的控制信息、操作方法、狀態碼，以及描述與RTP之間的交互操作。RTSP媒體服務協議框架如下：

image

客戶端要播放RTSP媒體流，就需要知道媒體源的URL，RTSP的URL格式一般如下：

rtsp://host[:port]/[abs_path]/content_name
  • host: 有效的功能變數名稱或IP地址；
  • port: 埠號，預設為554，若為預設可不填寫，否則必須寫明。

例如，一個完整的RTSP URL可寫為：

rtsp://192.168.1.67:554/test

又如目前市面上常用的海康網路攝像頭的RTSP地址格式為：

rtsp://[username]:[password]@[ip]:[port]/[codec]/[channel]/[subtype]/av_stream

示例：

rtsp://admin:[email protected]:554/h264/ch1/main/av_stream
rtsp://admin:[email protected]/mpeg4/ch1/sub/av_stream

RTSP報文

對RTSP協議的使用有了一個大概的瞭解之後，我們來看一下RTSP報文結構。

RTSP是一種基於文本的協議，用CRLF(回車換行)作為每一行的結束符，其好處是，在使用過程中可以方便地增加自定義參數，也方便抓包分析。從消息傳送方向上來分，RTSP的報文有兩類：請求報文和響應報文。請求報文是指從客戶端向伺服器發送的請求(也有少量從伺服器向客戶端發送的請求)，響應報文是指從伺服器到客戶端的回應。

RTSP請求報文的常用方法與作用：

image

一次基本的RTSP交互過程如下，C表示客戶端，S表示服務端。

image

首先客戶端連接到流媒體伺服器併發送一個RTSP描述請求(DESCRIBE request)，伺服器通過一個SDP(Session DescriptionProtocol)描述來進行反饋(DESCRIBEresponse)，反饋信息包括流數量、媒體類型等信息。客戶端分析該SDP描述，併為會話中的每一個流發送一個RTSP連接建立請求(SETUPrequest)，該命令會告訴伺服器用於接收媒體數據的埠，伺服器響應該請求(SETUP response)並建立連接之後，就開始傳送媒體流(RTP包)到客戶端。在播放過程中客戶端還可以向伺服器發送請求來控制快進、快退和暫停等。最後，客戶端可發送一個終止請求(TEARDOWN request)來結束流媒體會話。

下麵我們通過具體的消息實例來進一步瞭解一下RTSP的工作過程：

  • OPTIONS

OPTIONS請求是客戶端向伺服器詢問可用的方法，請求和回覆實例如下：

C->S:  OPTIONS rtsp://example.com/media.mp4 RTSP/1.0
       CSeq: 1
       Require: implicit-play
       Proxy-Require: gzipped-messages
 
S->C:  RTSP/1.0 200 OK
       CSeq: 1
       Public: DESCRIBE, SETUP, TEARDOWN, PLAY, PAUSE
  • DESCRIBE

客戶端向伺服器請求媒體資源描述，伺服器端通過SDP(Session Description Protocol)格式回應客戶端的請求。資源描述中會列出所請求媒體的媒體流及其相關信息，典型情況下，音頻和視頻分別作為一個媒體流傳輸。實例如下：

C->S: DESCRIBE rtsp://example.com/media.mp4 RTSP/1.0
      CSeq: 2
 
S->C: RTSP/1.0 200 OK
      CSeq: 2
      Content-Base: rtsp://example.com/media.mp4
      Content-Type: application/sdp
      Content-Length: 460
 
      m=video 0 RTP/AVP 96
      a=control:streamid=0
      a=range:npt=0-7.741000
      a=length:npt=7.741000
      a=rtpmap:96 MP4V-ES/5544
      a=mimetype:string;"video/MP4V-ES"
      a=AvgBitRate:integer;304018
      a=StreamName:string;"hinted video track"
      m=audio 0 RTP/AVP 97
      a=control:streamid=1
      a=range:npt=0-7.712000
      a=length:npt=7.712000
      a=rtpmap:97 mpeg4-generic/32000/2
      a=mimetype:string;"audio/mpeg4-generic"
      a=AvgBitRate:integer;65790
      a=StreamName:string;"hinted audio track"
  • SETUP

SETUP請求確定了具體的媒體流如何傳輸，該請求必須在PLAY請求之前發送。SETUP請求包含媒體流的URL和客戶端用於接收RTP數據(audio or video)的埠以及接收RTCP數據(meta information)的埠。伺服器端的回覆通常包含客戶端請求參數的確認，並會補充缺失的部分，比如伺服器選擇的發送埠。每一個媒體流在發送PLAY請求之前，都要首先通過SETUP請求來進行相應的配置。


C->S: SETUP rtsp://example.com/media.mp4/streamid=0 RTSP/1.0
      CSeq: 3
      Transport: RTP/AVP;unicast;client_port=8000-8001
 
S->C: RTSP/1.0 200 OK
      CSeq: 3
      Transport: RTP/AVP;unicast;client_port=8000-8001;server_port=9000-9001;ssrc=1234ABCD
      Session: 12345678
  • PLAY

客戶端通過PLAY請求來播放一個或全部媒體流，PLAY請求可以發送一次或多次，發送一次時，URL為包含所有媒體流的地址，發送多次時，每一次請求攜帶的URL只包含一個相應的媒體流。PLAY請求中可指定播放的range，若未指定，則從媒體流的開始播放到結束，如果媒體流在播放過程中被暫停，則可在暫停處重新啟動流的播放。

C->S: PLAY rtsp://example.com/media.mp4 RTSP/1.0
      CSeq: 4
      Range: npt=5-20
      Session: 12345678
 
S->C: RTSP/1.0 200 OK
      CSeq: 4
      Session: 12345678
      RTP-Info: url=rtsp://example.com/media.mp4/streamid=0;seq=9810092;rtptime=3450012
  • PAUSE

PAUSE請求會暫停一個或所有媒體流，後續可通過PLAY請求恢復播放。PAUSE請求中攜帶所請求媒體流的URL，若參數range存在，則指明在何處暫停，若該參數不存在，則暫停立即生效，且暫停時長不確定。


C->S: PAUSE rtsp://example.com/media.mp4 RTSP/1.0
      CSeq: 5
      Session: 12345678
 
S->C: RTSP/1.0 200 OK
      CSeq: 5
      Session: 12345678
  • TEARDOWN

結束會話請求，該請求會停止所有媒體流，並釋放伺服器上的相關會話數據。

C->S: TEARDOWN rtsp://example.com/media.mp4 RTSP/1.0
      CSeq: 8
      Session: 12345678
 
S->C: RTSP/1.0 200 OK
      CSeq: 8
  • GET_PARAMETER

檢索指定URI數據中的參數值。不攜帶消息體的GET_PARAMETER可用來測試伺服器端或客戶端是否可通(類似ping的功能)。

S->C: GET_PARAMETER rtsp://example.com/media.mp4 RTSP/1.0
      CSeq: 9
      Content-Type: text/parameters
      Session: 12345678
      Content-Length: 15
 
      packets_received
      jitter
 
C->S: RTSP/1.0 200 OK
      CSeq: 9
      Content-Length: 46
      Content-Type: text/parameters
 
      packets_received: 10
      jitter: 0.3838
  • SET_PARAMETER

用於設置指定媒體流的參數。


C->S: SET_PARAMETER rtsp://example.com/media.mp4 RTSP/1.0
      CSeq: 10
      Content-length: 20
      Content-type: text/parameters
 
      barparam: barstuff
 
S->C: RTSP/1.0 451 Invalid Parameter
      CSeq: 10
      Content-length: 10
      Content-type: text/parameters
 
      barparam
  • REDIRECT

重定向請求，用於伺服器通知客戶端新的服務地址，客戶端需要向這個新地址重新發起請求。重定向請求中可能包含Range參數，指明重定向生效的時間。客戶端若需向新服務地址發起請求，必須先teardown當前會話，再向指定的新主機setup一個新的會話。

S->C: REDIRECT rtsp://example.com/media.mp4 RTSP/1.0
      CSeq: 11
      Location: rtsp://bigserver.com:8001
      Range: clock=19960213T143205
  • ANNOUNCE

ANNOUNCE請求有兩個用途：(1)C->S：客戶端向伺服器端發佈URL指定的媒體信息描述；(2) S->C：實時更新對話描述。若媒體表示中新增了一個媒體流，例如在直播過程中，則整個媒體表示的description都要被重新發送，而不是只發送新增部分。

C->S: ANNOUNCE rtsp://example.com/media.mp4 RTSP/1.0
      CSeq: 7
      Date: 23 Jan 1997 15:35:06 GMT
      Session: 12345678
      Content-Type: application/sdp
      Content-Length: 332
 
      v=0
      o=mhandley 2890844526 2890845468 IN IP4 126.16.64.4
      s=SDP Seminar
      i=A Seminar on the session description protocol
      u=http://www.cs.ucl.ac.uk/staff/M.Handley/sdp.03.ps
      [email protected] (Mark Handley)
      c=IN IP4 224.2.17.12/127
      t=2873397496 2873404696
      a=recvonly
      m=audio 3456 RTP/AVP 0
      m=video 2232 RTP/AVP 31
 
S->C: RTSP/1.0 200 OK
      CSeq: 7
  • RECORD

請求錄製指定範圍的媒體數據，請求中可指定錄製的起止時間戳；若未指定時間範圍，則使用presentation description中的開始和結束時間，這種情況下，如果會話已開始，則立即啟動錄製操作。


C->S: RECORD rtsp://example.com/media.mp4 RTSP/1.0
      CSeq: 6
      Session: 12345678
 
S->C: RTSP/1.0 200 OK
      CSeq: 6
      Session: 12345678

以上就是RTSP中常用的命令及其實例介紹。最後，來看一段實際使用的RTSP命令交互過程，該過程是通過PC對海康攝像頭視頻流的拉取和播放，並通過Wireshark抓取客戶端的數據得到的：

OPTIONS rtsp://10.3.8.202:554 RTSP/1.0
CSeq: 2
User-Agent: LibVLC/2.2.8 (LIVE555 Streaming Media v2016.02.22)
 
RTSP/1.0 200 OK
CSeq: 2
Public: OPTIONS, DESCRIBE, PLAY, PAUSE, SETUP, TEARDOWN, SET_PARAMETER, GET_PARAMETER
Date:  Mon, Jan 29 2018 16:56:47 GMT
 
DESCRIBE rtsp://10.3.8.202:554 RTSP/1.0
CSeq: 3
User-Agent: LibVLC/2.2.8 (LIVE555 Streaming Media v2016.02.22)
Accept: application/sdp
 
RTSP/1.0 401 Unauthorized
CSeq: 3
WWW-Authenticate: Digest realm="IP Camera(10789)", nonce="6b9a455aec675b8db81a9ceb802e4eb8", stale="FALSE"
Date:  Mon, Jan 29 2018 16:56:47 GMT
 
DESCRIBE rtsp://10.3.8.202:554 RTSP/1.0
CSeq: 4
Authorization: Digest username="admin", realm="IP Camera(10789)", nonce="6b9a455aec675b8db81a9ceb802e4eb8", uri="rtsp://10.3.8.202:554", response="3fc4b15d7a923fc36f32897e3cee69aa"
User-Agent: LibVLC/2.2.8 (LIVE555 Streaming Media v2016.02.22)
Accept: application/sdp
 
RTSP/1.0 200 OK
CSeq: 4
Content-Type: application/sdp
Content-Base: rtsp://10.3.8.202:554/
Content-Length: 551
 
v=0
o=- 1517245007527432 1517245007527432 IN IP4 10.3.8.202
s=Media Presentation
e=NONE
b=AS:5050
t=0 0
a=control:rtsp://10.3.8.202:554/
m=video 0 RTP/AVP 96
c=IN IP4 0.0.0.0
b=AS:5000
a=recvonly
a=x-dimensions:2048,1536
a=control:rtsp://10.3.8.202:554/trackID=1
a=rtpmap:96 H264/90000
a=fmtp:96 profile-level-id=420029; packetization-mode=1; sprop-parameter-sets=Z00AMp2oCAAwabgICAoAAAMAAgAAAwBlCA==,aO48gA==
a=Media_header:MEDIAINFO=494D4B48010200000400000100000000000000000000000000000000000000000000000000000000;
a=appversion:1.0
 
SETUP rtsp://10.3.8.202:554/trackID=1 RTSP/1.0
CSeq: 5
Authorization: Digest username="admin", realm="IP Camera(10789)", nonce="6b9a455aec675b8db81a9ceb802e4eb8", uri="rtsp://10.3.8.202:554/", response="ddfbf3e268ae954979407369a104a620"
User-Agent: LibVLC/2.2.8 (LIVE555 Streaming Media v2016.02.22)
Transport: RTP/AVP;unicast;client_port=57844-57845
 
RTSP/1.0 200 OK
CSeq: 5
Session:       1273222592;timeout=60
Transport: RTP/AVP;unicast;client_port=57844-57845;server_port=8218-8219;ssrc=5181c73a;mode="play"
Date:  Mon, Jan 29 2018 16:56:47 GMT
 
PLAY rtsp://10.3.8.202:554/ RTSP/1.0
CSeq: 6
Authorization: Digest username="admin", realm="IP Camera(10789)", nonce="6b9a455aec675b8db81a9ceb802e4eb8", uri="rtsp://10.3.8.202:554/", response="b5abf0b230de4b49d6c6d42569f88e91"
User-Agent: LibVLC/2.2.8 (LIVE555 Streaming Media v2016.02.22)
Session: 1273222592
Range: npt=0.000-
 
RTSP/1.0 200 OK
CSeq: 6
Session:       1273222592
RTP-Info: url=rtsp://10.3.8.202:554/trackID=1;seq=65373;rtptime=3566398668
Date:  Mon, Jan 29 2018 16:56:47 GMT
 
GET_PARAMETER rtsp://10.3.8.202:554/ RTSP/1.0
CSeq: 7
Authorization: Digest username="admin", realm="IP Camera(10789)", nonce="6b9a455aec675b8db81a9ceb802e4eb8", uri="rtsp://10.3.8.202:554/", response="bb2309dcd083b25991c13e165673687b"
User-Agent: LibVLC/2.2.8 (LIVE555 Streaming Media v2016.02.22)
Session: 1273222592
 
RTSP/1.0 200 OK
CSeq: 7
Date:  Mon, Jan 29 2018 16:56:47 GMT
 
TEARDOWN rtsp://10.3.8.202:554/ RTSP/1.0
CSeq: 8
Authorization: Digest username="admin", realm="IP Camera(10789)", nonce="6b9a455aec675b8db81a9ceb802e4eb8", uri="rtsp://10.3.8.202:554/", response="e08a15c27d3daac14fd4b4bcab424a5e"
User-Agent: LibVLC/2.2.8 (LIVE555 Streaming Media v2016.02.22)
Session: 1273222592
 
RTSP/1.0 200 OK
CSeq: 8
Session:       1273222592
Date:  Mon, Jan 29 2018 16:57:03 GMT

您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • Visual Studio模板代碼註釋小技巧分享
    在日常開發過程中，難免有這樣一種需求：就是你所建的每一個類文件或者介面文件都需要標註下作者姓名以及類的用途。如果我們每次創建文件的時候都需要寫一遍這些信息是很煩神的。還好Visual Studio給我們提供了模板註釋的功能來自動幫我們生成類似的註釋代碼。今天趁著中午休息的時間就讓我們一起來操作下吧。 ...
  • 面試題【002字元串替換空格】精妙解法
    題目描述 請實現一個函數，將一個字元串中的每個空格替換成“%20”。例如，當字元串為We Are Happy.則經過替換之後的字元串為We%20Are%20Happy。 解題思路 老實說，看到這個題目想到的就是字元串替換，但是面試題肯定不是這麼簡單的，那麼怎麼在原字元串上進行高效的替換呢？我們的字元 ...
  • 泛型約束：介面約束、new()構造函數約束、組合約束（即多種約束合併）
    泛型 介面約束： 普通 單例模式： 上面用到的是類中一個方法來獲取類的唯一實例對象 那完全也可以用屬性的訪問器來初始化一個類的對象啊，如下： 調用的話：var str = Singleton.Instance.Outresult("我是輸出內容...."); 綜上：兩種方式實現單例 泛型 new() ...
  • asp.net core web api 生成 swagger 文檔
    在前後端分離的開發模式下，文檔就顯得比較重要，哪個介面要傳哪些參數，如果一兩個介面還好，口頭上直接溝通好就可以了，如果介面多了就有點不適用了，沒有介面文檔會大大提高前後端的溝通成本。而 asp.net core 可以通過 [Swashbuckle.AspNetCore](https://github... ...
  • C#—使用InstallerProjects打包桌面應用程式
    前言 打包桌面應用程式實在是一個不常使用的東西，偶爾使用起來經常會忘東忘西的耽誤時間，因此，這篇文章多以圖片記錄過程，也是用於備忘。 下載打包工具 C#打包桌面應用程式有很多種方法，這裡介紹一種使用Microsoft Visual Studio Installer Projects工具打包的方法。 ...
  • 加密演算法 Md5 & Sha1
    MD5加密 使用MD5CryptoServiceProvider類 Sha1加密 SHA1，也是在System.Security.Cryptography程式集下提供的演算法 案例 以上，bytes轉string，也可以使用 BitConverter.ToString(bytes) 但是需要額外替換其 ...
  • 面試題【001二維數組中的查找】精妙解法
    題目描述 在一個二維數組中（每個一維數組的長度相同），每一行都按照從左到右遞增的順序排序，每一列都按照從上到下遞增的順序排序。請完成一個函數，輸入這樣的一個二維數組和一個整數，判斷數組中是否含有該整數。例如：下麵的二維數組就是每行、每列都遞增排序。如果在這個數組中查找數字7，則返回true；如果查找 ...
  • Linux命令——最有用的幫助命令
    Linux命令——最有用的幫助命令 摘要：本文主要學習了Linux眾多命令中最基礎的man命令。 介紹 作用 Linux的所有操作都可以通過命令行來完成，所以學習Linux最好從命令行開始。因為Linux的命令有很多，不可能每一個都能記住，所以Linux提供了一個類似於操作手冊的命令，也就是man命 ...
一周排行
    -Advertisement-
    Play Games
  • WPF 已知問題 監聽 WMI 事件導致觸摸失效
    示例項目結構 在 Visual Studio 中創建一個 WinForms 應用程式後，項目結構如下所示： MyWinFormsApp/ │ ├───Properties/ │ └───Settings.settings │ ├───bin/ │ ├───Debug/ │ └───Release/ ...
  • [STAThread]特性
    [STAThread] 特性用於需要與 COM 組件交互的應用程式，尤其是依賴單線程模型（如 Windows Forms 應用程式）的組件。在 STA 模式下，線程擁有自己的消息迴圈，這對於處理用戶界面和某些 COM 組件是必要的。 [STAThread] static void Main(stri ...
  • UWP WinUI3 傳入 AddHandler 的 RoutedEventHandler 類型與事件所需不匹配將拋出參數異常
    在WinForm中使用全局異常捕獲處理 在WinForm應用程式中，全局異常捕獲是確保程式穩定性的關鍵。通過在Program類的Main方法中設置全局異常處理，可以有效地捕獲並處理未預見的異常，從而避免程式崩潰。 註冊全局異常事件 [STAThread] static void Main() { / ...
  • .NET 多版本 WinForm 開源控制項庫 SunnyUI
    前言 給大家推薦一款開源的 Winform 控制項庫，可以幫助我們開發更加美觀、漂亮的 WinForm 界面。 項目介紹 SunnyUI.NET 是一個基於 .NET Framework 4.0+、.NET 6、.NET 7 和 .NET 8 的 WinForm 開源控制項庫，同時也提供了工具類庫、擴展 ...
  • .net core8 使用Swagger（附當前源碼）
    說明 該文章是屬於OverallAuth2.0系列文章，每周更新一篇該系列文章（從0到1完成系統開發）。 該系統文章，我會儘量說的非常詳細，做到不管新手、老手都能看懂。 說明：OverallAuth2.0 是一個簡單、易懂、功能強大的許可權+可視化流程管理系統。 有興趣的朋友，請關註我吧(*^▽^*) ...
  • WPF 什麼時候 VisualTreeHelper.GetDescendantBounds 將返回無窮大
    一、下載安裝 1.下載git 必須先下載並安裝git，再TortoiseGit下載安裝 git安裝參考教程：https://blog.csdn.net/mukes/article/details/115693833 2.TortoiseGit下載與安裝 TortoiseGit，Git客戶端，32/6 ...
  • C# 開源教程帶你輕鬆掌握數據結構與演算法
    前言 在項目開發過程中，理解數據結構和演算法如同掌握蓋房子的秘訣。演算法不僅能幫助我們編寫高效、優質的代碼，還能解決項目中遇到的各種難題。 給大家推薦一個支持C#的開源免費、新手友好的數據結構與演算法入門教程：Hello演算法。 項目介紹 《Hello Algo》是一本開源免費、新手友好的數據結構與演算法入門 ...
  • 第22篇 生成proto文件bat腳本
    1.生成單個Proto.bat內容 @rem Copyright 2016, Google Inc. @rem All rights reserved. @rem @rem Redistribution and use in source and binary forms, with or with ...
  • 記一次 .NET某上位機視覺程式 卡死分析
    一：背景 1. 講故事 前段時間有位朋友找到我，說他的窗體程式在客戶這邊出現了卡死，讓我幫忙看下怎麼回事？dump也生成了，既然有dump了那就上 windbg 分析吧。 二：WinDbg 分析 1. 為什麼會卡死 窗體程式的卡死，入口門檻很低，後續往下分析就不一定了，不管怎麼說先用 !clrsta ...
  • 醫學DICOM文件與PACS系統進行數據傳輸
    前言 人工智慧時代，人臉識別技術已成為安全驗證、身份識別和用戶交互的關鍵工具。 給大家推薦一款.NET 開源提供了強大的人臉識別 API，工具不僅易於集成，還具備高效處理能力。 本文將介紹一款如何利用這些API，為我們的項目添加智能識別的亮點。 項目介紹 GitHub 上擁有 1.2k 星標的 C# ...
所有分類