網路流媒體協議之——RTSP協議

来源:https://www.cnblogs.com/linhaostudy/archive/2019/07/05/11140823.html
-Advertisement-
Play Games

RTSP(Real Time Stream Protocol)協議是一個基於文本的多媒體播放控制協議，屬於應用層。RTSP以客戶端方式工作，對流媒體提供播放、暫停、後退、前進等操作。該標準由IETF指定，對應的協議是RFC2326。 RTSP作為一個應用層協議，提供了一個可供擴展的框架，使得流媒體的 ...


RTSP(Real-Time Stream Protocol)協議是一個基於文本的多媒體播放控制協議，屬於應用層。RTSP以客戶端方式工作，對流媒體提供播放、暫停、後退、前進等操作。該標準由IETF指定，對應的協議是RFC2326。

RTSP作為一個應用層協議，提供了一個可供擴展的框架，使得流媒體的受控和點播變得可能，它主要用來控制具有實時特性的數據的發送，但其本身並不用於傳送流媒體數據，而必須依賴下層傳輸協議(如RTP/RTCP)所提供的服務來完成流媒體數據的傳送。RTSP負責定義具體的控制信息、操作方法、狀態碼，以及描述與RTP之間的交互操作。RTSP媒體服務協議框架如下：

image

客戶端要播放RTSP媒體流，就需要知道媒體源的URL，RTSP的URL格式一般如下：

rtsp://host[:port]/[abs_path]/content_name
  • host: 有效的功能變數名稱或IP地址；
  • port: 埠號，預設為554，若為預設可不填寫，否則必須寫明。

例如，一個完整的RTSP URL可寫為：

rtsp://192.168.1.67:554/test

又如目前市面上常用的海康網路攝像頭的RTSP地址格式為：

rtsp://[username]:[password]@[ip]:[port]/[codec]/[channel]/[subtype]/av_stream

示例：

rtsp://admin:[email protected]:554/h264/ch1/main/av_stream
rtsp://admin:[email protected]/mpeg4/ch1/sub/av_stream

RTSP報文

對RTSP協議的使用有了一個大概的瞭解之後，我們來看一下RTSP報文結構。

RTSP是一種基於文本的協議，用CRLF(回車換行)作為每一行的結束符，其好處是，在使用過程中可以方便地增加自定義參數，也方便抓包分析。從消息傳送方向上來分，RTSP的報文有兩類：請求報文和響應報文。請求報文是指從客戶端向伺服器發送的請求(也有少量從伺服器向客戶端發送的請求)，響應報文是指從伺服器到客戶端的回應。

RTSP請求報文的常用方法與作用：

image

一次基本的RTSP交互過程如下，C表示客戶端，S表示服務端。

image

首先客戶端連接到流媒體伺服器併發送一個RTSP描述請求(DESCRIBE request)，伺服器通過一個SDP(Session DescriptionProtocol)描述來進行反饋(DESCRIBEresponse)，反饋信息包括流數量、媒體類型等信息。客戶端分析該SDP描述，併為會話中的每一個流發送一個RTSP連接建立請求(SETUPrequest)，該命令會告訴伺服器用於接收媒體數據的埠，伺服器響應該請求(SETUP response)並建立連接之後，就開始傳送媒體流(RTP包)到客戶端。在播放過程中客戶端還可以向伺服器發送請求來控制快進、快退和暫停等。最後，客戶端可發送一個終止請求(TEARDOWN request)來結束流媒體會話。

下麵我們通過具體的消息實例來進一步瞭解一下RTSP的工作過程：

  • OPTIONS

OPTIONS請求是客戶端向伺服器詢問可用的方法，請求和回覆實例如下：

C->S:  OPTIONS rtsp://example.com/media.mp4 RTSP/1.0
       CSeq: 1
       Require: implicit-play
       Proxy-Require: gzipped-messages
 
S->C:  RTSP/1.0 200 OK
       CSeq: 1
       Public: DESCRIBE, SETUP, TEARDOWN, PLAY, PAUSE
  • DESCRIBE

客戶端向伺服器請求媒體資源描述，伺服器端通過SDP(Session Description Protocol)格式回應客戶端的請求。資源描述中會列出所請求媒體的媒體流及其相關信息，典型情況下，音頻和視頻分別作為一個媒體流傳輸。實例如下：

C->S: DESCRIBE rtsp://example.com/media.mp4 RTSP/1.0
      CSeq: 2
 
S->C: RTSP/1.0 200 OK
      CSeq: 2
      Content-Base: rtsp://example.com/media.mp4
      Content-Type: application/sdp
      Content-Length: 460
 
      m=video 0 RTP/AVP 96
      a=control:streamid=0
      a=range:npt=0-7.741000
      a=length:npt=7.741000
      a=rtpmap:96 MP4V-ES/5544
      a=mimetype:string;"video/MP4V-ES"
      a=AvgBitRate:integer;304018
      a=StreamName:string;"hinted video track"
      m=audio 0 RTP/AVP 97
      a=control:streamid=1
      a=range:npt=0-7.712000
      a=length:npt=7.712000
      a=rtpmap:97 mpeg4-generic/32000/2
      a=mimetype:string;"audio/mpeg4-generic"
      a=AvgBitRate:integer;65790
      a=StreamName:string;"hinted audio track"
  • SETUP

SETUP請求確定了具體的媒體流如何傳輸，該請求必須在PLAY請求之前發送。SETUP請求包含媒體流的URL和客戶端用於接收RTP數據(audio or video)的埠以及接收RTCP數據(meta information)的埠。伺服器端的回覆通常包含客戶端請求參數的確認，並會補充缺失的部分，比如伺服器選擇的發送埠。每一個媒體流在發送PLAY請求之前，都要首先通過SETUP請求來進行相應的配置。


C->S: SETUP rtsp://example.com/media.mp4/streamid=0 RTSP/1.0
      CSeq: 3
      Transport: RTP/AVP;unicast;client_port=8000-8001
 
S->C: RTSP/1.0 200 OK
      CSeq: 3
      Transport: RTP/AVP;unicast;client_port=8000-8001;server_port=9000-9001;ssrc=1234ABCD
      Session: 12345678
  • PLAY

客戶端通過PLAY請求來播放一個或全部媒體流，PLAY請求可以發送一次或多次，發送一次時，URL為包含所有媒體流的地址，發送多次時，每一次請求攜帶的URL只包含一個相應的媒體流。PLAY請求中可指定播放的range，若未指定，則從媒體流的開始播放到結束，如果媒體流在播放過程中被暫停，則可在暫停處重新啟動流的播放。

C->S: PLAY rtsp://example.com/media.mp4 RTSP/1.0
      CSeq: 4
      Range: npt=5-20
      Session: 12345678
 
S->C: RTSP/1.0 200 OK
      CSeq: 4
      Session: 12345678
      RTP-Info: url=rtsp://example.com/media.mp4/streamid=0;seq=9810092;rtptime=3450012
  • PAUSE

PAUSE請求會暫停一個或所有媒體流，後續可通過PLAY請求恢復播放。PAUSE請求中攜帶所請求媒體流的URL，若參數range存在，則指明在何處暫停，若該參數不存在，則暫停立即生效，且暫停時長不確定。


C->S: PAUSE rtsp://example.com/media.mp4 RTSP/1.0
      CSeq: 5
      Session: 12345678
 
S->C: RTSP/1.0 200 OK
      CSeq: 5
      Session: 12345678
  • TEARDOWN

結束會話請求，該請求會停止所有媒體流，並釋放伺服器上的相關會話數據。

C->S: TEARDOWN rtsp://example.com/media.mp4 RTSP/1.0
      CSeq: 8
      Session: 12345678
 
S->C: RTSP/1.0 200 OK
      CSeq: 8
  • GET_PARAMETER

檢索指定URI數據中的參數值。不攜帶消息體的GET_PARAMETER可用來測試伺服器端或客戶端是否可通(類似ping的功能)。

S->C: GET_PARAMETER rtsp://example.com/media.mp4 RTSP/1.0
      CSeq: 9
      Content-Type: text/parameters
      Session: 12345678
      Content-Length: 15
 
      packets_received
      jitter
 
C->S: RTSP/1.0 200 OK
      CSeq: 9
      Content-Length: 46
      Content-Type: text/parameters
 
      packets_received: 10
      jitter: 0.3838
  • SET_PARAMETER

用於設置指定媒體流的參數。


C->S: SET_PARAMETER rtsp://example.com/media.mp4 RTSP/1.0
      CSeq: 10
      Content-length: 20
      Content-type: text/parameters
 
      barparam: barstuff
 
S->C: RTSP/1.0 451 Invalid Parameter
      CSeq: 10
      Content-length: 10
      Content-type: text/parameters
 
      barparam
  • REDIRECT

重定向請求，用於伺服器通知客戶端新的服務地址，客戶端需要向這個新地址重新發起請求。重定向請求中可能包含Range參數，指明重定向生效的時間。客戶端若需向新服務地址發起請求，必須先teardown當前會話，再向指定的新主機setup一個新的會話。

S->C: REDIRECT rtsp://example.com/media.mp4 RTSP/1.0
      CSeq: 11
      Location: rtsp://bigserver.com:8001
      Range: clock=19960213T143205
  • ANNOUNCE

ANNOUNCE請求有兩個用途：(1)C->S：客戶端向伺服器端發佈URL指定的媒體信息描述；(2) S->C：實時更新對話描述。若媒體表示中新增了一個媒體流，例如在直播過程中，則整個媒體表示的description都要被重新發送，而不是只發送新增部分。

C->S: ANNOUNCE rtsp://example.com/media.mp4 RTSP/1.0
      CSeq: 7
      Date: 23 Jan 1997 15:35:06 GMT
      Session: 12345678
      Content-Type: application/sdp
      Content-Length: 332
 
      v=0
      o=mhandley 2890844526 2890845468 IN IP4 126.16.64.4
      s=SDP Seminar
      i=A Seminar on the session description protocol
      u=http://www.cs.ucl.ac.uk/staff/M.Handley/sdp.03.ps
      [email protected] (Mark Handley)
      c=IN IP4 224.2.17.12/127
      t=2873397496 2873404696
      a=recvonly
      m=audio 3456 RTP/AVP 0
      m=video 2232 RTP/AVP 31
 
S->C: RTSP/1.0 200 OK
      CSeq: 7
  • RECORD

請求錄製指定範圍的媒體數據，請求中可指定錄製的起止時間戳；若未指定時間範圍，則使用presentation description中的開始和結束時間，這種情況下，如果會話已開始，則立即啟動錄製操作。


C->S: RECORD rtsp://example.com/media.mp4 RTSP/1.0
      CSeq: 6
      Session: 12345678
 
S->C: RTSP/1.0 200 OK
      CSeq: 6
      Session: 12345678

以上就是RTSP中常用的命令及其實例介紹。最後，來看一段實際使用的RTSP命令交互過程，該過程是通過PC對海康攝像頭視頻流的拉取和播放，並通過Wireshark抓取客戶端的數據得到的：

OPTIONS rtsp://10.3.8.202:554 RTSP/1.0
CSeq: 2
User-Agent: LibVLC/2.2.8 (LIVE555 Streaming Media v2016.02.22)
 
RTSP/1.0 200 OK
CSeq: 2
Public: OPTIONS, DESCRIBE, PLAY, PAUSE, SETUP, TEARDOWN, SET_PARAMETER, GET_PARAMETER
Date:  Mon, Jan 29 2018 16:56:47 GMT
 
DESCRIBE rtsp://10.3.8.202:554 RTSP/1.0
CSeq: 3
User-Agent: LibVLC/2.2.8 (LIVE555 Streaming Media v2016.02.22)
Accept: application/sdp
 
RTSP/1.0 401 Unauthorized
CSeq: 3
WWW-Authenticate: Digest realm="IP Camera(10789)", nonce="6b9a455aec675b8db81a9ceb802e4eb8", stale="FALSE"
Date:  Mon, Jan 29 2018 16:56:47 GMT
 
DESCRIBE rtsp://10.3.8.202:554 RTSP/1.0
CSeq: 4
Authorization: Digest username="admin", realm="IP Camera(10789)", nonce="6b9a455aec675b8db81a9ceb802e4eb8", uri="rtsp://10.3.8.202:554", response="3fc4b15d7a923fc36f32897e3cee69aa"
User-Agent: LibVLC/2.2.8 (LIVE555 Streaming Media v2016.02.22)
Accept: application/sdp
 
RTSP/1.0 200 OK
CSeq: 4
Content-Type: application/sdp
Content-Base: rtsp://10.3.8.202:554/
Content-Length: 551
 
v=0
o=- 1517245007527432 1517245007527432 IN IP4 10.3.8.202
s=Media Presentation
e=NONE
b=AS:5050
t=0 0
a=control:rtsp://10.3.8.202:554/
m=video 0 RTP/AVP 96
c=IN IP4 0.0.0.0
b=AS:5000
a=recvonly
a=x-dimensions:2048,1536
a=control:rtsp://10.3.8.202:554/trackID=1
a=rtpmap:96 H264/90000
a=fmtp:96 profile-level-id=420029; packetization-mode=1; sprop-parameter-sets=Z00AMp2oCAAwabgICAoAAAMAAgAAAwBlCA==,aO48gA==
a=Media_header:MEDIAINFO=494D4B48010200000400000100000000000000000000000000000000000000000000000000000000;
a=appversion:1.0
 
SETUP rtsp://10.3.8.202:554/trackID=1 RTSP/1.0
CSeq: 5
Authorization: Digest username="admin", realm="IP Camera(10789)", nonce="6b9a455aec675b8db81a9ceb802e4eb8", uri="rtsp://10.3.8.202:554/", response="ddfbf3e268ae954979407369a104a620"
User-Agent: LibVLC/2.2.8 (LIVE555 Streaming Media v2016.02.22)
Transport: RTP/AVP;unicast;client_port=57844-57845
 
RTSP/1.0 200 OK
CSeq: 5
Session:       1273222592;timeout=60
Transport: RTP/AVP;unicast;client_port=57844-57845;server_port=8218-8219;ssrc=5181c73a;mode="play"
Date:  Mon, Jan 29 2018 16:56:47 GMT
 
PLAY rtsp://10.3.8.202:554/ RTSP/1.0
CSeq: 6
Authorization: Digest username="admin", realm="IP Camera(10789)", nonce="6b9a455aec675b8db81a9ceb802e4eb8", uri="rtsp://10.3.8.202:554/", response="b5abf0b230de4b49d6c6d42569f88e91"
User-Agent: LibVLC/2.2.8 (LIVE555 Streaming Media v2016.02.22)
Session: 1273222592
Range: npt=0.000-
 
RTSP/1.0 200 OK
CSeq: 6
Session:       1273222592
RTP-Info: url=rtsp://10.3.8.202:554/trackID=1;seq=65373;rtptime=3566398668
Date:  Mon, Jan 29 2018 16:56:47 GMT
 
GET_PARAMETER rtsp://10.3.8.202:554/ RTSP/1.0
CSeq: 7
Authorization: Digest username="admin", realm="IP Camera(10789)", nonce="6b9a455aec675b8db81a9ceb802e4eb8", uri="rtsp://10.3.8.202:554/", response="bb2309dcd083b25991c13e165673687b"
User-Agent: LibVLC/2.2.8 (LIVE555 Streaming Media v2016.02.22)
Session: 1273222592
 
RTSP/1.0 200 OK
CSeq: 7
Date:  Mon, Jan 29 2018 16:56:47 GMT
 
TEARDOWN rtsp://10.3.8.202:554/ RTSP/1.0
CSeq: 8
Authorization: Digest username="admin", realm="IP Camera(10789)", nonce="6b9a455aec675b8db81a9ceb802e4eb8", uri="rtsp://10.3.8.202:554/", response="e08a15c27d3daac14fd4b4bcab424a5e"
User-Agent: LibVLC/2.2.8 (LIVE555 Streaming Media v2016.02.22)
Session: 1273222592
 
RTSP/1.0 200 OK
CSeq: 8
Session:       1273222592
Date:  Mon, Jan 29 2018 16:57:03 GMT

您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • Visual Studio模板代碼註釋小技巧分享
    在日常開發過程中，難免有這樣一種需求：就是你所建的每一個類文件或者介面文件都需要標註下作者姓名以及類的用途。如果我們每次創建文件的時候都需要寫一遍這些信息是很煩神的。還好Visual Studio給我們提供了模板註釋的功能來自動幫我們生成類似的註釋代碼。今天趁著中午休息的時間就讓我們一起來操作下吧。 ...
  • 面試題【002字元串替換空格】精妙解法
    題目描述 請實現一個函數，將一個字元串中的每個空格替換成“%20”。例如，當字元串為We Are Happy.則經過替換之後的字元串為We%20Are%20Happy。 解題思路 老實說，看到這個題目想到的就是字元串替換，但是面試題肯定不是這麼簡單的，那麼怎麼在原字元串上進行高效的替換呢？我們的字元 ...
  • 泛型約束：介面約束、new()構造函數約束、組合約束（即多種約束合併）
    泛型 介面約束： 普通 單例模式： 上面用到的是類中一個方法來獲取類的唯一實例對象 那完全也可以用屬性的訪問器來初始化一個類的對象啊，如下： 調用的話：var str = Singleton.Instance.Outresult("我是輸出內容...."); 綜上：兩種方式實現單例 泛型 new() ...
  • asp.net core web api 生成 swagger 文檔
    在前後端分離的開發模式下，文檔就顯得比較重要，哪個介面要傳哪些參數，如果一兩個介面還好，口頭上直接溝通好就可以了，如果介面多了就有點不適用了，沒有介面文檔會大大提高前後端的溝通成本。而 asp.net core 可以通過 [Swashbuckle.AspNetCore](https://github... ...
  • C#—使用InstallerProjects打包桌面應用程式
    前言 打包桌面應用程式實在是一個不常使用的東西，偶爾使用起來經常會忘東忘西的耽誤時間，因此，這篇文章多以圖片記錄過程，也是用於備忘。 下載打包工具 C#打包桌面應用程式有很多種方法，這裡介紹一種使用Microsoft Visual Studio Installer Projects工具打包的方法。 ...
  • 加密演算法 Md5 & Sha1
    MD5加密 使用MD5CryptoServiceProvider類 Sha1加密 SHA1，也是在System.Security.Cryptography程式集下提供的演算法 案例 以上，bytes轉string，也可以使用 BitConverter.ToString(bytes) 但是需要額外替換其 ...
  • 面試題【001二維數組中的查找】精妙解法
    題目描述 在一個二維數組中（每個一維數組的長度相同），每一行都按照從左到右遞增的順序排序，每一列都按照從上到下遞增的順序排序。請完成一個函數，輸入這樣的一個二維數組和一個整數，判斷數組中是否含有該整數。例如：下麵的二維數組就是每行、每列都遞增排序。如果在這個數組中查找數字7，則返回true；如果查找 ...
  • Linux命令——最有用的幫助命令
    Linux命令——最有用的幫助命令 摘要：本文主要學習了Linux眾多命令中最基礎的man命令。 介紹 作用 Linux的所有操作都可以通過命令行來完成，所以學習Linux最好從命令行開始。因為Linux的命令有很多，不可能每一個都能記住，所以Linux提供了一個類似於操作手冊的命令，也就是man命 ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發（一）：使用.NET MAUI開發第一個安卓APP
    移動開發（一）：使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說，近來想嘗試開發一款安卓APP，考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP，畢竟是使用Visual Studio開發工具，使用起來也比較的順手，結合微軟官方的教程進行了安卓 ...
  • wpf ToggleButton選中效果和一個登錄界面
    前言 QuestPDF 是一個開源 .NET 庫，用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫，它徹底改變了我們生成 PDF 文檔的方 ...
  • 彈幕樹洞項目功能新增篇
    項目地址 項目後端地址： https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址： ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址： http://tree ...
  • 第27篇 sqlserver2022詳細安裝步驟
    話不多說，直接開乾 一.下載 1.官方鏈接下載： https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe，運行開始下載SQL server； 二. ...
  • .NET 開源高性能 MQTT 類庫
    前言 隨著物聯網（IoT）技術的迅猛發展，MQTT（消息隊列遙測傳輸）協議憑藉其輕量級和高效性，已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫，為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog文檔翻譯系列（六） - 可用的接收器、增強器、格式化輸出
    Serilog支持多種接收器用於日誌存儲，增強器用於添加屬性，LogContext管理動態屬性，支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項，適用於不同需求。 ...
  • 警惕 Visual Studio 屬性求值副作用導致邏輯不符合預期
    目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據，爬取信息時需要模擬瀏覽器行為，否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下： 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • [使用目前最新版]HybridCLR6.9.0+YooAsset2.2.4實現純C# Unity熱更新方案 (一)
    1.前言 什麼是熱更新 游戲或者軟體更新時，無需重新下載客戶端進行安裝，而是在應用程式啟動的情況下，在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR，Xlua，ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles，Addressable， ...
  • 在 ASP.NET Core Web API 中使用操作篩選器統一處理通用操作
    本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺，其實像阿裡雲，騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後，它會送 ...
  • 第28篇 如何.net中實現高效可靠數據同步api
    通過以下方式可以高效，並保證數據同步的可靠性 1.API設計 使用RESTful設計，確保API端點明確，並使用適當的HTTP方法（如POST用於創建，PUT用於更新）。 設計清晰的請求和響應模型，以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證，確保接收到的數據符合預期格 ...
所有分類