目 錄 1. 概述... 2 2. 將來集成到iNeuOS平臺演示... 3 3. iNeuVideo結構... 3 4. iNeuVideo部署及應用... 3 5. HTML5終端視頻監測代碼... 5 6. 基於資料庫應用使用效果... 6 1. 概述 iNeuVideo是視頻服務組件,主要負 ...
目 錄
1. 概述... 2
2. 將來集成到iNeuOS平臺演示... 3
3. iNeuVideo結構... 3
4. iNeuVideo部署及應用... 3
5. HTML5終端視頻監測代碼... 5
6. 基於資料庫應用使用效果... 6
1. 概述
iNeuVideo是視頻服務組件,主要負責把RTSP的視頻流數據轉碼成WebSocket協議的視頻流數據,為終端提供視頻監測服務。iNeuVideo後期會集成到iNeuOS工業互聯網平臺的Web組態(iNeuView)上,拖動組件快速構建視頻監測。結合物聯網服務(iNeuKernel)採集設備或感測器的數據,形成視頻數據+設備數據的整體監測服務。參見《iNeuKernel(物聯網核心組件)遠程式控制制標準化設計與實現》,可以實現遠程式控制制。
iNeuVideo現在僅支持RTSP->WebSocket,現在主流攝像頭廠家(海康威視等)基本支持RTSP協議,可以很方便的接入視頻數據流。後期集成RTSP->RTMP和RTSP->HTTP的協議。基於iNeuVideo服務,其他公司也可以形成自己的產品,後面應用會具體介紹。
應用效果,如下圖:
針對視頻監測幾個協議概念:RTSP、RTMP、HTTP和WebSocket等進行簡單介紹:
(1)RSTP、RTMP、HTTP協議共同點,他們都是應用層協議。理論上這三種協議都可以做直播和點播,但直播一般用RTSP和RTMP點播用HTTP。
(2)RSTP、RTMP、HTTP協議區別
HTTP將數據作為文件處理,所以HTTP不是流媒體協議,RTMP和RTSP是流媒體協議。
RTMP是Adobe的私有協議,未完全公開,RTSP和HTTP是共有協議。
RTMP一般傳輸flv,f4v格式流,RTSP傳輸ts,MP4格式流,HTTP沒有特定的流。
RTSP一般需要2-3個通道,數據和命令通道分開,RTMP和HTTP在一個通道上傳輸命令和數據。
WebSocket協議,基於HTML5提供的一種在單個 TCP 連接上進行全雙工通訊的協議。針對終端與服務端交互應用較廣泛。
2. 將來集成到iNeuOS平臺演示
線上演示:http://demo.ineuos.net (註:伺服器比較慢,請耐心等待。自已註冊用戶,體驗系統功能)
視頻演示:http://www.ineuos.net/video/iNeuOS%20and%20app.mp4
驅動開發:http://www.ineuos.net/index.php/products/ineukernel-15.html (v2.1版本)
手機APP:http://demo.ineuos.net/app/ineuos_app.apk
3. iNeuVideo結構
視頻源一般為RTSP協議,由iNeuVideo轉碼服務拉取視頻流數據,經過代碼轉發服務向WebSocket連接的終端廣播數據,HTML5終端進行數據展示。結構示意,如下圖:
4. iNeuVideo部署及應用
iNeuVideo基於.NETCore 3.1版本開發,.NETCore 3.1的安裝部署參見:https://dotnet.microsoft.com/learn/dotnet/hello-world-tutorial/install。
iNeuVideo下載:百度網盤下載,包括服務、資料庫腳本和HTML5腳本。這是綠化版本的軟體,直接下載就可以應用,應用有兩種模式:基於命令行和基於資料庫。
(1)基於命令行的應用
首先使用管理員模式打開命令行,進入iNeuVideo目錄,第一次運行的時候需要執行:dotnet iNeuVideoTool.dll,檢測和配置當前系統。
其次輸入參數執行:dotnet iNeuVideo.dll rtsp://192.168.101.1:18554/stream1,進行視頻轉換,視頻轉換後的WebSocket地址對應:ws:// 192.168.101.1:9091/ineuos/live1,live後邊的編號自動增加。如下圖:
(2)基於資料庫的應用
其他公司可以使用iNeuVideo服務組件,基於資料庫的應用形成自己的產品,前臺業務系統操作資料庫可以完成對視頻流拉取、轉碼、推送等全流程操作。
mysql資料庫只有一個表:Video,只需要對這個表進行操作,表結構如下:
DROP TABLE IF EXISTS `video`; CREATE TABLE `video` ( `Id` varchar(32) CHARACTER SET utf8 COLLATE utf8_bin NOT NULL COMMENT '主鍵', `Key` varchar(255) CHARACTER SET utf8 COLLATE utf8_bin NOT NULL COMMENT 'http://*.*/ineuos/live1,live1就是key.', `VideoSource` varchar(255) CHARACTER SET utf8 COLLATE utf8_bin NOT NULL COMMENT '視頻流源地址,一般為rtsp協議。', `VideoSourceProtocol` varchar(10) CHARACTER SET utf8 COLLATE utf8_bin NOT NULL COMMENT '現在支持,包括:rtsp。', `VideoDest` varchar(255) CHARACTER SET utf8 COLLATE utf8_bin NOT NULL COMMENT '視頻流目標地址,從VideoSource轉碼到VideoDest,不需要設置,系統自動生成。', `VideoDestProtocol` varchar(10) CHARACTER SET utf8 COLLATE utf8_bin NOT NULL COMMENT '現在支持,包括:websocket。', PRIMARY KEY (`Id`) USING BTREE, UNIQUE INDEX `Key`(`Key`) USING BTREE ) ENGINE = InnoDB CHARACTER SET = utf8 COLLATE = utf8_bin ROW_FORMAT = Dynamic;
在iNeuVideo\iNeuKernel\ SourceConfig.cfg文件下配置資料庫連接信息
以管理員的模式運行【start-win.bat】批處理文件,直接讀取資料庫的信息進行視頻流的操作,不需要其他的操作。
5. HTML5終端視頻監測代碼
基於MPEG標準的視頻編碼進行解碼,底層使用canvas進行顯示,也有其他的JS組件可以使用。代碼如下:
<!DOCTYPE html> <html> <head> <title>JSMpeg Stream Client</title> <style type="text/css"> html, body {text-align: center;} </style> </head> <body> <canvas id="video-canvas"></canvas> <canvas id="video-canvas1"></canvas> <script type="text/javascript" src="jsmpeg.min.js"></script> <script type="text/javascript"> var canvas = document.getElementById('video-canvas'); var url = 'ws://127.0.0.1:9091/ineuos/live1'; var player = new JSMpeg.Player(url, {canvas: canvas}); var canvas1 = document.getElementById('video-canvas1'); var url1 = 'ws://127.0.0.1:9091/ineuos/live2'; var player1 = new JSMpeg.Player(url1, {canvas: canvas1}); </script> </body> </html>
6. 基於資料庫應用使用效果
文章:
《.NET Core開發的iNeuOS工業互聯網平臺,發佈 iNeuDA 數據分析展示組件,快捷開發圖形報表和數據大屏》
《[視頻演示].NET Core開發的iNeuOS物聯網平臺,實現從設備&PLC、雲平臺、移動APP數據鏈路閉環 》
《.NET Core開發的iNeuOS物聯網平臺部署樹霉派(raspbian),從網關到雲端整體解決方案》
《.NET Core開發的iNeuOS物聯網平臺部署在Ubuntu操作系統,無縫跨平臺》
《iNeuOS 物聯網雲操作系統2.0發佈,集成設備容器、視圖建模、機器學習三大模塊 》
物聯網&大數據技術 QQ群:54256083
物聯網&大數據合作 QQ群:727664080
聯繫QQ:504547114
合作微信:wxzz0151