iNeuOS工業互聯平臺，.NETCore開發的視頻服務組件iNeuVideo，RTSP轉WebSocket

1. 概述... 2

2. 將來集成到iNeuOS平臺演示... 3

3. iNeuVideo結構... 3

4. iNeuVideo部署及應用... 3

5. HTML5終端視頻監測代碼... 5

6. 基于數據庫應用使用效果... 6

1. 概述

iNeuVideo是視頻服務組件，主要負責把RTSP的視頻流數據轉碼成WebSocket協議的視頻流數據，為終端提供視頻監測服務。iNeuVideo后期會集成到iNeuOS工業互聯網平臺的Web組態（iNeuView）上，拖動組件快速構建視頻監測。結合物聯網服務（iNeuKernel）采集設備或傳感器的數據，形成視頻數據+設備數據的整體監測服務。參見《iNeuKernel（物聯網核心組件）遠程控制標準化設計與實現》，可以實現遠程控制。

iNeuVideo現在僅支持RTSP->WebSocket，現在主流攝像頭廠家（海康威視等）基本支持RTSP協議，可以很方便的接入視頻數據流。后期集成RTSP->RTMP和RTSP->HTTP的協議。基于iNeuVideo服務，其他公司也可以形成自己的產品，后面應用會具體介紹。

應用效果，如下圖：

針對視頻監測幾個協議概念：RTSP、RTMP、HTTP和WebSocket等進行簡單介紹：

（1）RSTP、RTMP、HTTP協議共同點，他們都是應用層協議。理論上這三種協議都可以做直播和點播，但直播一般用RTSP和RTMP點播用HTTP。
（2）RSTP、RTMP、HTTP協議區別

HTTP將數據作為文件處理，所以HTTP不是流媒體協議，RTMP和RTSP是流媒體協議。

RTMP是Adobe的私有協議，未完全公開，RTSP和HTTP是共有協議。
RTMP一般傳輸flv,f4v格式流，RTSP傳輸ts，MP4格式流，HTTP沒有特定的流。

RTSP一般需要2-3個通道，數據和命令通道分開，RTMP和HTTP在一個通道上傳輸命令和數據。

WebSocket協議，基于HTML5提供的一種在單個 TCP 連接上進行全雙工通訊的協議。針對終端與服務端交互應用較廣泛。

2. 將來集成到iNeuOS平臺演示

在線演示：http://demo.ineuos.net （注：服務器比較慢，請耐心等待。自已注冊用戶，體驗系統功能）

視頻演示：http://www.ineuos.net/video/iNeuOS%20and%20app.mp4

驅動開發：http://www.ineuos.net/index.php/products/ineukernel-15.html （v2.1版本）

手機APP：http://demo.ineuos.net/app/ineuos_app.apk

3. iNeuVideo結構

視頻源一般為RTSP協議，由iNeuVideo轉碼服務拉取視頻流數據，經過代碼轉發服務向WebSocket連接的終端廣播數據，HTML5終端進行數據展示。結構示意，如下圖：

4. iNeuVideo部署及應用

iNeuVideo基于.NETCore 3.1版本開發，.NETCore 3.1的安裝部署參見：https://dotnet.microsoft.com/learn/dotnet/hello-world-tutorial/install。

iNeuVideo下載：百度網盤下載，包括服務、數據庫腳本和HTML5腳本。這是綠化版本的軟件，直接下載就可以應用，應用有兩種模式：基于命令行和基于數據庫。

（1）基于命令行的應用

首先使用管理員模式打開命令行，進入iNeuVideo目錄，第一次運行的時候需要執行：dotnet iNeuVideoTool.dll，檢測和配置當前系統。

其次輸入參數執行：dotnet iNeuVideo.dll rtsp://192.168.101.1:18554/stream1，進行視頻轉換，視頻轉換后的WebSocket地址對應：ws:// 192.168.101.1:9091/ineuos/live1，live后邊的編號自動增加。如下圖：

（2）基于數據庫的應用

其他公司可以使用iNeuVideo服務組件，基于數據庫的應用形成自己的產品，前臺業務系統操作數據庫可以完成對視頻流拉取、轉碼、推送等全流程操作。

mysql數據庫只有一個表：Video，只需要對這個表進行操作，表結構如下：

DROP TABLE IF EXISTS `video`;
CREATE TABLE `video`  (
  `Id` varchar(32) CHARACTER SET utf8 COLLATE utf8_bin NOT NULL COMMENT '主鍵',
  `Key` varchar(255) CHARACTER SET utf8 COLLATE utf8_bin NOT NULL COMMENT 'http://*.*/ineuos/live1,live1就是key.',
  `VideoSource` varchar(255) CHARACTER SET utf8 COLLATE utf8_bin NOT NULL COMMENT '視頻流源地址，一般為rtsp協議。',
  `VideoSourceProtocol` varchar(10) CHARACTER SET utf8 COLLATE utf8_bin NOT NULL COMMENT '現在支持，包括：rtsp。',
  `VideoDest` varchar(255) CHARACTER SET utf8 COLLATE utf8_bin NOT NULL COMMENT '視頻流目標地址，從VideoSource轉碼到VideoDest，不需要設置，系統自動生成。',
  `VideoDestProtocol` varchar(10) CHARACTER SET utf8 COLLATE utf8_bin NOT NULL COMMENT '現在支持，包括：websocket。',
  PRIMARY KEY (`Id`) USING BTREE,
  UNIQUE INDEX `Key`(`Key`) USING BTREE
) ENGINE = InnoDB CHARACTER SET = utf8 COLLATE = utf8_bin ROW_FORMAT = Dynamic;

在iNeuVideo\iNeuKernel\ SourceConfig.cfg文件下配置數據庫連接信息

以管理員的模式運行【start-win.bat】批處理文件，直接讀取數據庫的信息進行視頻流的操作，不需要其他的操作。

5. HTML5終端視頻監測代碼

基于MPEG標準的視頻編碼進行解碼，底層使用canvas進行顯示，也有其他的JS組件可以使用。代碼如下：

<!DOCTYPE html>
<html>
<head>
       <title>JSMpeg Stream Client</title>
       <style type="text/css">
              html, body {text-align: center;}
       </style>
</head>
<body>
       <canvas id="video-canvas"></canvas>
       <canvas id="video-canvas1"></canvas>
       <script type="text/javascript" src="jsmpeg.min.js"></script>
       <script type="text/javascript">
              var canvas = document.getElementById('video-canvas');
              var url = 'ws://127.0.0.1:9091/ineuos/live1';
              var player = new JSMpeg.Player(url, {canvas: canvas});

              var canvas1 = document.getElementById('video-canvas1');
              var url1 = 'ws://127.0.0.1:9091/ineuos/live2';
              var player1 = new JSMpeg.Player(url1, {canvas: canvas1});
       </script>
</body>
</html>