物聯網視頻遠程控制方法及系統技術方案

本發明專利技術提供了一種物聯網視頻遠程控制方法及系統，方法包括：網絡服務器，圖像處理服務器，遠程控制服務器，RTMP推流服務器，通過網絡服務器實現對網絡攝像頭以及遠程控制平臺的直接操作，以及通過html頁面或者flash技術在瀏覽器界面中實現視頻畫面與虛擬界面的動態融合，實現虛擬界面元件跟隨視頻畫面的變化而變化。實現了用戶在網頁中直接對網絡攝像機和物理硬件的操作，以及視頻畫面與虛擬界面在網頁中的融合。本平臺兼顧了物聯網遠程控制中視頻畫面的臨場感以及虛擬界面的低延時性，提高了用戶體驗，系統的用戶交互部分完全通過Web平臺實現，具有可移植性好易于推廣的特點。

【技術實現步驟摘要】
物聯網視頻遠程控制方法及系統
本專利技術涉及物聯網，視頻遠程控制領域，特別指一種基于互聯網架構，通過圖像處理技術將虛擬界面與視頻畫面動態融合，實現用戶通過瀏覽器在視頻畫面直接進行監控以及遠程操作的物聯網視頻遠程控制方法及系統。
技術介紹
當前物聯網遠程控制主要應用在大規模工業生產中，實現方式主要是采用虛擬界面，用虛擬開關，度量表，虛擬圖表等表示真實變量的狀態。或者采用組態模塊進行控制變量的表示，比較常用的比如LabVIEW等。除此之外這些軟件也可以實現視頻的嵌入，通過這種方式用戶除了可以觀察虛擬界面中變量的狀態之外，還可以更直觀的觀察硬件設備當前的狀態。提高用戶的臨場體驗。但是采用這種方式的遠程控制系統存在一些問題，首先是互聯網應用方面，這種方式搭建的網絡控制系統一般需要在客戶端安裝軟件從而實現遠端訪問，或者開發ActiveX控件，通過瀏覽器加載插件的方式實現客戶端的功能。但是ActiveX控件又存在一定局限性，首先是難以實現手機端等類似移動終端設備的訪問，其次是ActiveX控件對終端瀏覽器，計算機配置以及瀏覽器安全等級有一定要求，在大范圍使用過程中存在很多不便。同時在視頻監控領域，對于網絡遠端監控攝像機的訪問大都采用RTSP/RTMP協議，對于這一類網絡攝像機的訪問，同樣也會存在第三方ActiveX控件所帶來的安全和兼容性問題，為了解決這一問題，實現基于html網頁技術的網絡監控攝像機的控制，可以采用視頻系統與遠程控制系統分離設計，服務器中包含Web服務器與攝像機控制服務器，攝像機控制服務器由攝像機SDK開發包實現，專門用于與攝像機有關的數據傳遞，而Web服務器負責除攝像機外的其他數據傳遞，以及通過SOCKET通訊接口調用攝像機服務器中相關數據并將全部信息整合用于用戶交互。但是采用這種方案時，用戶端與網絡攝像機之間包含了Web服務器和攝像機控制服務器兩個服務器的消息轉發，這樣在時延消除和系統可靠性上都會有所欠缺。除此之外，不管是基于組態軟件還是基于網絡攝像機SDK所開發的視頻遠程控制系統，視頻畫面只是起到監控的作用。尤其在攝像機視角變化時，畫面中的實體元件與虛擬界面中組態模塊無法一一對應。視頻畫面與虛擬界面無法有效的動態融合。所以在此類遠程控制系統中，視頻只是輔助，虛擬界面是用戶交互的關鍵。
技術實現思路
為了解決上述的以及其他潛在的技術問題，本專利技術的主要目的在于基于Web服務器以及圖像處理機器學習技術提供一種通用的、便于移植的視頻監控遠程控制方法及系統。通過Web服務器實現對攝像頭以及遠程控制平臺的直接操作，以及通過html頁面或者flash技術在瀏覽器界面中實現視頻畫面與虛擬界面的動態融合，實現虛擬界面元件跟隨視頻畫面的變化而變化。為實現上述技術效果，本專利技術的第一方面提供了一種物聯網視頻遠程控制方法的實施例，其包括：獲取來自用戶交互頁面的控制指令，所述用戶交互頁面包括視頻畫面和供用戶交互的執行機構的虛擬界面；將所述控制指令傳輸至遠程控制服務器，以指示所述遠程控制服務器根據所述控制指令操作執行機構；響應于所述控制指令，調用網絡攝像機接口向網絡攝像機發送拍攝指令，以指示所述網絡攝像機執行拍攝操作；獲取所述網絡攝像機拍攝的視頻畫面中的執行機構的圖像偏移信息，并根據所述圖像偏移信息修改用戶交互頁面中的虛擬界面，使虛擬界面中的執行機構與視頻畫面中的執行機構保持一致；以及在所述用戶交互頁面展示所述網絡攝像機拍攝的所述視頻畫面和經修改的所述虛擬界面。在一些實施例中，所述方法還包括：生成用戶交互頁面；并且其中，所述獲取來自用戶交互頁面的控制指令，包括：響應于生成的所述用戶交互頁面接收到控制指令，獲取所述控制指令。在一些實施方式中，所述將所述控制指令傳輸至遠程控制服務器，以指示所述遠程控制服務器根據所述控制指令操作執行機構，還包括：獲取并保存來自所述遠程控制服務器的操作所述執行機構的實時操作數據；所述方法還包括：獲取查詢請求；并且，根據所述查詢請求，對所述實時操作數據進行數據處理，在所述用戶交互頁面展示經數據處理的所述實時操作數據。在一些實施方式中，本專利技術方法還包括：通過一推流服務器采集所述網絡攝像機拍攝的視頻畫面的畫面碼流，并向所述用戶交互頁面進行推流，以展示所述視頻畫面。在一些實施方式中，所述獲取所述網絡攝像機拍攝的視頻畫面中的執行機構的圖像偏移信息，包括：通過一圖像處理服務器周期性獲取視頻畫面，對虛擬界面中預先設置的執行機構重新進行定位與標定，并與預先設置的執行機構的定位與標定進行比對，獲取圖像偏移信息。本專利技術的第二方面提供了一種物聯網視頻遠程控制系統的實施例，其包括：獲取模塊，用于獲取來自用戶交互頁面的控制指令，所述用戶交互頁面包括視頻畫面和供用戶交互的執行機構的虛擬界面；傳輸模塊，用于將所述控制指令傳輸至遠程控制服務器，以指示所述遠程控制服務器根據所述控制指令操作執行機構；調用模塊，用于響應于所述控制指令，調用網絡攝像機接口向網絡攝像機發送拍攝指令，以指示所述網絡攝像機執行拍攝操作；界面交互模塊，用于獲取所述網絡攝像機拍攝的視頻畫面中的執行機構的圖像偏移信息，并根據所述圖像偏移信息修改用戶交互頁面中的虛擬界面，使虛擬界面中的執行機構與視頻畫面中的執行機構保持一致；以及展示模塊，用于在所述用戶交互頁面展示所述網絡攝像機拍攝的所述視頻畫面和經修改的所述虛擬界面。在一些實施方式中，本專利技術系統還包括：一頁面生成模塊，用于生成用戶交互頁面；并且，所述獲取模塊還用于：響應于生成的所述用戶交互頁面接收到控制指令，獲取所述控制指令。在一些實施方式中，本專利技術系統還包括：一數據庫管理模塊，用于獲取并保存來自所述遠程控制服務器的操作所述執行機構的實時操作數據；并且，所述獲取模塊還用于：獲取查詢請求，并根據所述查詢請求，對所述實時操作數據進行數據處理，在所述用戶交互頁面展示經數據處理的所述實時操作數據。在一些實施方式中，本專利技術系統還包括：一推流服務器，用于采集所述網絡攝像機拍攝的視頻畫面的畫面碼流，并向所述用戶交互頁面進行推流，以展示所述視頻畫面。在一些實施方式中，本專利技術系統還包括一圖像處理服務器，用于周期性獲取視頻畫面，對虛擬界面中預先設置的執行機構重新進行定位與標定，并與預先設置的執行機構的定位與標定進行比對，得到圖像偏移信息。本專利技術由于采用以上技術方案，具有以下優點：由于視頻部分采用網絡攝像機，并通過發送控制指令可以直接對網絡攝像機進行控制，無需中間服務器進行指令轉發，使用戶可以在用戶交互頁面中直接觀看視頻畫面并在用戶交互頁面中完成對網絡攝像機以及執行機構的一系列操作。避免了采用通常網絡監控所需要的安裝軟件或在網頁中嵌入ActiveX控件，從而避免了ActiveX控件的瀏覽器兼容問題和安全問題。同時本專利技術方法通過圖像處理技術實現了對于視頻圖像中執行機構的識別，在用戶交互頁面中可以將視頻畫面中執行機構(如按鈕等)用特殊符號標記，在網絡攝像機移動的情況下這些標記在畫面中同步移動，實現了用戶交互頁面中真實的視頻畫面與虛擬界面的融合，相比于純粹的虛擬界面極大的提高用戶臨場體驗。同時由于這一方法可直接在瀏覽器中運行，系統更新只需在網絡服務器中進行，系統維護更為便利。附圖說明為了更清楚地說明本專利技術實施例中的技術方案，下面將對本文檔來自技高網...

【技術保護點】
一種物聯網視頻遠程控制方法，其特征在于，包括：獲取來自用戶交互頁面的控制指令，所述用戶交互頁面包括視頻畫面和供用戶交互的執行機構的虛擬界面；將所述控制指令傳輸至遠程控制服務器，以指示所述遠程控制服務器根據所述控制指令操作執行機構；響應于所述控制指令，調用網絡攝像機接口向網絡攝像機發送拍攝指令，以指示所述網絡攝像機執行拍攝操作；獲取所述網絡攝像機拍攝的視頻畫面中的執行機構的圖像偏移信息，并根據所述圖像偏移信息修改用戶交互頁面中的虛擬界面，使虛擬界面中的執行機構與視頻畫面中的執行機構保持一致；以及在所述用戶交互頁面展示所述網絡攝像機拍攝的所述視頻畫面和經修改的所述虛擬界面。

【技術特征摘要】
1.一種物聯網視頻遠程控制方法，其特征在于，包括：獲取來自用戶交互頁面的控制指令，所述用戶交互頁面包括視頻畫面和供用戶交互的執行機構的虛擬界面；將所述控制指令傳輸至遠程控制服務器，以指示所述遠程控制服務器根據所述控制指令操作執行機構；響應于所述控制指令，調用網絡攝像機接口向網絡攝像機發送拍攝指令，以指示所述網絡攝像機執行拍攝操作；獲取所述網絡攝像機拍攝的視頻畫面中的執行機構的圖像偏移信息，并根據所述圖像偏移信息修改用戶交互頁面中的虛擬界面，使虛擬界面中的執行機構與視頻畫面中的執行機構保持一致；以及在所述用戶交互頁面展示所述網絡攝像機拍攝的所述視頻畫面和經修改的所述虛擬界面。2.如權利要求1所述的物聯網視頻遠程控制方法，其特征在于，所述方法還包括：生成用戶交互頁面；并且其中，所述獲取來自用戶交互頁面的控制指令，包括：響應于生成的所述用戶交互頁面接收到控制指令，獲取所述控制指令。3.如權利要求1所述的物聯網視頻遠程控制方法，其特征在于，所述將所述控制指令傳輸至遠程控制服務器，以指示所述遠程控制服務器根據所述控制指令操作執行機構，還包括：獲取并保存來自所述遠程控制服務器的操作所述執行機構的實時操作數據；所述方法還包括：獲取查詢請求；并且，根據所述查詢請求，對所述實時操作數據進行數據處理，在所述用戶交互頁面展示經數據處理的所述實時操作數據。4.如權利要求1所述的物聯網視頻遠程控制方法，其特征在于，所述方法還包括：通過一推流服務器采集所述網絡攝像機拍攝的視頻畫面的畫面碼流，并向所述用戶交互頁面進行推流，以展示所述視頻畫面。5.如權利要求1～4中任一項所述的物聯網視頻遠程控制方法，其特征在于，所述獲取所述網絡攝像機拍攝的視頻畫面中的執行機構的圖像偏移信息，包括：通過一圖像處理服務器周期性獲取視頻畫面，對虛擬界面中預先設置的執行機構重新進行定位與標定，并與預先設置的執行機構的定...

【專利技術屬性】
技術研發人員：王元，田作華，
申請(專利權)人：王元，
類型：發明
國別省市：黑龍江,23