System.ArgumentOutOfRangeException: 索引和長度必須引用該字符串內的位置。 參數名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind()
【技術實現步驟摘要】
本申請涉及計算機,尤其涉及一種導播視頻優化方法、裝置、存儲介質以及圖像采集設備。
技術介紹
1、在智能化教育場景中,為全面記錄與高質量呈現教學過程,智能化教室配備了多相機的拍攝系統、智慧黑板及導播主機。其中,各相機可以拍攝不同人物對象和不同角度的全景畫面和特寫畫面;智慧黑板則用于智能化的演示板書細節;導播主機則實時拼接片源,通過靈活切換全景與特寫,合成導播視頻,實現對教學過程的智能錄制。
2、如此可以看出,導播視頻的質量能夠直接影響對教學場景與內容的記錄效果。因此,需要一種導播視頻優化方法,以合成高質量的導播視頻。
技術實現思路
1、本申請提供一種導播視頻優化方法、裝置、存儲介質以及圖像采集設備,可以解決相關技術中導播視頻質量不佳的技術問題。
2、第一方面,本申請實施例提供一種導播視頻優化方法,應用于圖像采集設備,該方法包括:確定當前導播成片對應的原始片源;將上述原始片段輸入優化事件跟蹤模型,得到上述優化事件跟蹤模型輸出的優化事件碼;上述優化事件跟蹤模型為利用初始事件跟蹤模型根據上述原始片源的預測事件碼和標準事件碼進行訓練得到,上述標準事件碼用于標識上述原始片源中的標準關鍵事件和上述標準關鍵事件的觸發時間,上述預測事件碼為上述初始事件跟蹤模型對上述原始片源輸出的預測結果;向導播設備發送上述優化事件碼,上述優化事件碼用于生成與上述原始片源對應的優化導播成片。
3、通過上述第一方面的技術方案帶來的有益效果至少包括:對在實際場景中表現不佳的導播成片的片
4、在一些可能的實現方式中,上述方法還包括:根據上述優化事件碼截取出上述原始片源中目標拍攝對象的特寫畫面,向上述導播設備發送上述特寫畫面,上述特寫畫面用于生成與上述原始片源對應的優化導播成片。
5、通過上述可能的實現方式中的技術方案,在重新生成本次導播成片時,還可以預先根據優化事件碼對原始片源截取出有目標拍攝對象的特寫畫面,保留重要信息多的部分而去除原始片源中的冗余部分。然后將特寫畫面也發送至導播設備,使得其能夠通過更準確的事件碼和預先截取出的特寫畫面來重新生成導播成片,并將原本有問題的導播成品替換為修復后的導播成片,方便用戶使用優化導播成片,提升用戶體驗。
6、在一些可能的實現方式中,上述方法還包括:獲取上述原始片源的標準事件碼;在圖像采集設備仿真環境中將上述原始片源作為樣本,對上述初始事件跟蹤模型進行訓練;當上述預測事件碼與上述標準事件碼之間滿足預設匹配條件時,得到上述優化事件跟蹤模型。
7、通過上述可能的實現方式中的技術方案,將帶有正確的、準確的標準事件碼的原始片源作為樣本,對初始事件跟蹤模型進行多次迭代訓練,使得模型的訓練調參方向能夠與問題現場緊密結合。直至初始事件跟蹤模型對原始片源輸出的預測事件碼與標準事件碼之間滿足預設匹配條件時,就說明此時模型已經能夠準確識別原始片源中的關鍵事件,也就是通過以真實數據作為驅動的跟蹤導播算法的優化鏈路得到了優化事件跟蹤模型。
8、在一些可能的實現方式中,上述獲取上述原始片源的標準事件碼,包括:確定上述當前導播成片中的至少一個異常畫面在上述原始片源中對應的關鍵片段素材,并獲取各關鍵片段素材對應的標準事件碼;上述在圖像采集設備仿真環境中將上述原始片源作為樣本,對上述初始事件跟蹤模型進行訓練,包括:在圖像采集設備仿真環境中將上述各關鍵片段素材作為樣本,對上述初始事件跟蹤模型進行訓練。
9、通過上述可能的實現方式中的技術方案,在對初始事件跟蹤模型進行訓練時,考慮到龐大的原始片源中存在部分片段中是沒有發生關鍵事件的或者已經被正確識別并剪輯的,那么這些片段在算法優化時沒有太大幫助,因此可以預先將當前導播成片中存在異常的畫面所對應的關鍵片段素材都截取出來,針對性的對篩選出的關鍵片段素材添加標準事件碼,然后以這些關鍵片段素材為樣本進行后續的模型訓練,提高模型訓練的效率。
10、在一些可能的實現方式中,上述在圖像采集設備仿真環境中將上述原始片源作為樣本,對上述初始事件跟蹤模型進行訓練,包括:在圖像采集設備仿真環境中,將上述原始片源存儲至上述初始事件跟蹤模型的輸入數據流文件中;確定上述初始事件跟蹤模型對上述原始片源輸出的預測事件碼,并判斷上述預測事件碼與上述標準事件碼之間是否滿足預設匹配條件;若不滿足,則基于上述預測事件碼與上述標準事件碼調整上述初始事件跟蹤模型的參數。
11、通過上述可能的實現方式中的技術方案,仿真環境中的初始事件跟蹤模型開始運行時,其輸入數據是來自于仿真設備的實時采集數據,那么為了讓模型接收樣本數據作為輸入,就需要將原始片源替換至初始事件跟蹤模型的輸入數據流文件中,以使得初始事件跟蹤模型能夠以原始片源作為輸入數據對原始片源輸出預測事件碼。當模型輸出的預測事件碼和標準事件碼之間還滿足預設匹配條件時,則說明模型性能還沒有擬合至預期,此時就可以根據預測事件碼和標準事件碼對初始事件跟蹤模型進行調參,以優化模型中的各種網絡參數。
12、在一些可能的實現方式中,上述方法還包括:獲取上述優化事件跟蹤模型;將上述初始事件跟蹤模型替換為上述優化事件跟蹤模型。
13、通過上述可能的實現方式中的技術方案,除了直接在圖像采集設備上進行模型訓練之外,還可以在其他支持模型的設備上來對模型進行訓練和收斂;模型收斂后,圖像采集設備再獲取優化好的模型并將原本部署的初始模型替換為優化模型,使得圖像采集設備可以基于優化事件跟蹤模型對之后采集到的片源輸出事件碼,進而持續提高后續導播成片的質量。
14、在一些可能的實現方式中,上述確定當前導播成片對應的原始片源,包括:確定上述當前導播成片對應的所有片源中與上述圖像采集設備對應的片源為上述原始片源。
15、通過上述可能的實現方式中的技術方案,在實際應用場景中,導播成片中可以包括多個圖像采集設備對多個不同拍攝對象所采集的畫面。那么對于單個設備來說,在確定原始片源時,可以首先確定當前導播成片所用到的所有片源,這些片源之中,具有本地圖像采集設備標識的片源即為本設備針對當前導播成片采集到的原始片源。進而本設備應該使用自己所采集的原始片源來針對性地優化自身所部署的初始事件跟蹤模型。
16、第二方面,本申請實施例提供一種導播視頻優化裝置,應用于圖像采集設備,該裝置包括:
17、數據獲取模塊,用于確定當前導播成片對應的原始片源;模型輸出模塊,用于將上述原始片段輸入優化事件跟蹤模型,得到上述優化事件跟蹤模型輸出的優化事件碼;上述優化事件跟蹤模型為利用初始事件跟蹤模型根據上述原始片源的預測事件碼和標本文檔來自技高網...
【技術保護點】
1.一種導播視頻優化方法,其特征在于,應用于圖像采集設備,所述方法包括:
2.根據權利要求1所述的方法,其特征在于,所述方法還包括:
3.根據權利要求1或2所述的方法,其特征在于,所述方法還包括:
4.根據權利要求3所述的方法,其特征在于,所述獲取所述原始片源的標準事件碼,包括:
5.根據權利要求3所述的方法,其特征在于,所述在圖像采集設備仿真環境中將所述原始片源作為樣本,對所述初始事件跟蹤模型進行訓練,包括:
6.根據權利要求1或2所述的方法,其特征在于,所述方法還包括:
7.根據權利要求1或2所述的方法,其特征在于,所述確定當前導播成片對應的原始片源,包括:
8.一種導播視頻優化裝置,其特征在于,應用于圖像采集設備,所述裝置包括:
9.一種計算機可讀存儲介質,其特征在于,所述計算機可讀存儲介質存儲有計算機程序代碼,當所述計算機程序代碼在圖像采集設備上運行時,使得所述圖像采集設備執行如權利要求1~7任意一項的所述方法的步驟。
10.一種圖像采集設備,其特征在于,包括存儲器
...【技術特征摘要】
1.一種導播視頻優化方法,其特征在于,應用于圖像采集設備,所述方法包括:
2.根據權利要求1所述的方法,其特征在于,所述方法還包括:
3.根據權利要求1或2所述的方法,其特征在于,所述方法還包括:
4.根據權利要求3所述的方法,其特征在于,所述獲取所述原始片源的標準事件碼,包括:
5.根據權利要求3所述的方法,其特征在于,所述在圖像采集設備仿真環境中將所述原始片源作為樣本,對所述初始事件跟蹤模型進行訓練,包括:
6.根據權利要求1或2所述的方法,其特征在于,所述方法還包括:
7.根...
【專利技術屬性】
技術研發人員:黃浩成,陳志強,
申請(專利權)人:廣州開得聯軟件技術有限公司,
類型:發明
國別省市:
還沒有人留言評論。發表了對其他瀏覽者有用的留言會獲得科技券。