System.ArgumentOutOfRangeException: 索引和長度必須引用該字符串內的位置。 參數名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind()
【技術實現步驟摘要】
本專利技術屬于視頻傳輸,具體涉及一種光場視頻的無損傳輸方法、裝置、設備及介質。
技術介紹
1、近年,元宇宙的概念迅速崛起,其將多項新技術整合并形成了全新的虛實融合的互聯網應用和社會形態。這種技術融合為構建獨立的社交關系和金融體系提供了契機,開啟了嶄新的未來前景。元宇宙的發展使人類的感官維度被大大拓展,用戶可以獲得完全沉浸式的體驗。
2、作為構建元宇宙世界的重要元素之一,光場視頻的重建和傳輸仍面臨多方面的挑戰。光場視頻的數據量巨大,需要大量的存儲和處理資源。同時傳輸和顯示光場視頻需要高帶寬和低延遲的網絡,這需要快速發展的5g技術和高速互聯網基礎設施的支持。并且為了使用戶能夠獲得完全沉浸式的體驗,需要解決對于光場視頻的高精度重建,重建后的光場視頻仍可能存在分辨率較低的情況,需要有效手段對其進行去模糊化。
技術實現思路
1、為解決現有技術中存在的上述問題,本專利技術提供了一種光場視頻的無損傳輸方法、裝置、設備及介質。
2、本專利技術的目的可以通過以下技術方案實現:
3、一種光場視頻的無損傳輸方法,所述無損傳輸方法的實施包括以下步驟:
4、s1:通過光場相機獲取光場視頻,壓縮所述光場視頻獲取壓縮光場圖像;
5、s2:傳輸所述壓縮光場圖像至接收端并通過重建獲取重建光場圖像;
6、s3:通過改進去模糊法處理所述重建光場圖像并獲取無損光場視頻。
7、優選的,所述步驟s1具體包括:
8、s101:將所述
9、s102:獲取所述四維光場圖像的中心子孔徑圖像,所述中心子孔徑圖像中含參考聚類中心集;
10、s103:獲取所述四維光場圖像的像素點;
11、s104:獲取所述四維光場圖像的像素權重距離;
12、s105:根據所述像素權重距離壓縮所述四維光場圖像獲取所述壓縮光場圖像。
13、優選的,所述步驟s104具體包括:
14、s104-1:將所述四維光場圖像轉化為cielab色彩空間,根據顏色通道計算顏色距離;
15、s104-2:根據所述參考聚類中心集計算位置距離;
16、s104-3:根據所述參考聚類中心集計算視差距離;
17、s104-4:根據所述顏色距離、所述位置距離、所述視差距離計算所述像素權重距離。
18、優選的,所述步驟s2具體包括:
19、s201:獲取壓縮光場圖像的光場深度圖并獲取光場深度圖像素點深度值;
20、s202:根據所述光場深度圖獲取重建像素點坐標,所述重建像素點坐標包括第一重建坐標分量、第二重建坐標分量、第三重建坐標分量;
21、s203:根據所述重建像素點坐標重建所述壓縮光場圖像的每個像素點并獲取所述重建光場圖像。
22、優選的,所述步驟s202具體包括:
23、s202-1:所述第一重建坐標分量的計算公式為,其中,h1為第一重建坐標分量,b為基線,f為焦距,i為中心子孔徑圖像面積,g為聚焦距離,m為光場深度圖像素點深度值,s為傳感器尺寸;
24、s202-2:所述第二重建坐標分量的計算公式為,其中,h2為第二重建坐標分量,i'為光場深度圖面積,i為中心子孔徑圖像面積,s為傳感器尺寸,h1為第一重建坐標分量,f為焦距;
25、s202-3:所述第三重建坐標分量的計算公式為,其中,h3為第二重建坐標分量,i''為壓縮光場圖像面積,i為中心子孔徑圖像面積,s為傳感器尺寸,h1為第一重建坐標分量,f為焦距。
26、優選的,所述步驟s3具體包括:
27、s301:獲取所述重建光場圖像的二維像素點坐標;
28、s302:基于環繞函數得到所述重建光場圖像的反射圖像,所述反射圖像的表達式為,其中,t為反射圖像,u為環繞函數個數,為第u環繞函數權重,i為重建光場圖像,g為環繞函數,(o,s)為二維像素點坐標;
29、s303:根據所述反射圖像優化所述重建光場圖像得到第一優化圖像,所述第一優化圖像的表達式為,其中,i'為第一優化圖像,i為重建光場圖像,t為反射圖像;
30、s304:基于所述第一優化圖像獲取無損光場圖像;
31、s305:集合所述無損光場圖像得到所述重建光場視頻。
32、優選的,所述步驟s304具體包括:
33、s304-1:獲取所述第一優化圖像的中心像素點坐標并計算歐式距離系數和差值系數,所述歐式距離系數的計算公式為,其中,θ為歐式距離系數,(o,s)為二維像素點坐標,(v,z)為中心像素點坐標,為環繞函數標準差;
34、所述差值系數的計算公式為,其中,為差值系數,i'為第一優化圖像,(o,s)為二維像素點坐標,(v,z)為中心像素點坐標,為環繞函數標準差,||·||為歐氏距離;
35、s304-2:根據所述歐式距離系數和所述差值系數計算無損圖像系數,計算公式為,其中,為無損圖像系數,θ為歐式距離系數,為差值系數,(o,s)為二維像素點坐標;
36、s304-3:根據所述無損圖像系數計算無損像素值,所述無損像素值的計算公式為,其中,e為無損像素值,e(q,r)為二維像素點(q,r)像素值,為無損圖像系數,(o,s)為二維像素點坐標,(q,r)位于以(o,s)為中心的(2&+1)×(2&+1)區域內,&為濾波窗口參數;
37、s304-4:根據所述無損像素值優化所述第一優化圖像的每個像素點并得到所述無損光場圖像。
38、一種光場視頻的無損傳輸裝置,用于執行上述所述的無損傳輸方法,其特征在于,包括視頻壓縮模塊、圖像重建模塊、無損處理模塊;
39、所述視頻壓縮模塊用于通過光場相機獲取光場視頻,壓縮所述光場視頻獲取壓縮光場圖像;
40、所述圖像重建模塊用于傳輸所述壓縮光場圖像至接收端并通過重建獲取重建光場圖像;
41、所述無損處理模塊用于通過改進去模糊法處理所述重建光場圖像并獲取無損光場視頻。
42、一種電子設備,包括存儲器、處理器及存儲在存儲器上并可在處理器上運行的計算機程序,所述處理器執行所述程序時實現上述所述的無損傳輸方法。
43、一種包含計算機可執行指令的存儲介質,所述計算機可執行指令在由計算機處理器執行時用于執行上述所述的無損傳輸方法。
44、本專利技術的有益效果為:
45、(1)通過壓縮光場視頻減少光場視頻占用的存儲空間、處理資源以及傳輸和顯示過程需要的帶寬,使得光場視頻的傳輸與顯示條件要求降低,有利于元宇宙世界發展;
46、(2)通過重建光場視頻恢復壓縮過程中的損耗,提升用戶體驗;
47、(3)通過改進去模糊法獲取無損光場視頻,解決重建后的光場視頻仍可能存在分辨率較低的情況,提升光場視頻精度;
<本文檔來自技高網...【技術保護點】
1.一種光場視頻的無損傳輸方法,其特征在于,所述無損傳輸方法的實施包括以下步驟:
2.根據權利要求1所述的無損傳輸方法,其特征在于,所述步驟S1具體包括:
3.根據權利要求2所述的無損傳輸方法,其特征在于,所述步驟S104具體包括:
4.根據權利要求1所述的無損傳輸方法,其特征在于,所述步驟S2具體包括:
5.根據權利要求4所述的無損傳輸方法,其特征在于,所述步驟S202具體包括:
6.根據權利要求1所述的無損傳輸方法,其特征在于,所述步驟S3具體包括:
7.根據權利要求6所述的無損傳輸方法,其特征在于,所述步驟S304具體包括:
8.一種應用權利要求1所述的光場視頻的無損傳輸方法的光場視頻的無損傳輸裝置,其特征在于,包括視頻壓縮模塊、圖像重建模塊、無損處理模塊;
9.一種電子設備,包括存儲器、處理器及存儲在存儲器上并在處理器上運行的計算機程序,其特征在于,所述處理器執行所述程序時實現如權利要求1-7中任一所述的無損傳輸方法。
10.一種包含計算機可執行指令的存儲介質,其特
...【技術特征摘要】
1.一種光場視頻的無損傳輸方法,其特征在于,所述無損傳輸方法的實施包括以下步驟:
2.根據權利要求1所述的無損傳輸方法,其特征在于,所述步驟s1具體包括:
3.根據權利要求2所述的無損傳輸方法,其特征在于,所述步驟s104具體包括:
4.根據權利要求1所述的無損傳輸方法,其特征在于,所述步驟s2具體包括:
5.根據權利要求4所述的無損傳輸方法,其特征在于,所述步驟s202具體包括:
6.根據權利要求1所述的無損傳輸方法,其特征在于,所述步驟s3具體包括:
7.根據權利要求...
【專利技術屬性】
技術研發人員:陳霄翔,范益波,汪小光,
申請(專利權)人:上海復瞰科技有限公司,
類型:發明
國別省市:
還沒有人留言評論。發表了對其他瀏覽者有用的留言會獲得科技券。