【技術實現步驟摘要】
本公開一般而言涉及光場(light?field，lf)視頻編解碼的領域。更具體而言，本公開涉及一種用于預測屬于由i型全光(plenoptic)相機捕獲的子孔徑圖像的像素的分量的方法。本公開例如在lf壓縮和/或解壓縮領域中可以是令人感興趣的。
技術介紹
1、一方面，視圖綜合預測(view?synthesis?prediction，vsp)已經被標準化為3d-hevc擴展的一部分，用于多視圖視頻編解碼。更具體而言，vsp包括使用深度信息將紋理數據從參考視圖扭曲到當前視圖，使得可以生成對當前視圖的預測器(例如，參見s.yea和a.vetro的“用于多視圖視頻編解碼的視圖綜合預測(view?synthesis?prediction?formultiview?video?coding)”，視頻處理(signal?processing)：圖像通信(imagecommunication)，第24卷，第1-2期，第89-100頁，2009年1月)。
2、另一方面，lf數據包括：
3、-多視圖視頻，即，在從多個相機角度同時捕獲屬于圖像矩陣的圖像的視頻中；或者
4、-全光視頻，也稱為基于小透鏡的視頻，即，在其中屬于圖像矩陣的圖像是子孔徑圖像的視頻中，這些子孔徑圖像是除了使用主透鏡系統之外還使用透鏡矩陣從單個相機同時捕獲的。
5、vsp除其它外還假設用于捕獲lf視頻的相機的針孔模型。這阻止在lf視頻編解碼中實現高性能，特別是對于由不能忽略孔徑的延伸的全光相機捕獲的lf。
6、因此，需要一種用
技術實現思路
1、本公開涉及一種用于預測在由i型全光相機的傳感器捕獲的子孔徑圖像的矩陣中屬于當前子孔徑圖像的當前像素的分量的方法。該方法包括：
2、-至少基于以下條件確定傳感器上的位置：
3、-從相機的主透鏡的出射光瞳到相機的微透鏡陣列的距離d；
4、-主透鏡的焦距f；
5、-微透鏡陣列的微透鏡的焦距f；以及
6、-相機的模型的參數集，該參數集允許推導描述與傳感器的像素對應的光線場的兩平面參數化；
7、-基于屬于矩陣中的參考子孔徑圖像并且位于該位置近鄰的傳感器上的至少一個參考像素來預測當前像素的分量。
8、本公開的另一方面涉及一種用于預測屬于由i型全光相機的傳感器捕獲的子孔徑圖像的矩陣中的當前子孔徑圖像的當前像素的分量的設備。此類設備包括處理器，處理器被配置用于：
9、-至少基于以下條件確定傳感器上的位置：
10、-從相機的主透鏡(100l)的出射光瞳到相機的微透鏡陣列(100mla)的距離d；
11、-主透鏡的焦距f；
12、-微透鏡陣列的微透鏡的焦距f；以及
13、-相機的模型的參數集，該參數集允許推導描述與傳感器的像素對應的光線場的兩平面參數化；
14、-基于屬于矩陣中的參考子孔徑圖像并且位于該位置近鄰的傳感器上的至少一個參考像素來預測當前像素的分量。
15、本公開的另一方面涉及攜帶由i型全光相機的傳感器捕獲的光場的比特流。這種比特流包括元數據，元數據包括：
16、-從相機的主透鏡的出射光瞳到相機的微透鏡陣列的距離d；
17、-主透鏡的焦距f；
18、-微透鏡陣列的微透鏡的焦距f；以及
19、-相機的模型的參數集，該參數集允許推導描述與傳感器的像素對應的光線場的兩平面參數化。
20、此外，本公開涉及一種非暫時性計算機可讀介質，該非暫時性計算機可讀介質包括記錄在其上并且能夠由處理器運行的計算機程序產品，計算機程序產品包括程序代碼指令，該程序代碼指令包括用于實現先前描述的用于預測在由i型全光相機的傳感器捕獲的子孔徑圖像的矩陣中屬于當前子孔徑圖像的當前像素的分量的方法的程序代碼指令。
本文檔來自技高網...【技術保護點】
1.一種方法，作為編碼或解碼方法的一部分，用于預測當前像素的分量，所述方法包括：
2.根據權利要求1所述的方法，其中所述確定所述位置包括：
3.根據權利要求1所述的方法，其中所述兩平面參數化包括分別定義主光線與所述相機的坐標系中的平面z＝0和z＝1的交點I0[i,j,u,v]和I1[i,j,u,v]，所述主光線與所述子孔徑圖像的所述矩陣中的索引為(i,j)的所述子孔徑圖像中的位置(u,v)的像素對應，其中所述對象焦平面是所述相機的所述坐標系中的平面z＝F，并且其中，所述確定坐標和分別強制符合以下關系：
4.根據權利要求3所述的方法，其中所述給定平面是所述相機的坐標系中的平面z＝0，并且其中確定第一坐標強制符合關系：
5.根據權利要求4所述的方法，其中計算第二坐標強制符合等式：
6.根據權利要求5所述的方法，其中所述傳感器的所述平面是所述相機的坐標系中的平面z＝-D-f，并且其中確定所述位置強制符合等式：
7.根據權利要求1所述的方法，其中預測所述當前像素的所述分量包括：
8.根據權利要求7所述的方
9.一種編碼方法，包括權利要求1所述的預測方法。
10.一種解碼方法，包括權利要求1所述的預測方法。
11.一種非暫時性計算機可讀存儲介質，包括當在計算機或處理器上執行程序時，用于實現權利要求1所述的方法的程序代碼指令。
12.一種設備，作為編碼或解碼設備的一部分，用于預測電流的分量，其中所述設備包括處理器，所述處理器被配置為：
13.根據權利要求12所述的設備，其中所述確定所述位置包括：
14.根據權利要求12所述的設備，其中所述兩平面參數化包括分別定義主光線與所述相機的坐標系中的平面z＝0和z＝1的交點I0[i,j,u,v]和I1[i,j,u,v]，所述主光線與所述子孔徑圖像的所述矩陣中的索引為(i,j)的所述子孔徑圖像中的位置(u,v)的像素對應，其中所述對象焦平面是所述相機的所述坐標系中的平面z＝F，并且其中，所述確定坐標和分別強制符合以下關系：
15.根據權利要求12所述的設備，其中預測所述當前像素的所述分量包括：
16.根據權利要求15所述的設備，其中所述插值包括：
17.一種編碼設備，包括權利要求12所述的預測設備。
...【技術特征摘要】
1.一種方法，作為編碼或解碼方法的一部分，用于預測當前像素的分量，所述方法包括：
2.根據權利要求1所述的方法，其中所述確定所述位置包括：
3.根據權利要求1所述的方法，其中所述兩平面參數化包括分別定義主光線與所述相機的坐標系中的平面z＝0和z＝1的交點i0[i,j,u,v]和i1[i,j,u,v]，所述主光線與所述子孔徑圖像的所述矩陣中的索引為(i,j)的所述子孔徑圖像中的位置(u,v)的像素對應，其中所述對象焦平面是所述相機的所述坐標系中的平面z＝f，并且其中，所述確定坐標和分別強制符合以下關系：
4.根據權利要求3所述的方法，其中所述給定平面是所述相機的坐標系中的平面z＝0，并且其中確定第一坐標強制符合關系：
5.根據權利要求4所述的方法，其中計算第二坐標強制符合等式：
6.根據權利要求5所述的方法，其中所述傳感器的所述平面是所述相機的坐標系中的平面z＝-d-f，并且其中確定所述位置強制符合等式：
7.根據權利要求1所述的方法，其中預測所述當前像素的所述分量包括：
8.根據權利要求7所述的方法，其中所述插值包括：
9.一...
【專利技術屬性】
技術研發人員：D·多耶恩，O·布雷勒，G·博伊森，
申請(專利權)人：交互數字VC控股公司，
類型：發明
國別省市：
還沒有人留言評論。發表了對其他瀏覽者有用的留言會獲得科技券。