用于圖像幀的處理的方法、設備和計算機程序產品技術

根據示例實施例，提供了一種方法、設備和計算機程序產品。該方法包括接收與場景相關聯的多個彩色圖像幀和多個全色圖像幀。所述多個彩色圖像幀對應于所述多個全色圖像幀。該方法還包括基于來自所述多個全色圖像幀當中的一個或多個全色圖像幀和某全色圖像幀來計算注冊信息。基于注冊信息修改與所述全色圖像幀對應的彩色圖像幀。

Method, apparatus, and computer program product for processing image frames

According to an exemplary embodiment, a method, an apparatus, and a computer program product are provided. The method includes receiving a plurality of color image frames associated with the scene and a plurality of panchromatic image frames. The plurality of color image frames correspond to the plurality of panchromatic image frames. The method also includes calculating the registration information based on one or more panchromatic image frames and a panchromatic image frame from the plurality of panchromatic image frames. A color image frame corresponding to the panchromatic image frame is modified based on registration information.

【技術實現步驟摘要】

各個實現方式總體涉及用于處理圖像傳感器所捕獲的圖像幀的方法、設備和計算機程序產品。
技術介紹
與捕獲圖像相關的技術上的快速發展已經導致圖像內容創建的指數式增長。像移動電話和個人數字助理（PDA）這樣的設備現在正越來越多地被配置有諸如相機之類的圖像捕獲工具而由此有助于輕松地捕獲圖像內容。用戶可以捕獲與各種環境（ambient）條件下的場景相對應的圖像。所捕獲的圖像的質量可能基于當時的環境條件而被影響。例如，在低光照環境條件下，圖像質量可能會大幅劣化，這是因為所捕獲的圖像可能看上去很暗并且缺少與場景相對應的細節。
技術實現思路
示例實施例的各個方面在權利要求中有所陳述。在第一方面，提供了一種方法，該方法包括：接收與場景相關聯的多個彩色圖像幀和多個全色圖像幀，其中所述多個彩色圖像幀對應于所述多個全色圖像幀；基于來自所述多個全色圖像幀當中的一個或多個全色圖像幀和某全色圖像幀來計算注冊信息；以及基于所述注冊信息修改對應于所述全色圖像幀對應的彩色圖像幀。在第二方面，提供了一種設備，該設備包括至少一個處理器；和包括計算機程序代碼的至少一個存儲器，所述至少一個存儲器和所述計算機程序代碼被配置為利用所述至少一個處理器使得該設備至少執行如下操作：接收與場景相關聯的多個彩色圖像幀和多個全色圖像幀，其中所述多個彩色圖像幀對應于所述多個全色圖像幀；基于來自所述多個全色圖像幀當中的一個或多個全色圖像幀和某全色圖像幀來計算注冊信息；以及基于所述注冊信息修改對應于所述全色圖像幀的彩色圖像幀。在第三方面，提供了一種包括至少一個計算機可讀存儲介質的計算機程序產品，所述計算機可讀存儲介質包括一組指令，該組指令在由一個或多個處理器執行時使得設備至少執行如下操作：接收與場景相關聯的多個彩色圖像幀和多個全色圖像幀，其中所述多個彩色圖像幀對應于所述多個全色圖像幀；基于來自所述多個全色圖像幀當中的一個或多個全色圖像幀和某全色圖像幀來計算注冊信息；以及基于所述注冊信息修改對應于所述全色圖像幀的彩色圖像幀。在第四方面，提供了一種設備，該設備包括：用于接收與場景相關聯的多個彩色圖像幀和多個全色圖像幀的裝置，其中所述多個彩色圖像幀對應于所述多個全色圖像幀；用于基于來自所述多個全色圖像幀當中的一個或多個全色圖像幀和某全色圖像幀來計算注冊信息的裝置；以及基于所述注冊信息修改對應于所述全色圖像幀的彩色圖像幀的裝置。在第五方面，提供了一種包括程序指令的計算機程序，所述計算機程序在由設備執行時使得所述設備：接收與場景相關聯的多個彩色圖像幀和多個全色圖像幀，其中所述多個彩色圖像幀對應于所述多個全色圖像幀；基于來自所述多個全色圖像幀當中的一個或多個全色圖像幀和某全色圖像幀來計算注冊信息；以及基于所述注冊信息修改對應于所述全色圖像幀的彩色圖像幀。附圖說明各個實施例通過示例的方式而非限制的方式被示出，在附圖中：圖1圖示根據示例實施例的設備；圖2圖示根據示例實施例的用于圖像幀的處理的設備；圖3是圖示根據示例實施例的用于圖像幀的處理的邏輯過程總覽的示意圖；圖4A、圖4B和圖4C圖示根據示例實施例的用于計算本地注冊信息的差別圖像幀的計算。圖5是描繪根據示例實施例的用于圖像幀的處理的示例方法的流程圖；圖6A和6B圖示描繪根據另一示例實施例的用于圖像幀的處理的示例方法的流程圖。具體實施方式示例實施例和它們潛在的效果可通過參考附圖的圖1到圖6B來理解。圖1圖示根據示例實施例的設備100。然而，應當理解如圖所示的下文中所描述的設備100只是圖示可能得益于各個實施例的一種類型的設備，因此不應當被用來限制實施例的范圍。因此，應當理解下面結合設備100所描述的組件中的至少一些組件可以是可選的，因而在示例實施例中可以包括比結合圖1的示例實施例所描述的那些組件更多、更少或者不同的組件。設備100可以是多種移動電子設備中的任意一種，例如便攜式數字助理（PDA）、尋呼機、移動電視、游戲設備、蜂窩電話、各種類型的計算機（例如，膝上型計算機、移動計算機或臺式計算機）、相機、音頻/視頻播放器、無線電、全球定位系統（GPS）設備、媒體播放器、移動數字助理或者上述設備的任意組合以及其它類型的通信設備。設備100可以包括與發射器104和接收器106進行可操作通信的天線102（或者多個天線）。設備100還可以包括諸如控制器108或者其它處理設備之類的設備，該處理設備分別向發射器104提供信號和從接收器106接收信號。所述信號可以包括根據適用的蜂窩系統的空中接口標準的信令信息，并且/或者還可以包括與用戶語音相對應的數據，接收到的數據和/或用戶生成的數據。就此而言，設備100能夠以一個或多個空中接口標準、通信協議、調制類型和接入類型進行操作。作為例示，設備100能夠根據多個第一代、第二代、第三代和/或第四代通信協議等中的任一個協議進行操作。例如，設備100能夠根據第二代（2G）無線通信協議IS-136（時分多路接入（TDMA））、GSM（全球移動通信系統）和IS-95（碼分多路接入（CDMA））或者根據諸如通用移動通信系統（UMTS）、CDMA1000、寬帶CDMA（WCDMA）和時分同步CDMA（TD-SCDMA）之類的第三代（3G）無線通信協議、根據諸如演進通用地面無線電接入網絡（E-UTRAN）之類的3.9G無線通信協議、根據第四代（4G）無線通信協議等進行操作。作為替代（或者附加地），設備100能夠根據非蜂窩通信機制進行操作。例如，諸如因特網、局域網、廣域網之類的計算機網絡；諸如網絡、網絡、電氣電子工程協會（IEEE）802.11x網絡之類的短距離無線通信網絡；諸如公共交換電話網絡（PSTN）之類的有線電信網絡。控制器108除其他之外可以包括實現設備100的音頻和邏輯功能的電路裝置。例如，控制器108可以包括但不限于一個或多個數字信號處理器設備、一個或多個微處理器設備、具有隨附的數字信號處理器的一個或多個處理器、不具有隨附的數字信號處理器的一個或多個處理器、一個或多個專用計算機芯片、一個或多個現場可編程門陣列（FPGA）、一個或多個控制器、一個或多個專用集成電路（ASIC）、一個或多個計算機、各種模擬數字轉換器、數字模擬轉換器和/或其它支持電路。設備100的控制和信號處理功能根據這本文檔來自技高網...

【技術保護點】
一種用于圖像幀的處理的方法，包括：接收與場景相關聯的多個彩色圖像幀和多個全色圖像幀，其中所述多個彩色圖像幀對應于所述多個全色圖像幀；基于來自所述多個全色圖像幀當中的一個或多個全色圖像幀和某全色圖像幀來計算注冊信息；以及基于所述注冊信息修改對應于所述全色圖像幀的彩色圖像幀。

【技術特征摘要】
2012.11.26 IN 4918/CHE/20121.一種用于圖像幀的處理的方法，包括：
接收與場景相關聯的多個彩色圖像幀和多個全色圖像幀，其中
所述多個彩色圖像幀對應于所述多個全色圖像幀；
基于來自所述多個全色圖像幀當中的一個或多個全色圖像幀和
某全色圖像幀來計算注冊信息；以及
基于所述注冊信息修改對應于所述全色圖像幀的彩色圖像幀。
2.根據權利要求1所述的方法，還包括：
根據來自所述多個彩色圖像幀當中的一個或多個彩色圖像幀和
所述彩色圖像幀確定注冊信息，其中所述一個或多個彩色圖像幀對
應于所述一個或多個全色圖像幀。
3.根據權利要求2所述的方法，其中根據所述彩色圖像幀和所
述一個或多個彩色圖像幀的所述注冊信息等同于基于所述多個全色
圖像幀的所計算出的注冊信息。
4.根據權利要求2或3所述的方法，其中修改所述彩色圖像幀
包括基于所述注冊信息將所述一個或多個彩色圖像幀的像素的像素
值與所述彩色圖像幀的對應像素的像素值相加。
5.根據權利要求2或3所述的方法，其中修改所述彩色圖像幀
包括基于所述注冊信息利用通過對所述一個或多個彩色圖像幀中的
像素的像素值和所述彩色圖像幀的對應像素的像素值求平均而獲得
的平均像素值來更新所述彩色圖像幀的像素的像素值。
6.根據權利要求4所述的方法，其中計算所述注冊信息包括計
算全局注冊信息和本地注冊信息中的至少一個。
7.根據權利要求6所述的方法，其中計算所述全局注冊信息包
括：
從所述全色圖像幀和所述一個或多個全色圖像幀中提取特征；
將從所述全色圖像幀和所述一個或多個全色圖像幀中所提取的
所述特征進行匹配；以及
基于所提取的特征的所述匹配確定所述全色圖像幀與所述一個
或多個全色圖像幀之間的單應變換。
8.根據權利要求7所述的方法，其中計算所述本地注冊信息包
括：
基于與所述一個或多個全色圖像幀中的至少一個全色圖像幀相
關聯的所述單應變換來生成對應于所述至少一個全色圖像幀的經補
償的全色圖像幀；
基于所述經補償的全色圖像幀和所述全色圖像幀計算差別圖像
幀；以及
將與配置所述差別圖像幀的多個像素塊中的每個像素塊相關聯
的像素值屬性與預定義的閾值進行比較。
9.根據權利要求8所述的方法，其中計算所述差別圖像幀包括
從所述全色圖像幀中減去所述經補償的全色圖像幀。
10.根據權利要求8所述的方法，其中所述像素值屬性是平均像
素值、最大像素值、與配置所述差別圖像幀的所述多個像素塊中的
每個像素塊相關聯的像素值之和中的一個。
11.根據權利要求8至10中的任一項所述的方法，其中計算所
述本地注冊信息包括：
對來自配置所述差別圖像幀的所述多個像素塊當中的一個或多
個像素塊執行運動補償，其中與所述一個或多個像素塊中的每個像
素塊相關聯的所述像素值屬性被確定為超過所述預定義的閾值。
12.根據權利要求11所述的方法，還包括：
確定所述一個或多個彩色圖像幀中用于修改所述彩色圖像幀的
彩色圖像幀的數目。
13.根據權利要求12所述的方法，其中所述一個或多個彩色圖
像幀中用于修改所述彩色圖像幀的彩色圖像幀的數目基于色調映射
而被確定。
14.根據權利要求1至3中的任一項所述的方法，其中與所述多
個全色圖像幀相關聯的幀速率被配置為等于與所述多個彩色圖像幀

\t相關聯的幀速率。
15.根據權利要求1至3中的任一項所述的方法，其中所述經修
改的彩色圖像幀的光強度高于所述彩色圖像幀的光強度。
16.一種用于圖像幀的處理的設備，包括：
用于接收與場景相關聯的多個彩色圖像幀和多個全色圖像幀的
裝置，其中所述多個彩色圖像幀對應于所述多個全色圖像幀；
用于基于來自所述多個全色圖像幀當中的一個或多個全色圖像
幀和某全色圖像幀來計算注冊信息的裝置；以及
用于基于所述注冊信息修改對應于所述全色圖像幀的彩色圖像
幀的裝置。
17.根據權利要求16所述的設備，其中所述設備還包括：
用于根據來自所述多個...

【專利技術屬性】
技術研發人員：V·慕尼恩德，
申請(專利權)人：諾基亞公司，
類型：發明
國別省市：芬蘭;FI