標識出臉部圖像中要增強的子區域，其中該增強通過向與臉部圖像的子區域對應的亮度數據應用局部化的平滑核來實現。生成包括臉部的增強版本的增強臉部圖像，該臉部的增強版本包括某些原始像素和與臉部的一個或多個增強子區域對應的像素。
【技術實現步驟摘要】
【國外來華專利技術】
本申請涉及圖像處理，具體地涉及在臉部圖像中檢測的子區域的圖像處理。
技術介紹
Proctor和Gamble的美國專利6,571,003提到，在臉部的子區域(例如，臉頰)或由地標點(諸如，拐角或鼻部、眼部或口部)限定的區域中找出并修補臉部缺陷(諸如， 斑點、皺紋、毛孔和紋理)。該技術涉及利用蒙板(mask)來替換所限定的區域。P&G 專利公開了電子式地改變顏色。P&G專利還提到檢測和修正照明梯度和照明變化。在存在可能引起臉部皮膚 上的光澤或較亮區域的方向性照明的情況下，可能出現這些照明梯度或變化。轉讓給 本申請受讓人的美國專利申請序列號12/038,147、61/106,910和61/221,425描述了使 用Viola-Jones類型分類器級聯來檢測方向性照明的技術。然而，除了結合臉部追蹤 技術一起使用這種情況外，確定和修正照明梯度通常會涉及全局分析，其中臉部追蹤 技術諸如是在美國專利7,403,643和7,315,631以及美國申請序列號11/766,674(公開為 2008/0037840)和 12/063,089、61/091,700、61/120,289 和 12/479,593 中描述的技術，這 些專利全部轉讓給本專利技術的受讓人。期望具有這樣的技術，其針對某些應用和/或在某 些情況、環境或約束下，使用局部模糊核(kernel)，而非使用涉及較低效的全局分析的技 術。Kodak的專利7,212,657在圖13-圖14中示出了生成陰影/峰值圖像(基于生成 亮度圖像和平均亮度圖像)、模糊圖像和混合圖像。Kodak專利公開了通過從亮度圖像 中減去平均亮度圖像來生成陰影/醒目顯示強度圖像。而且，在圖16中，Kodak專利 示出了元素1530，其被標記為“使用峰值/谷值圖和顏色信息來生成亮度和色度縮放因 子”，以及元素1540，其被標記為“修改蒙板區域中像素的亮度和色度”。Kodak專利 中描述了臉部檢測，但未描述臉部追蹤。與P&G技術類似，Kodak技術涉及全局圖像操縱，S卩，“亮度圖像”并未被指 示為包括少于整個圖像的任何事物，“模糊圖像”涉及向整個圖像應用核，以及“混合 圖像”涉及全局圖像的三個拷貝。“模糊圖像”涉及色度和亮度數據，這意味著為了操 縱圖像需要使用大量的存儲器，尤其在應用涉及資源受限的嵌入式系統的情況下更是如 此。關于亮度和色度縮放因子，即使其涉及局部化的縮放因子，Kodak專利中也未將其 描述為是為了應用于少于整個圖像的任何事物而生成的。轉讓給本申請受讓人的美國專利申請序列號11/856,721和12/330,719描述了這 樣的技術，其可以在圖像的相關區域上作為單個類光柵掃描而應用，而不用涉及全局分 析或者確定全局特性(諸如，平均亮度圖像或者陰影或模糊圖像)。與P&G專利或Kodak 專利相比，這種通過了預定區域的單次通過掃描為嵌入式系統(諸如，數碼相機)提供了 更高效和更適合的技術。Hewlett Packard (HP,惠普)公開的專利申請2002/0081003提到噴色法，其通常涉及在圖像的樣本(例如，可能包括瑕疵或皺紋)上涂覆顏色。HP公開還提到在人臉圖 像的皺紋上進行模糊化，并且再一次具體描述了對定義了皺紋和周圍皮膚的顏色值進行 模糊化或混合。HP應用提到了改變亮度以使臉部特征變亮或變暗，諸如使臉部特征變陰 暗，并且繼續描述了改變與該特征相關聯的皮膚顏色值，以便使該特征變陰暗。HP專利 進一步公開了通過模糊顏色值來模糊前額和/或臉頰和/或銳化發線。在HP專利中并未 描述在多張圖像(即，全分辨率或低分辨率和/或子樣本參考圖像(諸如，在捕獲主全分 辨率圖像之前、期間或之后，利用單獨的成像系統捕獲的預覽、后覽(postview)和/或參 考圖像))上的臉部檢測和臉部追蹤，也沒有針對平滑或模糊數字臉部圖像的亮度數據給 出任何建議。肖像是數碼照片中最流行的場景之一。肖像圖像上的圖像潤飾是圖像處理系統 的期望組件。用戶可能利用傳統軟件花費大量時間來隱藏皺紋和瑕疵以使肖像更加漂 亮。期望提供創新性的自動肖像場景增強器，其適用于嵌入式設備，諸如，數碼照相 機、相機電話或其他手持式或以其他方式可便攜的具有圖像獲取組件(例如，鏡頭、圖 像感測器)和處理器的消費類電子產品。
技術實現思路
提供了一種使用處理器來增強數字圖像內臉部外觀的方法。獲取包括臉部的場 景的圖像。標識該數字圖像內的臉部。在臉部中標識要利用局部化的亮度平滑進行增強 的一個或多個子區域。向在臉部內標識的一個或多個子區域中的一個應用一個或多個局 部化的亮度平滑核中的每一個，以產生臉部的一個或多個增強子區域。向在臉部內標識 的一個或多個子區域的亮度數據應用一個或多個局部化的平滑核。生成增強圖像，其包 括臉部的增強版本，該臉部的增強版本包括某些原始像素和與臉部的一個或多個增強子 區域對應的像素。顯示、傳輸、傳達和/或數字式存儲和/或以其他方式輸出增強圖像 和/或進一步處理的版本。局部化的亮度平滑可以包括模糊亮度數據或針對其取平均，或者其組合。可以向一個或多個子區域應用一個或多個局部化的顏色平滑核。已修正圖像的 一個或多個增強子區域還可以包括至少通過局部化的顏色平滑從臉部的原始像素或以其 他方式處理的像素修改而來的像素。可以向一個或多個子區域應用噪聲減小或增強。已修正圖像的一個或多個增強 子區域還可以包括至少通過局部化的噪聲減小或增強從臉部的原始像素或以其他方式處 理的像素修改而來的像素。可以確定臉部的一個或多個子區域中的某些非膚色像素為不具有閾值膚色。可 以移除、替換這些非膚色像素、減小其強度，和/或修改其顏色。一個或多個增強子區域的增強像素可以包括增強的強度，其包括原始像素強度 與一個或多個原始的和/或增強的子區域中局部平均強度之間關系的一個或多個函數。可以檢測臉部內一個或多個口部和/或眼部區域。可以標識和增強一個或多個 口部和/或眼部區域內一個或多個子區域的自然顏色。這些子區域可以包括一個或多個 牙齒、嘴唇、舌頭、眼白、眉毛、虹膜、睫毛和/或瞳孔。還提供了一種數字圖像獲取設備，其包括鏡頭、圖像感測器、處理器和處理器可讀存儲器，其上實施有用于對處理器進行編程以執行在此描述的任一方法的處理器可 讀代碼，該代碼尤其用于增強數字圖像中臉部或其他特征的外觀。還提供了一個或多個處理器可讀介質，其中實施有用于對一個或多個處理器進 行編程以執行在此描述的任一方法的代碼。在某些實施方式中，將使用預覽、后覽或其他參考圖像的臉部追蹤與臉部修飾 結合在一起，其中這些圖像是使用同一個或單獨的成像系統獲取的以作為主全分辨率圖 像。這涉及平滑和/或模糊臉部特征或臉部區域、皺紋/瑕疵移除，或其他數字美容調 整。在某些實施方式中，將亮度通道用來平滑不好看的特征，而在這些實施方式的較小 子集中，僅將亮度通道用于平滑，而不使用任何顏色通道。除了亮度通道之外，其他實 施方式還使用一個或多個顏色通道，并且這些實施方式可以使用臉部追蹤，或者也可以 不使用。在某些實施方式中，基于特定像素周圍的像素值平均來執行臉部區域的局部化 修改。此局部化的平均/模糊核可以單獨應用在亮度通道上，從而減小了在諸如便攜式 數碼相機、相機電話、配備有本文檔來自技高網...
【技術保護點】
一種增強數字圖像內的臉部外觀的方法，包括使用處理器來： 獲取包括臉部的場景的數字圖像，其包括使用鏡頭和圖像感測器來捕獲所述圖像，或者在由包括鏡頭和圖像感測器的設備捕獲所述圖像之后接收所述圖像，或者其組合； 標識所述數字圖像內的所述臉部；將所述臉部的膚色部分與包括一只或兩只眼睛或口部或其組合的臉部特征相分割；在所述臉部的所述膚色部分中，標識一個或多個瑕疵區域，其在亮度上與非瑕疵膚色部分之間的差異至少是一閾值量； 平滑所述一個或多個瑕疵區域的亮度數據，以生成經過平滑的亮度數據； 生成包括所述臉部的增強版本的增強圖像，在所述臉部的增強版本中，所述一個或多個瑕疵區域的原始亮度數據由所述經過平滑的亮度數據所替換，并與原始非瑕疵膚色部分相結合；以及 顯示、傳輸、傳送或數字式存儲或以其他方式輸出所述增強的圖像或進一步處理的版本，或者其組合。
【技術特征摘要】
【國外來華專利技術】...
【專利技術屬性】
技術研發人員：M希烏克，A卡帕塔，A波索辛，C弗羅雷亞，P科爾科蘭，V莫卡努，
申請(專利權)人：泰塞拉技術愛爾蘭公司，
類型：發明
國別省市：IE[愛爾蘭]
還沒有人留言評論。發表了對其他瀏覽者有用的留言會獲得科技券。