本申請(qǐng)公開(kāi)了一種人臉對(duì)焦方法、裝置及電子設(shè)備，屬于攝像技術(shù)領(lǐng)域。其中，本申請(qǐng)?zhí)峁┑娜四槍?duì)焦方法，包括：將目標(biāo)圖像輸入至目標(biāo)參數(shù)檢測(cè)模型中，得到目標(biāo)參數(shù)檢測(cè)模型輸出的目標(biāo)焦距；基于目標(biāo)焦距對(duì)人臉進(jìn)行對(duì)焦；其中，目標(biāo)參數(shù)檢測(cè)模型是基于二維人臉圖像樣本、聯(lián)合三維人臉形變模型和相機(jī)模型訓(xùn)練得到的；三維人臉形變模型用于基于輸入的人臉特征參數(shù)得到三維人臉；相機(jī)模型用于基于輸入的位姿參數(shù)和三維人臉得到復(fù)原后的二維人臉圖像；其中，人臉特征參數(shù)和位姿參數(shù)是初始參數(shù)檢測(cè)模型基于二維人臉圖像樣本輸出的參數(shù)；位姿參數(shù)為表征攝像頭拍攝姿態(tài)的參數(shù)；人臉特征參數(shù)為表征人臉輪廓的參數(shù)。征人臉輪廓的參數(shù)。征人臉輪廓的參數(shù)。
【技術(shù)實(shí)現(xiàn)步驟摘要】
人臉對(duì)焦方法、裝置及電子設(shè)備
[0001]本申請(qǐng)屬于攝像
，具體涉及一種人臉對(duì)焦方法、裝置及電子設(shè)備。
技術(shù)介紹
[0002]在現(xiàn)實(shí)生活中，用戶在使用電子設(shè)備進(jìn)行拍照時(shí)，若需要拍攝人像，通常需要對(duì)人臉進(jìn)行對(duì)焦。
[0003]相關(guān)技術(shù)中，在進(jìn)行人臉對(duì)焦時(shí)，首先進(jìn)行人臉檢測(cè)，根據(jù)人臉檢測(cè)框獲取感興趣區(qū)域；然后根據(jù)人臉的位姿和人臉在圖像中的位置來(lái)調(diào)整感興趣區(qū)域；再在調(diào)整后的感興趣區(qū)域內(nèi)進(jìn)行相位圖像的統(tǒng)計(jì)，基于相位對(duì)焦(Phase Detection Auto Focus，PDAF)技術(shù)和統(tǒng)計(jì)的相位圖像計(jì)算合焦位置；最后，根據(jù)合焦位置移動(dòng)馬達(dá)的位置，進(jìn)而完成人臉的自動(dòng)對(duì)焦。
[0004]但調(diào)整后的感興趣區(qū)域內(nèi)不僅包含人臉信息，還包含背景信息，背景和人臉不處于同一平面，若基于背景信息和人臉信息計(jì)算人臉的合焦位置，會(huì)導(dǎo)致人臉對(duì)焦精度較差。
技術(shù)實(shí)現(xiàn)思路
[0005]本申請(qǐng)實(shí)施例的目的是提供一種人臉對(duì)焦方法、裝置及電子設(shè)備，能夠解決人臉對(duì)焦精度較差的問(wèn)題。
[0006]第一方面，本申請(qǐng)實(shí)施例提供了一種人臉對(duì)焦方法，該方法包括：
[0007]將目標(biāo)圖像輸入至目標(biāo)參數(shù)檢測(cè)模型中，得到所述目標(biāo)參數(shù)檢測(cè)模型輸出的目標(biāo)焦距；
[0008]基于所述目標(biāo)焦距對(duì)人臉進(jìn)行對(duì)焦；
[0009]其中，所述目標(biāo)參數(shù)檢測(cè)模型是基于二維人臉圖像樣本、聯(lián)合三維人臉形變模型和相機(jī)模型訓(xùn)練得到的；所述三維人臉形變模型用于基于輸入的人臉特征參數(shù)得到三維人臉；所述相機(jī)模型用于基于輸入的位姿參數(shù)和所述三維人臉得到復(fù)原后的二維人臉圖像；
[0010]其中，所述人臉特征參數(shù)和所述位姿參數(shù)是初始參數(shù)檢測(cè)模型基于所述二維人臉圖像樣本輸出的參數(shù)；所述位姿參數(shù)為表征攝像頭拍攝姿態(tài)的參數(shù)；所述人臉特征參數(shù)為表征人臉輪廓的參數(shù)。
[0011]第二方面，本申請(qǐng)實(shí)施例提供了一種人臉對(duì)焦裝置，該裝置包括：
[0012]第一檢測(cè)模塊，用于將目標(biāo)圖像輸入至目標(biāo)參數(shù)檢測(cè)模型中，得到所述目標(biāo)參數(shù)檢測(cè)模型輸出的目標(biāo)焦距；
[0013]對(duì)焦模塊，用于基于所述目標(biāo)焦距對(duì)人臉進(jìn)行對(duì)焦；
[0014]其中，所述目標(biāo)參數(shù)檢測(cè)模型是基于二維人臉圖像樣本、聯(lián)合三維人臉形變模型和相機(jī)模型訓(xùn)練得到的；所述三維人臉形變模型用于基于輸入的人臉特征參數(shù)得到三維人臉；所述相機(jī)模型用于基于輸入的位姿參數(shù)和所述三維人臉得到復(fù)原后的二維人臉圖像；
[0015]其中，所述人臉特征參數(shù)和所述位姿參數(shù)是初始參數(shù)檢測(cè)模型基于所述二維人臉圖像樣本輸出的參數(shù)；所述位姿參數(shù)為表征攝像頭拍攝姿態(tài)的參數(shù)；所述人臉特征參數(shù)為
表征人臉輪廓的參數(shù)。
[0016]第三方面，本申請(qǐng)實(shí)施例提供了一種電子設(shè)備，該電子設(shè)備包括處理器、存儲(chǔ)器及存儲(chǔ)在所述存儲(chǔ)器上并可在所述處理器上運(yùn)行的程序或指令，所述程序或指令被所述處理器執(zhí)行時(shí)實(shí)現(xiàn)如第一方面所述的方法的步驟。
[0017]第四方面，本申請(qǐng)實(shí)施例提供了一種可讀存儲(chǔ)介質(zhì)，所述可讀存儲(chǔ)介質(zhì)上存儲(chǔ)程序或指令，所述程序或指令被處理器執(zhí)行時(shí)實(shí)現(xiàn)如第一方面所述的方法的步驟。
[0018]第五方面，本申請(qǐng)實(shí)施例提供了一種芯片，所述芯片包括處理器和通信接口，所述通信接口和所述處理器耦合，所述處理器用于運(yùn)行程序或指令，實(shí)現(xiàn)如第一方面所述的方法。
[0019]在本申請(qǐng)實(shí)施例中，通過(guò)基于目標(biāo)參數(shù)檢測(cè)模型對(duì)目標(biāo)圖像進(jìn)行特征提取得到的目標(biāo)焦距對(duì)人臉進(jìn)行對(duì)焦，該目標(biāo)參數(shù)檢測(cè)模型是基于人臉特征參數(shù)和位姿參數(shù)訓(xùn)練得到的，并不涉及背景信息，實(shí)現(xiàn)了基于人臉信息對(duì)目標(biāo)焦距的計(jì)算，從而提高了人臉對(duì)焦的精度。
附圖說(shuō)明
[0020]圖1是本申請(qǐng)實(shí)施例提供的人臉對(duì)焦方法的流程示意圖之一；
[0021]圖2是本申請(qǐng)實(shí)施例提供的單目三維人臉重建的系統(tǒng)示意圖；
[0022]圖3是本申請(qǐng)實(shí)施例提供的深度卷積神經(jīng)網(wǎng)絡(luò)的結(jié)構(gòu)示意圖；
[0023]圖4是本申請(qǐng)實(shí)施例提供的人臉對(duì)焦方法的流程示意圖之二；
[0024]圖5是本申請(qǐng)實(shí)施例提供的人臉對(duì)焦方法的流程示意圖之三；
[0025]圖6a是本申請(qǐng)實(shí)施例提供的PDAF技術(shù)的尋焦原理示意圖之一；
[0026]圖6b是本申請(qǐng)實(shí)施例提供的PDAF技術(shù)的尋焦原理示意圖之二；
[0027]圖7a是本申請(qǐng)實(shí)施例提供的PDAF技術(shù)的尋焦原理示意圖之三；
[0028]圖7b是本申請(qǐng)實(shí)施例提供的PDAF技術(shù)的尋焦原理示意圖之四；
[0029]圖8a是本申請(qǐng)實(shí)施例提供的PDAF技術(shù)的尋焦原理示意圖之五；
[0030]圖8b是本申請(qǐng)實(shí)施例提供的PDAF技術(shù)的尋焦原理示意圖之六；
[0031]圖9是本申請(qǐng)實(shí)施例提供的人臉對(duì)焦方法的流程示意圖之四；
[0032]圖10是本申請(qǐng)實(shí)施例提供的拍攝方法的流程示意圖；
[0033]圖11是本申請(qǐng)實(shí)施例提供的人臉對(duì)焦裝置的結(jié)構(gòu)示意圖；
[0034]圖12是本申請(qǐng)實(shí)施例提供的電子設(shè)備的結(jié)構(gòu)示意圖；
[0035]圖13是本申請(qǐng)實(shí)施例提供的電子設(shè)備的硬件示意圖。
具體實(shí)施方式
[0036]下面將結(jié)合本申請(qǐng)實(shí)施例中的附圖，對(duì)本申請(qǐng)實(shí)施例中的技術(shù)方案進(jìn)行清楚地描述，顯然，所描述的實(shí)施例是本申請(qǐng)一部分實(shí)施例，而不是全部的實(shí)施例。基于本申請(qǐng)中的實(shí)施例，本領(lǐng)域普通技術(shù)人員獲得的所有其他實(shí)施例，都屬于本申請(qǐng)保護(hù)的范圍。
[0037]本申請(qǐng)的說(shuō)明書(shū)和權(quán)利要求書(shū)中的術(shù)語(yǔ)“第一”、“第二”等是用于區(qū)別類似的對(duì)象，而不用于描述特定的順序或先后次序。應(yīng)該理解這樣使用的數(shù)據(jù)在適當(dāng)情況下可以互換，以便本申請(qǐng)的實(shí)施例能夠以除了在這里圖示或描述的那些以外的順序?qū)嵤摇暗谝弧薄?br/>“
第二”等所區(qū)分的對(duì)象通常為一類，并不限定對(duì)象的個(gè)數(shù)，例如第一對(duì)象可以是一個(gè)，也可以是多個(gè)。此外，說(shuō)明書(shū)以及權(quán)利要求中“和/或”表示所連接對(duì)象的至少其中之一，字符“/”，一般表示前后關(guān)聯(lián)對(duì)象是一種“或”的關(guān)系。
[0038]下面結(jié)合附圖，通過(guò)具體的實(shí)施例及其應(yīng)用場(chǎng)景對(duì)本申請(qǐng)實(shí)施例提供的人臉對(duì)焦方法、裝置及電子設(shè)備進(jìn)行詳細(xì)地說(shuō)明。
[0039]本申請(qǐng)實(shí)施例提供的人臉對(duì)焦方法，該人臉對(duì)焦方法的執(zhí)行主體可以為電子設(shè)備或者電子設(shè)備中能夠?qū)崿F(xiàn)該人臉對(duì)焦方法的功能模塊或功能實(shí)體，本申請(qǐng)實(shí)施例提及的電子設(shè)備包括但不限于手機(jī)、平板電腦、電腦、相機(jī)、可穿戴設(shè)備等，下面以電子設(shè)備作為執(zhí)行主體為例對(duì)本申請(qǐng)實(shí)施例提供的人臉對(duì)焦方法進(jìn)行說(shuō)明。
[0040]圖1是本申請(qǐng)實(shí)施例提供的人臉對(duì)焦方法的流程示意圖之一，如圖1所示，該人臉對(duì)焦方法包括步驟101和步驟102：
[0041]步驟101、將目標(biāo)圖像輸入至目標(biāo)參數(shù)檢測(cè)模型中，得到目標(biāo)參數(shù)檢測(cè)模型輸出的目標(biāo)焦距。
[0042]其中，目標(biāo)參數(shù)檢測(cè)模型是基于二維人臉圖像樣本、聯(lián)合三維人臉形變模型(3D Morphable Model，3DMM)和相機(jī)模型訓(xùn)練得到的。
[0043]三維人臉形變模型用于基于輸入的人臉本文檔來(lái)自技高網(wǎng)...
【技術(shù)保護(hù)點(diǎn)】
【技術(shù)特征摘要】
1.一種人臉對(duì)焦方法，其特征在于，包括：將目標(biāo)圖像輸入至目標(biāo)參數(shù)檢測(cè)模型中，得到所述目標(biāo)參數(shù)檢測(cè)模型輸出的目標(biāo)焦距；基于所述目標(biāo)焦距對(duì)人臉進(jìn)行對(duì)焦；其中，所述目標(biāo)參數(shù)檢測(cè)模型是基于二維人臉圖像樣本、聯(lián)合三維人臉形變模型和相機(jī)模型訓(xùn)練得到的；所述三維人臉形變模型用于基于輸入的人臉特征參數(shù)得到三維人臉；所述相機(jī)模型用于基于輸入的位姿參數(shù)和所述三維人臉得到復(fù)原后的二維人臉圖像；其中，所述人臉特征參數(shù)和所述位姿參數(shù)是初始參數(shù)檢測(cè)模型基于所述二維人臉圖像樣本輸出的參數(shù)；所述位姿參數(shù)為表征攝像頭拍攝姿態(tài)的參數(shù)；所述人臉特征參數(shù)為表征人臉輪廓的參數(shù)。2.根據(jù)權(quán)利要求1所述的人臉對(duì)焦方法，其特征在于，所述將目標(biāo)圖像輸入至目標(biāo)參數(shù)檢測(cè)模型中，得到所述目標(biāo)參數(shù)檢測(cè)模型輸出的目標(biāo)焦距之前，所述方法還包括：將所述二維人臉圖像樣本輸入至所述初始參數(shù)檢測(cè)模型中，得到所述初始參數(shù)檢測(cè)模型輸出的所述人臉特征參數(shù)和所述位姿參數(shù)；將所述人臉特征參數(shù)輸入至所述三維人臉形變模型中，得到所述三維人臉形變模型輸出的所述三維人臉；將所述位姿參數(shù)和所述三維人臉輸入至所述相機(jī)模型中，得到所述相機(jī)模型輸出的所述復(fù)原后的二維人臉圖像；基于所述復(fù)原后的二維人臉圖像和所述二維人臉圖像樣本確定所述目標(biāo)參數(shù)檢測(cè)模型。3.根據(jù)權(quán)利要求2所述的人臉對(duì)焦方法，其特征在于，所述基于所述復(fù)原后的二維人臉圖像和所述二維人臉圖像樣本確定所述目標(biāo)參數(shù)檢測(cè)模型，包括：基于所述復(fù)原后的二維人臉圖像和所述二維人臉圖像樣本的相似度確定損失函數(shù)；基于所述損失函數(shù)對(duì)所述初始參數(shù)檢測(cè)模型的模型參數(shù)進(jìn)行優(yōu)化，直至滿足收斂條件，得到所述目標(biāo)參數(shù)檢測(cè)模型。4.根據(jù)權(quán)利要求1所述的人臉對(duì)焦方法，其特征在于，所述位姿參數(shù)包括焦距樣本、旋轉(zhuǎn)參數(shù)樣本和平移參數(shù)樣本；所述人臉特征參數(shù)包括形狀參數(shù)樣本和紋理參數(shù)樣本。5.根據(jù)權(quán)利要求1所述的人臉對(duì)焦方法，其特征在于，在所述將目標(biāo)圖像輸入至目標(biāo)參數(shù)檢測(cè)模型中，得到所述目標(biāo)參數(shù)檢測(cè)模型輸出的目標(biāo)焦距之前，所述方法還包括：在檢測(cè)到人臉且自動(dòng)對(duì)焦的情況下，獲取所述目標(biāo)圖像。6.根據(jù)權(quán)利要求5所述的人臉對(duì)焦方法，其特征在于，所述獲取所述目標(biāo)圖像，包括：基于目標(biāo)人臉檢測(cè)區(qū)域、第一相位圖和第二相位圖確定初始合焦位置，所述目標(biāo)人臉檢測(cè)區(qū)域?yàn)樽詣?dòng)對(duì)焦區(qū)域，所述第一相位圖和第二相位圖是根據(jù)圖像傳感器上的PD像素得到的；基于所述初始合焦位置對(duì)目標(biāo)對(duì)象進(jìn)行圖像采集，得到所述目標(biāo)圖像。7.根據(jù)權(quán)利要求1
?
6任一項(xiàng)所述的人臉對(duì)焦方法，其特征在于，所述基于所述目標(biāo)焦距對(duì)人臉進(jìn)行對(duì)焦，包括：基于所述目標(biāo)焦距、鏡頭焦距和目標(biāo)像距，確定目標(biāo)對(duì)焦像距；其中，所述目標(biāo)像距為成像平面到鏡頭的距離；
基于所述目標(biāo)對(duì)焦像距對(duì)所述人臉進(jìn)行對(duì)焦。8.一種人臉對(duì)焦裝置，其特征在于，包括：第...
【專利技術(shù)屬性】
技術(shù)研發(fā)人員：陳典浩，
申請(qǐng)(專利權(quán))人：維沃移動(dòng)通信有限公司，
類型：發(fā)明
國(guó)別省市：
還沒(méi)有人留言評(píng)論。發(fā)表了對(duì)其他瀏覽者有用的留言會(huì)獲得科技券。