【技術(shù)實(shí)現(xiàn)步驟摘要】
本申請(qǐng)涉及計(jì)算機(jī)視覺，特別是涉及一種圖像處理方法、裝置、設(shè)備和存儲(chǔ)介質(zhì)。
技術(shù)介紹
1、在圖像處理領(lǐng)域，摳圖和圖像合成是兩個(gè)重要的技術(shù)方向。摳圖技術(shù)旨在從原始圖像中準(zhǔn)確地提取出前景部分，而圖像合成技術(shù)則關(guān)注于將提取出的前景部分與新的背景進(jìn)行融合，以生成具有真實(shí)感的圖像。
2、然而，僅僅提供前景分割結(jié)果，或僅僅提供前景和新背景的融合圖像并不足以滿足所有應(yīng)用需求。如何為用戶提供更豐富的信息，以進(jìn)行后續(xù)圖像運(yùn)用意義重大。
技術(shù)實(shí)現(xiàn)思路
1、本申請(qǐng)主要解決的技術(shù)問題是提供一種圖像處理方法、裝置、設(shè)備和存儲(chǔ)介質(zhì)，能夠?yàn)橛脩籼峁┴S富的圖像信息。
2、為解決上述技術(shù)問題，本申請(qǐng)采用的一個(gè)技術(shù)方案是：提供一種圖像處理方法，該方法包括：獲取待摳圖的目標(biāo)圖像、以及目標(biāo)背景的描述信息；目標(biāo)背景與目標(biāo)圖像中的背景不同；融合目標(biāo)圖像的圖像特征和描述信息的描述特征，得到融合特征；基于融合特征進(jìn)行解碼，得到目標(biāo)解碼結(jié)果，目標(biāo)解碼結(jié)果包括目標(biāo)圖像的前景分割結(jié)果、以及目標(biāo)圖像中前景與目標(biāo)背景的融合圖像。
3、為解決上述技術(shù)問題，本申請(qǐng)采用的另一個(gè)技術(shù)方案是：提供一種圖像處理裝置，包括：獲取模塊、融合模塊和解碼模塊。獲取模塊用于獲取待摳圖的目標(biāo)圖像和目標(biāo)背景的圖像關(guān)聯(lián)信息；目標(biāo)背景與目標(biāo)圖像中的背景不同；融合模塊用于融合目標(biāo)圖像的圖像特征和圖像關(guān)聯(lián)信息的圖像關(guān)聯(lián)特征，得到圖像融合特征；解碼模塊用于基于圖像融合特征進(jìn)行解碼，得到對(duì)應(yīng)的目標(biāo)解碼圖像，目標(biāo)解碼圖像包括目標(biāo)圖像的目標(biāo)摳圖圖
4、為解決上述技術(shù)問題，本申請(qǐng)采用的再一個(gè)技術(shù)方案是：提供一種電子設(shè)備，包括相互耦接的存儲(chǔ)器和處理器，存儲(chǔ)器存儲(chǔ)有程序指令；處理器用于執(zhí)行存儲(chǔ)器中存儲(chǔ)的程序指令，以實(shí)現(xiàn)上述方法。
5、為解決上述技術(shù)問題，本申請(qǐng)采用的又一個(gè)技術(shù)方案是：提供一種計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)，用于存儲(chǔ)程序指令，該程序指令能夠被執(zhí)行以實(shí)現(xiàn)上述方法。
6、上述方案，基于融合特征進(jìn)行解碼，得到目標(biāo)解碼結(jié)果，目標(biāo)解碼結(jié)果包括目標(biāo)圖像的前景分割結(jié)果、以及目標(biāo)圖像中前景與目標(biāo)背景的融合圖像。可見，本申請(qǐng)同步解碼得到前景分割結(jié)果和融合圖像。其中，本申請(qǐng)同步解碼出兩種圖像的方式，能夠?yàn)橛脩籼峁┴S富的圖像信息，進(jìn)而滿足不同用戶或不同應(yīng)用場(chǎng)景的需求。
本文檔來自技高網(wǎng)...【技術(shù)保護(hù)點(diǎn)】
1.一種圖像處理方法，其特征在于，所述方法包括：
2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述描述信息為關(guān)于所述目標(biāo)背景的描述文本，所述描述特征為對(duì)所述描述文本進(jìn)行編碼得到的文本向量；
3.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述融合所述目標(biāo)圖像的圖像特征和所述描述信息的描述特征，得到融合特征，包括：
4.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述待摳圖的目標(biāo)圖像為待處理視頻中的多個(gè)圖像幀；
5.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述基于所述融合特征進(jìn)行解碼，得到目標(biāo)解碼結(jié)果，包括：
6.根據(jù)權(quán)利要求5所述的方法，其特征在于，所述前景分割結(jié)果為所述目標(biāo)圖像的目標(biāo)摳圖圖像，所述目標(biāo)摳圖圖像中分別對(duì)應(yīng)所述目標(biāo)圖像的前景和背景的像素值不同，所述第二解碼器包括編碼器、分割解碼器和摳圖解碼器；
7.根據(jù)權(quán)利要求6所述的方法，其特征在于，所述編碼器包括不同分辨率的多個(gè)編碼層；
8.根據(jù)權(quán)利要求7所述的方法，其特征在于，所述分割解碼器包括不同分辨率的多個(gè)第一解碼層，所述摳圖解碼器包括分辨率的多個(gè)第二解碼
9.根據(jù)權(quán)利要求6至8任一項(xiàng)所述的方法，其特征在于，所述對(duì)所述三元分割圖和所述初始摳圖圖像中對(duì)應(yīng)像素點(diǎn)的像素值進(jìn)行預(yù)設(shè)計(jì)算，得到所述目標(biāo)圖像的所述目標(biāo)摳圖圖像，包括：
10.一種圖像處理裝置，其特征在于，所述裝置包括：
11.一種電子設(shè)備，其特征在于，包括相互耦接的存儲(chǔ)器和處理器，
12.一種計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)，其特征在于，所述計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)存儲(chǔ)有能夠被處理器運(yùn)行的程序指令，所述程序指令能夠被處理器執(zhí)行以實(shí)現(xiàn)權(quán)利要求1-9任一項(xiàng)所述的方法。
...【技術(shù)特征摘要】
1.一種圖像處理方法，其特征在于，所述方法包括：
2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述描述信息為關(guān)于所述目標(biāo)背景的描述文本，所述描述特征為對(duì)所述描述文本進(jìn)行編碼得到的文本向量；
3.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述融合所述目標(biāo)圖像的圖像特征和所述描述信息的描述特征，得到融合特征，包括：
4.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述待摳圖的目標(biāo)圖像為待處理視頻中的多個(gè)圖像幀；
5.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述基于所述融合特征進(jìn)行解碼，得到目標(biāo)解碼結(jié)果，包括：
6.根據(jù)權(quán)利要求5所述的方法，其特征在于，所述前景分割結(jié)果為所述目標(biāo)圖像的目標(biāo)摳圖圖像，所述目標(biāo)摳圖圖像中分別對(duì)應(yīng)所述目標(biāo)圖像的前景和背景的像素值不同，所述第二解碼器包括編碼器、分割解碼器和...
【專利技術(shù)屬性】
技術(shù)研發(fā)人員：范帆，李超龍，何山，殷兵，劉聰，高建清，
申請(qǐng)(專利權(quán))人：科大訊飛股份有限公司，
類型：發(fā)明
國別省市：
還沒有人留言評(píng)論。發(fā)表了對(duì)其他瀏覽者有用的留言會(huì)獲得科技券。