【技術(shù)實(shí)現(xiàn)步驟摘要】
本申請(qǐng)涉及圖像處理，具體涉及一種圖像處理方法、裝置、圖像編解碼系統(tǒng)、設(shè)備及存儲(chǔ)介質(zhì)。
技術(shù)介紹
1、隨著大數(shù)據(jù)時(shí)代圖像內(nèi)容數(shù)量爆炸性增長(zhǎng)，亟需設(shè)計(jì)一種高效的編碼方案。當(dāng)前傳統(tǒng)編碼標(biāo)準(zhǔn)隨著越來越多高效自適應(yīng)編碼工具的采納，編碼效率不斷提升。然而，隨著邊界效應(yīng)出現(xiàn)，單純依賴編碼模式的增加與參數(shù)搜索范圍的擴(kuò)大越來越難以換取編碼性能增益，基于信號(hào)處理的傳統(tǒng)編碼方法遭遇性能提升瓶頸。相關(guān)技術(shù)中的圖像處理方法，對(duì)編碼后的圖像進(jìn)行解碼重建，難以得到清晰的圖像，容易發(fā)生圖像模糊的情況，處理效果不佳。
2、上述的陳述僅用于提供與本申請(qǐng)有關(guān)的
技術(shù)介紹
信息，而不必然地構(gòu)成現(xiàn)有技術(shù)。
技術(shù)實(shí)現(xiàn)思路
1、本申請(qǐng)的目的是提供一種圖像處理方法、裝置、圖像編解碼系統(tǒng)、設(shè)備及存儲(chǔ)介質(zhì)。為了對(duì)披露的實(shí)施例的一些方面有一個(gè)基本的理解，下面給出了簡(jiǎn)單的概括。該概括部分不是泛泛評(píng)述，也不是要確定關(guān)鍵／重要組成元素或描繪這些實(shí)施例的保護(hù)范圍。其唯一目的是用簡(jiǎn)單的形式呈現(xiàn)一些概念，以此作為后面的詳細(xì)說明的序言。
2、根據(jù)本申請(qǐng)實(shí)施例的一個(gè)方面，提供一種圖像處理方法，應(yīng)用于解碼端，所述解碼端包括第一解碼器、第二解碼器和生成擴(kuò)散模型；所述生成擴(kuò)散模型包括依次連接的紋理信息獲取模塊、隱層表示擴(kuò)散模型和圖像生成模塊；所述方法包括：
3、通過第一解碼器解碼來自編碼端的文本碼流，得到原始圖像的語義信息；
4、通過第二解碼器解碼來自所述編碼端的特征碼流，得到所述原始圖像的特征解碼信息；
...【技術(shù)保護(hù)點(diǎn)】
1.一種圖像處理方法，其特征在于，應(yīng)用于解碼端，所述解碼端包括第一解碼器、第二解碼器和生成擴(kuò)散模型；所述生成擴(kuò)散模型包括依次連接的紋理信息獲取模塊、隱層表示擴(kuò)散模型和圖像生成模塊；所述方法包括：
2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述紋理信息獲取模塊包括依次連接的隱空間表示模塊、圖像重建模塊和特征提取器；所述通過所述紋理信息獲取模塊處理所述特征解碼信息，得到所述原始圖像的紋理信息，包括：
3.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述基于所述隱層表示擴(kuò)散模型處理所述語義信息和所述紋理信息，得到融合信息，包括：
4.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述圖像生成模塊包括依次連接的圖像生成器和增強(qiáng)網(wǎng)絡(luò)模塊；所述通過所述圖像生成模塊處理所述融合信息，得到解碼后的圖像，包括：
5.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述編碼端包括圖生文大模型、隱空間表示提取模型、與所述圖生文大模型相連接的第一編碼器、以及與所述隱空間表示提取模型相連接的第二編碼器；
6.一種圖像處理方法，其特征在于，應(yīng)用于編碼端，所述編碼端包括圖生
7.一種圖像處理裝置，其特征在于，應(yīng)用于解碼端，所述解碼端包括第一解碼器、第二解碼器和生成擴(kuò)散模型；所述生成擴(kuò)散模型包括依次連接的紋理信息獲取模塊、隱層表示擴(kuò)散模型和圖像生成模塊；所述裝置包括：
8.一種圖像處理裝置，其特征在于，應(yīng)用于編碼端，所述編碼端包括圖生文模型、隱空間表示提取模型、與所述圖生文模型連接的第一編碼器、以及與所述隱空間表示提取模型連接的第二編碼器，所述裝置包括：
9.一種圖像編解碼系統(tǒng)，其特征在于，包括編碼器和解碼器，所述解碼器用于執(zhí)行如權(quán)利要求1-5中任一項(xiàng)所述的圖像處理方法，所述編碼器用于執(zhí)行權(quán)利要求6所述的圖像處理方法。
10.一種電子設(shè)備，其特征在于，包括存儲(chǔ)器、處理器及存儲(chǔ)在所述存儲(chǔ)器上并可在所述處理器上運(yùn)行的計(jì)算機(jī)程序，所述處理器執(zhí)行所述計(jì)算機(jī)程序，以實(shí)現(xiàn)如權(quán)利要求1-6中任一項(xiàng)所述的方法。
11.一種計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)，其上存儲(chǔ)有計(jì)算機(jī)程序，其特征在于，所述計(jì)算機(jī)程序被處理器執(zhí)行，以實(shí)現(xiàn)如權(quán)利要求1-6中任一項(xiàng)所述的方法。
...【技術(shù)特征摘要】
1.一種圖像處理方法，其特征在于，應(yīng)用于解碼端，所述解碼端包括第一解碼器、第二解碼器和生成擴(kuò)散模型；所述生成擴(kuò)散模型包括依次連接的紋理信息獲取模塊、隱層表示擴(kuò)散模型和圖像生成模塊；所述方法包括：
2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述紋理信息獲取模塊包括依次連接的隱空間表示模塊、圖像重建模塊和特征提取器；所述通過所述紋理信息獲取模塊處理所述特征解碼信息，得到所述原始圖像的紋理信息，包括：
3.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述基于所述隱層表示擴(kuò)散模型處理所述語義信息和所述紋理信息，得到融合信息，包括：
4.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述圖像生成模塊包括依次連接的圖像生成器和增強(qiáng)網(wǎng)絡(luò)模塊；所述通過所述圖像生成模塊處理所述融合信息，得到解碼后的圖像，包括：
5.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述編碼端包括圖生文大模型、隱空間表示提取模型、與所述圖生文大模型相連接的第一編碼器、以及與所述隱空間表示提取模型相連接的第二編碼器；
6.一種圖像處理方法，其特征在于，應(yīng)用于編碼端，所述編碼端包括圖生文模型、隱空間表示提取模型、與...
【專利技術(shù)屬性】
技術(shù)研發(fā)人員：段文鴻，王苫社，高文，馬思偉，
申請(qǐng)(專利權(quán))人：北京大學(xué)，
類型：發(fā)明
國別省市：
還沒有人留言評(píng)論。發(fā)表了對(duì)其他瀏覽者有用的留言會(huì)獲得科技券。