本申請涉及圖像處理領(lǐng)域，特別是涉及一種圖像生成方法、裝置、計算機設(shè)備、存儲介質(zhì)及程序產(chǎn)品。

背景技術(shù)：

1、在一些應(yīng)用場景（如翻譯講座或電視劇拍攝場景）中，需要對目標(biāo)對象進(jìn)行視覺采集時，從而得到相應(yīng)的圖像。

2、傳統(tǒng)方案主要是先將輸入音頻轉(zhuǎn)化為譜圖，然后在視頻幀中匹配該圖譜最佳的目標(biāo)部位位置，并根據(jù)音頻在該目標(biāo)部位位置進(jìn)行變換，然后進(jìn)行校準(zhǔn)從而得到校準(zhǔn)后的圖像。然而，在使用該傳統(tǒng)方案所得的圖像分辨率較低。由此，如何準(zhǔn)確生成目標(biāo)部位的清晰圖像成為研究的熱點。

技術(shù)實現(xiàn)思路

1、基于此，有必要針對上述技術(shù)問題，提供一種能夠提高清晰度的圖像生成方法、裝置、計算機設(shè)備、可讀存儲介質(zhì)及程序產(chǎn)品。

2、第一方面，本申請?zhí)峁┝艘环N圖像生成方法，包括：

3、獲取目標(biāo)部位的待處理圖像與參考圖像；

4、對所述待處理圖像進(jìn)行目標(biāo)部位特征提取，得到第一目標(biāo)特征；

5、對所述參考圖像進(jìn)行目標(biāo)部位特征提取，得到第一參考特征；

6、基于所述第一目標(biāo)特征和所述第一參考特征進(jìn)行圖像融合，得到目標(biāo)部位圖像。

7、第二方面，本申請還提供了一種圖像生成裝置，包括：

8、獲取模塊，用于獲取目標(biāo)部位的待處理圖像與參考圖像；

9、提取模塊，用于對所述待處理圖像進(jìn)行目標(biāo)部位特征提取，得到第一目標(biāo)特征；

10、所述提取模塊，用于對所述參考圖像進(jìn)行目標(biāo)部位特征提取，得到第一參考特征；

11、融合模塊，用于基于所述第一目標(biāo)特征和所述第一參考特征進(jìn)行圖像融合，得到目標(biāo)部位圖像。

12、第三方面，本申請還提供了一種計算機設(shè)備。所述計算機設(shè)備包括存儲器和處理器，所述存儲器存儲有計算機程序，所述處理器執(zhí)行所述計算機程序時實現(xiàn)上述任意實施例中圖像生成的步驟。

13、第四方面，本申請還提供了一種計算機可讀存儲介質(zhì)。所述計算機可讀存儲介質(zhì)，其上存儲有計算機程序，所述計算機程序被處理器執(zhí)行時實現(xiàn)上述任意實施例中圖像生成的步驟。

14、第五方面，本申請還提供了一種計算機程序產(chǎn)品。所述計算機程序產(chǎn)品，包括計算機程序，該計算機程序被處理器執(zhí)行時實現(xiàn)上述任意實施例中圖像生成的步驟。

15、上述圖像生成方法、裝置、計算機設(shè)備、存儲介質(zhì)及程序產(chǎn)品，獲取待處理圖像與參考圖像，對所述待處理圖像進(jìn)行特征提取，得到第一目標(biāo)特征，并對所述參考圖像進(jìn)行特征提取，得到第一參考特征，通過第一目標(biāo)特征與第一參考特征這兩個角度，更細(xì)致地表征目標(biāo)部位的不同信息，進(jìn)而對所述第一目標(biāo)特征和所述第一參考特征進(jìn)行融合，得到目標(biāo)部位圖像，而目標(biāo)部位圖像綜合了這兩個角度的信息，因而具有清晰度高的優(yōu)勢。

技術(shù)特征：

1.一種圖像生成方法，其特征在于，所述方法包括：

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述對所述待處理圖像進(jìn)行目標(biāo)部位特征提取，得到目標(biāo)部位的第一目標(biāo)特征，包括：

3.根據(jù)權(quán)利要求2所述的方法，其特征在于，所述對所述遮罩圖像和所述待處理圖像進(jìn)行特征提取，得到目標(biāo)部位的第一目標(biāo)特征，包括：

4.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述對所述待處理圖像進(jìn)行目標(biāo)部位特征提取，得到第一目標(biāo)特征，包括：

5.根據(jù)權(quán)利要求4所述的方法，其特征在于，所述第一網(wǎng)絡(luò)分支包括第一卷積層、深度卷積層和第二卷積層；所述通過特征提取網(wǎng)絡(luò)中的第一網(wǎng)絡(luò)分支對所述待處理圖像進(jìn)行目標(biāo)部位特征提取，得到第一目標(biāo)特征，包括：

6.根據(jù)權(quán)利要求5所述的方法，其特征在于，所述深度卷積層包括通道數(shù)依次減少的n個第一子卷積層和具有目標(biāo)通道數(shù)的第二子卷積層；

7.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述基于所述第一目標(biāo)特征和所述第一參考特征進(jìn)行圖像融合，得到目標(biāo)部位圖像，包括：

8.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述第一目標(biāo)特征和所述第一參考特征是通過目標(biāo)部位重建模型提取所得；所述目標(biāo)部位重建模型是通過如下方式訓(xùn)練得到的：

9.根據(jù)權(quán)利要求8所述的方法，其特征在于，所述模型損失包括重建損失，所述重建損失包括正則損失和目標(biāo)部位的遮罩損失；所述根據(jù)所述圖像樣本與所述重建圖像確定模型損失，包括：

10.一種圖像生成裝置，其特征在于，包括：

11.一種計算機設(shè)備，包括存儲器和處理器，所述存儲器存儲有計算機程序，其特征在于，所述處理器執(zhí)行所述計算機程序時實現(xiàn)權(quán)利要求1至9中任一項所述的方法的步驟。

12.一種計算機可讀存儲介質(zhì)，其上存儲有計算機程序，其特征在于，所述計算機程序被處理器執(zhí)行時實現(xiàn)權(quán)利要求1至9中任一項所述的方法的步驟。

13.一種計算機程序產(chǎn)品，包括計算機程序，其特征在于，該計算機程序被處理器執(zhí)行時實現(xiàn)權(quán)利要求1至9中任一項所述的方法的步驟。

技術(shù)總結(jié)
本申請涉及一種圖像生成方法、裝置、計算機設(shè)備、存儲介質(zhì)及程序產(chǎn)品。所述方法包括：獲取目標(biāo)部位的待處理圖像與參考圖像；對所述待處理圖像進(jìn)行目標(biāo)部位特征提取，得到第一目標(biāo)特征；對所述參考圖像進(jìn)行目標(biāo)部位特征提取，得到第一參考特征；基于所述第一目標(biāo)特征和所述第一參考特征進(jìn)行圖像融合，得到目標(biāo)部位圖像。采用本方法能夠提圖像的清晰度。

技術(shù)研發(fā)人員：陳圣
受保護(hù)的技術(shù)使用者：馬上消費金融股份有限公司
技術(shù)研發(fā)日：
技術(shù)公布日：2024/12/19