本公開實(shí)施例涉及圖像處理，尤其涉及一種圖像處理方法、裝置及電子設(shè)備。

背景技術(shù)：

1、球面超分辨率重建是指將球面圖像從分辨率還原到高分辨率的過(guò)程。例如，魚眼相機(jī)可以拍攝得到低清的球面圖像，電子設(shè)備可以基于球面超分辨率重建的方式提高該球面圖像的清晰度。

2、目前，電子設(shè)備可以基于卷積神經(jīng)網(wǎng)絡(luò)(convolutional?neural?networks，cnn)學(xué)習(xí)圖像超分的能力，并基于訓(xùn)練完成的卷積神經(jīng)網(wǎng)絡(luò)，對(duì)2d的球面圖像進(jìn)行超分處理，進(jìn)而提高球面圖像的清晰度。但是，球面圖像的紋理信息分布的均勻性較差，例如，赤道的紋理信息較多，兩極的紋理信息較少，基于cnn進(jìn)行球面超分辨率重建時(shí)，球面圖像超分的準(zhǔn)確度較差，進(jìn)而導(dǎo)致球面圖像增強(qiáng)的效果較差。

技術(shù)實(shí)現(xiàn)思路

1、本公開提供一種圖像處理方法、裝置及電子設(shè)備，用于解決現(xiàn)有技術(shù)中一個(gè)或多個(gè)的技術(shù)問(wèn)題。

2、第一方面，本公開提供一種圖像處理方法，該方法包括：

3、獲取第一圖像，所述第一圖像為由球面上的圖像投影至平面上的圖像；

4、對(duì)所述第一圖像進(jìn)行卷積處理，得到第一特征圖像；

5、確定所述第一圖像中的每個(gè)像素由所述球面投影至所述第一圖像中的位置；

6、基于所述第一特征圖像和多個(gè)位置，生成第二圖像。

7、第二方面，本公開提供一種圖像處理裝置，該圖像處理裝置包括獲取模塊、處理模塊、確定模塊和生成模塊，其中：

8、所述獲取模塊用于，獲取第一圖像，所述第一圖像為由球面上的圖像投影至平面上的圖像；

9、所述處理模塊用于，對(duì)所述第一圖像進(jìn)行卷積處理，得到第一特征圖像；

10、所述確定模塊用于，確定所述第一圖像中的每個(gè)像素由所述球面投影至所述第一圖像中的位置；

11、所述生成模塊用于，基于所述第一特征圖像和多個(gè)位置，生成第二圖像。

12、第三方面，本公開實(shí)施例提供一種電子設(shè)備包括：處理器和存儲(chǔ)器；

13、所述存儲(chǔ)器存儲(chǔ)計(jì)算機(jī)執(zhí)行指令；

14、所述處理器執(zhí)行所述存儲(chǔ)器存儲(chǔ)的計(jì)算機(jī)執(zhí)行指令，使得所述至少一個(gè)處理器執(zhí)行如上第一方面以及第一方面各種可能涉及的所述圖像處理方法。

15、第四方面，本公開實(shí)施例提供一種計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)，所述計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)中存儲(chǔ)有計(jì)算機(jī)執(zhí)行指令，當(dāng)處理器執(zhí)行所述計(jì)算機(jī)執(zhí)行指令時(shí)，實(shí)現(xiàn)如上第一方面以及第一方面各種可能涉及的所述圖像處理方法。

16、本公開提供一種圖像處理方法、裝置及電子設(shè)備，電子設(shè)備可以獲取第一圖像，其中，第一圖像可以為由球面上的圖像投影至平面上的圖像，對(duì)第一圖像進(jìn)行卷積處理，得到第一特征圖像，確定第一圖像中的每個(gè)像素由球面投影至第一圖像中的位置，基于第一特征圖像和多個(gè)位置，生成第二圖像。在上述方法中，由于電子設(shè)備可以結(jié)合第一圖像中的像素由球面投影至第一圖像中的位置和第一圖像對(duì)應(yīng)的第一特征圖像，生成第二圖像，因此，電子設(shè)備重建得到的第二圖像的圖像質(zhì)量大于第一圖像的圖像質(zhì)量，進(jìn)而可以提高對(duì)第一圖像的圖像增強(qiáng)效果，提高第二圖像的可視化效果，提高第二圖像的準(zhǔn)確度。

技術(shù)特征：

1.一種圖像處理方法，其特征在于，包括：

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述基于所述第一特征圖像和多個(gè)位置，生成第二圖像，包括：

3.根據(jù)權(quán)利要求2所述的方法，其特征在于，所述基于所述多個(gè)位置編碼和所述第一特征圖像，生成所述第二圖像，包括：

4.根據(jù)權(quán)利要求3所述的方法，其特征在于，所述基于所述可變形卷積、多個(gè)偏置特征和所述第一特征圖像，生成所述第二圖像，包括：

5.根據(jù)權(quán)利要求4所述的方法，其特征在于，所述基于所述可變形卷積和所述多個(gè)偏置特征，對(duì)所述第一特征圖像進(jìn)行卷積處理，包括：

6.根據(jù)權(quán)利要求5所述的方法，其特征在于，所述基于所述更新后的可變形卷積，對(duì)所述第一特征圖像進(jìn)行卷積處理，包括：

7.根據(jù)權(quán)利要求2-6任一項(xiàng)所述的方法，其特征在于，所述對(duì)所述第一圖像中的每個(gè)像素的位置進(jìn)行編碼，得到多個(gè)位置編碼，包括：

8.一種圖像處理裝置，其特征在于，包括獲取模塊、處理模塊、確定模塊和生成模塊，其中：

9.一種電子設(shè)備，其特征在于，包括：處理器和存儲(chǔ)器；

10.一種計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)，其特征在于，所述計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)中存儲(chǔ)有計(jì)算機(jī)執(zhí)行指令，當(dāng)處理器執(zhí)行所述計(jì)算機(jī)執(zhí)行指令時(shí)，實(shí)現(xiàn)如權(quán)利要求1-7任一項(xiàng)所述的圖像處理方法。

技術(shù)總結(jié)
本公開提供一種圖像處理方法、裝置及電子設(shè)備，該方法包括：獲取第一圖像，所述第一圖像為由球面上的圖像投影至平面上的圖像；對(duì)所述第一圖像進(jìn)行卷積處理，得到第一特征圖像；確定所述第一圖像中的每個(gè)像素由所述球面投影至所述第一圖像中的位置；基于所述第一特征圖像和多個(gè)位置，生成第二圖像。

技術(shù)研發(fā)人員：孫曉鵬,李瑋琦,馬秋芳,李軍林
受保護(hù)的技術(shù)使用者：北京字跳網(wǎng)絡(luò)技術(shù)有限公司
技術(shù)研發(fā)日：
技術(shù)公布日：2024/12/19