1.一種基于跨尺度令牌交互的transformer單圖像超分辨率重建方法,其特征在于,包括如下步驟:
2.根據(jù)權(quán)利要求1所述的一種基于跨尺度令牌交互的transformer單圖像超分辨率重建方法,其特征在于,步驟1具體為:使用一層?標(biāo)準(zhǔn)卷積將低分辨率圖像映射到高位的特征空間,得到淺層特征,其中c表示通道數(shù),表示特征圖大小,公式如下:
3.根據(jù)權(quán)利要求1所述的一種基于跨尺度令牌交互的transformer單圖像超分辨率重建方法,其特征在于,步驟2具體包括如下步驟:
4.根據(jù)權(quán)利要求3所述的一種基于跨尺度令牌交互的transformer單圖像超分辨率重建方法,其特征在于,步驟203具體為:先進(jìn)行逐步的池化下采樣得到區(qū)域令牌特征圖和全局令牌特征圖,考慮到不增加額外的參數(shù),其共享線性層的參數(shù),公式如下:
5.根據(jù)權(quán)利要求3所述的一種基于跨尺度令牌交互的transformer單圖像超分辨率重建方法,其特征在于,步驟204中,以像素令牌為查詢q,區(qū)域令牌為鍵k和值v,在計(jì)算特征圖前先通過線性層對(duì)q,k的特征維度進(jìn)行壓縮以減少計(jì)算量,然后進(jìn)行注意力的計(jì)算得到融合了區(qū)域信息的像素令牌,具體公式如下:
6.根據(jù)權(quán)利要求3所述的一種基于跨尺度令牌交互的transformer單圖像超分辨率重建方法,其特征在于,步驟206中,所述深度卷積門控前向傳播層dwconvffl為線性變換層兩個(gè)平行路徑的逐元素乘積,其中之一通過?gelu?非線性激活,在其中加入深度卷積以對(duì)空間相鄰像素位置的信息進(jìn)行編碼,公式如下:
7.根據(jù)權(quán)利要求1所述的一種基于跨尺度令牌交互的transformer單圖像超分辨率重建方法,其特征在于,步驟3具體為:將步驟2得到的淺層特征與步驟3得到的深層特征通過跳躍連接進(jìn)行特征融合,然后采用亞像素卷積上采樣,得到重建后高分辨率圖像,公式如下:
8.一種計(jì)算機(jī)裝置,包括存儲(chǔ)器、處理器及存儲(chǔ)在存儲(chǔ)器上的計(jì)算機(jī)程序,其特征在于,所述處理器執(zhí)行所述計(jì)算機(jī)程序以實(shí)現(xiàn)權(quán)利要求1所述方法的步驟。
9.一種計(jì)算機(jī)可讀存儲(chǔ)介質(zhì),其上存儲(chǔ)有計(jì)算機(jī)程序/指令,其特征在于,該計(jì)算機(jī)程序/指令被處理器執(zhí)行時(shí)實(shí)現(xiàn)權(quán)利要求1所述方法的步驟。
10.一種計(jì)算機(jī)程序產(chǎn)品,包括計(jì)算機(jī)程序/指令,其特征在于,該計(jì)算機(jī)程序/指令被處理器執(zhí)行時(shí)實(shí)現(xiàn)權(quán)利要求1所述方法的步驟。