本發(fā)明涉及圖像處理領(lǐng)域，尤其涉及圖像拼接領(lǐng)域。更具體地，本發(fā)明涉及圖像處理系統(tǒng)的領(lǐng)域，該圖像處理系統(tǒng)被配置用于執(zhí)行用于利用神經(jīng)網(wǎng)絡(luò)基于圖像拼接來生成圖像表示的計算機(jī)實施的方法、用于利用神經(jīng)網(wǎng)絡(luò)基于圖像拼接來生成圖像表示的計算機(jī)實施的方法、以及針對圖像拼接的圖像表示訓(xùn)練神經(jīng)網(wǎng)絡(luò)的方法。

背景技術(shù)：

1、基于圖像拼接的圖像表示是在例如x射線成像中創(chuàng)建大于檢測器尺寸的解剖結(jié)構(gòu)的圖像的技術(shù)。通常，需要解剖結(jié)構(gòu)的交疊x射線圖像，特別是來自應(yīng)當(dāng)基于拼接圖像被分析的相應(yīng)的目標(biāo)解剖結(jié)構(gòu)的交疊x射線圖像。通過圖像處理算法來對準(zhǔn)和混合可以被描述為處于相鄰狀態(tài)的圖像以獲得整個目標(biāo)解剖結(jié)構(gòu)的一幅圖像。

2、經(jīng)典圖像處理算法通常通過相似性度量來估計兩幅相鄰圖像之間的預(yù)期位移。在存在于兩幅相鄰圖像中的交疊區(qū)域上計算相似性度量，其中，基于例如交疊x射線圖像來直接計算相似性度量。對于在拼接期間組合的每個相鄰圖像對，交疊區(qū)域暴露兩次；這導(dǎo)致患者的更高劑量。大的交疊區(qū)域?qū)崿F(xiàn)更可靠的拼接過程，同時它們也增加了患者劑量。相反，小的交疊區(qū)域減少了患者劑量，但是使拼接過程不那么可靠。這些量度、相似性度量傾向于局部最大值或最小值，這可能由噪聲或視差誤差引起。相似性度量的這些局部極值可能導(dǎo)致不準(zhǔn)確的拼接結(jié)果，或者甚至導(dǎo)致整個拼接流程的故障。

3、wo2022/182293a1描述了一種圖像拼接方法，包括基于多幅輸入圖像并且基于圖像域拼接過程來生成第一拼接圖像。

4、chukuri等人：“i,r-stitch?unit:encoder-decoder-cnn?based?lmagemosaicingmechanism?for?stitching?non-homogeneous?image?sequences”(ieee?access,ieee,usa，第9卷，2021年1月18日，第16761-16782頁)描述了基于新穎的卷積編碼器-解碼器深度神經(jīng)網(wǎng)絡(luò)的魯棒且可靠的圖像拼接方法。

5、ep3726457?a1描述了用于使用非線性優(yōu)化和多約束代價函數(shù)最小化來拼接圖像的系統(tǒng)和方法。

6、ep2555156?a1描述了一種由電子設(shè)備實施的用于圖像拼接的方法。

7、levin等人：“seamless?image?stitching?in?the?gradient?domain”(16april2004,computer?vision-eccv?2004；[lecture?notes?in?computer?science；；lncs],springer-verlag,berlin/heidelberg,第377-389頁)描述了圖像拼接，其被用于通過使用代價函數(shù)將具有一些交疊的若干個體圖像組合成合成圖像。

技術(shù)實現(xiàn)思路

1、因此，需要優(yōu)化圖像拼接過程的質(zhì)量，尤其是需要基于圖像拼接來優(yōu)化圖像表示的質(zhì)量。特別是需要改進(jìn)圖像拼接過程并且避免整個拼接流程的不準(zhǔn)確拼接結(jié)果或故障。

2、本發(fā)明的目的是提供一種用于訓(xùn)練的方法、一種用于基于用于訓(xùn)練的方法生成圖像表示的方法以及一種用于圖像表示的系統(tǒng)，其中，可以減少相似性度量的故障，并且拼接結(jié)果可以改進(jìn)，并且由于相似性度量而更不易出現(xiàn)故障。

3、本發(fā)明的目的是通過獨立權(quán)利要求的主題來解決的，其中，另外的實施例被并入從屬權(quán)利要求中。

4、根據(jù)本發(fā)明的第一方面，描述了一種訓(xùn)練用于確定圖像拼接的圖像表示的卷積神經(jīng)網(wǎng)絡(luò)(cnn)的方法。所述方法包括以下步驟：接收圖像數(shù)據(jù)，其中，所述圖像數(shù)據(jù)包括在交疊區(qū)域中彼此交疊的至少兩幅圖像，其中，圖像在目標(biāo)解剖結(jié)構(gòu)中彼此交疊，其中，所述交疊區(qū)域包括兩幅圖像之間的最佳位移，使得兩幅圖像可以被正確地組合以用于圖像拼接。所述方法還可以包括以下步驟：確定交疊區(qū)域中的兩幅圖像的位移的代價函數(shù)；確定代價函數(shù)與參考代價函數(shù)的偏差；以及基于偏差優(yōu)化cnn。

5、在本發(fā)明的背景下，術(shù)語“圖像表示”應(yīng)該被理解為描述至少一幅圖像或多于一幅圖像的顯示、圖示。特別地，術(shù)語“圖像表示應(yīng)當(dāng)被理解為描述為將非線性變換應(yīng)用于一對x射線圖像的結(jié)果。可以通過訓(xùn)練cnn從數(shù)據(jù)中學(xué)習(xí)非線性變換。換句話說，這些圖像可以使用圖像拼接方法來生成，特別是使用如本文所述的cnn的訓(xùn)練方法的圖像拼接方法。圖像表示可以是例如從患者(特別是從應(yīng)當(dāng)分析的特定目標(biāo)解剖結(jié)構(gòu))生成的圖像的x射線圖像表示。可以根據(jù)用于訓(xùn)練的任何方法和/或根據(jù)如本文所述的在圖像表示系統(tǒng)中生成圖像表示的計算機(jī)實施的方法來預(yù)先處理從被表示的患者生成的圖像。

6、在本發(fā)明的背景下，術(shù)語“圖像拼接”或“拼接”應(yīng)該被理解為描述組合至少兩幅或更多幅圖像以生成一幅新圖像的方法或過程，其中，術(shù)語圖像拼接可以用于標(biāo)準(zhǔn)拼接流程或用于使用根據(jù)實施例的方法、系統(tǒng)和元件的圖像拼接流程，如本文所述的。特別地，對于圖像的拼接，至少兩幅圖像，其中，圖像在特定區(qū)域中交疊，圖像的該區(qū)域是共同的。圖像拼接被用于提供組合圖像的所謂無縫結(jié)果。

7、在本發(fā)明的背景下，術(shù)語“交疊區(qū)域”應(yīng)被理解為描述被包括在待拼接的圖像中(例如在至少兩幅圖像中)的區(qū)域。換句話說，應(yīng)該經(jīng)歷拼接過程的至少兩幅圖像從患者的例如腿部生成。第一圖像可以從膝蓋拍攝到小腿中間，第二圖像可以從腳拍攝到小腿的中間。兩幅圖像都包括在小腿的中間的區(qū)域中的相同圖像信息和對應(yīng)于膝蓋(第一圖像)和腳(第二圖像)的不同圖像信息。交疊區(qū)域是圖像信息和/或兩幅顯示圖像包括相同和/或相似圖像信息的區(qū)域。交疊區(qū)域的尺寸尤其取決于相應(yīng)單幅圖像本身的尺寸、圖像處理系統(tǒng)的移動和/或用于生成圖像的圖像設(shè)備的移動。

8、在本發(fā)明的背景下，術(shù)語“目標(biāo)解剖結(jié)構(gòu)”應(yīng)被理解為描述例如身體的應(yīng)當(dāng)由醫(yī)學(xué)人員檢查以用于醫(yī)學(xué)處置等的部分。該目標(biāo)解剖結(jié)構(gòu)可以是患者的任何身體部位，例如腿、腳、手臂、胸部、頭部等。為了研究目標(biāo)解剖結(jié)構(gòu)，可以生成圖像，可以生成包括目標(biāo)解剖結(jié)構(gòu)的至少兩幅圖像。

9、在本發(fā)明的背景下，術(shù)語“最佳位移”應(yīng)被理解為描述例如至少兩幅圖像的布置，使得組合圖像不包括任何拼接故障和/或交疊/疊加故障。因此，應(yīng)當(dāng)實現(xiàn)組合圖像的無縫結(jié)果，這需要圖像之間幾乎精確的交疊和幾乎相同的曝光來產(chǎn)生最佳位移。特別地，用例如交疊圖像對來訓(xùn)練cnn，其中，它們之間的對應(yīng)位移是最佳的正確位移。位移是兩幅圖像之間的真實移位，使得它們可以被正確地拼接。因此，訓(xùn)練cnn以預(yù)測針對未知圖像(甚至針對具有小交疊區(qū)域的圖像)的最佳位移。cnn可能能夠?qū)D像變換為新的圖像表示。最佳位移可以基于該新表示使用相似性度量來確定，如將關(guān)于本發(fā)明的其他實施例所描述的。

10、換句話說，利用所描述的方法，可以利用相應(yīng)的最佳輸入?yún)?shù)來訓(xùn)練神經(jīng)網(wǎng)絡(luò)，特別是卷積神經(jīng)網(wǎng)絡(luò)，使得經(jīng)訓(xùn)練的cnn能夠確定、預(yù)測在實時應(yīng)用期間的最佳位移。特別地，為了學(xué)習(xí)更適合于圖像拼接的圖像表示。因此，描述了數(shù)據(jù)驅(qū)動的方法，其中，cnn被訓(xùn)練以學(xué)習(xí)圖像的表示，其表示輸入圖像中可見的整個解剖結(jié)構(gòu)。該方法的結(jié)果可以是具有顯著最小值的平滑代價函數(shù)以確定最佳位移和/或用于圖像拼接的移位。

11、例如，當(dāng)在用于基于圖像拼接的圖像表示的計算機(jī)實施的方法中和在使用該方法的系統(tǒng)中應(yīng)用經(jīng)訓(xùn)練的神經(jīng)網(wǎng)絡(luò)時，訓(xùn)練方法允許減少交疊區(qū)域并因此減少患者劑量。特別地，交疊區(qū)域可以減少并且可以盡可能小，因為所提出的方法(用于訓(xùn)練cnn)甚至從小交疊區(qū)域也能夠確定最佳位移，并且使用經(jīng)訓(xùn)練的cnn的拼接過程沒有代價函數(shù)的歧義。此外，當(dāng)在成像系統(tǒng)中使用經(jīng)訓(xùn)練的方法時，如將在本文中的其他實施例中描述的，改進(jìn)的圖像表示方法允許容易進(jìn)行圖像拼接過程，例如，所謂的拼接標(biāo)尺(其是由x射線吸收材料制成的標(biāo)尺)可以被省略，使得工作流程被增強(qiáng)。

12、神經(jīng)網(wǎng)絡(luò)的訓(xùn)練允許避免代價函數(shù)中的假全局最小值，這導(dǎo)致降低的拼接故障率。cnn的輸入圖像例如是兩幅完整圖像，而不僅僅是交疊區(qū)域。因此，cnn可能能夠考慮來自整個輸入圖像的所有解剖特征，這繼而允許減少交疊區(qū)域并且因此減少對患者的x射線暴露。此外，cnn可能能夠降低故障率，特別是對于諸如腿的細(xì)長解剖結(jié)構(gòu)，如果使用經(jīng)典技術(shù)，則這可能由于代價函數(shù)中的模糊而導(dǎo)致不正確的位移。

13、所描述的訓(xùn)練方法及其在計算機(jī)實施的方法和圖像表示系統(tǒng)中的應(yīng)用可以用于x射線、射線照相、熒光透視、矯形、骨骼射線照相領(lǐng)域，并且不限于任何特定醫(yī)學(xué)成像。

14、根據(jù)本發(fā)明的示例性實施例，優(yōu)化cnn的步驟可以包括優(yōu)化cnn的至少一個參數(shù)，例如，可以優(yōu)化濾波器內(nèi)核。替代地或另外地，優(yōu)化cnn可以包括優(yōu)化多于一個參數(shù)或所有參數(shù)，例如，優(yōu)化所有濾波器內(nèi)核。優(yōu)化cnn可以包括確定cnn的最佳權(quán)重。

15、根據(jù)本發(fā)明的示例性實施例，所述方法還可以包括懲罰與參考代價函數(shù)的偏差的步驟。該步驟可以用于訓(xùn)練、優(yōu)化cnn，特別是cnn的參數(shù)，如濾波器內(nèi)核和/或多個濾波器內(nèi)核。

16、換句話說，可以描述偏差的懲罰，cnn可以獎勵滿足參考代價函數(shù)的這些代價函數(shù)。因此，cnn可以在訓(xùn)練得到參考代價函數(shù)的圖像表示的同時進(jìn)行學(xué)習(xí)。為了獎勵相應(yīng)的代價函數(shù)，可以確定位移與參考代價函數(shù)的偏差，其中，當(dāng)偏差滿足參考代價函數(shù)時獎勵可以更大。

17、根據(jù)本發(fā)明的示例性實施例，可以重復(fù)確定代價函數(shù)、確定代價函數(shù)與參考代價函數(shù)的偏差以及優(yōu)化cnn的步驟，直到代價函數(shù)滿足參考代價函數(shù)為止。因此，在代價函數(shù)滿足參考函數(shù)之前可能需要若干迭代步驟。

18、根據(jù)本發(fā)明的示例性實施例，可以從具有帶注釋的正確位移的臨床拼接序列和/或從具有已知位移的人工構(gòu)造的圖像數(shù)據(jù)獲得圖像數(shù)據(jù)。可以在臨床圖像數(shù)據(jù)上訓(xùn)練cnn以在例如兩幅x射線圖像之間的最佳位移的位置處具有全局極值的最佳代價函數(shù)。由于cnn可考慮來自輸入的整個圖像的解剖特征，因此其還可允許減少交疊區(qū)域且因此減少對患者的x射線暴露。

19、包括帶注釋的正確位移的圖像數(shù)據(jù)可以被理解為圖像數(shù)據(jù)，其中，正確位移是已知的。例如，臨床人員和/或醫(yī)學(xué)人員可能已經(jīng)注釋了用于確定正確位移的圖片。因此，注釋可以是手動注釋，這可能是指由于所需人員而導(dǎo)致的更高代價。在另一方面，這可以具有真實噪聲和視差誤差存在于圖像中的優(yōu)點，并且這被包括在訓(xùn)練方法中，使得cnn利用來自真實環(huán)境的圖像進(jìn)行訓(xùn)練。

20、基于人工構(gòu)造/生成的具有已知位移的圖像數(shù)據(jù)的其他圖像數(shù)據(jù)可以被理解為描述增強(qiáng)的臨床圖像的使用。增強(qiáng)可以描述利用例如人工噪聲、透視失真或?qū)Ρ榷壤旌?或壓縮來修改圖像，其中，這些示例不是限制性的。因此，圖像日期可以包括具有相同內(nèi)容但不同外觀的兩幅圖像。可從兩幅圖像裁剪相同尺寸的兩個交疊區(qū)域。事實上，已知交疊區(qū)域如何交疊，真實位移是已知的。該方法可以用于人工生成具有已知位移的圖像對。該方法可以更便宜，可以是自動化的，并且可以避免手動圖像注釋的代價?？梢栽谟?xùn)練期間組合用于訓(xùn)練的圖像數(shù)據(jù)的確定的兩種方法。

21、根據(jù)本發(fā)明的示例性實施例，確定兩幅圖像的位移的代價函數(shù)的步驟可以包括將相似性度量應(yīng)用于兩幅圖像之間的多個位移。

22、相似性度量可以應(yīng)用于兩幅輸入圖像的多于一個位移。對這種相似性度量的定義的唯一限制可以是相似性度量是可微分的，因為它是訓(xùn)練過程的部分，其中，所有操作可以是、應(yīng)該是或特別需要是可微分的。應(yīng)用于多個位移的相似性度量的輸出可以是代價函數(shù)。最小化，因此最小代價值的確定導(dǎo)致位移，這最大化交疊區(qū)域中的相似性。在理想圖像中，交疊圖像在交疊區(qū)域中將是相同的。為了確定最佳位移，可能僅需要最小化代價函數(shù)。然而，在實踐中，視差誤差和噪聲干擾該最小化過程，并且這可能導(dǎo)致不正確的位移。相似性度量被應(yīng)用于多個位移，以找到最佳位移。由于相似性度量可以是可微分的，因此可以通過相似性度量反向傳播損失的梯度并且優(yōu)化cnn的參數(shù)。因此，經(jīng)訓(xùn)練的cnn可能能夠預(yù)測應(yīng)用相似性度量以確定最佳位移的新圖像。

23、根據(jù)本發(fā)明的示例性實施例，應(yīng)用相似性度量的步驟可以包括確定可能位移的交疊區(qū)域的相似性。具體地，相似性度量確定、計算每個可能位移的相似性。在本發(fā)明的背景下，術(shù)語“可能位移”應(yīng)被理解為描述可以在圖像中找到的位移，其中，不是整個圖像彼此交疊，而是僅相關(guān)的交疊區(qū)域。例如，交疊可以取決于用于準(zhǔn)直和移動的成像系統(tǒng)設(shè)置?？赡芪灰频牧硪皇纠梢允橇阄灰婆c最大圖像寬度之間的位移的數(shù)量。例如，如果圖像具有2400mm(長度)x1800mm(寬度)的尺寸，則可能位移可以在0到1800mm的范圍內(nèi)。另一示例，例如，如果圖像具有400mm?x120mm的尺寸，則可能的位移可以在0到120mm的范圍內(nèi)。應(yīng)當(dāng)注意，如果位移為零，則圖像可以是相同的。此外，位移也可能受成像系統(tǒng)的幾何結(jié)構(gòu)和/或成像系統(tǒng)的移動的影響。因此，如果以特定不確定性已知成像系統(tǒng)的移動，則可以根據(jù)不確定性來定義可能位移的范圍。例如，如果系統(tǒng)的移動將在60mm至100mm的范圍內(nèi)已知，則該范圍也限定可能位移的范圍。

24、根據(jù)本發(fā)明的示例性實施例，應(yīng)用相似性度量的步驟可以包括生成針對多個位移中的每個位移的代價值，其中，所述代價函數(shù)是根據(jù)多個位移的代價值生成的。因此，不同位移處的代價值的分布、過程或趨勢產(chǎn)生代價函數(shù)。對于多個位移中的每個，可以生成、確定代價值。在圖2中描述了代價函數(shù)的過程的可能圖示。

25、根據(jù)本發(fā)明的示例性實施例，參考代價函數(shù)可以是凸代價函數(shù)。理想的代價函數(shù)可以是拋物線，其在真實位移處具有其最小值，因此是凸代價函數(shù)。因此，參考代價函數(shù)是凸代價函數(shù)，其中，可以確定與該凸代價函數(shù)的偏差。鑒于懲罰與參考代價函數(shù)的偏差的步驟，可以懲罰不匹配、滿足凸代價函數(shù)的偏差。

26、根據(jù)本發(fā)明的示例性實施例，代價函數(shù)的最小值可以對應(yīng)于兩幅圖像的最佳位移。因此，當(dāng)代價函數(shù)被確定時并且特別地當(dāng)代價函數(shù)滿足凸代價函數(shù)時，訓(xùn)練方法可能能夠確定最佳位移，因為凸代價函數(shù)僅包括一個最小值。因此，故障率可以通過cnn的新圖像表示來最小化，這可以避免代價函數(shù)中的局部極值。

27、根據(jù)本發(fā)明的示例性實施例，相似性度量可以包括以下中的至少一個：歸一化互相關(guān)、零均值歸一化交叉函數(shù)、絕對差之和、或平方差之和。相似性度量可能不限于這些明確提及的相似性度量，技術(shù)人員已知的其他相似性度量也可以是適用的。應(yīng)用這些上述相似性度量，并且相應(yīng)的輸出可以是代價值，其中，根據(jù)與相應(yīng)位移相對應(yīng)的多個代價值，可以生成代價函數(shù)。

28、根據(jù)本發(fā)明的第二方面，描述了一種用于利用卷積神經(jīng)網(wǎng)絡(luò)(cnn)生成拼接圖像的計算機(jī)實施的方法。所述方法包括以下步驟：接收包括至少兩幅圖像的輸入數(shù)據(jù)集，其中，所述至少兩幅圖像包括交疊區(qū)域，其中，所述圖像在目標(biāo)解剖結(jié)構(gòu)中彼此交疊；使用用根據(jù)本文描述的任一個實施例的方法訓(xùn)練的cnn處理輸入數(shù)據(jù)集，從cnn產(chǎn)生包括至少兩幅輸出圖像的輸出數(shù)據(jù)集，將拼接算法應(yīng)用于cnn的至少兩幅輸出圖像，使用拼接算法確定最佳位移，以及基于確定的最佳位移和輸入圖像生成合成圖像，即拼接圖像。

29、利用所描述的計算機(jī)實施的方法，可以基于神經(jīng)網(wǎng)絡(luò)更適合于圖像拼接地來計算/計算圖像表示。換句話說，由cnn架構(gòu)處理一對圖像(例如x射線圖像)，所述cnn架構(gòu)輸出一對圖像。因此，輸出數(shù)據(jù)集可以包括至少兩幅圖像，其被變換為新的圖像表示，其至少包括來自輸入圖像的所有圖像信息。輸出圖像可以具有與輸入圖像相同的尺寸。如果需要較少的準(zhǔn)確度并且計算時間可以是有限的，則可以使用較低的分辨率來減少計算時間并且因此減小輸出圖像的尺寸。由于拼接算法使用cnn的輸出數(shù)據(jù)集，因此容易確定最佳位移，因為cnn的輸出數(shù)據(jù)集包括圖像表示，其得到凸形代價函數(shù)。因此，計算機(jī)實施的方法能夠生成具有最佳位移的合成圖像，即拼接圖像。

30、根據(jù)本發(fā)明的示例性實施例，處理輸入數(shù)據(jù)集的步驟可以包括應(yīng)用至少一個經(jīng)訓(xùn)練的濾波器內(nèi)核的步驟。cnn包括濾波器內(nèi)核，可以在如上述任一哥實施例所述的訓(xùn)練方法期間進(jìn)行優(yōu)化。

31、根據(jù)本發(fā)明的第三方面，描述了一種圖像處理系統(tǒng)，其被配置用于執(zhí)行用于生成圖像表示的計算機(jī)實施的方法，如本文所述。所述系統(tǒng)包括至少一個處理器，所述至少一個處理器被配置為接收包括至少兩幅圖像的輸入數(shù)據(jù)集，其中，所述至少兩幅圖像包括交疊區(qū)域，其中，所述圖像在目標(biāo)解剖結(jié)構(gòu)中彼此交疊。所述處理器還可以被配置為使用cnn處理輸入數(shù)據(jù)集，從cnn產(chǎn)生包括至少兩幅輸出圖像的輸出數(shù)據(jù)集，將拼接算法應(yīng)用于cnn的至少兩幅輸出圖像，使用拼接算法確定最佳位移，基于所確定的最佳位移和輸入圖像生成合成圖像，即拼接圖像。

32、圖像處理系統(tǒng)還可以包括用戶接口，所述用戶接口被配置為從處理系統(tǒng)接收輸出數(shù)據(jù)集并且被配置為向用戶顯示處理結(jié)果，例如組合圖像。

33、根據(jù)本公開的各種實施例，本文描述的方法可以使用執(zhí)行軟件程序的硬件計算機(jī)系統(tǒng)來實施。此外，在示例性非限制性實施例中，實施方式可以包括分布式處理、部件/對象分布式處理和并行處理。虛擬計算機(jī)系統(tǒng)處理可以實施如本文所述的一個或多個方法或功能，并且本文描述的處理器可以用于支持虛擬處理環(huán)境。

34、根據(jù)本發(fā)明的第三方面，描述了一種包括指令的計算機(jī)程序，當(dāng)所述程序被計算機(jī)執(zhí)行時，所述指令使所述計算機(jī)執(zhí)行如上文所述的任一個實施例的方法。詳細(xì)地，程序可以使得計算機(jī)執(zhí)行如關(guān)于本文的任一實施例所述的用于訓(xùn)練cnn的方法。此外，程序可以額外地和/或單獨地使計算機(jī)執(zhí)行用于生成圖像表示的計算機(jī)實施的方法，如根據(jù)本文的任一個實施例描述的。

35、計算機(jī)程序單元可以是計算機(jī)程序的部分，但是它本身也可以是整個程序。例如，計算機(jī)程序單元可以用于更新已經(jīng)存在的計算機(jī)程序以獲得本發(fā)明。

36、程序單元可以存儲在計算機(jī)可讀介質(zhì)上。計算機(jī)可讀介質(zhì)可以被視為存儲介質(zhì)，例如usb棒、cd、dvd、數(shù)據(jù)存儲設(shè)備、硬盤或者其上可以存儲如上所述的程序單元的任何其它介質(zhì)。

37、根據(jù)本發(fā)明的第四方面，一種包括指令的計算機(jī)可讀介質(zhì)，所述指令在由計算機(jī)執(zhí)行時使所述計算機(jī)執(zhí)行如本文所述的任一個實施例的方法。詳細(xì)地，計算機(jī)可讀介質(zhì)可以使計算機(jī)執(zhí)行如本文中的任一個實施例所述的用于訓(xùn)練cnn的方法。此外，計算機(jī)可讀介質(zhì)可以額外地和/或單獨地使計算機(jī)執(zhí)行如任一個實施例所述的用于生成圖像表示的計算機(jī)實施的方法。

38、應(yīng)當(dāng)注意，已經(jīng)參考不同的主題描述了本發(fā)明的實施例。特別地，已經(jīng)參考系統(tǒng)、計算機(jī)程序類型權(quán)利要求描述了一些實施例，而已經(jīng)參考方法類型權(quán)利要求描述了其他實施例。然而，本領(lǐng)域技術(shù)人員將從以上和以下描述中收集，除非另有通知，除了屬于一種類型的主題的特征的任何組合之外，還考慮與不同主題有關(guān)的特征之間的任何組合，特別是在系統(tǒng)類型權(quán)利要求的特征與方法類型權(quán)利要求的特征之間的任何組合被認(rèn)為是本技術(shù)公開的。