本發(fā)明涉及電子技術(shù)領(lǐng)域，尤其涉及一種提供參考信息的方法及裝置。

背景技術(shù)：

隨著人工智能的發(fā)展，越來越多的醫(yī)院已經(jīng)開始使用機(jī)器人為病患服務(wù)。例如，用于超聲波掃描人體的機(jī)器人，通過對人體待掃描位置進(jìn)行快速三維成像后，控制超聲波探頭進(jìn)行自動掃描生成相應(yīng)的病理圖像。再由醫(yī)生根據(jù)病理圖像進(jìn)行分析，進(jìn)而得到相應(yīng)的診斷結(jié)果。

雖然由醫(yī)生作為診斷方出具的診斷結(jié)果更為權(quán)威可靠，但對于經(jīng)驗(yàn)不算豐富的醫(yī)生來說，僅依靠病理圖像并不能夠準(zhǔn)確且快速地給出診斷結(jié)果，因此導(dǎo)致診斷時(shí)間無法確定。

因此，為了提高對病人的診斷效率，有必要提供一種能夠?yàn)樵\斷方提供診斷參考的方案。

技術(shù)實(shí)現(xiàn)要素：

本發(fā)明的目的在于提供一種提供參考信息的方法及裝置，旨在提供一種能夠?yàn)樵\斷方提供診斷參考的方案，以提高對病人的診斷效率。

本發(fā)明是這樣實(shí)現(xiàn)的，一種提供參考信息的方法，用于在超聲波掃描儀完成掃描后，為診斷方提供參考信息，所述參考信息獲取方法包括：

獲取對患處進(jìn)行超聲波掃描后生成的超聲波掃描圖像；

對所述超聲波掃描圖像進(jìn)行圖像處理，以得到對應(yīng)的三維圖像；

將所述三維圖像與所述患處對應(yīng)的核磁共振圖像進(jìn)行圖像融合，以得到目標(biāo)圖像；

若對照模型庫中存在與所述目標(biāo)圖像相關(guān)的索引圖像類，則載入所述索引圖像類的診斷信息。

對應(yīng)的，本發(fā)明的另一目的在于提供一種提供參考信息的裝置，用于在超聲波掃描儀完成掃描后，為診斷方提供參考信息，所述參考信息獲取裝置包括：

獲取單元，用于獲取對患處進(jìn)行超聲波掃描后生成的超聲波掃描圖像；

三維圖像生成單元，用于對所述超聲波掃描圖像進(jìn)行圖像處理，以得到對應(yīng)的三維圖像；

圖像融合單元，用于將所述三維圖像與所述患處對應(yīng)的核磁共振圖像進(jìn)行圖像融合，以得到目標(biāo)圖像；

第一執(zhí)行單元，用于若對照模型庫中存在與所述目標(biāo)圖像相關(guān)的索引圖像類，則載入所述索引圖像類的診斷信息。

上述方案中，通過獲取對患處進(jìn)行超聲波掃描后生成的超聲波掃描圖像；對超聲波掃描圖像進(jìn)行圖像處理，以得到對應(yīng)的三維圖像；將三維圖像與患處對應(yīng)的核磁共振圖像進(jìn)行圖像融合，以得到目標(biāo)圖像；若對照模型庫中存在與所述目標(biāo)圖像相關(guān)的索引圖像類，則載入所述索引圖像類的診斷信息，實(shí)現(xiàn)了為診斷方在對病人進(jìn)行診斷時(shí)，提供診斷參考，進(jìn)而提高了對病人的診斷效率。

附圖說明

圖1是本發(fā)明實(shí)施例提供的一種提供參考信息的方法的流程圖；

圖2是本發(fā)明實(shí)施例提供的一種提供參考信息的裝置的結(jié)構(gòu)示意圖。

具體實(shí)施方式

為了使本發(fā)明的目的、技術(shù)方案及優(yōu)點(diǎn)更加清楚明白，以下結(jié)合附圖及實(shí)施例，對本發(fā)明進(jìn)行進(jìn)一步詳細(xì)說明。應(yīng)當(dāng)理解，此處所描述的具體實(shí)施例僅僅用以解釋本發(fā)明，并不用于限定本發(fā)明。

本發(fā)明的目的在于提供一種提供參考信息的方法及裝置，旨在提供一種能夠?yàn)樵\斷方提供診斷參考的方案，以提高對病人的診斷效率。

在本發(fā)明的所有實(shí)施例中，提供的參考信息是在超聲波掃描儀完成掃描后，為診斷方提供參考信息。即基于超聲波掃描儀生成的超聲波掃描圖像，為診斷方提供相應(yīng)的參考信息，以提高診斷效率。

以下結(jié)合具體附圖對本發(fā)明的實(shí)現(xiàn)進(jìn)行詳細(xì)的描述：

圖1示出了本發(fā)明實(shí)施例提供的一種提供參考信息的方法實(shí)現(xiàn)流程，為了便于說明，僅示出與本實(shí)施例相關(guān)的部分。

如圖1所示，一種提供參考信息的方法包括：

s110：獲取對患處進(jìn)行超聲波掃描后生成的超聲波掃描圖像。

在步驟s110中，超聲波掃描圖像為用于描述患處的病理圖像。

需要說明的是，對患處進(jìn)行超聲波掃描，具體可以是：若患處已處于識別預(yù)設(shè)區(qū)域內(nèi)，對所述患處進(jìn)行三維輪廓掃描，以得到所述患處的外輪廓圖像；控制所述超聲波掃描儀根據(jù)所述外輪廓圖像對所述患處進(jìn)行超聲波掃描。

可以理解的是，預(yù)設(shè)區(qū)域?yàn)槿S掃描儀和超聲波掃描儀工作時(shí)重疊的掃描區(qū)域，當(dāng)病人患處區(qū)域處于掃描設(shè)備的預(yù)設(shè)區(qū)域內(nèi)時(shí)，可確定其為待掃描體，進(jìn)而控制三維掃描儀對其進(jìn)行三維輪廓掃描。

其中，三維掃描儀中的每一臺三維掃描儀都可以為3d掃描儀，通過對預(yù)設(shè)區(qū)域內(nèi)的待掃描體同時(shí)投影或者光柵投射多條光線，進(jìn)而采集待掃描體的的多個(gè)外表表面的圖像，通過采集生物體的部分或全部區(qū)域的不同角度外表面的信息進(jìn)而完成三維輪廓掃描。

進(jìn)一步的，所述若所述病人患處已處于識別預(yù)設(shè)區(qū)域內(nèi)，對所述病人患處進(jìn)行三維輪廓掃描，以得到所述病人患處的外輪廓圖像包括：獲取由所述三維掃描儀掃描到的多組數(shù)據(jù)；對所述多組數(shù)據(jù)進(jìn)行三維輪廓拼接以得到所述病人患處的外輪廓圖像。

以待掃描體即病人患為人體頭部為例，當(dāng)人體頭部處于預(yù)設(shè)區(qū)域內(nèi)時(shí)，三維掃描儀對該人體頭部進(jìn)行三維輪廓掃描，通過獲取由三維掃描儀掃描到的多組數(shù)據(jù)，根據(jù)人體建模對照模型庫對多組數(shù)據(jù)進(jìn)行三維輪廓拼接。其中，人體建模對照模型庫可以包括人體各個(gè)部位或器官的準(zhǔn)確的三維信息，通過該人體建模對照模型庫可以生成完整的人體模型，即面片模型，再通過對面片模型進(jìn)行參數(shù)化數(shù)字處理，可進(jìn)一步得到人體頭部的準(zhǔn)確參數(shù)。

s120：對所述超聲波掃描圖像進(jìn)行圖像處理，以得到對應(yīng)的三維圖像。

在步驟s120中，圖像增強(qiáng)便是為了改善圖像的外觀，使超聲波掃描圖像更適合于機(jī)器的分析處理，其實(shí)質(zhì)是有選擇地加強(qiáng)圖像中的某些信息，同時(shí)抑制另一些信息，以增加圖像的“可讀性”。濾波去噪的目的是去除或降低圖像中的噪聲，如超聲圖像的斑點(diǎn)噪聲、高斯噪聲等，以減少超聲圖像中的斑點(diǎn)噪聲對超聲圖像的影響。

圖像分割和邊緣輪廓提取是進(jìn)行三維重建與顯示的基礎(chǔ)，分割的效果和輪廓的精度直接影響到三維重建后模型的精確性，分割和邊緣輪廓提取可以幫助醫(yī)生將感興趣的物體病變組織等提取出來，使得診斷方能夠?qū)Σ∽兘M織進(jìn)行定性和定量的分析，從而提高診斷方診斷的準(zhǔn)確性和科學(xué)性。

需要說明的是，步驟s120具體可以包括：對所述超聲波掃描圖像進(jìn)行圖像增強(qiáng)和圖像濾波處理，以得到第一圖像；對所述第一圖像進(jìn)行圖像分割，以得到多個(gè)切片圖像；對所述多個(gè)切片圖像中的每個(gè)切片圖像進(jìn)行輪廓線標(biāo)記；根據(jù)所述多個(gè)切片圖像上的物體輪廓線將相鄰的切片圖像的輪廓線進(jìn)行連接重組，得到所述對應(yīng)的三維圖像信息。

其中，對所述第一圖像進(jìn)行圖像分割后，對所述多個(gè)切片圖像中的每個(gè)切片圖像進(jìn)行輪廓線標(biāo)記，即為對進(jìn)行了圖像增強(qiáng)和圖像濾波的超聲波掃描圖像進(jìn)行圖像分割后對每個(gè)切片圖像進(jìn)行邊緣輪廓提取。

s130：將所述三維圖像與所述患處對應(yīng)的核磁共振圖像進(jìn)行圖像融合，以得到目標(biāo)圖像。

在步驟s130中，核磁共振圖像與患處有關(guān)，與病患無關(guān)。即核磁共振圖像為患處的預(yù)設(shè)核磁共振圖像。

需要說明的是，圖像融合是指對多個(gè)圖像傳感器獲取到的關(guān)于同一場景或目標(biāo)的多個(gè)源圖像按照實(shí)際需求進(jìn)行融合處理，從而獲取在同一場景中需要的目標(biāo)都清晰，且更加全面和可靠的圖像信息，使之適合視覺感知或計(jì)算機(jī)的處理。

步驟s130具體可以包括：對所述核磁共振圖像和/或所述三維圖像進(jìn)行格式轉(zhuǎn)換，以將所述核磁共振圖像與所述三維圖像進(jìn)行疊加；對所述核磁共振圖像和/或所述三維圖像進(jìn)行方向或尺寸調(diào)整，使得所述三維圖像上的特征點(diǎn)與所述核磁共振圖像上的特征點(diǎn)相互重合，進(jìn)而得到目標(biāo)圖像。

需要說明的是，在對圖像進(jìn)行融合之前，先進(jìn)行圖像配準(zhǔn)，圖像配準(zhǔn)包括剛性和非剛性配準(zhǔn)，其中剛性配準(zhǔn)是使源圖像上的點(diǎn)映射到目標(biāo)圖像中的對應(yīng)點(diǎn)。在進(jìn)行圖像配準(zhǔn)處理中，還進(jìn)行圖像轉(zhuǎn)換和圖像定位，圖像轉(zhuǎn)換是對相同或不同影像設(shè)備的圖像進(jìn)行格式轉(zhuǎn)換，三維方向調(diào)整、尺寸變換等。

可以理解的是，圖像定位是根據(jù)圖像內(nèi)容進(jìn)行重復(fù)定位，可以快速的實(shí)現(xiàn)圖像配準(zhǔn)。

s140：若對照模型庫中存在與所述目標(biāo)圖像相關(guān)的索引圖像類，則載入所述索引圖像類的診斷信息。

在步驟s140中，對照模型庫中包括不同病人的索引圖像類和相應(yīng)的診斷結(jié)果可以理解的是，從所述對照模型庫中確定待載入的信息可以包含多個(gè)所述索引圖像類的診斷信息。具體地，索引圖像類為與目標(biāo)圖像相關(guān)的圖像的集合。載入的診斷信息為索引圖像類內(nèi)的圖像所對應(yīng)的診斷信息。

進(jìn)一步的，步驟s140具體可以包括：獲取所述目標(biāo)圖像中的特征點(diǎn)；根據(jù)所述特征點(diǎn)從所述對照模型庫中確定所述索引圖像類；載入所述索引圖像類的診斷信息。

需要說明的是，特征點(diǎn)用于表征目標(biāo)圖像的病理內(nèi)容或患處，所述特征點(diǎn)可以是不同組織結(jié)構(gòu)的掃描圖像上的點(diǎn)。

例如，特征點(diǎn)包括骨骼上的特征點(diǎn)a與腫瘤組織上的特征點(diǎn)b，特征點(diǎn)所攜帶的信息可以為特征點(diǎn)a與特征點(diǎn)b之間的距離。

根據(jù)所述特征點(diǎn)從所述對照模型庫中確定所述索引圖像類，即根據(jù)特征點(diǎn)從對照模型庫中篩選出與特征點(diǎn)相同的索引圖像類。

再例如，特征點(diǎn)包括腫瘤組織上的特征點(diǎn)c與腫瘤組織上的特征點(diǎn)d，從對照模型庫中篩選出與特征點(diǎn)相同的目標(biāo)超聲波掃描圖像，即根據(jù)特征點(diǎn)c或特征點(diǎn)d，從對照模型庫中的索引圖像類中篩選出相應(yīng)的超聲波掃描圖像上具有與特征點(diǎn)c或特征點(diǎn)d相同的索引圖像類。

進(jìn)一步的，在步驟s130之后還可以包括步驟：若對照模型庫中不存在與所述目標(biāo)圖像相關(guān)的索引圖像類，則將所述目標(biāo)圖像以及診斷方確定的診斷結(jié)果作為新的診斷信息存入所述對照模型庫中。

通過若對照模型庫中不存在與所述目標(biāo)圖像相關(guān)的索引圖像類，則將所述目標(biāo)圖像以及診斷方確定的診斷結(jié)果作為新的診斷信息存入所述對照模型庫中，豐富了對照模型庫的內(nèi)容。

上述方案中，通過獲取對患處進(jìn)行超聲波掃描后生成的超聲波掃描圖像；對超聲波掃描圖像進(jìn)行圖像處理，以得到對應(yīng)的三維圖像；將三維圖像與患處對應(yīng)的核磁共振圖像進(jìn)行圖像融合，以得到目標(biāo)圖像；若對照模型庫中存在與所述目標(biāo)圖像相關(guān)的索引圖像類，則載入所述索引圖像類的診斷信息，實(shí)現(xiàn)了為診斷方在對病人進(jìn)行診斷時(shí)，提供診斷參考，進(jìn)而提高了對病人的診斷效率。

請繼續(xù)參見圖2，一種提供參考信息的裝置100包括的各模塊用于執(zhí)行圖1對應(yīng)的實(shí)施例中的各步驟，具體請參閱圖1以及圖1對應(yīng)的實(shí)施例中的相關(guān)描述，此處不贅述。

如圖2所示，一種提供參考信息的裝置100包括：獲取單元10、三維圖像生成單元20、圖像融合單元30以及第一執(zhí)行單元30。具體地：

獲取單元10，用于獲取對患處進(jìn)行超聲波掃描后生成的超聲波掃描圖像，并將超聲波掃描圖像發(fā)送給三維圖像生成單元20。

例如，獲取單元10獲取對患處進(jìn)行超聲波掃描后生成的超聲波掃描圖像，并將超聲波掃描圖像發(fā)送給三維圖像生成單元20。

三維圖像生成單元20，用于接收獲取單元10發(fā)送的超聲波掃描圖像，并對所述超聲波掃描圖像進(jìn)行圖像處理，以得到對應(yīng)的三維圖像，并將三維圖像發(fā)送給圖像融合單元30。

例如，三維圖像生成單元20接收獲取單元10發(fā)送的超聲波掃描圖像，并對所述超聲波掃描圖像進(jìn)行圖像處理，以得到對應(yīng)的三維圖像，并將三維圖像發(fā)送給圖像融合單元30。

進(jìn)一步的，三維圖像生成單元20包括：圖像增強(qiáng)與濾波單元、圖像分割單元、標(biāo)記單元以及圖像生成單元。具體地：

圖像增強(qiáng)與濾波單元，用于對所述超聲波掃描圖像進(jìn)行圖像增強(qiáng)和圖像濾波處理，以得到第一圖像。

例如，圖像增強(qiáng)與濾波單元對所述超聲波掃描圖像進(jìn)行圖像增強(qiáng)和圖像濾波處理，以得到第一圖像。

圖像分割單元，用于對所述第一圖像進(jìn)行圖像分割，以得到多個(gè)切片圖像。

例如，圖像分割單元對所述第一圖像進(jìn)行圖像分割，以得到多個(gè)切片圖像。

標(biāo)記單元，用于對所述多個(gè)切片圖像中的每個(gè)切片圖像進(jìn)行輪廓線標(biāo)記。

例如，標(biāo)記單元對所述多個(gè)切片圖像中的每個(gè)切片圖像進(jìn)行輪廓線標(biāo)記。

圖像生成單元，用于根據(jù)所述多個(gè)切片圖像上的物體輪廓線將相鄰的切片圖像的輪廓線進(jìn)行連接重組，得到所述對應(yīng)的三維圖像信息。

例如，圖像生成單元根據(jù)所述多個(gè)切片圖像上的物體輪廓線將相鄰的切片圖像的輪廓線進(jìn)行連接重組，得到所述對應(yīng)的三維圖像信息。

圖像融合單元30，用于接收三維圖像生成單元20發(fā)送的三維圖像，并將所述三維圖像與所述患處對應(yīng)的核磁共振圖像進(jìn)行圖像融合，以得到目標(biāo)圖像，且將目標(biāo)圖像發(fā)送給第一執(zhí)行單元40。

例如，圖像融合單元30接收三維圖像生成單元20發(fā)送的三維圖像，并將所述三維圖像與所述患處對應(yīng)的核磁共振圖像進(jìn)行圖像融合，以得到目標(biāo)圖像，且將目標(biāo)圖像發(fā)送給第一執(zhí)行單元40。

進(jìn)一步的，圖像融合單元30包括：格式轉(zhuǎn)換單元和圖像調(diào)整單元。具體的：

格式轉(zhuǎn)換單元，用于對所述核磁共振圖像和/或所述三維圖像進(jìn)行格式轉(zhuǎn)換，以將所述核磁共振圖像與所述三維圖像進(jìn)行疊加。

例如，格式轉(zhuǎn)換單元對所述核磁共振圖像和/或所述三維圖像進(jìn)行格式轉(zhuǎn)換，以將所述核磁共振圖像與所述三維圖像進(jìn)行疊加。

圖像調(diào)整單元，用于對所述核磁共振圖像和/或所述三維圖像進(jìn)行方向或尺寸調(diào)整，使得所述三維圖像上的特征點(diǎn)與所述核磁共振圖像上的特征點(diǎn)相互重合，進(jìn)而得到目標(biāo)圖像。

例如，圖像調(diào)整單元對所述核磁共振圖像和/或所述三維圖像進(jìn)行方向或尺寸調(diào)整，使得所述三維圖像上的特征點(diǎn)與所述核磁共振圖像上的特征點(diǎn)相互重合，進(jìn)而得到目標(biāo)圖像。

第一執(zhí)行單元40，用于接收圖像融合單元30發(fā)送的目標(biāo)圖像，并若對照模型庫中存在與所述目標(biāo)圖像相關(guān)的索引圖像類，則載入所述索引圖像類的診斷信息。

例如，第一執(zhí)行單元40接收圖像融合單元30發(fā)送的目標(biāo)圖像，并若對照模型庫中存在與所述目標(biāo)圖像相關(guān)的索引圖像類，則載入所述索引圖像類的診斷信息。

進(jìn)一步的，第一執(zhí)行單元包括：特征點(diǎn)獲取單元、確定單元以及信息載入單元。具體地：

特征點(diǎn)獲取單元，用于獲取所述目標(biāo)圖像中的特征點(diǎn)。

例如，特征點(diǎn)獲取單元獲取所述目標(biāo)圖像中的特征點(diǎn)。

確定單元，用于根據(jù)所述特征點(diǎn)從所述對照模型庫中確定所述索引圖像類。

例如，確定單元根據(jù)所述特征點(diǎn)從所述對照模型庫中確定所述索引圖像類。

信息載入單元，用于載入所述索引圖像類的診斷信息。

例如，信息載入單元載入所述索引圖像類的診斷信息。

作為本發(fā)明一優(yōu)選實(shí)施例，參考信息獲取裝置還包括：第二執(zhí)行單元。

第二執(zhí)行單元，用于若對照模型庫中不存在與所述目標(biāo)圖像相關(guān)的索引圖像類，則將所述目標(biāo)圖像以及診斷方確定的診斷結(jié)果作為新的診斷信息存入所述對照模型庫中。

例如，第二執(zhí)行單元若對照模型庫中不存在與所述目標(biāo)圖像相關(guān)的索引圖像類，則將所述目標(biāo)圖像以及診斷方確定的診斷結(jié)果作為新的診斷信息存入所述對照模型庫中。

通過若對照模型庫中不存在與所述目標(biāo)圖像相關(guān)的索引圖像類，則將所述目標(biāo)圖像以及診斷方確定的診斷結(jié)果作為新的診斷信息存入所述對照模型庫中，豐富了對照模型庫的內(nèi)容。

上述方案中，通過獲取對患處進(jìn)行超聲波掃描后生成的超聲波掃描圖像；對超聲波掃描圖像進(jìn)行圖像處理，以得到對應(yīng)的三維圖像；將三維圖像與患處對應(yīng)的核磁共振圖像進(jìn)行圖像融合，以得到目標(biāo)圖像；若對照模型庫中存在與所述目標(biāo)圖像相關(guān)的索引圖像類，則載入所述索引圖像類的診斷信息，實(shí)現(xiàn)了為診斷方在對病人進(jìn)行診斷時(shí)，提供診斷參考，進(jìn)而提高了對病人的診斷效率。

本領(lǐng)域普通技術(shù)人員可以理解：實(shí)現(xiàn)上述方法實(shí)施例的步驟或部分步驟可以通過程序指令相關(guān)的硬件來完成，前述的程序可以存儲于計(jì)算機(jī)可讀取存儲介質(zhì)中，該程序在執(zhí)行時(shí)，執(zhí)行包括上述方法實(shí)施例的步驟，而前述的存儲介質(zhì)包括：rom、ram、磁碟或者光盤等各種可以存儲程序代碼的介質(zhì)。

以上所述僅為本發(fā)明的較佳實(shí)施例而已，并不用以限制本發(fā)明，凡在本發(fā)明的精神和原則之內(nèi)所作的任何修改、等同替換和改進(jìn)等，均應(yīng)包含在本發(fā)明的保護(hù)范圍之內(nèi)。