本發(fā)明涉及遠(yuǎn)程醫(yī)療重現(xiàn)技術(shù)領(lǐng)域,更具體地說,本發(fā)明涉及一種遠(yuǎn)程醫(yī)療重現(xiàn)系統(tǒng)。
背景技術(shù):
隨著計(jì)算機(jī)網(wǎng)絡(luò)技術(shù)的發(fā)展,出現(xiàn)遠(yuǎn)程醫(yī)療系統(tǒng)輔助醫(yī)生進(jìn)行遠(yuǎn)程診斷。例如應(yīng)用于家庭診斷的家庭遠(yuǎn)程醫(yī)療系統(tǒng),家庭用戶可通過該系統(tǒng)與遠(yuǎn)程的醫(yī)生進(jìn)行疾病交流,輔助醫(yī)生進(jìn)行遠(yuǎn)程診斷,對于日常的小疾病或緊急醫(yī)療事件的處理十分有效、便利。
但是,遠(yuǎn)程醫(yī)療系統(tǒng)最大的難點(diǎn)在于用戶如何有效、精確地提供醫(yī)療現(xiàn)場的相關(guān)數(shù)據(jù)給遠(yuǎn)程的醫(yī)生輔助醫(yī)生進(jìn)行精確診斷,否則遠(yuǎn)程醫(yī)療系統(tǒng)的有效性、精確性大大降低,不利于推廣應(yīng)用。
技術(shù)實(shí)現(xiàn)要素:
針對上述技術(shù)中存在的不足之處,本發(fā)明提供一種遠(yuǎn)程醫(yī)療重現(xiàn)系統(tǒng),可有效、精確地以虛擬圖像形式重現(xiàn)醫(yī)療現(xiàn)場及數(shù)據(jù),輔助醫(yī)生遠(yuǎn)程診斷,適于推廣應(yīng)用。
為了實(shí)現(xiàn)根據(jù)本發(fā)明的這些目的和其它優(yōu)點(diǎn),本發(fā)明通過以下技術(shù)方案實(shí)現(xiàn):
本發(fā)明提供一種遠(yuǎn)程醫(yī)療重現(xiàn)系統(tǒng),其包括:
網(wǎng)絡(luò)服務(wù)器,其用于數(shù)據(jù)收發(fā)、處理及加密/解密;
設(shè)于用戶端的至少一個(gè)數(shù)據(jù)采集單元,其用于實(shí)時(shí)采集醫(yī)療現(xiàn)場的至少一種醫(yī)療數(shù)據(jù)與空間數(shù)據(jù);
數(shù)據(jù)處理單元,其包括分別通信連接到所述網(wǎng)絡(luò)服務(wù)器與所述數(shù)據(jù)采集單元之間的控制器;
設(shè)于醫(yī)療端和用戶端的醫(yī)療重現(xiàn)單元,其包括與所述網(wǎng)絡(luò)服務(wù)器通信連接的虛擬現(xiàn)實(shí)眼鏡和/或顯示設(shè)備,以及,
遠(yuǎn)程交互單元,其與所述網(wǎng)絡(luò)服務(wù)器通信連接,用于數(shù)據(jù)的雙向傳輸;
其中,所述控制器對采集的醫(yī)療數(shù)據(jù)與空間數(shù)據(jù)進(jìn)行基于數(shù)據(jù)與空間的圖像配準(zhǔn)以及融合顯示,并將配準(zhǔn)及融合的圖像數(shù)據(jù)發(fā)送至所述網(wǎng)絡(luò)服務(wù)器;
所述虛擬現(xiàn)實(shí)眼鏡和/或現(xiàn)實(shí)設(shè)備從所述網(wǎng)絡(luò)服務(wù)器獲取數(shù)據(jù)以虛擬圖像形式重現(xiàn)用戶端和醫(yī)療端的圖像及數(shù)據(jù)。
優(yōu)選的是,所述數(shù)據(jù)采集單元包括:
第一相機(jī),其與所述控制器通信連接;
其中,所述第一相機(jī)包括波長光線不同的若干個(gè),用于采集醫(yī)療現(xiàn)場不同波長光線的數(shù)據(jù)發(fā)送給所述數(shù)據(jù)處理單元。
優(yōu)選的是,所述第一相機(jī)至少包括:
可見光相機(jī),其與所述控制器通信連接,用于拍攝影像發(fā)送給所述控制器以獲得三維重建圖像;
紅外相機(jī),其與所述控制器通信鏈接,用于采集體表溫度發(fā)送給所述控制器;
其中,所述可見光相機(jī)與所述紅外相機(jī)的相對位置固定。
優(yōu)選的是,所述可見光相機(jī)包括同一波長光線且設(shè)于不同視角位置的若干個(gè);
若干個(gè)所述可見光相機(jī)與所述紅外相機(jī)的相對位置固定。
優(yōu)選的是,所述第一相機(jī)還包括:
深度相機(jī),其與所述控制器通信連接,用于直接獲得三維數(shù)據(jù)發(fā)送給所述控制器;
其中,所述可見光相機(jī)、所述深度相機(jī)以及所述紅外相機(jī)相對位置固定。
優(yōu)選的是,所述數(shù)據(jù)采集單元還包括:
若干個(gè)傳感計(jì)量裝置,其分別通信連接到所述數(shù)據(jù)處理單元,用于對應(yīng)采集若干種人體生理參數(shù)分別發(fā)送給所述數(shù)據(jù)處理單元;
其中,若干種人體生理參數(shù)至少包括血糖、血壓、脈搏、心跳、聽診信息。
優(yōu)選的是,所述醫(yī)療重現(xiàn)單元還包括:
設(shè)于醫(yī)療端的力反饋裝置,其通信連接到所述網(wǎng)絡(luò)服務(wù)器,用于獲取實(shí)時(shí)脈搏數(shù)據(jù)并轉(zhuǎn)化成實(shí)時(shí)脈搏信息以重現(xiàn)現(xiàn)場脈診。
優(yōu)選的是,所述遠(yuǎn)程交互單元還包括:
第一語音裝置,其設(shè)于用戶端;
第二語音裝置,其設(shè)于醫(yī)療端;
第二相機(jī),其設(shè)于醫(yī)療端;
其中,所述第一語音裝置和所述第二語音裝置分別與所述網(wǎng)絡(luò)服務(wù)器通信連接,用于用戶端與醫(yī)療端的語音采集與交流;
所述第二相機(jī)通信連接到所述網(wǎng)絡(luò)服務(wù)器,用于采集醫(yī)療端視頻。
優(yōu)選的是,所述遠(yuǎn)程交互單元還包括:
指示單元,其包括分別位于所述醫(yī)療現(xiàn)場的第一激光筆和位于所述醫(yī)療端的第二激光筆;所述第一激光筆和所述第二激光筆分別與所述網(wǎng)絡(luò)服務(wù)器通信連接。
本發(fā)明至少包括以下有益效果:
1)本發(fā)明提供的遠(yuǎn)程醫(yī)療重現(xiàn)系統(tǒng),基于遠(yuǎn)程交互單元的交互,用戶端的至少一個(gè)數(shù)據(jù)采集單元實(shí)時(shí)采集至少一種醫(yī)療數(shù)據(jù)和空間數(shù)據(jù),數(shù)據(jù)處理單元的控制器對采集的醫(yī)療數(shù)據(jù)與空間數(shù)據(jù)進(jìn)行基于數(shù)據(jù)與空間的圖像配準(zhǔn)以及融合顯示,并將配準(zhǔn)及融合的圖像數(shù)據(jù)發(fā)送至網(wǎng)絡(luò)服務(wù)器,醫(yī)療端的醫(yī)生通過佩戴醫(yī)療重現(xiàn)單元的虛擬現(xiàn)實(shí)眼鏡,接收配準(zhǔn)及融合后的圖像數(shù)據(jù)以虛擬圖像形式重現(xiàn)醫(yī)療現(xiàn)場的圖像及數(shù)據(jù),輔助醫(yī)生遠(yuǎn)程診斷,醫(yī)療現(xiàn)場的圖像及數(shù)據(jù)重現(xiàn)有效性、精確性高;
2)第一相機(jī)至少包括相對位置固定的可見光相機(jī)和紅外相機(jī);可見光相機(jī)采集的實(shí)時(shí)影像、紅外相機(jī)采集的體表溫度,分別為遠(yuǎn)程醫(yī)生提供輔助診斷的數(shù)據(jù);可見光相機(jī)通過采集的影像發(fā)送給控制器獲取三維重建圖像,控制器對多種相機(jī)的位置進(jìn)行標(biāo)定,獲得可見光相機(jī)的三維重建圖像與紅外相機(jī)的圖像之間的旋轉(zhuǎn)-平移-縮放矩陣,即可實(shí)現(xiàn)在空間中的圖像配準(zhǔn)和數(shù)據(jù)融合顯示;
3)可見光相機(jī)還包括同一波長光線且設(shè)于不同視角位置的若干個(gè),用于多角度采集影像,提高三維重建圖像的精確度;
4)加入深度相機(jī)后,深度相機(jī)可直接獲得三維圖像,則控制器對多種相機(jī)的相對位置標(biāo)定后,可獲得可見光相機(jī)的二維圖像、深度相機(jī)的三維圖像以及紅外相機(jī)的圖像之間的旋轉(zhuǎn)-平移-縮放矩陣,即可實(shí)現(xiàn)在空間中以深度相機(jī)的三維圖像為核心進(jìn)行圖像配準(zhǔn)和數(shù)據(jù)融合顯示;
5)傳感計(jì)量裝置包括采集不同種類人體生理參數(shù),給遠(yuǎn)程醫(yī)生提供輔助診斷的數(shù)據(jù)參考;
6)力反饋裝置用于獲取實(shí)時(shí)脈搏數(shù)據(jù)并轉(zhuǎn)化成實(shí)時(shí)脈搏信息以重現(xiàn)現(xiàn)場脈診,適合中醫(yī)遠(yuǎn)程診斷;
7)第一語音裝置、第二語音裝置、第一相機(jī)以及第二相機(jī),建立起醫(yī)療現(xiàn)場與醫(yī)療端之間的語音和視頻交流。
本發(fā)明的其它優(yōu)點(diǎn)、目標(biāo)和特征將部分通過下面的說明體現(xiàn),部分還將通過對本發(fā)明的研究和實(shí)踐而為本領(lǐng)域的技術(shù)人員所理解。
附圖說明
圖1為本發(fā)明所述的遠(yuǎn)程醫(yī)療重現(xiàn)系統(tǒng)的通信示意圖;
圖2為本發(fā)明所述的若干個(gè)可見光相機(jī)和紅外相機(jī)相對位置示意;
圖3為本發(fā)明所述的可見光相機(jī)、深度相機(jī)以及紅外相機(jī)相對位置示意;
圖中:
1-網(wǎng)絡(luò)服務(wù)器;
2-數(shù)據(jù)采集單元;21-第一相機(jī);22-傳感計(jì)量裝置;
3-數(shù)據(jù)處理單元;31-控制器;
41-虛擬現(xiàn)實(shí)眼鏡;42-顯示設(shè)備;43-力反饋裝置;
51-第一語音裝置;52-第二語音裝置;53-第二相機(jī);
61-第一激光筆;62-第二激光筆。
具體實(shí)施方式
下面結(jié)合附圖對本發(fā)明做進(jìn)一步的詳細(xì)說明,以令本領(lǐng)域技術(shù)人員參照說明書文字能夠據(jù)以實(shí)施。
應(yīng)當(dāng)理解,本文所使用的諸如“具有”、“包含”以及“包括”術(shù)語并不排除一個(gè)或多個(gè)其它元件或其組合的存在或添加。
如圖1所示,本發(fā)明提供一種遠(yuǎn)程醫(yī)療重現(xiàn)系統(tǒng),其包括網(wǎng)絡(luò)服務(wù)器1、設(shè)于用戶端的至少一個(gè)數(shù)據(jù)采集單元2、數(shù)據(jù)處理單元3、設(shè)于用戶端和醫(yī)療端的醫(yī)療重現(xiàn)單元以及遠(yuǎn)程交互單元。網(wǎng)絡(luò)服務(wù)器1用于數(shù)據(jù)收發(fā)、處理及加密/解密。至少一個(gè)數(shù)據(jù)采集單元2用于實(shí)時(shí)采集醫(yī)療現(xiàn)場的至少一種醫(yī)療數(shù)據(jù)與空間數(shù)據(jù)。數(shù)據(jù)處理單元3包括分別通信連接到網(wǎng)絡(luò)服務(wù)器1與數(shù)據(jù)采集單元2之間的控制器31??刂破?1對采集的醫(yī)療數(shù)據(jù)與空間數(shù)據(jù)進(jìn)行基于數(shù)據(jù)與空間的圖像配準(zhǔn)以及融合顯示,并將配準(zhǔn)及融合后的圖像數(shù)據(jù)發(fā)送至網(wǎng)絡(luò)服務(wù)器1進(jìn)行打包壓縮、加密以及后續(xù)的傳輸。醫(yī)療重現(xiàn)單元包括與網(wǎng)絡(luò)服務(wù)器1通信連接的虛擬現(xiàn)實(shí)眼鏡41和/或顯示設(shè)備,虛擬現(xiàn)實(shí)眼鏡41和/或顯示設(shè)備從網(wǎng)絡(luò)服務(wù)器1獲取數(shù)據(jù)以虛擬圖像形式重現(xiàn)用戶端和醫(yī)療端的圖像及數(shù)據(jù)。例如,位于醫(yī)療端的虛擬現(xiàn)實(shí)眼鏡41和/或顯示設(shè)備接收配準(zhǔn)及融合后的圖像數(shù)據(jù)以虛擬圖像形式重現(xiàn)用戶端的圖像及數(shù)據(jù),供醫(yī)生查看;位于用戶端的虛擬現(xiàn)實(shí)眼鏡41和/或顯示設(shè)備接收醫(yī)生端醫(yī)生上傳至網(wǎng)絡(luò)服務(wù)器1的視頻影像等數(shù)據(jù),供用戶查看。遠(yuǎn)程交互單元與網(wǎng)絡(luò)服務(wù)器1通信連接,用于用戶端和醫(yī)療端之間的數(shù)據(jù)雙向傳輸。
該實(shí)施方式中,基于遠(yuǎn)程交互單元的交互,用戶通過至少一個(gè)數(shù)據(jù)采集單元2實(shí)時(shí)采集至少一種醫(yī)療數(shù)據(jù)和空間數(shù)據(jù)并發(fā)送給數(shù)據(jù)處理單元3的控制器31進(jìn)行數(shù)據(jù)處理??刂破?1對采集的醫(yī)療數(shù)據(jù)與空間數(shù)據(jù)進(jìn)行基于數(shù)據(jù)與空間的圖像配準(zhǔn)及融合顯示,并將配準(zhǔn)及融合后的圖像數(shù)據(jù)發(fā)送至網(wǎng)絡(luò)服務(wù)器1進(jìn)行打包壓縮和加密。醫(yī)療端的醫(yī)生通過佩戴醫(yī)療重現(xiàn)單元的虛擬現(xiàn)實(shí)眼鏡41或直接通過顯示設(shè)備,接收配準(zhǔn)及融合后的圖像數(shù)據(jù)以虛擬圖像形式重現(xiàn)用戶端的圖像及數(shù)據(jù),輔助醫(yī)生遠(yuǎn)程診斷,醫(yī)療現(xiàn)場的圖像及數(shù)據(jù)重現(xiàn)有效性、精確性高。用戶端的用戶也可以通過佩戴醫(yī)療重現(xiàn)單元的虛擬現(xiàn)實(shí)眼鏡41或直接通過顯示設(shè)備,接收醫(yī)療端傳輸至網(wǎng)絡(luò)服務(wù)器1的影像數(shù)據(jù),并以虛擬圖像形式重現(xiàn)醫(yī)療端的圖像及數(shù)據(jù),從而建立用戶與醫(yī)生基于虛擬圖像的交流。顯示設(shè)備可以是顯示屏幕或全息顯示屏,對方模型的重建與融合顯示等,均可在全息顯示的圖像空間中顯示,或在圖像空間中得到結(jié)果后,轉(zhuǎn)換為二維圖像顯示于顯示屏。
作為上述實(shí)施方式的優(yōu)選,數(shù)據(jù)采集單元2包括第一相機(jī)21。第一相機(jī)21與數(shù)據(jù)處理單元3通信連接。第一相機(jī)21包括波長光線不同的若干個(gè),用于采集醫(yī)療現(xiàn)場不同波長光線的數(shù)據(jù)發(fā)送給數(shù)據(jù)處理單元3進(jìn)行數(shù)據(jù)處理。具體地,第一相機(jī)21至少包括可見光相機(jī)和紅外相機(jī),如圖2所示??梢姽庀鄼C(jī)與控制器通信連接,用于拍攝影像發(fā)送給控制器31以獲得三維重建圖像。紅外相機(jī)與控制器31通信鏈接,用于采集體表溫度發(fā)送給控制器31??梢姽庀鄼C(jī)與紅外相機(jī)的相對位置固定??梢姽庀鄼C(jī)采集的實(shí)時(shí)影像、紅外相機(jī)采集的體表溫度,均可用于輔助遠(yuǎn)程的醫(yī)生了解用戶的實(shí)時(shí)病情??梢姽庀鄼C(jī)通過采集的影像發(fā)送給控制器31獲取三維重建圖像,控制器31對多種相機(jī)的位置進(jìn)行標(biāo)定,獲得可見光相機(jī)的三維重建圖像與紅外相機(jī)的圖像之間的旋轉(zhuǎn)-平移-縮放矩陣,可實(shí)現(xiàn)在空間中的圖像配準(zhǔn)和數(shù)據(jù)融合顯示,即實(shí)現(xiàn)控制器31基于圖像和空間的圖像與數(shù)據(jù)配準(zhǔn)。因此,醫(yī)療數(shù)據(jù)包括可見光相機(jī)采集的影像、紅外相機(jī)采集的體表溫度,空間數(shù)據(jù)包括可見光相機(jī)采集影像后由控制器31處理獲得的三維數(shù)據(jù)以及多種相機(jī)之間相對固定的位置信息。
作為進(jìn)一步優(yōu)選,如圖2所示,可見光相機(jī)還包括同一波長光線且設(shè)于不同視角位置的若干個(gè),若干個(gè)可見光相機(jī)與紅外相機(jī)的相對位置固定。若干個(gè)可見光相機(jī)設(shè)于用戶或醫(yī)生的不同視角同時(shí)采集實(shí)時(shí)影像以通過控制器31獲取多視角的三維重建圖像,再進(jìn)行三維數(shù)據(jù)在空間中的位置配準(zhǔn),以獲得更精確的三維數(shù)據(jù),在重現(xiàn)的虛擬圖像上融合顯示。
至于不同波長光線的第一相機(jī)21以及同一波長光線的若干個(gè)可見光相機(jī)的具體波長,不發(fā)明不作具體限定,以實(shí)現(xiàn)相應(yīng)功能為準(zhǔn)。
作為上述實(shí)施方式的優(yōu)選,如圖3所示,第一相機(jī)21還包括深度相機(jī)。深度相機(jī)與控制器31通信連接,用于直接獲取三維數(shù)據(jù)發(fā)送給控制器31??梢姽庀鄼C(jī)、深度相機(jī)以及紅外相機(jī)相對位置固定。該實(shí)施方式中,加入深度相機(jī)后,可見光相機(jī)只有一個(gè),可見光相機(jī)采集影像經(jīng)控制器31處理獲得二維圖像,深度相機(jī)可直接獲得三維圖像,則控制器對多種相機(jī)的相對位置標(biāo)定后,可獲得可見光相機(jī)的二維圖像、深度相機(jī)的三維圖像以及紅外相機(jī)的圖像之間的旋轉(zhuǎn)-平移-縮放矩陣,即可實(shí)現(xiàn)在空間中以深度相機(jī)的三維圖像為核心進(jìn)行圖像配準(zhǔn)和數(shù)據(jù)融合顯示。
作為上述實(shí)施方式的優(yōu)選,數(shù)據(jù)采集單元2還包括若干個(gè)傳感計(jì)量裝置22,其與數(shù)據(jù)處理單元3通信連接,用于對應(yīng)采集若干種人體生理參數(shù)分別發(fā)送給數(shù)據(jù)處理單元3。若干種人體生理參數(shù)至少包括血糖、血壓、脈搏、心跳、聽診信息,因此,傳感計(jì)量裝置22至少包括血糖計(jì)、血壓計(jì)、脈搏傳感器、心率計(jì)以及電子聽診器這幾種傳感器或計(jì)量裝置,為遠(yuǎn)程醫(yī)生提供多種用戶的人體生理參數(shù)的數(shù)據(jù)。
作為上述實(shí)施方式的優(yōu)選,數(shù)據(jù)處理單元3還包括用于對數(shù)據(jù)進(jìn)行預(yù)處理的裝置或器件。其中,對數(shù)據(jù)的預(yù)處理至少包括放大、濾波、模數(shù)轉(zhuǎn)換,因此,數(shù)據(jù)處理單元3還至少包括放大器、濾波器以及模數(shù)轉(zhuǎn)換器。
作為上述實(shí)施方式的優(yōu)選,醫(yī)療重現(xiàn)單元包括設(shè)于醫(yī)療端的力反饋裝置43。力反饋裝置43通信連接到網(wǎng)絡(luò)服務(wù)器1,用于獲取實(shí)時(shí)脈搏數(shù)據(jù)并轉(zhuǎn)化成實(shí)時(shí)脈搏信息以重現(xiàn)現(xiàn)場脈診。
作為上述實(shí)施方式的優(yōu)選,遠(yuǎn)程交互單元還包括設(shè)于用戶端的第一語音裝置51、設(shè)于醫(yī)療端的第二語音裝置52以及設(shè)于醫(yī)療端的第二相機(jī)53。第一語音裝置51和第二語音裝置52分別與網(wǎng)絡(luò)服務(wù)器1通信連接,實(shí)現(xiàn)用戶端和醫(yī)療端的語音采集與交流。第二相機(jī)53通信連接到網(wǎng)絡(luò)服務(wù)器1,用于采集醫(yī)療端視頻。該實(shí)施方式中,通過用戶端的第一語音裝置51和第一相機(jī)21、遠(yuǎn)程醫(yī)療端的第二語音裝置52和第二相機(jī)53,建立起用戶端與遠(yuǎn)程醫(yī)療端的醫(yī)生之間的基于語音和視頻的交流,例如,醫(yī)生可以遠(yuǎn)程指引醫(yī)療現(xiàn)場的用戶進(jìn)行人體生理參數(shù)以及其他醫(yī)療數(shù)據(jù)的采集。
作為上述實(shí)施方式的優(yōu)選,遠(yuǎn)程交互單元還包括指示單元。指示單元包括分別位于用戶端的第一激光筆61和位于醫(yī)療端的第二激光筆62;第一激光筆61和第二激光筆62分別與網(wǎng)絡(luò)服務(wù)器1通信連接,為遠(yuǎn)程醫(yī)療端的醫(yī)生與用戶端的用戶交流提供介質(zhì)輔助引導(dǎo)。作為進(jìn)一步優(yōu)選,醫(yī)療端還設(shè)有鼠標(biāo)或搖桿裝置,用于遠(yuǎn)程遙控用戶端的第一激光筆62的角度,以獲得更加精確地指引,例如,醫(yī)生通過鼠標(biāo)或遙感裝置遠(yuǎn)程控制用戶的第一激光筆61指向病人身體表面的部位,然后由用戶將電子聽診器貼住所指的位置,實(shí)現(xiàn)呼吸音、心音等的遠(yuǎn)程采集,醫(yī)生通過佩戴第二語音裝置52實(shí)時(shí)聽到病人電子聽診器的音頻。
<實(shí)施例1>
在上述實(shí)施方式的基礎(chǔ)上,本發(fā)明實(shí)施例給出網(wǎng)絡(luò)服務(wù)器1的使用示例。
網(wǎng)絡(luò)服務(wù)器1所處的網(wǎng)絡(luò)環(huán)境,只需保證系統(tǒng)內(nèi)的數(shù)據(jù)采集單元2、數(shù)據(jù)處理單元3、醫(yī)療重現(xiàn)單元、遠(yuǎn)程交互單元以及指示單元均可通過網(wǎng)絡(luò)連通即可。
網(wǎng)絡(luò)服務(wù)器1具備業(yè)務(wù)排隊(duì)功能,根據(jù)帶寬、數(shù)據(jù)處理單元3的性能限制,當(dāng)同一端所接入的遠(yuǎn)程端超過限制時(shí),可對遠(yuǎn)程端反饋排隊(duì)信號,保證在不超過限制的條件下,按照遠(yuǎn)程端發(fā)起通訊的時(shí)間排隊(duì)接入。
當(dāng)本地端與多個(gè)遠(yuǎn)程端進(jìn)行通訊時(shí),如果在進(jìn)行通訊的遠(yuǎn)程端之間具備點(diǎn)對點(diǎn)(p2p)連接的能力,則本地端的數(shù)據(jù)僅需通過網(wǎng)絡(luò)服務(wù)器1發(fā)送至其中一個(gè)遠(yuǎn)程端,然后在其p2p網(wǎng)絡(luò)內(nèi)由其他遠(yuǎn)程端共享。
作為具體示例,網(wǎng)絡(luò)服務(wù)器1采用基于x64架構(gòu)的服務(wù)器,部署于公網(wǎng)。
<實(shí)施例2>
在實(shí)施例1的基礎(chǔ)上,本發(fā)明實(shí)施例給出遠(yuǎn)程醫(yī)療重現(xiàn)系統(tǒng)的使用示例。
數(shù)據(jù)采集單元2中的第一相機(jī)21包括若干個(gè)可見光相機(jī)和紅外相機(jī),如圖2所示,或者第一相機(jī)21包括一個(gè)可見光相機(jī)、深度相機(jī)和紅外相機(jī),如圖3所示。可見光相機(jī)、深度相機(jī)和紅外相機(jī)分別通過數(shù)據(jù)處理單元3通信連接到網(wǎng)絡(luò)服務(wù)器1。紅外相機(jī)用于采集用戶端用戶的體表溫度??梢姽庀鄼C(jī)采集用戶端的實(shí)時(shí)影像,再配合遠(yuǎn)程交互單元的第一語音裝置51、第二語音裝置52以及第二相機(jī)53,建立醫(yī)生和用戶之間的遠(yuǎn)程交流,從而將醫(yī)療現(xiàn)場用戶端不利于采集或的信息(例如疼痛感)通過第一語音裝置51、第二語音裝置52、第一相機(jī)21以及第二相機(jī)53的交流(例如手勢、表情)來輔助醫(yī)療重現(xiàn)單元關(guān)于圖像與數(shù)據(jù)的重現(xiàn),供醫(yī)生查看。為了提高采集精確性,圖2中給出了同一波長光線且設(shè)于不同視角的若干個(gè)可見光相機(jī)的示例,獲得不同視角的三維數(shù)據(jù),通過控制器31處理輸出三維重建圖像。以圖3中第一相機(jī)包括可見光相機(jī)、深度相機(jī)以及紅外相機(jī)為例,在可見光相機(jī)、深度相機(jī)和紅外相機(jī)相對位置固定的情況下,控制器31對多種相機(jī)進(jìn)行位置標(biāo)定,可獲得可見光相機(jī)的二維圖像、深度相機(jī)的三維圖像與紅外相機(jī)的圖像之間的旋轉(zhuǎn)-平移-縮放矩陣,可實(shí)現(xiàn)在空間中進(jìn)行圖像配準(zhǔn)和數(shù)據(jù)的融合顯示。因此,醫(yī)療數(shù)據(jù)至少包括可見光相機(jī)采集的影像、紅外相機(jī)采集的體表溫度,空間數(shù)據(jù)包括可見光相機(jī)獲得的二維數(shù)據(jù)、深度相機(jī)獲得的三維數(shù)據(jù)以及多種相機(jī)之間相對固定的位置信息。
在第一相機(jī)21采集數(shù)據(jù)的同時(shí),數(shù)據(jù)采集單元2的傳感計(jì)量裝置22,例如血糖計(jì)、血壓計(jì)、脈搏傳感器、心率計(jì)以及電子聽診器等,將分別采集包括血糖、血壓、脈搏、心跳、聽診信息等若干種人體生理參數(shù)。
則,醫(yī)療數(shù)據(jù)包括用戶的影像、體表溫度以及若干種人體生理參數(shù)的數(shù)據(jù),是體表的二維數(shù)據(jù);空間數(shù)據(jù)包括三維數(shù)據(jù)以及相機(jī)相對位置數(shù)據(jù)。對于醫(yī)療端的醫(yī)生,控制器31將包括用戶的影像、體表溫度以及若干種人體生理參數(shù)的醫(yī)療數(shù)據(jù)對應(yīng)配準(zhǔn)到包括用戶的三維數(shù)據(jù)和相機(jī)位置數(shù)據(jù)的空間數(shù)據(jù)并融合打包、壓縮、加密上傳至網(wǎng)絡(luò)服務(wù)器1,醫(yī)療端的醫(yī)生通過佩戴虛擬現(xiàn)實(shí)眼鏡41可接收、解密以及解壓配準(zhǔn)及融合后的圖像數(shù)據(jù)以虛擬圖像形式重現(xiàn)用戶端的圖像及數(shù)據(jù),即醫(yī)生可看到立體、有顏色、有溫度分布的三維模型。溫度分布可通過調(diào)節(jié)某顏色通道的值來表示。用戶的其他數(shù)據(jù)如血壓,顯示方式為,在圖像空間中構(gòu)建一個(gè)二維平面,位于三維模型與人眼連線中的三維模型一端,保證人眼觀看時(shí)不失焦,血壓、姓名、年齡等數(shù)據(jù)以二維平面上的文字形式進(jìn)行顯示,實(shí)現(xiàn)醫(yī)生在觀察用戶的同時(shí)可看到用戶的信息。對于用戶端的用戶,醫(yī)療端的可見光相機(jī)將采集與醫(yī)生相關(guān)的影像發(fā)送至網(wǎng)絡(luò)服務(wù)器1,供用戶端的用戶通過虛擬現(xiàn)實(shí)眼鏡41或顯示設(shè)備42進(jìn)行查看。
<實(shí)施例3>
在實(shí)施例1、實(shí)施例2的基礎(chǔ)上,本發(fā)明實(shí)施例給出醫(yī)療重現(xiàn)單元的使用示例。
醫(yī)療重現(xiàn)單元對于圖像、文字、數(shù)字類的數(shù)據(jù),以視覺重現(xiàn)的形式進(jìn)行展示,對于觸覺類的數(shù)據(jù),通過觸覺反饋系統(tǒng)進(jìn)行觸覺重現(xiàn),例如用戶端的脈搏傳感器采集用戶的實(shí)時(shí)脈搏信號并轉(zhuǎn)化為實(shí)時(shí)脈搏數(shù)據(jù)傳輸給醫(yī)療重現(xiàn)單元的力反饋裝置43,力反饋裝置43將實(shí)時(shí)脈搏數(shù)據(jù)轉(zhuǎn)化成脈搏信號實(shí)現(xiàn)脈診重現(xiàn)。另外,通過數(shù)據(jù)處理單元對實(shí)時(shí)脈搏數(shù)據(jù)進(jìn)行分析,得出脈搏分類結(jié)果的輔助診斷結(jié)論,并同樣可以文字形式顯示于模型旁。對于聲音類數(shù)據(jù),同樣以聽覺重現(xiàn)形式展示,例如通過遠(yuǎn)程交互單元中的第二語音裝置52匹配對接數(shù)據(jù)采集單元2的第一語音裝置51,實(shí)現(xiàn)用戶與醫(yī)生之間的語音采集與交流。
醫(yī)療重現(xiàn)單元以虛擬圖像形式重現(xiàn)醫(yī)療現(xiàn)場的圖像及數(shù)據(jù)是通過控制器31以及虛擬現(xiàn)實(shí)眼鏡41來實(shí)現(xiàn)的。通過佩戴虛擬現(xiàn)實(shí)眼鏡41,醫(yī)療重現(xiàn)單元在同一場景中可以重現(xiàn)多個(gè)數(shù)據(jù)采集單元2采集得到的數(shù)據(jù),并且每個(gè)數(shù)據(jù)采集單元2的數(shù)據(jù)均以獨(dú)立的模型進(jìn)行重現(xiàn)。例如,醫(yī)生通過佩戴虛擬現(xiàn)實(shí)眼鏡41可以一次性在圖像空間中看到多個(gè)病人,遠(yuǎn)程交互單元會(huì)自動(dòng)識別醫(yī)生所指向的病人,并在醫(yī)生通過例如搖桿設(shè)備對用戶端的第一激光筆51等設(shè)備進(jìn)行控制時(shí),只控制醫(yī)生所指向的病人。
醫(yī)療重現(xiàn)單元當(dāng)接收到多個(gè)數(shù)據(jù)采集單元2采集的數(shù)據(jù)時(shí),在同一場景下可切換顯示單個(gè)或多個(gè)數(shù)據(jù)采集單元2傳來的數(shù)據(jù)。
醫(yī)療重現(xiàn)單元的顯示效果不局限于立體顯示,也可將得到的數(shù)據(jù)經(jīng)過處理顯示于平面顯示設(shè)備。例如醫(yī)療重現(xiàn)單元為顯示屏幕或全息顯示屏,對方模型的重建與融合顯示等,均可在全息顯示的圖像空間中顯示,或在圖像空間中得到結(jié)果后,轉(zhuǎn)換為二維圖像顯示于顯示屏。
盡管本發(fā)明的實(shí)施方案已公開如上,但其并不僅僅限于說明書和實(shí)施方式中所列運(yùn)用。它完全可以被適用于各種適合本發(fā)明的領(lǐng)域。對于熟悉本領(lǐng)域的人員而言可容易地實(shí)現(xiàn)另外的修改。因此在不背離權(quán)利要求及等同范圍所限定的一般概念下,本發(fā)明并不限于特定的細(xì)節(jié)和這里示出與描述的圖例。