本實用新型涉及醫(yī)療培訓(xùn)技術(shù)領(lǐng)域,尤其涉及一種AR和VR相結(jié)合的可移動眼角膜智能手術(shù)培訓(xùn)系統(tǒng)。
背景技術(shù):
根據(jù)世界衛(wèi)生組織的調(diào)查,角膜盲是僅次于白內(nèi)障的第二大致盲眼病。中國目前角膜盲患者約為500萬人,并且每年新增10萬多病例,在這些患者當(dāng)中,絕大多數(shù)人可以通過角膜移植重見光明。但是由于多方面因素,我國各地眼庫的角膜來源奇缺,不少患者只能被動地等待捐獻(xiàn)。統(tǒng)計數(shù)據(jù)顯示,我國每年等待角膜移植的患者至少有50萬人,但有機會接受角膜移植手術(shù)并復(fù)明的患者不到5000人。
隨著科技不斷發(fā)展,人工角膜的出現(xiàn),解決角膜供體的不足,為我國500萬乃至全球6000萬的角膜盲患者帶來復(fù)明的希望,但是角膜移植醫(yī)生的嚴(yán)重不足仍然是橫亙在角膜盲患者走向光明道路上的巨大障礙。目前全國共有眼科醫(yī)生28000名左右,但能開展內(nèi)眼手術(shù)的不足4000人,能夠獨立完成角膜移植手術(shù)的醫(yī)生不足百人,眼科醫(yī)生資源仍然缺乏。使得人工角膜推廣應(yīng)用受到極大限制,如何更多、更快地培養(yǎng)掌握板層角膜移植技術(shù)的醫(yī)生成為急迫要解決的一道難題。
當(dāng)前傳統(tǒng)的板層角膜移植手術(shù)醫(yī)生培訓(xùn)方法主要是集中講授、觀摩教學(xué)、替代物(如選擇豬的眼球)演練及現(xiàn)場指導(dǎo)式實操,由于培訓(xùn)時學(xué)員觀看角度與醫(yī)生操作角度存在差異、觀摩教學(xué)人數(shù)受限、替代物演練臨場感不足、現(xiàn)場實操風(fēng)險大等原因,即便是資深眼科醫(yī)生掌握這項手術(shù)都需要較長時間,而年輕醫(yī)生的培養(yǎng)周期就更為漫長。
虛擬眼球手術(shù)培訓(xùn)的問題是設(shè)備和程序復(fù)雜昂貴,并且與真實手術(shù)的模擬度還是較大距離,真實感不強,進一步地,現(xiàn)有的眼角膜手術(shù)培訓(xùn)設(shè)備往往體積較大,不便攜帶,培訓(xùn)場地也因此局限于固定地點,培訓(xùn)人員無法隨時隨地進行培訓(xùn)練習(xí)。
虛擬現(xiàn)實(Virtual Reality,VR)技術(shù)是一種可以創(chuàng)建和體驗虛擬世界的計算機仿真技術(shù),它利用計算機創(chuàng)造一個虛擬空間,用戶通過VR眼鏡能夠完全沉浸到該虛擬空間中,利用雙目視覺原理,虛擬空間在眼鏡中是3D立體的,從而達(dá)到身臨其境的效果。
由虛擬現(xiàn)實技術(shù)發(fā)展而來的增強現(xiàn)實(Augmented Reality,AR)技術(shù)是將虛擬的信息疊加到真實世界中,被人類感官所感知,從而達(dá)到超越現(xiàn)實的感官體驗,不同于虛擬現(xiàn)實技術(shù),采用增強現(xiàn)實技術(shù)用戶不僅能夠看到由計算機生成的虛擬信息,還能夠看到現(xiàn)有世界的真實信息,臨場感與真實感都更強。
技術(shù)實現(xiàn)要素:
本實用新型的目的在于提供一種AR和VR相結(jié)合的可移動眼角膜智能手術(shù)培訓(xùn)系統(tǒng),能夠真實再現(xiàn)眼角膜手術(shù)進程,并對培訓(xùn)人員進行實時指導(dǎo),提升眼角膜手術(shù)培訓(xùn)的真實感與臨場感,縮短眼角膜手術(shù)培訓(xùn)周期,降低眼角膜手術(shù)培訓(xùn)成本,且系統(tǒng)簡單便于攜帶,不受場地的限制,隨時隨地進行手術(shù)培訓(xùn)。
為實現(xiàn)上述目的,本實用新型提供了一種AR和VR相結(jié)合的可移動眼角膜智能手術(shù)培訓(xùn)系統(tǒng),包括:便攜式手術(shù)臺、設(shè)于所述便攜式手術(shù)臺上的動物眼球標(biāo)本、對應(yīng)所述動物眼球標(biāo)本設(shè)置的3D攝像顯微鏡、與所述3D攝像顯微鏡電性連接的計算機、與所述計算機電性連接的TOF傳感器、與所述計算機通訊連接的VR眼鏡。
所述便攜式手術(shù)臺上還設(shè)有人體頭部模型,所述動物眼球標(biāo)本設(shè)于所述人體頭部模型的眼部。
所述VR眼鏡與所述計算機之間通過無線網(wǎng)絡(luò)進行通訊。
計算機內(nèi)設(shè)有視頻采集卡。
所述VR眼鏡為自帶顯示屏幕的一體式VR眼鏡。
所述VR眼鏡為通過帶有顯示屏幕的智能移動終端進行畫面顯示的移動端VR眼鏡。
所述計算機中設(shè)有存儲單元,所述存儲單元保存有預(yù)先建模好的標(biāo)準(zhǔn)的眼角膜手術(shù)進程、各個進程的指導(dǎo)信息、各個進程的標(biāo)準(zhǔn)手術(shù)動作、多種眼科病灶、以及多種手術(shù)突發(fā)事件。
所述動物眼球標(biāo)本為豬眼球。
所述指導(dǎo)信息以及糾正信息均為文字信息、圖像信息、或文字信息與圖像信息的組合。
所述VR眼鏡內(nèi)設(shè)有語言播報裝置。
本實用新型的有益效果:本實用新型提供了一種AR和VR相結(jié)合的可移動眼角膜智能手術(shù)培訓(xùn)系統(tǒng),該系統(tǒng)通過3D攝像顯微鏡拍攝真實的動物眼球標(biāo)本的圖像,并通過計算機在該圖像上疊加上虛擬現(xiàn)實或增強現(xiàn)實建模的手術(shù)的指導(dǎo)信息,使得培訓(xùn)人員可以在手術(shù)的過程中實時獲得指導(dǎo)信息,提升培訓(xùn)的效率,同時通過TOF傳感器獲取培訓(xùn)人員實時的手術(shù)動作,將通過計算機判斷培訓(xùn)人員的手術(shù)動作是否正確,并給出糾正信息,從而使得培訓(xùn)人員錯誤的手術(shù)動作得到實時糾正,并且其采用便攜式的VR眼鏡以及便攜式的手術(shù)臺,系統(tǒng)簡單方便,手術(shù)培訓(xùn)不受場地的限制,在提升眼角膜手術(shù)培訓(xùn)的真實感與臨場感的同時,縮短眼角膜手術(shù)培訓(xùn)周期,降低眼角膜手術(shù)培訓(xùn)成本,實現(xiàn)可移動的眼角膜手術(shù)培訓(xùn)。
附圖說明
為了能更進一步了解本實用新型的特征以及技術(shù)內(nèi)容,請參閱以下有關(guān)本實用新型的詳細(xì)說明與附圖,然而附圖僅提供參考與說明用,并非用來對本實用新型加以限制。
附圖中,
圖1為本實用新型的AR和VR相結(jié)合的可移動眼角膜智能手術(shù)培訓(xùn)系統(tǒng)的結(jié)構(gòu)框圖;
圖2為本實用新型的AR和VR相結(jié)合的可移動眼角膜智能手術(shù)培訓(xùn)系統(tǒng)的立體圖。
具體實施方式
為更進一步闡述本實用新型所采取的技術(shù)手段及其效果,以下結(jié)合本實用新型的優(yōu)選實施例及其附圖進行詳細(xì)描述。
請參閱圖1及圖2,本實用新型提供一種AR和VR相結(jié)合的可移動眼角膜智能手術(shù)培訓(xùn)系統(tǒng),包括:便攜式手術(shù)臺1、設(shè)于所述便攜式手術(shù)臺1上的動物眼球標(biāo)本2、對應(yīng)所述動物眼球標(biāo)本2設(shè)置的3D攝像顯微鏡3、與所述3D攝像顯微鏡3電性連接的計算機4、與所述計算機4電性連接的TOF傳感器5、與所述計算機4通訊連接的VR眼鏡6;
具體地,所述便攜式手術(shù)臺1真實的眼角膜手術(shù)的手術(shù)臺的簡化版,保留了真實的眼角膜手術(shù)臺的核心部分,保證手術(shù)真實感的同時,兼顧手術(shù)臺的便攜性,以實現(xiàn)本實用新型隨時隨地進行眼角膜手術(shù)培訓(xùn)的目的。
具體地,為了進一步提升手術(shù)的真實感,在該仿真手術(shù)臺1上設(shè)有人體頭部模型21,手術(shù)時,動物眼球標(biāo)本2放于該人體頭部模型21的眼部,培訓(xùn)人員在真實的動物眼球標(biāo)本2上進行手術(shù)動作,并通過VR眼鏡6觀察手術(shù)中動物眼球標(biāo)本2的變化,同時獲取計算機4根據(jù)標(biāo)準(zhǔn)手術(shù)流程實時提供指導(dǎo)信息,以及根據(jù)標(biāo)準(zhǔn)手術(shù)動作提供的糾正信息,相比于傳統(tǒng)培訓(xùn)系統(tǒng)里的替代物演練,本實用新型的培訓(xùn)系統(tǒng)不僅能夠獲取真實的動物眼球標(biāo)本2畫面,還能夠?qū)崟r得到手術(shù)的指導(dǎo)信息與糾正信息,相比于采用包括含有各種力反饋機構(gòu)等在其中的人工眼球和人工手術(shù)刀的而進行的眼角膜手術(shù)培訓(xùn)系統(tǒng)相比,本實用新型采用真實的動物眼球標(biāo)本2進行手術(shù)培訓(xùn),手術(shù)的真實感更強,培訓(xùn)人員在手術(shù)過程中獲得手術(shù)的手感更好,培訓(xùn)價值更高的同時系統(tǒng)成本還大大降低。優(yōu)選地,所述動物眼球標(biāo)本2可為豬眼球,在兼顧手術(shù)培訓(xùn)真實性的同時,降低手術(shù)培訓(xùn)的成本,
具體地,所述3D攝像顯微鏡3拍攝動物眼球標(biāo)本2以及培訓(xùn)人員使用的手術(shù)器械的正面三維圖像,并傳輸至計算機4,優(yōu)選地,如圖2所示,該3D攝像顯微鏡3對應(yīng)位于所述動物眼球標(biāo)本2的正上方,從而使得培訓(xùn)人員通過VR眼鏡6看到實時的真實三維圖像,提升手術(shù)的真實感??梢岳斫獾氖?,由于眼角膜手術(shù)是需要在顯微鏡下完成的手術(shù),培訓(xùn)人員通過VR眼鏡6觀看的3D攝像顯微鏡3采集的正面三維圖像是經(jīng)過放大的圖像,從而達(dá)到在顯示鏡下進行的真實手術(shù)同樣的觀看效果,保證手術(shù)培訓(xùn)正常進行。
具體地,所述飛行時間(Time of Flight,TOF)傳感器5對動物眼球標(biāo)本2、培訓(xùn)人員使用的手術(shù)器械、以及培訓(xùn)人員的手部動作進行側(cè)面3D掃描,并將3D掃描圖像傳輸至計算機4,所述計算機4中設(shè)有存儲單元,所述存儲單元保存有預(yù)先建模好的標(biāo)準(zhǔn)的眼角膜手術(shù)進程、各個進程的指導(dǎo)信息、各個進程的標(biāo)準(zhǔn)手術(shù)動作、多種眼科病灶、以及多種手術(shù)突發(fā)事件,通過將TOF傳感器5提供的3D掃描圖像與標(biāo)準(zhǔn)的手術(shù)動作進行實時比對,實時糾正對培訓(xùn)人員在手術(shù)過程中的錯誤手術(shù)動作。其中,所述標(biāo)準(zhǔn)的眼角膜手術(shù)進程、各個進程的指導(dǎo)信息、各個進程的標(biāo)準(zhǔn)手術(shù)動作、多種眼科病灶、以及多種手術(shù)突發(fā)事件參考的大量的專家手術(shù)案例進行制定,保證手術(shù)進程的準(zhǔn)確性以及培訓(xùn)多樣性與實用性。所述標(biāo)準(zhǔn)的眼角膜手術(shù)進程、各個進程的標(biāo)準(zhǔn)手術(shù)動作、多種眼科病灶、以及多種手術(shù)突發(fā)事件參考的大量的專家手術(shù)案例進行制定,保證手術(shù)進程的準(zhǔn)確性,以及培訓(xùn)的多樣性與實用性,通過在標(biāo)準(zhǔn)的眼角膜手術(shù)進程加入突發(fā)事件處理的狀況,培訓(xùn)人員能夠獲得處理多種手術(shù)突發(fā)事件的經(jīng)驗,從而達(dá)到更好的培訓(xùn)效果。通過TOF傳感器5的應(yīng)用,使得圖像與數(shù)據(jù)采集實現(xiàn)了包括垂直角度與水平角度在內(nèi)的多角度獲取,從而可以更加真實地表現(xiàn)手術(shù)中的每個細(xì)節(jié),展現(xiàn)出培訓(xùn)人員和醫(yī)學(xué)專家在正常手術(shù)培訓(xùn)中難以看到的視角,降低手術(shù)動作的理解難度,加快培訓(xùn)速度,提升培訓(xùn)質(zhì)量
具體地,所述計算機4根據(jù)手術(shù)的進程輸出預(yù)存在計算機4中的相應(yīng)的指導(dǎo)信息,同時將TOF傳感器5采集來的3D掃描圖像和預(yù)設(shè)的標(biāo)準(zhǔn)手術(shù)動作進行實時比對,給出糾正信息,并將所述3D攝像顯微鏡3采集的正面三維圖像、指導(dǎo)信息、以及糾正信息一起進行建模,實時生成包含3D攝像顯微鏡3采集的正面三維圖像、指導(dǎo)信息、以及糾正信息的虛擬現(xiàn)實或增強現(xiàn)實模型,計算機4內(nèi)設(shè)有視頻采集卡,通過所述視頻采集卡將各個疊加圖像錄制成視頻,所述VR眼鏡6實時直播采集卡錄制的視頻,實現(xiàn)對計算機4生成的疊加圖像的實時直播,培訓(xùn)人員通過VR眼鏡觀看直播,進行實操手術(shù),獲得如真實手術(shù)一般的體驗感,優(yōu)選地,所述指導(dǎo)信息以及糾正信息可以為文字信息、也可以圖像信息、甚至為文字信息與圖像信息的組合,培訓(xùn)人員根據(jù)指導(dǎo)信息獲取手術(shù)進程及手術(shù)操作方法,根據(jù)糾正信息糾正錯誤的手術(shù)動作。
具體地,所述VR眼鏡6與所述計算機4之間優(yōu)選通過無線網(wǎng)絡(luò)進行通訊,當(dāng)然在不影響手術(shù)操作的情況下,所述VR眼鏡6與所述計算機4也可以通過有線網(wǎng)絡(luò)進行通訊。優(yōu)選地,所述VR眼鏡6為通過智能手機等帶有顯示屏幕的智能移動終端進行畫面顯示的移動端VR眼鏡,其通過智能移動終端與計算機4 建立網(wǎng)絡(luò)連接,獲取計算機4給出的視頻信號,并將畫面顯示在其屏幕上,培訓(xùn)人員通過VR眼鏡6觀看智能移動終端上的畫面。此外,所述VR眼鏡6還可以為自帶顯示屏幕的一體式VR眼鏡,其通過自帶的通訊模塊直接與計算機4通訊,獲取計算機4給出的視頻信號,進行畫面顯示。
進一步地,所述VR眼鏡6內(nèi)還可以設(shè)置語言播報裝置,通過語言播報裝置對培訓(xùn)人員進行指導(dǎo)信息和糾正信息的語言提示。本實用新型還可以設(shè)置記錄分析模塊,通過記錄分析模塊記錄培訓(xùn)人員每一次培訓(xùn)的過程,并對記錄進行大數(shù)據(jù)分析,獲取培訓(xùn)難點和培訓(xùn)效果等數(shù)據(jù),用以優(yōu)化培訓(xùn)方案,加快培訓(xùn)進程,提升培訓(xùn)效率。
值得一提的是,本實用新型既適用于板層角膜手術(shù),也適用于穿透型角膜手術(shù),優(yōu)選地,本實用新型主要用于眼角膜手術(shù)的標(biāo)準(zhǔn)進程的培訓(xùn)。
進一步地,本實用新型通過可移動式的培訓(xùn)設(shè)備,使得手術(shù)培訓(xùn)突破了時間和場地的限制,使受培訓(xùn)的醫(yī)生可以有機會隨時隨地進行手術(shù)實操模擬,使受訓(xùn)醫(yī)生能夠便捷、快速地掌握手術(shù)要領(lǐng),通過AR與VR相結(jié)合,實現(xiàn)了手術(shù)操作流程與實際情況處置的真正融合,實現(xiàn)完全可視、可模擬、可重復(fù)教學(xué)和培訓(xùn)的技術(shù)方案。
此外,本還實用新型還可以進一步包括:顯示屏7,所述顯示屏7可以集成于計算機4中,也可以單獨設(shè)置并與計算機4通訊連接,所述顯示屏7可以同步顯示培訓(xùn)人員從VR眼鏡6中觀看到畫面的三維圖像,從而使在場其他人員與培訓(xùn)人員同步接收培訓(xùn)人員看到的圖像,所述顯示屏7還可以顯示學(xué)員信息、培訓(xùn)進度、培訓(xùn)時長、培訓(xùn)過程直播及錄像等功能,據(jù)此,現(xiàn)場培訓(xùn)指導(dǎo)人員可以對正在進行手術(shù)的培訓(xùn)人員進行指導(dǎo),其他培訓(xùn)人員可以觀摩手術(shù)過程,領(lǐng)悟手術(shù)要點,優(yōu)選地,所述顯示屏7為3D觸控顯示屏。
綜上所述,本實用新型提供了一種AR和VR相結(jié)合的可移動眼角膜智能手術(shù)培訓(xùn)系統(tǒng),該系統(tǒng)通過3D攝像顯微鏡拍攝真實的動物眼球標(biāo)本的圖像,并通過計算機在該圖像上疊加上虛擬現(xiàn)實或增強現(xiàn)實建模的手術(shù)的指導(dǎo)信息,使得培訓(xùn)人員可以在手術(shù)的過程中實時獲得指導(dǎo)信息,提升培訓(xùn)的效率,同時通過TOF傳感器獲取培訓(xùn)人員實時的手術(shù)動作,將通過計算機判斷培訓(xùn)人員的手術(shù)動作是否正確,并給出糾正信息,從而使得培訓(xùn)人員錯誤的手術(shù)動作得到實時糾正,并且其采用便攜式的VR眼鏡以及便攜式的手術(shù)臺,系統(tǒng)簡單方便,手術(shù)培訓(xùn)不受場地的限制,在提升眼角膜手術(shù)培訓(xùn)的真實感與臨場感的同時,縮短眼角膜手術(shù)培訓(xùn)周期,降低眼角膜手術(shù)培訓(xùn)成本,實現(xiàn)可移動的眼角膜手術(shù)培訓(xùn)。
以上所述,對于本領(lǐng)域的普通技術(shù)人員來說,可以根據(jù)本實用新型的技術(shù)方案和技術(shù)構(gòu)思做出其他各種相應(yīng)的改變和變形,而所有這些改變和變形都應(yīng)屬于本實用新型權(quán)利要求的保護范圍。