本發(fā)明涉及一種用于向第一用戶(hù)輸出涉及醫(yī)療裝置和/或患者的醫(yī)學(xué)檢查的增強(qiáng)的現(xiàn)實(shí)信息的方法。本發(fā)明還涉及一種用于輸出增強(qiáng)的現(xiàn)實(shí)信息的系統(tǒng)、一種計(jì)算機(jī)程序產(chǎn)品以及一種計(jì)算機(jī)可讀介質(zhì)。
背景技術(shù):
具有不同專(zhuān)業(yè)知識(shí)和觀(guān)點(diǎn)的許多用戶(hù)通常涉及使用醫(yī)療裝置(例如醫(yī)學(xué)成像裝置)以及還涉及患者的醫(yī)學(xué)檢查。這些用戶(hù)特別包括患者、醫(yī)療技術(shù)人員、具有不同經(jīng)驗(yàn)程度的醫(yī)師、技術(shù)人員以及醫(yī)療裝置制造商。這些用戶(hù)之間的通信對(duì)于醫(yī)療裝置的高效使用或醫(yī)學(xué)檢查的成功是重要的。在這些情況下,以前在很大程度上訴諸于口頭交流,而沒(méi)有任何技術(shù)支持。此外,使用諸如小冊(cè)子、信息頁(yè)、信息膠片、操作說(shuō)明書(shū)等已知的溝通輔助。
患者的醫(yī)學(xué)檢查可以例如包括介入、治療(特別是放射治療)、醫(yī)學(xué)成像,臨床工作流程、對(duì)患者的指令,等等。
在介入中,重要的是精確地?fù)糁心繕?biāo)區(qū)域并保護(hù)周?chē)慕】到M織。因此,在許多情況下,將通過(guò)醫(yī)學(xué)成像來(lái)支持介入。以前,通過(guò)對(duì)介入的醫(yī)學(xué)成像所提供的成像信息的傳輸在很大程度上取決于執(zhí)行介入的醫(yī)師的能力、經(jīng)驗(yàn)和空間感覺(jué)。通常,通過(guò)醫(yī)學(xué)成像提供的成像信息顯示在一個(gè)或多個(gè)監(jiān)視器上。監(jiān)視器或多個(gè)監(jiān)視器各自布置在進(jìn)行介入的檢查室中的柔性支撐結(jié)構(gòu)上。這種監(jiān)視器和介入?yún)^(qū)域之間的相對(duì)較大的距離可能意味著醫(yī)師的巨大的額外負(fù)荷,特別是當(dāng)他們觀(guān)察監(jiān)視器的能力受到限制時(shí)。此外,醫(yī)師必須經(jīng)常在介入過(guò)程期間在介入?yún)^(qū)域與一個(gè)或多個(gè)監(jiān)視器之間來(lái)回移動(dòng)他們的視線(xiàn),特別是他們的焦點(diǎn)。在許多情況下,這也與醫(yī)師的人體工程學(xué)負(fù)荷相關(guān)。
在臨床工作流程中,例如在放射學(xué)中,重要的是患者在正確的時(shí)間接收到清楚的指令,以便高效地通過(guò)各種測(cè)點(diǎn)(station)和步驟。臨床工作流程的另外重要方面是患者的健康,特別是關(guān)于焦慮、不確定性和私人領(lǐng)域的限制以及個(gè)人數(shù)據(jù)的保護(hù)方面。利用醫(yī)學(xué)成像,過(guò)于及時(shí)和清楚的指令、例如影響呼吸以及患者的健康的指令是重要的。
技術(shù)實(shí)現(xiàn)要素:
本發(fā)明的目的是使醫(yī)療裝置的改進(jìn)的使用和/或患者的醫(yī)學(xué)檢查的改進(jìn)的執(zhí)行成為可能。
該目的通過(guò)如權(quán)利要求1所述的方法、如權(quán)利要求19所述的系統(tǒng)、如權(quán)利要求31所述的計(jì)算機(jī)程序產(chǎn)品以及如權(quán)利要求32所述的計(jì)算機(jī)可讀介質(zhì)來(lái)實(shí)現(xiàn)。
在用于向第一用戶(hù)輸出涉及醫(yī)療裝置和/或患者的醫(yī)學(xué)檢查的增強(qiáng)的現(xiàn)實(shí)信息的本發(fā)明方法中,獲取第一信息,該第一信息選自由圖像信息、深度信息、坐標(biāo)信息及其組合構(gòu)成的組,其中第一信息涉及醫(yī)療裝置和/或醫(yī)學(xué)檢查?;诘谝恍畔?,創(chuàng)建與醫(yī)療裝置和/或患者的醫(yī)學(xué)檢查有關(guān)的增強(qiáng)的現(xiàn)實(shí)信息。輸出增強(qiáng)現(xiàn)實(shí)信息,使得能夠在第一用戶(hù)的視野中感知到增強(qiáng)現(xiàn)實(shí)信息。
增強(qiáng)現(xiàn)實(shí)信息特別地被理解為這樣的信息:利用該信息可以增強(qiáng)現(xiàn)實(shí),特別是第一用戶(hù)的視野和/或第二用戶(hù)的視野。具體地,可以利用增強(qiáng)現(xiàn)實(shí)信息基于第一用戶(hù)的視野和/或基于第二用戶(hù)的視野來(lái)創(chuàng)建增強(qiáng)的現(xiàn)實(shí)。當(dāng)增強(qiáng)現(xiàn)實(shí)信息在第一用戶(hù)的視野中對(duì)第一用戶(hù)可見(jiàn)時(shí),增強(qiáng)現(xiàn)實(shí)信息特別地能夠在第一用戶(hù)的視野中被感知。特別地,可以輸出增強(qiáng)現(xiàn)實(shí)信息,使得通過(guò)增強(qiáng)的現(xiàn)實(shí)信息來(lái)增強(qiáng)第一用戶(hù)的視野。
增強(qiáng)的現(xiàn)實(shí)信息可以例如通過(guò)增強(qiáng)現(xiàn)實(shí)裝置來(lái)創(chuàng)建和/或輸出。術(shù)語(yǔ)“用于創(chuàng)建增強(qiáng)現(xiàn)實(shí)的裝置”和術(shù)語(yǔ)“增強(qiáng)現(xiàn)實(shí)裝置”被同義地使用。現(xiàn)實(shí)的強(qiáng)化特別地對(duì)于本領(lǐng)域技術(shù)人員而言被稱(chēng)為“增強(qiáng)”。強(qiáng)化的現(xiàn)實(shí)特別地對(duì)于本領(lǐng)域技術(shù)人員而言被稱(chēng)為“增強(qiáng)的現(xiàn)實(shí)”。強(qiáng)化現(xiàn)實(shí)裝置特別地對(duì)于本領(lǐng)域技術(shù)人員而言被稱(chēng)為“增強(qiáng)現(xiàn)實(shí)裝置”。
用于創(chuàng)建增強(qiáng)現(xiàn)實(shí)的已知裝置例如是由美國(guó)的微軟公司制造的Microsoft用于創(chuàng)建增強(qiáng)現(xiàn)實(shí)的裝置的結(jié)構(gòu)和功能對(duì)于本領(lǐng)域技術(shù)人員而言是已知的,特別是從US2014098226A1、US2015248793A、US2015294507A1、US2015234455A1、WO2015134958A1、WO2015161307A1和[CR06]可知。
本發(fā)明的一種實(shí)施例形式提供了所描述的方法和/或自動(dòng)或全自動(dòng)地執(zhí)行所描述方法的一個(gè)或多個(gè)步驟中的每個(gè)步驟。具體地,可以自動(dòng)地和/或全自動(dòng)地創(chuàng)建增強(qiáng)現(xiàn)實(shí)信息,特別是通過(guò)增強(qiáng)現(xiàn)實(shí)裝置來(lái)創(chuàng)建。在本申請(qǐng)的上下文中,“自動(dòng)地”意味著相應(yīng)的步驟通過(guò)軟件和/或通過(guò)硬件自動(dòng)地執(zhí)行和/或基本上不需要用戶(hù)對(duì)相應(yīng)步驟的交互。特別地,在僅僅需要確認(rèn)一個(gè)或多個(gè)結(jié)果和/或僅由用戶(hù)執(zhí)行一個(gè)或多個(gè)中間步驟時(shí),基本上不需要用戶(hù)的交互。在本申請(qǐng)的上下文中,“全自動(dòng)地”意味著對(duì)于相應(yīng)步驟的執(zhí)行,完全不需要用戶(hù)的交互。不管是“自動(dòng)地”還是“全自動(dòng)地”執(zhí)行一個(gè)或多個(gè)步驟,本發(fā)明的方法都可以是另外需要用戶(hù)的交互的工作流程的要素。例如,用戶(hù)的交互可以包括用戶(hù)從例如通過(guò)屏幕呈現(xiàn)的菜單手動(dòng)地創(chuàng)建或選擇檢查方案和/或檢查計(jì)劃和/或臨床問(wèn)題。
作為替代或補(bǔ)充,增強(qiáng)現(xiàn)實(shí)信息可以基于第一用戶(hù)的輸入和/或基于第二用戶(hù)的輸入來(lái)創(chuàng)建。例如,基于第一用戶(hù)的輸入和/或基于第二用戶(hù)的輸入,可以關(guān)于類(lèi)型、位置、大小和/或形狀創(chuàng)建和/或適配標(biāo)記,其中增強(qiáng)現(xiàn)實(shí)信息具有標(biāo)記。
圖像信息例如可以是照相機(jī)圖像和/或2D圖像(二維圖像)。本發(fā)明的一種實(shí)施例形式提供第一信息是3D圖像(三維圖像)。3D圖像尤其可以是2D圖像和深度信息的組合。在這種情況下,可以向3D圖像的每個(gè)像素分配2D圖像的圖像值和深度信息的深度值。
圖像信息可以例如通過(guò)第一照相機(jī)單元獲取。第一照相機(jī)單元例如可以是3D照相機(jī)。3D圖像和/或深度信息可以例如通過(guò)3D照相機(jī)獲取。第一增強(qiáng)現(xiàn)實(shí)裝置例如可以具有第一照相機(jī)單元。3D照相機(jī)可以特別地被設(shè)計(jì)用于電磁輻射的檢測(cè),特別是用于檢測(cè)與x射線(xiàn)輻射相比在光譜的較低頻率范圍內(nèi)、例如在光譜的可見(jiàn)光或紅外范圍內(nèi)的電磁輻射。3D照相機(jī)可以例如被實(shí)施為立體照相機(jī)或者作為飛行時(shí)間測(cè)量系統(tǒng)。飛行時(shí)間測(cè)量系統(tǒng)特別地對(duì)于本領(lǐng)域技術(shù)人員而言稱(chēng)為“飛行時(shí)間照相機(jī)”。3D照相機(jī)可以例如被實(shí)施為用于通過(guò)結(jié)構(gòu)化照明來(lái)獲取3D圖像和/或用于獲取深度信息。
坐標(biāo)信息可以例如涉及圖數(shù)據(jù)集。圖數(shù)據(jù)集例如可以具有第一用戶(hù)的視野中的空間區(qū)域的圖。特別地,醫(yī)療裝置的至少一個(gè)部分可以位于該空間區(qū)域中和/或醫(yī)學(xué)檢查的至少一個(gè)分步驟可以在該空間區(qū)域中進(jìn)行。坐標(biāo)信息例如可以指定特別是與圖數(shù)據(jù)集和/或空間區(qū)域的圖有關(guān)的位置和/或方位。
根據(jù)本發(fā)明的一個(gè)方面,坐標(biāo)信息包括涉及患者的至少一個(gè)部分的至少一個(gè)患者坐標(biāo)和/或涉及醫(yī)療裝置的至少一個(gè)部分的至少一個(gè)裝置坐標(biāo)。例如,所述至少一個(gè)患者坐標(biāo)可以例如指定患者的至少一個(gè)部分的位置和/或方位,特別是與圖數(shù)據(jù)集和/或空間區(qū)域的圖有關(guān)的位置和/或方位。所述至少一個(gè)裝置坐標(biāo)可以例如指定醫(yī)療裝置的至少一個(gè)部分的位置和/或方位,特別是與圖數(shù)據(jù)集和/或空間區(qū)域的圖有關(guān)的位置和/或方位。醫(yī)療裝置的至少一個(gè)部分可以例如是醫(yī)療裝置的可移動(dòng)部件。
本發(fā)明的一種實(shí)施例形式提供可以確定第一用戶(hù)的位置和/或視線(xiàn)方向,特別是與圖數(shù)據(jù)集和/或空間區(qū)域的圖有關(guān)的位置和/或視線(xiàn)方向,和/或可以確定第一增強(qiáng)現(xiàn)實(shí)裝置的位置和/或?qū)?zhǔn),特別是與圖數(shù)據(jù)集和/或空間區(qū)域的圖有關(guān)的位置和/或?qū)?zhǔn)??梢岳缁诘谝挥脩?hù)的位置和/或視線(xiàn)方向和/或基于第一增強(qiáng)現(xiàn)實(shí)裝置的位置和/或?qū)?zhǔn)來(lái)創(chuàng)建增強(qiáng)現(xiàn)實(shí)信息。
這可以例如借助于圖像信息、深度信息和/或運(yùn)動(dòng)信息來(lái)完成。可以例如通過(guò)一個(gè)或多個(gè)加速度傳感器獲取運(yùn)動(dòng)信息。特別地,第一增強(qiáng)現(xiàn)實(shí)裝置可以具有一個(gè)或多個(gè)加速度傳感器。
在具有帶轉(zhuǎn)移板的患者支撐裝置的醫(yī)療裝置中,坐標(biāo)信息例如可以指定轉(zhuǎn)移板的位置和/或方位。在具有運(yùn)動(dòng)鏈和/或機(jī)器人臂、特別是C形臂的醫(yī)療裝置中,例如對(duì)于運(yùn)動(dòng)鏈和/或機(jī)器人臂的一個(gè)或多個(gè)元件,坐標(biāo)信息可以在每種情況下指定位置和/或方位。
對(duì)于坐標(biāo)信息可以想到多個(gè)不同的表示。在不脫離本發(fā)明區(qū)域的情況下,可以在這些表示之間進(jìn)行選擇和/或變換,只要其由權(quán)利要求書(shū)規(guī)定即可。
例如,涉及轉(zhuǎn)移板的坐標(biāo)信息在第一表示中可以具有轉(zhuǎn)移板的四個(gè)拐角點(diǎn)的坐標(biāo),在第二表示中可以具有轉(zhuǎn)移板的中心點(diǎn)的坐標(biāo)以及指定大致對(duì)應(yīng)于轉(zhuǎn)移板的平面的方位的坐標(biāo),并且在第三表示中可以具有一個(gè)坐標(biāo)值,其中,例如通過(guò)列表、特別是查詢(xún)表為坐標(biāo)值分配轉(zhuǎn)移板的位置和/或方位。
坐標(biāo)信息例如可以通過(guò)建立(尤其是測(cè)量)位置和/或方位來(lái)建立。坐標(biāo)信息例如可以通過(guò)建立(尤其是測(cè)量)位置變化和/或方位變化來(lái)建立。
根據(jù)本發(fā)明的一個(gè)方面,通過(guò)醫(yī)療裝置提供坐標(biāo)信息。坐標(biāo)信息例如可以涉及醫(yī)療裝置的可移動(dòng)部件。
根據(jù)本發(fā)明的一個(gè)形式的實(shí)施例,提供了用于醫(yī)療裝置的裝置坐標(biāo)系。在這種情況下,可以基于裝置坐標(biāo)系,例如通過(guò)醫(yī)療裝置的控制裝置來(lái)控制可移動(dòng)部件,特別是進(jìn)行定位和/或方位。坐標(biāo)信息例如可以包括關(guān)于裝置坐標(biāo)系的裝置坐標(biāo)。
本發(fā)明的一個(gè)形式的實(shí)施例提供了在增強(qiáng)現(xiàn)實(shí)信息的創(chuàng)建期間,執(zhí)行坐標(biāo)信息和/或包括在坐標(biāo)信息中的其中一個(gè)坐標(biāo)(例如裝置坐標(biāo))從第一參考系(例如裝置坐標(biāo)系)到第二參考系(例如圖數(shù)據(jù)集)的變換。例如可以基于與第一參考系和第二參考系相關(guān)的變換信息和/或可以利用其為第二參考系的坐標(biāo)分配第一參考系的坐標(biāo)的變換信息執(zhí)行變換。例如,坐標(biāo)信息可以包括變換信息??蛇x地,可以建立和/或獲取變換信息。
借助于坐標(biāo)信息,可以例如獨(dú)立于圖像信息和/或獨(dú)立于深度信息來(lái)創(chuàng)建增強(qiáng)現(xiàn)實(shí)信息。在這種情況下,特別地,已經(jīng)提供用于醫(yī)療裝置的控制的裝置坐標(biāo)系可以有利地附加地用于創(chuàng)建增強(qiáng)現(xiàn)實(shí)信息。特別地,借助于坐標(biāo)信息與可移動(dòng)部件和/或醫(yī)療裝置的圖數(shù)據(jù)集和/或3D模型相結(jié)合,可以非常精確地并且獨(dú)立于視覺(jué)環(huán)境建立可移動(dòng)部件的位置和/或方位。可選地,坐標(biāo)信息可以與圖像信息和/或與深度信息組合。
根據(jù)本發(fā)明的一個(gè)方面,輸出涉及醫(yī)療裝置的可移動(dòng)部件的運(yùn)動(dòng)的控制命令。優(yōu)選地,基于該控制命令建立坐標(biāo)信息??梢岳缤ㄟ^(guò)控制命令來(lái)控制可移動(dòng)部件的運(yùn)動(dòng)。特別地,控制命令可以指定可移動(dòng)部件的目標(biāo)位置、位置變化、目標(biāo)方位、方位變化等等。特別地,可以將坐標(biāo)信息分配給控制命令和/或運(yùn)動(dòng)參數(shù)。
根據(jù)本發(fā)明的一個(gè)方面,可以獲取涉及醫(yī)療裝置的可移動(dòng)部件的運(yùn)動(dòng)的運(yùn)動(dòng)參數(shù)。優(yōu)選地,基于運(yùn)動(dòng)參數(shù)建立坐標(biāo)信息。運(yùn)動(dòng)參數(shù)可以特別地取決于可移動(dòng)部件的運(yùn)動(dòng)。特別地,運(yùn)動(dòng)參數(shù)可以是可移動(dòng)部件的運(yùn)動(dòng)的測(cè)量。運(yùn)動(dòng)參數(shù)可以例如指定幾何變量,特別是位置、長(zhǎng)度和/或角度。運(yùn)動(dòng)參數(shù)可以例如指定電氣變量,特別是電流、電壓、電荷和/或能量。電氣變量可以例如涉及驅(qū)動(dòng)單元,利用該驅(qū)動(dòng)單元驅(qū)動(dòng)可移動(dòng)部件的運(yùn)動(dòng)。
可移動(dòng)部件可以例如是C形臂、機(jī)器人臂、運(yùn)動(dòng)鏈、轉(zhuǎn)移板、介入工具等。
根據(jù)本發(fā)明的一個(gè)形式的實(shí)施例,第一信息涉及第一用戶(hù)的視野中的空間區(qū)域。醫(yī)療裝置的至少一部分可以位于空間區(qū)域中。醫(yī)學(xué)檢查的至少一個(gè)分步驟可以在空間區(qū)域中進(jìn)行。本發(fā)明的一個(gè)形式的實(shí)施例提供醫(yī)療裝置的至少一部分位于第一用戶(hù)的視野內(nèi)和/或醫(yī)學(xué)檢查的至少一個(gè)分步驟在第一個(gè)用戶(hù)的視野內(nèi)進(jìn)行。
醫(yī)學(xué)檢查的分步驟(part step)例如可以是介入的分步驟和/或臨床工作流程的分步驟。介入的分步驟可以例如是將介入工具和/或植入物引入患者中、患者的結(jié)構(gòu)的分離和/或聯(lián)接,等等。臨床工作流程的分步驟可以例如是呼叫在候診室等待的患者、識(shí)別患者、澄清患者的臨床工作流程的其他步驟、檢查室中的患者的準(zhǔn)備、患者的指示、準(zhǔn)備醫(yī)療裝置、患者在醫(yī)療裝置處的配準(zhǔn)、醫(yī)學(xué)成像、介入、治療、診斷等等。
根據(jù)本發(fā)明的一個(gè)方面,通過(guò)醫(yī)療裝置提供醫(yī)療數(shù)據(jù)集,其中基于醫(yī)療數(shù)據(jù)集創(chuàng)建增強(qiáng)現(xiàn)實(shí)信息。根據(jù)本發(fā)明的一個(gè)形式的實(shí)施例,醫(yī)療數(shù)據(jù)集具有醫(yī)學(xué)成像數(shù)據(jù)集。特別地,醫(yī)學(xué)成像數(shù)據(jù)集可以涉及患者的結(jié)構(gòu)。根據(jù)本發(fā)明另一形式的實(shí)施例,醫(yī)療數(shù)據(jù)集具有涉及患者的醫(yī)學(xué)信號(hào)。醫(yī)學(xué)信號(hào)可以例如是生理信號(hào)和/或生物電信號(hào)。特別地,醫(yī)學(xué)信號(hào)可以涉及患者的心跳、患者的呼吸、患者的體溫、患者的血液中的物質(zhì)濃度,等等。醫(yī)學(xué)信號(hào)例如可以是心電圖信號(hào)(EKG信號(hào))。
本發(fā)明的一個(gè)形式的實(shí)施例提供增強(qiáng)現(xiàn)實(shí)信息以具有輸出域,其中醫(yī)療數(shù)據(jù)集表示在該輸出域中。醫(yī)療數(shù)據(jù)集可以在輸出域中例如表示為醫(yī)療圖像、定時(shí)特性、信號(hào)曲線(xiàn)和/或數(shù)字。
本發(fā)明的一個(gè)形式的實(shí)施例提供基于第一信息相對(duì)于第一用戶(hù)的視野建立醫(yī)療裝置的位置,其中基于醫(yī)療裝置的位置創(chuàng)建增強(qiáng)現(xiàn)實(shí)信息。在這種情況下,基于醫(yī)療裝置的位置,可以確定輸出域相對(duì)于第一用戶(hù)的視野的位置。輸出域可以例如顯示在醫(yī)療裝置附近和/或覆蓋在醫(yī)療裝置上。例如針對(duì)于醫(yī)療裝置相對(duì)于第一用戶(hù)的視野的位置變化,輸出域可以跟隨醫(yī)療裝置。
根據(jù)本發(fā)明的一個(gè)方面,基于第一信息建立與患者的醫(yī)學(xué)檢查有關(guān)的檢查信息,其中,基于檢查信息創(chuàng)建增強(qiáng)現(xiàn)實(shí)信息。
檢查信息可以例如是關(guān)于已經(jīng)執(zhí)行了醫(yī)學(xué)檢查的哪些分步驟和/或作為下一步驟要執(zhí)行哪個(gè)分步驟的信息。特別地,可以基于包括醫(yī)學(xué)檢查的計(jì)劃好的分步驟的檢查計(jì)劃和/或基于檢查方案來(lái)建立檢查信息。檢查計(jì)劃例如可以是臨床工作流程的介入計(jì)劃和/或流程計(jì)劃。檢查信息例如可以涉及患者相對(duì)于醫(yī)療裝置的位置和/或介入工具相對(duì)于患者的結(jié)構(gòu)的位置。例如,檢查信息可以具有如下信息:即介入工具位于準(zhǔn)備好使用的正確位置。增強(qiáng)現(xiàn)實(shí)信息可以具有相應(yīng)的標(biāo)記,該標(biāo)記表示例如以仿真的形式執(zhí)行的介入工具的接下來(lái)的運(yùn)動(dòng)。
根據(jù)本發(fā)明的一個(gè)方面,基于第一信息建立與患者相關(guān)的患者信息,其中基于患者信息創(chuàng)建增強(qiáng)現(xiàn)實(shí)信息。
根據(jù)本發(fā)明的一個(gè)方面,患者信息選自由以下信息及其組合構(gòu)成的組:
-涉及患者的識(shí)別的患者識(shí)別信息,
-涉及患者的生理狀態(tài)和/或情緒狀態(tài)的患者狀態(tài)信息,
-涉及患者的位置的患者位置信息。
患者識(shí)別信息被設(shè)計(jì)為識(shí)別患者。識(shí)別可以特別地自動(dòng)地和/或全自動(dòng)地執(zhí)行。例如基于患者識(shí)別信息,可以從患者數(shù)據(jù)庫(kù)中選擇患者的患者數(shù)據(jù)和/或通過(guò)增強(qiáng)現(xiàn)實(shí)信息輸出患者數(shù)據(jù)。患者數(shù)據(jù)例如可以包括個(gè)人數(shù)據(jù)和/或與患者的患病史相關(guān)的數(shù)據(jù)。特別地,可以以這種方式檢查是否為患者計(jì)劃了醫(yī)學(xué)檢查的給定分步驟和/或計(jì)劃了醫(yī)學(xué)檢查的哪個(gè)分步驟。特別地,可以通過(guò)增強(qiáng)現(xiàn)實(shí)信息輸出患者數(shù)據(jù)和/或檢查結(jié)果。例如基于患者識(shí)別信息,將在患者的醫(yī)學(xué)檢查期間和/或通過(guò)醫(yī)療裝置獲取的數(shù)據(jù)被自動(dòng)地分配給患者和/或存儲(chǔ)在患者數(shù)據(jù)庫(kù)中。因此,這能夠避免不正確的檢查和不正確的分配。
患者識(shí)別信息例如可以基于圖像信息而建立,其在于患者的生物特征被建立和/或在于分配給患者和/或分配給患者的患者文檔的代碼、特別是QR代碼被獲取和評(píng)估。
患者狀態(tài)信息例如可以涉及患者的呼吸、患者的體溫、患者的脈搏、患者的瞳孔放大、患者的面部表情等等。基于患者狀態(tài)信息,可以例如確定患者是否表現(xiàn)出壓力和/或表現(xiàn)出何種程度的壓力。例如,如果患者的壓力可能不利地影響醫(yī)學(xué)檢查的成功,則可以通過(guò)增強(qiáng)現(xiàn)實(shí)信息輸出警告信號(hào)。增強(qiáng)現(xiàn)實(shí)信息例如可以具有用于使患者鎮(zhèn)定的鎮(zhèn)定圖像和/或一系列鎮(zhèn)定圖像。
患者的位置例如可以從患者位置組中選擇,患者位置組由患者在診所中的位置、患者在檢查室中的位置、患者相對(duì)于醫(yī)療裝置的位置、患者相對(duì)于第一用戶(hù)的位置、患者相對(duì)于第二用戶(hù)的位置,以及以上位置的組合構(gòu)成。增強(qiáng)現(xiàn)實(shí)信息例如可以基于患者位置信息來(lái)創(chuàng)建,從而基于患者的位置確定增強(qiáng)現(xiàn)實(shí)信息相對(duì)于第一用戶(hù)的視野的位置。增強(qiáng)現(xiàn)實(shí)信息例如可以在患者附近示出和/或覆蓋在患者上。增強(qiáng)現(xiàn)實(shí)信息可以例如跟隨患者,以針對(duì)于患者位置相對(duì)于第一用戶(hù)的視野的變化。
根據(jù)本發(fā)明的一個(gè)方面,提供了一種與患者的結(jié)構(gòu)相關(guān)的醫(yī)學(xué)成像數(shù)據(jù)集,其中基于醫(yī)療成像數(shù)據(jù)集創(chuàng)建增強(qiáng)現(xiàn)實(shí)信息。根據(jù)本發(fā)明的一個(gè)方面,增強(qiáng)現(xiàn)實(shí)信息具有標(biāo)記患者的結(jié)構(gòu)的結(jié)構(gòu)標(biāo)記。醫(yī)療成像數(shù)據(jù)集可以例如借助于醫(yī)療裝置、特別是借助于醫(yī)學(xué)成像裝置和/或借助于醫(yī)療圖像數(shù)據(jù)庫(kù)來(lái)提供。特別地,醫(yī)學(xué)圖像數(shù)據(jù)庫(kù)可以具有存儲(chǔ)區(qū)域,其中醫(yī)學(xué)圖像數(shù)據(jù)集被保持在該存儲(chǔ)區(qū)域中以用于檢索。
患者的結(jié)構(gòu)例如可以是患者的解剖結(jié)構(gòu)。患者的結(jié)構(gòu)例如可以具有患者的器官和/或患者的植入物。植入物可以例如是螺釘、假體、血管假體、心臟瓣膜假體或類(lèi)似物。結(jié)構(gòu)標(biāo)記例如可以具有患者的結(jié)構(gòu)的醫(yī)學(xué)圖像和/或被示出為在第一用戶(hù)的視野中覆蓋在患者的結(jié)構(gòu)上。結(jié)構(gòu)的醫(yī)學(xué)圖像可以例如被分割成部分結(jié)構(gòu)。在這種情況下,患者的結(jié)構(gòu)不一定必須是可見(jiàn)的。例如,基于第一信息和/或基于另外的信息(例如定位片(topogram)和/或解剖標(biāo)志),建立結(jié)構(gòu)相對(duì)于患者的位置和/或結(jié)構(gòu)標(biāo)記相對(duì)于第一用戶(hù)的視野的位置(其對(duì)應(yīng)于結(jié)構(gòu)相對(duì)于患者的位置)。結(jié)構(gòu)標(biāo)記例如可以具有結(jié)構(gòu)的3D圖像和/或結(jié)構(gòu)的3D模型。借助于結(jié)構(gòu)標(biāo)記,例如可以計(jì)劃和/或支持醫(yī)學(xué)檢查,特別是介入。結(jié)構(gòu)標(biāo)記例如可以具有結(jié)構(gòu)的三維渲染圖像和/或結(jié)構(gòu)的展開(kāi)表示。
為了改善對(duì)醫(yī)療問(wèn)題或環(huán)境的可視化,計(jì)算機(jī)生成的圖像可以在正確的位置覆蓋在患者身上。以這種方式,例如患者的結(jié)構(gòu)、特別是內(nèi)部解剖結(jié)構(gòu)的特別是三維渲染的圖像可以覆蓋在患者身上。利用這樣的圖像,例如可以顯示介入程序的路徑和/或?qū)τ谘艿囊粋€(gè)或多個(gè)部分,每種情況下的診斷值(例如血流儲(chǔ)備分?jǐn)?shù)(FFR))。例如,借助于增強(qiáng)現(xiàn)實(shí)信息,患者的胸腔的展開(kāi)表示可以示出為覆蓋在患者的胸腔上。
本發(fā)明的一個(gè)形式的實(shí)施例提供待被檢測(cè)和/或用作方位點(diǎn)的基于第一信息和/或基于醫(yī)療成像數(shù)據(jù)集的解剖標(biāo)志?;诮馄蕵?biāo)志,可以相對(duì)于患者和/或相對(duì)于患者的結(jié)構(gòu)記錄所渲染的圖像。因此,所渲染的圖像能夠被顯示為覆蓋在患者的結(jié)構(gòu)上。
根據(jù)本發(fā)明的一個(gè)方面,提供了與患者的標(biāo)定位置和/或醫(yī)療裝置的標(biāo)定位置有關(guān)的標(biāo)定位置信息,其中基于標(biāo)定位置信息創(chuàng)建增強(qiáng)現(xiàn)實(shí)信息,其中增強(qiáng)現(xiàn)實(shí)信息具有標(biāo)定位置標(biāo)記,該標(biāo)定位置標(biāo)記標(biāo)記患者的標(biāo)定位置和/或醫(yī)療裝置的標(biāo)定位置。
如果標(biāo)定位置信息涉及醫(yī)療裝置的可移動(dòng)部件的標(biāo)定位置,則標(biāo)定位置信息特別地涉及醫(yī)療裝置的標(biāo)定位置。標(biāo)定位置信息例如可以基于預(yù)檢查、基于檢查計(jì)劃和/或基于醫(yī)學(xué)檢查的檢查方案來(lái)建立。檢查方案特別地可以是成像方案。標(biāo)定位置信息可以例如指定如何將患者定位用于醫(yī)學(xué)檢查和/或相對(duì)于醫(yī)療裝置定位。標(biāo)定位置信息可以例如指定醫(yī)療裝置和/或可移動(dòng)部件如何相對(duì)于患者和/或相對(duì)于檢查室定位。標(biāo)定位置標(biāo)記例如可以具有患者的3D化身,其中3D化身示出處于患者的標(biāo)定位置中的患者。標(biāo)定位置標(biāo)記例如可以具有醫(yī)療裝置和/或可移動(dòng)部件的3D模型,其中3D模型示出處于醫(yī)療裝置的標(biāo)定位置中的醫(yī)療裝置和/或處于可移動(dòng)部件的標(biāo)定位置中的可移動(dòng)部件。
根據(jù)本發(fā)明的一個(gè)方面,提供了涉及患者的區(qū)域和/或醫(yī)療裝置的區(qū)域的區(qū)域信息,其中基于區(qū)域信息創(chuàng)建增強(qiáng)現(xiàn)實(shí)信息,其中增強(qiáng)現(xiàn)實(shí)信息具有標(biāo)記患者的區(qū)域和/或醫(yī)療裝置的區(qū)域的區(qū)域標(biāo)記。
患者的區(qū)域例如可以具有患者的結(jié)構(gòu)。患者的區(qū)域例如可以是在醫(yī)學(xué)檢查中要被檢查和/或被選擇用于醫(yī)學(xué)檢查的患者的區(qū)域。患者的區(qū)域可以例如是患者的位于醫(yī)療裝置的有效區(qū)域中和/或被選擇用于轉(zhuǎn)移到醫(yī)療裝置的作用區(qū)域中的區(qū)域。醫(yī)療裝置的作用區(qū)域例如可以是介入工具的作用區(qū)域、醫(yī)學(xué)成像裝置的原始圖像數(shù)據(jù)獲取區(qū)域等?;颊叩膮^(qū)域可以例如是患者的要進(jìn)行介入和/或從其記錄醫(yī)學(xué)成像數(shù)據(jù)集的區(qū)域。醫(yī)療裝置的區(qū)域可以例如是醫(yī)療裝置的待使用和/或致動(dòng)的區(qū)域。區(qū)域標(biāo)記例如可以具有醫(yī)療裝置的區(qū)域的3D圖像和/或醫(yī)療裝置的區(qū)域的3D模型。這使得能夠計(jì)劃和/或支持醫(yī)療裝置的操作,例如在醫(yī)學(xué)檢查中和/或在醫(yī)療裝置的準(zhǔn)備中的操作。
根據(jù)本發(fā)明的一個(gè)形式的實(shí)施例,基于第一用戶(hù)的輸入和/或基于第二用戶(hù)的輸入,可以創(chuàng)建區(qū)域信息和/或可以關(guān)于類(lèi)型、位置、尺寸和/或形狀適配區(qū)域標(biāo)記。本發(fā)明的一個(gè)形式的實(shí)施例提供基于檢查計(jì)劃、基于醫(yī)學(xué)檢查的檢查方案、基于患者位置信息和/或基于標(biāo)定位置信息來(lái)建立區(qū)域信息。
根據(jù)本發(fā)明的一個(gè)方面,從由結(jié)構(gòu)標(biāo)記、標(biāo)定位置標(biāo)記、區(qū)域標(biāo)記及其組合構(gòu)成的標(biāo)記組中選擇的標(biāo)記具有從表示組中選擇的表示,其中所述表示組由全息圖、全息類(lèi)型表示、立體表示、三維表示及其組合構(gòu)成。這尤其使得能夠以特別有利的方式表示3D化身、3D圖像和/或3D模型。全息類(lèi)型表示可以特別地被理解為視覺(jué)表示,其向觀(guān)察者例如第一用戶(hù)和/或第二用戶(hù)給出了他們正在觀(guān)察全息圖的印象。
根據(jù)本發(fā)明的一個(gè)方面,檢測(cè)第一用戶(hù)的輸入,其中,基于第一用戶(hù)的輸入創(chuàng)建增強(qiáng)現(xiàn)實(shí)信息。特別地,可以基于第一用戶(hù)的輸入創(chuàng)建從由結(jié)構(gòu)標(biāo)記、標(biāo)定位置標(biāo)記、區(qū)域標(biāo)記及其組合構(gòu)成的標(biāo)記組中選擇的標(biāo)記,和/或關(guān)于類(lèi)型、位置、尺寸和/或形狀適配這些標(biāo)記。
本發(fā)明的一個(gè)方面提供輸出增強(qiáng)現(xiàn)實(shí)信息,使得增強(qiáng)現(xiàn)實(shí)信息能夠在第二用戶(hù)的視野中被感知,并且使得第二用戶(hù)的輸入被檢測(cè)到,并且基于第二用戶(hù)的輸入創(chuàng)建增強(qiáng)現(xiàn)實(shí)信息。
當(dāng)增強(qiáng)現(xiàn)實(shí)信息在第二用戶(hù)的視野中對(duì)第二用戶(hù)可見(jiàn)時(shí),增強(qiáng)現(xiàn)實(shí)信息特別地能夠在第二用戶(hù)的視野中被檢測(cè)到。特別地,可以輸出增強(qiáng)現(xiàn)實(shí)信息,使得通過(guò)增強(qiáng)現(xiàn)實(shí)信息強(qiáng)化第二用戶(hù)的視野。根據(jù)本發(fā)明的一個(gè)形式的實(shí)施例,第一用戶(hù)的視野的至少一部分在第二用戶(hù)的視野中示出。根據(jù)本發(fā)明的一個(gè)形式的實(shí)施例,第一用戶(hù)的視野的至少一部分被示出在第二用戶(hù)的視野中,使得第二用戶(hù)從第一用戶(hù)的視角看到患者和/或醫(yī)療裝置。根據(jù)本發(fā)明的一個(gè)形式的實(shí)施例,在第二用戶(hù)的視野中示出增強(qiáng)現(xiàn)實(shí)信息,使得第二用戶(hù)從第一用戶(hù)的視角看見(jiàn)增強(qiáng)現(xiàn)實(shí)信息。
特別地,關(guān)于第一用戶(hù)而沒(méi)有參考第二用戶(hù)描述的特征也相應(yīng)地與第二用戶(hù)相關(guān),即,在這些特征中,在每種情況下,術(shù)語(yǔ)“第一用戶(hù)”被術(shù)語(yǔ)“第二用戶(hù)”所替換。特別地,可以基于第二用戶(hù)的輸入創(chuàng)建從由結(jié)構(gòu)標(biāo)記、標(biāo)定位置標(biāo)記、區(qū)域標(biāo)記及其組合構(gòu)成的標(biāo)記組中選擇的標(biāo)記,和/或關(guān)于類(lèi)型、位置、尺寸和/或形狀適配該標(biāo)記。根據(jù)本發(fā)明的一個(gè)方面,可以基于第一用戶(hù)的輸入和/或基于第二用戶(hù)的輸入來(lái)建立標(biāo)定位置信息和/或區(qū)域信息。
優(yōu)選地,第一用戶(hù)的輸入是第一用戶(hù)的手勢(shì)和/或第二用戶(hù)的輸入是第二用戶(hù)的手勢(shì)。
根據(jù)本發(fā)明的一個(gè)方面,選擇與第一用戶(hù)相關(guān)的第一用戶(hù)簡(jiǎn)檔和/或與第二用戶(hù)相關(guān)的第二用戶(hù)簡(jiǎn)檔,其中,基于第一用戶(hù)簡(jiǎn)檔和/或基于第二用戶(hù)簡(jiǎn)檔創(chuàng)建增強(qiáng)現(xiàn)實(shí)信息。
用戶(hù)簡(jiǎn)檔可以例如包括用戶(hù)類(lèi)別、醫(yī)學(xué)檢查中的功能、對(duì)患者的患者數(shù)據(jù)的訪(fǎng)問(wèn)授權(quán)、醫(yī)療裝置的使用授權(quán)、與增強(qiáng)現(xiàn)實(shí)信息的創(chuàng)建、改變、覆寫(xiě)和/或去除相關(guān)的授權(quán),等等。用戶(hù)類(lèi)別可以例如涉及一組人??蛇x地,一組人可以分別分配給第一用戶(hù)和/或第二用戶(hù)。例如,多組人可以是患者、醫(yī)療技術(shù)人員、具有不同經(jīng)驗(yàn)水平的醫(yī)師、技術(shù)人員以及醫(yī)療裝置制造商。介入中的功能例如可以從由以下各項(xiàng)構(gòu)成的功能組中選擇:自己執(zhí)行介入的第一醫(yī)師;在指導(dǎo)下執(zhí)行介入的第二醫(yī)師;觀(guān)察介入并且在進(jìn)行中學(xué)習(xí)的第三醫(yī)師;觀(guān)察介入并且在進(jìn)行中給出用于執(zhí)行介入的指令的第四醫(yī)師。
本發(fā)明的一個(gè)形式的實(shí)施例提供基于第一信息和基于基本信息創(chuàng)建增強(qiáng)現(xiàn)實(shí)信息?;拘畔⒗缈梢赃x自基本信息組,基本信息組由醫(yī)療數(shù)據(jù)集、檢查信息、患者信息、醫(yī)學(xué)成像數(shù)據(jù)集、標(biāo)定位置信息、區(qū)域信息、第一用戶(hù)的輸入、第二用戶(hù)的輸入、第一用戶(hù)簡(jiǎn)檔和第二用戶(hù)簡(jiǎn)檔構(gòu)成。
本發(fā)明的一個(gè)形式的實(shí)施例提供基于第一信息和基于多個(gè)基本信息項(xiàng)來(lái)創(chuàng)建增強(qiáng)現(xiàn)實(shí)信息。所述多個(gè)基本信息項(xiàng)中的每一項(xiàng)例如可以在每種情況下從基本信息組中選擇,該基本信息組由醫(yī)療數(shù)據(jù)集、檢查信息、患者信息、醫(yī)學(xué)成像數(shù)據(jù)集、標(biāo)定位置信息、區(qū)域信息、第一用戶(hù)的輸入、第二用戶(hù)的輸入、第一用戶(hù)簡(jiǎn)檔和第二用戶(hù)簡(jiǎn)檔構(gòu)成。
在本申請(qǐng)的上下文中,表達(dá)“基于”可以特別地在表達(dá)“當(dāng)使用時(shí)”的意義上理解。特別地,基于第二特征創(chuàng)建(可替換地建立、確定等)第一特征的闡述不排除基于第三特征創(chuàng)建(可替換地建立、確定等)第一特征。
用于向第一用戶(hù)輸出涉及醫(yī)療裝置和/或患者的醫(yī)學(xué)檢查的增強(qiáng)現(xiàn)實(shí)信息的本發(fā)明的系統(tǒng)具有第一獲取模塊、創(chuàng)建模塊和第一輸出模塊。第一獲取模塊被實(shí)施為用于獲取從由圖像信息、深度信息、坐標(biāo)信息及其組合構(gòu)成的組中選擇的第一信息,其中第一信息與醫(yī)療裝置和/或醫(yī)學(xué)檢查有關(guān)。創(chuàng)建模塊被實(shí)施為用于基于第一信息創(chuàng)建與醫(yī)療裝置和/或患者的醫(yī)學(xué)檢查有關(guān)的增強(qiáng)現(xiàn)實(shí)信息。第一輸出模塊被實(shí)施為輸出增強(qiáng)現(xiàn)實(shí)信息,使得增強(qiáng)現(xiàn)實(shí)信息能夠在第一用戶(hù)的視野中被感知。
根據(jù)本發(fā)明的一個(gè)方面,該系統(tǒng)具有醫(yī)療裝置。優(yōu)選地,醫(yī)療裝置被實(shí)施為用于提供坐標(biāo)信息。
根據(jù)本發(fā)明的一個(gè)方面,醫(yī)療裝置具有可移動(dòng)部件。
根據(jù)本發(fā)明的一個(gè)形式的實(shí)施例,該系統(tǒng)和/或醫(yī)療裝置具有控制裝置,該控制裝置被實(shí)施為用于輸出與可移動(dòng)部件的運(yùn)動(dòng)相關(guān)的控制命令。根據(jù)本發(fā)明的一個(gè)形式的實(shí)施例,該系統(tǒng)具有被實(shí)施為用于獲取與可移動(dòng)部件的運(yùn)動(dòng)相關(guān)的運(yùn)動(dòng)參數(shù)的運(yùn)動(dòng)參數(shù)獲取單元。運(yùn)動(dòng)參數(shù)獲取單元例如可以具有傳感器。可以例如通過(guò)運(yùn)動(dòng)參數(shù)獲取單元獲取運(yùn)動(dòng)參數(shù)。
本發(fā)明的一個(gè)形式的實(shí)施例提供能夠通過(guò)第一增強(qiáng)現(xiàn)實(shí)裝置和/或通過(guò)第二增強(qiáng)現(xiàn)實(shí)裝置來(lái)控制可移動(dòng)部件,特別是對(duì)其進(jìn)行定位和/或定向。
根據(jù)本發(fā)明的一個(gè)形式的實(shí)施例,醫(yī)療裝置具有驅(qū)動(dòng)單元,該驅(qū)動(dòng)單元被實(shí)施為驅(qū)動(dòng)可移動(dòng)部件的運(yùn)動(dòng)。優(yōu)選地,驅(qū)動(dòng)單元被實(shí)施為用于接收控制命令和/或用于基于控制命令驅(qū)動(dòng)可移動(dòng)部件的運(yùn)動(dòng)。驅(qū)動(dòng)單元例如可以被實(shí)施為電機(jī)。運(yùn)動(dòng)參數(shù)可以例如指定驅(qū)動(dòng)單元在驅(qū)動(dòng)運(yùn)動(dòng)時(shí)消耗的電荷和/或驅(qū)動(dòng)單元在驅(qū)動(dòng)運(yùn)動(dòng)時(shí)由驅(qū)動(dòng)單元消耗的電能。
運(yùn)動(dòng)參數(shù)獲取單元例如可以集成在控制裝置中和/或驅(qū)動(dòng)單元中。運(yùn)動(dòng)參數(shù)獲取單元可以例如被實(shí)施為用于測(cè)量運(yùn)動(dòng)參數(shù)。運(yùn)動(dòng)參數(shù)例如可以規(guī)定轉(zhuǎn)速角,特別是轉(zhuǎn)數(shù)。運(yùn)動(dòng)參數(shù)例如可以是可移動(dòng)部件的運(yùn)動(dòng)的測(cè)量和/或涉及可運(yùn)動(dòng)部件、驅(qū)動(dòng)單元和/或運(yùn)動(dòng)參數(shù)獲取單元。特別地,可以執(zhí)行醫(yī)療裝置和/或控制裝置和/或可移動(dòng)部件和/或驅(qū)動(dòng)單元的校準(zhǔn)和/或仿真和/或可移動(dòng)部件的運(yùn)動(dòng)。
優(yōu)選地,該系統(tǒng)具有建立單元,該建立單元被實(shí)施為用于基于控制命令和/或基于運(yùn)動(dòng)參數(shù)來(lái)建立坐標(biāo)信息。坐標(biāo)信息例如可以通過(guò)建立單元基于控制命令和/或基于運(yùn)動(dòng)參數(shù)來(lái)建立。
根據(jù)本發(fā)明的一個(gè)形式的實(shí)施例,第一獲取模塊具有第一照相機(jī)單元,其中第一照相機(jī)單元被實(shí)施為用于獲取圖像信息和/或深度信息。根據(jù)本發(fā)明的另一形式的實(shí)施例,第一獲取模塊可以訪(fǎng)問(wèn)信息提供模塊的存儲(chǔ)區(qū)域,其中,通過(guò)從信息提供模塊到第一獲取模塊的數(shù)據(jù)傳輸來(lái)獲取第一信息。根據(jù)本發(fā)明的一個(gè)形式的實(shí)施例,系統(tǒng)具有信息提供模塊。信息提供模塊被實(shí)施為用于提供第一信息。
根據(jù)本發(fā)明的一個(gè)形式的實(shí)施例,第一輸出模塊被實(shí)施為輸出增強(qiáng)現(xiàn)實(shí)信息,使得通過(guò)增強(qiáng)現(xiàn)實(shí)信息強(qiáng)化第一用戶(hù)的視野。根據(jù)本發(fā)明的一個(gè)形式的實(shí)施例,第一輸出模塊具有第一觀(guān)察裝置,特別是數(shù)據(jù)眼鏡、數(shù)據(jù)隱形眼鏡(contact lens)和/或視網(wǎng)膜投影器的形式。特別地,可以通過(guò)第一觀(guān)察裝置輸出增強(qiáng)現(xiàn)實(shí)信息。根據(jù)本發(fā)明的另一形式的實(shí)施例,第一觀(guān)察裝置可以訪(fǎng)問(wèn)第一輸出模塊的第一存儲(chǔ)區(qū)域,其中增強(qiáng)現(xiàn)實(shí)信息將通過(guò)第一輸出模塊的數(shù)據(jù)傳輸被輸出到第一觀(guān)察裝置。根據(jù)本發(fā)明的一個(gè)形式的實(shí)施例,系統(tǒng)具有第一觀(guān)察裝置。
根據(jù)本發(fā)明的一個(gè)方面,該系統(tǒng)具有醫(yī)療裝置,其中醫(yī)療裝置被實(shí)施為提供醫(yī)療數(shù)據(jù)集。優(yōu)選地,創(chuàng)建模塊被實(shí)施為基于醫(yī)療數(shù)據(jù)集來(lái)創(chuàng)建增強(qiáng)現(xiàn)實(shí)信息。
根據(jù)本發(fā)明的一個(gè)方面,該系統(tǒng)具有醫(yī)療成像裝置,其中醫(yī)療成像裝置被實(shí)施為用于提供涉及患者的結(jié)構(gòu)的醫(yī)學(xué)成像數(shù)據(jù)集。優(yōu)選地,創(chuàng)建模塊被實(shí)施為基于醫(yī)學(xué)成像數(shù)據(jù)集來(lái)創(chuàng)建增強(qiáng)現(xiàn)實(shí)信息。優(yōu)選地,增強(qiáng)現(xiàn)實(shí)信息具有標(biāo)記患者的結(jié)構(gòu)的結(jié)構(gòu)標(biāo)記。
根據(jù)本發(fā)明的一個(gè)方面,該系統(tǒng)具有被實(shí)施為用于獲取第一用戶(hù)的輸入的第一輸入模塊和/或被實(shí)施為用于獲取第二用戶(hù)的輸入的第二輸入模塊。優(yōu)選地,創(chuàng)建模塊被實(shí)施為基于第一用戶(hù)的輸入和/或基于第二用戶(hù)的輸入來(lái)創(chuàng)建增強(qiáng)現(xiàn)實(shí)信息。
本發(fā)明的一個(gè)形式的實(shí)施例提供:第一獲取模塊具有第一輸入模塊和/或第一獲取模塊被實(shí)施為用于獲取第一用戶(hù)的輸入和/或第一照相機(jī)單元被實(shí)施為用于獲取第一用戶(hù)的輸入。根據(jù)本發(fā)明的一個(gè)方面,該系統(tǒng)具有第二輸出模塊和第二獲取模塊。第二輸出模塊被實(shí)施為用于輸出增強(qiáng)現(xiàn)實(shí)信息,使得增強(qiáng)現(xiàn)實(shí)信息能夠在第二用戶(hù)的視野中被感知。本發(fā)明的一個(gè)形式的實(shí)施例提供:第二獲取模塊具有第二輸入模塊和/或第二獲取模塊被實(shí)施為用于獲取第二用戶(hù)的輸入和/或第二照相機(jī)單元被實(shí)施為用于獲取第二用戶(hù)的輸入。
根據(jù)本發(fā)明的一個(gè)形式的實(shí)施例,第二輸出模塊被實(shí)施為在第二用戶(hù)的視野中示出第一用戶(hù)的視野的至少一部分。根據(jù)本發(fā)明的一個(gè)形式的實(shí)施例,第二輸出模塊被實(shí)施為輸出增強(qiáng)現(xiàn)實(shí)信息,使得通過(guò)增強(qiáng)現(xiàn)實(shí)信息強(qiáng)化第二用戶(hù)的視野。
根據(jù)本發(fā)明的一個(gè)形式的實(shí)施例,第二輸出模塊具有第二觀(guān)察裝置,特別是數(shù)據(jù)眼鏡、數(shù)據(jù)隱形眼鏡和/或視網(wǎng)膜投影器的形式。特別地,可以通過(guò)第二觀(guān)察裝置輸出增強(qiáng)現(xiàn)實(shí)信息。根據(jù)本發(fā)明的另一形式的實(shí)施例,第二觀(guān)察裝置可以訪(fǎng)問(wèn)第二輸出模塊的存儲(chǔ)區(qū)域,其中增強(qiáng)現(xiàn)實(shí)信息將通過(guò)第二輸出模塊的數(shù)據(jù)傳輸被輸出到第二觀(guān)察裝置。根據(jù)本發(fā)明的一個(gè)形式的實(shí)施例,系統(tǒng)具有第二觀(guān)察裝置。
根據(jù)本發(fā)明的一個(gè)形式的實(shí)施例,第二獲取模塊具有第二照相機(jī)單元,其中第二照相機(jī)單元被實(shí)施為用于獲取第二用戶(hù)的輸入。根據(jù)本發(fā)明的實(shí)施例的另一種形式,第二獲取模塊可以訪(fǎng)問(wèn)輸入提供模塊的存儲(chǔ)區(qū)域,其中通過(guò)從輸入提供模塊到第二獲取模塊的數(shù)據(jù)傳輸來(lái)獲取第二用戶(hù)的輸入。根據(jù)本發(fā)明的一個(gè)形式的實(shí)施例,系統(tǒng)具有輸入提供模塊。
根據(jù)本發(fā)明的一個(gè)方面,該系統(tǒng)具有第一增強(qiáng)現(xiàn)實(shí)裝置,該第一增強(qiáng)現(xiàn)實(shí)裝置具有第一獲取模塊和/或第一輸出模塊。第一增強(qiáng)現(xiàn)實(shí)裝置例如可以被實(shí)施為數(shù)據(jù)眼鏡和/或數(shù)據(jù)耳機(jī)。第一增強(qiáng)現(xiàn)實(shí)裝置例如由第一用戶(hù)佩戴和/或可佩戴。根據(jù)本發(fā)明的一個(gè)形式的實(shí)施例,第一增強(qiáng)現(xiàn)實(shí)裝置具有創(chuàng)建模塊。
根據(jù)本發(fā)明的一個(gè)方面,該系統(tǒng)具有第二增強(qiáng)現(xiàn)實(shí)裝置,該第二增強(qiáng)現(xiàn)實(shí)裝置具有第二獲取模塊和/或第二輸出模塊。第二增強(qiáng)現(xiàn)實(shí)裝置例如可以被實(shí)施為數(shù)據(jù)眼鏡和/或數(shù)據(jù)耳機(jī)。第二增強(qiáng)現(xiàn)實(shí)裝置例如由第二用戶(hù)佩戴和/或可佩戴。根據(jù)本發(fā)明的一個(gè)形式的實(shí)施例,第二增強(qiáng)現(xiàn)實(shí)裝置具有創(chuàng)建模塊。
本發(fā)明的一個(gè)形式的實(shí)施例提供:創(chuàng)建模塊具有第一創(chuàng)建子模塊和第二創(chuàng)建子模塊,第一增強(qiáng)現(xiàn)實(shí)裝置具有第一創(chuàng)建子模塊,并且第二增強(qiáng)現(xiàn)實(shí)裝置具有第二創(chuàng)建子模塊。
本發(fā)明的一個(gè)形式的實(shí)施例提供通過(guò)機(jī)器學(xué)習(xí)算法創(chuàng)建增強(qiáng)現(xiàn)實(shí)信息。機(jī)器學(xué)習(xí)算法可以例如評(píng)估第一信息、檢查信息、患者信息、標(biāo)定位置信息、區(qū)域信息、第一用戶(hù)的輸入和/或第二用戶(hù)的輸入。
根據(jù)本發(fā)明的一個(gè)方面,該系統(tǒng)具有用戶(hù)簡(jiǎn)檔選擇模塊。用戶(hù)簡(jiǎn)檔選擇模塊被實(shí)施為用于選擇與第一用戶(hù)相關(guān)的第一用戶(hù)簡(jiǎn)檔和/或用于選擇與第二用戶(hù)相關(guān)的第二用戶(hù)簡(jiǎn)檔。優(yōu)選地,創(chuàng)建模塊被實(shí)施為基于第一用戶(hù)簡(jiǎn)檔和/或基于第二用戶(hù)簡(jiǎn)檔來(lái)創(chuàng)建增強(qiáng)現(xiàn)實(shí)信息。用戶(hù)簡(jiǎn)檔選擇模塊可以例如提供圖形用戶(hù)界面,其中可以通過(guò)圖形用戶(hù)界面來(lái)設(shè)置和/或選擇第一用戶(hù)簡(jiǎn)檔和/或第二用戶(hù)簡(jiǎn)檔。根據(jù)本發(fā)明的一個(gè)形式的實(shí)施例,用戶(hù)簡(jiǎn)檔選擇模塊具有用于獲取安全證書(shū)的安全接口。安全證書(shū)可以特別地是密碼和/或硬件密鑰,例如智能卡。特別地,這使得能夠保護(hù)對(duì)第一用戶(hù)簡(jiǎn)檔的訪(fǎng)問(wèn)和/或?qū)Φ诙脩?hù)簡(jiǎn)檔的訪(fǎng)問(wèn)。
根據(jù)本發(fā)明的一個(gè)方面,該系統(tǒng)被實(shí)施為執(zhí)行本發(fā)明的用于輸出涉及醫(yī)療裝置和/或患者的醫(yī)學(xué)檢查的增強(qiáng)現(xiàn)實(shí)信息的方法。
特別地,本發(fā)明使多個(gè)用戶(hù)之間的通信成為可能,特別是改善了來(lái)自涉及使用醫(yī)療裝置和/或涉及對(duì)患者的醫(yī)學(xué)檢查的不同人群的多個(gè)用戶(hù)之間的通信。對(duì)于用于創(chuàng)建增強(qiáng)現(xiàn)實(shí)的裝置的用戶(hù),可以將附加的(音頻)視覺(jué)元素添加到他或她在他們的視野中感知的現(xiàn)實(shí)世界中,現(xiàn)有元素可以被編輯刪除和/或改變其外觀(guān)。另外,可以從用戶(hù)的角度拾取圖像和聲音,和/或可以確定用戶(hù)的觀(guān)察方向。
該信息可以在每種情況下被提供給另一裝置的一個(gè)或多個(gè)另外的用戶(hù),用于創(chuàng)建增強(qiáng)現(xiàn)實(shí),特別是作為增強(qiáng)現(xiàn)實(shí)信息。在這種情況下,可以在相同位置處提供增強(qiáng)現(xiàn)實(shí)信息,或者通過(guò)遠(yuǎn)程數(shù)據(jù)傳輸在另一遠(yuǎn)程位置提供增強(qiáng)現(xiàn)實(shí)信息??梢允褂迷鰪?qiáng)現(xiàn)實(shí)信息和/或所創(chuàng)建的增強(qiáng)現(xiàn)實(shí),以便支持涉及使用醫(yī)療裝置(例如醫(yī)學(xué)成像裝置)的和/或涉及醫(yī)學(xué)檢查的用戶(hù)之間的通信。用戶(hù)可以例如從由第一用戶(hù)和第二用戶(hù)構(gòu)成的用戶(hù)組中進(jìn)行選擇??梢栽诿糠N情況下從由第一用戶(hù)和第二用戶(hù)組成的用戶(hù)組中選擇用戶(hù)或另外的用戶(hù)的數(shù)目。
醫(yī)學(xué)成像的一個(gè)應(yīng)用在于介入領(lǐng)域,其中由醫(yī)學(xué)成像裝置提供的圖像在醫(yī)療介入期間被使用,以便計(jì)劃介入并檢查介入的進(jìn)展。醫(yī)療成像裝置的這種類(lèi)型的使用在許多情況下對(duì)醫(yī)師提出了高要求,并且需要高水平的訓(xùn)練;在這些訓(xùn)練中,通常有經(jīng)驗(yàn)的醫(yī)師將他或她的知識(shí)傳輸給較沒(méi)有經(jīng)驗(yàn)的醫(yī)師。在這種情況下,兩個(gè)醫(yī)師之間的溝通能夠由用于創(chuàng)建增強(qiáng)現(xiàn)實(shí)的裝置支持,使得有經(jīng)驗(yàn)的醫(yī)師觀(guān)察從無(wú)經(jīng)驗(yàn)的醫(yī)師的視角記錄的圖像,并且可以直接在無(wú)經(jīng)驗(yàn)的醫(yī)師的視野中插入關(guān)于如何進(jìn)一步繼續(xù)的提示。在這種情況下,無(wú)經(jīng)驗(yàn)的醫(yī)師佩戴用于創(chuàng)建增強(qiáng)現(xiàn)實(shí)的裝置,而有經(jīng)驗(yàn)的醫(yī)師同樣佩戴這種裝置或使用用于信息處理的常規(guī)裝置,例如筆記本電腦或平板電腦。本發(fā)明的一個(gè)形式的實(shí)施例提供:在每種情況下第一輸入模塊和/或第二輸入模塊具有鼠標(biāo)、操縱桿、觸摸板、觸敏輸入裝置和/或類(lèi)似裝置。
有經(jīng)驗(yàn)的醫(yī)師可以例如在用于消融的介入期間顯示消融針在患者上的標(biāo)定位置,并且因此指示無(wú)經(jīng)驗(yàn)的醫(yī)師。同樣,角色可以逆轉(zhuǎn),有經(jīng)驗(yàn)的醫(yī)師可以進(jìn)行介入。然后無(wú)經(jīng)驗(yàn)的醫(yī)師可以從有經(jīng)驗(yàn)的醫(yī)師的視角觀(guān)察介入,從而通過(guò)實(shí)例來(lái)學(xué)習(xí)。在這種情況下,有經(jīng)驗(yàn)的和無(wú)經(jīng)驗(yàn)的醫(yī)師是否位于同一房間中并不重要,從而該指令也可以“遠(yuǎn)程地”完成(即通過(guò)遠(yuǎn)程傳輸)。為此,還存在音頻信號(hào)的雙向傳輸以及增強(qiáng)現(xiàn)實(shí)信息的傳輸以使得兩個(gè)醫(yī)師可以彼此通話(huà)是有用的。無(wú)經(jīng)驗(yàn)的醫(yī)師不必絕對(duì)需要在進(jìn)行介入的同時(shí)將他或她自己置于有經(jīng)驗(yàn)的醫(yī)師的視角中。例如,第一信息和/或增強(qiáng)現(xiàn)實(shí)信息可以利用在醫(yī)學(xué)檢查期間插入或追溯地插入的附加信息來(lái)記錄和/或強(qiáng)化,并且在稍后對(duì)無(wú)經(jīng)驗(yàn)的醫(yī)師可用。
本發(fā)明的一個(gè)實(shí)施例提供:有經(jīng)驗(yàn)的醫(yī)師對(duì)無(wú)經(jīng)驗(yàn)的醫(yī)師的支持不是在訓(xùn)練的意義上發(fā)生,而是在正常操作期間發(fā)生。因此,例如在農(nóng)村地區(qū),當(dāng)發(fā)生并發(fā)癥時(shí)或者在特別復(fù)雜的情況下,有經(jīng)驗(yàn)的醫(yī)師可作為專(zhuān)家按需提供,以便支持醫(yī)師。特別地,專(zhuān)家可以支持醫(yī)師進(jìn)行由成像支持的活檢。這種支持也可以在介入之前提供,以便確定介入的最佳可能的接入。例如,專(zhuān)家可以在醫(yī)學(xué)成像數(shù)據(jù)集的基礎(chǔ)上輔助醫(yī)師計(jì)劃介入路徑。
本發(fā)明特別地使得可以支持患者和醫(yī)師之間的對(duì)話(huà)。這可以在例如介入之前進(jìn)行,其中醫(yī)師在增強(qiáng)現(xiàn)實(shí)中和/或通過(guò)增強(qiáng)現(xiàn)實(shí)信息向患者解釋介入的執(zhí)行或結(jié)果或使風(fēng)險(xiǎn)可視化。同樣,醫(yī)師可以在執(zhí)行介入之后通過(guò)增強(qiáng)現(xiàn)實(shí)信息和/或在增強(qiáng)現(xiàn)實(shí)中向患者顯示檢查的結(jié)果。
在這種情況下,可以有利地以“虛擬鏡”將這些顯示給患者。實(shí)際上還可以想到通過(guò)將增強(qiáng)現(xiàn)實(shí)信息直接插入患者身體上的檢查點(diǎn)而向患者顯示檢查的結(jié)果。然而,一方面,這對(duì)于患者來(lái)說(shuō)可能是復(fù)雜的或者根本不能被看見(jiàn)(例如對(duì)于脊柱)。另一方面,如果結(jié)果的這種表示太現(xiàn)實(shí),則對(duì)于患者來(lái)說(shuō)可能是非常不安的。因此,可能有利的是,不將結(jié)果的這種表示插入患者他/或她自己,而是插入在“虛擬鏡”上,即在其增強(qiáng)現(xiàn)實(shí)內(nèi)的表面上;該“虛擬鏡”示出類(lèi)似于鏡像的患者,并且檢查結(jié)果可以插入該“虛擬鏡”中。替代地或附加地,監(jiān)視器與照相機(jī)一起可以用于結(jié)果的這種表示。
本發(fā)明例如使得在醫(yī)學(xué)檢查之前和/或期間對(duì)患者的改善指導(dǎo)成為可能。對(duì)于患者,例如可以用醫(yī)療裝置執(zhí)行的醫(yī)學(xué)檢查通常表示異常情況。一般來(lái)說(shuō),患者對(duì)臨床和檢查過(guò)程中的程序幾乎不了解。
臨床人員與患者之間的溝通可以通過(guò)使用用于創(chuàng)建增強(qiáng)現(xiàn)實(shí)的裝置來(lái)支持。為此,例如可以通過(guò)插入到他或她的視野中的增強(qiáng)現(xiàn)實(shí)信息將患者引導(dǎo)通過(guò)診所到達(dá)檢查位置,例如地板上的箭頭。在檢查位置處,他或她可以通過(guò)增強(qiáng)現(xiàn)實(shí)信息、特別是以視聽(tīng)信息形式的增強(qiáng)現(xiàn)實(shí)信息被示明他或她是否仍然需要等候、他或她前面有多少患者、等候時(shí)間可能多長(zhǎng)以及他或她應(yīng)該去檢查的檢查室。在檢查準(zhǔn)備的框架內(nèi),可以通過(guò)插入的增強(qiáng)現(xiàn)實(shí)信息、特別是以視聽(tīng)信息形式的增強(qiáng)現(xiàn)實(shí)信息來(lái)指示他或她根據(jù)檢查脫下他或她的衣服、和/或穿上其他衣服??梢赃M(jìn)一步指示患者在檢查室中采取特定姿勢(shì),例如以特定方位躺在檢查床上和/或抬起他或她的手臂。這也可以由“虛擬鏡”支持,其中患者在增強(qiáng)現(xiàn)實(shí)中生成的鏡子中看到他/她自己和/或他或她自己的化身。在檢查的分步驟之后,可以指示他或她可以離開(kāi)檢查室的路和/或被引導(dǎo)通向檢查的另一個(gè)分步驟(例如在另一個(gè)檢查室中)。
使用用于創(chuàng)建增強(qiáng)現(xiàn)實(shí)的裝置的特定優(yōu)點(diǎn)在于如下事實(shí):增強(qiáng)現(xiàn)實(shí)信息可以針對(duì)患者個(gè)體定制,并且同一房間中的多個(gè)患者可以各自感知他們各自的增強(qiáng)現(xiàn)實(shí)信息,例如,關(guān)于他們應(yīng)該去哪個(gè)檢查室的指示。另一個(gè)優(yōu)點(diǎn)在于如下事實(shí):當(dāng)每個(gè)患者只能感知到對(duì)于他或她的指示時(shí),機(jī)密性被更好地保持,并且例如可以免除在候診室中通過(guò)姓名呼叫患者。
本發(fā)明還使得能夠改進(jìn)對(duì)患者和醫(yī)療裝置的操作人員之間的個(gè)人溝通的支持。在CT或MRT檢查期間,操作人員通常不可能始終與患者待在一起。相反,對(duì)于CT,例如由于輻射防護(hù)的原因,他們從檢查室退出進(jìn)入控制室。通過(guò)增強(qiáng)現(xiàn)實(shí)信息,可以為患者示出檢查室中的操作人員的存在,例如同時(shí)還有雙向聲音傳輸。通過(guò)增強(qiáng)現(xiàn)實(shí)信息,患者可以被顯示為用于操作人員的控制室內(nèi)的增強(qiáng)現(xiàn)實(shí)的要素。
雙向聲音傳輸可以例如通過(guò)內(nèi)部通信系統(tǒng)來(lái)進(jìn)行。作為替代或補(bǔ)充,雙向聲音傳輸可以實(shí)時(shí)地修改,例如,特別地通過(guò)同步機(jī)器翻譯來(lái)修改。以這種方式,患者和操作人員即使他們不說(shuō)共同的語(yǔ)言也可以彼此理解。
通過(guò)增強(qiáng)現(xiàn)實(shí)的這些應(yīng)用,患者在檢查期間不會(huì)感到孤獨(dú),并且他或她的焦慮可以減少。特別地,借助于增強(qiáng)現(xiàn)實(shí)信息,可以針對(duì)在檢查室中的患者顯示由化身所體現(xiàn)的操作人員。化身可以例如一直存在。例如,當(dāng)通過(guò)傳感器檢測(cè)到需要注意的患者情況(例如噪聲和/或運(yùn)動(dòng))時(shí),操作人員可以例如僅關(guān)聯(lián)到化身。以這種方式,操作人員可以進(jìn)行他們的工作,而另一方面對(duì)于患者,產(chǎn)生一直存在的感覺(jué),這有助于減少他或她的緊張和焦慮。
本發(fā)明特別地使得可以例如在患者的放置方面、在支撐輔助的選擇方面或在EKG電極或用于測(cè)量呼吸的裝置的放置方面支持操作人員。在這種情況下,這種支持一方面可以由另一個(gè)人提供(例如,制造商的應(yīng)用專(zhuān)家,其通過(guò)增強(qiáng)現(xiàn)實(shí)信息插入用于操作人員的放置和/或選擇的信息)。另一方面,可以例如基于制造商的規(guī)范自動(dòng)地創(chuàng)建增強(qiáng)現(xiàn)實(shí)信息,其中這些規(guī)范可以附加地根據(jù)各個(gè)診所的特定要求來(lái)適配,例如,基于所選擇的醫(yī)療裝置的測(cè)量方案或基于其它數(shù)據(jù)來(lái)適配。該其他數(shù)據(jù)例如可以是患者的解剖標(biāo)志??梢蕴貏e地基于圖像信息和/或基于深度信息來(lái)建立解剖標(biāo)志。EKG電極的最佳位置可以例如通過(guò)解剖標(biāo)志來(lái)計(jì)算。
因此,可以通過(guò)增強(qiáng)現(xiàn)實(shí)信息來(lái)支持從制造商到用戶(hù)的通信,否則該通信將首先通過(guò)訓(xùn)練和通過(guò)操作指令來(lái)進(jìn)行。
本發(fā)明特別地使得可以改進(jìn)操作人員的訓(xùn)練。為此,例如可以借助于增強(qiáng)現(xiàn)實(shí)信息將虛擬患者引入到待訓(xùn)練的操作人員的增強(qiáng)現(xiàn)實(shí)中,其中可以作為與虛擬患者的練習(xí)來(lái)執(zhí)行檢查。在這種情況下,虛擬患者可以完全由計(jì)算機(jī)產(chǎn)生,即也由另一個(gè)人的輸入產(chǎn)生,例如同樣借助于用于創(chuàng)建增強(qiáng)現(xiàn)實(shí)的裝置產(chǎn)生。該過(guò)程尤其對(duì)于X射線(xiàn)裝置提供了這樣的優(yōu)點(diǎn),即:以這種方式,即使在進(jìn)行訓(xùn)練時(shí),也可以仿真X射線(xiàn)輻射的觸發(fā)。特別地由于輻射負(fù)荷,對(duì)真實(shí)患者進(jìn)行訓(xùn)練將伴隨嚴(yán)重的限制。
根據(jù)本發(fā)明的一個(gè)形式的實(shí)施例,第一增強(qiáng)現(xiàn)實(shí)裝置具有第一照相機(jī)單元,其中第一照相機(jī)單元被實(shí)施為用于獲取圖像信息和/或深度信息。
本發(fā)明的一個(gè)形式的實(shí)施例提供第一增強(qiáng)現(xiàn)實(shí)裝置被實(shí)施為數(shù)據(jù)眼鏡。這樣的數(shù)據(jù)眼鏡例如可以由用戶(hù)佩戴。用戶(hù)可以例如是放射科醫(yī)師或輔助醫(yī)療技術(shù)人員。在本發(fā)明的一個(gè)形式的實(shí)施例中,通過(guò)第一照相機(jī)單元獲取患者的圖像。將該圖像與患者數(shù)據(jù)庫(kù)中的條目進(jìn)行比較。這使得能夠確定涉及哪個(gè)患者和/或是否與計(jì)劃的檢查匹配。這種識(shí)別檢查使得能夠避免不正確的檢查和檢查結(jié)果的不正確分配。
在本發(fā)明的另一變型中,來(lái)自患者的預(yù)檢查的信息、注釋和/或圖像通過(guò)增強(qiáng)現(xiàn)實(shí)信息被傳遞給用戶(hù)和/或在增強(qiáng)現(xiàn)實(shí)中可用。
通過(guò)更聰明的呈現(xiàn)和與通過(guò)增強(qiáng)現(xiàn)實(shí)信息(圖像、組織學(xué)、血液值等)呈現(xiàn)的數(shù)據(jù)的交互式互動(dòng),用戶(hù)可以非??斓禺a(chǎn)生患者的全盤(pán)整體圖片。
基于患者信息,特別是基于患者識(shí)別信息,可以建立與患者的患病史有關(guān)的患者歷史信息。基于患者信息,例如可以建立患者的特性特征。例如,借助于存儲(chǔ)了參考數(shù)據(jù)集的數(shù)據(jù)庫(kù),基于患者信息,可以建立適當(dāng)?shù)膮⒖紨?shù)據(jù)集,該參考數(shù)據(jù)集可以例如用于使用電離輻射的醫(yī)學(xué)檢查中的劑量調(diào)節(jié)。
在例如預(yù)檢查的框架內(nèi)建立的例如作為對(duì)應(yīng)于醫(yī)學(xué)圖像的患者的身體區(qū)域的3D模型的醫(yī)學(xué)圖像可以被示出為投影在增強(qiáng)現(xiàn)實(shí)信息上和/或由增強(qiáng)現(xiàn)實(shí)信息覆蓋。以這種方式,用戶(hù)可以快速和準(zhǔn)確地識(shí)別出診斷相關(guān)信息是否已經(jīng)存在于特定點(diǎn),例如疼痛點(diǎn)。
本發(fā)明的一個(gè)形式的實(shí)施例提供基于圖像信息識(shí)別患者,基于第一信息建立患者信息和/或患者數(shù)據(jù),并且通過(guò)增強(qiáng)現(xiàn)實(shí)信息使患者信息和/或患者數(shù)據(jù)可用。這可能是有利的,特別是當(dāng)急診醫(yī)生被部署到事故現(xiàn)場(chǎng)時(shí)。
根據(jù)本發(fā)明的另一形式的實(shí)施例,增強(qiáng)現(xiàn)實(shí)信息以位置特定的方式呈現(xiàn)在用戶(hù)的視野中。例如,布置在檢查室、特別是OP室中的診斷顯示器可以通過(guò)增強(qiáng)現(xiàn)實(shí)信息來(lái)強(qiáng)化。增強(qiáng)現(xiàn)實(shí)信息例如可以具有EKG信號(hào)、呼吸曲線(xiàn)、患者病史、患者的生物數(shù)據(jù)。增強(qiáng)現(xiàn)實(shí)信息可以特別地在醫(yī)療裝置和/或診斷顯示器的觀(guān)察期間輸出。
在本發(fā)明的另一種形式的實(shí)施例中,用戶(hù),例如放射科醫(yī)師、輔助醫(yī)療技術(shù)人員或護(hù)士將配備有用于創(chuàng)建增強(qiáng)現(xiàn)實(shí)的裝置,例如數(shù)據(jù)眼鏡形式的裝置。優(yōu)選地,能夠被自動(dòng)評(píng)估的唯一特征例如QR碼布置在患者和/或患者文檔上。當(dāng)查看該特征時(shí),例如可以將虛擬票示出為增強(qiáng)現(xiàn)實(shí)信息。因此,用戶(hù)可以看到與患者相關(guān)的當(dāng)前信息。
本發(fā)明的另一形式的實(shí)施例提供用戶(hù)能夠登錄到為用戶(hù)生成的帳戶(hù)。利用該帳戶(hù),例如可以管理用戶(hù)的用戶(hù)簡(jiǎn)檔,該用戶(hù)簡(jiǎn)檔尤其包括用戶(hù)的權(quán)限。以這種方式,特別地通過(guò)增強(qiáng)現(xiàn)實(shí)信息,可以?xún)H僅輸出用戶(hù)被授權(quán)的和/或涉及分配給用戶(hù)的患者的那個(gè)信息和/或那些圖像。
第一信息例如可以具有定位片(topogram),特別是基于照相機(jī)的定位片。特別地,定位片可以是圖像信息和深度信息的組合。根據(jù)本發(fā)明的一個(gè)形式的實(shí)施例,通過(guò)例如集成在第一增強(qiáng)現(xiàn)實(shí)裝置中的第一照相機(jī)單元來(lái)獲取基于照相機(jī)的定位片?;谡障鄼C(jī)的定位片例如可以被示出為通過(guò)增強(qiáng)現(xiàn)實(shí)信息覆蓋在患者上。除此之外,患者的特性特征可以根據(jù)基于照相機(jī)的定位片建立。借助于保持參考數(shù)據(jù)集的數(shù)據(jù)庫(kù),因此可以根據(jù)基于照相機(jī)的定位片建立用于醫(yī)學(xué)檢查的合適的參考數(shù)據(jù),該參考數(shù)據(jù)例如可以用于劑量調(diào)節(jié)。
根據(jù)本發(fā)明的一個(gè)形式的實(shí)施例,通過(guò)增強(qiáng)現(xiàn)實(shí)信息將患者狀態(tài)信息傳輸給用戶(hù)?;颊郀顟B(tài)信息可以例如是患者的面部表情、患者的體溫、患者的瞳孔放大等等?;颊郀顟B(tài)信息例如可以涉及情感指示器,該情感指示器特別地可以指向患者的壓力。通過(guò)增強(qiáng)現(xiàn)實(shí)信息,例如可以顯示患者的一個(gè)或多個(gè)生理參數(shù),特別是脈搏、呼吸節(jié)律等等。
本發(fā)明的一個(gè)形式的實(shí)施例提供例如在介入即將開(kāi)始之前通過(guò)數(shù)據(jù)眼鏡獲取患者信息,將所獲取的患者信息與數(shù)據(jù)庫(kù)中的條目進(jìn)行比較,例如基于患者的類(lèi)似身體特征和/或基于類(lèi)似的介入建立來(lái)自數(shù)據(jù)庫(kù)的匹配條目,并且將分配給匹配條目的介入結(jié)果顯示為投影和/或覆蓋在患者的表面上。以這種方式,可以向使用者、特別是放射科醫(yī)師和/或外科醫(yī)生施加對(duì)期望的介入結(jié)果的更好的印象。
根據(jù)本發(fā)明的另一形式的實(shí)施例,患者配備有數(shù)據(jù)眼鏡??梢垣@取患者的生理參數(shù)例如心跳,所述生理參數(shù)允許獲得患者的情緒狀態(tài)的印象。如果這些生理參數(shù)指向患者處于壓力下,則可以經(jīng)由數(shù)據(jù)眼鏡顯示用于緩解壓力的鎮(zhèn)定環(huán)境。例如,可以向患有幽閉恐怖癥的使用醫(yī)療成像裝置檢查的患者示出暗示著大的開(kāi)放空間的鄉(xiāng)村。作為替代或補(bǔ)充,檢查相關(guān)的指令例如呼吸命令可以通過(guò)數(shù)據(jù)眼鏡顯示。此外,還可以使用音頻信號(hào)。
根據(jù)本發(fā)明的一個(gè)形式的實(shí)施例,可以通過(guò)增強(qiáng)現(xiàn)實(shí)信息將與醫(yī)學(xué)檢查有關(guān)的虛擬的、例如計(jì)算機(jī)生成的數(shù)據(jù)顯示為覆蓋在患者上。因此,特別能夠?qū)崿F(xiàn)更好的用于構(gòu)思和執(zhí)行醫(yī)學(xué)檢查的能力。
利用用于創(chuàng)建增強(qiáng)現(xiàn)實(shí)、特別是醫(yī)學(xué)圖像(例如DICOM圖像)的裝置,附加信息可以通過(guò)增強(qiáng)現(xiàn)實(shí)信息顯示為覆蓋在患者上。使用用于為醫(yī)學(xué)檢查(例如介入)創(chuàng)建增強(qiáng)現(xiàn)實(shí)的裝置尤其在可視化、信息的顯示和虛擬處理工具的提供(特別是圖像處理工具)方面可以實(shí)現(xiàn)巨大的改進(jìn)。
醫(yī)學(xué)成像數(shù)據(jù)集例如可以具有醫(yī)學(xué)圖像,特別是DICOM圖像、CT圖像、MRT圖像、超聲圖像、血管造影圖像系列、內(nèi)窺鏡視頻等。增強(qiáng)現(xiàn)實(shí)信息可以具有醫(yī)學(xué)成像數(shù)據(jù)集和/或基于醫(yī)學(xué)成像數(shù)據(jù)集建立的標(biāo)記。因此,醫(yī)學(xué)成像數(shù)據(jù)集和/或標(biāo)記可以被顯示為在用戶(hù)的視野中覆蓋在患者上。在這種情況下,可以將通過(guò)醫(yī)學(xué)成像數(shù)據(jù)集示出和/或建立的結(jié)構(gòu)標(biāo)記與患者的相應(yīng)結(jié)構(gòu)對(duì)準(zhǔn)。
以這種方式,正在進(jìn)行醫(yī)學(xué)檢查的用戶(hù)可以更快地、符合人體工程學(xué)地、更便利地并且以減少的易出錯(cuò)性從醫(yī)學(xué)成像數(shù)據(jù)集中訪(fǎng)問(wèn)信息。
用于創(chuàng)建增強(qiáng)現(xiàn)實(shí)的裝置可以被實(shí)施為在用戶(hù)的視野中創(chuàng)建虛擬屏幕。特別地,虛擬屏幕可以在用戶(hù)視線(xiàn)的任何位置和方向上可用。這在人體工程學(xué)方面是特別有利的。此外,減少了監(jiān)視器和/或支撐結(jié)構(gòu)對(duì)用戶(hù)的運(yùn)動(dòng)自由度的限制。
增強(qiáng)現(xiàn)實(shí)信息例如可以具有虛擬屏幕。例如,可以根據(jù)需要顯示或編輯刪除虛擬屏幕。醫(yī)療數(shù)據(jù)集(特別是醫(yī)學(xué)圖像)、檢查信息和/或患者信息可以例如顯示在虛擬屏幕中。
本發(fā)明的一個(gè)形式的實(shí)施例提供:基于醫(yī)學(xué)成像數(shù)據(jù)集來(lái)選擇患者的結(jié)構(gòu),并且增強(qiáng)現(xiàn)實(shí)信息具有標(biāo)記患者的選定結(jié)構(gòu)的結(jié)構(gòu)標(biāo)記。以這種方式,識(shí)別患者的小且難以找到的結(jié)構(gòu)變得更容易。
結(jié)構(gòu)標(biāo)記可以例如標(biāo)記介入?yún)^(qū)域。結(jié)構(gòu)標(biāo)記還可以具有介入計(jì)劃模型的表示,其中該模型涉及介入的計(jì)劃中間步驟或計(jì)劃結(jié)果。介入計(jì)劃模型可以例如通過(guò)仿真來(lái)建立。借助于增強(qiáng)的現(xiàn)實(shí)信息,介入計(jì)劃模型可以被顯示為覆蓋在患者身上??梢允褂媒槿胗?jì)劃模型來(lái)改善介入期間的導(dǎo)航。例如,介入計(jì)劃模型可以具有計(jì)劃的儀器路徑。以這種方式,對(duì)于給定介入具有較少經(jīng)驗(yàn)的用戶(hù)也能夠成功地執(zhí)行給定介入。
介入計(jì)劃模型可以具有植入物的模型??梢岳缃柚谟脩?hù)的手勢(shì)信息,將介入計(jì)劃模型適配至患者的結(jié)構(gòu)和/或患者的解剖特征來(lái)。以這種方式,能夠建立植入物的最佳位置、尺寸和形狀。
結(jié)構(gòu)標(biāo)記例如可以具有患者的結(jié)構(gòu)(特別是器官)的分割的表示。借助于增強(qiáng)現(xiàn)實(shí)信息,例如可以將與診斷結(jié)果相關(guān)的診斷信息顯示為覆蓋在患者上。因此,使得使用者能夠識(shí)別結(jié)構(gòu)的關(guān)鍵區(qū)域并避免在介入期間的損壞。
根據(jù)本發(fā)明的一個(gè)形式的實(shí)施例,通過(guò)增強(qiáng)現(xiàn)實(shí)信息輸出患者狀態(tài)信息?;颊郀顟B(tài)信息可以例如涉及患者的心跳、患者的呼吸、患者的患病史、患者的實(shí)驗(yàn)室值、患者的人口統(tǒng)計(jì)學(xué)說(shuō)明等信息。以這種方式,可以在用戶(hù)的視野中輸出患者狀態(tài)信息。因此,可以為用戶(hù)、特別是正在檢查患者的醫(yī)師提供改進(jìn)的決策基礎(chǔ)。
增強(qiáng)現(xiàn)實(shí)信息可以具有虛擬處理工具,特別是虛擬圖像處理工具。例如,可以通過(guò)虛擬處理工具來(lái)標(biāo)記和/或通過(guò)虛擬處理工具來(lái)測(cè)量患者的區(qū)域。在例如患者的區(qū)域的測(cè)量中,可以建立區(qū)域的位置、方位、形狀、長(zhǎng)度、表面、體積等等。
增強(qiáng)現(xiàn)實(shí)信息可以具有診斷信息。診斷信息可以例如通過(guò)PACS數(shù)據(jù)集和/或通過(guò)CAD數(shù)據(jù)集來(lái)提供。診斷信息例如可以基于醫(yī)學(xué)成像數(shù)據(jù)集建立。醫(yī)學(xué)成像數(shù)據(jù)集例如可以具有患者結(jié)構(gòu)(例如顱骨、胸腔,特別是一個(gè)或多個(gè)肋骨)的渲染過(guò)的圖像(渲染圖像)和/或展開(kāi)的圖像(展開(kāi)圖像)。渲染圖像可以特別地基于用戶(hù)特定的渲染。
標(biāo)定位置信息例如可以基于患者在預(yù)檢查和/或在醫(yī)學(xué)檢查之前的時(shí)間進(jìn)行的治療(特別是放射治療處理)期間的位置而建立。因此,可以改善患者的位置的可再現(xiàn)性。
根據(jù)本發(fā)明的一個(gè)形式的實(shí)施例,醫(yī)療裝置選自由醫(yī)學(xué)成像裝置、介入工具、被實(shí)施用于獲取和/或提供醫(yī)療數(shù)據(jù)集的檢查裝置及其組合構(gòu)成的組。
關(guān)于醫(yī)療裝置描述的特征也相應(yīng)地適用于虛擬醫(yī)療裝置,即,在這些特征中,在每種情況下,術(shù)語(yǔ)“醫(yī)療裝置”由術(shù)語(yǔ)“虛擬醫(yī)療裝置”替換。關(guān)于醫(yī)學(xué)檢查描述的特征相應(yīng)地適用于虛擬醫(yī)學(xué)檢查,即,在這些特征中,在每種情況下,術(shù)語(yǔ)“醫(yī)學(xué)檢查”由術(shù)語(yǔ)“虛擬醫(yī)學(xué)檢查”替換。關(guān)于患者描述的特征相應(yīng)地適用于虛擬患者,即,在每種情況下,術(shù)語(yǔ)“患者”被術(shù)語(yǔ)“虛擬患者”替換。以這種方式,可以改善醫(yī)務(wù)人員的培訓(xùn)和/或醫(yī)學(xué)檢查的規(guī)劃。特別地,即使在不使用真實(shí)患者和/或真實(shí)醫(yī)療裝置的情況下,也可以實(shí)現(xiàn)真實(shí)的訓(xùn)練和/或真實(shí)的規(guī)劃。
本發(fā)明的一種形式的實(shí)施例提供第一用戶(hù)能夠通過(guò)第一增強(qiáng)現(xiàn)實(shí)裝置感知他們的環(huán)境。特別地,可以向第一用戶(hù)而不是真實(shí)患者顯示患者的圖像和/或患者的化身,和/或可以向處在正確位置的用戶(hù)顯示醫(yī)療裝置的圖像和/或醫(yī)療裝置的模型,而非真正的醫(yī)療裝置。以這種方式,用于創(chuàng)建虛擬現(xiàn)實(shí)的裝置也可以用作增強(qiáng)現(xiàn)實(shí)裝置。用于創(chuàng)建虛擬現(xiàn)實(shí)的已知裝置例如是來(lái)自美國(guó)的Oculus VR有限公司的Rift。
本發(fā)明的一個(gè)形式的實(shí)施例提供本發(fā)明的系統(tǒng)和/或本發(fā)明系統(tǒng)的多個(gè)部件至少部分地以處理器系統(tǒng)上的軟件的形式實(shí)現(xiàn)。具體地,第一獲取模塊、創(chuàng)建模塊、第一輸出模塊、信息提供模塊、第二輸出模塊和第二獲取模塊可以各自形成本發(fā)明系統(tǒng)的部件和/或各自至少部分地以處理器系統(tǒng)上的軟件的形式實(shí)現(xiàn)。本發(fā)明的一個(gè)形式的實(shí)施例提供本發(fā)明系統(tǒng)和/或本發(fā)明系統(tǒng)的多個(gè)部件至少部分地以軟件支持的硬件(例如FPGA、處理器系統(tǒng)等)的形式實(shí)現(xiàn)。
本發(fā)明的一個(gè)形式的實(shí)施例提供本發(fā)明的系統(tǒng)和/或本發(fā)明系統(tǒng)的多個(gè)部件至少部分地由云借助于云計(jì)算來(lái)形成。本發(fā)明的一個(gè)形式的實(shí)施例提供創(chuàng)建模塊和/或創(chuàng)建模塊的至少子模塊由云通過(guò)云計(jì)算形成。云可以特別地具有在空間上彼此遠(yuǎn)離的存儲(chǔ)區(qū)域的網(wǎng)絡(luò)和在空間上彼此遠(yuǎn)離的處理器系統(tǒng)。對(duì)于從云和/或到云的數(shù)據(jù)傳輸,第一增強(qiáng)現(xiàn)實(shí)裝置可以具有第一云接口,和/或第二增強(qiáng)現(xiàn)實(shí)裝置可以具有第二云接口。
數(shù)據(jù)可以在系統(tǒng)的部件之間例如通過(guò)合適的接口傳輸。本發(fā)明的一個(gè)形式的實(shí)施例提供到和/或來(lái)自本發(fā)明系統(tǒng)的部件的數(shù)據(jù)傳輸?shù)慕涌谥辽俨糠值匾攒浖男问綄?shí)現(xiàn)。特別地,接口可以具有到合適的存儲(chǔ)區(qū)域的訪(fǎng)問(wèn)設(shè)施,其中在該存儲(chǔ)區(qū)域中,數(shù)據(jù)可以被適當(dāng)?shù)鼐彌_、檢索和更新。接口也可以被實(shí)施為由硬件構(gòu)成的接口,該硬件可以由適當(dāng)?shù)能浖せ睢?/p>
本發(fā)明系統(tǒng)的主要基于軟件的實(shí)現(xiàn)具有以下優(yōu)點(diǎn):甚至先前已經(jīng)使用的增強(qiáng)現(xiàn)實(shí)裝置也可以通過(guò)軟件更新來(lái)升級(jí),以便以本發(fā)明的方式工作。為此,該目的還通過(guò)具有計(jì)算機(jī)程序的相應(yīng)的計(jì)算機(jī)程序產(chǎn)品來(lái)實(shí)現(xiàn),該計(jì)算機(jī)程序能夠被加載到計(jì)算機(jī)的存儲(chǔ)裝置中,其中當(dāng)在計(jì)算機(jī)上執(zhí)行計(jì)算機(jī)程序時(shí),本發(fā)明的方法的步驟可以用計(jì)算機(jī)程序來(lái)執(zhí)行。這種計(jì)算機(jī)程序產(chǎn)品以及計(jì)算機(jī)程序可以包括附加的軟件組件(例如文檔)和/或硬件組件(例如用于軟件的硬件密鑰(加密狗等))。
為了將計(jì)算機(jī)程序傳輸至和/或?yàn)榱藢⒂?jì)算機(jī)程序存儲(chǔ)至增強(qiáng)現(xiàn)實(shí)裝置中,可以使用計(jì)算機(jī)可讀介質(zhì)(例如記憶棒、硬盤(pán)或另一可傳輸或永久安裝的數(shù)據(jù)介質(zhì)),其中計(jì)算機(jī)程序存儲(chǔ)在該介質(zhì)上,該計(jì)算機(jī)程序能夠被加載到計(jì)算機(jī)的存儲(chǔ)裝置中,其中當(dāng)在計(jì)算機(jī)上執(zhí)行計(jì)算機(jī)程序時(shí),本發(fā)明的方法的步驟將利用該計(jì)算機(jī)程序被執(zhí)行。本發(fā)明的一個(gè)形式的實(shí)施例提供:第一增強(qiáng)現(xiàn)實(shí)裝置具有第一計(jì)算機(jī)和/或第二增強(qiáng)現(xiàn)實(shí)裝置具有第二計(jì)算機(jī)。第一計(jì)算機(jī)和/或第二計(jì)算機(jī)可以各自具有處理器系統(tǒng),例如具有微處理器或一起工作的多個(gè)微處理器。
根據(jù)本發(fā)明的一個(gè)方面,醫(yī)學(xué)成像裝置選自由C臂X射線(xiàn)裝置、計(jì)算機(jī)斷層掃描裝置(CT裝置)、單光子發(fā)射計(jì)算機(jī)斷層掃描裝置(SPECT裝置)、正電子發(fā)射斷層掃描裝置(PET裝置)、磁共振斷層掃描裝置(MRT裝置)及其組合組成的組。特別地,醫(yī)學(xué)成像裝置可以具有X射線(xiàn)裝置、超聲裝置等。醫(yī)學(xué)成像裝置還可以具有多種成像和/或放射形態(tài)的組合。在這種情況下,放射形態(tài)可以例如具有用于治療性放射的放射裝置。
在本發(fā)明的框架內(nèi),關(guān)于不同形式的實(shí)施例和/或不同權(quán)利要求類(lèi)型(方法、系統(tǒng)等)描述的特征可以組合成其他形式的實(shí)施例。特別地,關(guān)于本發(fā)明的方法描述的實(shí)施例的特征、優(yōu)點(diǎn)和形式也被轉(zhuǎn)移到本發(fā)明的系統(tǒng)、本發(fā)明的計(jì)算機(jī)程序產(chǎn)品和本發(fā)明的計(jì)算機(jī)可讀介質(zhì),反之亦然。換句話(huà)說(shuō),也可以用結(jié)合方法描述或要求保護(hù)的特征來(lái)進(jìn)一步形成裝置權(quán)利要求。在這種情況下,本發(fā)明方法的功能特征也可以通過(guò)本發(fā)明系統(tǒng)的相應(yīng)實(shí)施的部件或模塊來(lái)實(shí)現(xiàn)。不定冠詞“一”或“一個(gè)”的使用不排除涉及的特征也存在多次。模塊可以具有彼此物理分離的多個(gè)子模塊,并且單元能夠具有彼此物理分離的多個(gè)子單元。
所描述的方法和所描述的系統(tǒng)僅涉及本發(fā)明的實(shí)施例的(多個(gè))形式。本發(fā)明可以由本領(lǐng)域技術(shù)人員在不偏離本發(fā)明的范圍的情況下改變,只要其由權(quán)利要求書(shū)限定即可。
附圖說(shuō)明
下面將參照基于示例性實(shí)施例的附圖再次更詳細(xì)地解釋本發(fā)明。附圖中的表示是示意性的并且大大簡(jiǎn)化,并且也不是成絕對(duì)真實(shí)比例的。
在附圖中:
圖1示出了根據(jù)本發(fā)明的第一形式的實(shí)施例的方法的流程圖;
圖2示出了根據(jù)本發(fā)明的第二形式的實(shí)施例的系統(tǒng)的圖;
圖3示出了根據(jù)本發(fā)明的第三形式的實(shí)施例的系統(tǒng);
圖4示出了根據(jù)本發(fā)明的第四形式的實(shí)施例的方法的流程圖;
圖5示出了根據(jù)本發(fā)明的第五形式的實(shí)施例的系統(tǒng)的圖;
圖6示出了根據(jù)本發(fā)明的第六形式的實(shí)施例的系統(tǒng);
圖7示出了來(lái)自第二用戶(hù)的視野的截面圖,其中通過(guò)增強(qiáng)現(xiàn)實(shí)信息強(qiáng)化了該視野。
具體實(shí)施方式
圖1示出了根據(jù)第一形式的實(shí)施例的用于向第一用戶(hù)U1輸出涉及醫(yī)療裝置2、IT、MD和/或患者13的醫(yī)學(xué)檢查的增強(qiáng)現(xiàn)實(shí)信息AR的方法的流程圖。在步驟R1中,獲取從由圖像信息、深度信息、坐標(biāo)信息及其組合構(gòu)成的組中選擇的第一信息,其中第一信息涉及醫(yī)療裝置2、IT、MD和/或患者13的醫(yī)學(xué)檢查。在步驟GA中,基于第一信息創(chuàng)建與醫(yī)療裝置2、IT、MD和/或患者13的醫(yī)學(xué)檢查有關(guān)的增強(qiáng)現(xiàn)實(shí)信息AR。在步驟D1中,輸出增強(qiáng)現(xiàn)實(shí)信息AR,使得能夠在第一用戶(hù)U1的視野中感知增強(qiáng)現(xiàn)實(shí)信息AR。
圖2示出了根據(jù)本發(fā)明的第二形式的實(shí)施例的系統(tǒng)1的圖。系統(tǒng)1被實(shí)施為用于向第一用戶(hù)U1輸出與醫(yī)療裝置2、IT、MD和/或患者13的醫(yī)學(xué)檢查有關(guān)的增強(qiáng)現(xiàn)實(shí)信息AR,并且具有第一獲取模塊R1-M、創(chuàng)建模塊GA-M和第一輸出模塊D1-M。系統(tǒng)1特別地被實(shí)施為用于執(zhí)行根據(jù)本發(fā)明的第一形式的實(shí)施例的方法。特別地,圖像信息的檢測(cè)R1可以通過(guò)第一獲取模塊R1-M來(lái)執(zhí)行,增強(qiáng)現(xiàn)實(shí)信息AR的創(chuàng)建GA通過(guò)創(chuàng)建模塊GA-M來(lái)執(zhí)行,并且增強(qiáng)現(xiàn)實(shí)信息AR的輸出D1通過(guò)第一輸出模塊D1-M來(lái)執(zhí)行。
圖3示出了根據(jù)本發(fā)明的第三形式的實(shí)施例的系統(tǒng)1。系統(tǒng)1具有第一增強(qiáng)現(xiàn)實(shí)裝置H1。第一增強(qiáng)現(xiàn)實(shí)裝置H1被實(shí)施為數(shù)據(jù)眼鏡。第一增強(qiáng)現(xiàn)實(shí)裝置H1具有第一照相機(jī)單元C1、第一眼睛跟蹤單元E1、第一觀(guān)察裝置V1和第一控制單元N1。第一控制單元N1是第一計(jì)算機(jī),特別是第一數(shù)字計(jì)算機(jī),并且被實(shí)施為用于控制第一增強(qiáng)現(xiàn)實(shí)裝置H1。第一控制單元N1具有第一獲取模塊R1-M、創(chuàng)建模塊GA-M和第一輸出模塊D1-M。第一控制單元N1具有第一存儲(chǔ)單元M1和處理器系統(tǒng)。第一存儲(chǔ)單元M1被實(shí)施為用于加載計(jì)算機(jī)程序,其中,當(dāng)在第一控制單元N1上執(zhí)行計(jì)算機(jī)程序時(shí),利用該計(jì)算機(jī)程序執(zhí)行本發(fā)明的方法的步驟。第一獲取模塊R1-M、創(chuàng)建模塊GA-M和第一輸出模塊D1-M各自以第一控制單元N1的處理器系統(tǒng)上的軟件的形式實(shí)現(xiàn)??梢酝ㄟ^(guò)第一照相機(jī)單元C1記錄圖像信息和/或深度信息??梢酝ㄟ^(guò)從第一照相機(jī)單元C1到第一獲取模塊R1-M的數(shù)據(jù)傳輸來(lái)獲取圖像信息和/或深度信息。第一觀(guān)察裝置V1可以訪(fǎng)問(wèn)第一輸出模塊D1-M的存儲(chǔ)區(qū)域,其中,可以通過(guò)從第一輸出模塊D1-M到第一觀(guān)察裝置V1的數(shù)據(jù)傳輸來(lái)輸出增強(qiáng)現(xiàn)實(shí)信息。第一眼睛跟蹤單元E1被實(shí)施為用于獲取第一用戶(hù)U1的眼睛跟蹤。這尤其能夠相對(duì)于圖數(shù)據(jù)集確定第一用戶(hù)U1的視野的位置和/或方位。以這種方式,可以基于相對(duì)于圖數(shù)據(jù)集的位置和/或方位為真實(shí)對(duì)象(例如患者13)和/或虛擬對(duì)象(例如結(jié)構(gòu)標(biāo)記MI)確定相對(duì)于第一用戶(hù)U1的視野的位置和/或方位。
圖4示出了根據(jù)第四形式的實(shí)施例的用于向第一用戶(hù)U1輸出與醫(yī)療裝置2、IT、MD和/或患者13的醫(yī)學(xué)檢查有關(guān)的增強(qiáng)現(xiàn)實(shí)信息AR的方法的流程圖。在步驟D2中,輸出增強(qiáng)現(xiàn)實(shí)信息AR,使得能夠在第二用戶(hù)U2的視野中感知增強(qiáng)現(xiàn)實(shí)信息AR。在步驟R2中,獲取第二用戶(hù)U2的輸入。在這種情況下,基于第二用戶(hù)U2的輸入創(chuàng)建增強(qiáng)現(xiàn)實(shí)信息AR。
圖5示出了根據(jù)本發(fā)明的第五形式的實(shí)施例的系統(tǒng)1的圖。系統(tǒng)1具有第一獲取模塊R1-M、創(chuàng)建模塊GA-M、第一輸出模塊D1-M、第二輸出模塊D2-M和第二獲取模塊R2-M。系統(tǒng)1特別地被實(shí)施為用于執(zhí)行根據(jù)本發(fā)明的第四形式的實(shí)施例的方法。特別地,可以通過(guò)第二輸出模塊D2-M執(zhí)行增強(qiáng)現(xiàn)實(shí)信息AR的輸出D2,并且通過(guò)第二獲取模塊R2-M執(zhí)行第二用戶(hù)U2的輸入的獲取R2。
圖6示出了根據(jù)本發(fā)明的第六形式的實(shí)施例的系統(tǒng)1。系統(tǒng)1具有醫(yī)學(xué)成像裝置2,醫(yī)學(xué)成像裝置2具有由隧道形開(kāi)口形成的獲取區(qū)域4。在不限制總體發(fā)明思想的情況下,通過(guò)示例的方式示出了用于醫(yī)學(xué)成像裝置2的計(jì)算機(jī)斷層掃描裝置1。
醫(yī)學(xué)成像裝置2具有機(jī)架20、獲取區(qū)域4、患者支撐裝置10、原始圖像數(shù)據(jù)獲取裝置26、28以及控制裝置30。機(jī)架20具有固定的承載框架21和旋轉(zhuǎn)體24。旋轉(zhuǎn)體24被支撐為允許經(jīng)由旋轉(zhuǎn)支撐裝置圍繞旋轉(zhuǎn)軸線(xiàn)旋轉(zhuǎn)。獲取區(qū)域4由機(jī)架20中的隧道形開(kāi)口形成。待成像的對(duì)象(特別是患者13)的區(qū)域能夠布置在獲取區(qū)域4中?;颊咧窝b置10具有用于支撐患者13的支撐臺(tái)11,其中,轉(zhuǎn)移板12相對(duì)于支撐臺(tái)11在支撐臺(tái)11上可移動(dòng)地布置,使得轉(zhuǎn)移板12能夠在轉(zhuǎn)移板12的縱向方向上被引入到獲取區(qū)域4中。
原始圖像數(shù)據(jù)獲取裝置26、28是具有輻射源26(例如,X射線(xiàn)源)和檢測(cè)器28(例如,X射線(xiàn)檢測(cè)器)的投影數(shù)據(jù)獲取裝置26、28。輻射源26布置在旋轉(zhuǎn)體24上并且被實(shí)施為用于發(fā)射具有X射線(xiàn)量子27的輻射,例如X射線(xiàn)輻射。檢測(cè)器28布置在旋轉(zhuǎn)體24上并且被實(shí)施為用于X射線(xiàn)量子27的檢測(cè)。X射線(xiàn)量子27可以從輻射源26到達(dá)要被成像的患者13的區(qū)域,并且在與要被成像的區(qū)域相互作用之后可以撞擊檢測(cè)器28。以這種方式,可以獲取要成像的區(qū)域的投影數(shù)據(jù)。由投影數(shù)據(jù)獲取裝置26、28獲取的投影數(shù)據(jù)被傳輸?shù)娇刂蒲b置30??刂蒲b置30被實(shí)施為用于控制醫(yī)學(xué)成像裝置2??刂蒲b置30具有圖像重建裝置34。醫(yī)學(xué)成像數(shù)據(jù)集可以是基于投影數(shù)據(jù)的圖像重建裝置34的重建手段。醫(yī)學(xué)成像裝置2被實(shí)施為用于提供涉及患者13的結(jié)構(gòu)SP的醫(yī)學(xué)成像數(shù)據(jù)集。
醫(yī)學(xué)成像裝置2被實(shí)施為用于提供坐標(biāo)信息。醫(yī)學(xué)成像裝置具有可移動(dòng)部件12??刂蒲b置30被實(shí)施為用于輸出與可移動(dòng)部件12的運(yùn)動(dòng)有關(guān)的控制命令。在不限制總體發(fā)明思想的情況下,示出了用于可移動(dòng)部件12的轉(zhuǎn)移板12。支撐臺(tái)11具有驅(qū)動(dòng)單元即電機(jī),電機(jī)被實(shí)施為用于驅(qū)動(dòng)轉(zhuǎn)移板12的運(yùn)動(dòng)。驅(qū)動(dòng)單元被實(shí)施為接收控制命令和/或基于控制命令驅(qū)動(dòng)轉(zhuǎn)移板12的運(yùn)動(dòng)??刂蒲b置30具有坐標(biāo)信息提供單元50、建立單元51和運(yùn)動(dòng)參數(shù)獲取單元52。坐標(biāo)信息提供單元50被實(shí)施為用于提供坐標(biāo)信息。運(yùn)動(dòng)參數(shù)獲取單元52被實(shí)施為用于獲取與可移動(dòng)部件12的運(yùn)動(dòng)有關(guān)的運(yùn)動(dòng)參數(shù)。建立單元51被實(shí)施為基于控制命令和/或基于運(yùn)動(dòng)參數(shù)建立坐標(biāo)信息。
醫(yī)學(xué)成像裝置2具有輸入裝置38和輸出裝置39。輸入裝置38被實(shí)施為輸入控制信息,例如圖像重建參數(shù)和/或檢查參數(shù)。輸出裝置39用于輸出控制信息和/或圖像。
系統(tǒng)1具有具有第一控制單元N1的第一增強(qiáng)現(xiàn)實(shí)裝置H1和具有第二控制單元的第二增強(qiáng)現(xiàn)實(shí)裝置H2。第二增強(qiáng)現(xiàn)實(shí)裝置H2被實(shí)施為數(shù)據(jù)眼鏡。第二增強(qiáng)現(xiàn)實(shí)裝置H2的結(jié)構(gòu)和功能基本上對(duì)應(yīng)于第一增強(qiáng)現(xiàn)實(shí)裝置的結(jié)構(gòu)和功能。代替第一增強(qiáng)現(xiàn)實(shí)裝置H1的第一獲取模塊R1-M,第二增強(qiáng)現(xiàn)實(shí)裝置H2具有第二獲取模塊R2-M。第二控制單元具有第二輸出模塊D2-M、第二照相機(jī)單元、第二存儲(chǔ)單元和第二觀(guān)察裝置V2以代替第一增強(qiáng)現(xiàn)實(shí)裝置H1的相應(yīng)部件。本發(fā)明的第六形式的實(shí)施例提供的創(chuàng)建模塊GA-M具有第一創(chuàng)建子模塊和第二創(chuàng)建子模塊,提供的第一控制單元N1具有第一創(chuàng)建子模塊并且提供的第二控制單元具有第二創(chuàng)建子模塊。第一控制單元N1、第二控制單元和控制裝置30通過(guò)數(shù)據(jù)傳輸裝置彼此連接,特別是無(wú)線(xiàn)地彼此連接。特別地,能夠通過(guò)數(shù)據(jù)傳輸裝置在第一控制單元N1的模塊、第二控制單元的模塊和控制裝置30之間實(shí)現(xiàn)數(shù)據(jù)傳輸。通過(guò)第一增強(qiáng)現(xiàn)實(shí)裝置H1和/或通過(guò)第二增強(qiáng)現(xiàn)實(shí)裝置H2對(duì)醫(yī)學(xué)成像裝置2的控制因此可選地能夠被實(shí)現(xiàn)。特別地,涉及可移動(dòng)部件12的運(yùn)動(dòng)的控制命令可以通過(guò)第一增強(qiáng)現(xiàn)實(shí)裝置H1和/或通過(guò)第二增強(qiáng)現(xiàn)實(shí)裝置H2被輸出。特別地,第一增強(qiáng)現(xiàn)實(shí)裝置H1和/或第二增強(qiáng)現(xiàn)實(shí)裝置H2可以具有建立單元51??蛇x地,控制裝置30可以形成創(chuàng)建模塊GA-M的第三創(chuàng)建子模塊。
第一增強(qiáng)現(xiàn)實(shí)裝置H1由第一用戶(hù)U1佩戴。第二增強(qiáng)現(xiàn)實(shí)裝置H2由第二用戶(hù)U2佩戴??蛇x地,第三增強(qiáng)現(xiàn)實(shí)裝置H3由患者13佩戴。利用第三增強(qiáng)現(xiàn)實(shí)裝置H3,計(jì)劃的分步驟和預(yù)期的結(jié)果可以通過(guò)將它們顯示給患者13來(lái)解釋?zhuān)鐬榱私槿胱龊脺?zhǔn)備,和/或在為了介入做準(zhǔn)備的成像期間,能夠輸出呼吸指令和鎮(zhèn)定圖像序列(calming sequence of images)。
通過(guò)第一獲取模塊R1-M可以獲取第一信息,第一信息從由圖像信息、深度信息、坐標(biāo)信息及其組合構(gòu)成的組中選擇,其中第一信息涉及醫(yī)療裝置2、IT、MD和/或患者13的醫(yī)學(xué)檢查。第一信息涉及第一用戶(hù)U1的視野中的空間區(qū)域??臻g區(qū)域特別地包括介入?yún)^(qū)域IA。在不限制本發(fā)明的總體思想的情況下,醫(yī)療成像裝置2、檢查裝置MD和介入工具IT在每種情況下作為用于醫(yī)療裝置的示例示出。在不限制本發(fā)明的總體思想的情況下,通過(guò)用于醫(yī)學(xué)檢查的示例的方式示出了介入。使用介入工具IT、例如手術(shù)刀用于介入。在這種情況下,是介入工具IT相對(duì)于患者13的結(jié)構(gòu)SP的正確位置的問(wèn)題。介入由第一用戶(hù)U1執(zhí)行。第二用戶(hù)U2位于檢查室外,醫(yī)學(xué)成像裝置2布置在檢查室中并且檢查室中正在進(jìn)行介入。系統(tǒng)1特別地使得第二用戶(hù)U2對(duì)第一用戶(hù)U1在介入工具IT相對(duì)于患者13的結(jié)構(gòu)SP的正確位置方面的引導(dǎo)成為可能。
圖7示出了來(lái)自第二用戶(hù)U2的視野的截面圖,其中第二用戶(hù)U2的視野用增強(qiáng)現(xiàn)實(shí)信息AR強(qiáng)化。第一用戶(hù)U1的視野的部分被示出在第二用戶(hù)U2的視野中,使得第二用戶(hù)U2從第一用戶(hù)U1的視角看到患者13、介入工具IT和轉(zhuǎn)移板12。增強(qiáng)現(xiàn)實(shí)信息AR被示出在第二用戶(hù)U2的視野中,使得第二用戶(hù)U2從第一用戶(hù)U1的視角看到增強(qiáng)現(xiàn)實(shí)信息AR。
來(lái)自圖7所示的第二用戶(hù)U2的視野的截面圖因此與來(lái)自第一用戶(hù)U1的視野的相應(yīng)截面圖的不同在于患者13、患者支撐裝置10、介入工具IT作為圖像和/或作為模型對(duì)第二用戶(hù)U2可見(jiàn),并且在于第二用戶(hù)U2的手臂作為圖像和/或模型對(duì)第一用戶(hù)U1可見(jiàn)。
基于第一信息,建立與介入工具IT相對(duì)于患者13的結(jié)構(gòu)SP的位置相關(guān)的檢查信息?;跈z查信息創(chuàng)建增強(qiáng)現(xiàn)實(shí)信息AR,使得增強(qiáng)現(xiàn)實(shí)信息AR具有標(biāo)記EI,標(biāo)記EI表示介入工具IT的作為下一個(gè)運(yùn)動(dòng)執(zhí)行的運(yùn)動(dòng),例如形式為介入工具IT的移動(dòng)立體表示和/或全息類(lèi)型的表示的運(yùn)動(dòng)。
根據(jù)本發(fā)明的第六形式的實(shí)施例,系統(tǒng)1具有檢查裝置MD。增強(qiáng)現(xiàn)實(shí)信息AR基于醫(yī)學(xué)信號(hào)(例如由檢查裝置MD提供的EKG信號(hào))創(chuàng)建,使得增強(qiáng)現(xiàn)實(shí)信息AR具有信號(hào)輸出域DF,其中醫(yī)學(xué)信號(hào)在信號(hào)輸出域DF中顯示為定時(shí)特性。
在為介入做準(zhǔn)備時(shí),通過(guò)第一增強(qiáng)現(xiàn)實(shí)裝置H1自動(dòng)識(shí)別患者13,在于基于患者13的圖像,例如借助于生物特征建立患者識(shí)別信息。基于患者識(shí)別信息,創(chuàng)建增強(qiáng)現(xiàn)實(shí)信息AR,使得個(gè)人患者數(shù)據(jù)和與患者13的患病史相關(guān)的數(shù)據(jù)將被顯示在患者數(shù)據(jù)輸出域PI中。
將基于第一信息建立患者位置信息?;诨颊呶恢眯畔?chuàng)建增強(qiáng)現(xiàn)實(shí)信息AR,使得基于患者13的位置確定增強(qiáng)現(xiàn)實(shí)信息AR的相對(duì)于第一用戶(hù)U1的視野的位置。特別地,增強(qiáng)現(xiàn)實(shí)信息AR被示出在解剖學(xué)上正確地覆蓋在患者13上。
創(chuàng)建模塊GA-M被實(shí)施為基于醫(yī)學(xué)成像數(shù)據(jù)集來(lái)創(chuàng)建增強(qiáng)現(xiàn)實(shí)信息AR。醫(yī)學(xué)成像數(shù)據(jù)集涉及患者13的結(jié)構(gòu)SP。結(jié)構(gòu)SP例如可以是患者13的器官。增強(qiáng)現(xiàn)實(shí)信息AR具有結(jié)構(gòu)標(biāo)記MI,結(jié)構(gòu)標(biāo)記MI標(biāo)記患者13的結(jié)構(gòu)SP。結(jié)構(gòu)標(biāo)記MI被示出為在解剖學(xué)上正確地覆蓋在結(jié)構(gòu)SP上。結(jié)構(gòu)標(biāo)記MI被設(shè)計(jì)為使得結(jié)構(gòu)SP的第一部分區(qū)域能夠通過(guò)結(jié)構(gòu)標(biāo)記MI與結(jié)構(gòu)SP的第二部分區(qū)域區(qū)分開(kāi)。在圖7中,結(jié)構(gòu)SP的第一部分區(qū)域被示出為交叉陰影表面,并且結(jié)構(gòu)SP的第二部分區(qū)域被示出為白色表面。例如,第一部分區(qū)域可以涉及器官的待移除的一部分和/或第二部分區(qū)域涉及器官的剩余部分。以這種方式,第一用戶(hù)U1和第二用戶(hù)U2可以快速且精確地識(shí)別結(jié)構(gòu)SP的第一部分區(qū)域和/或結(jié)構(gòu)SP的第二部分區(qū)域。
增強(qiáng)現(xiàn)實(shí)信息AR具有標(biāo)稱(chēng)的位置標(biāo)記TP,標(biāo)稱(chēng)的位置標(biāo)記TP與患者13在轉(zhuǎn)移板12上的標(biāo)稱(chēng)位置有關(guān)。在介入的不同分步驟之后記錄的多個(gè)醫(yī)學(xué)成像數(shù)據(jù)集之間的可再現(xiàn)性得到了提高。
增強(qiáng)現(xiàn)實(shí)信息AR具有標(biāo)定的位置標(biāo)記TT,標(biāo)定的位置標(biāo)記TT與介入工具IT的標(biāo)定位置有關(guān)。提供標(biāo)定位置標(biāo)記TT在于第二用戶(hù)U2通過(guò)第二增強(qiáng)現(xiàn)實(shí)裝置H2創(chuàng)建介入工具IT的模型,并將介入工具IT的模型定位在介入工具IT的標(biāo)定位置。第二增強(qiáng)現(xiàn)實(shí)裝置H2被實(shí)施為識(shí)別第二用戶(hù)U2的手勢(shì)并且基于手勢(shì)創(chuàng)建增強(qiáng)現(xiàn)實(shí)信息AR。
增強(qiáng)現(xiàn)實(shí)信息AR具有區(qū)域標(biāo)記SR,該區(qū)域標(biāo)記SR標(biāo)記根據(jù)用于通過(guò)醫(yī)學(xué)成像裝置2成像的所選擇方案選擇的轉(zhuǎn)移板12的區(qū)域。因此,針對(duì)通過(guò)醫(yī)學(xué)成像裝置2的成像,區(qū)域標(biāo)記SR還標(biāo)記對(duì)于患者13相對(duì)于轉(zhuǎn)移板12的不變位置所選擇的患者13的區(qū)域。結(jié)構(gòu)標(biāo)記SP、標(biāo)定位置標(biāo)記TP、標(biāo)定位置標(biāo)記TT和區(qū)域標(biāo)記SR各自具有立體表示和/或全息類(lèi)型表示。
參考文獻(xiàn):
[CR06]《Journal of Display Technology》,2006年9月第3期第2卷,Ozan Cakmakci和Jannick Rolland的“Head-Worn Displays:A Review”。