本發(fā)明涉及一種用于在醫(yī)院或初級(jí)護(hù)理設(shè)施中并且特別是在重癥監(jiān)護(hù)室和急診室或手術(shù)室中使用的通信系統(tǒng)。本發(fā)明還涉及通信的方法和用于將這樣的方法付諸實(shí)踐的計(jì)算機(jī)程序產(chǎn)品。
背景技術(shù):
在急診室或手術(shù)室環(huán)境中,手術(shù)團(tuán)隊(duì)的通信技巧和團(tuán)隊(duì)行動(dòng)是最重要的。例如,手術(shù)醫(yī)師可以基于他的認(rèn)知、經(jīng)驗(yàn)和與醫(yī)務(wù)人員的交互而行動(dòng),但是例如仍然不能配準(zhǔn)可能對(duì)于團(tuán)員的其他成員(諸如醫(yī)務(wù)輔助人員或共同工作的醫(yī)師)以其他方式已知的生理信號(hào)。已知的是,即使在這樣的情況下,團(tuán)隊(duì)成員有時(shí)由于各種原因而不能向手術(shù)醫(yī)師傳達(dá)其觀察。
而且,參與成員可以在最佳或較不最佳的情況下行動(dòng)并對(duì)來(lái)自團(tuán)隊(duì)的要求作出響應(yīng),這有時(shí)會(huì)不被注意并且引起有危險(xiǎn)的延遲。所有這些都對(duì)需要在沒(méi)有最佳信息的情況下在滿壓力下采取的即時(shí)決策的手術(shù)情況下時(shí)行充分響應(yīng)施加了相當(dāng)大的挑戰(zhàn)。
在繁忙緊急的情況下,這可以導(dǎo)致缺少概覽和/或缺少手術(shù)室中的團(tuán)隊(duì)成員之間的通信。
在其他現(xiàn)有技術(shù)系統(tǒng)中,例如wo2013173793描述了計(jì)算機(jī)輔助角色扮演,其中計(jì)算機(jī)可以與攝像機(jī)配準(zhǔn)一起輻助醫(yī)學(xué)團(tuán)隊(duì)的交互和評(píng)估,以便在執(zhí)行和查看心肺復(fù)蘇(cpr)時(shí)幫助施救者。通過(guò)組合圖像,場(chǎng)景能夠以3d的方式被重建。然而,該系統(tǒng)不能以結(jié)構(gòu)化方式組織團(tuán)隊(duì)成員的通信,所述結(jié)構(gòu)化方式將會(huì)提高團(tuán)隊(duì)交互并且及時(shí)識(shí)別重要信息以便對(duì)緊急情況成功作出響應(yīng)。
技術(shù)實(shí)現(xiàn)要素:
在一個(gè)方面,旨在提供一種用于急診室或手術(shù)室環(huán)境中的多個(gè)用戶(具體地用于在醫(yī)院中使用)的通信系統(tǒng),以便有效地幫助復(fù)雜環(huán)境中的通信。
用于可穿戴捕獲設(shè)備的多個(gè)用戶的通信系統(tǒng)包括,包括被布置為由第二可穿戴設(shè)備識(shí)別所述第一可穿戴設(shè)備的視點(diǎn)的程序邏輯的電路(識(shí)別電路);包括被配置為使所述第一可穿戴設(shè)備與所述第二可穿戴設(shè)備交換所捕獲的視點(diǎn)的程序邏輯的電路(交換電路);以及包括被配置為向所述第二可穿戴設(shè)備的用戶提供所交換的視點(diǎn)的程序邏輯的電路(投影電路)。
在另一方面,旨在提供用于急診室或手術(shù)室環(huán)境中的多個(gè)用戶(具體地用于在醫(yī)院中使用)的通信方法,以便有效地幫助復(fù)雜環(huán)境中的通信。
為此目的,提供了一種通信方法,包括:由第一可穿戴設(shè)備捕獲所述第一可穿戴設(shè)備的用戶的視點(diǎn);由第二可穿戴設(shè)備識(shí)別所述第一可穿戴設(shè)備的所述視點(diǎn);使所述第一可穿戴設(shè)備與所述第二可穿戴設(shè)備交換所捕獲的視點(diǎn);以及向所述第二可穿戴設(shè)備的用戶提供所交換的視點(diǎn)。
例如,手術(shù)醫(yī)師可以基于由成員中的任一個(gè)確認(rèn)的確認(rèn)來(lái)拉取團(tuán)隊(duì)成員的視域。例如,由成員中的任一個(gè)確認(rèn)的交換視域可以被推送給手術(shù)醫(yī)師。
附圖說(shuō)明
本發(fā)明將會(huì)在附圖中得到進(jìn)一步闡明:
圖1示出了用于穿戴頭部安裝捕獲設(shè)備的多個(gè)用戶的通信系統(tǒng);
圖2示出了包括被布置為配準(zhǔn)預(yù)定義的用戶姿態(tài)的程序邏輯的配準(zhǔn)電路;
圖3示出了注視檢測(cè)設(shè)備;
圖4a示出了手術(shù)室中的通信系統(tǒng)的現(xiàn)實(shí)實(shí)施例;并且
圖4b形成接收捕獲信息的通信系統(tǒng)的另一范例。
具體實(shí)施方式
除非另有定義,當(dāng)在說(shuō)明和附圖的背景下閱讀時(shí),本文中使用的所有術(shù)語(yǔ)(包括技術(shù)和科學(xué)術(shù)語(yǔ))都具有與如本公開(kāi)所屬領(lǐng)域的技術(shù)人員通常理解的相同的意義。應(yīng)進(jìn)一步理解,諸如通常使用的詞典中定義的那些的術(shù)語(yǔ)應(yīng)當(dāng)被解讀為具有與其在相關(guān)領(lǐng)域的背景下的意義一致的意義,并且不會(huì)在理想化或過(guò)于正式意義上進(jìn)行解讀,除非本文中明確這樣定義。在一些實(shí)例中,眾所周知的設(shè)備和方法的詳細(xì)描述可以被省略,以便不模糊本系統(tǒng)和方法的描述。用于描述具體實(shí)施例的術(shù)語(yǔ)不旨在限制本發(fā)明。如本文中使用的,單數(shù)形式的“一”、“一個(gè)”和“所述”旨在也包括復(fù)數(shù)形式,除非上下文另外清楚指出。術(shù)語(yǔ)“和/或”包括相關(guān)聯(lián)的列出的項(xiàng)中的任一項(xiàng)以及它們中的一個(gè)或多個(gè)的所有組合。應(yīng)進(jìn)一步理解,術(shù)語(yǔ)“包括”和/或“包含”指定存在陳述的特征,但不排除存在或添加一個(gè)或多個(gè)其他特征。本文中提到的所有公布、專利申請(qǐng)、專利和其他參考以引用方式被完全并入。在沖突的情況下,本說(shuō)明書(shū)(包括定義)將會(huì)進(jìn)行對(duì)照。
術(shù)語(yǔ)“電路”以常規(guī)方式用來(lái)表明具有執(zhí)行程序邏輯以便提供某一基本功能的能力的任何結(jié)構(gòu)硬件或軟件布置。本領(lǐng)域技術(shù)人員通常知道如何在本說(shuō)明的背景下操作或?qū)嵤╇娐罚渲刑幚砥髟谙挛闹械玫疥U明。例如,‘識(shí)別電路’包括如在下文中進(jìn)一步說(shuō)明的專用于識(shí)別另一人的可穿戴設(shè)備的視點(diǎn)的目的的硬件和/或軟件元件。例如,‘交換電路’包括被布置為引起可穿戴設(shè)備交換所述可穿戴設(shè)備的捕獲的視點(diǎn)的程序邏輯。為此目的,交換電路具有與其他可穿戴設(shè)備的對(duì)應(yīng)設(shè)備連接的連接性設(shè)備,以便當(dāng)這樣做時(shí)建立視點(diǎn)的交換。例如,‘投影電路’具有被布置為將交換的視點(diǎn)投影為除人的接收的視點(diǎn)(更具體地,他自己的視點(diǎn))之外的‘交換的視點(diǎn)’的程序邏輯。這可以通過(guò)單獨(dú)投影或通過(guò)與虛擬現(xiàn)實(shí)或增強(qiáng)現(xiàn)實(shí)技術(shù)集成在一起來(lái)提供,如在下文中例示的。
術(shù)語(yǔ)“程序邏輯”以常規(guī)方式用來(lái)表明可以體現(xiàn)在控制電路為設(shè)計(jì)的功能行為的硬件和/或軟件結(jié)構(gòu)的操作指令。
如在“增強(qiáng)現(xiàn)實(shí)模塊”或“攝像機(jī)模塊”中的術(shù)語(yǔ)“模塊”用來(lái)強(qiáng)調(diào)這些單元的模塊化特點(diǎn),即系統(tǒng)的功能被分成獨(dú)立的可互換單元?!巴ㄐ拍K”可以由能夠與增強(qiáng)現(xiàn)實(shí)模塊通信的單元形成。
術(shù)語(yǔ)“用戶接口”可以包括被配置為執(zhí)行根據(jù)本系統(tǒng)和方法的操作動(dòng)作(諸如為各種其他模塊部件提供控制信號(hào))的一個(gè)或多個(gè)元件硬件元件。處理器可以是用于根據(jù)本系統(tǒng)執(zhí)行的專用處理器,或可以是通用處理器,其中許多功能中只有一個(gè)操作用于根據(jù)本系統(tǒng)執(zhí)行。處理器可以利用程序部分、多個(gè)程序段來(lái)操作,或者可以是利用專用或多目的集成電路的硬件設(shè)備。任何類型的處理器都可以被使用,諸如專用或共用處理器。處理器可以包括微控制器、中央處理單元(cpu)、數(shù)字信號(hào)處理器(dsp)、asic、或任何其他的(一個(gè)或多個(gè))處理器或(一個(gè)或多個(gè))控制器,諸如執(zhí)行相同功能并采用電子技術(shù)和架構(gòu)的數(shù)字光學(xué)設(shè)備、或模擬電子電路??刂破骰蛱幚砥骺梢赃€包括可以是控制器的一部分或被可操作地耦合到控制器的存儲(chǔ)器。存儲(chǔ)器可以是數(shù)據(jù)被存儲(chǔ)在其處的任何合適類型的存儲(chǔ)器。能夠存儲(chǔ)和/或傳輸適合于與本系統(tǒng)和方法一起使用的信息的已知或發(fā)展出的任何介質(zhì)都可以用作存儲(chǔ)器。存儲(chǔ)器也可以存儲(chǔ)可由控制器訪問(wèn)的用戶偏好和/或應(yīng)用數(shù)據(jù),以便將其配置為根據(jù)本系統(tǒng)和方法執(zhí)行操作動(dòng)作。
雖然示出了針對(duì)系統(tǒng)和方法的范例實(shí)施例,但是本領(lǐng)域技術(shù)人員也可以設(shè)想到具有本公開(kāi)的益處的替代性方式以實(shí)現(xiàn)類似功能和結(jié)果。例如一些部件可以被組合或被分成一個(gè)或多個(gè)替代性部件。最后,這些實(shí)施例旨在僅僅圖示本系統(tǒng),而不應(yīng)當(dāng)理解為將所附的權(quán)利要求限制于任何具體實(shí)施例或一組實(shí)施例。因此,雖然已經(jīng)參照其特定示例性實(shí)施例描述了本系統(tǒng),但是也應(yīng)當(dāng)認(rèn)識(shí)到,本領(lǐng)域技術(shù)人員可以設(shè)想到許多更改和替代性實(shí)施例而不脫離如在隨后的權(quán)利要求中闡述的本系統(tǒng)和方法的范圍。說(shuō)明書(shū)和附圖因此應(yīng)被示為是說(shuō)明性方式,而不旨在限制所附的權(quán)利要求的范圍。
在解讀所附的權(quán)利要求時(shí),應(yīng)當(dāng)理解,詞語(yǔ)“包括”不排除存在除了給定權(quán)利要求中列出的那些之外的其他元件或動(dòng)作;在元件前的詞語(yǔ)“一”或“一個(gè)”不排除存在多個(gè)這樣的元件;權(quán)利要求中的任何附圖標(biāo)記都不限制其范圍;若干“單元”可以由(一個(gè)或多個(gè))相同或不同的項(xiàng)或?qū)嵤┑慕Y(jié)構(gòu)或功能來(lái)表示;公開(kāi)的設(shè)備中的任一個(gè)或其多個(gè)部分可以被組合在一起或被分成進(jìn)一步的多個(gè)部分,除非另外具體陳述。盡管在相互不同的權(quán)利要求中記載了特定措施,但是這不指示不能使用這些措施的組合以獲利。
目前公開(kāi)的通信系統(tǒng)包括被布置為在多視域背景下記錄多個(gè)視域的增強(qiáng)現(xiàn)實(shí)模塊,其中多個(gè)觀察者具有由相應(yīng)觀察設(shè)備記錄的不同視點(diǎn),其通過(guò)以下步驟來(lái)形成:識(shí)別選定觀察者的視點(diǎn),使選定的觀察者交換其視點(diǎn),并且為觀察者提供選定視點(diǎn)作為交換的視點(diǎn)。所述觀察設(shè)備也能夠被稱為可穿戴設(shè)備、可穿戴捕獲設(shè)備、頭部安裝捕獲設(shè)備或頭部安裝設(shè)備。在一些實(shí)例中,視域可以由可穿戴設(shè)備(例如增強(qiáng)現(xiàn)實(shí)眼鏡)記錄。在一些實(shí)例中,可以引起視域由通過(guò)可穿戴設(shè)備的注視檢測(cè)來(lái)進(jìn)行交換。
注視檢測(cè)可以通過(guò)提供有能夠指向并沖擊另一可穿戴設(shè)備的窄的編碼射束的頭部安裝設(shè)備來(lái)提供。例如,具有在1-5度的范圍內(nèi)的角度的有角度射束可以能夠提供能夠容易靶向并識(shí)別共同工作者以交換視域的方向性。
替代地,注視檢測(cè)能夠通過(guò)光學(xué)跟蹤方法來(lái)提供,其中,例如紅外光從可穿戴設(shè)備的穿戴者的眼角膜和瞳孔反射并由攝像機(jī)或光學(xué)傳感器感測(cè)。注視檢測(cè)也能夠通過(guò)從能夠用來(lái)估計(jì)注視方向的攝像機(jī)圖像提取相關(guān)面部特征(例如頭部姿態(tài)和鼻子的方向)的計(jì)算機(jī)視覺(jué)技術(shù)來(lái)提供。替代地,可以使視域通過(guò)語(yǔ)言處理來(lái)進(jìn)行交換。例如,視域可以通過(guò)語(yǔ)音命令來(lái)進(jìn)行交換,諸如:“給我史密斯醫(yī)師的視域”。在其他實(shí)例中,可以通過(guò)生理信號(hào)配準(zhǔn)來(lái)使視域進(jìn)行交換。例如,生理信號(hào)配準(zhǔn)可以由團(tuán)隊(duì)成員中的一個(gè)來(lái)監(jiān)測(cè),并且當(dāng)生理信號(hào)超過(guò)某一水平時(shí),可以使他/她的相關(guān)聯(lián)的視域被交換。例如,生理信號(hào)配準(zhǔn)也可以與團(tuán)隊(duì)成員相關(guān)聯(lián)。例如,如果團(tuán)隊(duì)成員經(jīng)歷預(yù)定的反應(yīng)(諸如心率增加或瞳孔增加),這可以引起交換該人的視域。在許多實(shí)例中,交換的引起可以伴隨有確認(rèn)協(xié)議,其可以被推送或拉取。
現(xiàn)在轉(zhuǎn)向圖1,圖示了針對(duì)多個(gè)用戶的穿戴頭部安裝捕獲設(shè)備200的通信系統(tǒng)100。例如,可穿戴設(shè)備可以是如所描繪眼鏡或其他合適的穿戴裝備(箍帶)的形式,所述可穿戴設(shè)備能夠用于捕獲和投影可用于穿戴該設(shè)備的人的視域。捕獲設(shè)備被布置為捕獲相應(yīng)頭部安裝設(shè)備穿戴者(未示出)的視點(diǎn)。在圖中,示意地示出了信號(hào)線以解釋處理電路(具體地,識(shí)別電路110、交換電路120和投影電路130)之間的一般水平信息處理。
在描繪的范例中,控制器220例如以硬件處理器設(shè)備的形式進(jìn)行布置,所述控制器220可以被部分地或完全地實(shí)施在第二頭部安裝設(shè)備中??刂破骺梢?例如通過(guò)到被布置在另一頭部安裝設(shè)備中的另一控制器220的直接連接)被連接到中央通信服務(wù)器或分配系統(tǒng)100。投影電路利用被合適地集成在眼鏡200中的投影儀230來(lái)操作。
控制器220可以包括稱為識(shí)別電路110的電路,所述識(shí)別電路110包括被布置為通過(guò)第二頭部安裝設(shè)備來(lái)識(shí)別第一頭部安裝設(shè)備的視點(diǎn)的程序邏輯??刂破?20此外可以包括稱為交換電路120的電路,所述交換電路120包括被布置為使所述第一頭部安裝設(shè)備穿戴者與所述第二頭部安裝設(shè)備交換由所述第一頭部安裝設(shè)備捕獲的視點(diǎn)的程序邏輯。所述第一頭部安裝設(shè)備的視點(diǎn)的識(shí)別通過(guò)配準(zhǔn)電路115來(lái)實(shí)現(xiàn),所述配準(zhǔn)電路115可以是識(shí)別電路110的一部分或被通信地連接到識(shí)別電路110。配準(zhǔn)電路115可以包括被布置為配準(zhǔn)預(yù)定的用戶姿態(tài)、生理信號(hào)或語(yǔ)言、指令命令、或其他檢測(cè)參數(shù)以引起所述第一頭部安裝設(shè)備與所述第二頭部安裝設(shè)備交換所述第一頭部安裝設(shè)備的視點(diǎn)的程序邏輯。而且,控制器220包括稱為投影電路130的電路,所述投影電路130包括被布置為通過(guò)第二頭部安裝設(shè)備來(lái)對(duì)交換的視點(diǎn)進(jìn)行投影作為到所述第二頭部安裝設(shè)備穿戴者的交換的視點(diǎn)的程序邏輯。
有利地但不一定,投影電路130可以與增強(qiáng)現(xiàn)實(shí)模塊135合適地集成在一起。這樣的模塊的功能在本領(lǐng)域中本身是已知的,并且通常以現(xiàn)實(shí)視覺(jué)利用額外的信息增強(qiáng)的方式將現(xiàn)實(shí)視覺(jué)與增強(qiáng)視覺(jué)組合。例如,看到的物品可以利用在視場(chǎng)的一部分中描繪的額外的相關(guān)信息‘增強(qiáng)’。增強(qiáng)模塊135可以額外地提供有被布置為在增強(qiáng)現(xiàn)實(shí)中拼接交換的視點(diǎn)與第二頭部安裝設(shè)備的視點(diǎn)的程序邏輯。拼接是對(duì)于本領(lǐng)域技術(shù)人員來(lái)說(shuō)本身已知的操作,并且涉及經(jīng)由圖像處理將多個(gè)圖像接合為單個(gè)圖像,其中,所述圖像具有借助于感應(yīng)和外推或借助于中間圖像而被合適地匹配到彼此的過(guò)渡區(qū)域。相應(yīng)地,多個(gè)移動(dòng)攝像機(jī)或頭部安裝設(shè)備200的集合可以具有多個(gè)視域以產(chǎn)生形成環(huán)境的聚合視域的拼接視域或以允許人獲得另一人的視角。而且,使用關(guān)于移動(dòng)攝像機(jī)的圖像的位置和取向的信息能夠從聚合視域的各種視角來(lái)拼接。這具有以下優(yōu)點(diǎn):頭部安裝設(shè)備200的(一個(gè)或多個(gè))穿戴者可以訪問(wèn)拼接視域,由此獲得其他人的視點(diǎn)或多個(gè)人的組合視域,而這些圖像正在被收集并且被集中在單個(gè)聚合視域中(參見(jiàn)圖4a)。
優(yōu)選以拼接形式的這樣的增強(qiáng)視域(其中交換的視點(diǎn)與穿戴者的自己的視點(diǎn)被同時(shí)投影)能夠在像手術(shù)室中的復(fù)雜緊急情況下有用,其中具有多個(gè)視角的許多人判斷某一緊急情況。然而,這也可以可用于來(lái)自多個(gè)移動(dòng)攝像機(jī)的拼接視域提供有意義信息(例如搜救任務(wù)、游戲、安全保障、室外/公共區(qū)域)的其他領(lǐng)域和應(yīng)用中。而且,非實(shí)時(shí)應(yīng)用能夠例如對(duì)訓(xùn)練目的有用。
如在圖1中進(jìn)一步描繪的,有利地但不一定,交換視域可以與生理信號(hào)信息組合。當(dāng)角色特異性視域由執(zhí)行特定任務(wù)的人可用時(shí),這可以是有益的。例如:攝像機(jī)可以基于穿戴攝像機(jī)(例如ir視域)、縮放/切除身體的特定部分的人的角色和特定生理信號(hào)(例如由麻醉醫(yī)師監(jiān)測(cè)的生理信號(hào))來(lái)產(chǎn)生特定視域。通過(guò)采用另一人的角色的視域,困難可以被克服以獲得其他團(tuán)隊(duì)成員的視角從而得到患者上的整體/不同視域。為此目的,生理信號(hào)監(jiān)測(cè)模塊140可以包括生理信號(hào)檢測(cè)器142。檢測(cè)器142裝備有可以形成頭部安裝設(shè)備的一部分或者可以定位于患者上的傳感器240。程序邏輯142被提供以向增強(qiáng)現(xiàn)實(shí)模塊135傳達(dá)所述生理信號(hào)信息。模塊135包括在投影設(shè)備230中以本領(lǐng)域技術(shù)人員已知的方式顯示所傳達(dá)的生理信號(hào)信息的邏輯。例如通信系統(tǒng)100可以提供有如果這些生理信號(hào)中的任一個(gè)將會(huì)超過(guò)特定閾值(例如當(dāng)飽和水平將會(huì)在特定閾值之下時(shí))則向手術(shù)醫(yī)師傳達(dá)麻醉醫(yī)師的生理信號(hào)信息的指令代碼。而且,例如,配準(zhǔn)電路115可以提供有如果工作者將會(huì)經(jīng)歷未預(yù)料到的生理信號(hào)信息的改變(例如瞳孔擴(kuò)張、超出界限的心率或呼吸速率)則傳達(dá)除共同工作者視域之外的共同工作者的生理信號(hào)信息的指令代碼。
因此,另一人的捕獲設(shè)備可以被獲得以分析護(hù)理者的生理測(cè)量(例如壓力)。捕獲設(shè)備可以建議來(lái)自由看見(jiàn)有問(wèn)題或不正常事件引起的嚴(yán)重水平的壓力的護(hù)理者的視域。為了確定這些壓力事件,捕獲設(shè)備可以測(cè)量護(hù)理者的指示壓力水平的增加的一個(gè)或多個(gè)生理特性(例如瞳孔擴(kuò)張、心率變化性)。在這些事件的情況下,代替真實(shí)實(shí)時(shí)視圖,檢測(cè)到壓力水平的時(shí)間附近的快照或圖像的序列。
而且,這可以增強(qiáng)手術(shù)室中的實(shí)時(shí)通信支持。例如,利用對(duì)應(yīng)的頭部安裝設(shè)備的共同工作者可以經(jīng)由姿態(tài)、言語(yǔ)或通過(guò)觸摸頭部安裝設(shè)備指出問(wèn)題以將選項(xiàng)告知房間中的其他人。如果這是安全緊急情況,該第一請(qǐng)求能夠通過(guò)由主觀察者在將信息或考慮傳遞給該情況下的其他人之前進(jìn)行過(guò)濾。以此方式,基于分級(jí)的錯(cuò)誤(其中,醫(yī)師可能不聽(tīng)從護(hù)士)能夠被克服,并且為護(hù)士提供標(biāo)記問(wèn)題而沒(méi)有不必要的干擾的能力。這可以克服手術(shù)室中有許多人的繁忙緊急情況期間的手術(shù)醫(yī)師不能有概覽或經(jīng)歷缺少手術(shù)室中的團(tuán)隊(duì)成員之間的通信的問(wèn)題。
相應(yīng)地,通信系統(tǒng)100可以具有交換電路120,所述交換電路120被布置為當(dāng)傳達(dá)的生理信號(hào)值超過(guò)閾值時(shí)交換第一頭部安裝設(shè)備200的捕獲的視點(diǎn)。生理信號(hào)可以是指示壓力或活力的任何信號(hào),所述信號(hào)可以對(duì)配準(zhǔn)是重要的并且可以影響臨床決定或交換捕獲的視域。交換電路120可以裝備有基于規(guī)則的決策支持系統(tǒng)125,所述決策支持系統(tǒng)125由此可以自動(dòng)觸發(fā)可穿戴設(shè)備產(chǎn)生視域,例如以信號(hào)告知潛在危險(xiǎn)情況(例如spo2水平過(guò)低)。這樣的延伸可以包括與來(lái)自連接的監(jiān)測(cè)設(shè)備(例如心率監(jiān)測(cè)器)的數(shù)據(jù)和電子患者信息記錄相組合來(lái)分析來(lái)自頭部安裝設(shè)備(圖像、音頻)的配準(zhǔn)輸入的臨床分析以在外科手術(shù)程序期間(在頭部安裝設(shè)備上)為醫(yī)師提供相關(guān)信息。如果麥克風(fēng)拾取到醫(yī)師想要給予患者具體藥物但是患者記錄中的信息指示該患者對(duì)這種藥物過(guò)敏,這可以例如是警告消息。
更詳細(xì)地,在圖2中,示出了第二頭部安裝設(shè)備的包括程序邏輯的配準(zhǔn)電路115如何被布置為配準(zhǔn)稱為識(shí)別姿態(tài)的預(yù)定義的用戶姿態(tài)(s100)。因此,識(shí)別可以由對(duì)獲得另一人的視域(即第一頭部安裝設(shè)備的視點(diǎn))感興趣的人通過(guò)姿態(tài)、手指或眼部姿態(tài)來(lái)進(jìn)行(s100),由此識(shí)別應(yīng)該用于交換捕獲的視域的目標(biāo)頭部安裝設(shè)備(即第一頭部安裝設(shè)備)的視點(diǎn)。配準(zhǔn)電路115進(jìn)一步包括被布置為配準(zhǔn)稱為交換姿態(tài)的另一預(yù)定義的用戶姿態(tài)(s200)的程序邏輯117。交換姿態(tài)(s200),其確認(rèn)識(shí)別,然后可以被用于通過(guò)引起第二頭部安裝設(shè)備的交換電路120將確認(rèn)設(shè)備(即第一頭部安裝設(shè)備)的捕獲的視點(diǎn)交換(s300)到第二頭部安裝設(shè)備。確認(rèn)可以通過(guò)合適的交換姿態(tài)(s200)(諸如點(diǎn)頭、眼睛移動(dòng)或其他可識(shí)別姿態(tài)、語(yǔ)音命令、觸摸、按鈕按壓等)來(lái)提供。
穿戴者的注視方向可以通過(guò)如在圖中簡(jiǎn)單例示的已知手段來(lái)提供。例如,投影設(shè)備230可以具有監(jiān)測(cè)人的瞳孔的眼睛檢測(cè)器。相應(yīng)地,注視檢測(cè)設(shè)備116可以包括被布置為執(zhí)行頭部安裝設(shè)備的穿戴者的瞳孔分析s450的程序邏輯。
在圖3中進(jìn)一步例示的實(shí)施例中,注視檢測(cè)設(shè)備116能夠裝備有用于分析s400第二穿戴者的注視方向的稱為分析電路的電路;以及當(dāng)電路檢測(cè)到第二穿戴者的注視方向與第一頭部安裝設(shè)備的位置符合時(shí)識(shí)別s500第一頭部安裝設(shè)備的電路。有利地,包括定向編碼射束發(fā)射器215。窄的編碼射束可以由具有一定展寬(例如在1-5度的范圍內(nèi))的ir激光來(lái)提供。這樣的窄的射束具有足夠的方向性以唯一地識(shí)別感興趣的人的頭部安裝設(shè)備,以便引起該設(shè)備交換其穿戴者的捕獲的視點(diǎn)。編碼能夠表明請(qǐng)求者以及例如請(qǐng)求類型以信號(hào)告知獲得交換信息的權(quán)限水平。
類似地,眼鏡200可以提供有編碼射束檢測(cè)器216以接收定向編碼射束119。以此方式,注視檢測(cè)可以通過(guò)由第一頭部安裝設(shè)備發(fā)射編碼射束119、由識(shí)別的第二頭部安裝設(shè)備的射束檢測(cè)器216檢測(cè)其來(lái)提供。識(shí)別電路進(jìn)一步包括對(duì)編碼射束進(jìn)行解碼以便識(shí)別編碼射束發(fā)射器和其編碼信息的邏輯。
進(jìn)一步的實(shí)施例
圖4a示出了手術(shù)室中的現(xiàn)實(shí)實(shí)施例,其中頭部安裝設(shè)備與對(duì)應(yīng)的設(shè)備和可穿戴攝像機(jī)一起使用。手術(shù)室中的醫(yī)師和護(hù)士可以穿戴這些設(shè)備。該設(shè)備從其視角(也稱為‘視域’)捕獲它們所看見(jiàn)的圖像或視頻流。此外,該設(shè)備捕獲其在手術(shù)室內(nèi)的位置(例如x、y、z坐標(biāo)中的位置p1..5)以及人正在觀察的被描述為從點(diǎn)p開(kāi)始的路徑(例如x、y、z坐標(biāo)中的向量v1..5)的方向。
確定移動(dòng)攝像機(jī)在空間中的位置p能夠利用可用的室內(nèi)定位系統(tǒng)(例如利用無(wú)線電、光學(xué)或聲學(xué)手段(例如編碼光、wi-fi、或技術(shù)的組合))以各種方式來(lái)完成。觀察方向能夠利用可穿戴攝像機(jī)設(shè)備的機(jī)載傳感器(加速度計(jì)、陀螺儀)來(lái)確定。替代地,傳感器被集成在環(huán)境(例如手術(shù)臺(tái))中,其檢測(cè)頭部安裝設(shè)備相對(duì)于環(huán)境中的物體的位置(例如通過(guò)視線)。
視頻處理也可以是一選擇,其中,中央處理器能夠評(píng)估視域的內(nèi)容并將此與其他視域進(jìn)行比較,從而找到相似性和差別。這將會(huì)使得多個(gè)視域能夠基于內(nèi)容而被映射。
視域、位置p和方向v信息被發(fā)射給中央數(shù)據(jù)收集器150,如在圖4b中示出的。該數(shù)據(jù)收集器存儲(chǔ)進(jìn)來(lái)的數(shù)據(jù)。若干部件能夠從數(shù)據(jù)收集器請(qǐng)求數(shù)據(jù)。
圖4b形成通信系統(tǒng)100如何從均具有捕獲設(shè)備或移動(dòng)攝像機(jī)200..200’并與接收多個(gè)視域的中央觀察收集器設(shè)備150通信的多個(gè)頭部安裝設(shè)備穿戴者接收捕獲信息的另一范例。收集器設(shè)備150與增強(qiáng)現(xiàn)實(shí)模塊135通信,增強(qiáng)現(xiàn)實(shí)模塊135能夠提供多個(gè)視域的并且具有被布置為在增強(qiáng)現(xiàn)實(shí)中通過(guò)將視點(diǎn)與另一視點(diǎn)拼接而提供聚合視域的程序邏輯。這些聚合視域優(yōu)選在中央控制空間或局部地在移動(dòng)攝像機(jī)設(shè)備200處進(jìn)行繪制。為此目的,增強(qiáng)現(xiàn)實(shí)模塊135被提供有視域繪制邏輯136,具體用于由中央察看器137繪制多個(gè)視域。例如,醫(yī)師能夠指示他想要看見(jiàn)的物體以及從哪一個(gè)角度,并且拼接模塊相應(yīng)地從最佳匹配醫(yī)師的需要的一個(gè)或多個(gè)捕獲設(shè)備200..200’選擇一個(gè)或多個(gè)視域。以此方式,而且,外科手術(shù)的程序后的評(píng)估能夠被改進(jìn),或工作人員可以在外科手術(shù)程序中從不同的角度進(jìn)行訓(xùn)練。中央觀察系統(tǒng)150也能夠支持遠(yuǎn)程監(jiān)督/支持,即當(dāng)手術(shù)由專家指導(dǎo)時(shí),他/她本人可能不在場(chǎng)但是可以指導(dǎo)現(xiàn)場(chǎng)處的醫(yī)師。專家然后能夠使用聚合視域以通過(guò)在不同的移動(dòng)攝像機(jī)視域之間進(jìn)行拼接而具有手術(shù)的全貌以及詳細(xì)視域。
中央察看器137可以允許通常在觀察或控制室中的人請(qǐng)求單獨(dú)視域或聚合視域。除了頭部安裝設(shè)備顯示器外,這些也可以被中央地顯示在2d顯示器上。例如,觀察者能夠例如通過(guò)使用控制桿、鍵盤、鼠標(biāo)或通過(guò)使用通過(guò)諸如眼睛跟蹤器、頭部跟蹤器等的更先進(jìn)的輸入技術(shù)檢測(cè)到的姿態(tài)控制或頭部或眼睛移動(dòng)向中央察看器指出他想要獲得哪個(gè)視角。在3d顯示器上(例如在自動(dòng)立體全方向顯示器上)繪制視域也是可能的,從而允許觀察者在顯示器周圍容易地移動(dòng)以從所有角度觀看感興趣對(duì)象。