圖像吻合。其中:
[0069]所述智能眼鏡通信接口,還用于接收智能眼鏡發(fā)送的經(jīng)過初步處理的彩色圖像和紅外圖像;并在智能終端處理器完成三維重建后將三維重建圖像發(fā)送回智能眼鏡;
[0070]智能終端處理器,還用于從接收自智能眼鏡的彩色圖像中提取獲取深度數(shù)據(jù)信息,并對接收自智能眼鏡發(fā)送的經(jīng)過初步處理的彩色圖像和紅外圖像進行融合處理得到融合圖像,然后根據(jù)提取的深度數(shù)據(jù)信息以及融合圖像構(gòu)建救災(zāi)救援現(xiàn)場的三維重建圖像;
[0071]所述外部通信接口,還用于將接收自智能眼鏡的紅外圖像和彩色圖像,以及智能終端處理器生成的三維重建圖像發(fā)送到現(xiàn)場指揮終端,或者其他智能眼鏡以供顯示;另外,所述外部通信接口還用于將智能眼鏡上的傳感器所采集的信息發(fā)送到現(xiàn)場指揮終端,以供現(xiàn)場指揮終端決策或提醒救災(zāi)救援人員;
[0072]所述智能終端存儲器,還用于緩存接收自智能眼鏡的紅外圖像和彩色圖像,以及智能終端處理器生成的三維重建圖像。
[0073]進一步地,所述智能終端中還包括電子羅盤、重力感應(yīng)器、加速傳感器、光電傳感器、超聲波距離傳感器等傳感器中的一種或多種。
[0074]進一步地,在所述智能終端中還集成了室內(nèi)定位系統(tǒng),室內(nèi)定位系統(tǒng)可以是WiFi定位系統(tǒng)或者羲和系統(tǒng)等。
[0075]進一步地,所述智能終端還包括有近距離通信單元,近距離通信單元可以是WiF1、Bluetooth,或者對講機。
[0076]具體所述智能終端可以是專用的智能終端,也可以使用IPad和智能手機這樣的終端。智能終端的作用是處理現(xiàn)場的信息,比如定位信息、現(xiàn)場的地圖信息等。在消防環(huán)境中,智能終端處理現(xiàn)場的建筑的平面圖,并顯示在智能眼鏡上。同時,在消防現(xiàn)場中,還要將現(xiàn)場指揮終端的待救援人員的信息顯示在智能眼鏡上,方便救援人員實施救援。智能終端還要負(fù)責(zé)與現(xiàn)場現(xiàn)場指揮終端進行通信,通信的方式是無線通信方式。通信內(nèi)容包括圖像、語音和數(shù)據(jù)。
[0077]為了適合各種環(huán)境,在智能終端上的應(yīng)用通常采用APP的方式。不同的應(yīng)用環(huán)境,使用不同的APP。這些APP是一些專業(yè)的應(yīng)用APP。比如在消防現(xiàn)場,就使用消防的APP。在抗震現(xiàn)場就使用抗震的APP。在維修現(xiàn)場,就使用維修的APP等。采用APP的模式有利于第三方可以開發(fā)更多的適合現(xiàn)場環(huán)境的應(yīng)用,能夠推廣本實用新型的系統(tǒng)的推廣和應(yīng)用。
[0078]在本實用新型實施例中,智能眼鏡可以是單目的,也可以是雙目的。智能眼鏡應(yīng)該是穿透式的,這樣,可以將智能終端的處理結(jié)果與現(xiàn)場的實際環(huán)境通過增強現(xiàn)實(Augmented Reality, AR)技術(shù)結(jié)合在一起。智能眼鏡與智能終端的連接采用有線方式或者無線方式連接,例如WiF1、Bluetooth等。
[0079]在一些使用環(huán)境中,例如在消防的使用環(huán)境中,智能眼鏡可以與頭盔結(jié)合使用,例如圖5所示,智能眼鏡與智能終端通過有線方式連接,智能眼鏡集成在頭盔上。
[0080]為了適合各種環(huán)境,在智能終端上的應(yīng)用通常采用APP的方式。不同的應(yīng)用環(huán)境,使用不同的APP。這些APP是一些專業(yè)的應(yīng)用APP。例如在消防現(xiàn)場就使用消防的APP ;在抗震現(xiàn)場就使用抗震的APP ;在維修現(xiàn)場就使用維修的APP等。采用APP的模式有利于第三方可以開發(fā)更多的適合現(xiàn)場環(huán)境的應(yīng)用,能夠推廣本實用新型的系統(tǒng)和應(yīng)用。
[0081]現(xiàn)場指揮終端是一個以計算機為中心的系統(tǒng),負(fù)責(zé)與救援人員聯(lián)系和通信。接收來自救援人員的智能終端的視頻、語音和數(shù)據(jù)信息,了解現(xiàn)場的實際情況,對現(xiàn)場的形勢進行判斷,便于做出有效的指揮。同時將指令和支援?dāng)?shù)據(jù)發(fā)送給現(xiàn)場的救援人員。
[0082]現(xiàn)場指揮終端還可以與后臺支援終端進行通信,將現(xiàn)場的實際情況及時發(fā)送給后臺支援終端。同時,從后臺支援終端中獲得現(xiàn)場需要的信息和數(shù)據(jù),例如現(xiàn)場地圖等。在消防的環(huán)境中,獲得建筑的平面圖等信息。
[0083]后臺支援終端是一個以計算機為中心的系統(tǒng)。接收來自救援人員的智能終端或者是現(xiàn)場指揮終端的視頻、語音和數(shù)據(jù)信息,了解現(xiàn)場的實際情況,對現(xiàn)場的形式做出判斷,便于做出有效的指揮。同時將指令和支援?dāng)?shù)據(jù)發(fā)送給現(xiàn)場的救援人員或者是現(xiàn)場指揮終端。
[0084]后臺支援終端還負(fù)責(zé)向救援人員或者是現(xiàn)場指揮終端提供所需要的信息,例如現(xiàn)場需要的地圖,待救援人員的位置等信息。在消防的環(huán)境中,負(fù)責(zé)提供建筑的平面圖等信息。同時,在不同的應(yīng)用環(huán)境中,還要向救援人員或者是現(xiàn)場指揮終端提供專用的APP,使得救援人員或者是現(xiàn)場指揮終端的效率更高。
[0085]后臺支援終端的APP可以是來自第三方的APP。需要的地圖等信息,例如建筑的平面圖等,可以使來自第三方的。這種開放的體系結(jié)構(gòu),有利于帶動第三方的積極性,從而使整個產(chǎn)業(yè)得到快速發(fā)展。
[0086]本實用新型利用虛擬現(xiàn)實技術(shù),通過位置定位單對救災(zāi)救援人員的位置進行定位,根據(jù)位置定位單元的定位結(jié)果,獲取救災(zāi)現(xiàn)場的地圖,或者目標(biāo)對象的數(shù)據(jù)信息,或者救災(zāi)現(xiàn)場建筑物的平面圖,并生成救援人員所在位置的虛擬現(xiàn)實圖像;將生成的虛擬現(xiàn)實圖像發(fā)送到智能眼鏡;并能將所述虛擬現(xiàn)實圖像發(fā)送到現(xiàn)場指揮終端或后臺支援終端,以使現(xiàn)場指揮終端決策或提醒救災(zāi)救援人員。本實用新型利用增強現(xiàn)實技術(shù)在現(xiàn)場場景圖像基礎(chǔ)上疊加現(xiàn)場地圖或其他信息,通過可視化的方式使救災(zāi)救援人員能夠及時定位自己所在的位置所在,提高救援效率。
[0087]本實用新型采用主動紅外三維重建圖像與一般的熱成像比較,能夠提供更清晰的現(xiàn)場圖像。與此同時,主動紅外三維重建圖像采用發(fā)射紅外激光的方式,可以探測物體的距離,形成深度信息,構(gòu)建三維圖像,而不是熱成像技術(shù)的二維圖像。主動紅外三維重建圖像形成的圖像能夠與現(xiàn)場的實際環(huán)境相吻合,與消防救災(zāi)單兵平時的視覺是一致的,使消防救災(zāi)單兵能夠更準(zhǔn)確把握現(xiàn)場的實際情況。
[0088]本實用新型采用主動紅外三維重建圖像與一般的熱成像比較,在成本上只有幾分之一,便于大范圍推廣。
[0089]本實用新型采用主動紅外三維重建圖像與一般的熱成像比較,重量輕、方便攜帶,而且可以用于寒冷地區(qū)等各種救災(zāi)場景。
[0090]本實用新型采用各種傳感技術(shù)對消防救災(zāi)單兵的體征信息進行時時采集,并及時有效地通過信道傳送至現(xiàn)場指揮終端,為保障消防員的生命提供了有效的保障。
[0091]以下以具體實施例說明本實用新型救災(zāi)救援可視系統(tǒng)的應(yīng)用場景:
[0092]實施例一,消防現(xiàn)場救援
[0093]將建筑物的平面圖和待救援人員的信息顯示在智能眼鏡上,方便救援人員進行定位,快速實施救援。在消防現(xiàn)場都是濃煙,人眼視覺無法觀察的情況下,通過AR和虛擬現(xiàn)實(Virtual Reality, VR)技術(shù),可以在智能眼鏡上再現(xiàn)一個實際的、與現(xiàn)場環(huán)境幾乎一致的現(xiàn)場視覺圖像,使救援人員感覺在實際的、沒有濃煙的現(xiàn)場中移動,從而達(dá)到實施有效的救援。
[0094]在救援人員到達(dá)火場時,APP就可透過語音指令指示即時為救援人員提供火災(zāi)現(xiàn)場平面圖,以找出重點搜救位置,還可以幫助救援人員找到最近的消防水龍頭。
[0095]救援人員在建筑物內(nèi)的定位,采用WiFi定位或者是羲和定位系統(tǒng),定位精度可以達(dá)到2米。通過目標(biāo)鎖定的方式,使救援人員在移動和頭部轉(zhuǎn)動的情況下,看到的虛擬現(xiàn)場與實際的現(xiàn)場幾乎一致。這樣,救援人員就可以方便地找到門、樓梯等的位置,使救援更加方便和有效。
[0096]在智能眼鏡上顯示有現(xiàn)場的地圖信息,并顯示有救援人員在地圖上的所在位置,便于救援人員了解現(xiàn)場地形分布,及時到達(dá)救援地點,實施救援行動。
[0097]實施例二,目標(biāo)鎖定
[0098]在軍事防衛(wèi)領(lǐng)域,可視自然環(huán)境與不可視數(shù)據(jù)信息相結(jié)合可以幫助士兵更好的進行武器操作、行動監(jiān)察、后勤支持、軍事演練等。內(nèi)置陀螺儀、加速度計、磁羅盤、支持頭部運動跟蹤和免提導(dǎo)航的智能眼鏡,通過AR技術(shù)來鎖定目標(biāo)。在頭部轉(zhuǎn)動的時候,目標(biāo)的位置始終保持在視場場景的位置上。
[0099]實施例三,復(fù)雜機械