本發(fā)明涉及智能控制技術領域,尤其涉及一種車載設備的控制方法、AR裝置及AR系統(tǒng)。
背景技術:
在隨著工業(yè)4.0和信息技術的快速發(fā)展,汽車電子在智能化和便捷性方面越來越朝著安全、舒適、智能的方向發(fā)展。
越來越多的中高端汽車和電動汽車都原裝了智能車機、智能倒車后視鏡、智能左右后視鏡、椅背電視等智能車載終端,這些都大大方便了駕駛員和乘客的行車體驗,這些智能車載終端的主要功能有4G通訊、藍牙、導航、媒體播放、錄像、行車記錄等。
然而,上述的智能車載終端與用戶間的交互較為單一,不利于駕駛員安全駕駛。例如,駕駛員在進行倒車時,為了掌握智能車機中顯示的車輛后方的影像,需要駕駛員的眼睛持續(xù)盯著智能車機方向,這樣當前方出現(xiàn)緊急狀況時,由于駕駛員眼睛一直盯著智能車機方向而無法得知車輛前方狀況,從而出現(xiàn)安全隱患的問題。
技術實現(xiàn)要素:
本發(fā)明的實施例提供一種車載設備的控制方法、AR裝置及AR系統(tǒng),用以解決現(xiàn)有技術中由于智能車載終端與用戶間的交互較為單一,所導致出現(xiàn)安全隱患的問題。
為達到上述目的,本發(fā)明的實施例采用如下技術方案:
第一方面,提供一種車載設備的控制方法,所述方法包括:
采集眼睛圖像;
根據(jù)所述眼睛圖像識別眼仁在眼眶中的位置;
當識別到所述眼仁在眼眶中的位置為有效眼位時,從車載設備中獲取與所述眼仁在眼眶中的位置對應的顯示信息,并顯示所述顯示信息。
第二方面,提供一種AR裝置,所述AR裝置包括控制模塊、與所述控制模塊連接的眼球姿態(tài)檢測灰度圖像采集模塊以及與所述控制模塊連接的車載設備,其中:
所述眼球姿態(tài)檢測灰度圖像采集模塊,用于采集眼睛圖像;
所述控制器,用于根據(jù)所述眼睛圖像識別眼仁在眼眶中的位置;還用于當識別到所述眼仁在眼眶中的位置為有效眼位時,從所述車載設備中獲取與所述眼仁在眼眶中的位置對應的顯示信息,并顯示顯示信息。
第三方面,提供一種AR系統(tǒng),包括第二方面所述的AR裝置和至車載設備。
本發(fā)明實施例提供的車載設備的控制方法、AR裝置及AR系統(tǒng),相比于現(xiàn)有技術中由于智能車載終端與用戶間的交互較為單一,會出現(xiàn)安全隱患的問題,本方案通過識別到眼仁在眼眶中的位置為有效眼位時,從車載設備中獲取與該眼仁在眼眶中的位置對應的顯示信息,并顯示該顯示信息,這樣就無需人眼一直盯著車載設備,當前方出現(xiàn)緊急事件或車輛時,駕駛員仍然可以及時發(fā)現(xiàn),從而避免交通事故,保障安全駕駛。例如,當需要倒車時,駕駛員的眼睛僅需掃描一下智能車機,AR裝置識別到駕駛員的眼仁在眼眶中的位置為有效眼位時,從智能車機中獲取車輛后面的影像,并將該影像顯示出來,此時駕駛員無需一直盯著智能車機,在AR裝置上觀看車輛后方信息進行倒車的同時,還可以注意到車輛前方的信息,從而避免出現(xiàn)安全隱患的問題。
附圖說明
為了更清楚地說明本發(fā)明實施例的技術方案,下面將對實施例或現(xiàn)有技術描述中所需要使用的附圖作簡單地介紹,顯而易見地,下面描述中的附圖僅僅是本發(fā)明的一些實施例,對于本領域普通技術人員來講,在不付出創(chuàng)造性勞動的前提下,還可以根據(jù)這些附圖獲得其他的附圖。
圖1為本發(fā)明實施例提供的一種車載設備的控制方法的方法流程圖;
圖2為本發(fā)明實施例提供的五種眼位的示意圖;
圖3為本發(fā)明實施例基于圖2提供的眼位對應預設區(qū)域的示意圖;
圖4為本發(fā)明實施例提供的雙眼正視前方的示意圖;
圖5為本發(fā)明實施例提供的雙眼朝向智能車機方向的示意圖;
圖6為本發(fā)明實施例提供的雙眼朝向后視鏡方向的示意圖;
圖7為本發(fā)明實施例提供的雙眼朝向左視鏡方向的示意圖;
圖8為本發(fā)明實施例提供的雙眼朝向右視鏡方向的示意圖;
圖9為本發(fā)明實施例提供的一種AR裝置的結(jié)構(gòu)示意圖;
圖10為本發(fā)明實施例提供的一種AR系統(tǒng)的結(jié)構(gòu)示意圖。
具體實施方式
下面將結(jié)合本發(fā)明實施例中的附圖,對本發(fā)明實施例中的技術方案進行清楚、完整地描述,顯然,所描述的實施例僅是本發(fā)明一部分實施例,而不是全部的實施例。基于本發(fā)明中的實施例,本領域普通技術人員在沒有做出創(chuàng)造性勞動前提下所獲得的所有其他實施例,都屬于本發(fā)明保護的范圍。
本發(fā)明實施例中,除非另有明確的規(guī)定和限制,術語“設置”、“連接”等術語應做廣義理解,例如,可以是固定連接,也可以是拆卸連接,或成一體;可以是機械連接,也可以是電連接;可以是直接相連,也可以是通過中間媒介間接相連,可以是兩個元件內(nèi)部的連通或兩個元件的相互作用關系。對于本領域的普通技術人員而言,可以根據(jù)具體情況理解上述術語在本發(fā)明中的具體含義。
為了便于清楚描述本發(fā)明實施例的技術方案,在本發(fā)明的實施例中,采用了“第一”、“第二”等字樣對功能或作用基本相同的相同項或相似項進行區(qū)分,本領域技術人員可以理解“第一”、“第二”等字樣并不對數(shù)量和執(zhí)行次序進行限定。
本發(fā)明實施例中提及的增強現(xiàn)實(英文:Augmented Reality,簡稱:AR)裝置包括但不限于:AR眼鏡和包括AR顯示器的AR裝置,該AR裝置可以直接佩戴在駕駛員的頭部,也可以直接設置在駕駛艙中駕駛員的座位的正上方,以便于駕駛員坐在座位上眼睛對準AR顯示器或AR眼鏡的鏡片上,該AR裝置具有兩片透光玻璃片,該鏡片同時是AR裝置的內(nèi)容顯示器。
本發(fā)明實施例中的車載設備包括外接設備和車載智能終端,該外接設備包括位于車輛左側(cè)的攝像頭、位于車輛右側(cè)的攝像頭以及車內(nèi)的全息攝像頭,而該車載智能終端包括智能車機以及后視鏡,該車載智能終端是車輛自帶的帶有操作系統(tǒng)、圖形人機交互界面和顯示屏的智能設備。
本發(fā)明實施例提供一種車載設備的控制方法,如圖1所示,該方法包括:
101、采集眼睛圖像。
優(yōu)選的,可以通過AR裝置中的眼球姿態(tài)檢測灰度圖像采集模塊采集人體眼睛的灰度圖像,并為眼位識別功能提供準確、清晰的圖像數(shù)據(jù)。示例性的,也可以通過AR裝置去采集人體眼睛的彩色圖像,這里并不進行限定,僅以示例進行說明。
102、根據(jù)眼睛圖像識別眼仁在眼眶中的位置。
為了快速準確的確定出眼仁在眼眶中的位置,優(yōu)選的,上述的步驟102具體包括以下內(nèi)容:
102a、對眼睛圖像做二值化處理得到二值圖像。
102b、根據(jù)二值圖像中兩種顏色的像素點的分布確定眼仁在眼眶中的位置。
示例性的,對眼睛圖像做二值化處理得到二值圖像,該二值圖像中包括黑白這兩種顏色的像素點,該眼仁對應二值圖像中的黑色像素點,而二值圖像中的其他地方對應白色的像素點,根據(jù)該黑色像素點以及白色像素點分布,從而可以確定出眼仁在眼眶中的位置。可選的,上述得到的二值圖像中還可以是其他的兩種顏色,這里并不限定為黑白色,僅以示例進行說明。
103、當識別到眼仁在眼眶中的位置為有效眼位時,從車載設備中獲取與眼仁在眼眶中的位置對應的顯示信息,并顯示該顯示信息。
示例性的,在上述的步驟103之前,上述的方法還包括:
103a1、識別眼仁在眼眶中的位置為朝向第一方向的眼位。
示例性的,上述的第一方向為朝向左視鏡方向、右視鏡方向、后視鏡方向、智能車機方向或正視前方。具體的,看以參照圖2給出的五個固定眼位示意圖。其中,圖2中的眼位一為雙眼正視前方,眼位二為雙眼朝向智能車機方向,眼位三為雙眼朝向后視鏡方向,眼位四位雙眼朝向左視鏡方向以及眼位五為雙眼朝向右視鏡方向的這五個固定眼位。
103a2、求取位于朝向第一方向的眼位對應的預設區(qū)域中的眼仁的面積,并將眼仁的面積與預設區(qū)域的面積的作比值得到面積比值。
示例性性的,參照圖3所示的眼位對應預設區(qū)域的示意圖,其中,圖3中的(a)為眼位一對應的預設區(qū)域,圖3中的(b)為眼位二對應的預設區(qū)域,圖3中的(c)為眼位三對應的預設區(qū)域,圖3中的(d)為眼位四對應的預設區(qū)域,圖3中的(e)為眼位五對應的預設區(qū)域。這里以圖(a)為例進行說明,具體的,眼位一為正視前方的眼位,該正視前方的眼位所對應的預設區(qū)域為圖3中的(a)中所畫的四個圓圈所形成的重疊區(qū)域。對于其他眼位所對應的預設區(qū)域具體見圖3中的除(a)以外的其他示意圖。
優(yōu)選的,為了準確定位出眼仁在眼眶中的位置,上述的預設區(qū)域為多個圓圈所形成的重疊區(qū)域,這里的圓圈的個數(shù)越多越好。對于圖中僅是以四個圓圈為例進行說明預設區(qū)域,并不進行限定。
示例性的,只要能夠定位出眼仁在眼眶中的位置,上述的預設區(qū)域為至少兩個圓圈所形成的重疊區(qū)域。
103a3、若比值大于第一預設值,且朝向第一方向的眼位持續(xù)預設時間,則眼仁在眼眶中的位置為朝向第一方向的有效眼位。
優(yōu)選的,為了便于進行數(shù)據(jù)處理,上述的五種眼位所對應的第一預設值是相同的。例如,該五種眼位對應的第一預設值均為70%。
示例性的,上述的五種眼位所對應的第一預設值可以是不同的。例如,第一眼位所對應的預設值為70%,第二眼位所對應的預設值可以75%,第三眼位所對應的預設值為77%,第四眼位所對應的預設值可以80%以及第五眼位所對應的預設值為82%。
示例性的,上述的預設時間可以根據(jù)實際的需求進行設定,可以為10ms,也可以為20ms或30ms,這里并不進行限定,僅以示例進行說明。
示例性的,這里給出一個具體的例子說明上述確定有效眼位的過程。例如,識別眼仁在眼眶中的位置為朝向左視鏡方向的眼位,參照圖3中所示的(d),求取圖3中(d)所示的四個圓圈所形成的重疊區(qū)域中的眼仁的面積與該重疊區(qū)域面積的比值為80%,該比值大于第一預設值70%,且該朝向左視鏡方向的眼位持續(xù)了10ms,則該眼仁在眼眶中的位置為朝向左視鏡方向上的有效眼位。
示例性的,上述的步驟103中的當識別到眼仁在眼眶中的位置為有效眼位時,從車載設備中獲取與眼仁在眼眶中的位置對應的顯示信息具體包括以下五部分的內(nèi)容:
A1、當識別到眼仁在眼眶中的位置為朝向左視鏡方向的有效眼位時,從左攝像頭中獲取影像,該左攝像頭安裝在車身外的左側(cè);和/或
A2、當識別到眼仁在眼眶中的位置為朝向右視鏡方向的有效眼位時,從右攝像頭中獲取影像,該右攝像頭安裝在車身外的右側(cè);和/或
A3、當識別到眼仁在眼眶中的位置為正視前方的有效眼位時,從智能車機中獲取車輛基本信息,該車輛基本信息包括車輛的時速、瞬時耗油以及發(fā)動機水溫中的至少一個;和/或
A4、當識別到眼仁在眼眶中的位置為朝向智能車機方向的有效眼位時,獲取智能車機上顯示的圖標;和/或
A5、當識別到眼仁在眼眶中的位置為朝向后視鏡方向的有效眼位時,獲取后視鏡上顯示的圖標。
示例性的,上述的和/或使得本方案中在獲取車載設備上的顯示信息時,滿足上述的五種中的任意一種、任意兩種、任意三種、任意四種以及上述五種所形成的方案均屬于本專利的保護范圍。
優(yōu)選的,上述的AR裝置包括AR顯示器,為了能夠?qū)⒅悄苘嚈C以及后視鏡上的顯示信息準確完整到顯示到AR裝置上,當眼仁在眼眶中的位置為朝向智能車機方向或后視鏡方向的有效眼位時,上述的步驟103中的從車載設備中獲取與眼仁在眼眶中的位置對應的顯示信息,并在AR裝置上顯示顯示信息具體包括以下內(nèi)容:
103b1、采用無線傳屏技術獲取智能車機或后視鏡上顯示的圖標。
103b2、將智能車機或后視鏡上顯示的圖標投射到AR裝置的AR顯示器上。
進一步的,由于現(xiàn)有技術中車載智能終端與用戶間的交互界面比較單一,基本都是平面的電子屏幕,駕駛員在該平面的電子屏幕上的操作會時,會比較繁瑣,從而影響駕駛員安全駕車。盡管一些智能車載終端上配備了語音控制,但是,該語音控制功能會因噪聲問題,在超過100公里/小時的時速時便會失效,仍然無法便捷操作平面的電子屏幕。為了解決由于語音控制功能回音噪聲問題失效,而無法便捷操作平面的電子屏幕,出現(xiàn)駕駛隱患的問題。本方案中的方法還包括以下內(nèi)容:
B1、當車內(nèi)全息攝像頭檢測到有人手伸向智能車機或后視鏡時,在AR顯示器上顯示人體的虛擬人手,該虛擬人手與人體的真實人手的操作動作同步。
B2、通過真實人手操控虛擬人手去觸碰AR顯示器上的圖標來執(zhí)行圖標對應的操作。
優(yōu)選的,上述的虛擬人手為3D虛擬人手。示例性的,上述的虛擬人手可以為2D虛擬人手。
示例性的,當車內(nèi)全息攝像頭檢測到有人手伸向智能車機時,在AR顯示器上顯示人體的3D虛擬人手,通過真實的人手去操控3D虛擬人手去觸碰AR顯示器上的圖標來執(zhí)行圖標對應的操作。例如操作智能車機上的圖標所對應的操作包括但不限于:開啟空調(diào)、設定溫度、打開或關閉收音機、打開或關閉DVD、播放或暫停影音播放器、進行路徑導航、撥打車載電話。
示例性的,當車內(nèi)全息攝像頭檢測到有人手伸向后視鏡時,在AR眼鏡上顯示人體的3D虛擬人手,通過真實的人手去操控3D虛擬人手去觸碰AR顯示器上的圖標來執(zhí)行圖標對應的操作。例如操作后視鏡上的圖標所對應的操作包括但不限于:打開或關閉GPS或北斗導航、開啟或結(jié)束路徑導航、撥打藍牙電話、打開或關閉FM發(fā)射、音樂播放。
示例性的,上述的全息攝像頭還采集車輛駕駛員身體姿態(tài),采集包括但不限于:探頭、轉(zhuǎn)頭、扭脖頸、伸展等肢體動作。但這些動作不在本發(fā)明互聯(lián)互動動作范圍之內(nèi),屬于肢體識別方面,僅對本發(fā)明的AR裝置與車載設備的互聯(lián)互動正常工作起到輔助作用。
本發(fā)明實施例提供的車載設備的控制方法,相比于現(xiàn)有技術中由于智能車載終端與用戶間的交互較為單一,會出現(xiàn)安全隱患的問題,本方案通過識別到眼仁在眼眶中的位置為有效眼位時,從車載設備中獲取與該眼仁在眼眶中的位置對應的顯示信息,并顯示該顯示信息,這樣就無需人眼一直盯著車載設備,當前方出現(xiàn)緊急事件或車輛時,駕駛員仍然可以及時發(fā)現(xiàn),從而避免交通事故,保障安全駕駛。例如,當需要倒車時,駕駛員的眼睛僅需掃描一下智能車機,AR裝置識別到駕駛員的眼仁在眼眶中的位置為有效眼位時,從智能車機中獲取車輛后面的影像,并將該影像顯示出來,此時駕駛員無需一直盯著智能車機,在AR裝置上觀看車輛后方信息進行倒車的同時,還可以注意到車輛前方的信息,從而避免出現(xiàn)安全隱患的問題。
可選的,當駕駛員出現(xiàn)疲勞駕駛時,為了保障駕駛員安全以及避免交通意外的發(fā)生,該方法還包括以下內(nèi)容:
103c1、當確定出眼仁的面積小于第二預設值時,則發(fā)出告警。
示例性的,上述的第二預設值是根據(jù)實際的需求進行設定的。例如,參照成年人的眼仁平均面積為109平方毫米,可以將該預設值設為105。而在晚上時,光線不好加上人體容易出現(xiàn)疲勞,可以將該預設值相對于105設置的更大一些,從而避免出現(xiàn)安全隱患。
可選的,為了能夠方便的使得AR裝置進行模式的切換,該方法還包括以下內(nèi)容:
103c2、當識別到眼仁在眼眶中的位置為有效眼位時,等待預設時間后,再去識別下一個有效眼位。
示例性的,可以通過判斷車輛熄火或AR裝置被摘下時,該與車載設備的互動過程結(jié)束或退出。
下面給出上述的五種眼位對應的實際應用場景的具體實例,進行說明用戶如何通過AR裝置與車載設備間進行互動,這里的AR裝置以AR眼鏡為例。
參照圖4所示的雙眼正視前方的示意圖,即眼位一對應的實際場景圖。車輛駕駛員盯住行駛方向正前方,此時,眼睛圖像中的眼仁位置為上述圖2中的眼位一,該眼位一對應的預設區(qū)域內(nèi),預設區(qū)域內(nèi)的眼仁的面積與預設區(qū)域的面積的比值大于一定的百分比,例如大于70%,并且該眼位一超過預設時間閾值,例如超過30秒,即判斷為生效眼位,該車載設備為AR眼鏡提供車輛的發(fā)動機冷卻液水溫、車輛瞬時油耗、車輛時速等基礎信息,并清楚的呈現(xiàn)給駕駛員,既具備良好的沉浸感,又不會干擾車輛駕駛員正常駕駛汽車。
參照圖5所示的雙眼朝向智能車機的示意圖,即眼位二對應的實際場景圖。車輛駕駛員盯住智能車機方向,此時,眼睛圖像中的眼仁位置為上述圖2中的眼位二,該眼位二對應的預設區(qū)域內(nèi),預設區(qū)域內(nèi)的眼仁的面積與預設區(qū)域的面積的比值大于一定的百分比,例如大于70%,并且該眼位二超過預設時間閾值,例如超過300毫秒,即判斷為生效眼位,該車載設備為AR眼鏡提供智能車機互聯(lián)操控,將該智能車機的主屏上的圖標投射到駕駛員的AR眼鏡上。駕駛員不需要看實際的智能車機,而正常目視前方,保持開車方式,并且只需要向智能車機伸手,安裝在車內(nèi)的全息捕捉攝像頭就會將駕駛員人手的3D虛擬畫面呈現(xiàn)給駕駛員,此時,駕駛員利用AR眼鏡跟智能車機產(chǎn)生互動,3D虛擬人手所觸碰的AR眼鏡上的圖標,即是駕駛員自己的手觸碰的智能車機的圖標,相應功能,就在車機上真實打開或關閉了。
參照圖6所示的雙眼朝向后視鏡的示意圖,即眼位三對應的實際場景圖。車輛駕駛員盯住后視鏡方向,此時,眼睛圖像中的眼仁位置為上述圖2中的眼位三,該眼位三對應的預設區(qū)域內(nèi),預設區(qū)域內(nèi)的眼仁的面積與預設區(qū)域的面積的比值大于一定的百分比,例如大于70%,并且該眼位三超過預設時間閾值,例如超過300毫秒,即判斷為生效眼位,該車載設備為AR眼鏡提供后視鏡的互聯(lián)操控,將該后視鏡的主屏上的圖標投射到駕駛員的AR眼鏡上,駕駛員不需要看實際的后視鏡,而正常目視前方,保持開車方式,并且只需要向后視鏡伸手,安裝在車內(nèi)的全息捕捉攝像頭就會將駕駛員人手的3D虛擬畫面呈現(xiàn)給駕駛員,此時,駕駛員利用AR眼鏡跟后視鏡產(chǎn)生互動,3D虛擬人手所觸碰的AR眼鏡上的圖標,即是駕駛員自己的手觸碰的后視鏡上的圖標,相應功能,就在車機上真實打開或關閉了。此外,除上述類似場景外,AR眼鏡在車輛倒車時,默認同智能倒車后視鏡的后拉攝像頭互聯(lián),獲取倒車真實影像,從而方便感知外部環(huán)境狀況,減少交通事故。
參照圖7所示的雙眼朝向左視鏡的示意圖,即眼位四對應的實際場景圖。車輛駕駛員盯住左視鏡方向,此時,眼睛圖像中的眼仁位置為上述圖2中的眼位四,該眼位四對應的預設區(qū)域內(nèi),預設區(qū)域內(nèi)的眼仁的面積與預設區(qū)域的面積的比值大于一定的百分比,例如大于70%,并且該眼位四超過預設時間閾值,例如超過300毫秒,即判斷為生效眼位。該車載設備為AR眼鏡提供車身外左側(cè)攝像頭拍攝的影像,將影像傳遞給AR眼鏡上,從而方便車輛駕駛?cè)藛T更加真實的獲取車外影像,安全駕駛。
參照圖8所示的雙眼朝向右視鏡的示意圖,即眼位五對應的實際場景圖。車輛駕駛員盯住右視鏡方向,此時,眼睛圖像中的眼仁位置為上述圖2中的眼位五,該眼位五對應的預設區(qū)域內(nèi),預設區(qū)域內(nèi)的眼仁的面積與預設區(qū)域的面積的比值大于一定的百分比,例如大于70%,并且該眼位四超過預設時間閾值,例如超過300毫秒,即判斷為生效眼位。該車載設備為AR眼鏡提供車身外右側(cè)攝像頭拍攝的影像,將影像傳遞給AR眼鏡上,從而方便車輛駕駛?cè)藛T更加真實的獲取車外影像,安全駕駛。
本發(fā)明實施例提供一種AR裝置,如圖9所示,該AR裝置包括控制模塊21、與控制模塊21連接的眼球姿態(tài)檢測灰度圖像采集模塊22以及與控制模塊連接的車載設備,其中:
眼球姿態(tài)檢測灰度圖像采集模塊22,用于采集眼睛圖像。
控制模塊21,用于根據(jù)眼睛圖像識別眼仁在眼眶中的位置;還用于當識別到眼仁在眼眶中的位置為有效眼位時,從車載設備中獲取與眼仁在眼眶中的位置對應的顯示信息,并顯示該顯示信息。
示例性的,上述的控制模塊21可以為微控制器(英文:Microcontroller Unit,簡稱:MCU)或中央處理器(英文:Central Process Unit,簡稱:CPU),該控制模塊21負責整個AR裝置的主要控制功能、運算和資源配置,并負責眼位識別時的眼位判斷和調(diào)度車外智能設備,給這些車載設備輸出相關的動作指令。
可選的,如圖9所示,上述的AR裝置還包括:與控制模塊21連接的高清晰度多媒體接口(英文:High Definition Multimedia Interface,簡稱:HDMI)轉(zhuǎn)移動產(chǎn)業(yè)處理器接口(Mobile Industry Processor Interface,簡稱:MIPI)電路模塊23,其中:
HDMI轉(zhuǎn)MIPI電路模塊23,用于將控制模塊輸出到AR裝置上的顯示信息正確顯示。
可選的,如圖9所示,上述的AR裝置還包括:無線保真(英文:Wireless Fidelity,簡稱:WIFI)藍牙電路模塊24,其中:該WIFI藍牙電路模塊24,用于保證各車載設備與主控制器間進行通信。
可選的,如圖9所示,上述的AR裝置還包括:重力加速度模塊25和陀螺儀地磁電路模塊26,這兩個模塊主要為實現(xiàn)AR裝置同車載設備間的互聯(lián)互動,提供搭建好的基礎電路和射頻通路。
可選的,如圖9所示,上述的AR裝置還包括:LED電路模塊27,該LED電路模塊27主要負責AR裝置的一些動作指示,包括但不限于:外設互聯(lián)狀態(tài)、電量報警以及信息提示。
示例性的,如圖9所示,上述的AR裝置還包括存儲模塊28,該存儲模塊28用于存儲控制模塊21進行運算時的數(shù)據(jù)。示例性的,該存儲模塊28包括但不限于:ROM、PROM、EPROM以及EEPROM。
可選的,上述的控制模塊在根據(jù)眼睛圖像識別眼仁在眼眶中的位置具體用于:
對眼睛圖像做二值化處理得到二值圖像。
根據(jù)二值圖像中兩種顏色的像素點的分布確定眼仁在眼眶中的位置。
可選的,上述的控制模塊還用于:
識別眼仁在眼眶中的位置為朝向第一方向的眼位;第一方向為朝向左視鏡方向、右視鏡方向、后視鏡方向、智能車機方向或正視前方。
求取位于朝向第一方向的眼位對應的預設區(qū)域中的眼仁的面積,并將眼仁的面積與預設區(qū)域的面積作比值得到面積比值。
若面積比值大于第一預設值,且朝向第一方向的眼位持續(xù)預設時間,則眼仁在眼眶中的位置為朝向第一方向的有效眼位。
示例性的,上述的控制模塊在當識別到眼仁在眼眶中的位置為有效眼位時,從車載設備中獲取與眼仁在眼眶中的位置對應的顯示信息具體用于:
當識別到眼仁在眼眶中的位置為朝向左視鏡方向的有效眼位時,從左攝像頭中獲取影像,左攝像頭用于安裝在車身外的左側(cè);和/或
當識別到眼仁在眼眶中的位置為朝向右視鏡方向的有效眼位時,從右攝像頭中獲取影像,右攝像頭用于安裝在車身外的右側(cè);和/或
當識別到眼仁在眼眶中的位置為正視前方的有效眼位時,從智能車機中獲取車輛基本信息,車輛基本信息包括車輛的時速、瞬時耗油以及發(fā)動機水溫中的至少一個;和/或
當識別到眼仁在眼眶中的位置為朝向智能車機方向的有效眼位時,獲取智能車機上顯示的圖標;和/或
當識別到眼仁在眼眶中的位置為朝向后視鏡方向的有效眼位時,獲取后視鏡上顯示的圖標。
示例性的,上述的AR裝置包括AR顯示器,為了能夠?qū)⒅悄苘嚈C以及后視鏡上的顯示信息準確完整到顯示到AR裝置上,當眼仁在眼眶中的位置為朝向智能車機方向或后視鏡方向的有效眼位時,上述的控制模塊在從車載設備中獲取與眼仁在眼眶中的位置對應的顯示信息,并顯示該顯示信息具體用于:
采用無線傳屏技術獲取智能車機或后視鏡上顯示的圖標。
將智能車機或后視鏡上顯示的圖標投射到AR裝置的AR顯示器上。
進一步的,由于現(xiàn)有技術中車載智能終端與用戶間的交互界面比較單一,基本都是平面的電子屏幕,駕駛員在該平面的電子屏幕上的操作會時,會比較繁瑣,從而影響駕駛員安全駕車。盡管一些智能車載終端上配備了語音控制,但是,該語音控制功能會因噪聲問題,在超過100公里/小時的時速時便會失效,仍然無法便捷操作平面的電子屏幕。為了解決由于語音控制功能回音噪聲問題失效,而無法便捷操作平面的電子屏幕,出現(xiàn)駕駛隱患的問題,上述的控制模塊還用于:
當車內(nèi)全息攝像頭檢測到有人手伸向智能車機或后視鏡時,在AR顯示器上顯示人體的3D虛擬人手,該3D虛擬人手與人體的真實人手的操作動作同步。
通過真實人手操控3D虛擬人手去觸碰AR顯示器上的圖標來執(zhí)行圖標對應的操作。
示例性的,當駕駛員出現(xiàn)疲勞駕駛時,為了保障駕駛員安全以及避免交通意外的發(fā)生,上述的控制模塊還用于:
當確定出眼仁的面積小于第二預設值時,則發(fā)出告警。
示例性的,為了能夠方便的使得AR裝置進行模式的切換,上述的控制模塊還用于:
當識別到眼仁在眼眶中的位置為有效眼位時,等待預設時間后,再去識別下一個有效眼位。
示例性的,上述的控制模塊可以通過判斷車輛熄火或AR裝置被摘下時,該與車載設備的互動過程結(jié)束或退出。
本發(fā)明實施例提供的AR裝置,相比于現(xiàn)有技術中由于智能車載終端與用戶間的交互較為單一,會出現(xiàn)安全隱患的問題,本方案通過識別到眼仁在眼眶中的位置為有效眼位時,從車載設備中獲取與該眼仁在眼眶中的位置對應的顯示信息,并顯示該顯示信息,這樣就無需人眼一直盯著車載設備,當前方出現(xiàn)緊急事件或車輛時,駕駛員仍然可以及時發(fā)現(xiàn),從而避免交通事故,保障安全駕駛。例如,當需要倒車時,駕駛員的眼睛僅需掃描一下智能車機,AR裝置識別到駕駛員的眼仁在眼眶中的位置為有效眼位時,從智能車機中獲取車輛后面的影像,并將該影像顯示出來,此時駕駛員無需一直盯著智能車機,在AR裝置上觀看車輛后方信息進行倒車的同時,還可以注意到車輛前方的信息,從而避免出現(xiàn)安全隱患的問題。
本發(fā)明實施例提供一種AR系統(tǒng),如圖10所示,該AR系統(tǒng)3包括:AR裝置31以及車載設備,該車載設備包括:智能車機32、后視鏡33、車身外左側(cè)攝像頭(左攝像頭)34、車身外右側(cè)攝像頭(右攝像頭)35以及車內(nèi)全息圖像攝像頭36。該AR裝置31的內(nèi)容具體參照上文的描述,這里不再贅述。
本發(fā)明實施例提供的AR系統(tǒng),基于五種固定眼位,實現(xiàn)駕駛員對車載設備操控的便捷操控,解決了現(xiàn)有各車載智能終端互聯(lián)互動方式單一,操作不便的問題,為車載設備未來發(fā)展方向提供了新思路、新方案、新技術,獲取駕駛員是否疲勞駕駛的信息,及時預警,使得駕駛員更加安全、舒適、便捷的體驗駕駛樂趣。
在本申請所提供的幾個實施例中,應該理解到,所揭露的AR裝置,可以通過其它的方式實現(xiàn)。例如,以上所描述的AR裝置的實施例僅僅是示意性的,例如,所述模塊的劃分,僅僅為一種邏輯功能劃分,實際實現(xiàn)時可以有另外的劃分方式,例如多個模塊或組件可以結(jié)合或者可以集成到另一個系統(tǒng),或一些特征可以忽略,或不執(zhí)行。另一點,所顯示或討論的相互之間的耦合或直接耦合或通信連接可以是通過一些接口,裝置或模塊的間接耦合或通信連接,可以是電性,機械或其它的形式。
所述作為分離部件說明的模塊可以是或者也可以不是物理上分開的,作為模塊顯示的部件可以是或者也可以不是物理單元,即可以位于一個地方,或者也可以分布到多個網(wǎng)絡單元上。可以根據(jù)實際的需要選擇其中的部分或者全部模塊來實現(xiàn)本實施例方案的目的。
另外,在本發(fā)明各個實施例中的各業(yè)務板可以集成在一個處理單元中,也可以是各個模塊單獨物理包括,也可以兩個或兩個以上模塊集成在一個單元中。上述集成的單元既可以采用硬件的形式實現(xiàn),也可以采用硬件加軟件業(yè)務板的形式實現(xiàn)。
上述以軟件業(yè)務板的形式實現(xiàn)的集成的單元,可以存儲在一個計算機可讀取存儲介質(zhì)中。上述軟件業(yè)務板存儲在一個存儲介質(zhì)中,包括若干指令用以使得一臺計算機設備(可以是個人計算機,服務器,或者網(wǎng)絡設備等)執(zhí)行本發(fā)明各個實施例所述方法的部分步驟。而前述的存儲介質(zhì)包括:U盤、移動硬盤、只讀存儲器(Read-Only Memory,簡稱ROM)、隨機存取存儲器(Random Access Memory,簡稱RAM)、磁碟或者光盤等各種可以存儲程序代碼的介質(zhì)。
最后應說明的是:以上實施例僅用以說明本發(fā)明的技術方案,而非對其限制;盡管參照前述實施例對本發(fā)明進行了詳細的說明,本領域的普通技術人員應當理解:其依然可以對前述各實施例所記載的技術方案進行修改,或者對其中部分技術特征進行等同替換;而這些修改或者替換,并不使相應技術方案的本質(zhì)脫離本發(fā)明各實施例技術方案的精神和范圍。