專利名稱:一種智能手機導盲器及導盲方法
技術領域:
本發(fā)明涉及一種導盲器技術,尤其是涉及一種手機嵌入式系統(tǒng)控制的導盲器技術 及導盲方法
背景技術:
眾所周知,手機已經(jīng)是人們生活中必不可少的電子產(chǎn)品。隨著嵌入式處理器處理 能力的不斷強大,機器視覺技術、傳感器技術、無線傳輸技術和人工智能技術得以在手機硬 件平臺上的結合,使得智能手機開發(fā)出很多的高級功能和應用來更好的滿足人們生活的需 求。利用新的技術,給殘障人士開發(fā)助殘產(chǎn)品是一個具有潛在發(fā)展?jié)摿Φ漠a(chǎn)業(yè)。據(jù) 2005年的統(tǒng)計顯示,中國是世界上盲人最多的國家,約有盲人500萬,占世界盲人總數(shù)的 18%。我們每年會出現(xiàn)新盲人大約45萬,即每分鐘就會出現(xiàn)1個盲人。人類70 %的信息都是通過視覺來獲取的,所以盲人是殘疾人中最痛苦的,也是最 需要幫助的。盲人獨立行走一般需要導盲器的協(xié)助,傳統(tǒng)的方法是利用導盲杖或者是訓練 導盲犬,電子類的導盲器一般是采用超聲波、紅外線探頭等回波測距的原理來設計的,也有 利用圖像傳感器和激光測距方法來進行對障礙物的測距。導盲杖是用它在地面上敲擊,可幫助盲人發(fā)現(xiàn)0.5米以內(nèi)的障礙物。它的主要缺 點是不能發(fā)現(xiàn)較遠一點的障礙物以及空中突出的障礙物。也無法識別交通標志。超聲波導盲器是利用超聲波回聲的時間差原理來實現(xiàn)測距。
圖1是一種超聲波導 盲器。這種方法可以較準確的探測前方障礙物離人的距離,但是因為探頭只能對某個方向 的上的障礙物進行測距,所以如果要全部前方空間的探測則需要安裝多路探頭,使得設備 結構復雜,成本增加。而且,超聲波導盲器也無法識別障礙為何種物體,也無法識別交通標
ο紅外線導盲器是另外一種利用回波測距方法探測距離的儀器。圖2是紅外線測距 方法的設計圖。他的原理是根據(jù)發(fā)射波與返回波強度的差別判斷距離的遠近。同樣,這種 方法受到探頭探測方向性的限制,對于識別物體和交通標志方面存在功能缺陷。激光測距類的產(chǎn)品,是利用激光三角測距的原理設計的。因此環(huán)境的影響對該種 方法的干擾較大,對于識別物體和交通標志方面也存在功能缺陷。用機器視覺和人工智能技術的方法是解決導盲器技術問題的新突破。專利公開 號為CN 1969781A的發(fā)明專利公開了一種利用計算機控制的導盲器,該發(fā)明利用多種傳感 器技術的結合(包括了圖像和超聲波傳感器)進行前方空間的探測,可以進行對物體的識 別和距離的判斷。但是,利用便攜式計算機做導盲器的成本高,而且用機器視覺實現(xiàn)人工智 能需要積累龐大的后臺數(shù)據(jù)庫,該發(fā)明利用計算機本地數(shù)據(jù)庫對于不同的地理位置和復雜 環(huán)境的應對方案存在不足,當盲人需要在更大范圍和新環(huán)境中活動的導盲器的適應能力有 限。圖像處理技術在手機硬件平臺上實現(xiàn),也可以作為導盲的解決辦法。專利公開號為CN 101227539A的發(fā)明專利公開了一種導盲手機及其方法,其特點在于利用手機的嵌入式處理器作為基帶模塊進行運載平臺,然后結合了距離、溫度、震動傳感器進行信息的獲 取。但是普通手機一般是沒有紅外、激光等距離傳感器,也沒有溫度傳感器。所以,要實現(xiàn) 導盲需要在現(xiàn)有手機上加裝新設備,成本增加。而且該發(fā)明專利同樣適用了本地數(shù)據(jù)庫,而 手機的存儲容量相當有限,不利于“障礙”數(shù)據(jù)的可增長性積累,因此程序的環(huán)境適應性開 發(fā)潛力有限。國外的類似產(chǎn)品向著服務機器人的方向發(fā)展,如此采用了復雜的機械結構和控制 軟件,使得機器人的成本提高,產(chǎn)品難以得到推廣。
發(fā)明內(nèi)容
本發(fā)明針對現(xiàn)有的導盲器技術存在的不足與缺點,提供了一種設備通用,成本低 廉,具有功能擴展和升級性的手機智能導盲器。一種手機智能導盲器,包括手機攝像模塊、手機嵌入式處理器和應用軟件模塊、手 機無線信號發(fā)射及接收模塊、輸入與輸出交互模塊和后臺服務器。所述的手機攝像模塊,用于圖像的采集,利用光學系統(tǒng)獲成像原理取距離信息;所述的手機嵌入式處理器和軟件模塊,用于圖像的處理、導盲的實現(xiàn)和手機硬件 控制;所述的手機無線信號發(fā)射及接收模塊,用于與后臺服務器通信,進行圖像和障礙 參數(shù)的傳遞;所述的后臺服務器,用于運行“地圖”和“障礙”兩個數(shù)據(jù)庫,并保存海量的“環(huán)境 圖像”數(shù)據(jù)。所述的手機攝像模塊包括一個手機攝像鏡頭和圖像傳感器,手機攝像鏡頭為標準 鏡頭,圖像傳感器感光器件為手機自帶的CM0S、CCM或者CCD感光器件。手機攝像頭朝人行 走的前方拍攝,光軸與水平方向成一定傾角,傾角角度在30° 90°之間,利用攝影光學 系統(tǒng)的幾何原理來測算空間距離。所述的嵌入式處理器和應用軟件模塊,包括手機的嵌入式處理器和嵌入式操作系 統(tǒng)以及運行在嵌入式系統(tǒng)上的應用軟件。利用手機的嵌入式系統(tǒng)對手機攝像模塊、手機無 線信號發(fā)射及接收模塊、輸入與輸出交互模塊的硬件進行分配和控制;所述的應用軟件,包 括語音識別軟件和導盲軟件,以及通過手機無線信號發(fā)射接收模塊與導盲軟件連接的地圖 數(shù)據(jù)庫和障礙數(shù)據(jù)庫,這兩個數(shù)據(jù)庫都運行在后臺的服務器上。所述的導盲軟件是本發(fā)明的核心技術,它的工作原理是讀入手機攝像模塊采集到 的數(shù)字圖像,對圖像信息進行分析,分析的內(nèi)容包括了視頻中的運動目標,障礙物的顏色特 征,輪廓特征,紋理特征,空間位置。將分析結果與當前從“障礙”數(shù)據(jù)庫中獲得的“障礙參 數(shù)”做比較,當障礙物進入預設的預警區(qū)間(約2m)內(nèi),發(fā)出指令提示盲人止步。人與障礙 物間的距離滿足以下函數(shù)關系
權利要求
一種智能手機導盲器,包括手機攝像模塊、手機嵌入式處理器和應用軟件模塊、手機無線信號發(fā)射及接收模塊、輸入與輸出交互模塊和后臺服務器,其特征在于所述的手機攝像模塊,用于圖像的采集,利用光學系統(tǒng)成像原理獲取距離信息;所述的手機嵌入式處理器和軟件模塊,用于圖像的處理、導盲的實現(xiàn)和手機硬件控制;所述的手機無線信號發(fā)射及接收模塊,用于與后臺服務器通信,進行圖像和障礙參數(shù)的傳遞;所述的輸入與輸出交互模塊,用于獲取由人發(fā)出的控制命令并將機器的智能導盲指令傳遞給人,實現(xiàn)人機交互;所述的后臺服務器,用于運行“地圖”和“障礙”兩個數(shù)據(jù)庫,并保存海量的“環(huán)境圖像”數(shù)據(jù)。
2.如權利要求1所述的智能手機導盲器,其特征在于所述的手機攝像模塊包括一個 手機攝像鏡頭和圖像傳感器。
3.如權利要求1所述的智能手機導盲器,其特征在于所述的嵌入式處理器和應用軟 件模塊,包括手機的嵌入式處理器和嵌入式操作系統(tǒng)以及運行在操作系統(tǒng)上的應用軟件, 所述的嵌入式系統(tǒng)對手機攝像模塊、手機無線信號發(fā)射及接收模塊、輸入與輸出交互模塊 的硬件資源進行分配和控制;所述的應用軟件,包括語音識別軟件和導盲軟件,以及通過手 機無線信號發(fā)射接收模塊與導盲軟件連接的地圖數(shù)據(jù)庫和障礙數(shù)據(jù)庫,這兩個數(shù)據(jù)庫都運 行在后臺的服務器上。
4.如權利要求2所述的智能手機導盲器,其特征在于所述的導盲軟件為讀入手機攝 像模塊采集到的數(shù)字圖像,對圖像信息進行分析,將分析結果與當前從“障礙”數(shù)據(jù)庫中獲 得的“障礙參數(shù)”做比較,當障礙物進入預設的預警區(qū)間內(nèi),發(fā)出指示提示盲人止步。
5.如權利要求4所述的智能手機導盲器,其特征在于所述的圖像信息包括視頻中的 運動目標、障礙物的顏色特征、輪廓特征、紋理特征和空間位置。
6.如權利要求4所述的智能手機導盲器,其特征在于所述的“障礙參數(shù)”包括特征物 體的顏色特征區(qū)間,輪廓特征參數(shù),紋理特征參數(shù)。
7.如權利要求1所述的智能手機導盲器,其特征在于所述的無線信號發(fā)射及接受模 塊,利用GSM、GPRS、CDMA等手機通信網(wǎng)絡向后臺服務器發(fā)送GPS或LBS定位位置和“現(xiàn)場 圖像”,并接受后臺服務器發(fā)送的“障礙參數(shù)”響應。
8.如權利要求1所述的智能手機導盲器,其特征在于所述的輸入與輸出交互模塊包 括輸入設備與輸出設備,輸入設備包括手機語音話筒,手機鍵盤和手機加速度傳感器,利用 手機按鍵輸入和自然語言輸入實現(xiàn)對軟件的控制,加速度傳感器對重力加速度的感應判斷 手機攝像頭的光軸傾角;輸出設備包括手機耳機,手機振動電機,手機耳機用于播放導盲軟 件編輯產(chǎn)生的語音指令,手機振動電機在如果距離障礙物太近時,發(fā)出振動信號提示盲人 止步。
9.一種根據(jù)權利1-8任一權利要求所述的智能手機導盲器的導盲方法,包括(1)手機攝像頭拍攝前方圖像,對圖像檢測運動物體和識別靜態(tài)物體,動態(tài)物體的檢測 用前后兩幀圖像的差別,靜態(tài)物體識別通過與后臺“障礙數(shù)據(jù)庫”的模式匹配;(2)監(jiān)測到運動物體跟蹤其運動軌跡,向盲人提示報警;識別出靜態(tài)物體測算出預警區(qū)間,當靜態(tài)物體在預警區(qū)間外時,不提示報警,如果近于預警區(qū)間,向盲人振動發(fā)出報 警;(3)再根據(jù)障礙物在圖像中的位置判斷出障礙物在空間中的位置。最后,編輯和輸出語 音提示,告知盲人下一步行走方向;(4)如果加速度傳感器測得角度傾角高于90°,進入交通信號燈和其他指示性標志的 識別,并且編輯輸出相應的語音指令。
全文摘要
本發(fā)明公開一種智能手機導盲器,包括手機攝像模塊、手機嵌入式處理器和軟件模塊、手機無線信號發(fā)射及接收模塊、輸入與輸出交互模塊和后臺服務器,手機攝像模塊包括一個手機攝像鏡頭和圖像傳感器;嵌入式處理器和軟件模塊包括手機的嵌入式處理器和嵌入式操作系統(tǒng)以及運行在嵌入式系統(tǒng)上的應用軟件;應用軟件為導盲軟件,通過機器視覺的技術采集到的圖像進行特征分析,利用人工智能的技術將“現(xiàn)場圖像”的特征和后臺數(shù)據(jù)庫中的“障礙參數(shù)”進行匹配,可以實現(xiàn)對障礙物的識別,位置判讀,并用語音和振動的方式提示盲人行進。本發(fā)明的導盲器設備通用,成本低廉,具有功能擴展和升級性的手機智能導盲器。
文檔編號A61H3/06GK101986673SQ20101027183
公開日2011年3月16日 申請日期2010年9月3日 優(yōu)先權日2010年9月3日
發(fā)明者岑兆豐, 張歡, 李曉彤, 楊泱, 王曉萍, 趙鼎, 陳立 申請人:浙江大學