本發(fā)明涉及一種盲人導(dǎo)路器，尤其是一種基于計算機(jī)視覺、數(shù)字圖像處理、微電子技術(shù)的盲人導(dǎo)路器。

背景技術(shù)：

為盲人指路導(dǎo)航是一件很有意義的事情。早期的電子盲人導(dǎo)路器、導(dǎo)航儀等產(chǎn)品，大多采用超聲波測距、激光測距來等主動單線探測手段來檢測障礙物，準(zhǔn)確度比較低，視野狹小，適用范圍有限?，F(xiàn)有的基于圖像處理的盲人導(dǎo)路方案中，主要是對道路邊界的提取技術(shù)，基于對道路的邊界識別，或者通過圖像處理對路面狀況進(jìn)行判決，然后將判決結(jié)果換遞給盲人，而不是把圖像內(nèi)容以盲人可識別的方式直接傳遞給盲人，讓盲人自己來判別。如何將指示信息傳遞給盲人，多數(shù)方案中采用了聲音技術(shù)、振動以及機(jī)械觸覺。由于盲人主要依靠聽覺感知周圍環(huán)境，因此“導(dǎo)路器”采用聽覺則會占用盲人的聽覺通道，使他們難以感知周圍自然環(huán)境；而振動和其它機(jī)械觸覺（觸覺顯示）裝置則耗電量較大。如中國專利公開號 CN201610513329.7，公開了一種用于人體佩戴的具有紅外全景深感知功能的導(dǎo)盲帽，該導(dǎo)盲帽采用立體圖像采集、視差計算、并采用主動紅外照明，以及微型電磁鐵控制觸點撞針結(jié)構(gòu)。

技術(shù)實現(xiàn)要素：

本發(fā)明提出一款基于立體視覺和電致觸覺陣列的盲人導(dǎo)路器，該導(dǎo)路器采用低功耗的微處理器，微處理器利用同步雙目攝像頭實時采集視頻圖像對，對左右兩個圖像進(jìn)行旋轉(zhuǎn)變換（以消除攝像機(jī)旋轉(zhuǎn)帶來的影響）和立體校正，然后通過立體視覺算法計算出畫面中各個像素的視差，形成視差圖，并根據(jù)視差圖的數(shù)值的分布情況作出不同處理：（1）當(dāng)視差全部接近0值時，將左右原始圖像進(jìn)行融合，并計算融合圖像中的邊緣信息，形成“邊緣圖”，最后通過掃描控制軟件模塊將邊緣圖直接呈現(xiàn)在“電致觸覺陣列”上，使盲人感知到圖像中的邊緣信息分布；（2）當(dāng)視差不全部接近0值時，則通過掃描控制軟件模塊將視差圖直接呈現(xiàn)在“電致觸覺陣列”上，從而讓盲人感知到視差圖的內(nèi)容分布。

為實現(xiàn)上述目的，本發(fā)明的技術(shù)方案是：一種基于立體視覺和電致觸覺陣列的盲人導(dǎo)路器，佩戴在盲人身體上，包括雙目微型攝像頭、微處理器、電致觸覺陣列、傾角傳感器，所述微處理器信號輸入端連接雙目微型攝像頭和傾角傳感器，輸出端連接電致觸覺陣列，所述微處理器通過同步雙目攝像頭實時采集左、右圖像視頻圖像，并經(jīng)過濾波、圖像校正，并計算出視差圖和對校正后的圖像進(jìn)行邊緣計算，得到邊緣圖像；所述微處理器依據(jù)傾角傳感器的數(shù)據(jù)，對選擇的圖像進(jìn)行旋轉(zhuǎn)變換，并將旋轉(zhuǎn)后的圖像經(jīng)由掃描控制模塊傳送到電致觸覺陣列上，使盲人用戶的皮膚得到刺激，感受到圖像的內(nèi)容。

所述微處理器包括預(yù)處理、邊緣計算、視差計算、視差圖分析、圖像選擇、圖像變換、掃描控制模塊；所述視差圖分析模塊對視差圖進(jìn)行分析，分析的結(jié)果用來控制圖像選擇，如果視差圖的全部像素都接近0值，則選擇原始圖像，否則選擇視差圖。

所述雙目微型攝像頭和微處理器部分作為一個整體持在盲人手中、或者佩戴在額頭部位，所述電致觸覺陣列采用電刺激的方式，制作成薄膜電路或柔性電路，貼于盲人手掌背面、或者胳膊皮膚上、或者肚皮上、或者后背皮膚上。

所述薄膜電路上分布有電極，電極呈矩形陣列排布，電極與微處理器相連，微處理器通過程序產(chǎn)生電脈沖，依次掃描作用在電極上。

所述盲人導(dǎo)路器的供電采用鋰離子電池便攜電源；并附加有聲音、震動器，用于輔助提示信息。

本發(fā)明的有益效果是：本發(fā)明的導(dǎo)路器采用低功耗的微處理器，微處理器利用同步雙目攝像頭實時采集視頻圖像對，對左右兩個圖像進(jìn)行旋轉(zhuǎn)變換（以消除攝像機(jī)旋轉(zhuǎn)帶來的影響）和立體校正，然后通過立體視覺算法計算出畫面中各個像素的視差，形成視差圖，并根據(jù)視差圖的數(shù)值的分布情況作出不同處理：（1）當(dāng)視差全部接近0值時，將左右原始圖像進(jìn)行融合，并計算融合圖像中的邊緣信息，形成“邊緣圖”，最后通過掃描控制軟件模塊將邊緣圖直接呈現(xiàn)在“電致觸覺陣列”上，使盲人感知到圖像中的邊緣信息分布；（2）當(dāng)視差不全部接近0值時，則通過掃描控制軟件模塊將視差圖直接呈現(xiàn)在“電致觸覺陣列”上，從而讓盲人感知到視差圖的內(nèi)容分布。

本發(fā)明與現(xiàn)有技術(shù)相比，僅利用自然光圖像；支持兩種圖像模式，即深度圖像觸覺顯示和自然圖像觸覺顯示，可在兩者之間可以自動切換；采用“電致觸覺陣列”，通過電刺激直接作用于皮膚細(xì)胞以產(chǎn)生觸覺效果，而非電磁機(jī)械裝置。

附圖說明

圖1為本發(fā)明的基于立體視覺和電致觸覺陣列的盲人導(dǎo)路器工作原理圖。

具體實施方式

下面結(jié)構(gòu)附圖與實施例對本發(fā)明作進(jìn)一步說明，但不限于這里列出的具體器件型號和參數(shù)。軟件模塊的算法也可選擇其它同類作用的算法。

如圖1所示，一種基于立體視覺和電致觸覺陣列的盲人導(dǎo)路器，包括雙目微型攝像頭、微處理器、電致觸覺陣列、傾角傳感器。微處理器信號輸入端連接雙目微型攝像頭和傾角傳感器，輸出端連接電致觸覺陣列，所述微處理器通過同步雙目攝像頭實時采集左、右圖像視頻圖像，并經(jīng)過濾波、圖像校正，并計算出視差圖和對校正后的圖像進(jìn)行邊緣計算，得到邊緣圖像；所述微處理器依據(jù)傾角傳感器的數(shù)據(jù)，對選擇的圖像進(jìn)行旋轉(zhuǎn)變換，并將旋轉(zhuǎn)后的圖像經(jīng)由掃描控制模塊傳送到電致觸覺陣列上，使盲人用戶的皮膚得到刺激，感受到圖像的內(nèi)容。

本發(fā)明的盲人導(dǎo)路器采用便攜電源（例如電池）供電，整個系統(tǒng)可“分體式”佩帶在盲人身體上的適當(dāng)部位。本發(fā)明的組成和工作原理詳細(xì)描述如下：

（1）預(yù)先對雙目攝像頭的參數(shù)予以標(biāo)定，并存儲參數(shù)；

（2）微處理器通過雙目攝像頭實時采集彩色立體圖像對，做適當(dāng)?shù)念A(yù)處理，并依據(jù)攝像頭的標(biāo)定參數(shù)對圖像對進(jìn)行立體校正；

（3）依據(jù)視差算法，微處理器中的視差計算軟件依據(jù)校正后的“立體圖像對”計算出視差圖；

（4）對原始圖像進(jìn)行邊緣檢測，得到邊緣圖；

（5）微處理器分析視差圖的數(shù)值分布情況，分析得結(jié)果作為圖像選擇的控制依據(jù)；

（6）如果視差圖的像素值不是全部接近0，則選擇視差圖，否則選擇邊緣圖；

（7）根據(jù)攝像頭的傾角，對選擇的圖像進(jìn)行旋轉(zhuǎn)變換，以校正攝像頭在使用過程中受到被動旋轉(zhuǎn)所帶來的影響。

（8）旋轉(zhuǎn)變換后的圖像經(jīng)由掃描控制模塊轉(zhuǎn)換成電致觸覺陣列的輸入掃描信號，從而將視差圖呈現(xiàn)到電致觸覺陣列上，讓盲人通過皮膚感知到視差圖的內(nèi)容。

其中，電致觸覺陣列采用電刺激的方式。即制作成薄膜電路（或其他材質(zhì)的柔性電路） ，貼在盲人的皮膚上。薄膜電路上分布有一定數(shù)量的電極，它們呈矩形陣列排布，電極與微處理器相連。微處理器通過程序產(chǎn)生電脈沖，依次掃描作用在電極上。電致觸覺陣列的作用相當(dāng)于一個觸覺顯示器。

該發(fā)明盲人導(dǎo)路器可以佩戴在盲人身體上來，攝像頭和微處理器部分可以作為一個整體持在手中、或者佩戴在額頭等部位，而電致觸覺陣列則需要貼于手掌背面、或者胳膊皮膚上、或者肚皮上、或者后背皮膚上等部位。該盲人導(dǎo)路器的供電可采用鋰離子電池等大容量小體積的便攜電源。該盲人導(dǎo)路器可附加采用聲音、震動等輔助提示信息。攝像頭采用全局快門的攝像頭，以提高圖像質(zhì)量。電致觸覺陣列采用薄膜電路、圓形電極陣列，根據(jù)電脈沖的頻率、占空比、猝發(fā)結(jié)構(gòu)、電壓等級等方面的控制，使得皮膚感知到應(yīng)有的觸覺效果。

微處理器中的軟件包括預(yù)處理、邊緣計算、視差計算、視差圖分析、圖像選擇、圖像變換、掃描控制等模塊。雙攝像機(jī)同步拍攝的左、右圖像送入微處理器，并經(jīng)過預(yù)處理（濾波、圖像校正等），然后計算出視差圖；同時對校正后的圖像進(jìn)行邊緣計算，得到邊緣圖像。對視差圖進(jìn)行分析，分析的結(jié)果用來控制圖像選擇，如果視差圖的全部像素都接近0值，則選擇原始圖像，否則選擇視差圖。依據(jù)傾角傳感器的數(shù)據(jù)，對選擇的圖像進(jìn)行旋轉(zhuǎn)變換，然后將旋轉(zhuǎn)后的圖像經(jīng)由掃描控制模塊傳送到“電致觸覺陣列”上，使用戶的皮膚得到刺激，感受到圖像的內(nèi)容。

微處理器采用低功耗的產(chǎn)品，例如STM32F7系列，并利用其DCMI接口以實時幀率采集視頻圖像，圖像格式采用176x144 YUV格式。攝像機(jī)的校正參數(shù)和校正矩陣預(yù)先存儲在片內(nèi)Flash中。采用邊緣保持濾波算法對圖像作濾噪處理，并依據(jù)攝像機(jī)參數(shù)和校正矩陣對圖像進(jìn)行立體校正。對校正后的圖像進(jìn)行視差計算和邊緣計算，生成視差圖和邊緣圖，根據(jù)視差圖的數(shù)值分布情況選擇視差圖或者邊緣圖作為后續(xù)處理對象。選擇的圖像經(jīng)過傾角校正，作為結(jié)果圖像，最后經(jīng)由掃描控制模塊輸出到電致觸覺陣列，刺激皮膚，感知圖像內(nèi)容，由用戶自己通過感知的圖像來判斷應(yīng)該往哪個方向走。