專利名稱：全向立體視覺成像裝置的制作方法
技術(shù)領(lǐng)域：
本實(shí)用新型涉及成像技術(shù)，具體地說是一種全向立體視覺成像裝置。
背景技術(shù)：
移動(dòng)機(jī)器人的應(yīng)用領(lǐng)域越來越廣泛，應(yīng)用領(lǐng)域的拓展要求其具有越來越高的智能，要求其能自主的巡游和避障。對(duì)此人們提出了基于超聲波、紅外、激光雷達(dá)、常規(guī)CCD相機(jī)等各種傳感器在內(nèi)的定位和導(dǎo)航及避障技術(shù)。超聲傳感器價(jià)格便宜，但其探測(cè)波束角過大，分辨力受到嚴(yán)重的限制，方向性差；紅外的有效探測(cè)范圍太近，遠(yuǎn)不能滿足自然場(chǎng)景中機(jī)器人探測(cè)障礙的要求；激光雷達(dá)探測(cè)距離遠(yuǎn)，精度高，但容易受噪聲影響且價(jià)格昂貴，相對(duì)于以上外部導(dǎo)航傳感器，立體視覺具有本身不發(fā)出光及其他輻射源的特性，隱蔽性好，獲取周圍場(chǎng)景的信息豐富，測(cè)量快速準(zhǔn)確。但常規(guī)鏡頭的視場(chǎng)角較小(約23°左右)，只能獲取有限視野的局部信息，而且在深度對(duì)應(yīng)性求解時(shí)，立體視覺的有效檢測(cè)區(qū)域?yàn)槎€(gè)相機(jī)視野的公共部分，由于視場(chǎng)角限制，系統(tǒng)中一個(gè)相機(jī)參考圖像中的某些點(diǎn)未必能被其他相機(jī)拍攝，造成匹配問題的退化。且公共視野區(qū)的狹小使視覺導(dǎo)航系統(tǒng)的靈活性和魯幫性降低，盡管可以通過增加云臺(tái)等機(jī)械裝置來彌補(bǔ)這一缺陷，但這在增加了系統(tǒng)的復(fù)雜性的同時(shí)還降低了實(shí)時(shí)性。
當(dāng)前獲取全向立體視覺大致通過三種途徑旋轉(zhuǎn)成像和多攝像機(jī)成像、魚眼鏡頭成像和折反射全向成像。
(1)旋轉(zhuǎn)成像和多攝像機(jī)成像旋轉(zhuǎn)成像是相機(jī)繞通過其光心的軸旋轉(zhuǎn)，在旋轉(zhuǎn)的各個(gè)角度拍攝多幅圖像，再將這些圖像進(jìn)行拼接或者重采樣，從而得到全景圖像。通過對(duì)旋轉(zhuǎn)中不同位置拍攝的圖像尋找對(duì)應(yīng)點(diǎn)，進(jìn)行深度恢復(fù)。這種成像方式需要精確的旋轉(zhuǎn)運(yùn)動(dòng)控制部件或復(fù)雜的算法，且旋轉(zhuǎn)一周需要較長(zhǎng)時(shí)間，因此不適用于視覺導(dǎo)航等有實(shí)時(shí)性要求的工作。
多攝像機(jī)成像則是采用朝向各個(gè)方向的多個(gè)相機(jī)來實(shí)現(xiàn)全向成像，將多個(gè)相機(jī)同時(shí)拍攝的圖像進(jìn)行融合，生成全景圖像。該成像系統(tǒng)若要滿足單視點(diǎn)約束，各個(gè)攝像機(jī)的光學(xué)中心必須重合。實(shí)際上由于各個(gè)相機(jī)的物理特性限制，安裝中不同相機(jī)的光學(xué)中心不可能重合。而且這種成像方式成本高，系統(tǒng)復(fù)雜。
(2)魚眼鏡頭成像魚眼鏡頭具有很短的焦距(f＜3mm)，這使攝像機(jī)能夠觀察到接近半球面內(nèi)的物體，視場(chǎng)角接近180°。但這種成像存在較大的圖像畸變；且其畸變模型不滿足透視投影條件，無法從所獲取的圖像中映射出無畸變的透視投影圖像；同時(shí)視場(chǎng)角越大，光學(xué)系統(tǒng)越復(fù)雜，造價(jià)越昂貴，同時(shí)視場(chǎng)角變彎，物像對(duì)應(yīng)關(guān)系復(fù)雜，補(bǔ)償困難。對(duì)于大視場(chǎng)立體視覺，這種系統(tǒng)和方法(1)存在的一個(gè)共同問題是都難以滿足單視點(diǎn)約束。且該方法成像區(qū)域到所要求的全向成像仍有一定的差距，而且在用于全景成像時(shí)，其高分辨率區(qū)域往往是不重要的區(qū)域，比如天空或攝像機(jī)支架本身。
(3)折反射全向成像系統(tǒng)用普通相機(jī)和曲面反射鏡面制作的折反射全向成像系統(tǒng)能夠?qū)崟r(shí)獲取水平方向360°和垂直方向一定角度的全向圖像。若采用符合單視點(diǎn)約束的雙曲面反射鏡或拋物面反射鏡，則滿足透視投影成像模型條件的系統(tǒng)容易進(jìn)行系統(tǒng)標(biāo)定、圖像分析和處理，實(shí)現(xiàn)對(duì)圖像或圖像序列的定量操作。現(xiàn)有的此類全向立體視覺裝置主要有兩種I、通過安裝在機(jī)器人上的單個(gè)雙曲面反射鏡用序列實(shí)現(xiàn)多基線立體視覺，即其立體圖對(duì)通過機(jī)器人的運(yùn)動(dòng)來獲取。此類方法需要機(jī)器人裝有精確的碼盤等內(nèi)部導(dǎo)航傳感器，且只適用于平整的地面等理想情況，不適用于各種環(huán)境下移動(dòng)機(jī)器人的避障和導(dǎo)航。II、兩個(gè)普通相機(jī)和兩反射鏡組成的系統(tǒng)①水平基線的全向立體視覺系統(tǒng)，可對(duì)機(jī)器人前后的障礙物進(jìn)行檢測(cè)，立體視覺的測(cè)量精度很不均勻，而且由于系統(tǒng)本身的遮擋對(duì)兩側(cè)場(chǎng)景不能進(jìn)行感知，全向圖像的外極線是二次曲線，對(duì)應(yīng)點(diǎn)計(jì)算復(fù)雜；②垂直基線的全向立體視覺系統(tǒng)，把兩個(gè)攝像機(jī)上下共軸放置，此時(shí)外極線成為一系列放射線，全向圖像(Omnidirectional image)被投影成全景圖像(Panoramic image)后，外極線成為一系列垂直平行線，對(duì)應(yīng)點(diǎn)的計(jì)算簡(jiǎn)化為在垂直的像素點(diǎn)中尋找。這種配置仍不能根本解決攝像機(jī)之間的相互遮擋問題。
實(shí)用新型內(nèi)容為了克服上述不足，本實(shí)用新型的目的是提供一種具有結(jié)構(gòu)和計(jì)算簡(jiǎn)單、對(duì)應(yīng)點(diǎn)匹配容易、精度和實(shí)時(shí)性高、系統(tǒng)成像無遮擋的全向立體視覺成像裝置。
為了實(shí)現(xiàn)上述目的，本實(shí)用新型的技術(shù)方案包括兩個(gè)雙曲反射鏡面，普通透視相機(jī)，透明管，兩雙曲反射鏡面直徑相同，同軸固定于一個(gè)透明管內(nèi)，相機(jī)鏡頭的光心和兩個(gè)雙曲反射鏡面的共同焦點(diǎn)重合，相機(jī)鏡頭的光軸和兩個(gè)雙曲反射鏡面的共同對(duì)稱軸共線，接近相機(jī)的雙曲反射鏡面中間設(shè)有孔，遠(yuǎn)離相機(jī)的雙曲反射鏡面通過接近相機(jī)的雙曲反射鏡面中間的孔使周圍環(huán)境在相機(jī)像平面上成像。
為消除透明管的散射，在兩雙曲反射鏡面的對(duì)稱軸上安裝一針狀物；所述針狀物為黑色、不變形、長(zhǎng)細(xì)狀的針狀物。
與現(xiàn)有技術(shù)相比，本實(shí)用新型更具有如下優(yōu)點(diǎn)
1.系統(tǒng)結(jié)構(gòu)和計(jì)算簡(jiǎn)單。本實(shí)用新型只使用一個(gè)相機(jī)，降低了相同的復(fù)雜性。系統(tǒng)配置相機(jī)的光心與兩個(gè)雙曲面鏡的共同焦點(diǎn)重合，幾何計(jì)算非常簡(jiǎn)單。
2.精度高。本實(shí)用新型使兩鏡面間隔較大的距離，系統(tǒng)的基線長(zhǎng)度從現(xiàn)有類似系統(tǒng)的十幾毫米提高到兩百多毫米，這樣做極大的提高了系統(tǒng)的精度。
3.對(duì)應(yīng)點(diǎn)匹配容易。此配置使系統(tǒng)的外極線成為一系列放射線，對(duì)應(yīng)點(diǎn)的計(jì)算簡(jiǎn)化為在一條直線的像素點(diǎn)中尋找，且通過上下鏡面的成像范圍等其他約束可進(jìn)一步把尋找的區(qū)域縮小為長(zhǎng)度很短的一段線段內(nèi)。
4.實(shí)時(shí)性高。由于系統(tǒng)的結(jié)構(gòu)和幾何計(jì)算簡(jiǎn)單，對(duì)應(yīng)點(diǎn)匹配容易，極大的減輕了系統(tǒng)的計(jì)算負(fù)擔(dān)，提高了系統(tǒng)的實(shí)時(shí)性。
5.系統(tǒng)成像無遮擋。現(xiàn)有的用兩個(gè)相機(jī)實(shí)現(xiàn)全向立體視覺的系統(tǒng)中，水平基線配置由于全向相機(jī)的互相遮擋，不能獲取機(jī)器人兩側(cè)區(qū)域的深度信息；垂直基線的配置由于上面相機(jī)的支架、電源和數(shù)據(jù)線對(duì)下面相機(jī)的遮擋，下面相機(jī)所獲取的圖像有相當(dāng)大的區(qū)域是無用的信息。
6.應(yīng)用范圍廣。采用本實(shí)用新型能在使移動(dòng)機(jī)器人有效的探測(cè)四周的障礙物的同時(shí)獲取周圍場(chǎng)景的深度信息，可用于各種環(huán)境下移動(dòng)機(jī)器人導(dǎo)航，亦可用于視頻監(jiān)控和三維重建等要求快速和實(shí)時(shí)計(jì)算的工作。


圖1本實(shí)用新型系統(tǒng)原理示意圖。
圖2是雙曲反射鏡面及相機(jī)配置圖。
圖3本實(shí)用新型系統(tǒng)結(jié)構(gòu)示意圖。
圖4為本發(fā)明實(shí)施例2系統(tǒng)結(jié)構(gòu)示意圖。
圖5為本發(fā)明系統(tǒng)基線原理示意圖。
具體實(shí)施方式
以下結(jié)合附圖和實(shí)施例對(duì)本實(shí)用新型作進(jìn)一步詳細(xì)說明。
實(shí)施例1如圖3所示，本實(shí)用新型系統(tǒng)硬件包括兩個(gè)雙曲反射面鏡(圖中1為位于上面的雙曲反射鏡面，2為位于下面的雙曲反射鏡面)，和一個(gè)普通針孔透視相機(jī)3和透明管組成，所述兩雙曲反射鏡面直徑相同，上下布置，同軸固定于一個(gè)透明玻璃管內(nèi)，相機(jī)鏡頭的光心和兩個(gè)雙曲反射鏡面的共同焦點(diǎn)重合，相機(jī)鏡頭的光軸和兩個(gè)雙曲反射鏡面的共同對(duì)稱軸共線，接近相機(jī)的雙曲反射鏡面中間設(shè)有孔4，遠(yuǎn)離相機(jī)的雙曲反射鏡面通過接近相機(jī)的雙曲反射鏡面中間的孔4使周圍環(huán)境在相機(jī)3像平面上成像；本實(shí)施例所述兩曲反射鏡面間隔距離為204mm(該段距離等效于系統(tǒng)的基線；基線長(zhǎng)度定義如圖5所示，空間中一點(diǎn)P分別經(jīng)兩反射鏡面成虛像P1、P2，兩反射鏡面對(duì)成像的空間點(diǎn)來說相當(dāng)于兩個(gè)虛擬相機(jī)，兩虛擬相機(jī)光心之間的距離1即是由此兩虛擬相機(jī)組成的雙目立體視覺系統(tǒng)的基線長(zhǎng)度)。
本實(shí)用新型原理如下以相機(jī)的光心為坐標(biāo)原點(diǎn)O，以光軸的方向?yàn)閦軸，定義相機(jī)像平面的兩個(gè)方向u，v分別為x軸和y軸，參見圖1和圖2。由于系統(tǒng)的對(duì)稱性，系統(tǒng)模型可簡(jiǎn)化為在二維平面上討論，以光軸的方向?yàn)閦軸，定義相機(jī)像平面上的一直線為r軸，則r軸和z軸相垂直，兩雙曲反射鏡面的鏡面方程可以寫為(z-c)2a2-r2b2=1;]]>其中a分為aa、ab；b分為ba、bb；c分為ca，cb；aa，ab為兩雙曲反射鏡面的二分之一實(shí)軸；ba，bb為兩雙曲反射鏡面的二分之一虛軸；ca，cb為兩雙曲反射鏡面的二分之一焦距，aa，ab，ba，bb，ca，cb的值可根據(jù)移動(dòng)機(jī)器人檢測(cè)障礙和導(dǎo)航的范圍確定。空間中的一點(diǎn)P(r，z)通過兩雙曲反射鏡面的反射分別在相機(jī)像平面上成像于Pa(ua，-f)和Pb(ub，-f)，連接pa、pb和坐標(biāo)原點(diǎn)O(0，0)的直線分別和上下設(shè)置的雙曲反射鏡面相交于Ma(ra，za)、Mb(rb，zb)，由于兩雙曲反射鏡面的方程和焦點(diǎn)坐標(biāo)Fa(0，2ca)、Fb(0，2cb)已知，則直線FaMa、FbMb的方程可以以兩點(diǎn)式求出rra==(z-2ca)(za-2ca)rrb==(z-2cb)(zb-2cb);]]>解上面的方程組即可求得P點(diǎn)的坐標(biāo)(r，z)，然后用z值和點(diǎn)P附近物體的縱坐標(biāo)值相比較，即可判斷此點(diǎn)處在障礙物上還是在凹坑里，進(jìn)而實(shí)現(xiàn)移動(dòng)機(jī)器人避障和導(dǎo)航的目的；r即是P點(diǎn)物體的深度信息，z是障礙物信息。
實(shí)施例2與實(shí)施例1不同之處在于參見圖4，在兩雙曲反射鏡面的對(duì)稱軸上安裝一黑色、不變形、長(zhǎng)細(xì)狀的針狀物5，起到消除玻璃管散射的作用。
采用本實(shí)用新型通過空間中的一點(diǎn)被兩雙曲反射鏡面反射后分別成像于相機(jī)像平面，等效于兩個(gè)相機(jī)實(shí)現(xiàn)雙目視覺，用一個(gè)普通透視相機(jī)和兩個(gè)雙曲反射鏡面實(shí)現(xiàn)雙目全向立體視覺，系統(tǒng)結(jié)構(gòu)和幾何計(jì)算簡(jiǎn)單；所獲取的立體圖像對(duì)在一系列射線上，對(duì)應(yīng)點(diǎn)尋找和匹配容易，使系統(tǒng)的具有很高的實(shí)時(shí)性；兩個(gè)雙曲面鏡間隔一定距離使系統(tǒng)的基線增長(zhǎng)，極大地減小了系統(tǒng)的誤差。
權(quán)利要求1.一種全向立體視覺成像裝置，包括兩個(gè)雙曲反射鏡面、普通透視相機(jī)、透明管，其特征在于兩雙曲反射鏡面直徑相同，同軸固定于一個(gè)透明管內(nèi)，相機(jī)鏡頭的光心和兩個(gè)雙曲反射鏡面的共同焦點(diǎn)重合，相機(jī)鏡頭的光軸和兩個(gè)雙曲反射鏡面的共同對(duì)稱軸共線，接近相機(jī)的雙曲反射鏡面中間設(shè)有孔，遠(yuǎn)離相機(jī)的雙曲反射鏡面通過接近相機(jī)的雙曲反射鏡面中間的孔使周圍環(huán)境在相機(jī)像平面上成像。
2.根據(jù)權(quán)利要求1所述全向立體視覺成像裝置，其特征在于在兩雙曲反射鏡面的對(duì)稱軸上安裝一針狀物。
專利摘要本實(shí)用新型涉及成像技術(shù)，具體地說是一種全向立體視覺成像裝置。它包括兩個(gè)雙曲反射鏡面、普通透視相機(jī)、透明管，兩雙曲反射鏡面直徑相同，同軸固定于一個(gè)透明管內(nèi)，相機(jī)鏡頭的光心和兩個(gè)雙曲反射鏡面的共同焦點(diǎn)重合，相機(jī)鏡頭的光軸和兩個(gè)雙曲反射鏡面的共同對(duì)稱軸共線，接近相機(jī)的雙曲反射鏡面中間設(shè)有孔，遠(yuǎn)離相機(jī)的雙曲反射鏡面通過接近相機(jī)的雙曲反射鏡面中間的孔使周圍環(huán)境在相機(jī)像平面上成像。本實(shí)用新型具有成像清晰、系統(tǒng)結(jié)構(gòu)和幾何計(jì)算簡(jiǎn)單、精度和實(shí)時(shí)性高、系統(tǒng)成像無遮擋的優(yōu)點(diǎn)。
文檔編號(hào)G02B27/22GK2781418SQ20052008891
公開日2006年5月17日 申請(qǐng)日期2005年1月12日 優(yōu)先權(quán)日2005年1月12日
發(fā)明者朱楓, 蘇連成, 歐錦軍, 董再勵(lì), 郝穎明 申請(qǐng)人:中國(guó)科學(xué)院沈陽(yáng)自動(dòng)化研究所