本申請(qǐng)是原案申請(qǐng)?zhí)枮?01480078610.1的發(fā)明專利申請(qǐng)(國(guó)際申請(qǐng)?zhí)枺簆ct/ep2014/059138,申請(qǐng)日:2014年5月5日,發(fā)明名稱:測(cè)量系統(tǒng))的分案申請(qǐng)。
本發(fā)明涉及包括提供圖像以用于執(zhí)行slam或sfm算法的相機(jī)模塊的測(cè)量系統(tǒng)。
本發(fā)明描述了一種能夠在桿上附接至gnss天線或反射器以用于在沒有行進(jìn)步驟的情況下測(cè)量點(diǎn)的相機(jī)模塊。
而且,所述相機(jī)模塊使得能實(shí)現(xiàn)gnss信號(hào)或全站儀與桿之間的視線中斷的點(diǎn)的測(cè)量。
而且,從利用相機(jī)模塊獲取的成像數(shù)據(jù)能夠得到環(huán)境的點(diǎn)云。
而且,能夠生成例如地形或立面的校正的視圖或正射相片。
背景技術(shù):
在利用gnss桿的傳統(tǒng)測(cè)量中,測(cè)量員將桿尖端放置到測(cè)量點(diǎn)上,使桿水平并且觸發(fā)測(cè)量。測(cè)平步驟花費(fèi)一些時(shí)間,并且在未被適當(dāng)?shù)貓?zhí)行的情況下,導(dǎo)致劣化的測(cè)量結(jié)果。
利用gnss桿測(cè)量?jī)H在能夠接收到足夠數(shù)量的gnss衛(wèi)星的信號(hào)的地點(diǎn)處是可能的。當(dāng)測(cè)量員移動(dòng)靠近建筑物時(shí),衛(wèi)星信號(hào)中的一些可能不再是可接收的。因此,在這種地方處測(cè)量根本是不可能的。
gnss測(cè)量系統(tǒng)能夠在全局標(biāo)度(例如,2-4cm)上以良好準(zhǔn)確性記錄絕對(duì)位置。然而,這種系統(tǒng)能夠僅記錄操作員必須將gnss桿垂直地定位在要測(cè)量的點(diǎn)頂上的單個(gè)點(diǎn)。利用gnss桿得到點(diǎn)云不是現(xiàn)有技術(shù)水平。
us2011/0064312a1涉及基于圖像的地理參照并且公開了gnss測(cè)量與圖像處理的組合以為定位提供新解決方案。存儲(chǔ)的地理參照?qǐng)D像與由gnss接收機(jī)做出的實(shí)際圖像相比較(特征相關(guān))。這然后被用來限制gnss測(cè)量的準(zhǔn)確性或者補(bǔ)充遺漏部分(例如,高度信息)。相反,即gnss測(cè)量被用來更新所存儲(chǔ)的圖像的地理參照也是可能的。這還能夠被用來確定本地坐標(biāo)系統(tǒng)。
us2011/0157359a1公開了使相機(jī)的虛擬透視中心與位置測(cè)量系統(tǒng)的測(cè)量(天線)中心對(duì)準(zhǔn)。這方便組合圖像/gnss系統(tǒng)中的計(jì)算。wo2011/163454a1公開了一種用于基于圖像的定位、從一個(gè)圖像到下一個(gè)圖像跟蹤圖像特征以便使用slam技術(shù)來確定gnss接收機(jī)的位置改變的方法和設(shè)備。wo2010/080950a1公開了根據(jù)圖像數(shù)據(jù)確定gnss接收機(jī)的定向。
由具有相機(jī)的系統(tǒng)記錄的數(shù)據(jù)的處理需要高計(jì)算資源?,F(xiàn)有技術(shù)水平解決方案被稱為數(shù)據(jù)在強(qiáng)大的膝上型電腦、pc或者在外部云服務(wù)器上的處理。處理時(shí)間可能是相當(dāng)耗時(shí)的并且通常在辦公室中被執(zhí)行。
然而,對(duì)于一些任務(wù)(例如,基于3d圖像的重建的預(yù)覽)強(qiáng)大的場(chǎng)內(nèi)計(jì)算容量是需要的。經(jīng)由無線網(wǎng)絡(luò)的數(shù)據(jù)傳送在帶寬有限時(shí)通常也是耗時(shí)的并且不允許得到計(jì)算的快速結(jié)果。
技術(shù)實(shí)現(xiàn)要素:
以下解決方案具體地被提出來以具有快速場(chǎng)內(nèi)數(shù)據(jù)處理的能力。一個(gè)或更多個(gè)外部便攜式計(jì)算裝置(例如,智能電話、平板pc、膝上型電腦)被作為計(jì)算裝置注冊(cè)在測(cè)量系統(tǒng)中。該系統(tǒng)與這些計(jì)算裝置中的至少一個(gè)具有電纜或無線連接。數(shù)據(jù)被傳送到這些裝置并且所有計(jì)算自動(dòng)地分布在所有可用的計(jì)算裝置之間。所有計(jì)算裝置能夠在彼此之間通信。
其中,這種解決方案的一個(gè)優(yōu)點(diǎn)是將所有可用的計(jì)算資源用于快速場(chǎng)內(nèi)數(shù)據(jù)處理或可視化的能力。能夠在沒有對(duì)測(cè)量裝置的更新的情況下為計(jì)算容易地添加新裝置。
本發(fā)明的一個(gè)方面涉及一種被適配為在測(cè)量系統(tǒng)的坐標(biāo)系統(tǒng)中確定被安裝在測(cè)量桿上的位置測(cè)量資源具體地gnss天線或回復(fù)反射器的位置的測(cè)量系統(tǒng),該測(cè)量系統(tǒng)包括具有相機(jī)模塊(30)的測(cè)量子系統(tǒng),該相機(jī)模塊(30)附接至所述測(cè)量桿(10)并且包括用于拍攝圖像的至少一個(gè)相機(jī)(31),以及控制和評(píng)估單元(12),該控制和評(píng)估單元(12)已存儲(chǔ)具有程序代碼的程序以便控制和執(zhí)行定向確定功能,其中
·環(huán)境的圖像的系列是利用所述至少一個(gè)相機(jī)在沿著通過環(huán)境的路徑移動(dòng)時(shí)拍攝的,該系列包括按所述相機(jī)的不同姿態(tài)拍攝的一定量的圖像,所述姿態(tài)表示所述相機(jī)的相應(yīng)的位置和定向;
·利用使用圖像的系列的定義算法的slam評(píng)估被執(zhí)行,其中,多個(gè)分別對(duì)應(yīng)的圖像點(diǎn)在圖像的系列中的圖像的多個(gè)子組中的每一個(gè)中被標(biāo)識(shí),并且,基于使用所述多個(gè)分別對(duì)應(yīng)的圖像點(diǎn)的后方交會(huì)和前方交會(huì),
·包括所述環(huán)境的多個(gè)基準(zhǔn)點(diǎn)的基準(zhǔn)點(diǎn)場(chǎng)被建立,其中,所述基準(zhǔn)點(diǎn)的坐標(biāo)被得到,并且
·所述圖像的所述姿態(tài)被確定;
·由所述位置測(cè)量資源在沿著所述路徑移動(dòng)時(shí)采用的確定的位置被從所述測(cè)量系統(tǒng)中檢索;以及
·所述至少一個(gè)相機(jī)在所述測(cè)量系統(tǒng)的坐標(biāo)系統(tǒng)中的外部定向是至少基于所確定的圖像的系列的至少一個(gè)指定圖像的姿態(tài)并且基于所確定的位置而得到的。
所述測(cè)量系統(tǒng)還包括處理單元,該處理單元已存儲(chǔ)具有程序代碼的程序以便控制和執(zhí)行單點(diǎn)測(cè)量功能,其中,在觸發(fā)時(shí)
·已由所述位置測(cè)量資源在沿著所述路徑移動(dòng)時(shí)在觸發(fā)相關(guān)時(shí)間點(diǎn)采用的觸發(fā)相關(guān)位置由所述測(cè)量系統(tǒng)利用所述位置測(cè)量資源以及具體地所確定的姿態(tài)和/或imu數(shù)據(jù)來確定;
·已由所述至少一個(gè)相機(jī)在所述觸發(fā)相關(guān)時(shí)間點(diǎn)采用的觸發(fā)相關(guān)外部定向通過所述定向確定功能來確定;并且
·所述測(cè)量系統(tǒng)的所述桿的底部的位置是基于至少所述觸發(fā)相關(guān)位置和所述觸發(fā)相關(guān)外部定向按照所述坐標(biāo)系統(tǒng)的坐標(biāo)而確定的。
在這個(gè)系統(tǒng)的一個(gè)實(shí)施方式中,所述至少一個(gè)相機(jī)的定向是基于所確定的姿態(tài)中的一個(gè)或更多個(gè)并且
·基于來自所述相機(jī)模塊的慣性測(cè)量單元的數(shù)據(jù),并且/或者
·基于所述位置測(cè)量資源的多個(gè)確定的位置,具體地,移動(dòng)路徑的行進(jìn)歷史而得到的。
在這個(gè)系統(tǒng)的另一實(shí)施方式中,所述定向在所有三個(gè)旋轉(zhuǎn)自由度上得到,具體地其中,在六個(gè)自由度上的位置和定向被確定。
在這個(gè)系統(tǒng)的另一實(shí)施方式中,所述測(cè)量桿的定向是基于所述姿態(tài)而得到的。
在這個(gè)系統(tǒng)的另一實(shí)施方式中,所述單點(diǎn)測(cè)量功能涉及觸發(fā)相關(guān)分段集束調(diào)整是為了確定所述觸發(fā)相關(guān)外部定向而執(zhí)行的,其中,使用僅圖像的系列的最近圖像的子集,該子集具體地由最多實(shí)際50個(gè)與最多實(shí)際5個(gè)之間的圖像構(gòu)成,在所述子集范圍內(nèi)的所述基準(zhǔn)點(diǎn)場(chǎng)和所述姿態(tài)針對(duì)所述子集的圖像被追溯地重新計(jì)算,并且其中,這些重新計(jì)算的姿態(tài)被用于得到所述外部定向。
本發(fā)明還涉及一種以定標(biāo)的點(diǎn)云的形式提供環(huán)境的位置信息的測(cè)量系統(tǒng)。本發(fā)明因此涉及一種測(cè)量子系統(tǒng),該包括要用作被適配為確定被安裝在手提測(cè)量桿上的位置測(cè)量資源的位置的測(cè)量系統(tǒng)的一部分的控制和評(píng)估單元以及相機(jī)模塊的測(cè)量子系統(tǒng),具體地其中,所述位置測(cè)量資源包括gnss天線或回復(fù)反射器。
所述相機(jī)模塊被設(shè)計(jì)為附接至所述測(cè)量桿并且包括用于拍攝圖像的至少一個(gè)相機(jī)。所述控制和評(píng)估單元已存儲(chǔ)具有程序代碼的程序以便控制和執(zhí)行空間表示生成功能,其中,當(dāng)沿著通過環(huán)境的路徑移動(dòng)時(shí)
·所述環(huán)境的圖像的系列利用所述至少一個(gè)相機(jī)拍攝,所述系列包括按所述相機(jī)的不同姿態(tài)拍攝的一定量的圖像,所述姿態(tài)表示所述相機(jī)的相應(yīng)的位置和定向,
·利用使用圖像的系列的定義算法的slam評(píng)估被執(zhí)行,其中,多個(gè)分別對(duì)應(yīng)的圖像點(diǎn)在圖像的系列中的圖像的多個(gè)子組中的每一個(gè)中被標(biāo)識(shí),并且,基于使用所述多個(gè)分別對(duì)應(yīng)的圖像點(diǎn)的后方交會(huì)和前方交會(huì),包括所述環(huán)境的多個(gè)基準(zhǔn)點(diǎn)的基準(zhǔn)點(diǎn)場(chǎng)被建立,其中,所述基準(zhǔn)點(diǎn)的坐標(biāo)被得到,并且所述圖像的所述姿態(tài)被確定,
·基于所確定的姿態(tài),包括所述環(huán)境的點(diǎn)的3d位置的點(diǎn)云通過使用圖像的系列中的圖像的前方交會(huì)來計(jì)算,
·針對(duì)已在所述路徑上采用的點(diǎn)的所述位置測(cè)量資源的確定的位置由所述控制和評(píng)估單元從所述測(cè)量系統(tǒng)接收,并且
·所述點(diǎn)云借助所接收到的確定的位置被定標(biāo),并且具體地被地理參照。
根據(jù)該發(fā)明的一個(gè)特定實(shí)施方式,所述控制和評(píng)估單元被配置為使得所述空間表示生成功能被控制和執(zhí)行,使得所述點(diǎn)云被生成
·跨越整個(gè)環(huán)境在空間上包括且可理解和/或
·具有跨越所述環(huán)境的3d信息的比較低的分辨率,從而提供對(duì)所述點(diǎn)云的比較快的處理。
根據(jù)該發(fā)明的另一特定實(shí)施方式,所述控制和評(píng)估單元被配置為使得所述空間表示生成功能被控制和執(zhí)行,使得為經(jīng)定標(biāo)的點(diǎn)云生成了圖形再現(xiàn),該圖形再現(xiàn)可由所述測(cè)量系統(tǒng)的顯示裝置顯示,從而向用戶提供關(guān)于已經(jīng)獲取的數(shù)據(jù)的直接反饋,使得所述已經(jīng)獲取的數(shù)據(jù)關(guān)于其完整性能夠被檢查。
根據(jù)所述子系統(tǒng)的又一特定實(shí)施方式,所述控制和評(píng)估單元被配置為使得所述空間表示生成功能被控制和執(zhí)行,使得為在圖像的系列中的至少一個(gè)圖像中選擇的單個(gè)點(diǎn)得到位置信息,其中,具有與所選擇的點(diǎn)有關(guān)的確定的姿態(tài)的圖像的子集根據(jù)圖像的系列具體地所選擇的點(diǎn)出現(xiàn)在其中的所有圖像被自動(dòng)地標(biāo)識(shí),并且所述位置信息是基于所述子集具體地在所述點(diǎn)由用戶人工地選擇之后計(jì)算出的。
根據(jù)所述子系統(tǒng)的另一特定實(shí)施方式,所述控制和評(píng)估單元被配置為使得所述空間表示生成功能被控制和執(zhí)行,使得所述點(diǎn)云被處理覆蓋
·總體上如至少在圖像的系列中的圖像對(duì)中共同出現(xiàn)的所述環(huán)境,從而提供具有比較低的點(diǎn)到點(diǎn)分辨率的全局表示,和/或
·如至少在圖像的序列中的圖像對(duì)中共同出現(xiàn)的所述環(huán)境的定義區(qū)域,從而提供與所述全局表示相比具有更高的點(diǎn)到點(diǎn)分辨率的區(qū)域表示,具體地其中,所述點(diǎn)云的點(diǎn)到點(diǎn)分辨率是根據(jù)所述區(qū)域的大小自動(dòng)地適配的,使得處理時(shí)間滿足定義閾值。
現(xiàn)在參照創(chuàng)建正射相片的問題,根據(jù)該發(fā)明的對(duì)應(yīng)布置像在下面所闡述的那樣被描述。
本發(fā)明還涉及一種測(cè)量子系統(tǒng),該測(cè)量子系統(tǒng)包括要用作被適配為確定被安裝在測(cè)量桿上的位置測(cè)量資源的具體地gnss天線的或回復(fù)反射器的位置的測(cè)量系統(tǒng)的一部分的控制和評(píng)估單元以及相機(jī)模塊,所述相機(jī)模塊被設(shè)計(jì)為附接至所述測(cè)量桿并且包括用于拍攝圖像的至少一個(gè)相機(jī),所述控制和評(píng)估單元已存儲(chǔ)具有程序代碼的程序以控制和執(zhí)行地理參照功能,其中,當(dāng)沿著通過環(huán)境的路徑移動(dòng)時(shí)
·所述環(huán)境的圖像的系列利用所述至少一個(gè)相機(jī)拍攝,環(huán)境地面出現(xiàn)在所述圖像中,所述系列包括按所述相機(jī)的不同姿態(tài)拍攝的一定量的圖像,所述姿態(tài)表示所述相機(jī)的相應(yīng)的位置和定向;
·利用使用圖像的系列的定義算法的slam評(píng)估被執(zhí)行,其中,多個(gè)分別對(duì)應(yīng)的圖像點(diǎn)在圖像的系列中的圖像的多個(gè)子組中的每一個(gè)中被標(biāo)識(shí),并且,基于使用所述多個(gè)分別對(duì)應(yīng)的圖像點(diǎn)的后方交會(huì)和前方交會(huì),包括所述環(huán)境的多個(gè)基準(zhǔn)點(diǎn)的基準(zhǔn)點(diǎn)場(chǎng)被建立,其中,所述基準(zhǔn)點(diǎn)的坐標(biāo)被得到,并且所述圖像的所述姿態(tài)被確定;
·基于所確定的姿態(tài),包括所述環(huán)境的點(diǎn)的3d位置的點(diǎn)云通過使用圖像的系列的前方交會(huì)具體地通過使用密集匹配算法來計(jì)算;并且
·所述環(huán)境地面的正射校正的正射相片是基于圖像的序列而生成的。
在這個(gè)子系統(tǒng)的一個(gè)實(shí)施方式中,所述地理參照功能包括使所述正射相片與用于得到所述測(cè)量系統(tǒng)的位置信息的基準(zhǔn)正射相片相匹配,具體地其中,所述基準(zhǔn)正射相片
·被存儲(chǔ)在所述控制和評(píng)估單元中,并且/或者
·是空中圖像或其一部分,具體地其中,所述空中圖像被正射校正。
在這個(gè)子系統(tǒng)的另一實(shí)施方式中,經(jīng)正射校正的正射相片借助于圖像的系列中的至少兩個(gè)圖像的圖像拼接而生成。
根據(jù)與相機(jī)模塊的相機(jī)的特定光學(xué)器件有關(guān)的另一方面,本發(fā)明還涉及一種要用作被適配為確定被安裝在測(cè)量桿上的位置測(cè)量資源的位置的測(cè)量系統(tǒng)的一部分的相機(jī)模塊,具體地其中,所述位置測(cè)量資源包括gnss天線或回復(fù)反射器。所述相機(jī)模塊被設(shè)計(jì)為附接至所述測(cè)量桿并且包括按照基本上截然相反的查看方向彼此相對(duì)布置的兩個(gè)相機(jī),所述兩個(gè)相機(jī)中的每一個(gè)具有魚眼鏡頭并且被適配為拍攝寬全景圖像。
本發(fā)明還涉及一種包括相機(jī)模塊以及控制和評(píng)估單元的測(cè)量子系統(tǒng)。所述相機(jī)模塊包括至少一個(gè)相機(jī),所述相機(jī)具有魚眼鏡頭并且被適配為拍攝寬全景圖像。所述控制和評(píng)估單元已存儲(chǔ)具有程序代碼的程序以便控制和執(zhí)行空間表示生成功能,其中,當(dāng)沿著通過環(huán)境的路徑移動(dòng)時(shí),所述環(huán)境的全景圖像的系列利用所述至少一個(gè)相機(jī)拍攝,所述系列包括按所述相機(jī)的不同姿態(tài)拍攝的一定量的全景圖像,所述姿態(tài)表示所述相機(jī)的相應(yīng)的位置和定向,利用使用全景圖像的系列的定義算法的slam評(píng)估被執(zhí)行,其中,多個(gè)分別對(duì)應(yīng)的圖像點(diǎn)在全景圖像的系列中的全景圖像的多個(gè)子組中的每一個(gè)被標(biāo)識(shí),并且,基于使用所述多個(gè)分別對(duì)應(yīng)的圖像點(diǎn)的后方交會(huì)和前方交會(huì),包括所述環(huán)境的多個(gè)基準(zhǔn)點(diǎn)的基準(zhǔn)點(diǎn)場(chǎng)被建立,其中,所述基準(zhǔn)點(diǎn)的坐標(biāo)被得到,并且所述全景圖像的所述姿態(tài)被確定。
通過連同所述相機(jī)模塊一起使用魚眼光學(xué)系統(tǒng),比較寬的視場(chǎng)被實(shí)現(xiàn),從而提供覆蓋環(huán)境的相應(yīng)地大區(qū)域的圖像。為了覆蓋所述環(huán)境的定義部分,必須拍攝更少的圖像。
根據(jù)本發(fā)明的特定實(shí)施方式,所述相機(jī)模塊包括按基本上截然相反的查看方向彼此相對(duì)布置的兩個(gè)相機(jī),所述兩個(gè)相機(jī)中的每一個(gè)具有魚眼鏡頭并且被適配為拍攝寬全景圖像。
根據(jù)該測(cè)量子系統(tǒng)的另一特定實(shí)施方式,所述控制和評(píng)估單元被配置為使得所述空間表示生成功能被控制和執(zhí)行,使得所述全景圖像的所述姿態(tài)通過考慮所述魚眼鏡頭的光學(xué)特性應(yīng)用定義光學(xué)成像方法來確定,具體地其中,不同的成像平面被與所述光學(xué)成像方法一起使用并且/或者以下映射函數(shù)中的一個(gè)被使用:
·球極映射函數(shù),
·等距映射函數(shù),
·等立體角映射函數(shù),或
·正射映射函數(shù)。
使用利用這些魚眼光學(xué)器件拍攝的圖像來計(jì)算所述姿態(tài)和/或點(diǎn)云使用以上方法中的一個(gè)來執(zhí)行,以便提供所述基準(zhǔn)點(diǎn)的確切投影并且因此以便提供所述環(huán)境的正確的位置和/或定向信息。在那樣地對(duì)所述環(huán)境進(jìn)行投影情況下能夠提供所述環(huán)境的無失真圖像。
根據(jù)所述子系統(tǒng)的另一特定實(shí)施方式,所述兩個(gè)相機(jī)中的每一個(gè)在關(guān)于至少一個(gè)軸的相應(yīng)的查看方向上具體地在方位方向上具有至少180°的視場(chǎng)。
使用具有關(guān)于它們的視場(chǎng)具有至少180°的魚眼鏡頭的所述兩個(gè)相機(jī),能夠拍攝具有360°的完全全景圖像并且因此提供數(shù)據(jù)的更完整和/或更詳細(xì)收集。因此,能夠收集關(guān)于所述環(huán)境的更多的信息,即具體地,更大的點(diǎn)云。
利用魚眼光學(xué)器件與如描述的一種slam算法(即,拍攝一系列圖像、標(biāo)識(shí)對(duì)應(yīng)于所述環(huán)境中的基準(zhǔn)點(diǎn)的圖像點(diǎn))的這種組合,給出了得到大量的位置(例如針對(duì)所述環(huán)境中的單個(gè)點(diǎn))和/或定向信息(例如,所述全景相機(jī)或該相機(jī)附接至的桿的)的非常高效的方式。能夠利用所述相機(jī)拍攝所述環(huán)境的寬區(qū)域并且能夠基于相應(yīng)的全景圖像得到與所拍攝的區(qū)域?qū)?yīng)的地形信息。
本發(fā)明的另一方面集中于一種要用作被適配為確定被安裝在測(cè)量桿上的位置測(cè)量資源的位置的測(cè)量系統(tǒng)的一部分的特定相機(jī)模塊,具體地其中,所述位置測(cè)量資源包括gnss天線或回復(fù)反射器,其中,所述相機(jī)模塊被設(shè)計(jì)為附接到所述測(cè)量桿并且包括相機(jī)和光學(xué)元件,該光學(xué)元件被設(shè)計(jì)為使得所述相機(jī)在方位方向上具有360°的視角,具體地其中,所述光學(xué)元件包括形式為錐體、球體或彎的鏡面。
所述光學(xué)元件優(yōu)選地可以被具體實(shí)現(xiàn)為拋物面鏡。
根據(jù)該相機(jī)模塊的實(shí)施方式,所述相機(jī)和所述光學(xué)元件被布置和設(shè)計(jì)為使得要拍攝的環(huán)境被投影到所述相機(jī)的傳感器上,使得所述環(huán)境的圖像可提供有基本上覆蓋所述環(huán)境的相等大小的部分的所述圖像的相等大小的塊,從而在均勻再現(xiàn)中提供表示所拍攝的環(huán)境的圖像。
在按照以上方式將所述環(huán)境投影到所述傳感器上的情況下提供了所述環(huán)境的無失真圖像,并且因此,具體地鑒于slam處理或點(diǎn)云的處理,使得能實(shí)現(xiàn)拍攝圖像的更快處理。
另選地,根據(jù)本發(fā)明的另一方面,具體地用于減少來自窗的反射或者對(duì)太陽光進(jìn)行濾波的偏振濾光器能夠被安裝有所述相機(jī),例如在所述相機(jī)的鏡頭前面。
這種光學(xué)元件(例如,拋物面鏡)結(jié)合如所描述的相機(jī)的布置提供也可與關(guān)于魚眼光學(xué)器件與相機(jī)或至少兩個(gè)相機(jī)的組合的那些好處比較的好處。附加地,對(duì)應(yīng)圖像的360°全景視圖和拍攝僅利用單個(gè)相機(jī)實(shí)現(xiàn),從而還提供僅一個(gè)相機(jī)的使用。
現(xiàn)在參照觸發(fā)被布置在相機(jī)中以便提供同步地拍攝的圖像的相機(jī)的問題,根據(jù)該發(fā)明的對(duì)應(yīng)布置像在下面所闡述的那樣被描述。
本發(fā)明還涉及一種測(cè)量子系統(tǒng),該測(cè)量子系統(tǒng)包括要用作被適配為確定被安裝在測(cè)量桿上的位置測(cè)量資源的具體地gnss天線的或回復(fù)反射器的位置的測(cè)量系統(tǒng)的一部分的控制和評(píng)估單元以及相機(jī)模塊。所述相機(jī)模塊被設(shè)計(jì)為附接至所述測(cè)量桿并且包括用于拍攝圖像的至少兩個(gè)相機(jī)。所述控制和評(píng)估單元已存儲(chǔ)具有程序代碼的程序以便控制和執(zhí)行全景圖像生成功能,其中,響應(yīng)于開始命令
·所述環(huán)境的圖像的系列利用所述至少兩個(gè)相機(jī)拍攝,所述系列包括按所述相機(jī)的不同姿態(tài)拍攝的一定量的圖像,所述姿態(tài)表示所述相機(jī)的相應(yīng)的位置和定向;并且
·利用使用圖像的系列的定義算法的slam評(píng)估被執(zhí)行,其中,多個(gè)分別對(duì)應(yīng)的圖像點(diǎn)在圖像的系列中的圖像的多個(gè)子組中的每一個(gè)中被標(biāo)識(shí),并且,基于使用所述多個(gè)分別對(duì)應(yīng)的圖像點(diǎn)的后方交會(huì)和前方交會(huì),包括所述環(huán)境的多個(gè)基準(zhǔn)點(diǎn)的基準(zhǔn)點(diǎn)場(chǎng)被建立,其中,所述基準(zhǔn)點(diǎn)的坐標(biāo)被得到,并且所述圖像的所述姿態(tài)被確定;
其中,可由至少第一相機(jī)和第二相機(jī)感知并且使該第一相機(jī)和該第二相機(jī)同步地拍攝圖像的中心光學(xué)觸發(fā)信號(hào)被生成。
在這個(gè)子系統(tǒng)的一個(gè)實(shí)施方式中,所述全景圖像生成功能包括從所述第一相機(jī)和所述第二相機(jī)的經(jīng)同步地拍攝的圖像生成組合拼接圖像。
在這個(gè)子系統(tǒng)的一個(gè)實(shí)施方式中,所述位置測(cè)量資源包括gnss天線,并且所述控制和評(píng)估單元被配置為使得,當(dāng)沿著通過所述環(huán)境的路徑移動(dòng)時(shí),所述全景圖像生成功能被控制和執(zhí)行,使得
·基于通過所述gnss天線接收到的gnss信號(hào)的gnss數(shù)據(jù)由所述控制和評(píng)估單元從所述測(cè)量系統(tǒng)接收,并且使得
·所述中心光學(xué)觸發(fā)信號(hào)是基于所接收到的gnss數(shù)據(jù)而生成的。
在這個(gè)子系統(tǒng)的另一實(shí)施方式中,所述控制和評(píng)估單元被配置為使得當(dāng)沿著通過所述環(huán)境的路徑移動(dòng)時(shí),所述全景圖像生成功能被控制和執(zhí)行,使得所述開始命令基于以下各項(xiàng)被釋放
·與要生成的全景圖像的密度相關(guān)的定義位置網(wǎng)格以及
·移動(dòng)路徑的行進(jìn)歷史,該行進(jìn)歷史是從所接收到的確定的位置得到的。
在另一實(shí)施方式中,所述子系統(tǒng)包括可由所述至少兩個(gè)相機(jī)中的每一個(gè)感知的至少一個(gè)光學(xué)觸發(fā)裝置,其中,所述中心光學(xué)觸發(fā)是所述至少一個(gè)光學(xué)觸發(fā)裝置的可感知的光學(xué)信號(hào),具體地其中,所述光學(xué)觸發(fā)裝置包括閃光燈。
在另一實(shí)施方式中,所述子系統(tǒng)包括可由所述第一相機(jī)和所述第二相機(jī)感知的至少一個(gè)光學(xué)觸發(fā)裝置,其中,所述中心光學(xué)觸發(fā)是所述至少一個(gè)光學(xué)觸發(fā)裝置的可感知的光學(xué)信號(hào),具體地其中,所述光學(xué)觸發(fā)裝置包括發(fā)光二極管。
本發(fā)明還涉及一種測(cè)量子系統(tǒng),該測(cè)量子系統(tǒng)包括要用作被適配為確定被安裝在測(cè)量桿上的位置測(cè)量資源的具體地gnss天線的或回復(fù)反射器的位置的測(cè)量系統(tǒng)的一部分的控制和評(píng)估單元以及相機(jī)模塊。所述相機(jī)模塊被設(shè)計(jì)為附接至所述測(cè)量桿并且包括用于拍攝圖像的至少兩個(gè)相機(jī)。所述控制和評(píng)估單元已存儲(chǔ)具有程序代碼的程序以便控制和執(zhí)行圖像觸發(fā)功能,其中,當(dāng)沿著通過環(huán)境的路徑移動(dòng)時(shí)
·所述環(huán)境的圖像的系列利用所述至少一個(gè)相機(jī)拍攝,所述系列包括按所述相機(jī)的不同姿態(tài)拍攝的一定量的圖像,所述姿態(tài)表示所述相機(jī)的相應(yīng)的位置和定向;并且
·利用使用圖像的系列的定義算法的slam評(píng)估被執(zhí)行,其中,多個(gè)分別對(duì)應(yīng)的圖像點(diǎn)在圖像的系列中的圖像的多個(gè)子組中的每一個(gè)中被標(biāo)識(shí),并且,基于使用所述多個(gè)分別對(duì)應(yīng)的圖像點(diǎn)的后方交會(huì)和前方交會(huì),包括所述環(huán)境的多個(gè)基準(zhǔn)點(diǎn)的基準(zhǔn)點(diǎn)場(chǎng)被建立,其中,所述基準(zhǔn)點(diǎn)的坐標(biāo)被得到,并且所述圖像的所述姿態(tài)被確定;
其中,所述測(cè)量子系統(tǒng)包括用于確定至少一個(gè)預(yù)定義外部觸發(fā)信號(hào)的裝置,并且所述圖像觸發(fā)功能包括確定外部觸發(fā)信號(hào),其中,基于所確定的外部觸發(fā)信號(hào),所述至少一個(gè)相機(jī)拍攝圖像。
在這個(gè)子系統(tǒng)的一個(gè)實(shí)施方式中,所述相機(jī)模塊包括至少兩個(gè)相機(jī);所述外部觸發(fā)信號(hào)使所述至少兩個(gè)相機(jī)中的每一個(gè)同步地拍攝圖像;并且從所述至少兩個(gè)相機(jī)的經(jīng)同步地拍攝的圖像生成組合拼接圖像。
在另一實(shí)施方式中,用于存儲(chǔ)至少一個(gè)預(yù)定義外部觸發(fā)信號(hào)的裝置,其中,所述至少一個(gè)預(yù)定義外部觸發(fā)信號(hào)包括
·可由所述至少一個(gè)相機(jī)確定的所述用戶的至少一個(gè)預(yù)定義手勢(shì);
·至少一個(gè)聲信號(hào);和/或
·所述測(cè)量桿具體地所述測(cè)量桿的底端與所述地面的接觸。
本發(fā)明還涉及一種測(cè)量系統(tǒng)的模糊功能。對(duì)所述圖像數(shù)據(jù),能夠應(yīng)用針對(duì)汽車上的面部檢測(cè)和牌照的檢測(cè)的算法。為了保護(hù)人們的隱私,所檢測(cè)的面部或牌照然后能夠例如通過使所述圖像中以及所述點(diǎn)云中的對(duì)應(yīng)區(qū)域模糊而變得不可識(shí)別。
對(duì)于按大約10fps和更大的幀速率記錄的圖像數(shù)據(jù)能夠應(yīng)用特征跟蹤算法,例如kanade-lucas-tomasi(klt)。另選地,具體地針對(duì)靜止圖像能夠應(yīng)用諸如sift、surf、brisk、brief等的對(duì)應(yīng)特征算法的檢測(cè)。
根據(jù)本發(fā)明的這個(gè)方面的測(cè)量子系統(tǒng)包括要用作被適配為確定被安裝在測(cè)量桿上的位置測(cè)量資源的具體地gnss天線的或回復(fù)反射器的位置的測(cè)量系統(tǒng)的一部分的控制和評(píng)估單元以及相機(jī)模塊。所述相機(jī)模塊被設(shè)計(jì)為附接至所述測(cè)量桿并且包括用于拍攝圖像的至少兩個(gè)相機(jī)。所述控制和評(píng)估單元已存儲(chǔ)具有程序代碼的程序以便控制和執(zhí)行數(shù)據(jù)減少功能,其中,當(dāng)沿著通過環(huán)境的路徑移動(dòng)時(shí)
·所述環(huán)境的圖像的系列利用所述至少一個(gè)相機(jī)拍攝,所述系列包括按所述相機(jī)的不同姿態(tài)拍攝的一定量的圖像,所述姿態(tài)表示所述相機(jī)的相應(yīng)的位置和定向;
·利用使用圖像的系列的定義算法的slam評(píng)估被執(zhí)行,其中,多個(gè)分別對(duì)應(yīng)的圖像點(diǎn)在圖像的系列中的圖像的多個(gè)子組中的每一個(gè)中被標(biāo)識(shí),并且,基于使用所述多個(gè)分別對(duì)應(yīng)的圖像點(diǎn)的后方交會(huì)和前方交會(huì),包括所述環(huán)境的多個(gè)基準(zhǔn)點(diǎn)的基準(zhǔn)點(diǎn)場(chǎng)被建立,其中,所述基準(zhǔn)點(diǎn)的坐標(biāo)被得到,并且所述圖像的所述姿態(tài)被確定;
·基于所確定的姿態(tài),包括所述環(huán)境的點(diǎn)的3d位置的點(diǎn)云通過使用圖像的系列的前方交會(huì)具體地通過使用密集匹配算法來計(jì)算;
·預(yù)定義和/或用戶定義種類的對(duì)象在所述圖像中被標(biāo)識(shí);并且
·連接到所述圖像中經(jīng)標(biāo)識(shí)的對(duì)象的點(diǎn)的3d位置被修改或者刪除。
在這個(gè)子系統(tǒng)的一個(gè)實(shí)施方式中,所述3d位置被修改或者刪除,使得經(jīng)標(biāo)識(shí)的對(duì)象的個(gè)別特性不可在經(jīng)計(jì)算的點(diǎn)云中標(biāo)識(shí)。
在這個(gè)子系統(tǒng)的另一實(shí)施方式中,連接到所述圖像中經(jīng)標(biāo)識(shí)的對(duì)象的圖像數(shù)據(jù)被修改或者刪除,具體地使得經(jīng)標(biāo)識(shí)的對(duì)象的個(gè)別特性不可在所述圖像中標(biāo)識(shí)。
在這個(gè)子系統(tǒng)的另一實(shí)施方式中,預(yù)定義種類的對(duì)象至少包括
·操作所述測(cè)量系統(tǒng)的用戶;
·所述測(cè)量系統(tǒng)的零件;
·人臉;和/或
·車輛牌照。
本發(fā)明的另一方面集中于當(dāng)執(zhí)行測(cè)量任務(wù)時(shí)的隱私或安全保護(hù)。在特定區(qū)域中,拍攝照片或視頻經(jīng)受所有者或機(jī)構(gòu)的批準(zhǔn)或者完全禁止。這些區(qū)域例如是軍事設(shè)施。根據(jù)本發(fā)明的這個(gè)方面,為了在測(cè)量任務(wù)的過程中避免合法沖突,為了點(diǎn)云的計(jì)算而拍攝的所有圖像在它們已被相應(yīng)地使用之后被直接刪除并且不再需要用于計(jì)算所述點(diǎn)云。必須同時(shí)存儲(chǔ)僅少量的圖像以用于計(jì)算所述點(diǎn)云。
因此,本發(fā)明還涉及一種測(cè)量子系統(tǒng),該測(cè)量子系統(tǒng)包括要用作被適配為確定被安裝在測(cè)量桿上的位置測(cè)量資源的具體地gnss天線的或回復(fù)反射器的位置的測(cè)量系統(tǒng)的一部分的控制和評(píng)估單元以及相機(jī)模塊。所述相機(jī)模塊被設(shè)計(jì)為附接至所述測(cè)量桿并且包括用于拍攝圖像的至少兩個(gè)相機(jī)。所述控制和評(píng)估單元已存儲(chǔ)具有程序代碼的程序以便控制和執(zhí)行定位和/或映射功能,其中,當(dāng)沿著通過環(huán)境的路徑移動(dòng)時(shí)
·所述環(huán)境的圖像的系列利用所述至少一個(gè)相機(jī)拍攝,環(huán)境地面出現(xiàn)在所述圖像中,所述系列包括按所述相機(jī)的不同姿態(tài)拍攝的一定量的圖像,所述姿態(tài)表示所述相機(jī)的相應(yīng)的位置和定向;
·所述圖像被存儲(chǔ)在所述控制和評(píng)估單元的存儲(chǔ)器中,具體地在易失性存儲(chǔ)器中;
·利用使用圖像的系列的定義算法的slam評(píng)估被執(zhí)行,其中,多個(gè)分別對(duì)應(yīng)的圖像點(diǎn)在圖像的系列中的圖像的多個(gè)子組中的每一個(gè)中被標(biāo)識(shí),并且,基于使用所述多個(gè)分別對(duì)應(yīng)的圖像點(diǎn)的后方交會(huì)和前方交會(huì),包括所述環(huán)境的多個(gè)基準(zhǔn)點(diǎn)的基準(zhǔn)點(diǎn)場(chǎng)被建立,其中,所述基準(zhǔn)點(diǎn)的坐標(biāo)被得到,并且所述圖像的所述姿態(tài)被確定;
·基于所確定的姿態(tài),包括所述環(huán)境的點(diǎn)的3d位置的點(diǎn)云通過使用圖像的系列的前方交會(huì)具體地通過使用密集匹配算法來計(jì)算;并且
·所述圖像中的每一個(gè)在已被用于計(jì)算所述點(diǎn)云之后被刪除。
在這個(gè)子系統(tǒng)的一個(gè)實(shí)施方式中,所述圖像在已被用于計(jì)算所述點(diǎn)云之后被毫不遲延地刪除,具體地其中,所述圖像被刪除使得不能夠從經(jīng)刪除的圖像創(chuàng)建視頻流。
在這個(gè)子系統(tǒng)的另一實(shí)施方式中,所述圖像被存儲(chǔ)和刪除,使得不超過十個(gè)圖像被同時(shí)存儲(chǔ)在所述存儲(chǔ)器中,具體地不超過五個(gè)圖像。
現(xiàn)在參照使來自收集的圖像的對(duì)象淡出以便改進(jìn)處理的發(fā)明方面,根據(jù)該發(fā)明,測(cè)量子系統(tǒng)包括要用作被適配為確定被安裝在手提測(cè)量桿上的位置測(cè)量資源的位置的測(cè)量系統(tǒng)的一部分的控制和評(píng)估單元以及相機(jī)模塊,具體地其中,所述位置測(cè)量資源包括gnss天線或回復(fù)反射器。所述相機(jī)模塊被設(shè)計(jì)為附接至所述測(cè)量桿并且包括用于拍攝圖像的至少兩個(gè)相機(jī)。所述控制和評(píng)估單元已存儲(chǔ)具有程序代碼的程序以便控制和執(zhí)行空間表示生成功能,其中,當(dāng)沿著通過環(huán)境的路徑移動(dòng)時(shí)
·所述環(huán)境的圖像的系列利用所述至少一個(gè)相機(jī)拍攝,所述系列包括按所述相機(jī)的不同姿態(tài)拍攝的一定量的圖像,所述姿態(tài)表示所述相機(jī)的相應(yīng)的位置和定向,
·利用使用圖像的系列的定義算法的slam評(píng)估被執(zhí)行,其中,多個(gè)分別對(duì)應(yīng)的圖像點(diǎn)在圖像的系列中的圖像的多個(gè)子組中的每一個(gè)中被標(biāo)識(shí),并且,基于使用所述多個(gè)分別對(duì)應(yīng)的圖像點(diǎn)的后方交會(huì)和前方交會(huì),包括所述環(huán)境的多個(gè)基準(zhǔn)點(diǎn)的基準(zhǔn)點(diǎn)場(chǎng)被建立,其中,所述基準(zhǔn)點(diǎn)的坐標(biāo)被得到,并且所述圖像的所述姿態(tài)被確定,
其中,在圖像的系列中干擾對(duì)象通過圖像處理、特征識(shí)別技術(shù)和/或所述圖像的比較來識(shí)別,并且經(jīng)識(shí)別的干擾對(duì)象關(guān)于標(biāo)識(shí)圖像點(diǎn)的集合和/或確定所述圖像的所述姿態(tài)在有關(guān)的圖像中淡出,使得評(píng)估是不太需要努力的并且干擾被抑制。
根據(jù)該測(cè)量子系統(tǒng)的實(shí)施方式,所述控制和評(píng)估單元被配置為使得所述空間表示生成功能被控制和執(zhí)行,使得運(yùn)動(dòng)對(duì)象基于運(yùn)動(dòng)檢測(cè)算法具體地通過特征跟蹤被識(shí)別為所述干擾對(duì)象。
根據(jù)所述子系統(tǒng)的另一特定實(shí)施方式,人具體地?cái)y帶所述桿的所述用戶或汽車被識(shí)別為所述干擾對(duì)象。
根據(jù)該發(fā)明的另一實(shí)施方式,所述控制和評(píng)估單元被配置為使得所述空間表示生成功能被控制和執(zhí)行,使得應(yīng)用識(shí)別所述干擾對(duì)象并且使所述干擾對(duì)象淡出的步驟通過用戶命令來觸發(fā)。
具體地,所述用戶在圖像的系列的至少一個(gè)中粗略地標(biāo)記要識(shí)別為干擾對(duì)象的對(duì)象,因此所述至少一個(gè)圖像被顯示在顯示裝置上。
干擾對(duì)象的檢測(cè)和淡出提供更快的數(shù)據(jù)處理,因?yàn)闉榱舜_定姿態(tài)必須考慮少量的圖像數(shù)據(jù)。此外,所計(jì)算出的姿態(tài)包括更高的精密度,因?yàn)閷⒗缭诳紤]在不同的時(shí)間點(diǎn)拍攝的更多圖像中的運(yùn)動(dòng)汽車的情況下發(fā)生的不正確的成像最初被抑制。
附加地,以上方法通常提供對(duì)基準(zhǔn)點(diǎn)(所述圖像中的圖像點(diǎn))的更好的(具體地更精確且更快的)匹配和標(biāo)識(shí)。所述方法可以由所述控制和評(píng)估單元自動(dòng)地執(zhí)行或者可以由用戶例如在該用戶在顯示在所述測(cè)量系統(tǒng)的顯示裝置上的圖像中做出相應(yīng)的對(duì)象時(shí)出發(fā)。
另一方面集中于相機(jī)(相應(yīng)地相機(jī)模塊)的校準(zhǔn)。根據(jù)該發(fā)明,一種包括要用作被適配為確定被安裝在測(cè)量桿上的位置測(cè)量資源的位置的測(cè)量系統(tǒng)的一部分的控制和評(píng)估單元以及相機(jī)模塊的測(cè)量子系統(tǒng),具體地其中,所述位置測(cè)量資源包括gnss天線或回復(fù)反射器,所述相機(jī)模塊被設(shè)計(jì)為附接至所述測(cè)量桿并且包括用于拍攝圖像的至少兩個(gè)相機(jī)。所述位置測(cè)量資源包括位于所述測(cè)量資源的外殼處的基準(zhǔn)圖案。所述位置測(cè)量資源和所述相機(jī)模塊被按照定義方式彼此相對(duì)地布置,使得所述基準(zhǔn)圖案出現(xiàn)在所述至少一個(gè)相機(jī)的視場(chǎng)中。
此外,所述控制和評(píng)估單元已存儲(chǔ)具有程序代碼的程序以便執(zhí)行相機(jī)校準(zhǔn)功能,其中
·覆蓋所述基準(zhǔn)圖案的圖像由所述至少一個(gè)相機(jī)拍攝,并且
·關(guān)于所述位置測(cè)量資源與所述至少一個(gè)相機(jī)之間的固定空間關(guān)系的校準(zhǔn)參數(shù)是基于所拍攝的圖像和預(yù)知基準(zhǔn)圖像來確定的,所述基準(zhǔn)圖像通過所述基準(zhǔn)圖案在所述基準(zhǔn)圖像中的定義出現(xiàn)來表示所述至少一個(gè)圖像相對(duì)于所述位置測(cè)量資源的定義位置和定向。
根據(jù)該測(cè)量系統(tǒng)的特定實(shí)施方式,所述基準(zhǔn)圖案作為由光源提供的結(jié)構(gòu)化圖案或者作為永久圖案被具體實(shí)現(xiàn)。
基于所確定的校準(zhǔn)數(shù)據(jù),使得能實(shí)現(xiàn)所述相機(jī)或所述相機(jī)模塊分別相對(duì)于所述位置測(cè)量資源的期望位置的驗(yàn)證。如果所述基準(zhǔn)圖案根據(jù)目標(biāo)外觀出現(xiàn)在拍攝的圖像中,則所述相機(jī)被定位在期待的原位置中。在所述圖案的外觀與期待的外觀不同的情況下所述相機(jī)模塊被定位和/或定向?yàn)榕c原位置不同。能夠通過將所述基準(zhǔn)圖像與實(shí)際上拍攝的圖像進(jìn)行比較具體地通過對(duì)所述圖案的外觀進(jìn)行比較來得到所述相機(jī)的位置的偏差。
本發(fā)明還涉及一種測(cè)量子系統(tǒng),該測(cè)量子系統(tǒng)包括要用作被適配為確定被安裝在測(cè)量桿上的位置測(cè)量資源的具體地gnss天線的或回復(fù)反射器的位置的測(cè)量系統(tǒng)的一部分的控制和評(píng)估單元以及相機(jī)模塊。所述相機(jī)模塊被設(shè)計(jì)為附接至所述測(cè)量桿并且包括用于拍攝圖像的至少兩個(gè)相機(jī)。所述位置測(cè)量資源和所述相機(jī)模塊被按照定義方式彼此相對(duì)地布置,此外,所述控制和評(píng)估單元已存儲(chǔ)具有程序代碼的程序以便控制和執(zhí)行校準(zhǔn)功能,其中,當(dāng)沿著通過環(huán)境的路徑移動(dòng)時(shí)
·所述環(huán)境的圖像的系列利用所述至少一個(gè)相機(jī)拍攝,所述系列包括按所述相機(jī)的不同姿態(tài)拍攝的一定量的圖像,所述姿態(tài)表示所述相機(jī)的相應(yīng)的位置和定向,
·利用使用圖像的系列的定義算法的slam評(píng)估被執(zhí)行,其中,多個(gè)分別對(duì)應(yīng)的圖像點(diǎn)在圖像的系列中的圖像的多個(gè)子組中的每一個(gè)中被標(biāo)識(shí),并且,基于使用所述多個(gè)分別對(duì)應(yīng)的圖像點(diǎn)的后方交會(huì)和前方交會(huì),包括所述環(huán)境的多個(gè)基準(zhǔn)點(diǎn)的基準(zhǔn)點(diǎn)場(chǎng)被建立,其中,所述基準(zhǔn)點(diǎn)的坐標(biāo)被得到,并且所述圖像的所述姿態(tài)被確定,
·針對(duì)已在所述路徑上采用的點(diǎn)的所述位置測(cè)量資源的確定的位置由所述控制和評(píng)估單元從所述測(cè)量系統(tǒng)接收,并且
·關(guān)于所述位置測(cè)量資源與所述至少一個(gè)相機(jī)之間的固定空間關(guān)系的校準(zhǔn)參數(shù)是基于所接收到的確定的位置和所確定的姿態(tài)的相關(guān)評(píng)價(jià)而得到的。
根據(jù)該子系統(tǒng),針對(duì)已在所述路徑上采用的點(diǎn)的所述位置測(cè)量資源的確定的位置由所述控制和評(píng)估單元從所述測(cè)量系統(tǒng)接收,并且關(guān)于所述位置測(cè)量資源與所述至少一個(gè)相機(jī)之間的固定空間關(guān)系的校準(zhǔn)參數(shù)是基于所接收到的確定的位置與所確定的姿態(tài)的相關(guān)評(píng)價(jià)而得到的。
根據(jù)本發(fā)明的實(shí)施方式,所述控制和評(píng)估單元被配置為使得所述校準(zhǔn)功能被控制和執(zhí)行,使得根據(jù)所述路徑的跡線是基于所得到的姿態(tài)并且基于所接收到的確定的位置而得到的,其中,所述校準(zhǔn)參數(shù)是基于對(duì)所述跡線進(jìn)行比較而得到的。
根據(jù)本發(fā)明的另一特定實(shí)施方式,所述控制和評(píng)估單元被配置為使得所述校準(zhǔn)功能被控制和執(zhí)行,使得所述校準(zhǔn)參數(shù)通過附加地使用由慣性測(cè)量單元生成的數(shù)據(jù)而被得到,所述慣性測(cè)量單元與所述測(cè)量子系統(tǒng)或所述位置測(cè)量資源關(guān)聯(lián)。
根據(jù)本發(fā)明的又一特定實(shí)施方式,所述位置測(cè)量資源的所接收到的位置通過在所述位置測(cè)量資源一側(cè)接收gnss信號(hào)或者通過在所述位置測(cè)量資源一側(cè)反射測(cè)量激光束來確定,該測(cè)量激光束由全站儀或經(jīng)緯儀發(fā)射和接收。
使用關(guān)于從所述測(cè)量系統(tǒng)接收到的所述位置信息以及基于所拍攝的圖像而確定的所述姿態(tài)二者的信息,能夠得到所述相機(jī)(相機(jī)模塊)和所述位置測(cè)量資源的相對(duì)位置和定向并且能夠從此計(jì)算所述兩個(gè)組件的相對(duì)空間定向。所述姿態(tài)表示所述相機(jī)的相應(yīng)的定向。該方法在移動(dòng)所述相機(jī)(并且相應(yīng)地移動(dòng)所述位置測(cè)量資源)的同時(shí)提供連續(xù)且自動(dòng)位置校準(zhǔn)。借助于由所述慣性測(cè)量單元提供的數(shù)據(jù)這種校準(zhǔn)按六個(gè)自由度(6-dof)實(shí)現(xiàn)。
本發(fā)明還涉及一種測(cè)量子系統(tǒng),該測(cè)量子系統(tǒng)包括要用作被適配為確定被安裝在測(cè)量桿上的位置測(cè)量資源的具體地gnss天線的或回復(fù)反射器的位置的測(cè)量系統(tǒng)的一部分的控制和評(píng)估單元以及相機(jī)模塊。所述相機(jī)模塊被設(shè)計(jì)為附接至所述測(cè)量桿并且包括用于拍攝圖像的至少兩個(gè)相機(jī)。慣性測(cè)量單元按照相對(duì)于所述測(cè)量子系統(tǒng)的固定空間關(guān)系與所述測(cè)量子系統(tǒng)或所述位置測(cè)量資源關(guān)聯(lián)。
所述控制和評(píng)估單元已存儲(chǔ)具有程序代碼的程序以便控制和執(zhí)行校準(zhǔn)功能,其中,當(dāng)沿著通過環(huán)境的路徑移動(dòng)時(shí)
·慣性測(cè)量數(shù)據(jù)是在沿著所述路徑移動(dòng)的同時(shí)收集的,
·基于圖像的定位被生成,因此所述環(huán)境的圖像的系列利用所述至少一個(gè)相機(jī)拍攝,所述系列包括按所述相機(jī)的不同姿態(tài)拍攝的一定量的圖像,所述姿態(tài)表示所述相機(jī)的相應(yīng)的位置和定向,利用使用圖像的系列的定義算法的slam評(píng)估被執(zhí)行,其中,多個(gè)分別對(duì)應(yīng)的圖像點(diǎn)在圖像的系列中的圖像的多個(gè)子組中的每一個(gè)被標(biāo)識(shí),并且,基于使用所述多個(gè)分別對(duì)應(yīng)的圖像點(diǎn)的后方交會(huì)和前方交會(huì),包括所述環(huán)境的多個(gè)基準(zhǔn)點(diǎn)的基準(zhǔn)點(diǎn)場(chǎng)被建立,其中,所述基準(zhǔn)點(diǎn)的坐標(biāo)被得到,并且所述圖像的所述姿態(tài)被確定,并且
·用于所述慣性測(cè)量單元的校準(zhǔn)參數(shù)是基于所收集的慣性測(cè)量數(shù)據(jù)和所述基于相機(jī)的定位數(shù)據(jù)而得到的,具體地其中,卡爾曼濾波器被使用。
根據(jù)本發(fā)明的實(shí)施方式,所述控制和評(píng)估單元被配置為使得所述校準(zhǔn)功能被控制和執(zhí)行,使得所述慣性測(cè)量單元使用所得到的校準(zhǔn)參數(shù)來校準(zhǔn),其中,所述慣性測(cè)量單元的系統(tǒng)誤差被補(bǔ)償,具體地其中,所述慣性測(cè)量單元的偏差(bias)被補(bǔ)償。
通過應(yīng)用所得到的校準(zhǔn)參數(shù)僅僅(僅)基于從所述圖像的姿態(tài)得到的即從在移動(dòng)所述相機(jī)的同時(shí)拍攝的圖像的系列得到的所述定向數(shù)據(jù)提供所述imu(慣性測(cè)量單元)的校準(zhǔn)。相機(jī)和imu在移動(dòng)的同時(shí)被布置在定義相對(duì)空間位置中。
本發(fā)明還涉及一種測(cè)量子系統(tǒng),該測(cè)量子系統(tǒng)包括要用作被適配為利用測(cè)量桿確定位置的測(cè)量系統(tǒng)的一部分的控制和評(píng)估單元以及相機(jī)模塊。所述相機(jī)模塊被設(shè)計(jì)為在到所述桿的底端的已知距離上附接至所述測(cè)量桿并且包括用于拍攝圖像的至少一個(gè)相機(jī)。所述控制和評(píng)估單元已存儲(chǔ)具有程序代碼的程序以便控制和執(zhí)行定標(biāo)功能,其中,當(dāng)沿著通過環(huán)境的路徑移動(dòng)時(shí)
·所述環(huán)境的圖像的系列利用所述至少一個(gè)相機(jī)拍攝,環(huán)境地面出現(xiàn)在所述圖像中,所述系列包括按所述相機(jī)的不同姿態(tài)拍攝的一定量的圖像,所述姿態(tài)表示所述相機(jī)的相應(yīng)的位置和定向;
·利用使用圖像的系列的定義算法的slam評(píng)估被執(zhí)行,其中,多個(gè)分別對(duì)應(yīng)的圖像點(diǎn)在圖像的系列中的圖像的多個(gè)子組中的每一個(gè)中被標(biāo)識(shí),并且,基于使用所述多個(gè)分別對(duì)應(yīng)的圖像點(diǎn)的后方交會(huì)和前方交會(huì),包括所述環(huán)境的多個(gè)基準(zhǔn)點(diǎn)的基準(zhǔn)點(diǎn)場(chǎng)被建立,其中,所述基準(zhǔn)點(diǎn)的坐標(biāo)被得到,并且所述圖像的所述姿態(tài)被確定;
·基于所確定的姿態(tài),包括所述環(huán)境的點(diǎn)的3d位置的點(diǎn)云通過使用圖像的系列的前方交會(huì)具體地通過使用密集匹配算法來計(jì)算;
·從所述相機(jī)到所述地面的距離是基于從所述相機(jī)到所述底端的所述已知距離而確定的;并且
·所述點(diǎn)云基于所確定的距離被定標(biāo)。
在這個(gè)子系統(tǒng)的一個(gè)實(shí)施方式中,對(duì)所述點(diǎn)云進(jìn)行定標(biāo)包括基于所確定的距離來確定所述地面上的點(diǎn)的3d位置。
在這個(gè)子系統(tǒng)的另一實(shí)施方式中,確定從所述相機(jī)到所述地面的所述距離包括具體地從所述姿態(tài)得到所述相機(jī)的定向。
此外,關(guān)于本發(fā)明的另一方面涉及一種針對(duì)測(cè)量子系統(tǒng)的集束調(diào)整,該測(cè)量子系統(tǒng)包括要用作被適配為確定被安裝在測(cè)量桿上的位置測(cè)量資源的具體地gnss天線的或回復(fù)反射器的位置的測(cè)量系統(tǒng)的一部分的控制和評(píng)估單元以及相機(jī)模塊。
所述相機(jī)模塊被設(shè)計(jì)為附接至所述測(cè)量桿并且包括用于拍攝圖像的至少兩個(gè)相機(jī)。所述控制和評(píng)估單元已存儲(chǔ)具有程序代碼的程序以便控制和執(zhí)行空間表示生成功能,其中,當(dāng)沿著通過環(huán)境的路徑移動(dòng)時(shí),至少
·所述環(huán)境的圖像的系列利用所述至少一個(gè)相機(jī)拍攝,所述系列包括按所述相機(jī)的不同姿態(tài)拍攝的一定量的圖像,所述姿態(tài)表示所述相機(jī)的相應(yīng)的位置和定向,
·利用使用圖像的系列的定義算法的slam評(píng)估被執(zhí)行,其中,多個(gè)分別對(duì)應(yīng)的圖像點(diǎn)在圖像的系列中的圖像的多個(gè)子組中的每一個(gè)中被標(biāo)識(shí),并且,基于使用所述多個(gè)分別對(duì)應(yīng)的圖像點(diǎn)的后方交會(huì)和前方交會(huì),包括所述環(huán)境的多個(gè)基準(zhǔn)點(diǎn)的基準(zhǔn)點(diǎn)場(chǎng)被建立,其中,所述基準(zhǔn)點(diǎn)的坐標(biāo)被得到,并且所述圖像的所述姿態(tài)被確定,
·針對(duì)已在所述路徑上采用的點(diǎn)的所述位置測(cè)量資源的確定的位置由所述控制和評(píng)估單元從所述測(cè)量系統(tǒng)接收,并且,
·在接收到測(cè)量觸發(fā)時(shí),分段集束調(diào)整被執(zhí)行,其中,與和所述測(cè)量觸發(fā)有關(guān)的減少數(shù)量的圖像一起使用僅圖像的系列的子集,所述基準(zhǔn)點(diǎn)場(chǎng)和所述姿態(tài)針對(duì)所述子集的圖像被追溯地重新計(jì)算。
根據(jù)本發(fā)明,基于所確定的姿態(tài),包括所述環(huán)境的點(diǎn)的3d位置的點(diǎn)云通過使用圖像的系列中的圖像的前方交會(huì)來計(jì)算,針對(duì)已在所述路徑上采用的點(diǎn)的所述位置測(cè)量資源的確定的位置由所述控制和評(píng)估單元從所述測(cè)量系統(tǒng)接收,并且在選擇圖像的系列中的圖像中的至少一個(gè)中的單個(gè)點(diǎn)或區(qū)域時(shí),至少基于相應(yīng)地在所述區(qū)域的點(diǎn)附近的預(yù)定義區(qū)域的圖像數(shù)據(jù)并且基于與所接收到的確定的位置有關(guān)的信息執(zhí)行用于細(xì)化所述點(diǎn)云的集束調(diào)整。
具體地,作為最終或中間布置,總體解決方案(至少姿態(tài)和點(diǎn)云)使用集束調(diào)整來細(xì)化。所述算法的這個(gè)部分是再投影誤差的非線性最小二乘最小化。它將優(yōu)化相應(yīng)的相機(jī)位置和3d點(diǎn)的定位和定向。
在以上集束調(diào)整的上下文中,收集的測(cè)量數(shù)據(jù)(例如,圖像、圖像點(diǎn)、姿態(tài)和/或3d位置)的一部分被用于參照由所拍攝的圖像覆蓋的所述環(huán)境的一部分來提供細(xì)化的(部分)點(diǎn)云。具體地,通過卡爾曼濾波器提供的這種測(cè)量數(shù)據(jù)被使用。具體地,根據(jù)閉合測(cè)量歷史的測(cè)量數(shù)據(jù)被使用,例如與前面的和/或連續(xù)的十個(gè)姿態(tài)對(duì)應(yīng)的數(shù)據(jù)(相對(duì)于用于集束調(diào)整的感興趣點(diǎn)或區(qū)域被選擇輸入的圖像)。
根據(jù)所述子系統(tǒng)的一個(gè)實(shí)施方式,位置信息可從測(cè)量觸發(fā)得到,并且所述子集是基于所述位置信息選擇的。
根據(jù)所述子系統(tǒng)的另一實(shí)施方式,所述測(cè)量觸發(fā)是可從測(cè)量系統(tǒng)接收的觸發(fā)。
根據(jù)所述子系統(tǒng)的又一實(shí)施方式,所述測(cè)量觸發(fā)是通過將所述桿放置在測(cè)量點(diǎn)上和/或使所述桿保持基本上在固定位置和定向上達(dá)預(yù)定時(shí)間段而自動(dòng)地引起的。
在所述子系統(tǒng)的另一個(gè)實(shí)施方式中,所述分段集束調(diào)整通過使用在標(biāo)識(shí)所述圖像點(diǎn)并且確定所述姿態(tài)的情況下發(fā)生的誤差的非線性最小二乘最小化來執(zhí)行。
在所述子系統(tǒng)的一個(gè)實(shí)施方式中,與所述測(cè)量觸發(fā)有關(guān)的定位信息是基于重新計(jì)算的姿態(tài)而得到的,具體地其中,所述手提測(cè)量桿針對(duì)一個(gè)或更多個(gè)測(cè)量觸發(fā)相關(guān)時(shí)間點(diǎn)的位置和定向被得到。
在所述子系統(tǒng)的另一實(shí)施方式中,所述點(diǎn)云借助于所確定的位置被定標(biāo),并且/或者所述測(cè)量桿的尖端的位置的坐標(biāo)在執(zhí)行分段集束調(diào)整之后在所述測(cè)量觸發(fā)時(shí)作為反應(yīng)被得到和輸出。
執(zhí)行所述集束調(diào)整提供所選擇的點(diǎn)的位置的非常精確的確定或者相應(yīng)地定義區(qū)域中的點(diǎn)的量的精確的確定,并且從而提供所述定義區(qū)域的確切數(shù)字3d模型。
通過集束調(diào)整實(shí)現(xiàn)了關(guān)于考慮所述集束調(diào)整的執(zhí)行的圖像的所計(jì)算出的姿態(tài)的細(xì)化。這種細(xì)化再次導(dǎo)致3d位置的更精確的確定。
此外,所述桿的定向(在根據(jù)所述姿態(tài)計(jì)算的情況下)可以被以更精確的方式確定。具體地,這種定向由于所計(jì)算的姿態(tài)而得到有六個(gè)自由度(6-dof)。
所述集束調(diào)整具體地在所述系統(tǒng)的用戶選擇所述點(diǎn)或所述區(qū)域時(shí)被執(zhí)行,其中,經(jīng)調(diào)整的數(shù)據(jù)被以實(shí)時(shí)方式提供給所述用戶,即所述選擇選擇所述點(diǎn)并且例如在所述系統(tǒng)的顯示裝置上基本上立即接收計(jì)算結(jié)果。
另一個(gè)發(fā)明方面涉及一種要用作被適配為確定被安裝在測(cè)量桿上的位置測(cè)量資源的位置的測(cè)量系統(tǒng)的一部分的特定相機(jī)模塊,具體地其中,所述位置測(cè)量資源包括gnss天線或回復(fù)反射器。該相機(jī)模塊被設(shè)計(jì)為附接至所述測(cè)量桿并且包括至少第一相機(jī)和第二相機(jī),該第一相機(jī)包括第一成像特性并且該第二相機(jī)包括與所述第一成像特性不同的第二成像特性。
根據(jù)本發(fā)明的實(shí)施方式,所述第一相機(jī)被設(shè)計(jì)為使得具有比可利用所述第二相機(jī)拍攝的圖像的圖像分辨率低的圖像分辨率的圖像被拍攝。
根據(jù)本發(fā)明的另一個(gè)實(shí)施方式,所述第一相機(jī)包括第一成像傳感器并且所述第二相機(jī)包括第二成像傳感器,其中,所述第一成像傳感器與所述第二成像傳感器相比關(guān)于要拍攝的圖像提供更低的點(diǎn)到點(diǎn)分辨率。
根據(jù)本發(fā)明的另一個(gè)實(shí)施方式,與所述第二相機(jī)相比所述第一相機(jī)被設(shè)計(jì)用于以更高的幀速率拍攝圖像。
根據(jù)本發(fā)明的另一個(gè)實(shí)施方式,所述第一相機(jī)被設(shè)計(jì)為使得根據(jù)第一光譜范圍的圖像拍攝被提供并且所述第二相機(jī)被設(shè)計(jì)為使得根據(jù)第二光譜范圍的圖像拍攝被提供,其中,所述第一光譜范圍與所述第二光譜范圍不同,具體地其中,所述第一相機(jī)提供根據(jù)紅外光譜范圍的圖像拍攝或者提供溫度記錄圖圖像。
按不同的光譜范圍拍攝圖像提供用于得到所覆蓋的環(huán)境的更詳細(xì)的信息,具體地用于具有改進(jìn)的紋理或關(guān)于光譜特性(例如,關(guān)于對(duì)象的熱特性)的擴(kuò)展信息的圖像的生成(例如,通過合并覆蓋所述環(huán)境的公共區(qū)域的不同的光譜范圍的圖像)。
本發(fā)明還涉及一種測(cè)量子系統(tǒng),該測(cè)量子系統(tǒng)包括要用作被適配為確定被安裝在手提測(cè)量桿上的位置測(cè)量資源的位置的測(cè)量系統(tǒng)的一部分的控制和評(píng)估單元以及相機(jī)模塊,其中,所述位置測(cè)量資源包括gnss天線或回復(fù)反射器。
所述相機(jī)模塊被設(shè)計(jì)為附接至所述測(cè)量桿并且包括用于拍攝圖像的至少兩個(gè)相機(jī),其中,所述至少兩個(gè)相機(jī)中的第一個(gè)被設(shè)計(jì)為按與可利用所述至少兩個(gè)相機(jī)中的第二個(gè)拍攝的第二圖像相比更低的圖像分辨率拍攝第一圖像,
所述控制和評(píng)估單元已存儲(chǔ)具有程序代碼的程序以便控制和執(zhí)行空間表示生成功能,其中,當(dāng)沿著通過環(huán)境的路徑移動(dòng)時(shí)
·所述環(huán)境的圖像的第一系列利用所述第一相機(jī)拍攝,所述第一系列包括按所述第一相機(jī)的不同姿態(tài)捕獲的一定量的圖像,所述姿態(tài)表示所述第一相機(jī)的相應(yīng)的位置和定向,并且所述環(huán)境的圖像的第二系列利用所述第二相機(jī)并行地拍攝,并且
·利用使用僅圖像的第一系列的定義算法的slam評(píng)估被執(zhí)行,其中,多個(gè)分別對(duì)應(yīng)的圖像點(diǎn)在圖像的第一系列的圖像的多個(gè)子組中的每一個(gè)中被標(biāo)識(shí),并且,基于使用所述多個(gè)分別對(duì)應(yīng)的圖像點(diǎn)的后方交會(huì)和前方交會(huì),包括所述環(huán)境的多個(gè)基準(zhǔn)點(diǎn)的基準(zhǔn)點(diǎn)場(chǎng)被建立,其中,所述基準(zhǔn)點(diǎn)的坐標(biāo)被得到,并且所述圖像的所述姿態(tài)被確定,
從而與通過利用所述第二相機(jī)拍攝圖像而生成的處理數(shù)據(jù)相比在所述slam評(píng)估內(nèi)提供更快的數(shù)據(jù)處理。
根據(jù)本發(fā)明的實(shí)施方式,所述控制和評(píng)估單元被配置為使得所述空間表示生成功能被控制和執(zhí)行,使得基于所確定的姿態(tài)包括所述環(huán)境的點(diǎn)的3d位置的點(diǎn)云通過使用圖像的第二系列的圖像的前方交會(huì)被計(jì)算為所述空間表示。
根據(jù)本發(fā)明的另一實(shí)施方式,所述點(diǎn)云的處理通過用戶命令來觸發(fā)。
根據(jù)本發(fā)明的另一實(shí)施方式,所述控制和評(píng)估單元被配置為使得所述空間表示生成功能被控制和執(zhí)行,使得所述點(diǎn)云的處理使用圖像的第二系列的圖像的定義子集來執(zhí)行,其中,所述子集可由用戶選擇,從而提供用于在比較短的時(shí)間中為所述環(huán)境的期望部分生成詳細(xì)的3d信息。
根據(jù)本發(fā)明的另一實(shí)施方式,所述控制和評(píng)估單元被配置為使得所述空間表示生成功能被控制和執(zhí)行,使得密集匹配算法被執(zhí)行以用于使用圖像的第二系列的圖像來提供所述點(diǎn)云。
根據(jù)本發(fā)明的另一實(shí)施方式,所述控制和評(píng)估單元被配置為使得所述空間表示生成功能被控制和執(zhí)行,使得基于所確定的姿態(tài),包括所述環(huán)境的點(diǎn)的3d位置的初始點(diǎn)云通過僅使用圖像的第一系列的圖像的前方交會(huì)來計(jì)算。
根據(jù)本發(fā)明的另一個(gè)特定實(shí)施方式,所述控制和評(píng)估單元被配置為使得所述空間表示生成功能被控制和執(zhí)行,使得為所述初始點(diǎn)云生成了圖形再現(xiàn),該圖形再現(xiàn)可由所述測(cè)量系統(tǒng)的顯示裝置顯示,從而向用戶提供關(guān)于已經(jīng)獲取的數(shù)據(jù)的比較快的直接反饋,使得所述已經(jīng)獲取的數(shù)據(jù)關(guān)于其完整性能夠被檢查。
根據(jù)本發(fā)明的另一個(gè)特定實(shí)施方式,所述控制和評(píng)估單元被配置為使得所述空間表示生成功能被控制和執(zhí)行,使得密集匹配算法被執(zhí)行以用于使用具有更低的圖像分辨率的圖像的第一系列的圖像來提供所述初始點(diǎn)云,從而提供比較快的數(shù)據(jù)處理。
根據(jù)本發(fā)明的另一個(gè)特定實(shí)施方式,所述控制和評(píng)估單元被配置為使得所述空間表示生成功能被控制和執(zhí)行,使得所述第一相機(jī)以與由所述第二相機(jī)拍攝所述第二圖像相比更高的幀速率拍攝所述第一圖像。
因此,當(dāng)具有高分辨率的圖像以及具有更低分辨率的圖像二者由所述相機(jī)模塊的所述至少兩個(gè)相機(jī)提供時(shí),給出了快速且高效的數(shù)據(jù)處理以及關(guān)于位置和/或定向的確定生成高度精確的數(shù)據(jù)的可能性的方面。因此,具體地根據(jù)測(cè)量處理的類型或階段使得用戶能夠選擇哪一個(gè)數(shù)據(jù)將被計(jì)算和/或輸出例如在顯示裝置上。例如為了得到關(guān)于所述測(cè)量處理的進(jìn)度的快速概要快速數(shù)據(jù)處理和輸出將是需要的并且將可通過更低分辨率的圖像數(shù)據(jù)提供。另選地或附加地,非常詳細(xì)的且精確的位置信息通過例如同時(shí)使用更高分辨率圖像數(shù)據(jù)來提供。
本發(fā)明的另一方面涉及一種關(guān)于具有特定相機(jī)的測(cè)量子系統(tǒng)的類似方法。所述測(cè)量子系統(tǒng)包括要用作被適配為確定被安裝在測(cè)量桿上的位置測(cè)量資源的位置的測(cè)量系統(tǒng)的一部分的控制和評(píng)估單元以及相機(jī)模塊,具體地,其中,所述位置測(cè)量資源包括gnss天線或回復(fù)反射器。所述相機(jī)模塊被設(shè)計(jì)為附接至所述測(cè)量桿并且包括用于拍攝圖像的至少一個(gè)(雙模式)相機(jī),所述相機(jī)被設(shè)計(jì)為使得關(guān)于按不同的分辨率并且/或者按不同的幀速率拍攝圖像的不同的拍攝模式被提供,所述控制和評(píng)估單元已存儲(chǔ)具有程序代碼的程序以便控制和執(zhí)行空間表示生成功能,其中
·低分辨率高幀速率模式是為圖像在比較低的分辨率情況下利用所述至少一個(gè)相機(jī)的高頻率拍攝而提供的,并且
·高分辨率低幀速率模式是為圖像在比較低的幀速率情況下利用所述至少一個(gè)相機(jī)的高分辨率拍攝而提供的,
并且,當(dāng)沿著通過環(huán)境的路徑移動(dòng)時(shí)
·所述環(huán)境的圖像的系列使用所述低分辨率高幀速率模式來拍攝,所述系列包括按所述相機(jī)的不同姿態(tài)拍攝的一定量的圖像,所述姿態(tài)表示所述相機(jī)的相應(yīng)的位置和定向,并且
·利用使用圖像的系列的定義算法的slam評(píng)估被執(zhí)行,其中,多個(gè)分別對(duì)應(yīng)的圖像點(diǎn)在圖像的系列中的圖像的多個(gè)子組中的每一個(gè)中被標(biāo)識(shí),并且,基于使用所述多個(gè)分別對(duì)應(yīng)的圖像點(diǎn)的后方交會(huì)和前方交會(huì),包括所述環(huán)境的多個(gè)基準(zhǔn)點(diǎn)的基準(zhǔn)點(diǎn)場(chǎng)被建立,其中,所述基準(zhǔn)點(diǎn)的坐標(biāo)被得到,并且所述圖像的所述姿態(tài)被確定。
根據(jù)以上發(fā)明的特定實(shí)施方式,所述控制和評(píng)估單元被配置為使得所述空間表示生成功能被控制和執(zhí)行,使得
·所述環(huán)境的圖像的系列使用所述高分辨率低幀速率模式來拍攝,所述系列包括按所述相機(jī)的不同姿態(tài)拍攝的一定量的圖像,
·所述低分辨率高幀速率模式和所述高分辨率低幀速率模式被同時(shí)執(zhí)行并且
·在高分辨率低幀速率模式下拍攝的圖像的姿態(tài)是基于所述圖像點(diǎn)并且/或者基于針對(duì)在低分辨率高幀速率模式下拍攝的所述圖像而確定的所述姿態(tài)而得到的。
根據(jù)所述子系統(tǒng)的另一特定實(shí)施方式,所述控制和評(píng)估單元被配置為使得所述空間表示生成功能被控制和執(zhí)行,使得在高分辨率低幀速率模式下的圖像拍攝通過定義時(shí)間信號(hào)(具體地按照恒定時(shí)間間隔提供觸發(fā)信號(hào)的時(shí)間信號(hào))來觸發(fā),或者通過對(duì)所述桿的相對(duì)位置進(jìn)行比較來觸發(fā),所述位置是從針對(duì)在低分辨率高幀速率模式下拍攝的所述圖像而確定的所述姿態(tài)得到的,其中,連續(xù)圖像的拍攝根據(jù)是否達(dá)到或者超過預(yù)定義相對(duì)位置閾值被觸發(fā),具體地其中,所述連續(xù)圖像的拍攝在前一個(gè)桿位置與實(shí)際桿位置之間的差異為至少一米具體地兩米或五米的情況下被觸發(fā)。
被具體實(shí)現(xiàn)用于按不同的幀速率和/或分辨率拍攝圖像的這種相機(jī)的使用提供用于在一個(gè)公共測(cè)量處理中組合低分辨率圖像和高分辨率圖像。所述低分辨率圖像因此由于大量的圖像、考慮的圖像點(diǎn)和計(jì)算出的姿態(tài)而提供圖像和(低分辨率)點(diǎn)云的姿態(tài)的精確且快速的計(jì)算。附加地,為了精確地確定圖像中拍攝的點(diǎn)的位置、例如所述桿或更精確的(高分辨率)點(diǎn)云的定向,能夠考慮所述高分辨率圖像。
為了計(jì)算這種高分辨率點(diǎn)云,能夠基于利用并且針對(duì)所述低分辨率圖像而得到的所述數(shù)據(jù)來確定所述高分辨率圖像的姿態(tài),即在這些圖像中標(biāo)識(shí)的圖像點(diǎn)和/或針對(duì)這些圖像而得到的姿態(tài)被考慮用于確定所述高分辨率圖像的姿態(tài)。這種姿態(tài)確定是基于將公共時(shí)間基準(zhǔn)用于拍攝低分辨率圖像以及高分辨率圖像而實(shí)現(xiàn)的。相應(yīng)的高分辨率圖像因此能夠被指派給相應(yīng)的低分辨率圖像。
附加地,具體地,使得用戶能夠人工地觸發(fā)感興趣點(diǎn)或區(qū)域的高分辨率圖像的拍攝并且因此提供該點(diǎn)和/或區(qū)域的更詳細(xì)的信息。
此外,關(guān)于本發(fā)明的另一方面涉及相對(duì)于由測(cè)量系統(tǒng)收集的數(shù)據(jù)的循環(huán)閉合。所述測(cè)量子系統(tǒng)包括要用作被適配為確定被安裝在測(cè)量桿上的位置測(cè)量資源的具體地gnss天線的或回復(fù)反射器的位置的測(cè)量系統(tǒng)的一部分的控制和評(píng)估單元以及相機(jī)模塊。所述相機(jī)模塊被設(shè)計(jì)為附接至所述測(cè)量桿并且包括用于拍攝圖像的至少兩個(gè)相機(jī)。所述控制和評(píng)估單元已存儲(chǔ)具有程序代碼的程序以便控制和執(zhí)行空間表示生成功能,其中,當(dāng)沿著通過環(huán)境的路徑移動(dòng)時(shí)
·所述環(huán)境的圖像的第一系列利用所述至少一個(gè)相機(jī)拍攝,所述第一系列包括按所述相機(jī)的不同姿態(tài)拍攝的一定量的圖像,所述姿態(tài)表示所述相機(jī)的相應(yīng)的位置和定向,
·圖像點(diǎn)的初始集合是基于圖像的第一系列標(biāo)識(shí)的,初始圖像點(diǎn)表示基準(zhǔn)點(diǎn)場(chǎng)的基準(zhǔn)點(diǎn),其中,各個(gè)基準(zhǔn)點(diǎn)出現(xiàn)在圖像的系列的至少兩個(gè)圖像中,并且
·所述圖像的所述姿態(tài)是基于使用所述初始圖像點(diǎn)的后方交會(huì)而確定的。
此外,根據(jù)本發(fā)明的這個(gè)方面
·所述環(huán)境的圖像的第二系列利用所述至少一個(gè)相機(jī)拍攝,
·出現(xiàn)在圖像的第二系列的圖像中的至少一個(gè)中的所述基準(zhǔn)點(diǎn)場(chǎng)的基準(zhǔn)點(diǎn)被標(biāo)識(shí),
·圖像點(diǎn)的另一集合在與圖像的第二系列的經(jīng)標(biāo)識(shí)的基準(zhǔn)點(diǎn)對(duì)應(yīng)的圖像的第二系列的圖像中被標(biāo)識(shí),并且
·圖像的第二系列的圖像的姿態(tài)是基于使用圖像點(diǎn)的初始集合和另一集合的后方交會(huì)而確定的。
根據(jù)以上發(fā)明的實(shí)施方式,所述相機(jī)模塊包括彼此相對(duì)布置的至少兩個(gè)相機(jī),使得在方位方向上具有360°的視場(chǎng)的全景圖像是可捕獲的。具體地,各個(gè)相機(jī)包括魚眼光學(xué)器件。
通過實(shí)際上標(biāo)識(shí)并考慮已經(jīng)在一組初始或前面的基準(zhǔn)點(diǎn)中標(biāo)識(shí)的基準(zhǔn)點(diǎn),能夠與實(shí)際的姿態(tài)重建和/或點(diǎn)云計(jì)算一起考慮這些最初定義的點(diǎn)并且能夠使已經(jīng)計(jì)算的點(diǎn)云閉合以便通過一個(gè)完整云來表示整個(gè)環(huán)境。
早先定義的基準(zhǔn)點(diǎn)的以后重復(fù)的使用還提供收集的位置和/或定向數(shù)據(jù)的細(xì)化,因?yàn)槔鄯e誤差(例如,因確定連續(xù)姿態(tài)而發(fā)生)能夠由那個(gè)補(bǔ)償。
如果所述環(huán)境中的同一區(qū)域的(或其部分的)多個(gè)圖像被拍攝,則能夠使這些圖像和/或所述圖像中標(biāo)識(shí)的相應(yīng)的基準(zhǔn)點(diǎn)匹配。這至少將增加總體準(zhǔn)確性。
另一個(gè)發(fā)明方面與具有集成相機(jī)的位置測(cè)量資源有關(guān)。所述位置測(cè)量資源被具體實(shí)現(xiàn)為可安裝在測(cè)量桿上以被用作被適配為確定所述位置測(cè)量資源的位置的測(cè)量系統(tǒng)的一部分。所述位置測(cè)量資源包括gnss天線和/或回復(fù)反射器以及具有用于拍攝環(huán)境的圖像的至少一個(gè)相機(jī)的相機(jī)布置。所述相機(jī)布置以及所述gnss天線和/或所述回復(fù)反射器被集成到所述位置測(cè)量資源的單個(gè)公共不可分的外殼中,并且所述公共外殼包括被設(shè)計(jì)為使得所述位置測(cè)量資源可模塊化附接至所述桿的聯(lián)接單元。
根據(jù)以上本發(fā)明的實(shí)施方式,所述相機(jī)布置被構(gòu)建和設(shè)計(jì)為使得至少在方位方向上具有360°的視場(chǎng)的全景圖像是可捕獲的,具體地其中,所述相機(jī)布置包括布置在所述公共外殼中的至少兩個(gè)相機(jī),尤其是至少四個(gè)相機(jī)。
根據(jù)以上本發(fā)明的另一個(gè)實(shí)施方式,所述位置測(cè)量資源包括被集成到所述公共外殼中的傳感器單元,該傳感器單元包括以下傳感器中的至少一個(gè):
·慣性測(cè)量單元,
·陀螺儀,
·傾斜傳感器,
·加速度計(jì),和/或
·磁羅盤。
通過將所述相機(jī)布置在附加地包括所述gnss天線或所述回復(fù)反射器的所述位置測(cè)量資源的外殼內(nèi)部,提供了緊湊組件,其提供用于所述組件的位置確定并且用于例如通過使用由所述相機(jī)拍攝的圖像來執(zhí)行slam算法或sfm算法來確定所述組件的定向。
因此,還提供了關(guān)于所述組件或所述桿的位置和定向的六個(gè)自由度(6-dof)的連續(xù)確定。
現(xiàn)在參照抑制被布置在相機(jī)模塊中以便提供圖像的更穩(wěn)定拍攝的相機(jī)的問題,根據(jù)該發(fā)明的對(duì)應(yīng)布置像在下面所闡述的那樣被描述。
本發(fā)明涉及一種要用作被適配為確定被安裝在測(cè)量桿上的位置測(cè)量資源的位置的測(cè)量系統(tǒng)的一部分的相機(jī)模塊,具體地其中,所述位置測(cè)量模塊包括gnss天線和回復(fù)反射器,所述相機(jī)模塊被設(shè)計(jì)為附接至所述測(cè)量桿。所述相機(jī)模塊被設(shè)計(jì)為附接至所述測(cè)量桿并且包括外殼以及具有至少一個(gè)相機(jī)的相機(jī)布置,其中,所述相機(jī)被集成在所述外殼中并且通過使用阻尼元件相對(duì)于所述外殼被可移動(dòng)地安裝,使得當(dāng)沿著路徑隨著所述測(cè)量桿(已剛性附接所述相機(jī)模塊)而移動(dòng)時(shí),通過使所述測(cè)量桿降落實(shí)現(xiàn)的機(jī)械沖擊在所述相機(jī)布置一側(cè)被補(bǔ)償,并且/或者使得至少所述相機(jī)布置的方位定向可相對(duì)于所述外殼的方位定向變化,使得當(dāng)沿著路徑隨著所述測(cè)量桿(已剛性附接所述相機(jī)模塊)而移動(dòng)時(shí),所述桿和所述外殼的方位定向的變更在所述相機(jī)布置一側(cè)被補(bǔ)償,具體地其中,具有低幅度的更高頻率變更被補(bǔ)償,尤其使得形成在所述相機(jī)布置的方位定向與所述路徑上的運(yùn)動(dòng)方向之間的相對(duì)方位角在所述路徑上的各個(gè)點(diǎn)中被保持基本上恒定。
根據(jù)以上發(fā)明的實(shí)施方式,實(shí)際的運(yùn)動(dòng)方向或平滑的運(yùn)動(dòng)方向被用作所述運(yùn)動(dòng)方向,所述平衡運(yùn)動(dòng)方向具體地是通過使所述路徑的最近行進(jìn)段平滑針對(duì)所述路徑上的各個(gè)點(diǎn)而得到的。
根據(jù)以上發(fā)明的另一個(gè)實(shí)施方式,所述相機(jī)布置通過使用萬向架相對(duì)于所述外殼被安裝。
根據(jù)以上發(fā)明的另一個(gè)實(shí)施方式,所述相機(jī)模塊包括被布置在所述外殼中的飛輪和/或陀螺單元,其中,所述飛輪或所述陀螺單元與所述相機(jī)布置連接,使得通過所述旋轉(zhuǎn)飛輪或所述陀螺單元施加的力被傳遞到所述相機(jī)布置,從而提供所述相機(jī)布置的所述方位定向的穩(wěn)定。
根據(jù)以上發(fā)明的另一個(gè)實(shí)施方式,所述相機(jī)模塊包括連接到所述相機(jī)布置以主動(dòng)地使所述相機(jī)布置的所述方位定向穩(wěn)定的致動(dòng)器,具體地壓電致動(dòng)器。
根據(jù)以上發(fā)明的又一個(gè)實(shí)施方式,所述相機(jī)模塊包括用于得到所述外殼的定向的單元,其中,由所述單元生成的定向信息被提供給所述致動(dòng)器以用于根據(jù)所檢測(cè)到的所述外殼的定向主動(dòng)地對(duì)所述相機(jī)布置的定向進(jìn)行補(bǔ)償。具體地,所述定向信息是基于以下各項(xiàng)而生成的
·使用利用所述至少一個(gè)相機(jī)拍攝的圖像的系列的slam評(píng)估,在該slam評(píng)估內(nèi)所述圖像的姿態(tài)被確定,
·由所述單元從所述測(cè)量系統(tǒng)接收的所述位置測(cè)量資源的確定的位置,和/或
·提供imu測(cè)量數(shù)據(jù)的慣性測(cè)量單元。
以上發(fā)明提供了所述相機(jī)在移動(dòng)上面附接有所述相機(jī)模塊的所述外殼或所述桿時(shí)的阻尼。這種阻尼使得能夠在通過所述環(huán)境移動(dòng)的同時(shí)拍攝更好質(zhì)量的圖像,即穩(wěn)定圖像。
此外,關(guān)于本發(fā)明的另一方面涉及相對(duì)于由測(cè)量子系統(tǒng)收集的點(diǎn)數(shù)據(jù)的質(zhì)量指示,具體地點(diǎn)云或遠(yuǎn)程單點(diǎn)測(cè)量。
根據(jù)該發(fā)明方面的相應(yīng)的測(cè)量子系統(tǒng)包括要用作被適配為確定被安裝在手提測(cè)量桿上的位置測(cè)量資源的位置的測(cè)量系統(tǒng)的一部分的控制和評(píng)估單元以及相機(jī)模塊,具體地,其中,所述位置測(cè)量資源包括gnss天線或回復(fù)反射器。所述相機(jī)模塊被設(shè)計(jì)為附接至所述測(cè)量桿并且包括用于拍攝圖像的至少兩個(gè)相機(jī)。所述控制和評(píng)估單元已存儲(chǔ)具有程序代碼的程序以便控制和執(zhí)行空間表示生成功能,其中,當(dāng)沿著通過環(huán)境的路徑移動(dòng)時(shí)
·所述環(huán)境的圖像的系列利用所述至少一個(gè)相機(jī)拍攝,所述系列包括按所述相機(jī)的不同姿態(tài)拍攝的一定量的圖像,所述姿態(tài)表示所述相機(jī)的相應(yīng)的位置和定向,
·利用使用圖像的系列的定義算法的slam評(píng)估被執(zhí)行,其中,多個(gè)分別對(duì)應(yīng)的圖像點(diǎn)在圖像的系列中的圖像的多個(gè)子組中的每一個(gè)中被標(biāo)識(shí),并且,基于使用所述多個(gè)分別對(duì)應(yīng)的圖像點(diǎn)的后方交會(huì)和前方交會(huì),包括所述環(huán)境的多個(gè)基準(zhǔn)點(diǎn)的基準(zhǔn)點(diǎn)場(chǎng)被建立,其中,所述基準(zhǔn)點(diǎn)的坐標(biāo)被得到,并且所述圖像的所述姿態(tài)被確定,并且
·關(guān)于要通過使用圖像的系列中的圖像和所確定的姿態(tài)的前方交會(huì)可計(jì)算的所述環(huán)境的至少一個(gè)點(diǎn)的3d位置的測(cè)量不確定性的質(zhì)量指示輸出被生成。
根據(jù)以上方面的實(shí)施方式,所述前方交會(huì)暗示使用方差-協(xié)方差矩陣,具體地其中,所述前方交會(huì)通過使用最小二乘法來執(zhí)行,并且所述質(zhì)量指示輸出是從所述方差-協(xié)方差矩陣得到的。
根據(jù)這個(gè)方面的另一實(shí)施方式,所述質(zhì)量指示輸出表示關(guān)于所述至少一個(gè)點(diǎn)的所述3d位置是可計(jì)算的或者被計(jì)算的精度的不確定性,具體地其中,所述質(zhì)量指示輸出至少受以下各項(xiàng)影響
·可用來確定所述圖像內(nèi)的所述圖像點(diǎn)的圖像位置的精度,
·在圖像的系列當(dāng)中可用于計(jì)算所述環(huán)境的至少一個(gè)點(diǎn)的3d位置的一定量的圖像,以及
·可用圖像的姿態(tài)的基線的長(zhǎng)度。
根據(jù)這個(gè)方面的另一實(shí)施方式,基于所確定的姿態(tài),包括所述環(huán)境的點(diǎn)的3d位置的點(diǎn)云通過使用圖像的系列中的圖像的前方交會(huì)來計(jì)算并且所述質(zhì)量指示輸出是針對(duì)所述點(diǎn)云的經(jīng)計(jì)算的點(diǎn)中的至少一個(gè)點(diǎn)而生成的,具體地其中,所述質(zhì)量指示輸出是針對(duì)所述點(diǎn)云的點(diǎn)的如下子集而生成的,即,所述子集參照用來確定所述子集的對(duì)應(yīng)量的姿態(tài)。
根據(jù)以上發(fā)明方面的另一個(gè)實(shí)施方式,為表示所述質(zhì)量指示輸出的所述點(diǎn)云生成圖形再現(xiàn),該圖形再現(xiàn)可由所述測(cè)量系統(tǒng)的顯示裝置顯示,從而向用戶提供關(guān)于已經(jīng)獲取的數(shù)據(jù)的反饋,使得所述已經(jīng)獲取的數(shù)據(jù)關(guān)于其質(zhì)量能夠被檢查。
根據(jù)本發(fā)明方面的另一個(gè)實(shí)施方式,所述質(zhì)量指示輸出由可顯示在所述測(cè)量系統(tǒng)的顯示裝置上的著色點(diǎn)云、定標(biāo)指示或特定符號(hào)來表示。
根據(jù)以上發(fā)明方面的另一個(gè)實(shí)施方式,針對(duì)已在所述路徑上采用的點(diǎn)的所述位置測(cè)量資源的確定的位置由所述控制和評(píng)估單元從所述測(cè)量系統(tǒng)接收,并且所述點(diǎn)云借助于所接收到的確定的位置被定標(biāo)。
上述發(fā)明方面提供用于生成表示基于拍攝的圖像而得到的數(shù)據(jù)的質(zhì)量的信息。具體地,用戶被提供有這種信息從而允許依賴于所述質(zhì)量信息重新計(jì)劃或者采用測(cè)量處理。例如如果針對(duì)點(diǎn)的區(qū)域或關(guān)于所述桿的經(jīng)評(píng)估的定向的精度質(zhì)量被評(píng)價(jià)為低的并且像那樣呈現(xiàn)給所述用戶,則所述用戶可以決定拍攝與相應(yīng)的區(qū)域有關(guān)的更多圖像并且從而為所述區(qū)域提供更精確的處理。
而且,所述質(zhì)量指示使得用戶能夠拍攝得到所需數(shù)據(jù)所必需的所用量的圖像,即所述用戶被通知足夠的數(shù)據(jù)何時(shí)被收集到以用于計(jì)算點(diǎn)云或者根據(jù)要實(shí)現(xiàn)的測(cè)量要求確定姿態(tài)。因此,比需要更多的數(shù)據(jù)的不必要的收集被抑制或者避免并且鑒于時(shí)間消耗所述測(cè)量處理總體上被改進(jìn)。
用戶能夠連續(xù)地檢查已經(jīng)拍攝的圖像可達(dá)到的數(shù)據(jù)質(zhì)量的水平。
總之,被置于這個(gè)質(zhì)量確定方面的事實(shí)是計(jì)算至少在使用所述測(cè)量系統(tǒng)獲得的兩個(gè)圖像上測(cè)量到的3d點(diǎn)的準(zhǔn)確性的可能性。
另選地為了從對(duì)所述環(huán)境的一個(gè)或更多個(gè)點(diǎn)(或點(diǎn)云)的位置的計(jì)算直接得到測(cè)量確定性(或者此外附加地),還能夠僅(在不用考慮點(diǎn)的位置的有效計(jì)算的情況下)基于所述測(cè)量子系統(tǒng)的內(nèi)在參數(shù)(例如相機(jī)分辨率、gnss準(zhǔn)確性)和/或外在參數(shù)(例如從所述3d點(diǎn)到所述圖像的姿態(tài)的距離、點(diǎn)的觀察角)估計(jì)測(cè)量確定性(即,一般地可實(shí)現(xiàn)的準(zhǔn)確性水平)。例如基于使用所述測(cè)量子系統(tǒng)獲得的圖像的預(yù)定義集合能夠計(jì)算對(duì)于使用圖像的這個(gè)集合來計(jì)算的3d點(diǎn)指示準(zhǔn)確性的不同界限的場(chǎng)。所述場(chǎng)可能被用預(yù)定義調(diào)色板著色以得到更直觀表示。
在計(jì)劃階段時(shí)(即,在拍攝圖像的系列之前)用戶能夠定義感興趣區(qū)域(例如,在可用地圖或衛(wèi)星圖像上)。對(duì)于這個(gè)感興趣區(qū)域,可以在按由用戶定義的目標(biāo)準(zhǔn)確性保證整個(gè)感興趣區(qū)域的完全覆蓋范圍的情況下自動(dòng)地計(jì)算所述測(cè)量子系統(tǒng)的可能的跡線。在所述測(cè)量期間用戶能夠遵循這個(gè)提出的跡線以在沒有間隙的情況下以目標(biāo)準(zhǔn)確性映射所述整個(gè)區(qū)域。這個(gè)跡線可能被優(yōu)化以使長(zhǎng)度最小化,這減少映射時(shí)間??赡軐?duì)于跡線計(jì)算考慮在所述感興趣區(qū)域中具有已知坐標(biāo)的任何現(xiàn)有對(duì)象。在測(cè)量器具用戶能夠?qū)崟r(shí)地得到映射完整性的估計(jì)。所述感興趣區(qū)域的未映射的部分可能被同樣實(shí)時(shí)地示出給用戶。
在驗(yàn)證階段時(shí)能夠?yàn)閷?shí)際測(cè)量跡線計(jì)算準(zhǔn)確性場(chǎng)。對(duì)這個(gè)場(chǎng)的分析可能幫助用戶檢查完整性并且標(biāo)識(shí)未達(dá)到目標(biāo)準(zhǔn)確性的區(qū)域。
本發(fā)明環(huán)設(shè)計(jì)一種自動(dòng)測(cè)量系統(tǒng),該自動(dòng)測(cè)量系統(tǒng)包括:位置測(cè)量資源,具體地gnss天線或回復(fù)反射器,被安裝在測(cè)量桿上;以及測(cè)量子系統(tǒng),該測(cè)量子系統(tǒng)包括相機(jī)模塊以及控制和評(píng)估單元并且被適配為確定所述位置測(cè)量資源的位置,其中,所述測(cè)量桿包括用于在地表面上移動(dòng)所述桿的至少一個(gè)輪或鏈驅(qū)動(dòng)器。所述相機(jī)模塊被設(shè)計(jì)為附接至所述測(cè)量桿并且包括用于拍攝圖像的至少兩個(gè)相機(jī)。所述控制和評(píng)估單元已存儲(chǔ)具有程序代碼的程序以便控制和執(zhí)行定位和映射功能,其中,當(dāng)沿著通過環(huán)境的路徑移動(dòng)時(shí)
·所述環(huán)境的圖像的系列利用所述至少一個(gè)相機(jī)拍攝,所述系列包括按所述相機(jī)的不同姿態(tài)拍攝的一定量的圖像,所述姿態(tài)表示所述相機(jī)的相應(yīng)的位置和定向;
·利用使用圖像的系列的定義算法的slam評(píng)估被執(zhí)行,其中,多個(gè)分別對(duì)應(yīng)的圖像點(diǎn)在圖像的系列中的圖像的多個(gè)子組中的每一個(gè)中被標(biāo)識(shí),并且,基于使用所述多個(gè)分別對(duì)應(yīng)的圖像點(diǎn)的后方交會(huì)和前方交會(huì),包括所述環(huán)境的多個(gè)基準(zhǔn)點(diǎn)的基準(zhǔn)點(diǎn)場(chǎng)被建立,其中,所述基準(zhǔn)點(diǎn)的坐標(biāo)被得到,并且所述圖像的所述姿態(tài)被確定,
·基于所確定的姿態(tài),包括所述環(huán)境的點(diǎn)的3d位置的點(diǎn)云通過使用圖像的系列的前方交會(huì)具體地通過使用密集匹配算法來計(jì)算;并且/或者
·所述至少一個(gè)相機(jī)的定向是從圖像的系列的指定圖像的姿態(tài)得到的。
在所述測(cè)量系統(tǒng)的一個(gè)實(shí)施方式中,所述測(cè)量桿包括被布置在所述桿上使得所述桿的底端被實(shí)現(xiàn)來依靠所述桿相對(duì)于所述地面的定向而接觸所述地面的兩個(gè)輪,具體地其中,所述底端被實(shí)現(xiàn)來在所述桿被按照直角相對(duì)于所述地面定向時(shí)接觸所述地面。
在所述測(cè)量系統(tǒng)的另一實(shí)施方式中,所述測(cè)量桿包括至少一個(gè)手柄,具體地兩個(gè)手柄,以用于使得用戶能夠沿著所述路徑推和/或拉所述桿。
在另一個(gè)實(shí)施方式中,所述測(cè)量系統(tǒng)包括用于驅(qū)動(dòng)所述至少一個(gè)輪或所述鏈驅(qū)動(dòng)器的電機(jī),具體地
·響應(yīng)于通過用戶的推或拉運(yùn)動(dòng)并且/或者
·用于沿著預(yù)定義路徑自動(dòng)地驅(qū)動(dòng)所述測(cè)量桿或者驅(qū)動(dòng)遠(yuǎn)程地控制的所述測(cè)量桿。
本發(fā)明還涉及一種作為被適配為確定被安裝在所述車輛上的位置測(cè)量資源的具體地gnss天線的或回復(fù)反射器的位置的測(cè)量系統(tǒng)的一部分的兩輪自平衡機(jī)動(dòng)車輛。
在一個(gè)實(shí)施方式中,這個(gè)車輛被設(shè)計(jì)用于輸送所述測(cè)量系統(tǒng)的用戶,具體地其中,所述車輛被設(shè)計(jì)為使得所述用戶通過相對(duì)于用戶和車輛的組合重心使所述車輛傾斜來控制所述車輛的向前移動(dòng)和向后移動(dòng)。
在另一實(shí)施方式中,這個(gè)車輛包括用于標(biāo)記所述地面上的實(shí)際測(cè)量點(diǎn)的測(cè)量點(diǎn)標(biāo)記裝置,具體地其中,所述測(cè)量點(diǎn)標(biāo)記裝置包括用于利用激光斑點(diǎn)或圖案來標(biāo)記所述測(cè)量點(diǎn)的激光發(fā)射光學(xué)系統(tǒng)。
本發(fā)明還涉及一種用于兩輪自平衡機(jī)動(dòng)車輛的測(cè)量子系統(tǒng),所述測(cè)量子系統(tǒng)包括要用作所述測(cè)量系統(tǒng)的一部分的控制和評(píng)估單元以及相機(jī)模塊。所述相機(jī)模塊被設(shè)計(jì)為附接至所述車輛并且包括用于拍攝圖像的至少一個(gè)相機(jī)。所述控制和評(píng)估單元已存儲(chǔ)具有程序代碼的程序以便控制和執(zhí)行定位和映射功能,其中,當(dāng)沿著通過環(huán)境的路徑移動(dòng)時(shí)
·所述環(huán)境的圖像的系列利用所述至少一個(gè)相機(jī)拍攝,所述系列包括按所述相機(jī)的不同姿態(tài)拍攝的一定量的圖像,所述姿態(tài)表示所述相機(jī)的相應(yīng)的位置和定向;
·圖像點(diǎn)的集合是基于圖像的系列標(biāo)識(shí)的,所述圖像點(diǎn)表示基準(zhǔn)點(diǎn)場(chǎng)的基準(zhǔn)點(diǎn),各個(gè)基準(zhǔn)點(diǎn)出現(xiàn)在至少兩個(gè)圖像中,
·所述圖像的所述姿態(tài)是基于使用所述圖像點(diǎn)的后方交會(huì)而確定的;
其中
·基于所確定的姿態(tài),包括所述環(huán)境的點(diǎn)的3d位置的點(diǎn)云通過使用圖像的系列的前方交會(huì)具體地通過使用密集匹配算法來計(jì)算;并且/或者
·所述至少一個(gè)相機(jī)的定向是從圖像的系列的指定圖像的姿態(tài)得到的。
本發(fā)明還涉及一種測(cè)量子系統(tǒng),該測(cè)量子系統(tǒng)包括要用作被適配為確定被安裝在測(cè)量桿上的位置測(cè)量資源的位置的測(cè)量系統(tǒng)的一部分的相機(jī)、斷面儀以及控制和評(píng)估單元。所述相機(jī)模塊被設(shè)計(jì)為附接至所述車輛并且包括用于拍攝圖像的至少一個(gè)相機(jī)。所述斷面儀被設(shè)計(jì)為附接至所述測(cè)量桿并且適配用于旋轉(zhuǎn)激光束的反射以及用于從環(huán)境的點(diǎn)散射回的經(jīng)發(fā)射的激光束的返回部分的接收和檢測(cè)。所述斷面儀還被提供有針對(duì)所述旋轉(zhuǎn)激光束的電子距離測(cè)量功能以及角度測(cè)量功能,使得包括距離和角度信息的斷面儀測(cè)量數(shù)據(jù)是可收集的。所述控制和評(píng)估單元已存儲(chǔ)具有程序代碼的程序以便控制和執(zhí)行空間表示生成功能,其中,當(dāng)沿著通過所述環(huán)境的路徑移動(dòng)時(shí)
·所述環(huán)境的圖像的系列利用所述相機(jī)拍攝,所述系列包括按所述相機(jī)的不同姿態(tài)即從所述路徑上的不同點(diǎn)并且按所述相機(jī)的不同定向拍攝的多個(gè)圖像,
·利用使用圖像的系列的定義算法的slam評(píng)估被執(zhí)行,其中,多個(gè)分別對(duì)應(yīng)的圖像點(diǎn)在圖像的系列中的圖像的多個(gè)子組中的每一個(gè)中被標(biāo)識(shí),并且,基于使用所述多個(gè)分別對(duì)應(yīng)的圖像點(diǎn)的后方交會(huì)和前方交會(huì),包括所述環(huán)境的多個(gè)基準(zhǔn)點(diǎn)的基準(zhǔn)點(diǎn)場(chǎng)被建立,其中,所述基準(zhǔn)點(diǎn)的坐標(biāo)被得到,并且所述圖像的所述姿態(tài)被確定,
·針對(duì)已在所述路徑上采用的點(diǎn)的所述位置測(cè)量資源的確定的位置由所述控制和評(píng)估單元從所述測(cè)量系統(tǒng)接收,
·包括六個(gè)自由度上的平移和旋轉(zhuǎn)信息的6-dof行進(jìn)歷史至少基于在所述slam評(píng)估內(nèi)確定的所述姿態(tài)以及所接收到的確定的位置,具體地通過使用卡爾曼濾波器,針對(duì)移動(dòng)路徑而得到,并且
·所述環(huán)境的點(diǎn)的坐標(biāo)基于所述斷面儀測(cè)量數(shù)據(jù)與所得到的6-dof行進(jìn)歷史相結(jié)合而被確定為所述空間表示。
在一個(gè)實(shí)施方式中,所述測(cè)量子系統(tǒng)還包括要附接至所述測(cè)量桿并且被設(shè)計(jì)用于收集imu測(cè)量數(shù)據(jù)的慣性測(cè)量單元,并且所述控制和評(píng)估單元被配置為使得所述空間表示生成功能被控制和執(zhí)行,使得所述6-dof行進(jìn)歷史進(jìn)一步基于所述imu測(cè)量數(shù)據(jù)被得到,具體地其中,所述imu測(cè)量數(shù)據(jù)和所述slam評(píng)估被考慮用于得到所述6-dof行進(jìn)歷史的旋轉(zhuǎn)信息,尤其其中,所述imu測(cè)量數(shù)據(jù)被用來增加可通過所述slam評(píng)估從所確定的姿態(tài)得到的旋轉(zhuǎn)以及具體地位置信息的分辨率,具體地其中,在卡爾曼濾波器被用于得到所述6-dof行進(jìn)歷史的情況下,該卡爾曼濾波器被饋送有在所述slam評(píng)估內(nèi)確定的所述姿態(tài)、所接收到的確定的位置以及所述imu測(cè)量數(shù)據(jù)。
在所述子系統(tǒng)的另一實(shí)施方式中,
·所述相機(jī)模塊和所述斷面儀以及具體地所述控制和評(píng)估單元的至少部分被集成在可附接至所述測(cè)量桿的公共外殼中,或者
·所述相機(jī)模塊和所述斷面儀中的每一個(gè)被集成在自己的外殼中,所述外殼中的每一個(gè)可附接至所述測(cè)量桿,具體地其中,各個(gè)外殼被提供有用于數(shù)據(jù)傳輸以及具體地觸發(fā)信號(hào)的傳輸?shù)南嗷ミB接元件,使得在各個(gè)外殼附接至所述測(cè)量桿的條件下,所述連接元件被互鎖并且用于所述相機(jī)模塊與所述斷面儀之間的數(shù)據(jù)傳輸以及具體地所述觸發(fā)信號(hào)的傳輸?shù)倪B接被提供。
在所述子系統(tǒng)的又一實(shí)施方式中,所述相機(jī)模塊和所述斷面儀各自包括時(shí)鐘以及用于將時(shí)間戳指派給像圖像數(shù)據(jù)、imu測(cè)量數(shù)據(jù)和斷面儀測(cè)量數(shù)據(jù)一樣的收集的測(cè)量數(shù)據(jù)的電路,具體地其中,對(duì)于所述相機(jī)模塊和所述斷面儀gnss模塊被提供用于從所接收到的gnss信號(hào)收集絕對(duì)時(shí)間信息,使得所述gnss模塊被用作所述時(shí)鐘。
在所述子系統(tǒng)的另一個(gè)實(shí)施方式中,所述斷面儀被設(shè)計(jì)為使得,在附接至所述測(cè)量桿的條件下,所述旋轉(zhuǎn)激光束定義激光平面,該激光平面
·與所述測(cè)量桿基本上垂直,或者
·相對(duì)于所述桿傾斜,使得它們限制在大約5度與大約35度之間的具體地在大約10度與大約30度之間的角度。
在所述子系統(tǒng)的另一個(gè)實(shí)施方式中,所述斷面儀包括可旋轉(zhuǎn)反射鏡或可旋轉(zhuǎn)激光發(fā)射和接收單元。
在所述子系統(tǒng)的另一個(gè)實(shí)施方式中,所述斷面儀是按照多光束設(shè)置設(shè)計(jì)的,在該多光束設(shè)置中所述斷面儀被適配用于至少兩個(gè)旋轉(zhuǎn)激光束的發(fā)射以及用于從環(huán)境的點(diǎn)散射回的經(jīng)發(fā)射的束中的每一個(gè)的返回部分的接收和檢測(cè)。
在這個(gè)子系統(tǒng)的一個(gè)實(shí)施方式中,所述多光束設(shè)置針對(duì)所述至少兩個(gè)激光束利用公共旋轉(zhuǎn)平臺(tái)具體實(shí)現(xiàn),具體地其中,所述斷面儀是按照三光束設(shè)置設(shè)計(jì)的。所述斷面儀被設(shè)計(jì)為使得所述至少兩個(gè)激光束定義激光平面相對(duì)于彼此平行且稍微移位,相對(duì)于彼此稍微傾斜,具體地使得相對(duì)于所述桿稍微不同的傾斜角被形成并且/或者使得相對(duì)于所述桿稍微不同的方位角被形成,或者相對(duì)于彼此重合,并且/或者所述斷面儀被設(shè)計(jì)為使得所述至少兩個(gè)旋轉(zhuǎn)激光束在旋轉(zhuǎn)方向上相對(duì)于彼此形成角偏移,具體地其中,在三光束設(shè)置的情況下,所述角偏移是120°。
在這個(gè)子系統(tǒng)的一個(gè)實(shí)施方式中,所述公共旋轉(zhuǎn)平臺(tái)包括用于可旋轉(zhuǎn)地使所述至少兩個(gè)激光束偏轉(zhuǎn)的公共可旋轉(zhuǎn)反射鏡或者所述公共旋轉(zhuǎn)平臺(tái)包括至少兩個(gè)激光發(fā)射和接收單元。
在這個(gè)子系統(tǒng)的另一實(shí)施方式中,所述多光束設(shè)置針對(duì)所述至少兩個(gè)激光束利用至少兩個(gè)旋轉(zhuǎn)平臺(tái)具體事項(xiàng)。具有所述至少兩個(gè)旋轉(zhuǎn)平臺(tái)的所述斷面儀被設(shè)計(jì)為使得所述至少兩個(gè)激光束定義相對(duì)于彼此傾斜的激光平面,具體地使得
·相對(duì)于所述桿不同的傾斜角被形成,尤其其中,所述激光平面中的一個(gè)形成在大約10度與大約30度之間的傾斜角并且所述激光平面中的另一個(gè)形成在大約60度與大約80度之間的傾斜角,并且/或者
·相對(duì)于所述桿不同的方位角被形成,尤其其中,在大約1度與大約40度之間的方位方向上的角偏移形成在所述激光平面之間。
在所述子系統(tǒng)的特定實(shí)施方式中,所述斷面儀被設(shè)計(jì)為使得通過所述旋轉(zhuǎn)激光束定義的激光平面的傾斜角是可調(diào)整的,具體地人工地或者電機(jī)驅(qū)動(dòng)的,使得在所述斷面儀附接至所述測(cè)量桿的條件下,所述傾斜角可相對(duì)于所述桿變化。
在這個(gè)子系統(tǒng)的另一實(shí)施方式中,所述斷面儀被設(shè)計(jì)為使得通過所述旋轉(zhuǎn)激光束定義的激光平面的方位角是可調(diào)整的,具體地人工地或者電機(jī)驅(qū)動(dòng)的,使得在所述斷面儀附接至所述測(cè)量桿的條件下,所述方位角可相對(duì)于所述桿變化。
在這個(gè)子系統(tǒng)的一個(gè)實(shí)施方式中,所述方位角可由致動(dòng)器調(diào)整。所述控制和評(píng)估單元被配置為使得所述空間表示生成功能被控制和執(zhí)行,使得所述方位角由所述致動(dòng)器自動(dòng)地連續(xù)地調(diào)整,使得所述桿的所述方位定向的變更在沿著所述路徑移動(dòng)時(shí)被補(bǔ)償,具體地其中,所述方位角的自動(dòng)連續(xù)調(diào)整基于所得到的6-dof行進(jìn)歷史或使用以下各項(xiàng)的單獨(dú)評(píng)估
·在所述slam評(píng)估內(nèi)確定的所述姿態(tài),和/或
·所接收到的確定的位置,和/或,
·在提供了慣性單元的情況下,imu測(cè)量數(shù)據(jù)。
具體地,具有低幅度的更高頻率變更被補(bǔ)償,尤其其中,形成在所述激光平面與所述路徑上的運(yùn)動(dòng)方向之間的相對(duì)方位角在所述路徑上的各個(gè)點(diǎn)中被保持基本上恒定,具體地垂直。
在這個(gè)子系統(tǒng)的一個(gè)實(shí)施方式中,實(shí)際的運(yùn)動(dòng)方向或平滑的運(yùn)動(dòng)方向被用作所述運(yùn)動(dòng)方向,所述平衡運(yùn)動(dòng)方向具體地是通過使所述路徑的最近行進(jìn)段平滑針對(duì)所述路徑上的各個(gè)點(diǎn)而得到的。
在這個(gè)子系統(tǒng)的另一實(shí)施方式中,所述方位角由根據(jù)利用角動(dòng)量的轉(zhuǎn)換的原理而工作的穩(wěn)定裝置相對(duì)于所述環(huán)境來調(diào)整和穩(wěn)定,具體地其中,所述穩(wěn)定裝置包括飛輪,尤其其中,所述飛輪可與使所述激光束旋轉(zhuǎn)的所述旋轉(zhuǎn)平臺(tái)一起旋轉(zhuǎn)。
本發(fā)明還涉及一種測(cè)量子系統(tǒng),該測(cè)量子系統(tǒng)包括要用作被適配為確定被安裝在測(cè)量桿上的位置測(cè)量資源的具體地gnss天線的或回復(fù)反射器的位置的測(cè)量系統(tǒng)的一部分的控制和評(píng)估單元以及相機(jī)模塊。所述相機(jī)模塊被設(shè)計(jì)為附接至所述車輛并且包括用于拍攝圖像的至少一個(gè)相機(jī)。所述控制和評(píng)估單元已存儲(chǔ)具有程序代碼的程序以便控制和執(zhí)行如下的功能,其中,當(dāng)沿著通過環(huán)境的路徑移動(dòng)時(shí)
·所述環(huán)境的圖像的系列利用所述至少一個(gè)相機(jī)(31)拍攝,所述系列包括按所述相機(jī)(31)的不同姿態(tài)拍攝的一定量的圖像,所述姿態(tài)表示所述相機(jī)(31)的相應(yīng)的位置和定向;
·利用使用圖像的系列的定義算法的slam評(píng)估被執(zhí)行,其中,多個(gè)分別定義的圖像點(diǎn)利用用于檢測(cè)對(duì)應(yīng)特征的特征檢測(cè)處理具體地借助于特征跟蹤(尤其是klt算法(kanade-lucas-tomasi))和/或借助于特征匹配(尤其是sift算法、surf算法、brisk算法或brier算法)在圖像的系列中的圖像的多個(gè)子組中的每一個(gè)中被標(biāo)識(shí),并且,基于使用所述多個(gè)分別對(duì)應(yīng)的圖像點(diǎn)的后方交會(huì)和前方交會(huì)法,包括所述環(huán)境的多個(gè)基準(zhǔn)點(diǎn)的基準(zhǔn)點(diǎn)場(chǎng)被建立,其中,所述基準(zhǔn)點(diǎn)的坐標(biāo)被得到,并且所述圖像的所述姿態(tài)被確定。
根據(jù)本發(fā)明的這個(gè)方面,所述控制和評(píng)估單元包括多個(gè)分散單元,其中,至少第一單元具體地fpga或gpu(圖形處理單元)執(zhí)行用于標(biāo)識(shí)所述多個(gè)分別對(duì)應(yīng)的圖像點(diǎn)的所述特征檢測(cè)處理的至少一部分,并且至少另一第二單元具體地cpu執(zhí)行所述姿態(tài)的確定。
在所述子系統(tǒng)的一個(gè)實(shí)施方式中,所述第一單元和所述第二單元被一起構(gòu)建為一個(gè)soc(芯片上系統(tǒng))。
在所述子系統(tǒng)的另一實(shí)施方式中,所述第一單元和所述第二單元被布置在所述相機(jī)模塊內(nèi)。
在所述子系統(tǒng)的另一個(gè)實(shí)施方式中,所述第一單元被布置在所述相機(jī)模塊內(nèi)并且所述第二單元是膝上型電腦、平板pc、智能電話、所述測(cè)量系統(tǒng)的手持控制器/數(shù)據(jù)記錄器的處理單元、所述測(cè)量系統(tǒng)的gnss模塊的處理單元、所述測(cè)量系統(tǒng)的測(cè)量站具體地全站儀的處理單元或測(cè)量站點(diǎn)服務(wù)器,具體地被安裝在汽車中。
本發(fā)明還涉及一種測(cè)量子系統(tǒng),該測(cè)量子系統(tǒng)包括要用作被適配為確定被安裝在測(cè)量桿上的位置測(cè)量資源的具體地gnss天線的或回復(fù)反射器的位置的測(cè)量系統(tǒng)的一部分的控制和評(píng)估單元以及相機(jī)模塊。所述相機(jī)模塊包括用于拍攝圖像的至少一個(gè)相機(jī),其中,所述相機(jī)模塊被構(gòu)建為被設(shè)計(jì)為附接至所述測(cè)量桿的一個(gè)單個(gè)集成物理單元。所述控制和評(píng)估單元已存儲(chǔ)具有程序代碼的程序以便控制和執(zhí)行如下的功能,其中,當(dāng)沿著通過環(huán)境的路徑移動(dòng)時(shí)
·所述環(huán)境的圖像的系列利用所述至少一個(gè)相機(jī)拍攝,所述系列包括按所述相機(jī)的不同姿態(tài)拍攝的一定量的圖像,所述姿態(tài)表示所述相機(jī)的相應(yīng)的位置和定向,
·利用使用圖像的系列的定義算法的slam評(píng)估被執(zhí)行,其中,多個(gè)分別對(duì)應(yīng)的圖像點(diǎn)在圖像的系列中的圖像的多個(gè)子組中的每一個(gè)中被標(biāo)識(shí),并且,基于使用所述多個(gè)分別對(duì)應(yīng)的圖像點(diǎn)的后方交會(huì)和前方交會(huì),包括所述環(huán)境的多個(gè)基準(zhǔn)點(diǎn)的基準(zhǔn)點(diǎn)場(chǎng)被建立,其中,所述基準(zhǔn)點(diǎn)的坐標(biāo)被得到,并且所述圖像的所述姿態(tài)被確定,并且
·包括關(guān)于所述環(huán)境的3d信息的空間表示具體地點(diǎn)云通過使用圖像的系列的前方交會(huì)和所確定的姿態(tài)具體地通過使用密集匹配算法來計(jì)算。
根據(jù)本發(fā)明的這個(gè)方面,所述控制和評(píng)估單元包括多個(gè)分散單元,其中,被集成在所述相機(jī)模塊中的至少一個(gè)單元執(zhí)行所述slam評(píng)估的至少一部分,并且被布置在所述相機(jī)外部的至少一個(gè)第二單元執(zhí)行所述空間表示的計(jì)算的至少部分。
在所述子系統(tǒng)的一個(gè)實(shí)施方式中,所述至少一個(gè)其它單元是云服務(wù)器。
在所述子系統(tǒng)的另一實(shí)施方式中,所述至少一個(gè)其它單元是膝上型電腦、平板pc、智能電話、所述測(cè)量系統(tǒng)的手持控制器/數(shù)據(jù)記錄器的處理單元、所述測(cè)量系統(tǒng)的gnss模塊的處理單元或測(cè)量站點(diǎn)服務(wù)器,具體地被安裝在汽車中。
在所述子系統(tǒng)的又一實(shí)施方式中,被布置在所述相機(jī)模塊外部的多個(gè)其它單元以分散方式執(zhí)行所述空間表示的計(jì)算的至少部分,所述多個(gè)其它單元具體地是多個(gè)智能電話。
在所述子系統(tǒng)的另一個(gè)實(shí)施方式中,執(zhí)行標(biāo)識(shí)所述多個(gè)分別對(duì)應(yīng)的圖像點(diǎn)并且/或者確定所述姿態(tài)的一部分的至少一個(gè)單元被設(shè)計(jì)以便可在操作員的背包中攜帶。
在所述子系統(tǒng)的另一實(shí)施方式中,執(zhí)行標(biāo)識(shí)所述多個(gè)分別對(duì)應(yīng)的圖像點(diǎn)并且/或者確定所述姿態(tài)的一部分的至少一個(gè)單元是膝上型電腦、平板pc、智能電話、所述測(cè)量系統(tǒng)的手持控制器/數(shù)據(jù)記錄器的處理單元、所述測(cè)量系統(tǒng)的gnss模塊的處理單元或測(cè)量站點(diǎn)服務(wù)器,具體地被安裝在汽車中。
本發(fā)明還涉及一種測(cè)量子系統(tǒng),該測(cè)量子系統(tǒng)包括要用作被適配為確定被安裝在測(cè)量桿上的位置測(cè)量資源的位置的測(cè)量系統(tǒng)的一部分的控制和評(píng)估單元以及相機(jī)模塊,具體地,其中所述位置測(cè)量資源包括gnss天線或回復(fù)反射器。所述相機(jī)模塊被設(shè)計(jì)為附接至所述車輛并且包括用于拍攝圖像的至少一個(gè)相機(jī)。所述控制和評(píng)估單元已存儲(chǔ)具有程序代碼的程序以便控制和執(zhí)行遠(yuǎn)程點(diǎn)測(cè)量功能,其中,當(dāng)沿著通過環(huán)境的路徑移動(dòng)時(shí)
·所述環(huán)境的圖像的系列利用所述相機(jī)拍攝,所述系列包括按所述相機(jī)的不同姿態(tài)即從所述路徑上的不同點(diǎn)并且按所述相機(jī)的不同定向拍攝的多個(gè)圖像,
·利用使用圖像的系列的定義算法的slam評(píng)估被執(zhí)行,其中,多個(gè)分別對(duì)應(yīng)的圖像點(diǎn)在圖像的系列中的圖像的多個(gè)子組中的每一個(gè)中被標(biāo)識(shí),并且,基于使用所述多個(gè)分別對(duì)應(yīng)的圖像點(diǎn)的后方交會(huì)和前方交會(huì),包括所述環(huán)境的多個(gè)基準(zhǔn)點(diǎn)的基準(zhǔn)點(diǎn)場(chǎng)被建立,其中,所述基準(zhǔn)點(diǎn)的坐標(biāo)被得到,并且所述圖像的所述姿態(tài)被確定,并且,
·在選擇所述環(huán)境的圖像中的圖像點(diǎn)時(shí),所述圖像基于圖像的系列中的圖像中的至少一個(gè),由所述選擇的圖像點(diǎn)表示的遠(yuǎn)程點(diǎn)的3d位置被得到,因此與所述遠(yuǎn)程點(diǎn)有關(guān)的圖像的子集被從圖像的系列自動(dòng)地標(biāo)識(shí)并且所述3d位置是基于使用圖像的所述子集的前方交會(huì)以及所述子集的圖像的所確定的姿態(tài)而確定的。
在所述子系統(tǒng)的一個(gè)實(shí)施方式中,所述控制和評(píng)估單元被配置為使得所述遠(yuǎn)程點(diǎn)測(cè)量功能被控制和執(zhí)行,使得所述圖像點(diǎn)可由用戶人工地選擇,并且/或者所述子集包括所述遠(yuǎn)程點(diǎn)出現(xiàn)在其中的所有圖像。
本發(fā)明還涉及一種測(cè)量子系統(tǒng),該測(cè)量子系統(tǒng)包括要用作被適配為確定被安裝在測(cè)量桿上的位置測(cè)量資源的位置的測(cè)量系統(tǒng)的一部分的控制和評(píng)估單元以及相機(jī)模塊,具體地,其中,所述位置測(cè)量資源包括gnss天線或回復(fù)反射器。所述相機(jī)模塊被設(shè)計(jì)為附接至所述車輛并且包括用于拍攝圖像的至少一個(gè)相機(jī)。所述控制和評(píng)估單元已存儲(chǔ)具有程序代碼的程序以便控制和執(zhí)行如下的功能,其中,當(dāng)沿著通過環(huán)境的路徑移動(dòng)時(shí)
·所述環(huán)境的圖像的系列利用所述相機(jī)拍攝,所述系列包括按所述相機(jī)的不同姿態(tài)即從所述路徑上的不同點(diǎn)并且按所述相機(jī)的不同定向拍攝的多個(gè)圖像,
·利用使用圖像的系列的定義算法的slam評(píng)估被執(zhí)行,其中,多個(gè)分別對(duì)應(yīng)的圖像點(diǎn)在圖像的系列中的圖像的多個(gè)子組中的每一個(gè)中被標(biāo)識(shí),并且,基于使用所述多個(gè)分別對(duì)應(yīng)的圖像點(diǎn)的后方交會(huì)和前方交會(huì),包括所述環(huán)境的多個(gè)基準(zhǔn)點(diǎn)的基準(zhǔn)點(diǎn)場(chǎng)被建立,其中,所述基準(zhǔn)點(diǎn)的坐標(biāo)被得到,并且所述圖像的所述姿態(tài)被確定,并且
·基于至少依靠所確定的姿態(tài)而得到的定向的改變具體地基于至少依靠所確定的姿態(tài)以及至少依靠所得到的所述基準(zhǔn)點(diǎn)的坐標(biāo)而得到的所述環(huán)境的深度信息而得到的相機(jī)跡線來使圖像的系列中的圖像中的至少一些變清晰。
在所述子系統(tǒng)的一個(gè)實(shí)施方式中,所述控制和評(píng)估單元被配置為使得所述功能被控制和執(zhí)行,使得,
·所述去模糊被執(zhí)行使得由于所述相機(jī)在曝光時(shí)間期間相對(duì)于所述環(huán)境的相對(duì)運(yùn)動(dòng)被補(bǔ)償,其中,比較更高的補(bǔ)償階段適用于被成像的所述環(huán)境的更近對(duì)象并且比較更低的補(bǔ)償階段適用于被成像的所述環(huán)境的更遠(yuǎn)對(duì)象,并且/或者
·所述相機(jī)跡線是進(jìn)一步依靠針對(duì)已在所述路徑上采用的點(diǎn)的所述位置測(cè)量資源的確定的位置而得到的,所述位置可由所述控制和評(píng)估單元從所述測(cè)量系統(tǒng)接收,并且/或者imu測(cè)量數(shù)據(jù)由也作為所述測(cè)量子系統(tǒng)的一部分被提供的慣性測(cè)量單元收集。
在所述子系統(tǒng)的另一實(shí)施方式中,所述控制和評(píng)估單元被配置為使得所述功能被控制和執(zhí)行,使得,
·所述slam評(píng)估再次使用圖像的系列的經(jīng)去模糊的圖像來執(zhí)行,其中,經(jīng)去模糊的圖像的所述姿態(tài)被重新計(jì)算,并且/或者
·所述環(huán)境的至少一個(gè)點(diǎn)的3d位置被確定為出現(xiàn)在經(jīng)去模糊的圖像中的至少一些中,其中,與所述至少一個(gè)點(diǎn)有關(guān)的圖像的子集是從經(jīng)去模糊的圖像以及具體地圖像的系列的另外的圖像自動(dòng)地標(biāo)識(shí)的,并且其中,所述3d位置是基于使用圖像的所述子集和所確定的姿態(tài)而確定的,其中,在適用情況下,針對(duì)所述子集的圖像的經(jīng)重新計(jì)算的姿態(tài)和/或
·包括所述環(huán)境的多個(gè)點(diǎn)的3d位置的點(diǎn)云通過使用經(jīng)去模糊的圖像以及圖像的系列的另外的圖像的前方交會(huì)以及所確定的姿態(tài)來計(jì)算,其中,在適用情況下,經(jīng)重新計(jì)算的姿態(tài)作為所確定的姿態(tài)。
附圖說明
將在下文中通過參照隨附圖的示例性實(shí)施方式詳細(xì)地描述本發(fā)明,圖中:
圖1示出了根據(jù)本發(fā)明的測(cè)量系統(tǒng)的示例性實(shí)施方式;
圖2a-圖2c示出了根據(jù)本發(fā)明的作為測(cè)量系統(tǒng)的一部分的相機(jī)模塊和位置測(cè)量源的三個(gè)示例性組合;
圖3a-圖3b示出了根據(jù)本發(fā)明的相機(jī)模塊的第一實(shí)施方式;
圖4a-圖4b示出了根據(jù)本發(fā)明的相機(jī)模塊的第二實(shí)施方式;
圖5a-圖5b示出了根據(jù)本發(fā)明的相機(jī)模塊的第三實(shí)施方式;
圖6a示出了根據(jù)本發(fā)明的相機(jī)模塊的第四實(shí)施方式;
圖6b示出了根據(jù)本發(fā)明的相機(jī)模塊的第五實(shí)施方式;
圖7a示出了根據(jù)本發(fā)明的相機(jī)模塊的第六實(shí)施方式;
圖7b-圖7c示出了根據(jù)本發(fā)明的相機(jī)模塊的第七實(shí)施方式;
圖8a示出了具有掃描單元的根據(jù)本發(fā)明的相機(jī)模塊的第八實(shí)施方式;
圖8b示出了具有掃描單元的根據(jù)本發(fā)明的相機(jī)模塊的第九實(shí)施方式;
圖8c示出了具有掃描單元的根據(jù)本發(fā)明的相機(jī)模塊的第十實(shí)施方式;
圖8d示出了具有掃描單元的根據(jù)本發(fā)明的相機(jī)模塊的第十一實(shí)施方式;
圖8e示出了具有掃描單元的根據(jù)本發(fā)明的相機(jī)模塊的第十二實(shí)施方式;
圖8f示出了具有掃描單元的根據(jù)本發(fā)明的相機(jī)模塊的第十三實(shí)施方式;
圖9a-圖9b示出了具有掃描單元的根據(jù)本發(fā)明的相機(jī)模塊的第十四實(shí)施方式;
圖9c示出了由圖9a-圖9b所示的相機(jī)模塊的掃描單元的旋轉(zhuǎn)激光束橫跨的兩個(gè)激光平面;
圖9d示出了具有掃描單元的根據(jù)本發(fā)明的相機(jī)模塊的第十五實(shí)施方式;
圖9e-圖9f示出了掃描單元的兩個(gè)示例性實(shí)施方式;
圖10a-圖10b示出了具有掃描單元的根據(jù)本發(fā)明的相機(jī)模塊的第十六實(shí)施方式;
圖10c示出了具有掃描單元的根據(jù)本發(fā)明的相機(jī)模塊的第十七實(shí)施方式;
圖10d示出了圖10c的相機(jī)模塊的掃描單元;
圖10e示出了具有掃描單元的根據(jù)本發(fā)明的相機(jī)模塊的第十八實(shí)施方式;
圖11例示了相機(jī)隨著圖像中的運(yùn)動(dòng)對(duì)象向左的旋轉(zhuǎn);
圖12a-圖12c示出了用于拍攝圖像的變化曝光時(shí)間;
圖13、圖14和圖15a-圖15b示出了在隨著相機(jī)模塊(桿)移動(dòng)的同時(shí)基于環(huán)境中的基準(zhǔn)點(diǎn)的后方交會(huì);
圖16a-圖16b例示了由測(cè)量系統(tǒng)生成的正射相片(orthophoto)和基準(zhǔn)正射相片的匹配的示例性實(shí)施方式;
圖17例示了定向確定功能的示例性實(shí)施方式;
圖18示出了輪式測(cè)量系統(tǒng)的第一示例性實(shí)施方式;
圖19a-圖19d示出了輪式測(cè)量系統(tǒng)的第二示例性實(shí)施方式;以及
圖20示出了具有安裝傘的測(cè)量系統(tǒng)。
具體實(shí)施方式
圖1示出了根據(jù)本發(fā)明的測(cè)量系統(tǒng)1的示例性實(shí)施方式。所描繪的測(cè)量系統(tǒng)1包括由用戶2操作的測(cè)量桿10。桿10包括可定位在地面上的測(cè)量點(diǎn)5上的底端11。gnss天線15被放置在桿10的頂端上作為測(cè)量系統(tǒng)1的位置測(cè)量資源。此外,測(cè)量系統(tǒng)1包括相機(jī)模塊30以及控制和評(píng)估單元12。
相機(jī)模塊
圖2a-圖2c示出了與相應(yīng)測(cè)量系統(tǒng)的位置測(cè)量資源一起安裝在桿10上的相機(jī)模塊30、30’。
各個(gè)相機(jī)模塊30、30’包括對(duì)來自所有或許對(duì)空間方向的光敏感的光學(xué)記錄裝置31。它能夠基于成像傳感器和魚眼鏡頭,或相機(jī)和拋物面鏡的組合,或布置在水平環(huán)上的兩個(gè)單一相機(jī)中的最低者,或作為廣角或全景相機(jī)的任何其它光學(xué)裝置。
相機(jī)模塊可以是被與gnss天線15(圖2a)或反射器16(圖2b)一起安裝在桿10上的單獨(dú)的模塊30。而且,能夠?qū)⒛K30’集成到gnss天線(圖2c)或反射器的外殼中。
根據(jù)圖2c,相機(jī)模塊30’由附加地包括gnss天線和/或反射器的位置測(cè)量資源來表示。
圖3a和圖3b示出了根據(jù)本發(fā)明的相機(jī)模塊30的第一實(shí)施方式。相機(jī)模塊30具有外殼40以及用于桿38且用于位置測(cè)量資源39(gnss天線或反射器)的支架。它可以包括一組相機(jī)31,例如按照彼此與水平視場(chǎng)>90°成90°的角度對(duì)準(zhǔn)的四個(gè)單一相機(jī)31。在這種布置中360°的水平視場(chǎng)被覆蓋。相機(jī)組件的垂直視場(chǎng)(fov)可以是大約60°。如圖3b所示,相機(jī)能夠被水平地對(duì)準(zhǔn)或者向下定向,例如達(dá)20°。這對(duì)近對(duì)象是特別感興趣的應(yīng)用來說是有利的。
而且,處理單元33可以是相機(jī)模塊30的一部分。處理單元33可以是cpu,例如arm處理器或cpu與fpga的組合(例如,zyncsoc)或cpu與圖形處理單元(gpu)的組合。在組合處理單元的情況下,例如在fpga或gpu上執(zhí)行特征跟蹤等。這些主要是能夠在那種單元上實(shí)現(xiàn)高度并行處理的圖像處理算法。
另外慣性測(cè)量單元(imu)34可以是相機(jī)模塊的一部分。imu34可以由3軸加速度計(jì)構(gòu)成,并且具體地由3軸陀螺儀構(gòu)成。附加地,磁強(qiáng)計(jì)可以被包括在imu中。
圖4a和圖4b示出了根據(jù)本發(fā)明的相機(jī)模塊30的第二實(shí)施方式。為了增加相機(jī)模塊30的垂直fov,能夠?qū)⑺膫€(gè)向下定向的相機(jī)31’與四個(gè)向上定向的相機(jī)31”組合在一起。
在圖5a和圖5b中示出了另選的實(shí)施方式。圖5a示出了具有>180°的水平視場(chǎng)的兩個(gè)魚眼相機(jī)36的布置,并且圖5b示出了具有反射鏡32特別是拋物面鏡和玻璃窗35的單個(gè)相機(jī)31的布置。
可選地,以上所描述的相機(jī)模塊30的相機(jī)31、31’、31”、36能夠具有不同的分辨率。例如,在相機(jī)模塊30包括八個(gè)相機(jī)的情況下,四個(gè)相機(jī)能夠具有低分辨率并且被以高幀速率讀出(對(duì)特征跟蹤有利)并且四個(gè)相機(jī)具有高分辨率(對(duì)密集匹配有利)并且被按更低的幀速率讀出。另選地,高分辨率相機(jī)不按特定幀速率運(yùn)行而是在應(yīng)該例如按照兩米的距離間隔拍攝關(guān)鍵幀時(shí)被算法觸發(fā)。
另選地或附加地,根據(jù)本發(fā)明的一個(gè)方面,相機(jī)模塊的一個(gè)單一相機(jī)被構(gòu)建為使得具有至少兩個(gè)不同分辨率和/或不同幀速率的圖像拍攝由該相機(jī)提供。因此,能夠通常鑒于測(cè)量處理提供高分辨率圖像以及低分辨率圖像。
而且,為了減少來自窗的反射,能夠在相機(jī)鏡頭(這里未示出)前面安裝偏振濾光器。
圖6a和圖6b示出了具有減震器裝置37、37’的相機(jī)模塊30的兩個(gè)另外的實(shí)施方式。能夠在校準(zhǔn)過程中確定相機(jī)31的相對(duì)位置和定向。為了隨著時(shí)間的推移使相機(jī)31的對(duì)準(zhǔn)保持穩(wěn)定,例如讓它抵抗沖擊或掉落,能夠例如在外殼40與用于桿38的支架之間集成減震器37,如圖6a所示。另選地,如圖6b所示,能夠?qū)⑾鄼C(jī)31和imu34安裝在通過減震器37、37’與外殼40機(jī)械解耦的框架41上。減震器37還減少最大加速度并且避免加速度計(jì)飽和。
這種阻尼元件(減震器)可能形式為萬向架等。
觸發(fā)
在測(cè)量期間,圖像數(shù)據(jù)利用相機(jī)模塊30記錄。在相機(jī)模塊30中存在超過一個(gè)相機(jī)31的情況下,圖像數(shù)據(jù)被并行即同步地記錄。用于觸發(fā)所有單一相機(jī)的觸發(fā)信號(hào)能夠由另一傳感器(例如,gnss天線)產(chǎn)生。另選地,一個(gè)相機(jī)能夠觸發(fā)所有其它相機(jī)。
圖像數(shù)據(jù)能夠被記錄為具有大約15至25幀每秒(fps)的視頻或者為一組基于事件觸發(fā)的靜止圖像,例如圖像在操作員自最后圖像被拍攝以來移動(dòng)了兩米時(shí)被記錄。另選地,當(dāng)圖像內(nèi)容示出與前一個(gè)圖像的顯著差異時(shí),能夠拍攝新圖像。而且,圖像的記錄能夠由操作員在他將桿放置在一點(diǎn)上并且觸發(fā)測(cè)量時(shí)觸發(fā)。
圖7a-圖7c示出了相機(jī)模塊30的兩個(gè)另外的實(shí)施方式。各個(gè)相機(jī)模塊30包括至少兩個(gè)相機(jī)31a-d以及用于觸發(fā)圖像通過相機(jī)31a-d的高度同步的拍攝的光學(xué)觸發(fā)裝置70、71。這例如可用于即使相機(jī)模塊在運(yùn)動(dòng)中也允許由單一相機(jī)拍攝的圖像的圖像拼接(stitching)。
在圖7a中,閃光燈70的環(huán)被布置在相機(jī)模塊30周圍,這里在用于位置測(cè)量資源39的支架周圍。相機(jī)31a、31b適宜感知周圍的來自閃光燈70的閃光。相機(jī)31a、31b然后能夠同步地拍攝圖像。此外,相機(jī)31a、31b的同步地拍攝的圖像能夠借助于出現(xiàn)在已在閃光期間拍攝的所有圖像中的閃光來標(biāo)識(shí)。
圖7b和圖7c示出了具有四個(gè)相機(jī)31a-d的相機(jī)模塊30。相機(jī)模塊30包括被設(shè)計(jì)為發(fā)光二極管(led)71的組的光學(xué)觸發(fā)裝置。這些被布置使得各個(gè)組71位于相機(jī)31a-d中的兩個(gè)的視場(chǎng)(由虛線表示)中并且可由這兩個(gè)相機(jī)感知。led組71能夠被用來觸發(fā)觸發(fā)圖像通過相機(jī)31a-d的高度同步的拍攝。led組71還能夠被用來將代碼添加到圖像,例如以便允許同步地捕獲的圖像的標(biāo)識(shí)。
掃描單元(->斷面儀)[仍將由所對(duì)應(yīng)的權(quán)利要求的措辭補(bǔ)充的部分]
在圖8a-圖8f、圖9a-圖9f和圖10a-圖10e中,描繪了包括掃描單元50的相機(jī)模塊30的各種示例性實(shí)施方式。
集成在相機(jī)模塊30中的掃描單元50對(duì)點(diǎn)云實(shí)時(shí)的生成有利,即如在與圖像的點(diǎn)云生成的情況下一樣不必執(zhí)行昂貴的密集匹配步驟。而且,和基于相機(jī)的方法對(duì)比,掃描單元50不依靠良好的紋理表面用于點(diǎn)云的導(dǎo)出。
掃描單元50能夠由激光發(fā)射和接收單元51以及旋轉(zhuǎn)反射鏡52構(gòu)成。在圖8a所示的布置中,如果桿被或多或少垂直地對(duì)準(zhǔn),則旋轉(zhuǎn)激光束55橫跨差不多水平的平面。
在圖8b中示出了掃描單元50的另一設(shè)置。這里,反射鏡的旋轉(zhuǎn)軸與水平平面傾斜了大約10°至30°。
圖8c示出了安裝在測(cè)量桿10上的圖8b的相機(jī)模塊30。旋轉(zhuǎn)激光55橫跨激光平面,該激光平面傾斜使得它經(jīng)過gnss天線15,并且因此,阻塞小。對(duì)于相機(jī)模塊30被安裝靠近桿10頂上的gnss天線15的這種設(shè)置,掃描模塊必須被以某種方式暴露。為了在桿10掉落時(shí)避免掃描單元50的損壞,優(yōu)選地掉落保護(hù)裝置18被安裝在桿10上的相機(jī)模塊30下方。
圖8d示出了相機(jī)模塊30和單獨(dú)的掃描模塊58的組合。能夠?qū)蓚€(gè)模塊30、58塞在一起。為了能量供應(yīng)和數(shù)據(jù)傳送能夠?qū)⑦B接器59集成到各個(gè)模塊30、58的外殼中。掃描模塊58能夠被配備有單獨(dú)的處理單元53。另選地,能夠在相機(jī)模塊30的處理單元33上執(zhí)行掃描模塊58的計(jì)算。
圖8e示出了具有掃描單元50’的集成相機(jī)模塊30,該掃描單元50’具有旋轉(zhuǎn)激光發(fā)射和接收單元51’而不是旋轉(zhuǎn)反射鏡。
圖8f示出了具有掃描單元50”的相機(jī)模塊30,所述掃描單元50”在三個(gè)激光發(fā)射和接收單元50’繞一個(gè)軸一起旋轉(zhuǎn)情況下具有多光束設(shè)置。另選地,不是發(fā)射三個(gè)平行激光束55、55’、55”,而是能夠按120°的角偏移安裝激光發(fā)送和接收單元,例如像風(fēng)力渦輪機(jī)(這里未示出)的葉片一樣。
圖9a和圖9b示出了具有兩個(gè)掃描單元50a、50b的布置。它們兩者的旋轉(zhuǎn)束55a、55b橫跨兩個(gè)傾斜的激光平面56、56a(圖9c。)。
傾斜角影響對(duì)對(duì)象的掃描分辨率,即點(diǎn)云的密度。一方面,因?yàn)閾?jù)大約2m的杠桿臂相當(dāng)短,所以幾乎垂直的平面按照(可能太)高分辨率掃描附近地面。而且,相當(dāng)多的光線“浪費(fèi)”,因?yàn)樗鼈儽幻闇?zhǔn)向天空。另一方面,幾乎水平的平面根本不覆蓋天空和附近地面。一個(gè)反射鏡的旋轉(zhuǎn)軸與水平平面傾斜了大約10°到30°并且第二反射鏡的軸與垂直平面傾斜了大約10°到30°的兩個(gè)掃描單元的組合可能導(dǎo)致掃描點(diǎn)的改進(jìn)分布。
另選地,能夠使激光平面的垂直角度變得可調(diào)整(這被示出在圖10a和圖10b中)。這使得用戶能夠根據(jù)他的特定需要改變傾斜角度。旋轉(zhuǎn)可以是連續(xù)的或者可能存在高、中等和低的一些預(yù)定義角度。在后者中掃描模塊點(diǎn)擊進(jìn)入預(yù)定義位置。
可能在實(shí)踐中出現(xiàn)的另一問題是(幾乎)垂直平面的旋轉(zhuǎn)。在用戶在反射鏡的旋轉(zhuǎn)軸的方向上以1m/s的恒定速率不行并且假定50hz的反射鏡的旋轉(zhuǎn)速率(即50轉(zhuǎn)每秒)的情況下在15m距離上的對(duì)象上的鄰近軌道的偏移是2cm。然而,如果桿以30°/s的旋轉(zhuǎn)速率繞垂直軸旋轉(zhuǎn)則鄰近軌道之間的偏移是大約16cm。因此,這些旋轉(zhuǎn)無論是否有意都可能導(dǎo)致不均勻的點(diǎn)分布。
為了克服這個(gè)問題,如圖9a和圖9b所示能夠應(yīng)用橫跨幾乎垂直平面的兩個(gè)掃描單元50a、50b,使得存在大約5度的小水平角度偏移。
在圖9d-圖9f中描繪了另選的實(shí)施方式。掃描單元50”’包括多個(gè)激光發(fā)射和接收單元51。因此,不是一個(gè)激光平面而是發(fā)散的(圖9e)或平行的(圖9f)激光平面的扇形被生成。
另選地,如圖10a圖10b所示,能夠?qū)呙鑶卧?0””’集成到相機(jī)模塊30中,使得能夠通過掃描單元50””’進(jìn)入相反方向的旋轉(zhuǎn)(具體地由驅(qū)動(dòng)器57操縱)對(duì)桿的無意旋轉(zhuǎn)進(jìn)行補(bǔ)償。能夠從利用相機(jī)模塊30的測(cè)量結(jié)果(例如,來自imu34的角速率)得到旋轉(zhuǎn)角度。補(bǔ)償?shù)哪康目梢允羌す馄矫娴姆轿华?dú)立于用戶的移動(dòng)是恒定的。
另選地,利用這種機(jī)制,能夠自動(dòng)地使掃描平面與用戶的行走方向正交地對(duì)準(zhǔn)。例如能夠從卡爾曼濾波器的狀態(tài)向量得到方向。在用戶繞曲線行走的情況下平面自動(dòng)地遵循這個(gè)移動(dòng)時(shí)存在優(yōu)點(diǎn)。
另選地,不是使整個(gè)掃描模塊旋轉(zhuǎn),而是僅光線能夠由附加往復(fù)偏轉(zhuǎn)反射鏡52’重定向。在圖10c和10d中示出這個(gè)。.
另選地,如圖10e所示,還能夠通過實(shí)現(xiàn)陀螺原理來實(shí)現(xiàn)激光平面的穩(wěn)定化,即以使方位角保持幾乎恒定(平滑快速移動(dòng))。這里,飛輪52”與反射鏡一起繞軸旋轉(zhuǎn)以被穩(wěn)定。
運(yùn)動(dòng)對(duì)象
在圖11中,相機(jī)向左旋轉(zhuǎn)是隨著圖像的運(yùn)動(dòng)對(duì)象而例示的。在數(shù)據(jù)獲取期間還能夠應(yīng)用不同區(qū)域的掩蔽以便移動(dòng)非期望的(這里:運(yùn)動(dòng))對(duì)象。這例如包括像測(cè)量員它本身一樣的相對(duì)于桿的靜態(tài)對(duì)象以及像行人、汽車和其它非靜態(tài)/相對(duì)靜態(tài)對(duì)象一樣的運(yùn)動(dòng)對(duì)象。
能夠利用用戶交互半自動(dòng)地或者完全自動(dòng)地完成掩蔽。用戶交互引導(dǎo)處理的可能場(chǎng)景是在跟蹤圖像上的特征點(diǎn)時(shí)排除測(cè)量員,其中用戶例如嚴(yán)格地掩蔽它本身在圖像上的外形并且其側(cè)影通過適當(dāng)?shù)乃惴?例如,標(biāo)準(zhǔn)分段算法、主動(dòng)輪廓或模板匹配)來識(shí)別并隨后跟蹤。
全自動(dòng)化算法可能基于一些運(yùn)動(dòng)估計(jì)算法(例如,光流)來檢測(cè)干擾對(duì)象,并且拒絕所對(duì)應(yīng)的跟蹤特征。例如,如圖11所示,相機(jī)向左旋轉(zhuǎn)將導(dǎo)致由所顯示的箭頭111指示的光流。盡管通過相機(jī)的更高級(jí)移動(dòng)而變得更復(fù)雜,然而這個(gè)向量場(chǎng)(光流)能夠被用來(例如通過分析像不一致局部改變一樣的間斷點(diǎn)或異常)確定圖像內(nèi)的運(yùn)動(dòng)對(duì)象(由所顯示的箭頭112指示)或者甚至支持分段或其它圖像處理相關(guān)算法。
不同過程的可能變化可能包括獨(dú)立于各個(gè)圖像的干擾對(duì)象檢測(cè)、初始檢測(cè)和跟蹤以及全局運(yùn)動(dòng)估計(jì)。附加地,為了變得更魯棒,用于移除運(yùn)動(dòng)對(duì)象(或?qū)?yīng)的不一致特征點(diǎn))的最終算法可能由多步驟過程(例如,局部和全局運(yùn)動(dòng)估計(jì))構(gòu)成。因?yàn)槿诌\(yùn)動(dòng)在這個(gè)上下文中是指相機(jī)移動(dòng),所以還可能存在被用來預(yù)測(cè)全局移動(dòng)并且隨后用來使運(yùn)動(dòng)對(duì)象的檢測(cè)穩(wěn)定的一些附加的傳感器信息(例如,gnss或imu數(shù)據(jù))。
能夠在相機(jī)模塊中的處理單元上執(zhí)行對(duì)應(yīng)的(干擾)特征的檢測(cè)。具體地,如果fpga被包括在處理單元中則能夠在fpga上非常高效地計(jì)算特征檢測(cè)的各部分。
在標(biāo)識(shí)對(duì)應(yīng)的特征之后計(jì)算圖像的姿態(tài),即位置和定向。能夠在足夠大數(shù)目的檢測(cè)點(diǎn)特征情況下對(duì)每個(gè)圖像完成這個(gè)。然而,尤其在圖像數(shù)據(jù)被以高幀速率記錄的情況下處理能力能夠通過選擇圖像的子集來節(jié)約并且僅為那些選擇的圖像確定姿態(tài)。
用于圖像選擇的準(zhǔn)則可以是基線,即當(dāng)前圖像與前一個(gè)圖像之間的距離,例如一米的距離。小基線導(dǎo)致通過前方交會(huì)確定的3d點(diǎn)的差準(zhǔn)確性。另一準(zhǔn)則可以是圖像質(zhì)量,即僅具有良好質(zhì)量(高清晰度,未欠曝光或過曝光等)的圖像被選擇。
另選地,圖像選擇能夠基于圖像數(shù)據(jù)、imu數(shù)據(jù)和gnss數(shù)據(jù)的組合或這些數(shù)據(jù)源的任何子集。例如,imu能夠被用來通過考慮曝光期間的移動(dòng)以及具體地旋轉(zhuǎn)來選擇不遭受運(yùn)動(dòng)模糊的圖像。這具有即便當(dāng)圖像內(nèi)容顯著地改變時(shí)無模糊圖像也被選擇的優(yōu)點(diǎn)。能夠組合不同的濾波器(例如,基線和運(yùn)動(dòng)模糊)以使用有限的計(jì)算資源來實(shí)現(xiàn)導(dǎo)致場(chǎng)景的最佳重建的最佳圖像選擇。
在存在低分辨率相機(jī)和高分辨率相機(jī)的組合的情況下低分辨率相機(jī)被主要用于高幀速率下的特征跟蹤。高分辨率相機(jī)不必按照定義幀速率拍攝圖像,而是能夠在特定時(shí)刻(例如利用imu感測(cè)到的低移動(dòng))或者例如兩米的當(dāng)前圖像與最后最后之間的距離(=基線)被觸發(fā)。
而且,能夠按變化曝光時(shí)間拍攝圖像,例如圖像被以1ms、2ms、4ms、8ms、10ms、20ms等的曝光時(shí)間拍攝。這個(gè)被例示在圖12a-圖12c中。在用于拍攝關(guān)鍵幀的最佳時(shí)間附近的定義窗中具有良好曝光的幀被選擇。在這種情況下,如圖12a所示,圖像獲取間隔可以是規(guī)則的,即圖像具有8ms的間隔。另選地,如圖12b和圖12c所示,圖像拍攝間隔可以是不規(guī)則的。
而且,能夠基于按不同的曝光時(shí)間拍攝的一組圖像來生成hdr(高動(dòng)態(tài)范圍)圖像。這個(gè)能夠在相機(jī)被保持足夠靜止時(shí)完成,足夠靜止能夠利用imu或gnss或相機(jī)數(shù)據(jù)或全部的組合來感測(cè)。另選地,能夠移動(dòng)相機(jī)并且在生成hdr圖像時(shí)考慮利用運(yùn)動(dòng)結(jié)構(gòu)算法確定的偏移。
為了確保能夠被處理的數(shù)據(jù)集,可能在數(shù)據(jù)獲取期間存在某種直接用戶反饋。這個(gè)反饋可以包括燈指示(例如,狀態(tài)led)、音頻信號(hào)或力反饋(振動(dòng)桿、智能手表、振動(dòng)腕帶、智能電話、平板等)。還可能存在例如在移動(dòng)電話、平板或特殊眼鏡(交互式眼鏡)上直接使數(shù)據(jù)記錄的當(dāng)前狀態(tài)可視化的選項(xiàng)。
用于姿態(tài)的確定以及稀疏點(diǎn)云的同時(shí)生成的算法
為了得到桿的六個(gè)自由度,即模塊的位置以及相對(duì)于外/外部(例如全局)坐標(biāo)系統(tǒng)的定向角度(橫搖、俯仰、偏航),能夠應(yīng)用slam(同時(shí)定位和映射)。
6-dof的確定基于來自相機(jī)的測(cè)量結(jié)果以及可選地附加地來自gnss系統(tǒng)(和/或具有回復(fù)反射器的全站儀)的位置測(cè)量結(jié)果。而且,利用imu測(cè)量到的加速度和角速率也能夠被包括到姿態(tài)的確定(即具有6個(gè)自由度的位置和定向;即6-dof)中。
圖像數(shù)據(jù)被分析以得到對(duì)應(yīng)的特征(或?qū)?yīng)/同系圖像點(diǎn)),即多個(gè)圖像中的一個(gè)相同的對(duì)象點(diǎn)61的對(duì)應(yīng)的圖像的位置。這使用諸如sift、surt、brisk、brief等的特征檢測(cè)和匹配算法來完成。通過標(biāo)識(shí)多個(gè)對(duì)應(yīng)的特征(或?qū)?yīng)的圖像點(diǎn),也被稱作同系圖像點(diǎn)),多個(gè)對(duì)象點(diǎn)61被確定。這些對(duì)象點(diǎn)建立基準(zhǔn)點(diǎn)場(chǎng),該基準(zhǔn)點(diǎn)場(chǎng)能夠作為基準(zhǔn)被用于各個(gè)附加地收集的相機(jī)圖像,使得在各個(gè)重新添加的圖像中基準(zhǔn)點(diǎn)場(chǎng)的現(xiàn)有點(diǎn)能夠被用來相對(duì)于所有先前的圖像參照該圖像。
因此,在各個(gè)重新添加的圖像中,再次針對(duì)已經(jīng)存在的基準(zhǔn)點(diǎn)場(chǎng)的對(duì)象點(diǎn)找到/標(biāo)識(shí)對(duì)應(yīng)的圖像點(diǎn)(在所添加的圖像和先前已經(jīng)存在的圖像中)。并且在重新添加的圖像中的這些找到/標(biāo)識(shí)的圖像點(diǎn)(與由經(jīng)找到/標(biāo)識(shí)的圖像點(diǎn)表示的符合對(duì)象點(diǎn)的經(jīng)先前確定的坐標(biāo)一起)被用來借助于后方交會(huì)確定這個(gè)重新添加的圖像的姿態(tài)。
此外,同樣在各個(gè)重新添加的圖像中,再次針對(duì)周圍的新對(duì)象點(diǎn)找到/標(biāo)識(shí)對(duì)應(yīng)的圖像點(diǎn)(在這個(gè)添加的圖像和先前已經(jīng)存在的圖像中)。并且在重新添加的圖像和至少一個(gè)“舊”圖像中的這些找到/標(biāo)識(shí)的對(duì)應(yīng)的圖像點(diǎn)(即,所對(duì)應(yīng)的圖像點(diǎn)在重新添加的圖像和舊圖像中的位置)被用來通過前方交會(huì)來確定另外的對(duì)象點(diǎn)的坐標(biāo),使得基準(zhǔn)點(diǎn)場(chǎng)被按另外的對(duì)象點(diǎn)與此一起擴(kuò)展。因此,一方面,對(duì)于各個(gè)重新添加的圖像能夠(基于使用已經(jīng)存在的基準(zhǔn)點(diǎn)場(chǎng)的現(xiàn)有對(duì)象點(diǎn)的現(xiàn)有特征/圖像點(diǎn)方案的后方交會(huì))確定姿態(tài),并且另一方面(在邏輯上同時(shí)地),隨著各個(gè)重新添加的圖像基準(zhǔn)點(diǎn)場(chǎng)也在增長(zhǎng)(基于使用周圍的先前未知的對(duì)象點(diǎn)的重新標(biāo)識(shí)的對(duì)應(yīng)特征/圖像點(diǎn)的前方交會(huì))。
另選地,在視頻輸入的情況下,能夠?qū)Ω鱾€(gè)視頻幀使用跟蹤算法(例如通過應(yīng)用kanade-lucas-tomasi(klt)特征跟蹤器)找到對(duì)應(yīng)(即,所對(duì)應(yīng)的或同系圖像點(diǎn)或特征)。在此應(yīng)用意義上,“利用一個(gè)或更多個(gè)相機(jī)拍攝一系列圖像”的術(shù)語包括通過連續(xù)地(例如,遵循定義定時(shí)(例如每秒一個(gè)圖像)或者遵循定義間隔(例如每隔半米移動(dòng)一個(gè)圖像)拍攝/取單個(gè)圖像或者通過拍攝視頻幀來生成圖像數(shù)據(jù)。
因此,在基于所對(duì)應(yīng)的特征的slam評(píng)估中,同時(shí)得到圖像的姿態(tài)并且點(diǎn)云(在本文中被稱作“基準(zhǔn)點(diǎn)場(chǎng)”,其是具有比較低的密度的點(diǎn)云(因此也常常被稱作“稀疏點(diǎn)云”))被建立和計(jì)算。這個(gè)基準(zhǔn)點(diǎn)場(chǎng)在僅被計(jì)算以便確定圖像的姿態(tài)(即,以便確定并參照?qǐng)D像拾取相對(duì)于彼此的位置和定向)的第一距離上,即至少最初僅用于定位目的?;鶞?zhǔn)點(diǎn)場(chǎng)因此是用于確定姿態(tài)的連續(xù)地增長(zhǎng)的公共基準(zhǔn)幀。基準(zhǔn)點(diǎn)場(chǎng)通常不包括周圍的預(yù)知點(diǎn)。
在基準(zhǔn)點(diǎn)場(chǎng)和姿態(tài)確定的第一步驟中,相對(duì)姿態(tài)算法被用來計(jì)算兩個(gè)選擇的初始幀/圖像與初始點(diǎn)云(即,基準(zhǔn)點(diǎn)場(chǎng)的第一部分)之間的相對(duì)姿態(tài)。在本文中,imu和/或gnss數(shù)據(jù)能夠被附加地用來確定所選擇的初始幀的相對(duì)姿態(tài)(以便做出使姿態(tài)變得更穩(wěn)定和/或更有效的步驟)?;诮Y(jié)果得到的點(diǎn)云(基準(zhǔn)點(diǎn)的這個(gè)第一/已經(jīng)存在的部分)以及第三圖像中檢測(cè)到的所對(duì)應(yīng)的特征能夠通過后方交會(huì)來計(jì)算第三圖像的姿態(tài)。然后再次,應(yīng)用前方交會(huì)以細(xì)化所有三個(gè)圖像中檢測(cè)到的特征的3d坐標(biāo)并且以確定在第一圖像和第三圖像中的一個(gè)中檢測(cè)到的新3d點(diǎn)。因此,利用添加的圖像可以重建新3d點(diǎn)并且點(diǎn)云(基準(zhǔn)點(diǎn)云)中的點(diǎn)的數(shù)量在增長(zhǎng)(圖13)。
算法的基本部分的概要:
同時(shí)地,通過對(duì)一系列圖像(13)應(yīng)用定義算法
-圖像的姿態(tài)被確定并且
-包括周圍存在的多個(gè)基準(zhǔn)點(diǎn)的基準(zhǔn)點(diǎn)場(chǎng)被建立
其中
-多個(gè)分別對(duì)應(yīng)的圖像點(diǎn)在多個(gè)圖像子組中的每一個(gè)中被標(biāo)識(shí),各個(gè)圖像子組包含一系列圖像中的至少兩個(gè)圖像,
-姿態(tài)借助于使用已經(jīng)添加到基準(zhǔn)點(diǎn)場(chǎng)的確定坐標(biāo)以及表示所述基準(zhǔn)點(diǎn)的所對(duì)應(yīng)的圖像點(diǎn)的圖像位置的后方交會(huì)來確定,以及
-基準(zhǔn)點(diǎn)(其各個(gè)由標(biāo)識(shí)的對(duì)應(yīng)的圖像點(diǎn)表示)被添加到基準(zhǔn)點(diǎn)場(chǎng)并且基準(zhǔn)點(diǎn)的坐標(biāo)借助于使用對(duì)應(yīng)圖像點(diǎn)的圖像位置的前方交會(huì)以及針對(duì)所述相應(yīng)的對(duì)應(yīng)圖像點(diǎn)出現(xiàn)在其中的圖像所確定的姿態(tài)來確定。
甚至進(jìn)一步總結(jié)(換句話說):
利用使用圖像的系列的定義算法的slam評(píng)估被執(zhí)行,其中,多個(gè)分別對(duì)應(yīng)的圖像點(diǎn)在圖像的系列中的圖像的多個(gè)子組中的每一個(gè)中被標(biāo)識(shí),并且,基于使用所述多個(gè)分別對(duì)應(yīng)的圖像點(diǎn)的后方交會(huì)和前方交會(huì),
-包括所述環(huán)境的多個(gè)基準(zhǔn)點(diǎn)的基準(zhǔn)點(diǎn)場(chǎng)被建立,其中,基準(zhǔn)點(diǎn)的坐標(biāo)被得到(基本上從前方交會(huì)),并且
-圖像的姿態(tài)被確定(基本上根據(jù)后方交會(huì))。
作為最終或中間步驟(即,在已經(jīng)執(zhí)行基本算法之后或者除此之外),能夠使用集束調(diào)整來細(xì)化總體解決方案(即,經(jīng)建立的基準(zhǔn)點(diǎn)場(chǎng)(即,所得到的基準(zhǔn)點(diǎn)的坐標(biāo)),以及可選地所確定的所對(duì)應(yīng)的圖像點(diǎn)在圖像中的圖像位置)。這個(gè)算法是再投影誤差以及可選地gnss測(cè)量結(jié)果的非線性最小二乘方最小化。它將在一個(gè)步驟中優(yōu)化基準(zhǔn)點(diǎn)場(chǎng)的所有相機(jī)姿態(tài)和所有3d點(diǎn)的定位和定向。
集束調(diào)整能夠由用戶在他正在使用桿來測(cè)量個(gè)別點(diǎn)時(shí)即在傳統(tǒng)的gnss桿模式下觸發(fā)。集束調(diào)整然后被用來在測(cè)量期間細(xì)化桿的定位和定位以在測(cè)量期間給用戶提供尖端的位置的最佳估計(jì)。
另選地,能夠使用圖像數(shù)據(jù)、imu數(shù)據(jù)和/或gnss數(shù)據(jù)來檢測(cè)桿是否被已經(jīng)保持在一個(gè)位置中。集束調(diào)整然后被自動(dòng)地觸發(fā)。當(dāng)最佳(集束調(diào)整后的)結(jié)果可用時(shí)這通過例如綠燈被指示給用戶。用戶然后能夠在觸發(fā)測(cè)量時(shí)立即讀出尖端的位置的最佳估計(jì)。
如果gnss數(shù)據(jù)可用-情況可能不總是這樣,則能夠在新相機(jī)姿態(tài)的后方交會(huì)中或者在初始圖像對(duì)的相對(duì)姿態(tài)的計(jì)算中使用位置。對(duì)于新圖像姿態(tài)的計(jì)算在后方交會(huì)算法中組合圖像和gnss位置中所檢測(cè)到的特征位置。具體地,測(cè)量結(jié)果的準(zhǔn)確性(例如,對(duì)于特征測(cè)量結(jié)果來說為1px而對(duì)于gnss位置來說為3cm)被考慮并且測(cè)量結(jié)果被相應(yīng)地加權(quán)。
與gnss數(shù)據(jù)的組合導(dǎo)致通過slam算法生成地理參照且定標(biāo)的點(diǎn)云。而且,因?yàn)間nss在全局標(biāo)度上遞送具有良好準(zhǔn)確性的位置,所以這些位置抵消可能出現(xiàn)在僅基于圖像測(cè)量結(jié)果的slam中的誤差累積和結(jié)果得到的漂移。
然而,如果已經(jīng)生成了基本點(diǎn)云,則后方交會(huì)在不可僅通過圖像數(shù)據(jù)得到gnss信號(hào)的情況下也工作。這可能是當(dāng)操作員與立面站得非常近并且大多數(shù)gnss衛(wèi)星被建筑物覆蓋時(shí)的情況。然后基于現(xiàn)有點(diǎn)云通過相機(jī)姿態(tài)的后方交會(huì)得到6-dof。
另選地,其它slam或運(yùn)動(dòng)結(jié)構(gòu)算法能夠被用于桿的6-dof確定。
而且,如果gnss位置不可用并且位置是從圖像數(shù)據(jù)得到的,具體地在與imu數(shù)據(jù)的組合中,能夠?qū)⑺玫降奈恢梅答伣ognss模塊以便于對(duì)gnss位置的修復(fù)的快速重新獲取。
另選地,當(dāng)將圖2b所示的相機(jī)模塊30應(yīng)用于反射器16時(shí),代替gnss數(shù)據(jù)還能夠使用利用全站儀測(cè)量到的位置。這里再次,如果已經(jīng)生成了基本點(diǎn)云,則還能夠在全站儀與反射器之間的視線中斷時(shí)確定模塊的姿態(tài)。
在gnss數(shù)據(jù)與圖像測(cè)量結(jié)果的組合中必須考慮天線中心與相機(jī)模塊之間的偏移。這個(gè)偏移可能是根據(jù)機(jī)械設(shè)計(jì)獲知的或者通過校準(zhǔn)得到。當(dāng)使用了多個(gè)相機(jī)時(shí),還必須根據(jù)設(shè)計(jì)校準(zhǔn)或者得到它們的相對(duì)姿態(tài)。校準(zhǔn)能夠由制造商或者由用戶在特別設(shè)計(jì)的過程中使用例如可由要校準(zhǔn)的相機(jī)拍攝的很好地構(gòu)造成的區(qū)域(基準(zhǔn)圖案)來完成。圖案與相機(jī)之間的限定的相對(duì)空間關(guān)系是預(yù)知的。還能夠在集束調(diào)整(自校準(zhǔn))中微調(diào)校準(zhǔn)。
此外,能夠在六個(gè)自由度的確定中包括來自慣性測(cè)量單元(imu)的數(shù)據(jù)(即加速度和角速率)。因?yàn)榧铀俣扔?jì)感測(cè)重力向量,所以能夠根據(jù)imu數(shù)據(jù)直接確定相機(jī)模塊的傾斜(即橫搖角和俯仰角)。能夠從基于加速度的雙積分的位置偏移與從gnss位置得到的位置偏移的比較得到桿的水平定向,即偏航角。另選地或附加地,磁強(qiáng)計(jì)能夠被用來確定偏航角。
能夠通過傳感器融合算法(例如,卡爾曼濾波器、粒子濾波等)來執(zhí)行傳感器數(shù)據(jù)的組合。
為了傳感器融合重要的是所有測(cè)量數(shù)據(jù)參照公共時(shí)基。這能夠通過同步的數(shù)據(jù)獲取(即,一個(gè)傳感器觸發(fā)所有其它傳感器)或者通過將時(shí)間戳指派給各個(gè)測(cè)量來實(shí)現(xiàn)。
知道gnss桿的長(zhǎng)度及其相對(duì)于上級(jí)(局部或全局坐標(biāo)系統(tǒng),例如wgs84)的姿態(tài),能夠得到尖端點(diǎn)的坐標(biāo)。在實(shí)際測(cè)量中這具有操作員在他將尖端點(diǎn)放置到測(cè)量點(diǎn)中之后不必再弄平桿的優(yōu)點(diǎn)。因?yàn)闇y(cè)量單個(gè)點(diǎn)所需的減少時(shí)間,所以這對(duì)操作員執(zhí)行測(cè)量作業(yè)的生產(chǎn)力產(chǎn)生積極影響。
密集匹配
密集匹配具有在原始圖像中確定密集點(diǎn)云(即,各個(gè)像素或子集的3d坐標(biāo),例如在規(guī)則3x3網(wǎng)格上,即在行和列方向上每第三個(gè)像素)的目標(biāo)。算法由兩個(gè)主要步驟構(gòu)成。
首先,對(duì)于所有交疊相機(jī)計(jì)算視差圖。此圖包含兩個(gè)圖像中的像素的偏移,即要應(yīng)用于第一圖像中的像素以結(jié)束于第二圖像中的對(duì)應(yīng)點(diǎn)的位置的移位。存在計(jì)算這些圖的多個(gè)方式、相關(guān)技術(shù)(例如半全局匹配)等。
對(duì)于視差圖中的各個(gè)像素來說置信值能夠被獲得并且用在進(jìn)一步處理中,例如以用于測(cè)量結(jié)果的自適應(yīng)加權(quán)。
第二,使用這組視差圖通過前方交會(huì)來計(jì)算3d點(diǎn)。知道通過所對(duì)應(yīng)的像素來自投影中心的圖像光線60的姿態(tài)被建立。對(duì)象點(diǎn)的3d坐標(biāo)由這些光線的交會(huì)產(chǎn)生。原則上兩條光線中的最小者是3d點(diǎn)的交會(huì)所需要的。然而,在實(shí)踐中盡量多可用的光線被用在前方交會(huì)中。
標(biāo)識(shí)圖像點(diǎn)(基準(zhǔn)點(diǎn))并且基于經(jīng)標(biāo)識(shí)的圖像點(diǎn)來確定姿態(tài)(具體地基于其計(jì)算點(diǎn)云)被理解為密集匹配處理的形式或至少一部分。
對(duì)于前方交會(huì)能夠應(yīng)用最小二乘法調(diào)整。這里,點(diǎn)的3d坐標(biāo)是通過使點(diǎn)與所有光線之間的偏差(實(shí)際上為平方偏差)最小化來確定的?;趲缀涡螤詈徒Y(jié)果得到的偏差,即剩余殘差,能夠通過計(jì)算方差-協(xié)方差矩陣以及此外3d點(diǎn)的所有三個(gè)坐標(biāo)的標(biāo)準(zhǔn)偏差的估值來得到交會(huì)的量。
這個(gè)被示出在圖15a中,其中尤其對(duì)于單個(gè)點(diǎn)或這些點(diǎn)的相應(yīng)區(qū)域,六條光線的“好”交會(huì)66導(dǎo)致小不確定性并且三條光線的“差”交會(huì)68導(dǎo)致大不確定性。
關(guān)于如上所述的點(diǎn)云的計(jì)算點(diǎn)中的至少一個(gè)的量的量指示輸出可以基于這種計(jì)算。
能夠使用關(guān)于測(cè)量質(zhì)量的多個(gè)準(zhǔn)則來對(duì)最終點(diǎn)云進(jìn)行濾波。這包括觀察到點(diǎn)的圖像的數(shù)量(即,用于交會(huì)的光線的數(shù)量)、限定交會(huì)的幾何形狀的相機(jī)之間的基線、針對(duì)所有測(cè)量結(jié)果的一致性的量度等。
另選地,還能夠單獨(dú)基于像內(nèi)在因素(相機(jī)分辨率等)這樣的預(yù)知情況以及一般內(nèi)在因素(到相機(jī)的距離等)針對(duì)實(shí)際上行進(jìn)的路徑和實(shí)際上需要的圖像系列(并且還針對(duì)具有圖像的計(jì)劃拍攝的計(jì)劃路徑)來計(jì)算質(zhì)量指示符。在這種情況下,對(duì)于至少一個(gè)點(diǎn)的位置的計(jì)算(以及對(duì)光線在前方交會(huì)內(nèi)的交會(huì)的程度的考慮)將未必用于這個(gè)估計(jì)的質(zhì)量指示符。圖15b示出了基于這些區(qū)域中的3d位置的確定的估計(jì)可達(dá)質(zhì)量的準(zhǔn)確性界限的可視化??拷?jì)劃或行進(jìn)跡線的點(diǎn)具有更高的估計(jì)準(zhǔn)確性/質(zhì)量并且更遠(yuǎn)離計(jì)劃或行進(jìn)跡線的周圍的點(diǎn)具有更低的估計(jì)準(zhǔn)確性/質(zhì)量。
另選地,能夠使用其它算法(例如,平面掃掠)來確定密集點(diǎn)云。
對(duì)于單個(gè)點(diǎn)的測(cè)量操作員將桿的尖端點(diǎn)放置在測(cè)量點(diǎn)上。與此相反,密集點(diǎn)云的測(cè)量是動(dòng)態(tài)的,即操作員僅圍繞收集數(shù)據(jù)(即,圖像數(shù)據(jù)、來自gnss或全站儀的位置數(shù)據(jù)、imu數(shù)據(jù)等)。
用戶簡(jiǎn)單地走過要映射的區(qū)域。在移動(dòng)期間系統(tǒng)記錄圖像數(shù)據(jù)(例如,每秒15幀)、gnss位置和imu數(shù)據(jù)。傳感器或者被同步,例如由主傳感器觸發(fā),或者時(shí)間戳被指派給各個(gè)測(cè)量。
去模糊
另一個(gè)發(fā)明方面是在計(jì)算“slam”(或者還被稱作“運(yùn)動(dòng)結(jié)構(gòu)sfm”之后使所獲取的圖像系列的圖像變清晰。
人們知道,在相機(jī)正在運(yùn)動(dòng)中的情況下拍攝的圖像中,運(yùn)動(dòng)模糊可能出現(xiàn)在圖像中。其中,一般而言,遠(yuǎn)離相機(jī)的經(jīng)成像的場(chǎng)景/環(huán)境的對(duì)象相對(duì)于相機(jī)具有更低的相對(duì)運(yùn)動(dòng)(即,對(duì)圖像拾取有效的相對(duì)運(yùn)動(dòng))以及更靠近相機(jī)的經(jīng)成像的場(chǎng)景/環(huán)境的對(duì)象具有更高的相對(duì)運(yùn)動(dòng)。
根據(jù)slam算法(尤其附加地借助于imu數(shù)據(jù)和/或gnss/tps位置測(cè)量數(shù)據(jù)),能夠?yàn)樵趫D像系列的獲取期間行進(jìn)的路徑得到相機(jī)的3d跡線。
并且,還已經(jīng)根據(jù)slam算法確定了場(chǎng)景/環(huán)境(即,被提取并用來為圖像得到姿態(tài)的環(huán)境的基準(zhǔn)點(diǎn)場(chǎng)的位置)。
基于這個(gè)稀疏點(diǎn)云(即,更一般地說:基于所確定的稀疏點(diǎn)云的場(chǎng)景/環(huán)境的深度信息或深度圖)并且基于相機(jī)在圖像中的每一個(gè)的獲取期間的運(yùn)動(dòng),能夠通過圖像處理在圖像中執(zhí)行運(yùn)動(dòng)去模糊。
其中,在圖像的獲取期間一直更靠近相機(jī)的成像對(duì)象被應(yīng)用有比較更高程度/階段的運(yùn)動(dòng)去模糊并且在圖像的獲取期間一直遠(yuǎn)離相機(jī)的成像對(duì)象被應(yīng)用有比較更低程度/階段的運(yùn)動(dòng)去模糊。
在所獲取的圖像系列的圖像的去模糊之后,通過去模糊重新生成的圖像(其能夠被稱為去模糊圖像)然后能夠取代/替換圖像系列的所對(duì)應(yīng)的未去模糊的圖像。
在圖像系列的所有圖像被去模糊的情況下,這些去模糊的圖像然后能夠構(gòu)成圖像系列(即,然后包括僅去模糊的圖像)。
在圖像系列的圖像的僅一部分被去模糊(在序列中取代屬于去模糊之前的系列的所對(duì)應(yīng)的/對(duì)方未去模糊的圖像)的情況下,圖像系列然后能夠由去模糊的圖像和未去模糊的圖像構(gòu)成。
在下文中,然后包含至少同樣一些去模糊的圖像(或僅去模糊的圖像)的這些重新或者刷新的圖像系列能夠被用于多個(gè)目的:
a)通過使用經(jīng)刷新的圖像序列(包括去模糊的圖像)來重新執(zhí)行slam評(píng)估,即導(dǎo)致
-針對(duì)基準(zhǔn)點(diǎn)場(chǎng)的基準(zhǔn)點(diǎn)重新計(jì)算的位置(即,重新計(jì)算的稀疏點(diǎn)云)以及
-針對(duì)圖像重新計(jì)算計(jì)算的姿態(tài)。
其中,由于表示基準(zhǔn)點(diǎn)的要在圖像中標(biāo)識(shí)的特征能夠位于具有更高準(zhǔn)確性/更高魯棒性和更低測(cè)量不確定性的圖像中的事實(shí)(由于在去模糊之后的圖像中的模糊的更低程度而導(dǎo)致),基準(zhǔn)點(diǎn)的位置以及圖像的姿態(tài)二者能夠被確定為更準(zhǔn)確并且有更低測(cè)量不確定性。
b)按更高準(zhǔn)確性和更低測(cè)量不確定性計(jì)算環(huán)境的密集點(diǎn)云(即,執(zhí)行密集重建或建網(wǎng))。
其中,經(jīng)刷新的/去模糊的圖像系列(包括去模糊的圖像)能夠直接被用于密集重建?;蛘咴谝陨宵c(diǎn)a)下描述的步驟(即,對(duì)經(jīng)刷新的系列重新執(zhí)行slam評(píng)估)能夠置于前面,然后,基于通過執(zhí)行以上步驟a)已經(jīng)重新計(jì)算的姿態(tài),能夠使用經(jīng)去模糊的系列以及已經(jīng)更準(zhǔn)確地確定的姿態(tài)來執(zhí)行密集重建。
這由于在去模糊的圖像中能夠按更高魯棒性和更高精度執(zhí)行圖像中的對(duì)應(yīng)圖像點(diǎn)(屬于相同的場(chǎng)景點(diǎn))的標(biāo)識(shí)和定位的事實(shí)而對(duì)于密集點(diǎn)云的確定導(dǎo)致更高的準(zhǔn)確性。因此,同樣使用經(jīng)標(biāo)識(shí)且定位的圖像點(diǎn)的前方交會(huì)以更高準(zhǔn)確性/更低測(cè)量不確定性揭示場(chǎng)景點(diǎn)的位置。
并且,場(chǎng)景點(diǎn)云的確定的更高密度由于在去模糊的圖像中圖像中的更多對(duì)應(yīng)的圖像點(diǎn)(屬于相同的場(chǎng)景點(diǎn))是可標(biāo)識(shí)的事實(shí)而是可實(shí)現(xiàn)的。
c)以更高準(zhǔn)確性和更低測(cè)量不確定性計(jì)算環(huán)境的單個(gè)點(diǎn)的位置(在上文并且在后面還被稱作“遠(yuǎn)程點(diǎn)測(cè)量”。
類似于多個(gè)點(diǎn)(即環(huán)境的密集點(diǎn)云)的計(jì)算,同樣能夠通過使用經(jīng)刷新/去模糊的圖像系列(以及可選地已經(jīng)重新計(jì)算的姿態(tài))來以更高準(zhǔn)確性和更低測(cè)量不確定性確定單個(gè)點(diǎn)的位置。
總之,使用去模糊的圖像,對(duì)去模糊的圖像的sfm/slam評(píng)估能夠提供有關(guān)姿態(tài)和稀疏點(diǎn)云的確定的更好結(jié)果,因?yàn)樘卣鲗⒂捎趫D像中的更高對(duì)比度而被以更高精度定位(并且可以定位更多特征)。如果sfm是更精確的,則進(jìn)一步的步驟將提供更好質(zhì)量(密集重建、建網(wǎng))。但是同樣在沒有前綴的刷新sfm/slam評(píng)估的情況下,與使用未去模糊的圖像的場(chǎng)景相比能夠通過使用經(jīng)去模糊的圖像來以至少稍微更高的質(zhì)量執(zhí)行密集重建。
正射相片
在圖16a和圖16b中例示了兩個(gè)正射相片的匹配的示例性實(shí)施方式,其中,一個(gè)正射相片160由根據(jù)本發(fā)明的測(cè)量系統(tǒng)生成并且一個(gè)正射相片是基準(zhǔn)正射相片165,例如空中圖像。術(shù)語正射相片這里被理解為意指具有正射視圖的“真實(shí)”正射相片,即起伏和傾斜已被調(diào)整以便正射校正圖像。
因?yàn)橄鄼C(jī)可能正向下看,或者具有足夠的視場(chǎng),所以地平面將是可見的。與到地的已知距離、相機(jī)位置和定向一起,能夠?qū)D像投影到地平面。通過使用來自不同方向的許多圖像,能夠計(jì)算地平面的一個(gè)大的合成圖像。由于紋理透視縮短(透視效應(yīng),當(dāng)相機(jī)正以特定角度看地面時(shí)),論文“analysis-by-synthesistexturereconstruction”(liefers、parys、schilling,2012)中所描述的方法能夠被用來為為地平面獲得高質(zhì)量紋理。所生成的正射相片能夠被登記到地理參照空中圖像以便在地理坐標(biāo)系統(tǒng)中定位測(cè)量。在以下段落中,對(duì)工作流進(jìn)行詳細(xì)的描述。
能夠在作為相機(jī)模塊的一部分的處理單元上執(zhí)行相機(jī)姿態(tài)和密集匹配的處理,即密集點(diǎn)云的生成。另選地,能夠在控制器(數(shù)據(jù)記錄器)或gnss天線的處理單元上執(zhí)行處理,所述gnss天線通過電纜或者經(jīng)由無線電、藍(lán)牙、wifi等連接到相機(jī)模塊。
而且,能夠?qū)?shù)據(jù)發(fā)送到連接到互聯(lián)網(wǎng)的專用云服務(wù)器。能夠直接從相機(jī)模塊或者經(jīng)由控制器或者經(jīng)由gnss天線發(fā)送數(shù)據(jù)。
另選地,服務(wù)器能夠被安裝在車輛(例如,靠近測(cè)量區(qū)域位于并且通過諸如藍(lán)牙或wifi的本地電信協(xié)議與桿進(jìn)行通信的汽車)中。
另選地,服務(wù)器能夠被暫時(shí)或者永久地安裝在例如施工棚里的站點(diǎn)上并且通過本地電信協(xié)議與桿進(jìn)行通信。
優(yōu)選地,云服務(wù)器上的數(shù)據(jù)的發(fā)送和處理緊接在記錄開始之后開始。在這種情況下在后臺(tái)中幫助使結(jié)果的等待時(shí)間保持短的數(shù)據(jù)獲取并行地執(zhí)行處理。
另選地,系統(tǒng)能夠包括與由操作員在背包中攜帶的電源(例如,電池)一起的第二處理單元。第二處理單元可以被配備有使得能實(shí)現(xiàn)圖像數(shù)據(jù)的大容量并行處理的圖形處理單元(gpu)。具體地,第二處理單元可以是諸如強(qiáng)大的膝上型電腦、平板計(jì)算機(jī)或智能電話的獨(dú)立便攜式裝置。第二處理單元可以通過電纜或本地電信協(xié)議與桿進(jìn)行通信。
而且,處理的組合在相機(jī)模塊的處理單元、控制器或gnss天線的處理單元以及諸如云服務(wù)器的外部處理單元上。例如,能夠在包括在相機(jī)模塊中的處理單元上執(zhí)行數(shù)據(jù)的同步記錄。并且,能夠在這個(gè)處理單元上執(zhí)行圖像數(shù)據(jù)的預(yù)處理,例如特征提取或一些基本圖像處理算法。能夠在控制器的處理單元上執(zhí)行產(chǎn)生圖像的姿態(tài)以及稀疏點(diǎn)云的坐標(biāo)的slam算法。然后能夠?qū)⒔Y(jié)果得到的相機(jī)姿態(tài)和圖像發(fā)送到執(zhí)行密集匹配的云服務(wù)器。
處理之后的結(jié)果可以是
·點(diǎn)云,特別是有色點(diǎn)云;
·表面模型,特別是構(gòu)造成的表面模型;
·正射相片,特別是地面或立面的;或者
·一組折點(diǎn),例如拐點(diǎn),自動(dòng)地從點(diǎn)云得到。
為了完整性檢查操作員應(yīng)該在數(shù)據(jù)獲取結(jié)束之后不久(例如,幾分鐘)已經(jīng)在場(chǎng)中接收到預(yù)覽模型。基于這個(gè)預(yù)覽模型操作員能夠決定他是否完全拍攝了測(cè)量區(qū)域或者一些部分是否未被覆蓋。在后者情況下操作員能夠在未覆蓋區(qū)域中進(jìn)行一些附加測(cè)量以增加完整性的水平。
完整性檢查能夠利用圖像的對(duì)比度分析增強(qiáng)以便檢測(cè)遺漏并且它們將被重建不太可能的區(qū)域(均勻表面)。這將節(jié)約用戶設(shè)法重建這種區(qū)域的時(shí)間。
能夠由操作員基于預(yù)覽模型的可視化(例如,3d可視化)完成該決定。另選地,可視化能夠作為映射視圖為2d,以與對(duì)于無經(jīng)驗(yàn)的用戶來說難以解釋和導(dǎo)航的3d模型相比給用戶呈現(xiàn)模型的更快且更易于理解的視圖。具體地,遺漏部分被加亮。而且,系統(tǒng)能夠?qū)⒉僮鲉T導(dǎo)向遺漏測(cè)量的區(qū)域。
預(yù)覽模型應(yīng)該在數(shù)據(jù)獲取結(jié)束之后不久可用。為了節(jié)約時(shí)間,例如為了數(shù)據(jù)發(fā)送和處理,預(yù)覽模型可以具有比最終模型低的分辨率,例如大約10cm的點(diǎn)分辨率。這能夠通過例如在圖像分辨率從1920×1080個(gè)像素降低至320×240個(gè)像素之后對(duì)具有更低分辨率的圖像具體地執(zhí)行密集匹配來實(shí)現(xiàn)。
在有限帶寬的情況下,如果在云服務(wù)器上執(zhí)行處理則在數(shù)據(jù)被發(fā)送之前執(zhí)行圖像分辨率的降低。而且,圖像數(shù)據(jù)能夠在它們被發(fā)送到處理服務(wù)器之前被壓縮。其中,能夠以無損方式(即,能夠應(yīng)用無損數(shù)據(jù)壓縮,而不降低圖像的質(zhì)量/分辨率)或者以有損方式(即,取決于特定情形的需要和情況,同樣能夠應(yīng)用有損數(shù)據(jù)壓縮,包括圖像的質(zhì)量/分辨率的降低)執(zhí)行圖像數(shù)據(jù)的壓縮。
而且,能夠使用稀疏圖像表示來減少數(shù)據(jù)(不必發(fā)送非常低對(duì)比度的區(qū)域)。
通過使經(jīng)計(jì)算的正射相片與基準(zhǔn)空中圖像相匹配,能夠得到附加的定位信息。這個(gè)能夠被用作地理定位的唯一源或者能夠與gnss或基于棱鏡的陸地測(cè)量結(jié)果聯(lián)接以便改進(jìn)地理定位準(zhǔn)確性。
在整個(gè)場(chǎng)景被拍攝之后,對(duì)數(shù)據(jù)集執(zhí)行slam算法。運(yùn)動(dòng)結(jié)構(gòu)能夠使用部分gnss數(shù)據(jù),然而這是不需要的。在計(jì)算外部相機(jī)參數(shù)之后,執(zhí)行正射相片生成算法。這個(gè)算法工作如下:
1)屬于地表面的點(diǎn)被確定。這能夠使用imu來完成以得到垂直定向向量并且檢測(cè)與這個(gè)向量垂直的平面表面。另選地,來自slam的移動(dòng)方向被用來估計(jì)與地面垂直的向量。
2)在地表面確定之后,例如使用2d德勞內(nèi)三角測(cè)量來使屬于這個(gè)表面的點(diǎn)成三角形。另選地,平面的集合被固定到地表面。另選地,地表面點(diǎn)在對(duì)平面進(jìn)行濾波或者使表面成三角形之前被濾波。
3)針對(duì)地表面(現(xiàn)在被定義為平面或三角形的集合)的紋理生成被執(zhí)行。取決于質(zhì)量要求,能夠通過給來自點(diǎn)云的表面著色來獲得紋理。另選地這能夠通過使用所確定的相機(jī)投影矩陣對(duì)圖像進(jìn)行反投影而完成。在需要最高紋理質(zhì)量的大多數(shù)需求情況下,使用綜合分析方法。這通過將所有拍攝的圖像反投影到地表面、計(jì)算地表面上的顏色貢獻(xiàn)的平均數(shù)、然后將地表面的部分投影回給相機(jī)并且計(jì)算所拍攝的圖像與投影地表面之間的差異圖像來工作。然后差異圖像被反投影到地平面,顏色被累積,以計(jì)算地表面的新改進(jìn)的紋理。然后在循環(huán)中重復(fù)該處理。這允許甚至從具有高透視失真的圖像重建高質(zhì)量紋理,其中地表面被極端地透射縮短。
4)紋理化地表面然后被投影到地平面上以便獲得能夠與從空中圖像創(chuàng)建的地理參照正射相片相匹配的正射相片。
5)相機(jī)位置相對(duì)于本地坐標(biāo)系統(tǒng)中生成的正射相片是已知的。然后使用純粹基于圖像的方法來向地理參照空中圖像注冊(cè)所生成的地面圖像。然后能夠在地理坐標(biāo)系統(tǒng)中計(jì)算相機(jī)位置,并且能夠?qū)Ⅻc(diǎn)云然后轉(zhuǎn)換為地理坐標(biāo)系統(tǒng)。
在一些應(yīng)用中可能需要沒有g(shù)nss信號(hào)的交互式地理定位。然后能夠使用以下方法:
1)在數(shù)據(jù)捕獲期間,根據(jù)非常有限數(shù)量的幀計(jì)算僅局部紋理。這需要對(duì)相機(jī)的可能小的子集運(yùn)行slam以便發(fā)現(xiàn)它們彼此的關(guān)系。
2)局部紋理然后使用基于圖像的方法(例如,特征匹配)被注冊(cè)到空中圖像。
3)然后能夠根據(jù)新局部相機(jī)以及局部地面紋理到空中圖像的注冊(cè)來確定相機(jī)的位置和模型標(biāo)度。
這個(gè)方法能夠被用于相機(jī)在地圖上的位置的本地裝置的屏幕上的交互式可視化。可以一起為了良好濾波而聯(lián)合并優(yōu)化局部slam計(jì)算以便找到利用slam的不同子重建之間的關(guān)系。
在gnss可用的情況下,該方法能夠被用來在無需租用平面或uav的情況下創(chuàng)建地理參照正射相片以便用在其它應(yīng)用中。
圖16a示出了從在地水平面處獲取的圖像生成的示例正射相片160。如可以看到的,不是從地水平面拍攝的那些區(qū)域162(諸如建筑物屋頂或樹頂)不存在。圖16b呈現(xiàn)了來自地理參照空中圖像的示例基準(zhǔn)正射相片165。那兩個(gè)圖像具有不同的標(biāo)度和定向。通過使用變化特征的標(biāo)度和旋轉(zhuǎn)的匹配,能夠?qū)⑺傻膱D像變換為和基準(zhǔn)空中圖像的標(biāo)度和旋轉(zhuǎn)匹配(來自圖16a的正射相片160的邊界由外形166表示)。這個(gè)變換然后被用來將測(cè)量?jī)x器的點(diǎn)云和位置帶給基準(zhǔn)圖像165的坐標(biāo)系統(tǒng)。
基于桿的標(biāo)度推導(dǎo)
相機(jī)模塊還能夠在無需與gnss系統(tǒng)或全站儀一起組合的情況下被使用,特別是在不需要絕對(duì)地理參照的應(yīng)用中這個(gè)被例示在圖17中。
不利地,沒有g(shù)nss或全站儀的3d重建可能具有任意標(biāo)度。這個(gè)任務(wù)的現(xiàn)有技術(shù)水平解決方案是使用具有已知3d坐標(biāo)的基準(zhǔn)點(diǎn)。這些點(diǎn)是在圖像上人工地或自動(dòng)地測(cè)量的。它們的3d坐標(biāo)使用附加測(cè)量單元(例如,利用全站儀)來確定。另選地,能夠使用在圖像數(shù)據(jù)中自動(dòng)地標(biāo)識(shí)的標(biāo)度條。
另選地,具有以下步驟的方法能夠被用來確定標(biāo)度。
1)測(cè)量被安裝在桿10上的相機(jī)模塊30的高度。
2)用戶2開始在桿10直立在地面上的情況下記錄圖像。
3)用戶沿著對(duì)象移動(dòng)并且記錄圖像。
4)在數(shù)據(jù)處理之后,重建任意標(biāo)度下的對(duì)象的密集點(diǎn)云。相機(jī)模塊高于地面的高度是在針對(duì)第一圖像重建的點(diǎn)云中確定的。
5)通過在步驟1和步驟4上確定的高度的比較來計(jì)算標(biāo)度。
為了改進(jìn)標(biāo)度計(jì)算的準(zhǔn)確性,用戶2能夠在測(cè)量期間將桿10放置到地面上一次以上。用戶能夠按桿上的按鈕以指示當(dāng)桿10正直立在地面上時(shí)的時(shí)刻。另選地,可能基于順序地記錄的圖像或imu信息的比較自動(dòng)地確定這個(gè)時(shí)刻。
整個(gè)重建在任意定向坐標(biāo)系統(tǒng)中完成。然而,用戶能夠通過以下過程來定義本地坐標(biāo)系統(tǒng):
1)用戶2將桿10放置在地面上并且使用綜合水平儀(integratedbubble)來使桿垂直地定向。在用戶按將地面上的這個(gè)點(diǎn)5定義為坐標(biāo)系統(tǒng)xyz的原點(diǎn)的裝置上的按鈕之后,在默認(rèn)情況下整個(gè)測(cè)量的第一點(diǎn)5被認(rèn)為是原點(diǎn)。坐標(biāo)系統(tǒng)的垂直軸z由桿10相對(duì)于鉛垂線9的當(dāng)前定向來定義。
2)對(duì)于坐標(biāo)系統(tǒng)的水平定向的定義,用戶2在第二點(diǎn)5’上按照任意定向?qū)U10放置到地面上。桿10的垂直定向在這種情況下是不重要的。從坐標(biāo)系統(tǒng)的原點(diǎn)到這個(gè)第二點(diǎn)的向量定義水平定向,例如坐標(biāo)系統(tǒng)的x軸。
用戶能夠?qū)U10放置在明顯且標(biāo)記的點(diǎn)上以能夠?qū)?例如稍后在另一測(cè)量中)設(shè)置同一坐標(biāo)系統(tǒng)xyz。
相機(jī)模塊30高于地面的高度計(jì)算能夠在經(jīng)重建的點(diǎn)云中人工地或者自動(dòng)地完成。在第一種情況下,用戶選擇屬于地面的點(diǎn)。在第二種情況下基于桿10被垂直地定向的假定而提取高度。
另選地,還能夠在網(wǎng)狀表面模型中執(zhí)行高度計(jì)算。
循環(huán)閉合
可選地,結(jié)合全景相機(jī)的gnss數(shù)據(jù)能夠被用來以新方式擴(kuò)展標(biāo)準(zhǔn)slam方法。gnss數(shù)據(jù)能夠被用來選擇在粗略同一位置處但是在不同時(shí)間記錄的兩個(gè)幀。這個(gè)在用戶跨越他自己的路徑或者進(jìn)行同一路徑多次時(shí)發(fā)生。因?yàn)間nss桿在正常記錄條件下被垂直地保持,所以兩個(gè)幀之間的主要差異很可能是水平旋轉(zhuǎn),即方位角的改變。能夠確定并補(bǔ)償這樣的單個(gè)旋轉(zhuǎn)以用于高效地使用原始圖像或檢測(cè)到的特征點(diǎn)。在方位改變的補(bǔ)償之后或期間,可選地能夠以類似的方式執(zhí)行其它兩個(gè)定向角的小改變的補(bǔ)償。一旦兩個(gè)幀被粗略地對(duì)準(zhǔn),就能夠通過使用諸如klt的跟蹤算法在兩個(gè)幀之間找到圖像之間的多個(gè)附加匹配。附加匹配改進(jìn)遙遠(yuǎn)且定時(shí)的但是不在位置中的兩個(gè)幀之間的連接,即循環(huán)閉合。這通過對(duì)大數(shù)據(jù)集進(jìn)一步減少漂移(也在旋轉(zhuǎn)中)來使算法穩(wěn)定并且增強(qiáng)準(zhǔn)確性。
根據(jù)本發(fā)明的循環(huán)閉合基于利用至少一個(gè)相機(jī)拍攝周圍的圖像的第一系列,第一系列包括按相機(jī)的不同姿態(tài)拍攝的圖像的量,姿態(tài)表示相機(jī)的相應(yīng)的位置和定向。此外,基于圖像的第一系列標(biāo)識(shí)圖像點(diǎn)的初始集合,初始圖像點(diǎn)表示初始基準(zhǔn)點(diǎn)場(chǎng)65(圖14)的基準(zhǔn)點(diǎn)62,其中,每個(gè)基準(zhǔn)點(diǎn)出現(xiàn)在圖像的系列的至少兩個(gè)圖像中,并且基于使用初始圖像點(diǎn)的后方交會(huì)來確定圖像的姿態(tài)。
根據(jù)本發(fā)明,周圍的圖像的第二系列是利用至少一個(gè)相機(jī)拍攝的,出現(xiàn)在圖像的第二系列的圖像中的至少一個(gè)中的基準(zhǔn)點(diǎn)場(chǎng)65的基準(zhǔn)點(diǎn)被標(biāo)識(shí),圖像點(diǎn)的另一集合在與圖像的第二系列的經(jīng)標(biāo)識(shí)的基準(zhǔn)點(diǎn)62對(duì)應(yīng)的圖像的第二系列的圖像中被標(biāo)識(shí),并且基于使用圖像點(diǎn)的初始集合和另一集合的后方交會(huì)來確定圖像的第二系列中的圖像的姿態(tài)。
桿的底部上的輪
圖18和圖19a-圖19d示出了對(duì)于用戶來說方便測(cè)量處理的根據(jù)本發(fā)明的輪式測(cè)量系統(tǒng)的兩個(gè)示例性實(shí)施方式。
圖18所描繪的輪式測(cè)量系統(tǒng)180包括含有圖1的桿的特征的桿10。附加地,桿10包括使得用戶2能夠在不必?cái)y帶桿10的情況下沿著通過環(huán)境的路徑移動(dòng)桿10的輪181。為了方便桿10的推(或拉),它被配備有手柄182(或兩個(gè)手柄)。
優(yōu)選地,兩個(gè)輪181附接至桿10使得如果桿垂直(相對(duì)于地面成90°角度)則桿的底端接觸地面。甚至更優(yōu)選地,桿10自主地保持這個(gè)直立位置。為了移動(dòng)桿10它需要傾斜(如圖18所示)。
另選地,桿10的底端可能是可延伸的以便接觸地面。
可選地,輪181能夠由電機(jī)特別是電動(dòng)機(jī)驅(qū)動(dòng)。這個(gè)電機(jī)例如能夠由用戶2通過手柄182上的控制單元來控制或者能夠作為用于用戶2的推(或拉)移動(dòng)的支持驅(qū)動(dòng)器。
圖19a-d所描繪的輪式測(cè)量系統(tǒng)190包括兩輪自平衡機(jī)動(dòng)車輛195。這種車輛還被廣泛地稱為“賽格威個(gè)人交通工具”。測(cè)量系統(tǒng)190包括被安裝在車輛195上的桿10。在如關(guān)于圖1已經(jīng)描述的桿10上,設(shè)置了gnss天線15和相機(jī)模塊30。測(cè)量系統(tǒng)190還包括控制和評(píng)估單元12。
如從類似的車輛所知道的,車輛195的運(yùn)動(dòng)能夠由用戶2像圖19c和圖19d所例示的那樣控制。所描繪的車輛195被設(shè)計(jì)為使得用戶2通過相對(duì)于用戶2和車輛195的組合重心使車輛傾斜來控制車輛195的向前和向后移動(dòng)。
可選地,車輛195能夠包括將地面上的斑點(diǎn)標(biāo)記為目前測(cè)量點(diǎn)5的測(cè)量點(diǎn)標(biāo)記裝置192。具體地,這個(gè)斑點(diǎn)可以是桿10的虛延長(zhǎng)。標(biāo)記可以是僅在相應(yīng)位置處的停留期間持續(xù)并且作為驅(qū)動(dòng)車輛195的測(cè)量系統(tǒng)190的用戶2的信息所想要的激光斑點(diǎn)或圖案。具體地,這使得用戶2能夠在預(yù)定義標(biāo)記位置處確切地測(cè)量。另選地,標(biāo)記可能是更耐久的,例如噴漆標(biāo)記或劃線標(biāo)志。這允許在相同位置處在以后的時(shí)間點(diǎn)重復(fù)測(cè)量。
可選地,車輛195的imu能夠被用于確定相機(jī)模塊30的相機(jī)的定向,另選地或附加地,相機(jī)模塊30的imu。
如圖20所示,桿10能夠被配備有雨和/或太陽保護(hù)裝置,例如被安裝在gnss天線15下方或周圍的傘。這不僅方便用戶2的工作條件而且保護(hù)相應(yīng)的測(cè)量系統(tǒng)1、180、190的相機(jī)模塊30和其它特征并且在降水的情況下改進(jìn)圖像質(zhì)量。
盡管以上部分地參照一些優(yōu)選實(shí)施方式例示了本發(fā)明,但是必須理解,能夠做出實(shí)施方式的不同特征的許多修改和組合。這些修改中的全部位于所附權(quán)利要求的范圍內(nèi)。