本發(fā)明涉及遙測數(shù)據(jù)處理技術(shù)領域,尤其涉及一種遙測數(shù)據(jù)和視頻圖像數(shù)據(jù)的同步方法及裝置。
背景技術(shù):
在例如無人機飛行的過程中,視頻圖像數(shù)據(jù)與遙測數(shù)據(jù)是分別記錄和存儲的,其中,視頻圖像數(shù)據(jù)是無人機載荷產(chǎn)生與存儲,遙測數(shù)據(jù)是飛控系統(tǒng)產(chǎn)生與存儲,并在飛行結(jié)束后分別生成視頻圖像數(shù)據(jù)文件和遙測數(shù)據(jù)文件。由于通訊延遲、鏈路不穩(wěn)等因素,視頻圖像數(shù)據(jù)和遙測數(shù)據(jù)往往是不同步的,即視頻圖像數(shù)據(jù)和遙測數(shù)據(jù)無法一一對應起來。然而,隨著對數(shù)據(jù)的分析分析的逐步深化和細化,需要對遙測數(shù)據(jù)和視頻圖像數(shù)據(jù)進行同步處理。
為解決數(shù)據(jù)同步的問題,現(xiàn)有的一種做法是采用人工方式根據(jù)遙測數(shù)據(jù)的位置和視頻內(nèi)容進行對比與同步,這種方式不僅費時費力,而且由于人工處理的局限性導致同步結(jié)果也不夠理想。另一種做法是利用圖像匹配方法實現(xiàn)相對位置的計算,由于圖像匹配算法的計算量大、效率低,消耗的計算資源與時間過多,無法有效地應用在實際的視頻處理中。
綜上,目前亟需一種更為有效同步方法實現(xiàn)遙測數(shù)據(jù)和視頻圖像數(shù)據(jù)的同步,并提高數(shù)據(jù)同步的效率和準確性。
技術(shù)實現(xiàn)要素:
本發(fā)明例提供了一種遙測數(shù)據(jù)和視頻圖像數(shù)據(jù)的處理方法及裝置,用于在實現(xiàn)遙測數(shù)據(jù)和視頻圖像數(shù)據(jù)的同步的基礎上,提高同步的效率和準確性。
一種遙測數(shù)據(jù)和視頻圖像數(shù)據(jù)的同步方法,該方法包括:
獲取待同步的遙測數(shù)據(jù)和視頻圖像數(shù)據(jù);
從所述視頻圖像數(shù)據(jù)中提取關(guān)鍵圖像幀序列,所述關(guān)鍵圖像幀序列中包含相鄰的多個圖像幀中的多個圖像幀;
根據(jù)所述遙測數(shù)據(jù)確定所對應的視頻區(qū)域中心序列;
匹配所述關(guān)鍵圖像幀序列與所述視頻區(qū)域中心序列;
根據(jù)匹配結(jié)果,對所述遙測數(shù)據(jù)進行插值處理,得到與所述視頻圖像數(shù)據(jù)同步的遙測數(shù)據(jù)。
優(yōu)選的,所述從所述視頻圖像數(shù)據(jù)中提取關(guān)鍵圖像幀序列,包括:
基于圖像信息熵從獲取到的視頻圖像數(shù)據(jù)中提取多個圖像幀。
優(yōu)選的,所述根據(jù)所述遙測數(shù)據(jù)確定所對應的視頻區(qū)域中心序列,包括:
根據(jù)所述遙測數(shù)據(jù)中的地理信息,確定底圖中的多個底圖區(qū)域;
確定所述底圖區(qū)域的中心點位置信息;
根據(jù)所述中心點位置信息確定所述視頻區(qū)域中心序列。
優(yōu)選的,所述匹配所述關(guān)鍵圖像幀序列與所述視頻區(qū)域中心序列,包括:
采用第一分辨率提取所述關(guān)鍵圖像幀中至少一個圖像幀的特征;
根據(jù)所述第一分辨率提取到的所述圖像幀特征確定所對應的地理底圖,若無法確定所對應的地理地圖,則采用高于第一分辨率的第二分辨率對所述關(guān)鍵圖像幀中至少一個圖像幀的特征,再次確定所對應的地理地圖提??;
確定后的所述關(guān)鍵圖像幀與所述視頻區(qū)域中心序列相匹配。
優(yōu)選的,所述根據(jù)匹配結(jié)果,對所述遙測數(shù)據(jù)進行插值處理,得到與所述視頻圖像數(shù)據(jù)同步的遙測數(shù)據(jù)包括:
對所述遙測數(shù)據(jù)進行插值;
獲得與所述視頻數(shù)據(jù)同步的遙測數(shù)據(jù)。
一種遙測數(shù)據(jù)和視頻圖像數(shù)據(jù)的同步裝置,該裝置包括:
獲取模塊,用于獲取待同步的遙測數(shù)據(jù)和視頻圖像數(shù)據(jù);
遙測數(shù)據(jù)分析模塊,根據(jù)所述遙測數(shù)據(jù)確定所對應的視頻區(qū)域中心序列;
視頻圖像數(shù)據(jù)分析模塊,從所述視頻圖像數(shù)據(jù)中提取關(guān)鍵圖像幀序列,所述關(guān)鍵圖像幀序列中包含相鄰的多個圖像幀中的多個圖像幀;
同步模塊,用于匹配所述關(guān)鍵圖像幀序列與所述視頻區(qū)域中心序列,根據(jù)匹配結(jié)果,對所述遙測數(shù)據(jù)進行插值處理,得到與所述視頻圖像數(shù)據(jù)同步的遙測數(shù)據(jù)。
優(yōu)選的,所述視頻圖像數(shù)據(jù)分析模塊,根據(jù)圖像信息熵從獲取到的視頻圖像數(shù)據(jù)中提取多個圖像幀。
優(yōu)選的,所述視頻圖像數(shù)據(jù)分析模塊,根據(jù)所述遙測數(shù)據(jù)中的地理信息,確定底圖中的多個底圖區(qū)域;確定所述底圖區(qū)域的中心點位置信息;根據(jù)所述中心點位置信息確定所述視頻區(qū)域中心序列。
優(yōu)選的,所述同步模塊,采用第一分辨率提取所述關(guān)鍵圖像幀中至少一個圖像幀的特征;根據(jù)所述第一分辨率提取到的所述圖像幀特征確定所對應的地理底圖,若無法確定所對應的地理地圖,則采用高于第一分辨率的第二分辨率對所述關(guān)鍵圖像幀中至少一個圖像幀的特征,再次確定所對應的地理地圖提?。淮_定后的所述關(guān)鍵圖像幀與所述視頻區(qū)域中心序列相匹配。
優(yōu)選的,所述同步模塊,對所述遙測數(shù)據(jù)進行插值;獲得與所述視頻數(shù)據(jù)同步的遙測數(shù)據(jù)。
通過采用本發(fā)明上述的技術(shù)方案中,可得到與視頻圖像數(shù)據(jù)同步的遙測數(shù)據(jù),保證了同步的準確性;并且由于關(guān)鍵圖像幀序列由相鄰的多個圖像幀中的圖像幀組成,因此,通過利用關(guān)鍵圖像幀可大大降低了圖像幀匹配所消耗的計算量,提高了處理效率。
附圖說明
為了更清楚地說明本發(fā)明實施例中的技術(shù)方案,下面將對實施例描述中所需要使用的附圖作簡要介紹,顯而易見地,下面描述中的附圖僅僅是本發(fā)明的一些實施例,對于本領域的普通技術(shù)人員來講,在不付出創(chuàng)造性勞動性的前提下,還可以根據(jù)這些附圖獲得其他的附圖。
圖1為本發(fā)明實施例提供的一種遙測數(shù)據(jù)和視頻圖像數(shù)據(jù)的同步方法流程示意圖;
圖2為本發(fā)明實施例提供的遙測數(shù)據(jù)和視頻圖像數(shù)據(jù)的同步方法的整體流程示意圖;
圖3為本發(fā)明實施例提供的一種遙測數(shù)據(jù)和視頻圖像數(shù)據(jù)的同步裝置的結(jié)構(gòu)示意圖。
具體實施方式
為了使本發(fā)明的目的、技術(shù)方案和優(yōu)點更加清楚,下面將結(jié)合附圖對本發(fā)明作進一步地詳細描述,顯然,所描述的實施例僅僅是本發(fā)明一部分實施例,而不是全部的實施例?;诒景l(fā)明中的實施例,本領域普通技術(shù)人員在沒有做出創(chuàng)造性勞動前提下所獲得的所有其它實施例,都屬于本發(fā)明保護的范圍。
圖1為本發(fā)明實施例提供的一種遙測數(shù)據(jù)和視頻圖像數(shù)據(jù)的同步方法流程示意圖。
如圖1所示,該方法包括:
步驟101,獲取待同步的遙測數(shù)據(jù)和視頻圖像數(shù)據(jù);
步驟102,從所述視頻圖像數(shù)據(jù)中提取關(guān)鍵圖像幀序列,所述關(guān)鍵圖像幀序列中包含相鄰的多個圖像幀中的多個圖像幀;
步驟103,根據(jù)所述遙測數(shù)據(jù)確定所對應的視頻區(qū)域中心序列;
步驟104,匹配所述關(guān)鍵圖像幀序列與所述視頻區(qū)域中心序列;
步驟105,根據(jù)匹配結(jié)果,對所述遙測數(shù)據(jù)進行插值處理,得到與所述視頻圖像數(shù)據(jù)同步的遙測數(shù)據(jù)。
需要說明的是,本發(fā)明實施例中上述各個步驟的編號僅為一種執(zhí)行過程的示例性說明,本發(fā)明實施例不對各個步驟做明確具體的先后順序限定,有些步驟可以同時進行,或不按上述編號進行,例如,步驟102和步驟103可以同時進行,或者可以先執(zhí)行步驟103中的內(nèi)容,再執(zhí)行步驟102中的內(nèi)容。
本發(fā)明實施例中,根據(jù)遙測數(shù)據(jù)和視頻圖像數(shù)據(jù)分別得到基于遙測數(shù)據(jù)的第一觀測區(qū)域中心序列和基于視頻圖像數(shù)據(jù)的關(guān)鍵圖像幀序列,進而根據(jù)匹配結(jié)果,對遙測數(shù)據(jù)進行插值處理,由于遙測數(shù)據(jù)的采樣頻率低于視頻圖像數(shù)據(jù)的采樣頻率,通過匹配和插值處理后,可得到與視頻圖像數(shù)據(jù)中的關(guān)鍵圖像幀對應的遙測數(shù)據(jù),不僅實現(xiàn)視頻圖像數(shù)據(jù)和遙測數(shù)據(jù)的同步,而且保證了同步的準確性。同時,由于關(guān)鍵圖像幀為相鄰的多個圖像幀中的一個圖像幀,從而通過關(guān)鍵圖像幀提取技術(shù)大大降低了圖像幀匹配所消耗的計算量,提高了處理效率。
具體地,對于提取關(guān)鍵圖像幀序列(步驟102)中,關(guān)鍵圖像幀為相鄰的多個圖像幀中的一個圖像幀,也就是說,假設視頻圖像數(shù)據(jù)中包括圖像幀1至圖像幀100,則可從圖像幀1至圖像幀10中提取一個關(guān)鍵圖像幀,從圖像幀11至圖像幀10中提取一個關(guān)鍵圖像幀,以此類推,可提取出10個關(guān)鍵圖像幀;或者,也可從圖像幀1至圖像幀20中提取一個關(guān)鍵圖像幀,從圖像幀21至圖像幀20中提取一個關(guān)鍵圖像幀,以此類推,可提取出5個關(guān)鍵圖像幀;又或者,也可從圖像幀1至圖像幀10中提取一個關(guān)鍵圖像幀,從圖像幀11至圖像幀30中提取一個關(guān)鍵圖像幀,從圖像幀31至圖像幀60中提取一個關(guān)鍵圖像幀,即從隨機的多個相鄰的圖像幀中提取一個關(guān)鍵圖像幀。進一步地,可依據(jù)圖像信息熵從多個相鄰的圖像幀中提取一個關(guān)鍵圖像幀,或者,也可由本領域技術(shù)人員根據(jù)經(jīng)驗和實際情況設置其它的提取依據(jù)。
對于視頻區(qū)域中心序列確定步驟(步驟103),根據(jù)無人機遙測協(xié)議和載荷遙測協(xié)議對遙測數(shù)據(jù)進行解析,得到每幀所對應的無人機與載荷的姿態(tài)與位置信息,進而根據(jù)無人機與載荷的姿態(tài)與位置等信息以及載荷的焦距計算視頻的區(qū)域,從而實現(xiàn)視頻中心的定位,得到基于遙測數(shù)據(jù)的視頻測區(qū)域中心序列。
本發(fā)明實施例,提取的關(guān)鍵圖像幀的個數(shù)越多,則會使得最終的同步結(jié)果更為準確,相應地,也會增加計算量,消耗處理資源;反之,提取的關(guān)鍵圖像幀的個數(shù)越少,則會使得最終的同步結(jié)果的準確率有所下降,相應地,也會減少計算量,提高效率?;谏鲜鰞?nèi)容,具體所要提取的關(guān)鍵圖像幀的個數(shù)可由本領域技術(shù)人員在綜合考慮實際情況的基礎上,根據(jù)經(jīng)驗進行設置,本發(fā)明實施例對此不做具體限定。
下面以第一關(guān)鍵圖像幀為例,來說明關(guān)鍵圖像幀與視頻圖像數(shù)據(jù)對應的地理底圖進行匹配的具體過程。其中,第一關(guān)鍵圖像幀為所述多個關(guān)鍵圖像幀中的任一個。本發(fā)明實施例中與視頻圖像數(shù)據(jù)對應的地理底圖是根據(jù)規(guī)劃航線提取相應區(qū)域的高清底圖得到的。
首先采用第一分辨率對第一關(guān)鍵圖像幀進行特征提取,并將采用第一分辨率提取到的特征與所述視頻圖像數(shù)據(jù)對應的地理底圖進行匹配,此時,若匹配成功,則可結(jié)束匹配過程,若匹配失敗,則需采用高于第一分辨率的第二分辨率對第一關(guān)鍵圖像幀進行特征提取,并將采用第二分辨率提取到的特征與所述視頻圖像數(shù)據(jù)對應的地理底圖進行匹配,此時,若匹配成功,則可結(jié)束匹配過程,若匹配失敗,則需采用高于第二分辨率的第三分辨率對第一關(guān)鍵圖像幀進行特征提取,以此類推,直至第一關(guān)鍵圖像幀與所述視頻圖像數(shù)據(jù)對應的地理底圖匹配成功。
通過上述過程可知,本發(fā)明實施例中,先采用低分辨率對第一關(guān)鍵圖像幀進行特征提取,并與地理底圖進行匹配,若匹配成功,則可不再進行高分辨率的特征提取,從而能夠大大提高了計算效率與處理速度。
本發(fā)明實施例中,將所述多個關(guān)鍵圖像幀與所述視頻圖像數(shù)據(jù)對應的地理底圖進行匹配后,可得到與多個關(guān)鍵圖像幀匹配成功的多個地理底圖區(qū)域,通過獲取多個地理底圖區(qū)域的中心點位置信息,可得到基于視頻圖像數(shù)據(jù)的觀測區(qū)域中心序列。
在步驟104及105中,根據(jù)視頻區(qū)域中心序列和關(guān)鍵幀序列的匹配結(jié)果,以及關(guān)鍵幀序列中的每個觀測區(qū)域中心的位置信息,對遙測數(shù)據(jù)進行插值處理。
由于遙測數(shù)據(jù)的采樣頻率低于視頻圖像數(shù)據(jù)的采樣頻率,本發(fā)明實施例中對視頻圖像數(shù)據(jù)進行關(guān)鍵圖像幀的提取后,仍會出現(xiàn)基于視頻圖像數(shù)據(jù)關(guān)鍵幀序列中的區(qū)域中心的個數(shù)大于基于遙測數(shù)據(jù)的視頻區(qū)域中心序列中的視頻區(qū)域中心的個數(shù)。因此,通過將視頻區(qū)域中心序列和關(guān)鍵幀序列進行匹配后,可得到與每個視頻區(qū)域中心對應的關(guān)鍵幀序列中某個關(guān)鍵幀所對應的視頻中心(實際過程中,可能會存在匹配失敗,即出現(xiàn)異常數(shù)據(jù),此處暫不考慮異常數(shù)據(jù))。其中,與每個視頻區(qū)域中心對應的關(guān)鍵幀序列可為多個與視頻區(qū)域中心距離最近的關(guān)鍵幀序列中視頻區(qū)域的中心。
在完成視頻區(qū)域中心序列和關(guān)鍵幀序列的匹配后,由于關(guān)鍵幀序列中對應于視頻(地理底圖區(qū)域)的中心個數(shù)較多,仍存在部分關(guān)鍵幀序列所對應的底圖區(qū)域中心沒有對應的視頻區(qū)域中心,此時,可根據(jù)位置信息,對遙測數(shù)據(jù)進行插值處理,得到與所述視頻圖像數(shù)據(jù)同步的遙測數(shù)據(jù),實現(xiàn)視頻圖像數(shù)據(jù)和遙測數(shù)據(jù)的同步。具體插值過程中所依據(jù)的原則可由本領域技術(shù)人員根據(jù)經(jīng)驗設置。
圖2為本發(fā)明實施例提供的遙測數(shù)據(jù)和視頻圖像數(shù)據(jù)的同步方法的整體流程示意圖。
下面結(jié)合圖2對本發(fā)明實施例中遙測數(shù)據(jù)和視頻圖像數(shù)據(jù)的同步方法進行具體介紹。如圖2所示:
步驟201,獲取待同步的視頻圖像數(shù)據(jù);
步驟202,從獲取到的視頻圖像數(shù)據(jù)中提取多個關(guān)鍵圖像幀;
步驟203,將所述多個關(guān)鍵圖像幀與所述視頻圖像數(shù)據(jù)對應的地理底圖進行匹配;
步驟204,獲取基于視頻圖像數(shù)據(jù)的第二觀測區(qū)域中心序列;
步驟301,獲取待同步的遙測數(shù)據(jù);
步驟302,根據(jù)無人機遙測協(xié)議和載荷遙測協(xié)議對遙測數(shù)據(jù)進行解析;
步驟303,通過區(qū)域計算,得到基于遙測數(shù)據(jù)的第一觀測區(qū)域中心序列,并提取地理底圖;
步驟401,將第一觀測區(qū)域中心序列和第二觀測區(qū)域中心序列進行匹配;
步驟402,根據(jù)所述第一觀測區(qū)域中心序列和所述第二觀測區(qū)域中心序列的匹配結(jié)果,對所述遙測數(shù)據(jù)進行插值處理;
步驟403,實現(xiàn)視頻圖像數(shù)據(jù)和遙測數(shù)據(jù)的離線同步。
需要說明的是,本發(fā)明實施例中上述各個步驟的編號僅為一種執(zhí)行過程的示例性說明,本發(fā)明實施例不對各個步驟做明確具體的先后順序限定,有些步驟可以同時進行,或不按上述編號進行,例如,步驟201和步驟301可以同時進行,或者步驟201發(fā)生于步驟301之后。
本發(fā)明的上述實施例中,獲取待同步的遙測數(shù)據(jù)和視頻圖像數(shù)據(jù),對獲取到的遙測數(shù)據(jù)進行解析,得到基于遙測數(shù)據(jù)的第一觀測區(qū)域中心序列(對應于視頻區(qū)域中心序列);從獲取到的視頻圖像數(shù)據(jù)中提取多個關(guān)鍵圖像幀,將多個關(guān)鍵圖像幀與視頻圖像數(shù)據(jù)對應的地理底圖進行匹配,得到基于視頻圖像數(shù)據(jù)的第二觀測區(qū)域中心序列(對應于關(guān)鍵圖像幀序列);根據(jù)第一觀測區(qū)域中心序列和第二觀測區(qū)域中心序列的匹配結(jié)果,對遙測數(shù)據(jù)進行插值處理,得到與視頻圖像數(shù)據(jù)同步的遙測數(shù)據(jù)。本發(fā)明實施例中,根據(jù)遙測數(shù)據(jù)和視頻圖像數(shù)據(jù)分別得到基于遙測數(shù)據(jù)的第一觀測區(qū)域中心序列和基于視頻圖像數(shù)據(jù)的第二觀測區(qū)域中心序列,進而根據(jù)匹配結(jié)果,對遙測數(shù)據(jù)進行插值處理,由于遙測數(shù)據(jù)的采樣頻率低于視頻圖像數(shù)據(jù)的采樣頻率,通過匹配和插值處理后,可得到與視頻圖像數(shù)據(jù)中的關(guān)鍵圖像幀對應的遙測數(shù)據(jù),不僅實現(xiàn)視頻圖像數(shù)據(jù)和遙測數(shù)據(jù)的同步,而且保證了同步的準確性;且,由于關(guān)鍵圖像幀為相鄰的多個圖像幀中的一個圖像幀,從而通過關(guān)鍵圖像幀提取技術(shù)大大降低了圖像幀匹配所消耗的計算量,提高了處理效率。
針對上述方法流程,本發(fā)明實施例還提供一種遙測數(shù)據(jù)和視頻圖像數(shù)據(jù)的離線同步裝置,該裝置的具體內(nèi)容可以參照上述方法實施。
基于相同構(gòu)思,圖3為本發(fā)明實施例提供的一種遙測數(shù)據(jù)和視頻圖像數(shù)據(jù)的離線同步裝置的結(jié)構(gòu)示意圖,該裝置包括:
獲取模塊501,用于獲取待同步的遙測數(shù)據(jù)和視頻圖像數(shù)據(jù);
遙測數(shù)據(jù)分析模塊502,用于對獲取到的遙測數(shù)據(jù)進行解析,得到基于遙測數(shù)據(jù)的第一觀測區(qū)域中心序列;
視頻圖像數(shù)據(jù)分析模塊503,用于從獲取到的視頻圖像數(shù)據(jù)中提取多個關(guān)鍵圖像幀,將所述多個關(guān)鍵圖像幀與所述視頻圖像數(shù)據(jù)對應的地理底圖進行匹配,得到基于視頻圖像數(shù)據(jù)的第二觀測區(qū)域中心序列;所述關(guān)鍵圖像幀為相鄰的多個圖像幀中的一個圖像幀;
同步模塊504,用于根據(jù)所述第一觀測區(qū)域中心序列和所述第二觀測區(qū)域中心序列的匹配結(jié)果,對所述遙測數(shù)據(jù)進行插值處理,得到與所述視頻圖像數(shù)據(jù)同步的遙測數(shù)據(jù)。
較佳地,所述視頻圖像數(shù)據(jù)分析模塊503具體用于,通過下述方式從獲取到的視頻圖像數(shù)據(jù)中提取多個關(guān)鍵圖像幀:
基于圖像信息熵從獲取到的視頻圖像數(shù)據(jù)中提取多個關(guān)鍵圖像幀。
較佳地,所述視頻圖像數(shù)據(jù)分析模塊503具體用于,通過下述方式將所述多個關(guān)鍵圖像幀與所述視頻圖像數(shù)據(jù)對應的地理底圖進行匹配:
針對于第一關(guān)鍵圖像幀,所述第一關(guān)鍵圖像幀為所述多個關(guān)鍵圖像幀中的任一個,執(zhí)行:
采用第一分辨率對所述第一關(guān)鍵圖像幀進行特征提??;
將采用所述第一分辨率提取到的特征與所述視頻圖像數(shù)據(jù)對應的地理底圖進行匹配,若匹配失敗,則采用高于第一分辨率的第二分辨率對所述第一關(guān)鍵圖像幀進行特征提取,直至所述第一關(guān)鍵圖像幀與所述視頻圖像數(shù)據(jù)對應的地理底圖匹配成功。
較佳地,所述遙測數(shù)據(jù)分析模塊503具體用于,通過下述方式得到基于視頻圖像數(shù)據(jù)的觀測區(qū)域中心序列:
確定與所述多個關(guān)鍵圖像幀匹配成功的多個地理底圖區(qū)域;
獲取所述多個地理底圖區(qū)域的中心點位置信息,得到基于視頻圖像數(shù)據(jù)的觀測區(qū)域中心序列。
較佳地,所述同步模塊504具體用于,通過下述方式對所述遙測數(shù)據(jù)進行插值處理:
根據(jù)所述第一觀測區(qū)域中心序列和所述第二觀測區(qū)域中心序列的匹配結(jié)果,以及所述第二觀測區(qū)域中心序列中的每個第二觀測區(qū)域中心的位置信息,對所述遙測數(shù)據(jù)進行插值處理。
從上述內(nèi)容可以看出:本發(fā)明的上述實施例中,獲取待同步的遙測數(shù)據(jù)和視頻圖像數(shù)據(jù),對獲取到的遙測數(shù)據(jù)進行解析,得到基于遙測數(shù)據(jù)的第一觀測區(qū)域中心序列;從獲取到的視頻圖像數(shù)據(jù)中提取多個關(guān)鍵圖像幀,將多個關(guān)鍵圖像幀與視頻圖像數(shù)據(jù)對應的地理底圖進行匹配,得到基于視頻圖像數(shù)據(jù)的第二觀測區(qū)域中心序列;根據(jù)第一觀測區(qū)域中心序列和第二觀測區(qū)域中心序列的匹配結(jié)果,對遙測數(shù)據(jù)進行插值處理,得到與視頻圖像數(shù)據(jù)同步的遙測數(shù)據(jù)。本發(fā)明實施例中,根據(jù)遙測數(shù)據(jù)和視頻圖像數(shù)據(jù)分別得到基于遙測數(shù)據(jù)的第一觀測區(qū)域中心序列和基于視頻圖像數(shù)據(jù)的第二觀測區(qū)域中心序列,進而根據(jù)匹配結(jié)果,對遙測數(shù)據(jù)進行插值處理,由于遙測數(shù)據(jù)的采樣頻率低于視頻圖像數(shù)據(jù)的采樣頻率,通過匹配和插值處理后,可得到與視頻圖像數(shù)據(jù)中的關(guān)鍵圖像幀對應的遙測數(shù)據(jù),不僅實現(xiàn)視頻圖像數(shù)據(jù)和遙測數(shù)據(jù)的同步,而且保證了同步的準確性;且,由于關(guān)鍵圖像幀為相鄰的多個圖像幀中的一個圖像幀,從而通過關(guān)鍵圖像幀提取技術(shù)大大降低了圖像幀匹配所消耗的計算量,提高了處理效率。
本領域內(nèi)的技術(shù)人員應明白,本發(fā)明的實施例可提供為方法、或計算機程序產(chǎn)品。因此,本發(fā)明可采用完全硬件實施例、完全軟件實施例、或結(jié)合軟件和硬件方面的實施例的形式。而且,本發(fā)明可采用在一個或多個其中包含有計算機可用程序代碼的計算機可用存儲介質(zhì)(包括但不限于磁盤存儲器、CD-ROM、光學存儲器等)上實施的計算機程序產(chǎn)品的形式。
本發(fā)明是參照根據(jù)本發(fā)明實施例的方法、設備(系統(tǒng))、和計算機程序產(chǎn)品的流程圖和/或方框圖來描述的。應理解可由計算機程序指令實現(xiàn)流程圖和/或方框圖中的每一流程和/或方框、以及流程圖和/或方框圖中的流程和/或方框的結(jié)合。可提供這些計算機程序指令到通用計算機、專用計算機、嵌入式處理機或其他可編程數(shù)據(jù)處理設備的處理器以產(chǎn)生一個機器,使得通過計算機或其他可編程數(shù)據(jù)處理設備的處理器執(zhí)行的指令產(chǎn)生用于實現(xiàn)在流程圖一個流程或多個流程和/或方框圖一個方框或多個方框中指定的功能的裝置。
這些計算機程序指令也可存儲在能引導計算機或其他可編程數(shù)據(jù)處理設備以特定方式工作的計算機可讀存儲器中,使得存儲在該計算機可讀存儲器中的指令產(chǎn)生包括指令裝置的制造品,該指令裝置實現(xiàn)在流程圖一個流程或多個流程和/或方框圖一個方框或多個方框中指定的功能。
這些計算機程序指令也可裝載到計算機或其他可編程數(shù)據(jù)處理設備上,使得在計算機或其他可編程設備上執(zhí)行一系列操作步驟以產(chǎn)生計算機實現(xiàn)的處理,從而在計算機或其他可編程設備上執(zhí)行的指令提供用于實現(xiàn)在流程圖一個流程或多個流程和/或方框圖一個方框或多個方框中指定的功能的步驟。
盡管已描述了本發(fā)明的優(yōu)選實施例,但本領域內(nèi)的技術(shù)人員一旦得知了基本創(chuàng)造性概念,則可對這些實施例作出另外的變更和修改。所以,所附權(quán)利要求意欲解釋為包括優(yōu)選實施例以及落入本發(fā)明范圍的所有變更和修改。
顯然,本領域的技術(shù)人員可以對本發(fā)明進行各種改動和變型而不脫離本發(fā)明的精神和范圍。這樣,倘若本發(fā)明的這些修改和變型屬于本發(fā)明權(quán)利要求及其等同技術(shù)的范圍之內(nèi),則本發(fā)明也意圖包含這些改動和變型在內(nèi)。