本發(fā)明涉及圖像處理技術(shù),尤其涉及一種圖像處理方法及電子設(shè)備。
背景技術(shù):
通常用戶使用手機采集視頻時會出現(xiàn)這樣的問題:視頻采集時預(yù)覽界面清晰的,但是播放采集到的視頻數(shù)據(jù)時確是模糊的;這是由于用戶在視頻采集過程中會有輕微抖動的現(xiàn)象,而對于沒有光學(xué)防抖功能的手機而言,這些抖動足以影響最終的成像質(zhì)量,且上述情況在光線較暗快門較慢的情況下更容易發(fā)生。因此,如何防止視頻采集時由于用戶抖動而導(dǎo)致的圖像模糊的問題,成為了現(xiàn)有圖像處理中亟需解決的問題。
技術(shù)實現(xiàn)要素:
有鑒于此,本發(fā)明實施例為解決現(xiàn)有技術(shù)中存在的至少一個問題而提供一種圖像處理方法及電子設(shè)備。
本發(fā)明實施例的技術(shù)方案是這樣實現(xiàn)的:
本發(fā)明實施例第一方面提供了一種圖像處理方法,包括:
電子設(shè)備利用圖像采集裝置采集視頻數(shù)據(jù);
將采集到的視頻數(shù)據(jù)中的第一視頻幀確定為參考圖像;所述第一視頻幀為所述電子設(shè)備中呈現(xiàn)的針對所述視頻數(shù)據(jù)的預(yù)覽圖像;
從所述參考圖像中選取出參考區(qū)域,并確定出所述參考區(qū)域中像素點對應(yīng)的第一組坐標(biāo)信息;
利用所述第一組坐標(biāo)信息對采集到的視頻數(shù)據(jù)中的視頻幀進行調(diào)整,以使調(diào)整后的視頻幀中所述參考區(qū)域?qū)?yīng)的像素點的第二組坐標(biāo)信息與所述第一組坐標(biāo)信息相對應(yīng);
存儲調(diào)整后的視頻幀,并基于存儲的調(diào)整后的視頻幀組合成針對采集到的所述視頻數(shù)據(jù)的目標(biāo)視頻數(shù)據(jù)。
上述方案中,所述從參考圖像中選取出參考區(qū)域,包括:
從所述參考圖像中選取出固定目標(biāo)體對應(yīng)的區(qū)域;所述固定目標(biāo)體為所述視頻數(shù)據(jù)對應(yīng)的采集區(qū)域中所述電子設(shè)備采集到的處于固定狀態(tài)的目標(biāo)體;
至少將所述參考圖像中所述固定目標(biāo)體對應(yīng)的區(qū)域作為參考區(qū)域。
上述方案中,所述方法還包括:
基于所述參考圖像中所述參考區(qū)域?qū)?yīng)的像素點的像素特征,從所述參考圖像的參考區(qū)域中選取出目標(biāo)像素點;
對應(yīng)地,所述確定出所述參考區(qū)域中像素點對應(yīng)的第一組坐標(biāo)信息,包括:
確定出所述目標(biāo)像素點對應(yīng)的坐標(biāo)信息,并將所述目標(biāo)像素點對應(yīng)的坐標(biāo)信息作為第一組坐標(biāo)信息。
上述方案中,所述利用所述第一組坐標(biāo)信息對采集到的視頻數(shù)據(jù)中的視頻幀進行調(diào)整,以使調(diào)整后的視頻幀中所述參考區(qū)域?qū)?yīng)的像素點的第二組坐標(biāo)信息與所述第一組坐標(biāo)信息相對應(yīng),包括:
確定采集到所述視頻數(shù)據(jù)的每一視頻幀中所述參考區(qū)域?qū)?yīng)的像素點的第二組坐標(biāo)信息;
基于所述第一組坐標(biāo)信息以及每一視頻幀對應(yīng)的第二組坐標(biāo)信息,確定所述參考圖像與每一視頻幀的位置關(guān)系;
根據(jù)所述位置關(guān)系對采集到的視頻數(shù)據(jù)中的視頻幀進行調(diào)整。
上述方案中,所述第一組坐標(biāo)信息中至少包含有兩個第一坐標(biāo);所述第二組坐標(biāo)信息中至少包括有兩個第二坐標(biāo);
對應(yīng)地,所述基于所述第一組坐標(biāo)信息以及每一視頻幀對應(yīng)的第二組坐標(biāo)信息,確定所述參考圖像與每一視頻幀的位置關(guān)系,包括:
從所述至少兩個第一坐標(biāo)以及所述至少兩個第二坐標(biāo)中,選取出像素特征相匹配的至少兩組坐標(biāo)對;所述坐標(biāo)對中包括有像素特征相匹配的一個第一坐標(biāo)和一個第二坐標(biāo);
基于至少兩組坐標(biāo)對,確定所述參考圖像與每一視頻幀的位置關(guān)系。
本發(fā)明實施例第二方面提供了一種電子設(shè)備,包括:
圖像采集單元,用于利用圖像采集裝置采集視頻數(shù)據(jù);
確定單元,用于將采集到的視頻數(shù)據(jù)中的第一視頻幀確定為參考圖像;所述第一視頻幀為所述電子設(shè)備中呈現(xiàn)的針對所述視頻數(shù)據(jù)的預(yù)覽圖像;還用于從所述參考圖像中選取出參考區(qū)域,并確定出所述參考區(qū)域中像素點對應(yīng)的第一組坐標(biāo)信息;
調(diào)整單元,用于利用所述第一組坐標(biāo)信息對采集到的視頻數(shù)據(jù)中的視頻幀進行調(diào)整,以使調(diào)整后的視頻幀中所述參考區(qū)域?qū)?yīng)的像素點的第二組坐標(biāo)信息與所述第一組坐標(biāo)信息相對應(yīng);
存儲單元,用于存儲調(diào)整后的視頻幀,并基于存儲的調(diào)整后的視頻幀組合成針對采集到的所述視頻數(shù)據(jù)的目標(biāo)視頻數(shù)據(jù)。
上述方案中,所述確定單元,還用于從所述參考圖像中選取出固定目標(biāo)體對應(yīng)的區(qū)域,至少將所述參考圖像中所述固定目標(biāo)體對應(yīng)的區(qū)域作為參考區(qū)域;所述固定目標(biāo)體為所述視頻數(shù)據(jù)對應(yīng)的采集區(qū)域中所述電子設(shè)備采集到的處于固定狀態(tài)的目標(biāo)體。
上述方案中,所述確定單元,還用于基于所述參考圖像中所述參考區(qū)域?qū)?yīng)的像素點的像素特征,從所述參考圖像的參考區(qū)域中選取出目標(biāo)像素點,確定出所述目標(biāo)像素點對應(yīng)的坐標(biāo)信息,并將所述目標(biāo)像素點對應(yīng)的坐標(biāo)信息作為第一組坐標(biāo)信息。
上述方案中,所述確定單元,還用于確定采集到所述視頻數(shù)據(jù)的每一視頻幀中所述參考區(qū)域?qū)?yīng)的像素點的第二組坐標(biāo)信息,基于所述第一組坐標(biāo)信息以及每一視頻幀對應(yīng)的第二組坐標(biāo)信息,確定所述參考圖像與每一視頻幀的位置關(guān)系;
所述調(diào)整單元,還用于根據(jù)所述位置關(guān)系對采集到的視頻數(shù)據(jù)中的視頻幀進行調(diào)整。
上述方案中,所述第一組坐標(biāo)信息中至少包含有兩個第一坐標(biāo);所述第二組坐標(biāo)信息中至少包括有兩個第二坐標(biāo);
所述確定單元,還用于從所述至少兩個第一坐標(biāo)以及所述至少兩個第二坐標(biāo)中,選取出像素特征相匹配的至少兩組坐標(biāo)對,基于至少兩組坐標(biāo)對,確定所述參考圖像與每一視頻幀的位置關(guān)系;所述坐標(biāo)對中包括有像素特征相匹配的一個第一坐標(biāo)和一個第二坐標(biāo)。
本發(fā)明實施例所述的圖像處理方法及電子設(shè)備,通過在采集視頻數(shù)據(jù)中確定參考圖像,并從所述參考圖像中選取出參考區(qū)域,進而利用所述參考區(qū)域中像素點對應(yīng)的第一組坐標(biāo)信息對采集到的視頻數(shù)據(jù)中的視頻幀進行調(diào)整,使調(diào)整后的視頻幀中所述參考區(qū)域?qū)?yīng)的像素點的第二組坐標(biāo)信息與所述第一組坐標(biāo)信息相對應(yīng),如此,實現(xiàn)對采集到的視頻數(shù)據(jù)進行實施調(diào)整的目的;而且,所述電子設(shè)備并非直接對采集得到的視頻數(shù)據(jù)進行存儲,而是存儲調(diào)整后的視頻幀以組合成針對采集到的所述視頻數(shù)據(jù)的目標(biāo)視頻數(shù)據(jù),這樣,避免了由于抖動而是存儲的視頻圖像模糊的問題,提升了用戶體驗。
附圖說明
圖1為實現(xiàn)本發(fā)明各個實施例的一個可選的移動終端100的硬件結(jié)構(gòu)示意圖;
圖2為如圖1所示的移動終端100的無線通信系統(tǒng)示意圖;
圖3為本發(fā)明實施例一圖像處理方法的實現(xiàn)流程示意圖;
圖4為本發(fā)明實施例電子設(shè)備在取景界面中呈現(xiàn)視頻數(shù)據(jù)的示意圖;
圖5為本發(fā)明實施例電子設(shè)備基于用戶操作選取參考圖像的示意圖;
圖6為本發(fā)明實施例二圖像處理方法的實現(xiàn)流程示意圖;
圖7為本發(fā)明實施例圖像處理方法的具體應(yīng)用的實現(xiàn)流程示意圖;
圖8為本發(fā)明實施例利用近鄰插值公式對P(u,v)進行調(diào)整的原理示意圖;
圖9為本發(fā)明實施例電子設(shè)備的邏輯單元的結(jié)構(gòu)示意圖。
具體實施方式
應(yīng)當(dāng)理解,此處所描述的具體實施例僅僅用以解釋本發(fā)明的技術(shù)方案,并不用于限定本發(fā)明的保護范圍。
現(xiàn)在將參考附圖描述實現(xiàn)本發(fā)明各個實施例的電子設(shè)備,這里,所述電子設(shè)備可以具體為移動終端。進一步地,在后續(xù)的描述中,使用用于表示元件的諸如“模塊”、“部件”或“單元”的后綴僅為了有利于本發(fā)明的說明,其本身并沒有特定的意義。因此,“模塊”與“部件”可以混合地使用。
移動終端可以以各種形式來實施。例如,本發(fā)明中描述的終端可以包括諸如移動電話、智能電話、筆記本電腦、數(shù)字廣播接收器、個人數(shù)字助理(PDA)、平板電腦(PAD)、便攜式多媒體播放器(PMP)、導(dǎo)航裝置等等的移動終端以及諸如數(shù)字TV、臺式計算機等等的固定終端。下面,假設(shè)終端是移動終端。然而,本領(lǐng)域技術(shù)人員將理解的是,除了特別用于移動目的的元件之外,根據(jù)本發(fā)明的實施方式的構(gòu)造也能夠應(yīng)用于固定類型的終端。
圖1為實現(xiàn)本發(fā)明各個實施例的移動終端100的硬件結(jié)構(gòu)示意,如圖1所示,移動終端100可以包括無線通信單元110、音頻/視頻(A/V)輸入單元120、用戶輸入單元130、感測單元140、輸出單元150、存儲器160、接口單元170、控制器180和電源單元190等等。圖1示出了具有各種組件的移動終端100,但是應(yīng)理解的是,并不要求實施所有示出的組件??梢蕴娲貙嵤└嗷蚋俚慕M件。將在下面詳細描述移動終端100的元件。
無線通信單元110通常包括一個或多個組件,其允許移動終端100與無線通信系統(tǒng)或網(wǎng)絡(luò)之間的無線電通信。例如,無線通信單元110可以包括廣播接收模塊111、移動通信模塊112、無線互聯(lián)網(wǎng)模塊113、短程通信模塊114和位置信息模塊115中的至少一個。
廣播接收模塊111經(jīng)由廣播信道從外部廣播管理服務(wù)器接收廣播信號和/或廣播相關(guān)信息。廣播信道可以包括衛(wèi)星信道和/或地面信道。廣播管理服務(wù)器可以是生成并發(fā)送廣播信號和/或廣播相關(guān)信息的服務(wù)器或者接收之前生成的廣播信號和/或廣播相關(guān)信息并且將其發(fā)送給終端的服務(wù)器。廣播信號可以包括TV廣播信號、無線電廣播信號、數(shù)據(jù)廣播信號等等。而且,廣播信號可以進一步包括與TV或無線電廣播信號組合的廣播信號。廣播相關(guān)信息也可以經(jīng)由移動通信網(wǎng)絡(luò)提供,并且在該情況下,廣播相關(guān)信息可以由移動通信模塊112來接收。廣播信號可以以各種形式存在,例如,其可以以數(shù)字多媒體廣播(DMB)的電子節(jié)目指南(EPG)、數(shù)字視頻廣播手持(DVB-H)的電子服務(wù)指南(ESG)等等的形式而存在。廣播接收模塊111可以通過使用各種類型的廣播系統(tǒng)接收信號廣播。特別地,廣播接收模塊111可以通過使用諸如多媒體廣播-地面(DMB-T)、數(shù)字多媒體廣播-衛(wèi)星(DMB-S)、數(shù)字視頻廣播-手持(DVB-H),前向鏈路媒體(MediaFLO@)的數(shù)據(jù)廣播系統(tǒng)、地面數(shù)字廣播綜合服務(wù)(ISDB-T)等等的數(shù)字廣播系統(tǒng)接收數(shù)字廣播。廣播接收模塊111可以被構(gòu)造為適合提供廣播信號的各種廣播系統(tǒng)以及上述數(shù)字廣播系統(tǒng)。經(jīng)由廣播接收模塊111接收的廣播信號和/或廣播相關(guān)信息可以存儲在存儲器160(或者其它類型的存儲介質(zhì))中。
移動通信模塊112將無線電信號發(fā)送到基站(例如,接入點、節(jié)點B等等)、外部終端以及服務(wù)器中的至少一個和/或從其接收無線電信號。這樣的無線電信號可以包括語音通話信號、視頻通話信號、或者根據(jù)文本和/或多媒體消息發(fā)送和/或接收的各種類型的數(shù)據(jù)。
無線互聯(lián)網(wǎng)模塊113支持移動終端100的無線互聯(lián)網(wǎng)接入。無線互聯(lián)網(wǎng)模塊113可以內(nèi)部或外部地耦接到終端。無線互聯(lián)網(wǎng)模塊113所涉及的無線互聯(lián)網(wǎng)接入技術(shù)可以包括無線局域網(wǎng)(WLAN)、無線相容性認(rèn)證(Wi-Fi)、無線寬帶(Wibro)、全球微波互聯(lián)接入(Wimax)、高速下行鏈路分組接入(HSDPA)等等。
短程通信模塊114是用于支持短程通信的模塊。短程通信技術(shù)的一些示例包括藍牙TM、射頻識別(RFID)、紅外數(shù)據(jù)協(xié)會(IrDA)、超寬帶(UWB)、紫蜂TM等等。
位置信息模塊115是用于檢查或獲取移動終端100的位置信息的模塊。位置信息模塊115的典型示例是全球定位系統(tǒng)(GPS)模塊。根據(jù)當(dāng)前的技術(shù),GPS模塊計算來自三個或更多衛(wèi)星的距離信息和準(zhǔn)確的時間信息并且對于計算的信息應(yīng)用三角測量法,從而根據(jù)經(jīng)度、緯度和高度準(zhǔn)確地計算三維當(dāng)前位置信息。當(dāng)前,用于計算位置和時間信息的方法使用三顆衛(wèi)星并且通過使用另外的一顆衛(wèi)星校正計算出的位置和時間信息的誤差。此外,GPS模塊能夠通過實時地連續(xù)計算當(dāng)前位置信息來計算速度信息。
A/V輸入單元120用于接收音頻或視頻信號。A/V輸入單元120可以包括相機121和麥克風(fēng)122,相機121對在視頻捕獲模式或圖像捕獲模式中由圖像捕獲裝置獲得的靜態(tài)圖片或視頻的圖像數(shù)據(jù)進行處理。處理后的圖像幀可以顯示在顯示單元151上。經(jīng)相機121處理后的圖像幀可以存儲在存儲器160(或其它存儲介質(zhì))中或者經(jīng)由無線通信單元110進行發(fā)送,可以根據(jù)移動終端100的構(gòu)造提供兩個或更多相機121。麥克風(fēng)122可以在電話通話模式、記錄模式、語音識別模式等等運行模式中經(jīng)由麥克風(fēng)接收聲音(音頻數(shù)據(jù)),并且能夠?qū)⑦@樣的聲音處理為音頻數(shù)據(jù)。處理后的音頻(語音)數(shù)據(jù)可以在電話通話模式的情況下轉(zhuǎn)換為可經(jīng)由移動通信模塊112發(fā)送到移動通信基站的格式輸出。麥克風(fēng)122可以實施各種類型的噪聲消除(或抑制)算法以消除(或抑制)在接收和發(fā)送音頻信號的過程中產(chǎn)生的噪聲或者干擾。
用戶輸入單元130可以根據(jù)用戶輸入的命令生成鍵輸入數(shù)據(jù)以控制移動終端100的各種操作。用戶輸入單元130允許用戶輸入各種類型的信息,并且可以包括鍵盤、鍋仔片、觸摸板(例如,檢測由于被接觸而導(dǎo)致的電阻、壓力、電容等等的變化的觸敏組件)、滾輪、搖桿等等。特別地,當(dāng)觸摸板以層的形式疊加在顯示單元151上時,可以形成觸摸屏。
感測單元140檢測移動終端100的當(dāng)前狀態(tài),(例如,移動終端100的打開或關(guān)閉狀態(tài))、移動終端100的位置、用戶對于移動終端100的接觸(即,觸摸輸入)的有無、移動終端100的取向、移動終端100的加速或減速移動和方向等等,并且生成用于控制移動終端100的操作的命令或信號。例如,當(dāng)移動終端100實施為滑動型移動電話時,感測單元140可以感測該滑動型電話是打開還是關(guān)閉。另外,感測單元140能夠檢測電源單元190是否提供電力或者接口單元170是否與外部裝置耦接。
接口單元170用作至少一個外部裝置與移動終端100連接可以通過的接口。例如,外部裝置可以包括有線或無線頭戴式耳機端口、外部電源(或電池充電器)端口、有線或無線數(shù)據(jù)端口、存儲卡端口(典型示例是通用串行總線USB端口)、用于連接具有識別模塊的裝置的端口、音頻輸入/輸出(I/O)端口、視頻I/O端口、耳機端口等等。識別模塊可以是存儲用于驗證用戶使用移動終端100的各種信息并且可以包括用戶識別模塊(UIM)、客戶識別模塊(SIM)、通用客戶識別模塊(USIM)等等。另外,具有識別模塊的裝置(下面稱為“識別裝置”)可以采取智能卡的形式,因此,識別裝置可以經(jīng)由端口或其它連接裝置與移動終端100連接。
接口單元170可以用于接收來自外部裝置的輸入(例如,數(shù)據(jù)信息、電力等等)并且將接收到的輸入傳輸?shù)揭苿咏K端100內(nèi)的一個或多個元件或者可以用于在移動終端100和外部裝置之間傳輸數(shù)據(jù)。
另外,當(dāng)移動終端100與外部底座連接時,接口單元170可以用作允許通過其將電力從底座提供到移動終端100的路徑或者可以用作允許從底座輸入的各種命令信號通過其傳輸?shù)揭苿咏K端100的路徑。從底座輸入的各種命令信號或電力可以用作用于識別移動終端100是否準(zhǔn)確地安裝在底座上的信號。
輸出單元150被構(gòu)造為以視覺、音頻和/或觸覺方式提供輸出信號(例如,音頻信號、視頻信號、警報信號、振動信號等等)。輸出單元150可以包括顯示單元151、音頻輸出模塊152、警報單元153等等。
顯示單元151可以顯示在移動終端100中處理的信息。例如,當(dāng)移動終端100處于電話通話模式時,顯示單元151可以顯示與通話或其它通信(例如,文本消息收發(fā)、多媒體文件下載等等)相關(guān)的用戶界面(UI)或圖形用戶界面(GUI)。當(dāng)移動終端100處于視頻通話模式或者圖像捕獲模式時,顯示單元151可以顯示捕獲的圖像和/或接收的圖像、示出視頻或圖像以及相關(guān)功能的UI或GUI等等。
同時,當(dāng)顯示單元151和觸摸板以層的形式彼此疊加以形成觸摸屏?xí)r,顯示單元151可以用作輸入裝置和輸出裝置。顯示單元151可以包括液晶顯示器(LCD)、薄膜晶體管LCD(TFT-LCD)、有機發(fā)光二極管(OLED)顯示器、柔性顯示器、三維(3D)顯示器等等中的至少一種。這些顯示器中的一些可以被構(gòu)造為透明狀以允許用戶從外部觀看,這可以稱為透明顯示器,典型的透明顯示器可以例如為TOLED(透明有機發(fā)光二極管)顯示器等等。根據(jù)特定想要的實施方式,移動終端100可以包括兩個或更多顯示單元(或其它顯示裝置),例如,移動終端100可以包括外部顯示單元(未示出)和內(nèi)部顯示單元(未示出)。觸摸屏可用于檢測觸摸輸入壓力以及觸摸輸入位置和觸摸輸入面積。
音頻輸出模塊152可以在移動終端100處于呼叫信號接收模式、通話模式、記錄模式、語音識別模式、廣播接收模式等等模式下時,將無線通信單元110接收的或者在存儲器160中存儲的音頻數(shù)據(jù)轉(zhuǎn)換音頻信號并且輸出為聲音。而且,音頻輸出模塊152可以提供與移動終端100執(zhí)行的特定功能相關(guān)的音頻輸出(例如,呼叫信號接收聲音、消息接收聲音等等)。音頻輸出模塊152可以包括揚聲器、蜂鳴器等等。
警報單元153可以提供輸出以將事件的發(fā)生通知給移動終端100。典型的事件可以包括呼叫接收、消息接收、鍵信號輸入、觸摸輸入等等。除了音頻或視頻輸出之外,警報單元153可以以不同的方式提供輸出以通知事件的發(fā)生。例如,警報單元153可以以振動的形式提供輸出,當(dāng)接收到呼叫、消息或一些其它進入通信(incoming communication)時,警報單元153可以提供觸覺輸出(即,振動)以將其通知給用戶。通過提供這樣的觸覺輸出,即使在用戶的移動電話處于用戶的口袋中時,用戶也能夠識別出各種事件的發(fā)生。警報單元153也可以經(jīng)由顯示單元151或音頻輸出模塊152提供通知事件的發(fā)生的輸出。
存儲器160可以存儲由控制器180執(zhí)行的處理和控制操作的軟件程序等等,或者可以暫時地存儲已經(jīng)輸出或?qū)⒁敵龅臄?shù)據(jù)(例如,電話簿、消息、靜態(tài)圖像、視頻等等)。而且,存儲器160可以存儲關(guān)于當(dāng)觸摸施加到觸摸屏?xí)r輸出的各種方式的振動和音頻信號的數(shù)據(jù)。
存儲器160可以包括至少一種類型的存儲介質(zhì),所述存儲介質(zhì)包括閃存、硬盤、多媒體卡、卡型存儲器(例如,SD或DX存儲器等等)、隨機訪問存儲器(RAM)、靜態(tài)隨機訪問存儲器(SRAM)、只讀存儲器(ROM)、電可擦除可編程只讀存儲器(EEPROM)、可編程只讀存儲器(PROM)、磁性存儲器、磁盤、光盤等等。而且,移動終端100可以與通過網(wǎng)絡(luò)連接執(zhí)行存儲器160的存儲功能的網(wǎng)絡(luò)存儲裝置協(xié)作。
控制器180通??刂埔苿咏K端100的總體操作。例如,控制器180執(zhí)行與語音通話、數(shù)據(jù)通信、視頻通話等等相關(guān)的控制和處理。另外,控制器180可以包括用于再現(xiàn)或回放多媒體數(shù)據(jù)的多媒體模塊181,多媒體模塊181可以構(gòu)造在控制器180內(nèi),或者可以構(gòu)造為與控制器180分離??刂破?80可以執(zhí)行模式識別處理,以將在觸摸屏上執(zhí)行的手寫輸入或者圖片繪制輸入識別為字符或圖像。
電源單元190在控制器180的控制下接收外部電力或內(nèi)部電力并且提供操作各元件和組件所需的適當(dāng)?shù)碾娏Α?/p>
這里描述的各種實施方式可以以使用例如計算機軟件、硬件或其任何組合的計算機可讀介質(zhì)來實施。對于硬件實施,這里描述的實施方式可以通過使用特定用途集成電路(ASIC)、數(shù)字信號處理器(DSP)、數(shù)字信號處理裝置(DSPD)、可編程邏輯裝置(PLD)、現(xiàn)場可編程門陣列(FPGA)、處理器、控制器、微控制器、微處理器、被設(shè)計為執(zhí)行這里描述的功能的電子單元中的至少一種來實施,在一些情況下,這樣的實施方式可以在控制器180中實施。對于軟件實施,諸如過程或功能的實施方式可以與允許執(zhí)行至少一種功能或操作的單獨的軟件模塊來實施。軟件代碼可以由以任何適當(dāng)?shù)木幊陶Z言編寫的軟件應(yīng)用程序(或程序)來實施,軟件代碼可以存儲在存儲器160中并且由控制器180執(zhí)行。
至此,已經(jīng)按照其功能描述了移動終端100。下面,為了簡要起見,將描述諸如折疊型、直板型、擺動型、滑動型移動終端100等等的各種類型的移動終端100中的滑動型移動終端100作為示例。因此,本發(fā)明能夠應(yīng)用于任何類型的移動終端100,并且不限于滑動型移動終端100。
如圖1中所示的移動終端100可以被構(gòu)造為利用經(jīng)由幀或分組發(fā)送數(shù)據(jù)的諸如有線和無線通信系統(tǒng)以及基于衛(wèi)星的通信系統(tǒng)來操作。
現(xiàn)在將參考圖2描述其中根據(jù)本發(fā)明的移動終端100能夠操作的通信系統(tǒng)。
這樣的通信系統(tǒng)可以使用不同的空中接口和/或物理層。例如,由通信系統(tǒng)使用的空中接口包括例如頻分多址(FDMA)、時分多址(TDMA)、碼分多址(CDMA)和通用移動通信系統(tǒng)(UMTS)(特別地,長期演進(LTE))、全球移動通信系統(tǒng)(GSM)等等。作為非限制性示例,下面的描述涉及CDMA通信系統(tǒng),但是這樣的教導(dǎo)同樣適用于其它類型的系統(tǒng)。
參考圖2,CDMA無線通信系統(tǒng)可以包括多個移動終端100、多個基站(BS)270、基站控制器(BSC)275和移動交換中心(MSC)280。MSC 280被構(gòu)造為與公共電話交換網(wǎng)絡(luò)(PSTN)290形成接口。MSC 280還被構(gòu)造為與可以經(jīng)由回程線路耦接到BS 270的BSC 275形成接口?;爻叹€路可以根據(jù)若干已知的接口中的任一種來構(gòu)造,所述接口包括例如E1/T1、ATM、IP、PPP、幀中繼、HDSL、ADSL或xDSL。將理解的是,如圖2中所示的系統(tǒng)可以包括多個BSC275。
每個BS 270可以服務(wù)一個或多個分區(qū)(或區(qū)域),由多向天線或指向特定方向的天線覆蓋的每個分區(qū)放射狀地遠離BS 270?;蛘?,每個分區(qū)可以由用于分集接收的兩個或更多天線覆蓋。每個BS 270可以被構(gòu)造為支持多個頻率分配,并且每個頻率分配具有特定頻譜(例如,1.25MHz,5MHz等等)。
分區(qū)與頻率分配的交叉可以被稱為CDMA信道。BS 270也可以被稱為基站收發(fā)器子系統(tǒng)(BTS)或者其它等效術(shù)語。在這樣的情況下,術(shù)語“基站”可以用于籠統(tǒng)地表示單個BSC 275和至少一個BS 270。基站也可以被稱為“蜂窩站”?;蛘?,特定BS 270的各分區(qū)可以被稱為多個蜂窩站。
如圖2中所示,廣播發(fā)射器(BT)295將廣播信號發(fā)送給在系統(tǒng)內(nèi)操作的移動終端100。如圖1中所示的廣播接收模塊111被設(shè)置在移動終端100處以接收由BT 295發(fā)送的廣播信號。在圖2中,示出了幾個衛(wèi)星300,例如可以采用全球定位系統(tǒng)(GPS)衛(wèi)星300。衛(wèi)星300幫助定位多個移動終端100中的至少一個。
在圖2中,描繪了多個衛(wèi)星300,但是理解的是,可以利用任何數(shù)目的衛(wèi)星獲得有用的定位信息。作為圖1中所示位置信息模塊115的GPS模塊通常被構(gòu)造為與衛(wèi)星300配合以獲得想要的定位信息。替代GPS跟蹤技術(shù)或者在GPS跟蹤技術(shù)之外,可以使用可以跟蹤移動終端100的位置的其它技術(shù)。另外,至少一個GPS衛(wèi)星300可以選擇性地或者額外地處理衛(wèi)星DMB傳輸。
作為無線通信系統(tǒng)的一個典型操作,BS 270接收來自各種移動終端100的反向鏈路信號。移動終端100通常參與通話、消息收發(fā)和其它類型的通信。特定基站270接收的每個反向鏈路信號被在特定BS 270內(nèi)進行處理。獲得的數(shù)據(jù)被轉(zhuǎn)發(fā)給相關(guān)的BSC 275。BSC提供通話資源分配和包括BS 270之間的軟切換過程的協(xié)調(diào)的移動管理功能。BSC 275還將接收到的數(shù)據(jù)路由到MSC 280,其提供用于與PSTN 290形成接口的額外的路由服務(wù)。類似地,PSTN 290與MSC280形成接口,MSC與BSC 275形成接口,并且BSC 275相應(yīng)地控制BS 270以將正向鏈路信號發(fā)送到移動終端100。
移動終端中無線通信單元110的移動通信模塊112基于移動終端內(nèi)置的接入移動通信網(wǎng)絡(luò)(如2G/3G/4G等移動通信網(wǎng)絡(luò))的必要數(shù)據(jù)(包括用戶識別信息和鑒權(quán)信息)接入移動通信網(wǎng)絡(luò)為移動終端用戶的網(wǎng)頁瀏覽、網(wǎng)絡(luò)多媒體播放等業(yè)務(wù)傳輸移動通信數(shù)據(jù)(包括上行的移動通信數(shù)據(jù)和下行的移動通信數(shù)據(jù))。
無線通信單元110的無線互聯(lián)網(wǎng)模塊113通過運行無線熱點的相關(guān)協(xié)議功能而實現(xiàn)無線熱點的功能,無線熱點支持多個移動終端(移動終端之外的任意移動終端)接入,通過復(fù)用移動通信模塊112與移動通信網(wǎng)絡(luò)之間的移動通信連接為移動終端用戶的網(wǎng)頁瀏覽、網(wǎng)絡(luò)多媒體播放等業(yè)務(wù)傳輸移動通信數(shù)據(jù)(包括上行的移動通信數(shù)據(jù)和下行的移動通信數(shù)據(jù)),由于移動終端實質(zhì)上是復(fù)用移動終端與通信網(wǎng)絡(luò)之間的移動通信連接傳輸移動通信數(shù)據(jù)的,因此移動終端消耗的移動通信數(shù)據(jù)的流量由通信網(wǎng)絡(luò)側(cè)的計費實體計入移動終端的通信資費,從而消耗移動終端簽約使用的通信資費中包括的移動通信數(shù)據(jù)的數(shù)據(jù)流量。
基于上述移動終端100硬件結(jié)構(gòu)以及通信系統(tǒng),提出本發(fā)明方法各個實施例。
實施例一
本實施例提供了一種圖像處理方法;這里,采用本實施例所述的圖像處理方法,在視頻拍攝過程中,若出現(xiàn)手抖導(dǎo)致畫面位置發(fā)現(xiàn)變化的情況時,會將變化的像素點拉回到變化之前標(biāo)定的位置,從而使視頻畫面不會晃動,達到畫面穩(wěn)定的效果;例如,用戶利用手機對演唱會現(xiàn)場進行視頻拍攝時,可以利用演唱會現(xiàn)場中處于靜止?fàn)顟B(tài)的背景作為參考點,并基于背景中變化的像素點,對視頻幀拉回到原有位置,而演唱會現(xiàn)場中的移動物體正常移動,如此,保證正常采集的前提下,避免了由于抖動而導(dǎo)致的視頻圖像模糊的問題。
具體地,圖3為本發(fā)明實施例一圖像處理方法的實現(xiàn)流程示意圖,如圖3所示,該圖像處理方法包括:
步驟301:電子設(shè)備利用圖像采集裝置采集視頻數(shù)據(jù);
本實施例中,所述圖像采集裝置可以具體為設(shè)置于所述電子設(shè)備中的攝像頭,例如,手機中的前置或后置攝像頭;也可以具體為與電子設(shè)備連接的外置攝像頭。
步驟302:將采集到的視頻數(shù)據(jù)中的第一視頻幀確定為參考圖像;所述第一視頻幀為所述電子設(shè)備中呈現(xiàn)的針對所述視頻數(shù)據(jù)的預(yù)覽圖像;
本實施例中,所述第一視頻幀并非具體指所述視頻數(shù)據(jù)中的第一幀圖像;而是指所述視頻數(shù)據(jù)中的任一幀視頻圖像;對應(yīng)地,所述參考圖像可以具體為采集到的所述視頻數(shù)據(jù)中的任一視頻幀對應(yīng)的圖像,例如,如圖4所示,所述電子設(shè)備在取景界面實時呈現(xiàn)采集到的視頻數(shù)據(jù),此時,所述電子設(shè)備可以自動確定出參考圖像,如自動將采集視頻數(shù)據(jù)時所對應(yīng)的第一幀圖像確定為所述參考圖像;或者,所述參考圖像為電子設(shè)備基于預(yù)設(shè)規(guī)則,在采集到的視頻數(shù)據(jù)中所篩選出的某一視頻幀。當(dāng)然,在實際應(yīng)用中,所述參考圖像還可以是基于用戶操作而選取出的,例如,如圖5所示,當(dāng)所述電子設(shè)備在取景界面呈現(xiàn)實時采集到的視頻數(shù)據(jù)時,所述電子設(shè)備可以基于用戶的觸控操作選取出參考圖像,并將選取出的參考圖像呈現(xiàn)于顯示區(qū)域的部分區(qū)域中,如將所述參考圖像呈現(xiàn)在所述顯示區(qū)域的右下角,以便于用戶能夠觀察到該截取的圖像,為及時更換所述參考圖像提供了便利條件。
進一步地,在實際應(yīng)用中,為使所述電子設(shè)備存儲的視頻數(shù)據(jù)中的視頻幀即為調(diào)整后的視頻幀,所述電子設(shè)備可以在確定出參考圖像后才開始存儲視頻數(shù)據(jù),而存儲視頻數(shù)據(jù)之前的采集過程僅為確定參考圖像而服務(wù),并不會被存儲,這樣,能夠有效避免存儲的視頻數(shù)據(jù)中存在視頻圖像模糊的問題,為提供用戶體驗奠定了基礎(chǔ)。
步驟303:從所述參考圖像中選取出參考區(qū)域,并確定出所述參考區(qū)域中像素點對應(yīng)的第一組坐標(biāo)信息;
在一實施例中,當(dāng)所述電子設(shè)備確定出參考圖像后,還需要在所述參考圖像中選取出參考區(qū)域;這里,為便于對視頻幀進行調(diào)整,可以從采集到的視頻數(shù)據(jù)對應(yīng)的實體場景中選取固定目標(biāo)體對應(yīng)的區(qū)域;具體地,所述電子設(shè)備從所述參考圖像中選取出固定目標(biāo)體對應(yīng)的區(qū)域;這里,所述固定目標(biāo)體為所述視頻數(shù)據(jù)對應(yīng)的采集區(qū)域中所述電子設(shè)備采集到的處于固定狀態(tài)(也即靜止?fàn)顟B(tài))的目標(biāo)體;進而所述電子設(shè)備將所述參考圖像中所述固定目標(biāo)體對應(yīng)的區(qū)域作為參考區(qū)域,比如,將演唱會現(xiàn)場中處于固定狀態(tài)的背景對應(yīng)的區(qū)域設(shè)置為參考區(qū)域。這樣,由于選取出的參考區(qū)域為固定物體對應(yīng)的區(qū)域,所以,對于相鄰兩個視頻幀而言,在視頻采集過程中,可以認(rèn)定相鄰兩個視頻幀中該固定物體的坐標(biāo)不變,進而當(dāng)與參考圖像對應(yīng)的下一視頻幀中的固定物體的坐標(biāo)發(fā)生變化時,可以利用所述參考圖像中所述固定物體的坐標(biāo)來對該下一視頻幀進行調(diào)整,如此,避免視頻圖像模糊。而且,由于選取的參考區(qū)域為固定物體對應(yīng)的區(qū)域,所以,調(diào)整算法復(fù)雜度較,便于在電子設(shè)備中實現(xiàn)。
當(dāng)然,在實際應(yīng)用中,還可以從采集到的視頻數(shù)據(jù)對應(yīng)的實體場景中選取移動目標(biāo)體中的固定部分對應(yīng)的區(qū)域,進而將所述參考圖像中所述移動目標(biāo)體中的固定部分對應(yīng)的區(qū)域作為參考區(qū)域。這里,為匹配不同的算法復(fù)雜度,參考區(qū)域的選取過程可以根據(jù)實際情況而任意確定。
在另一實施例中,所述電子設(shè)備可以基于所述參考圖像中所述參考區(qū)域?qū)?yīng)的像素點的像素特征,從所述參考圖像的參考區(qū)域中選取出目標(biāo)像素點,也就是說,在實際應(yīng)用中,并非將確定出的參考圖像的參考區(qū)域中的所有像素點均作為參考像素點,而是從中選取出部分像素點作為目標(biāo)像素點,例如選取出灰度變化明顯的像素點作為目標(biāo)像素點,進而確定出所述目標(biāo)像素點對應(yīng)的坐標(biāo)信息,并將所述目標(biāo)像素點對應(yīng)的坐標(biāo)信息作為第一組坐標(biāo)信息,進而降低調(diào)整算法復(fù)雜度。
步驟304:利用所述第一組坐標(biāo)信息對采集到的視頻數(shù)據(jù)中的視頻幀進行調(diào)整,以使調(diào)整后的視頻幀中所述參考區(qū)域?qū)?yīng)的像素點的第二組坐標(biāo)信息與所述第一組坐標(biāo)信息相對應(yīng);
在實際應(yīng)用中,可以將采集到的視頻數(shù)據(jù)中每一視頻幀的所述參考區(qū)域?qū)?yīng)的像素點與第一組坐標(biāo)信息對應(yīng)的像素點進行比對,進而確定出相關(guān)聯(lián)的像素對,進而基于相關(guān)聯(lián)的像素對確定對視頻幀進行調(diào)整的調(diào)整方式。
步驟305:存儲調(diào)整后的視頻幀,并基于存儲的調(diào)整后的視頻幀組合成針對采集到的所述視頻數(shù)據(jù)的目標(biāo)視頻數(shù)據(jù)。
這樣,本發(fā)明實施例所述的方法,通過在采集視頻數(shù)據(jù)中確定參考圖像,并從所述參考圖像中選取出參考區(qū)域,進而利用所述參考區(qū)域中像素點對應(yīng)的第一組坐標(biāo)信息對采集到的視頻數(shù)據(jù)中的視頻幀進行調(diào)整,使調(diào)整后的視頻幀中所述參考區(qū)域?qū)?yīng)的像素點的第二組坐標(biāo)信息與所述第一組坐標(biāo)信息相對應(yīng),如此,實現(xiàn)對采集到的視頻數(shù)據(jù)進行實施調(diào)整的目的;而且,所述電子設(shè)備并非直接對采集得到的視頻數(shù)據(jù)進行存儲,而是存儲調(diào)整后的視頻幀以組合成針對采集到的所述視頻數(shù)據(jù)的目標(biāo)視頻數(shù)據(jù),這樣,避免了由于抖動而是存儲的視頻圖像模糊的問題,提升了用戶體驗。
實施例二
本實施例提供了一種圖像處理方法;這里,采用本實施例所述的圖像處理方法,在視頻拍攝過程中,若出現(xiàn)手抖導(dǎo)致畫面位置發(fā)現(xiàn)變化的情況時,會將變化的像素點拉回到變化之前標(biāo)定的位置,從而使視頻畫面不會晃動,達到畫面穩(wěn)定的效果;例如,用戶利用手機對演唱會現(xiàn)場進行視頻拍攝時,可以利用演唱會現(xiàn)場中處于靜止?fàn)顟B(tài)的背景作為參考點,并基于背景中變化的像素點,對視頻幀拉回到原有位置,而演唱會現(xiàn)場中的移動物體正常移動,如此,保證正常采集的前提下,避免了由于抖動而導(dǎo)致的視頻圖像模糊的問題。
具體地,圖6為本發(fā)明實施例二圖像處理方法的實現(xiàn)流程示意圖,如圖6所示,該圖像處理方法包括:
步驟601:電子設(shè)備利用圖像采集裝置采集視頻數(shù)據(jù);
本實施例中,所述圖像采集裝置可以具體為設(shè)置于所述電子設(shè)備中的攝像頭,例如,手機中的前置或后置攝像頭;也可以具體為與電子設(shè)備連接的外置攝像頭。
步驟602:將采集到的視頻數(shù)據(jù)中的第一視頻幀確定為參考圖像;所述第一視頻幀為所述電子設(shè)備中呈現(xiàn)的針對所述視頻數(shù)據(jù)的預(yù)覽圖像;
本實施例中,所述第一視頻幀并非具體指所述視頻數(shù)據(jù)中的第一幀圖像;而是指所述視頻數(shù)據(jù)中的任一幀視頻圖像;對應(yīng)地,所述參考圖像可以具體為采集到的所述視頻數(shù)據(jù)中的任一視頻幀對應(yīng)的圖像,例如,如圖4所示,所述電子設(shè)備在取景界面實時呈現(xiàn)采集到的視頻數(shù)據(jù),此時,所述電子設(shè)備可以自動確定出參考圖像,如自動將采集視頻數(shù)據(jù)時所對應(yīng)的第一幀圖像確定為所述參考圖像;或者,所述參考圖像為電子設(shè)備基于預(yù)設(shè)規(guī)則,在采集到的視頻數(shù)據(jù)中所篩選出的某一視頻幀。當(dāng)然,在實際應(yīng)用中,所述參考圖像還可以是基于用戶操作而選取出的,例如,如圖5所示,當(dāng)所述電子設(shè)備在取景界面呈現(xiàn)實時采集到的視頻數(shù)據(jù)時,所述電子設(shè)備可以基于用戶的觸控操作選取出參考圖像,并將選取出的參考圖像呈現(xiàn)于顯示區(qū)域的部分區(qū)域中,如將所述參考圖像呈現(xiàn)在所述顯示區(qū)域的右下角,以便于用戶能夠觀察到該截取的圖像,為及時更換所述參考圖像提供了便利條件。
進一步地,在實際應(yīng)用中,為使所述電子設(shè)備存儲的視頻數(shù)據(jù)中的視頻幀即為調(diào)整后的視頻幀,所述電子設(shè)備可以在確定出參考圖像后才開始存儲視頻數(shù)據(jù),而存儲視頻數(shù)據(jù)之前的采集過程僅為確定參考圖像而服務(wù),并不會被存儲,這樣,能夠有效避免存儲的視頻數(shù)據(jù)中存在視頻圖像模糊的問題,為提供用戶體驗奠定了基礎(chǔ)。
步驟603:從所述參考圖像中選取出參考區(qū)域,并確定出所述參考區(qū)域中像素點對應(yīng)的第一組坐標(biāo)信息;
在一實施例中,當(dāng)所述電子設(shè)備確定出參考圖像后,還需要在所述參考圖像中選取出參考區(qū)域;這里,為便于對視頻幀進行調(diào)整,可以從采集到的視頻數(shù)據(jù)對應(yīng)的實體場景中選取固定目標(biāo)體對應(yīng)的區(qū)域;具體地,所述電子設(shè)備從所述參考圖像中選取出固定目標(biāo)體對應(yīng)的區(qū)域;這里,所述固定目標(biāo)體為所述視頻數(shù)據(jù)對應(yīng)的采集區(qū)域中所述電子設(shè)備采集到的處于固定狀態(tài)(也即靜止?fàn)顟B(tài))的目標(biāo)體;進而所述電子設(shè)備將所述參考圖像中所述固定目標(biāo)體對應(yīng)的區(qū)域作為參考區(qū)域,比如,將演唱會現(xiàn)場中處于固定狀態(tài)的背景對應(yīng)的區(qū)域設(shè)置為參考區(qū)域。這樣,由于選取出的參考區(qū)域為固定物體對應(yīng)的區(qū)域,所以,對于相鄰兩個視頻幀而言,在視頻采集過程中,可以認(rèn)定相鄰兩個視頻幀中該固定物體的坐標(biāo)不變,進而當(dāng)與參考圖像對應(yīng)的下一視頻幀中的固定物體的坐標(biāo)發(fā)生變化時,可以利用所述參考圖像中所述固定物體的坐標(biāo)來對該下一視頻幀進行調(diào)整,如此,避免視頻圖像模糊。而且,由于選取的參考區(qū)域為固定物體對應(yīng)的區(qū)域,所以,調(diào)整算法復(fù)雜度較,便于在電子設(shè)備中實現(xiàn)。
當(dāng)然,在實際應(yīng)用中,還可以從采集到的視頻數(shù)據(jù)對應(yīng)的實體場景中選取移動目標(biāo)體中的固定部分對應(yīng)的區(qū)域,進而將所述參考圖像中所述移動目標(biāo)體中的固定部分對應(yīng)的區(qū)域作為參考區(qū)域。這里,為匹配不同的算法復(fù)雜度,參考區(qū)域的選取過程可以根據(jù)實際情況而任意確定。
在另一實施例中,所述電子設(shè)備可以基于所述參考圖像中所述參考區(qū)域?qū)?yīng)的像素點的像素特征,從所述參考圖像的參考區(qū)域中選取出目標(biāo)像素點,也就是說,在實際應(yīng)用中,并非將確定出的參考圖像的參考區(qū)域中的所有像素點均作為參考像素點,而是從中選取出部分像素點作為目標(biāo)像素點,例如選取出灰度變化明顯的像素點作為目標(biāo)像素點,進而確定出所述目標(biāo)像素點對應(yīng)的坐標(biāo)信息,并將所述目標(biāo)像素點對應(yīng)的坐標(biāo)信息作為第一組坐標(biāo)信息,進而降低調(diào)整算法復(fù)雜度。
步驟604:確定采集到所述視頻數(shù)據(jù)的每一視頻幀中所述參考區(qū)域?qū)?yīng)的像素點的第二組坐標(biāo)信息;
在實際應(yīng)用中,可以將采集到的視頻數(shù)據(jù)中每一視頻幀的所述參考區(qū)域?qū)?yīng)的像素點與第一組坐標(biāo)信息對應(yīng)的像素點進行比對,進而確定出相關(guān)聯(lián)的像素對,進而基于相關(guān)聯(lián)的像素對確定對視頻幀進行調(diào)整的調(diào)整方式。
本實施例中,采集到的視頻數(shù)據(jù)是基于同一實體場景的,例如,對演唱會現(xiàn)場進行采集,所以,在確定出參考區(qū)域后,隨后采集的視頻數(shù)據(jù)的每一視頻幀中均對應(yīng)有該參考區(qū)域,因此,可以利用不同視頻幀(如參考圖像與每一視頻幀)中的同一參考區(qū)域在相同坐標(biāo)下坐標(biāo)的變化值來確定兩幀圖像的位置關(guān)系,進而基于該位置關(guān)系確定出調(diào)整方式。這里,所述第二組坐標(biāo)信息即為同一視頻數(shù)據(jù)中的與參考圖像不同的視頻幀中所述參考區(qū)域?qū)?yīng)的像素點的坐標(biāo)信息。
步驟605:基于所述第一組坐標(biāo)信息以及每一視頻幀對應(yīng)的第二組坐標(biāo)信息,確定所述參考圖像與每一視頻幀的位置關(guān)系;
在一具體實施例中,所述第一組坐標(biāo)信息中至少包含有兩個第一坐標(biāo);所述第二組坐標(biāo)信息中至少包括有兩個第二坐標(biāo);對應(yīng)的,步驟605具備包括:
從所述至少兩個第一坐標(biāo)以及所述至少兩個第二坐標(biāo)中,選取出像素特征相匹配的至少兩組坐標(biāo)對;所述坐標(biāo)對中包括有像素特征相匹配的一個第一坐標(biāo)和一個第二坐標(biāo);這里,所述像素特征相匹配指的是不同視頻幀中的同一像素點像素特征相匹配,例如,參考圖像中的參考區(qū)域的第一像素點與某一視頻幀中該參考區(qū)域的同一第一像素點,此兩個第一像素點的像素特征相匹配,能夠組合成一個坐標(biāo)對。進一步地,所述電子設(shè)備基于至少兩組坐標(biāo)對,確定所述參考圖像與每一視頻幀的位置關(guān)系。這里,當(dāng)用戶抖動而使得電子設(shè)備抖動時,同一像素點在同一坐標(biāo)系下的坐標(biāo)必然會發(fā)生變化,所以,本實施例利用了該變化特征來確定參考圖像與任一視頻幀之間的位置關(guān)系,進而基于位置關(guān)系,對每一視頻幀進行調(diào)整。
步驟606:根據(jù)所述位置關(guān)系對采集到的視頻數(shù)據(jù)中的視頻幀進行調(diào)整;
步驟607:存儲調(diào)整后的視頻幀,并基于存儲的調(diào)整后的視頻幀組合成針對采集到的所述視頻數(shù)據(jù)的目標(biāo)視頻數(shù)據(jù)。
這樣,本發(fā)明實施例所述的方法,通過在采集視頻數(shù)據(jù)中確定參考圖像,并從所述參考圖像中選取出參考區(qū)域,進而利用所述參考區(qū)域中像素點對應(yīng)的第一組坐標(biāo)信息對采集到的視頻數(shù)據(jù)中的視頻幀進行調(diào)整,使調(diào)整后的視頻幀中所述參考區(qū)域?qū)?yīng)的像素點的第二組坐標(biāo)信息與所述第一組坐標(biāo)信息相對應(yīng),如此,實現(xiàn)對采集到的視頻數(shù)據(jù)進行實施調(diào)整的目的;而且,所述電子設(shè)備并非直接對采集得到的視頻數(shù)據(jù)進行存儲,而是存儲調(diào)整后的視頻幀以組合成針對采集到的所述視頻數(shù)據(jù)的目標(biāo)視頻數(shù)據(jù),這樣,避免了由于抖動而是存儲的視頻圖像模糊的問題,提升了用戶體驗。
以下通過具體應(yīng)用場景對本發(fā)明實施例做進一步詳細說明;具體地,所述電子設(shè)備開啟相機,并選擇視頻模式;隨后,如圖7所示,
步驟701:所述電子設(shè)備從預(yù)覽畫面中截取參考圖像,并確定出參考區(qū)域。
在實際應(yīng)用中,電子設(shè)備進入視頻模式后,用戶會選擇一個要拍的景物,預(yù)覽界面中包含用戶預(yù)要拍攝的景物和角度。此時,點擊拍攝,電子設(shè)備會截取一張預(yù)覽照片,將該預(yù)覽圖像作為參考圖像,同時,選取出該參考圖像的參考區(qū)域。
步驟702:當(dāng)確定出參考區(qū)域后,可以在參考區(qū)域中選取出特征顯著的像素點作為目標(biāo)像素點,進而將目標(biāo)像素點的坐標(biāo)作為第一組坐標(biāo)信息,以用于后續(xù)的圖像配準(zhǔn)。
這里,可以根據(jù)要拍攝的景物的特征,選取區(qū)域(森林、湖泊、農(nóng)田等)、線(區(qū)域的邊界、道路等)或點(區(qū)域的角點、線的交點、曲線上的高曲率點等)等的像素作為目標(biāo)像素點;這里,提取出的目標(biāo)像素點可以分布在圖像任何地方。
當(dāng)然,在實際應(yīng)用中,在確定目標(biāo)像素點的時候還可以參考像素特征變化特征,如灰度變化情況,具體地,可以將參考區(qū)域中灰度變化明顯的點、線、區(qū)域等對應(yīng)的像素點作為目標(biāo)像素點;
步驟703:確定采集到的視頻數(shù)據(jù)中每一幀對應(yīng)的所述參考區(qū)域中的所述目標(biāo)像素點的坐標(biāo)信息,得到第二組坐標(biāo)信息,基于所述第一組坐標(biāo)信息以及每一視頻幀對應(yīng)的第二組坐標(biāo)信息,選取出像素特征相匹配的坐標(biāo)對;
這里,在兩幅圖像(參考圖像與任一視頻幀對應(yīng)的圖像)對應(yīng)的坐標(biāo)組中利用特征匹配算法確定出像素特征匹配的坐標(biāo)對,當(dāng)然,對于像素特征不匹配的像素點對應(yīng)的坐標(biāo)可以刪除,也可以利用插值等方法推算出對應(yīng)的坐標(biāo),從而實現(xiàn)兩幅圖像之間逐像素的配準(zhǔn)。
步驟704:基于由所述第一組坐標(biāo)信息與視頻數(shù)據(jù)中的每一視頻幀對應(yīng)的第二組坐標(biāo)信息形成的坐標(biāo)對,確定出所述參考圖像與視頻數(shù)據(jù)中的每一視頻幀的位置關(guān)系;
這里,該位置關(guān)系可以具體為空間變化模型,即兩幅要配準(zhǔn)的圖像(如參考圖像與每一視頻幀)之間的映射模型,比如兩圖像旋轉(zhuǎn)、平移后即會重合,此時模型為剛體變換模型,又比如需要縮放,甚至X方向和Y方向縮放的幅度都一樣,此時,模型即為仿射變換或者非線性變換模型。
具體地,比如視頻數(shù)據(jù)中的某一視頻幀為圖像A,將A左移2個像素,下移3個像素,再順時針旋轉(zhuǎn)60度后,得到圖像B,假設(shè)圖像B為參考圖像。此時,對A和B進行配準(zhǔn)的過程就是確定2、3、60這三個參數(shù)的過程,因為這三個參數(shù)一旦確定了,就能夠得到圖像B和圖像A的對應(yīng)關(guān)系。當(dāng)然,在實際應(yīng)用中,難以直接確定出上述三個參數(shù),因此,可以將兩幅圖像重合的像素最多的那組參數(shù)確定為變化參數(shù)。例如,對這三個參數(shù)的解空間進行遍歷,比如對X方向的平移像素個數(shù)從-100搜索到+100,步距為1像素,對Y方向的平移像素也從-100搜索到+100,步距為1像素,對旋轉(zhuǎn)角度從0搜索到360度,步距為1度,以完成一個200*200*360次的循環(huán),然后在每次循環(huán)中,確定當(dāng)次循環(huán)參數(shù)進行變換后的圖像A與圖像B的重合像素的個數(shù),找出200*200*360次循環(huán)中重合像素個數(shù)最多的那組循環(huán)中所使用的參數(shù),該參數(shù)即可為變化參數(shù)。
步驟705:基于位置關(guān)系對視頻數(shù)據(jù)中的每一視頻幀進行調(diào)整。
當(dāng)然,在實際應(yīng)用中可以根據(jù)實際需求選取變化方法,只要能夠?qū)σ曨l幀進行校準(zhǔn)即可。這里,以最近鄰插值為例,對調(diào)整過程做詳細說明;
假設(shè)目的像素,也即待調(diào)整視頻幀中目標(biāo)像素的坐標(biāo)為F(x1,y1),此時可以通過反向變換方法得到在該目標(biāo)像素在參考圖像上的對應(yīng)值浮點坐標(biāo)P(u,v),這里,可以利用步驟704得到的位置關(guān)系,如利用2、3、60三個參數(shù),將(x1,y1)反向調(diào)整,得到所述參考圖像上該目標(biāo)像素的坐標(biāo)點,即坐標(biāo)P(u,v)。這里,在實際應(yīng)用中,u,v可能會為小數(shù),而實際圖像中并未有坐標(biāo)為小數(shù)的點對應(yīng)的像素點,所以,需要對確定出的浮點坐標(biāo)P(u,v)做進一步調(diào)整,如圖8所示,利用近鄰插值公式對P(u,v)進行調(diào)整,具體地,可以對(u+0.5)進行取整得到m,對(v+0.5)進行取整得到v,進而確定出像素點(m,n)、(m+1,n)、(m,n+1)、(m+1,n+1),并確定出(m,n)、(m+1,n)、(m,n+1)、(m+1,n+1)分別與P(u,v)的像素值的差值,將差值最小的像素點作為(x1,y1)調(diào)整后所對應(yīng)的點,如差值最小的點為(m,n),則坐標(biāo)g(m,n)即為(x1,y1)調(diào)整后所對應(yīng)的點;這里,坐標(biāo)g(m,n)即可認(rèn)定為對應(yīng)于參考圖像上的坐標(biāo)。
這樣,即可提高視頻流暢程度,提升電子產(chǎn)品的競爭力。這里,值得注意的是,本實施例僅適用于拍攝場景不變的情況,而不適用場景變換的情況
實施例三
本實施例提供了一種電子設(shè)備,如圖9所示,所述電子設(shè)備包括:
圖像采集單元91,用于利用圖像采集裝置采集視頻數(shù)據(jù);
確定單元92,用于將采集到的視頻數(shù)據(jù)中的第一視頻幀確定為參考圖像;所述第一視頻幀為所述電子設(shè)備中呈現(xiàn)的針對所述視頻數(shù)據(jù)的預(yù)覽圖像;還用于從所述參考圖像中選取出參考區(qū)域,并確定出所述參考區(qū)域中像素點對應(yīng)的第一組坐標(biāo)信息;
調(diào)整單元93,用于利用所述第一組坐標(biāo)信息對采集到的視頻數(shù)據(jù)中的視頻幀進行調(diào)整,以使調(diào)整后的視頻幀中所述參考區(qū)域?qū)?yīng)的像素點的第二組坐標(biāo)信息與所述第一組坐標(biāo)信息相對應(yīng);
存儲單元94,用于存儲調(diào)整后的視頻幀,并基于存儲的調(diào)整后的視頻幀組合成針對采集到的所述視頻數(shù)據(jù)的目標(biāo)視頻數(shù)據(jù)。
在一實施例中,所述確定單元92,還用于從所述參考圖像中選取出固定目標(biāo)體對應(yīng)的區(qū)域,至少將所述參考圖像中所述固定目標(biāo)體對應(yīng)的區(qū)域作為參考區(qū)域;所述固定目標(biāo)體為所述視頻數(shù)據(jù)對應(yīng)的采集區(qū)域中所述電子設(shè)備采集到的處于固定狀態(tài)的目標(biāo)體。
在一實施例中,所述確定單元92,還用于基于所述參考圖像中所述參考區(qū)域?qū)?yīng)的像素點的像素特征,從所述參考圖像的參考區(qū)域中選取出目標(biāo)像素點,確定出所述目標(biāo)像素點對應(yīng)的坐標(biāo)信息,并將所述目標(biāo)像素點對應(yīng)的坐標(biāo)信息作為第一組坐標(biāo)信息。
在一實施例中,所述確定單元92,還用于確定采集到所述視頻數(shù)據(jù)的每一視頻幀中所述參考區(qū)域?qū)?yīng)的像素點的第二組坐標(biāo)信息,基于所述第一組坐標(biāo)信息以及每一視頻幀對應(yīng)的第二組坐標(biāo)信息,確定所述參考圖像與每一視頻幀的位置關(guān)系;
所述調(diào)整單元93,還用于根據(jù)所述位置關(guān)系對采集到的視頻數(shù)據(jù)中的視頻幀進行調(diào)整。
在一實施例中,所述第一組坐標(biāo)信息中至少包含有兩個第一坐標(biāo);所述第二組坐標(biāo)信息中至少包括有兩個第二坐標(biāo);
所述確定單元92,還用于從所述至少兩個第一坐標(biāo)以及所述至少兩個第二坐標(biāo)中,選取出像素特征相匹配的至少兩組坐標(biāo)對,基于至少兩組坐標(biāo)對,確定所述參考圖像與每一視頻幀的位置關(guān)系;所述坐標(biāo)對中包括有像素特征相匹配的一個第一坐標(biāo)和一個第二坐標(biāo)。
這里需要指出的是:以上電子設(shè)備實施例項的描述,與上述方法描述是類似的,具有同方法實施例相同的有益效果,因此不做贅述。對于本發(fā)明電子設(shè)備實施例中未披露的技術(shù)細節(jié),本領(lǐng)域的技術(shù)人員請參照本發(fā)明方法實施例的描述而理解,為節(jié)約篇幅,這里不再贅述。
應(yīng)理解,說明書通篇中提到的“一實施例”意味著與實施例有關(guān)的特定特征、結(jié)構(gòu)或特性包括在本發(fā)明的至少一個實施例中。因此,在整個說明書各處出現(xiàn)的“在一實施例中”或“在另一實施例中”未必一定指相同的實施例。此外,這些特定的特征、結(jié)構(gòu)或特性可以任意適合的方式結(jié)合在一個或多個實施例中。應(yīng)理解,在本發(fā)明的各種實施例中,上述各過程的序號的大小并不意味著執(zhí)行順序的先后,各過程的執(zhí)行順序應(yīng)以其功能和內(nèi)在邏輯確定,而不應(yīng)對本發(fā)明實施例的實施過程構(gòu)成任何限定。上述本發(fā)明實施例序號僅僅為了描述,不代表實施例的優(yōu)劣。
需要說明的是,在本文中,術(shù)語“包括”、“包含”或者其任何其他變體意在涵蓋非排他性的包含,從而使得包括一系列要素的過程、方法、物品或者裝置不僅包括那些要素,而且還包括沒有明確列出的其他要素,或者是還包括為這種過程、方法、物品或者裝置所固有的要素。在沒有更多限制的情況下,由語句“包括一個……”限定的要素,并不排除在包括該要素的過程、方法、物品或者裝置中還存在另外的相同要素。
在本申請所提供的幾個實施例中,應(yīng)該理解到,所揭露的設(shè)備和方法,可以通過其它的方式實現(xiàn)。以上所描述的設(shè)備實施例僅僅是示意性的,例如,所述單元的劃分,僅僅為一種邏輯功能劃分,實際實現(xiàn)時可以有另外的劃分方式,如:多個單元或組件可以結(jié)合,或可以集成到另一個系統(tǒng),或一些特征可以忽略,或不執(zhí)行。另外,所顯示或討論的各組成部分相互之間的耦合、或直接耦合、或通信連接可以是通過一些接口,設(shè)備或單元的間接耦合或通信連接,可以是電性的、機械的或其它形式的。
上述作為分離部件說明的單元可以是、或也可以不是物理上分開的,作為單元顯示的部件可以是、或也可以不是物理單元;既可以位于一個地方,也可以分布到多個網(wǎng)絡(luò)單元上;可以根據(jù)實際的需要選擇其中的部分或全部單元來實現(xiàn)本實施例方案的目的。
另外,在本發(fā)明各實施例中的各功能單元可以全部集成在一個處理單元中,也可以是各單元分別單獨作為一個單元,也可以兩個或兩個以上單元集成在一個單元中;上述集成的單元既可以采用硬件的形式實現(xiàn),也可以采用硬件加軟件功能單元的形式實現(xiàn)。
本領(lǐng)域普通技術(shù)人員可以理解:實現(xiàn)上述方法實施例的全部或部分步驟可以通過程序指令相關(guān)的硬件來完成,前述的程序可以存儲于計算機可讀取存儲介質(zhì)中,該程序在執(zhí)行時,執(zhí)行包括上述方法實施例的步驟;而前述的存儲介質(zhì)包括:移動存儲設(shè)備、只讀存儲器(Read Only Memory,ROM)、磁碟或者光盤等各種可以存儲程序代碼的介質(zhì)。
或者,本發(fā)明上述集成的單元如果以軟件功能模塊的形式實現(xiàn)并作為獨立的產(chǎn)品銷售或使用時,也可以存儲在一個計算機可讀取存儲介質(zhì)中。基于這樣的理解,本發(fā)明實施例的技術(shù)方案本質(zhì)上或者說對現(xiàn)有技術(shù)做出貢獻的部分可以以軟件產(chǎn)品的形式體現(xiàn)出來,該計算機軟件產(chǎn)品存儲在一個存儲介質(zhì)中,包括若干指令用以使得一臺計算機設(shè)備(可以是個人計算機、服務(wù)器、或者網(wǎng)絡(luò)設(shè)備等)執(zhí)行本發(fā)明各個實施例所述方法的全部或部分。而前述的存儲介質(zhì)包括:移動存儲設(shè)備、ROM、磁碟或者光盤等各種可以存儲程序代碼的介質(zhì)。
以上所述,僅為本發(fā)明的具體實施方式,但本發(fā)明的保護范圍并不局限于此,任何熟悉本技術(shù)領(lǐng)域的技術(shù)人員在本發(fā)明揭露的技術(shù)范圍內(nèi),可輕易想到變化或替換,都應(yīng)涵蓋在本發(fā)明的保護范圍之內(nèi)。因此,本發(fā)明的保護范圍應(yīng)以所述權(quán)利要求的保護范圍為準(zhǔn)。