多幀拍攝圖像合成裝置和方法
【技術領域】
[0001] 本發(fā)明涉及圖像處理技術領域，尤其涉及一種多幀拍攝圖像合成裝置和方法。
【背景技術】
[0002] 隨著移動拍照設備的普及，現(xiàn)有技術中已經(jīng)出現(xiàn)了很多不同的拍攝技術。其中，多 幀拍攝合成是一種相較于單幀拍攝更為復雜的拍攝技術，其在全景拍攝、HDR合成、長曝光 電子光圈中均有應用，這些拍攝技術的難點是如何進行圖像合成。
[0003] 一般而g，手持移動設備谷易抖動，拍攝時需要利用固定設備來固定移動設備，以 防止多幀拍攝圖像時出現(xiàn)抖動，造成圖像合成時出現(xiàn)像素錯位。這要求用戶在進行拍攝時 需要攜帶固定設備，如笨重的三腳架，影響了用戶拍攝便利性和體驗性。
[0004] 因此，如何在不依賴固定設備的情況下，減小移動設備多幀拍攝圖像合成時的像 素偏差，就成為一個需要解決的技術問題。

【發(fā)明內(nèi)容】

[0005] 本發(fā)明的主要目的在于提出一種多幀拍攝圖像合成裝置和方法，旨在解決多幀拍 攝圖像合成時的像素偏差。
[0006] 為實現(xiàn)上述目的，本發(fā)明提供的一種多幀拍攝圖像合成裝置，包括：圖像獲取模 塊，用于獲取拍攝的多幀圖像;匹配像素點查找模塊，用于查找所述多幀圖像中相互匹配的 像素點;對齊模型計算模塊，用于根據(jù)所述多幀圖像中相互匹配的像素點，計算用于對齊所 述多幀圖像的對齊模型；圖像對齊模塊，用于使用所述對齊模型，對齊所述多幀圖像；圖像 合成模塊，用于對對齊后的所述多幀圖像進行合成。
[0007] 可選地，前述的裝置，所述對齊模型計算模塊計算所述相互匹配的像素點反映的 縮放與旋轉(zhuǎn)參數(shù)、位移參數(shù)，并根據(jù)得到的縮放與旋轉(zhuǎn)參數(shù)、位移參數(shù)建立所述對齊模型。
[0008] 可選地，前述的裝置，所述對齊模型計算模塊計算所述相互匹配的像素點反映的 縮放與旋轉(zhuǎn)參數(shù)、位移參數(shù)、水平與垂直方向上的變形參數(shù)，并根據(jù)得到的縮放與旋轉(zhuǎn)參 數(shù)、位移參數(shù)、水平與垂直方向上的變形參數(shù)建立所述對齊模型。
[0009] 可選地，前述的裝置，所述匹配像素點查找模塊對所述多幀圖像進行縮小，從縮小 后的所述多幀圖像中查找相互匹配的像素點，并根據(jù)縮小后的所述多幀圖像中相互匹配的 像素點，確定縮小前的所述多幀圖像中相互匹配的像素點。
[0010] 可選地，前述的裝置，所述圖像合成模塊根據(jù)當前的圖像應用場景，對所述多幀圖 像選擇相應的合成策略進行合成。
[0011] 為實現(xiàn)上述目的，本發(fā)明還提供了一種多幀拍攝圖像合成方法，包括:獲取拍攝的 多幀圖像;查找所述多幀圖像中相互匹配的像素點；根據(jù)所述多幀圖像中相互匹配的像素 點，計算用于對齊所述多幀圖像的對齊模型;使用所述對齊模型，對齊所述多幀圖像;對對 齊后的所述多幀圖像進行合成。
[0012] 可選地，前述的方法，計算用于對齊所述多幀圖像的對齊模型，具體包括:計算所 述相互匹配的像素點反映的縮放與旋轉(zhuǎn)參數(shù)、位移參數(shù)，并根據(jù)得到的縮放與旋轉(zhuǎn)參數(shù)、位 移參數(shù)建立所述對齊模型。
[0013] 可選地，前述的方法，計算用于對齊所述多幀圖像的對齊模型，具體包括:計算所 述相互匹配的像素點反映的縮放與旋轉(zhuǎn)參數(shù)、位移參數(shù)、水平與垂直方向上的變形參數(shù)，并 根據(jù)得到的縮放與旋轉(zhuǎn)參數(shù)、位移參數(shù)、水平與垂直方向上的變形參數(shù)建立所述對齊模型。
[0014] 可選地，前述的方法，查找所述多幀圖像中相互匹配的像素點，具體包括:對所述 多幀圖像進行縮小，從縮小后的所述多幀圖像中查找相互匹配的像素點；根據(jù)縮小后的所 述多幀圖像中相互匹配的像素點，確定縮小前的所述多幀圖像中相互匹配的像素點。
[0015] 可選地，前述的方法，對對齊后的所述多幀圖像進行合成，具體包括:根據(jù)當前的 圖像應用場景，對所述多幀圖像選擇相應的合成策略進行合成。
[0016] 根據(jù)以上技術方案，本發(fā)明的多幀拍攝圖像合成裝置和方法至少具有以下優(yōu)點：
[0017] 根據(jù)本發(fā)明的技術方案，對于拍攝得到的多幀圖像，首先查找出多幀圖像之間相 互匹配的像素點，基于相互匹配的像素點可以計算出用于對齊多幀圖像的模型，進而利用 對齊模型將多幀圖像對齊;根據(jù)本發(fā)明的技術方案，在不依賴固定架等設備的基礎上，即可 進行多幀圖像的對齊，減少了多幀圖像合成后的像素偏差。
【附圖說明】
[0018] 圖1為實現(xiàn)本發(fā)明各個實施例的移動終端一個可選的硬件結(jié)構(gòu)示意圖；
[0019] 圖2為實現(xiàn)本發(fā)明各個實施例的具有拍攝功能的移動終端的電氣結(jié)構(gòu)框圖；
[0020] 圖3為根據(jù)本發(fā)明的一個實施例的多幀拍攝圖像合成裝置的框圖；
[0021] 圖3A為根據(jù)本發(fā)明的一個實施例的多幀拍攝圖像合成裝置的原理圖；
[0022] 圖3B為根據(jù)本發(fā)明的一個實施例的多幀拍攝圖像合成裝置的工作流程圖；
[0023] 圖3C為根據(jù)本發(fā)明的一個實施例的多幀拍攝圖像合成裝置的原理圖；
[0024] 圖4為根據(jù)本發(fā)明的一個實施例的多幀拍攝圖像合成方法的流程圖；
[0025] 圖5為根據(jù)本發(fā)明的一個實施例的多幀拍攝圖像合成方法的流程圖。
[0026] 本發(fā)明目的的實現(xiàn)、功能特點及優(yōu)點將結(jié)合實施例，參照附圖做進一步說明。
【具體實施方式】
[0027] 應當理解，此處所描述的具體實施例僅僅用以解釋本發(fā)明，并不用于限定本發(fā)明。
[0028] 現(xiàn)在將參考附圖描述實現(xiàn)本發(fā)明各個實施例的移動終端。在后續(xù)的描述中，使用 用于表示元件的諸如"模塊"、"部件"或"單元"的后綴僅為了有利于本發(fā)明的說明，其本身 并沒有特定的意義。因此，"模塊"與"部件"可以混合地使用。
[0029] 移動終端可以以各種形式來實施。例如，本發(fā)明中描述的終端可以包括諸如移動 電話、智能電話、筆記本電腦、數(shù)字廣播接收器、PDA(個人數(shù)字助理）、PAD(平板電腦）、PMP (便攜式多媒體播放器）、導航裝置等等的移動終端以及諸如數(shù)字TV、臺式計算機等等的固 定終端。下面，假設終端是移動終端。然而，本領域技術人員將理解的是，除了特別用于移動 目的的元件之外，根據(jù)本發(fā)明的實施方式的構(gòu)造也能夠應用于固定類型的終端。
[0030] 圖1為可以實現(xiàn)本發(fā)明各個實施例的移動終端一個可選的硬件結(jié)構(gòu)示意圖。
[0031 ] 移動終端100可以包括無線通信單元110、Α/ν(音頻/視頻)輸入單元120、用戶輸入 單元130、輸出單元150、存儲器160、接口單元170、控制器180和電源單元190等等。圖1示出 了具有各種組件的移動終端，但是應理解的是，并不要求實施所有示出的組件。可以替代地 實施更多或更少的組件。將在下面詳細描述移動終端的元件。
[0032]無線通信單元110通常包括一個或多個組件，其允許移動終端100與無線通信系統(tǒng) 或網(wǎng)絡之間的無線電通信。例如，無線通信單元可以包括移動通信模塊112、無線互聯(lián)網(wǎng)模 塊113、短程通信模塊114中的至少一個。
[0033]移動通信模塊112將無線電信號發(fā)送到基站(例如，接入點、節(jié)點B等等）、外部終端 以及服務器中的至少一個和/或從其接收無線電信號。這樣的無線電信號可以包括語音通 話信號、視頻通話信號、或者根據(jù)文本和/或多媒體消息發(fā)送和/或接收的各種類型的數(shù)據(jù)。 [0034]無線互聯(lián)網(wǎng)模塊113支持移動終端的無線互聯(lián)網(wǎng)接入。該模塊可以內(nèi)部或外部地 耦接到終端。該模塊所涉及的無線互聯(lián)網(wǎng)接入技術可以包括WLAN(無線LAN)(Wi-Fi)、Wibro (無線寬帶）、Wimax (全球微波互聯(lián)接入）、HSDPA (高速下行鏈路分組接入)等等。
[0035] 短程通信模塊114是用于支持短程通信的模塊。短程通信技術的一些示例包括藍 牙?、射頻識別(RFID)、紅外數(shù)據(jù)協(xié)會(IrDA)、超寬帶(UWB)、紫蜂?等等。
[0036] A/V輸入單元120用于接收音頻或視頻信號。A/V輸入單元120可以包括相機121和 麥克風1220,相機121對在視頻捕獲模式或圖像捕獲模式中由圖像捕獲裝置獲得的靜態(tài)圖 片或視頻的圖像數(shù)據(jù)進行處理。處理后的圖像幀可以顯示在顯示單元151上。經(jīng)相機121處 理后的圖像幀可以存儲在存儲器160(或其它存儲介質(zhì)）中或者經(jīng)由無線通信單元110進行 發(fā)送，可以根據(jù)移動終端的構(gòu)造提供兩個或更多相機1210。麥克風122可以在電話通話模 式、記錄模式、語音識別模式等等運行模式中經(jīng)由麥克風接收聲音(音頻數(shù)據(jù)），并且能夠?qū)?這樣的聲音處理為音頻數(shù)據(jù)。處理后的音頻(語音)數(shù)據(jù)可以在電話通話模式的情況下轉(zhuǎn)換 為可經(jīng)由移動通信模塊112發(fā)送到移動通信基站的格式輸出。麥克風122可以實施各種類型 的噪聲消除（或抑制