專利名稱:圖像選擇與組合的方法與裝置的制作方法
技術(shù)領(lǐng)域:
本發(fā)明大體來(lái)說(shuō)涉及圖像選擇及組合。
背景技術(shù):
技術(shù)的進(jìn)步已產(chǎn)生更小且更強(qiáng)大的計(jì)算裝置。舉例來(lái)說(shuō),當(dāng)前存在包括無(wú)線計(jì)算裝置的多種便攜型個(gè)人計(jì)算裝置,例如體積小、重量輕且易于由用戶攜帶的便攜型無(wú)線電話、個(gè)人數(shù)字助理(PDA)及尋呼裝置。更具體來(lái)說(shuō),例如蜂窩式電話及因特網(wǎng)協(xié)議(IP)電話的便攜型無(wú)線電話可經(jīng)由無(wú)線網(wǎng)絡(luò)傳達(dá)語(yǔ)音及數(shù)據(jù)包。另外,許多這些無(wú)線電話包括并入于其中的其它類(lèi)型的裝置。舉例來(lái)說(shuō),無(wú)線電話還可包括數(shù)字照相機(jī)、數(shù)字?jǐn)z像機(jī)、數(shù)字記錄器及音頻文件播放器。又,這些無(wú)線電話可處理包括軟件應(yīng)用程序的可執(zhí)行指令,例如可用以接入因特網(wǎng)的網(wǎng)絡(luò)瀏覽器應(yīng)用程序。因而,這些無(wú)線電話可包括相當(dāng)大的計(jì)算能力。數(shù)字信號(hào)處理器(DSP)、圖像處理器及其它處理裝置被頻繁地用于包括數(shù)字相機(jī)或顯示由數(shù)字相機(jī)捕捉的圖像或視頻數(shù)據(jù)的便攜型個(gè)人計(jì)算裝置中。這些處理裝置可用以提供視頻及音頻功能、處理所接收的數(shù)據(jù)(例如,圖像數(shù)據(jù))或執(zhí)行其它功能。一種類(lèi)型的圖像處理涉及改良數(shù)字圖像的信噪比(SNI )。減少噪聲(例如,暗電流、光子噪聲及串?dāng)_)可得出更好的照片。弱光攝影的信噪比(SNR)可能為特別低的。減少圖像中的噪聲的一種方式為對(duì)圖像執(zhí)行低通濾波,同時(shí)使用邊緣檢測(cè)器來(lái)保護(hù)邊緣邊界。 然而,即使邊緣受到保護(hù),所述濾波還是會(huì)影響場(chǎng)景中的紋理,因?yàn)榭赡茈y以分清紋理與噪聲。減少噪聲的另一方式為組合兩個(gè)或兩個(gè)以上圖像,但此可能導(dǎo)致重像(ghosting)。減少噪聲的又一方式為組合兩個(gè)或兩個(gè)以上圖像的部分以便最小化重像。然而,此可能在計(jì)算上為成本高昂的且較不可能減少在移動(dòng)對(duì)象周?chē)脑肼?,因?yàn)榭墒褂幂^少宏塊。
發(fā)明內(nèi)容
相機(jī)能夠在“連續(xù)拍攝模式”中一次性拍攝許多照片。舉例來(lái)說(shuō),相機(jī)可能能夠每秒拍攝高達(dá)60張六百萬(wàn)像素(6MP)的照片??衫么思夹g(shù)以減少數(shù)字?jǐn)z影中常見(jiàn)的噪聲 (不僅針對(duì)弱光條件或手抖動(dòng)減少,而是針對(duì)所有照片)??芍饚刈粉櫪缫浑p眼睛的對(duì)象,且僅組合選定對(duì)象似乎在幀間固定的那些幀。在將照片合并在一起時(shí),僅組合那些幀會(huì)提供改良的結(jié)果。在一特定實(shí)施例中,揭示一種包括接收由圖像捕捉裝置捕捉的多個(gè)順序圖像的方法。所述方法包括選擇彼此對(duì)準(zhǔn)的多個(gè)順序圖像的子集。所述方法進(jìn)一步包括將來(lái)自多個(gè)順序圖像的子集中的每一圖像的像素值求平均值以產(chǎn)生經(jīng)組合的圖像。在另一實(shí)施例中,揭示一種包括圖像處理系統(tǒng)的設(shè)備,所述圖像處理系統(tǒng)經(jīng)配置以選擇彼此對(duì)準(zhǔn)的多個(gè)順序圖像的子集。所述圖像處理系統(tǒng)還經(jīng)配置以將來(lái)自多個(gè)順序圖像的子集中的每一圖像的像素值求平均值以產(chǎn)生經(jīng)組合的圖像。在另一實(shí)施例中,揭示一種包括經(jīng)配置以處理多個(gè)順序圖像的圖像處理電路的集成電路。所述圖像處理電路經(jīng)配置以選擇彼此對(duì)準(zhǔn)的多個(gè)順序圖像的子集。所述圖像處理
5電路還經(jīng)配置以將來(lái)自多個(gè)順序圖像的子集中的每一圖像的像素值求平均值以產(chǎn)生經(jīng)組合的圖像。在另一實(shí)施例中,揭示一種包括用于選擇彼此對(duì)準(zhǔn)的多個(gè)順序圖像的子集的裝置的設(shè)備。所述設(shè)備進(jìn)一步包括用于將來(lái)自多個(gè)順序圖像的子集中的每一圖像的像素值求平均值以產(chǎn)生經(jīng)組合的圖像的裝置。在另一實(shí)施例中,揭示一種存儲(chǔ)計(jì)算機(jī)可執(zhí)行代碼的計(jì)算機(jī)可讀媒體。所述計(jì)算機(jī)可讀媒體包括用于接收由圖像捕捉裝置捕捉的多個(gè)順序圖像的代碼。所述計(jì)算機(jī)可讀媒體還包括用于選擇彼此對(duì)準(zhǔn)的多個(gè)順序圖像的子集的代碼。所述計(jì)算機(jī)可讀媒體進(jìn)一步包括用于將來(lái)自多個(gè)順序圖像的子集中的每一圖像的像素值求平均值以產(chǎn)生經(jīng)組合的圖像的代碼。由所揭示的實(shí)施例提供的一個(gè)特定優(yōu)點(diǎn)為改良快照(snapshot)的信噪比(SNR) 而在焦點(diǎn)圖表(focus chart)上無(wú)清晰度的可感知損失的能力。舉例來(lái)說(shuō),可跨越所有通道 (例如,紅色(R)通道、綠色(G)通道及藍(lán)色(B)通道)顯著減少綠色斑塊(green patch) 標(biāo)準(zhǔn)偏差(STD)。由所揭示的實(shí)施例提供的另一優(yōu)點(diǎn)為系統(tǒng)可經(jīng)由單一參數(shù)調(diào)諧以使得用戶可在所要噪聲減少(要組合的圖像多到何種程度)與清晰度(要組合的圖像少到何種程度)之間作出取舍。系統(tǒng)可使用顯著性檢測(cè)(saliency detection)以便不會(huì)為了整體噪聲減少而犧牲關(guān)鍵區(qū)域(例如,面部及眼睛)的清晰度。系統(tǒng)可通過(guò)利用根據(jù)相機(jī)預(yù)覽進(jìn)行的面部檢測(cè)而具有減少的中央處理單元(CPU)復(fù)雜性。在審閱完整申請(qǐng)案之后,本發(fā)明的其它方面、優(yōu)點(diǎn)及特征將變得顯而易見(jiàn),完整申請(qǐng)案包括以下部分“
”、“具體實(shí)施方式
”及“權(quán)利要求書(shū)”。
圖1為圖像選擇及組合系統(tǒng)的特定說(shuō)明性實(shí)施例的框圖;圖2為彼此對(duì)準(zhǔn)的多個(gè)順序圖像的子集的第一實(shí)施例的說(shuō)明性圖;圖3為彼此對(duì)準(zhǔn)的多個(gè)順序圖像的子集的第二實(shí)施例的說(shuō)明性圖;圖4為彼此對(duì)準(zhǔn)的多個(gè)順序圖像的子集的第三實(shí)施例的說(shuō)明性圖;圖5為圖像選擇及組合的方法的第一說(shuō)明性實(shí)施例的流程圖;圖6為圖像選擇及組合的方法的第二說(shuō)明性實(shí)施例的流程圖;圖7為包括圖像選擇及組合模塊的裝置的特定實(shí)施例的框圖;及圖8為包括圖像選擇及組合模塊的便攜型通信裝置的特定實(shí)施例的框圖。
具體實(shí)施例方式參看圖1,展示圖像選擇及組合系統(tǒng)100的特定說(shuō)明性實(shí)施例的框圖。圖像選擇及組合系統(tǒng)100包括耦合到圖像處理系統(tǒng)130的圖像捕捉裝置101。圖像處理系統(tǒng)130耦合到圖像存儲(chǔ)裝置150。圖像存儲(chǔ)裝置150可為隨機(jī)存取存儲(chǔ)器(RAM)裝置或例如只讀存儲(chǔ)器(ROM)或閃存的非易失性存儲(chǔ)器裝置。圖像捕捉裝置101包括傳感器108、自動(dòng)對(duì)焦控制器104,及自動(dòng)曝光控制器106。自動(dòng)對(duì)焦控制器104及自動(dòng)曝光控制器106各自耦合到透鏡系統(tǒng)102。大體來(lái)說(shuō),圖像選擇及組合系統(tǒng)100包括圖像處理系統(tǒng)130以使得可選擇在由單一圖像捕捉命令引起的圖像“連續(xù)拍攝”中捕捉的圖像103的多個(gè)順序圖像107的子集 141,且使得可組合子集141以產(chǎn)生經(jīng)組合的圖像143。圖像捕捉裝置101可經(jīng)配置以在由單一圖像捕捉命令引起的圖像連續(xù)拍攝中捕捉圖像103的多個(gè)順序圖像107。舉例來(lái)說(shuō),圖像捕捉裝置101可經(jīng)配置以在約一秒的連續(xù)拍攝中捕捉高達(dá)約六十張順序圖像(各自具有高達(dá)約六百萬(wàn)像素(MP))。圖像處理系統(tǒng)130可經(jīng)配置以使用圖像選擇模塊140選擇彼此對(duì)準(zhǔn)的多個(gè)順序圖像107的子集141。圖像選擇模塊140可利用根據(jù)圖像預(yù)覽操作的面部檢測(cè)以選擇彼此對(duì)準(zhǔn)的多個(gè)順序圖像107的子集141?;蛘?,圖像選擇模塊140可利用根據(jù)圖像預(yù)覽操作的皮膚檢測(cè)以選擇彼此對(duì)準(zhǔn)的多個(gè)順序圖像107的子集141。圖像處理系統(tǒng)130還可經(jīng)配置以使用圖像組合模塊142將來(lái)自多個(gè)順序圖像107的子集141中的每一圖像的像素值求平均值以產(chǎn)生經(jīng)組合的圖像143。圖像處理系統(tǒng)130可經(jīng)進(jìn)一步配置以在使用圖像組合模塊 142將來(lái)自多個(gè)順序圖像107的子集141中的每一圖像的像素值求平均值以產(chǎn)生經(jīng)組合的圖像143之前,使用清晰化模塊145將彼此對(duì)準(zhǔn)的多個(gè)順序圖像107的子集141清晰化。在操作期間,圖像103的多個(gè)順序圖像是經(jīng)由透鏡系統(tǒng)102自動(dòng)對(duì)焦且自動(dòng)曝光且由傳感器108感測(cè)。包括多個(gè)順序圖像107的圖像數(shù)據(jù)被從傳感器108輸出(如由箭頭 109所示),且在到圖像處理管線的入口 131處輸入到圖像處理系統(tǒng)130。圖像數(shù)據(jù)在成為到色彩轉(zhuǎn)換裝置118的輸入117之前由白平衡裝置110、色彩校正裝置112、伽瑪校正裝置 114及明度調(diào)適裝置116依次處理。在色彩轉(zhuǎn)換裝置118中的色彩轉(zhuǎn)換之后,經(jīng)處理的圖像數(shù)據(jù)被輸入到圖像選擇模塊140。圖像選擇模塊140選擇彼此對(duì)準(zhǔn)的多個(gè)順序圖像107的子集141。圖像選擇模塊 140耦合到圖像組合模塊142,圖像組合模塊142將來(lái)自多個(gè)順序圖像107的子集141中的每一圖像的像素值求平均值以產(chǎn)生經(jīng)組合的圖像143。經(jīng)組合的圖像143可具有相對(duì)于用以產(chǎn)生經(jīng)組合的圖像143的多個(gè)順序圖像107的子集141中的每一圖像的減少的隨機(jī)噪聲。經(jīng)組合的圖像143為到圖像壓縮裝置120的輸入144及來(lái)自圖像處理系統(tǒng)130的在從圖像處理管線的出口 132處的輸出(如由箭頭121所示),及到圖像存儲(chǔ)裝置150的輸入。在替代實(shí)施例中,在圖像處理系統(tǒng)130的圖像處理管線的圖像選擇模塊140處執(zhí)行對(duì)彼此對(duì)準(zhǔn)的多個(gè)順序圖像107的子集141的選擇,而在將子集141存儲(chǔ)于圖像存儲(chǔ)裝置150中之后執(zhí)行將來(lái)自多個(gè)順序圖像107的子集141中的每一圖像的像素值求平均值以產(chǎn)生經(jīng)組合的圖像。在另一替代實(shí)施例中,在將多個(gè)順序圖像107存儲(chǔ)于圖像存儲(chǔ)裝置150 中之后執(zhí)行對(duì)彼此對(duì)準(zhǔn)的多個(gè)順序圖像107的子集的選擇以及將來(lái)自多個(gè)順序圖像107的子集中的每一圖像的像素值求平均值以產(chǎn)生經(jīng)組合的圖像。圖像選擇模塊140與圖像組合模塊142 —起可能使得可改良快照的信噪比(SNR) 而在焦點(diǎn)圖表上僅有很少或無(wú)清晰度的可感知損失。舉例來(lái)說(shuō),可跨越所有通道(例如,紅色(R)通道、綠色(G)通道及藍(lán)色(B)通道)減少綠色斑塊標(biāo)準(zhǔn)偏差(STD)。具有圖像選擇模塊140連同圖像組合模塊142的圖像處理系統(tǒng)130可經(jīng)由單一參數(shù)調(diào)諧以便用戶可在所要噪聲減少量(要組合的圖像多到何種程度)與清晰度(要組合的圖像少到何種程度) 之間作出取舍。單一參數(shù)可為要組合的圖像的數(shù)目。顯著性檢測(cè)(例如,圖像中的顯著特征的檢測(cè))可用以確保不會(huì)為了整體噪聲減少而犧牲關(guān)鍵區(qū)域(例如,面部及眼睛)的清晰度。具有圖像選擇模塊140連同圖像組合模塊142的圖像處理系統(tǒng)130可通過(guò)(例如)
7利用根據(jù)相機(jī)預(yù)覽操作的面部檢測(cè)而實(shí)現(xiàn)減少的中央處理單元(CPU)復(fù)雜性。參看圖2,展示彼此對(duì)準(zhǔn)的多個(gè)順序圖像200的子集的第一實(shí)施例的說(shuō)明性圖。在說(shuō)明性實(shí)施例中,多個(gè)順序圖像200類(lèi)似于圖1的多個(gè)順序圖像107。多個(gè)順序圖像中的每一者可被稱作幀??芍饚刈粉櫵P(guān)注區(qū)域224中的對(duì)象222??蛇x擇所關(guān)注區(qū)域224中的對(duì)象222呈現(xiàn)為固定的幀以組合或合并在一起。在對(duì)象222處于兩個(gè)幀中的相同所關(guān)注區(qū)域2M中時(shí),所述兩個(gè)幀可彼此對(duì)準(zhǔn)。舉例來(lái)說(shuō),幀202與204可彼此對(duì)準(zhǔn),因?yàn)閷?duì)象222 處于兩個(gè)幀中的所關(guān)注區(qū)域2M中。如圖2所示,可將每一圖像的像素值求平均值以產(chǎn)生經(jīng)組合的圖像226。在說(shuō)明性實(shí)施例中,經(jīng)組合的圖像2 類(lèi)似于圖1的經(jīng)組合的圖像143。在一些幀中,由于握持圖像選擇及組合系統(tǒng)100的手的移動(dòng),對(duì)象222可能不處于所關(guān)注區(qū)域224中。深色幀202、204、206、208及214可形成彼此對(duì)準(zhǔn)的多個(gè)順序圖像200 的子集。淺色幀210、212、216、218及220可能不與深色幀202、204、206、208及214對(duì)準(zhǔn)。 組合彼此未對(duì)準(zhǔn)的幀可導(dǎo)致“重像”,其中對(duì)象222呈現(xiàn)為處于經(jīng)組合的圖像中的兩處。舉例來(lái)說(shuō),圖2的深色幀202、204、206、208及214的子集在經(jīng)組合時(shí)可能具有最小化或減少在左上角中的所關(guān)注區(qū)域224中的重像的最佳機(jī)會(huì)。在特定實(shí)施例中,選擇彼此對(duì)準(zhǔn)的多個(gè)順序圖像200的子集包括實(shí)時(shí)檢測(cè)具有至少一個(gè)固定的所關(guān)注區(qū)域的第一組圖像(例如,深色幀202、204、206、208及214),其中對(duì)象222處于所關(guān)注區(qū)域224中;及移除不具有至少一個(gè)固定的所關(guān)注區(qū)域的第二組圖像(例如,淺色幀210、212、216、218及220),其中對(duì)象222不處于所關(guān)注區(qū)域224中。參看圖3,展示彼此對(duì)準(zhǔn)的多個(gè)順序圖像300的子集的第二實(shí)施例的說(shuō)明性圖。在說(shuō)明性實(shí)施例中,多個(gè)順序圖像300類(lèi)似于圖1的多個(gè)順序圖像107且類(lèi)似于圖2的多個(gè)順序圖像200。多個(gè)順序圖像的選定子集可包括非相鄰的或非順序的幀。舉例來(lái)說(shuō),由于相應(yīng)幀之間的固定的所關(guān)注區(qū)域的相互對(duì)準(zhǔn),深色幀302可與深色幀308、310、314、316及 318組合。淺色幀304、306、312及320由于所述相應(yīng)幀之間的固定的所關(guān)注區(qū)域未相互對(duì)準(zhǔn)而可能不組合。如下文更詳細(xì)描述,可基于在固定的所關(guān)注區(qū)域中的像素的至少一個(gè)通道(例如,紅色(R)、綠色(G)或藍(lán)色(B))中相應(yīng)圖像之間的像素值的絕對(duì)差的和(SAD,sum of absolute differences)選擇圖像。舉例來(lái)說(shuō),深色幀308、310、314、316及318可各自具有相對(duì)于在所關(guān)注區(qū)域(ROI)中的深色幀302的小于或等于閾值t的絕對(duì)差的和(SAD)。類(lèi)似地,淺色幀304、306、312及320可各自具有相對(duì)于在所關(guān)注區(qū)域(ROI)中的深色幀302 的大于閾值t的絕對(duì)差的和(SAD)。可基于相對(duì)于在所關(guān)注區(qū)域(ROI)中的深色幀302的絕對(duì)差的和(SAD)而向深色幀302、308、310、314、316及318指派用以組合幀的不透明度值 (如下文更詳細(xì)描述)。參看圖4,展示彼此對(duì)準(zhǔn)的多個(gè)順序圖像400的子集的第三實(shí)施例的說(shuō)明性圖。 在說(shuō)明性實(shí)施例中,多個(gè)順序圖像400類(lèi)似于圖1的多個(gè)順序圖像107、圖2的多個(gè)順序圖像200,及圖3的多個(gè)順序圖像300。多個(gè)順序圖像的選定子集可包括未處于幀序列的開(kāi)始處的幀。舉例來(lái)說(shuō),可組合深色幀408、410、412、414、416及418,因?yàn)闅w因于按壓圖1的圖像選擇及組合系統(tǒng)100的快照按鈕的手運(yùn)動(dòng)可能已使淺色幀402、404及406未良好對(duì)齊 (register)或未與深色幀 408、410、412、414、416 及 418 對(duì)準(zhǔn)。如下文更詳細(xì)描述,可基于在固定的所關(guān)注區(qū)域中的像素的至少一個(gè)通道(例如,明度(Y)、藍(lán)色色度(Cb)或紅色色度(Cr))中相應(yīng)圖像之間的像素值的差的平方的和 (SSD,sum of squares of differences)選擇圖像。舉例來(lái)說(shuō),深色幀 408、410、414、416 及 418可各自具有相對(duì)于在所關(guān)注區(qū)域(ROI)中的深色幀412的小于或等于閾值T的差的平方的和(SSD)。類(lèi)似地,淺色幀402、404、406及420可各自具有相對(duì)于在所關(guān)注區(qū)域(ROI) 中的深色幀412的大于閾值T的差的平方的和(SSD)??苫谙鄬?duì)于在所關(guān)注區(qū)域(ROI) 中的深色幀412的差的平方的和(SSD)而向深色幀408、410、412、414、416及418指派用以組合幀的不透明度值(如下文更詳細(xì)描述)。在特定實(shí)施例中,多個(gè)順序圖像的子集包括具有至少一個(gè)固定的所關(guān)注區(qū)域的圖像。舉例來(lái)說(shuō),圖2的幀202、204、206、208及214可具有處于左上角的至少一個(gè)固定的所關(guān)注區(qū)域224。在一些圖像中,至少一個(gè)固定的所關(guān)注區(qū)域可包括至少一雙眼睛。在特定實(shí)施例中,至少部分地基于在至少一個(gè)固定的所關(guān)注區(qū)域中的像素的至少一個(gè)通道中相應(yīng)圖像之間的像素值的絕對(duì)差的和(SAD)而選擇具有至少一個(gè)固定的所關(guān)注區(qū)域的圖像。舉例來(lái)說(shuō),在至少一個(gè)固定的所關(guān)注區(qū)域(ROI)中的像素i的紅色(R)通道中第一圖像(其被稱作圖像1)與第二圖像(其被稱作圖像幻之間的像素值的絕對(duì)差的和
(SAD)可由x4z^12= Σ定義,其中Ril為圖像1中的像素i的紅色值,且Ri2為圖像2
itzROI
中的像素i的紅色值。大體來(lái)說(shuō),在至少一個(gè)固定的所關(guān)注區(qū)域(ROI)中的像素i的α通道中圖像j與圖像k之間的像素值的絕對(duì)差的和(SAD)可由Σ N/—定義,其中
i <zR01
(例如)α =R,G,B或α =Y,Cb,Cr。如果在至少一個(gè)固定的所關(guān)注區(qū)域(ROI)中的像素 i的α通道中圖像j與圖像k相同,則SADajk = 0。對(duì)所有通道求和得出^^ν^Σ^Α^、
Ja
其為在至少一個(gè)固定的所關(guān)注區(qū)域(ROI)中的像素i的所有通道中圖像j與圖像k之間的像素值的絕對(duì)差的和(SAD),為就至少一個(gè)固定的所關(guān)注區(qū)域(ROI)中的像素i來(lái)說(shuō)圖像j 與圖像k之間的差異量的測(cè)量結(jié)果。在特定實(shí)施例中,至少部分地基于絕對(duì)差的和(SAD)處于閾值或低于閾值而選擇具有至少一個(gè)固定的所關(guān)注區(qū)域的圖像。舉例來(lái)說(shuō),對(duì)于為200像素乘80像素的固定的所關(guān)注區(qū)域來(lái)說(shuō),可使用閾值t = 500,使得當(dāng)像素值的絕對(duì)差的和(SAD)SADjkS t = 500時(shí), 可選擇圖像j與圖像k以組合。在特定實(shí)施例中,至少部分地基于絕對(duì)差的和(SAD)向具有至少一個(gè)固定的所關(guān)注區(qū)域的圖像各自指派不透明度值,其中不透明度值是用于將來(lái)自多個(gè)順序圖像的子集的像素值求平均值以產(chǎn)生經(jīng)組合的圖像。舉例來(lái)說(shuō),使用圖像j作為參考圖像,在像素值的絕對(duì)差的和(SAD)O ^ SADjk ^ 200時(shí),可向圖像k指派50 %的不透明度值;在 201 ( SADjk ^ 300時(shí),可向圖像k指派40%的不透明度值;在301 ( SADjk ^ 400時(shí),可向圖像k指派30%的不透明度值;及在401 ^ SADjkS 500時(shí),可向圖像k指派20%的不透明度值。在組合選定圖像時(shí),不透明度值可用以產(chǎn)生用以施加到像素值的權(quán)重。舉例來(lái)說(shuō), 在四個(gè)圖像具有相對(duì)于基礎(chǔ)或參考圖像的低的絕對(duì)差的和(SAD)時(shí),所述四個(gè)圖像的不透明度值可分別為50^^50^^40%及20%。可向基礎(chǔ)或參考圖像指派具有最低的絕對(duì)差的和(SAD)的圖像的不透明度值,在此狀況下其為50%的不透明度值。用以施加于每一圖像
9的像素值的權(quán)重可能等于所述圖像的不透明度值除以待組合的圖像的所有不透明度值的和。此處,待組合的圖像的所有不透明度值的和為50+50+50+40+20 = 210。舉例來(lái)說(shuō),基礎(chǔ)或參考圖像的紅色、綠色及藍(lán)色像素值均可乘以50/210 ;具有50%的不透明度值的其它圖像中的每一者的紅色、綠色及藍(lán)色像素值還可乘以50/210 ;具有40%的不透明度值的圖像的紅色、綠色及藍(lán)色像素值可乘以40/210 ;且具有20%的不透明度值的圖像的紅色、綠色及藍(lán)色像素值可乘以20/210??蓪⑽鍌€(gè)圖像的加權(quán)像素值求平均值以產(chǎn)生經(jīng)組合的圖像。在特定實(shí)施例中,至少部分地基于在至少一個(gè)固定的所關(guān)注區(qū)域中的像素的至少一個(gè)通道中相應(yīng)圖像之間的像素值的差的平方的和(SSD)而選擇具有至少一個(gè)固定的所關(guān)注區(qū)域的圖像。舉例來(lái)說(shuō),在至少一個(gè)固定的所關(guān)注區(qū)域(ROI)中的像素i的紅色(R)通道中第一圖像(其被稱作圖像1)與第二圖像(其被稱作圖像幻之間的像素值的差的平方
的和(SSD)可由5^Am = Σ (Rn - Ra P定義,其中Ril為圖像1中的像素i的紅色值,且Ri2為
iczROI
圖像2中的像素i的紅色值。大體來(lái)說(shuō),在至少一個(gè)固定的所關(guān)注區(qū)域(ROI)中的像素i的 α通道中圖像j與圖像k之間的像素值的差的平方的和(SSD)可由Σ (^- )2
icROI
定義,其中(例如)α =R,G,B或α =Y, Cb,Cr。如果在至少一個(gè)固定的所關(guān)注區(qū)域 (ROI)中的像素i的α通道中圖像j與圖像k相同,則SSD”k = 0。對(duì)所有通道求和得出
SSDjk=^SSDajk ,其為在至少一個(gè)固定的所關(guān)注區(qū)域(R0I)中的像素i的所有通道中圖像
a
j與圖像k之間的像素值的差的平方的和(SSD),為就至少一個(gè)固定的所關(guān)注區(qū)域(ROI)中的像素i來(lái)說(shuō)圖像j與圖像k之間的差異量的測(cè)量結(jié)果。在特定實(shí)施例中,至少部分地基于差的平方的和(SSD)處于閾值或低于閾值而選擇具有至少一個(gè)固定的所關(guān)注區(qū)域的圖像。舉例來(lái)說(shuō),對(duì)于為200像素乘80像素的固定的所關(guān)注區(qū)域來(lái)說(shuō),可使用閾值T = 500,使得當(dāng)像素值的差的平方的和(SSD) SSDjkS T = 500 時(shí),可選擇圖像j與圖像k以組合。在特定實(shí)施例中,至少部分地基于差的平方的和(SSD)向具有至少一個(gè)固定的所關(guān)注區(qū)域的圖像各自指派不透明度值,其中不透明度值是用于將來(lái)自多個(gè)順序圖像的子集的像素值求平均值以產(chǎn)生經(jīng)組合的圖像。舉例來(lái)說(shuō),使用圖像j作為參考圖像,在像素值的差的平方的和(SSD)O ( SSDjk ( 200時(shí),可向圖像k指派50%的不透明度值;在 201 ( SSDjk ^ 300時(shí),可向圖像k指派40%的不透明度值;在301 ( SSDjk ^ 400時(shí),可向圖像k指派30%的不透明度值;及在401 ^ SSDjkS 500時(shí),可向圖像k指派20%的不透明度值。在組合選定圖像時(shí),不透明度值可用以產(chǎn)生用以施加于像素值的權(quán)重。舉例來(lái)說(shuō), 在三個(gè)圖像具有相對(duì)于基礎(chǔ)或參考圖像的低的差的平方的和(SSD)時(shí),所述三個(gè)圖像的不透明度值可分別為50%、40%及20%。可向基礎(chǔ)或參考圖像指派具有最低的差的平方的和(SSD)的圖像的不透明度值,在此狀況下其為50%的不透明度值。用以施加于每一圖像的像素值的權(quán)重可等于所述圖像的不透明度值除以待組合的圖像的所有不透明度值的和。 此處,待組合的圖像的所有不透明度值的和為50+50+40+20 = 160。舉例來(lái)說(shuō),基礎(chǔ)或參考圖像的紅色、綠色及藍(lán)色像素值均可乘以50/160 ;具有50%的不透明度值的其它圖像的紅色、綠色及藍(lán)色像素值還可乘以50/160 ;具有40%的不透明度值的圖像的紅色、綠色及藍(lán)色像素值可乘以40/160 ;且具有20%的不透明度值的圖像的紅色、綠色及藍(lán)色像素值可乘以20/160??蓪⑺膫€(gè)圖像的加權(quán)像素值求平均值以產(chǎn)生經(jīng)組合的圖像??蛇x擇產(chǎn)生絕對(duì)差的和(SAD)的最低集合或產(chǎn)生差的平方的和(SSD)的最低集合的基礎(chǔ)或參考圖像。舉例來(lái)說(shuō),對(duì)于η個(gè)圖像來(lái)說(shuō),每一圖像可依次被選擇為基礎(chǔ)或參考圖像,且可計(jì)算所有其它(η-1)個(gè)圖像的相對(duì)于所述基礎(chǔ)或參考圖像的絕對(duì)差的和(SAD)或差的平方的和(SSD)。可預(yù)定要組合的圖像的數(shù)目m,且接著可選擇基礎(chǔ)或參考圖像。以此方式,可找出提供絕對(duì)差的和(SAD)或差的平方的和(SSD)的最低群組(m個(gè)圖像)的基礎(chǔ)或參考圖像。舉例來(lái)說(shuō),m可能等于三或四。在相機(jī)不能存儲(chǔ)所有η個(gè)圖像且一旦存在彼此適當(dāng)對(duì)準(zhǔn)的m個(gè)圖像就將停止處理由單一捕捉命令引起的圖像連續(xù)拍攝的圖像時(shí),所述搜索方法可為有用的。可在運(yùn)作中(on-the-fly)在圖像處理系統(tǒng)130中的硬件中或之后在圖像存儲(chǔ)裝置150中執(zhí)行圖像處理。在此搜索方法中,可使用不同于一的增量。舉例來(lái)說(shuō),可將每第五個(gè)圖像作為基礎(chǔ)或參考圖像來(lái)進(jìn)行評(píng)估??稍趫D像間使握持圖像捕捉裝置的手的運(yùn)動(dòng)與被拍攝物的運(yùn)動(dòng)相關(guān)。如果給定圖像在用作基礎(chǔ)或參考圖像時(shí)產(chǎn)生超出閾值的絕對(duì)差的和(SAD)或差的平方的和(SSD)的群組,則在給定圖像附近的圖像可能同樣如此。可使用二進(jìn)制搜索方法。舉例來(lái)說(shuō),如果存在 100個(gè)圖像,則可將圖像25、50及75選擇為基礎(chǔ)或參考圖像。視哪一基礎(chǔ)圖像產(chǎn)生絕對(duì)差的和(SAD)或差的平方的和(SSD)的最低群組而定,可將搜索間隔減半。舉例來(lái)說(shuō),如果作為基礎(chǔ)或參考圖像的圖像75產(chǎn)生絕對(duì)差的和(SAD)或差的平方的和(SSD)的最低群組,則可使用為12的搜索間隔而非為25的間隔,以使得圖像63及87可用作基礎(chǔ)或參考圖像。如果作為基礎(chǔ)或參考圖像的圖像63產(chǎn)生絕對(duì)差的和(SAD)或差的平方的和(SSD)的最低群組,則可使用為6的搜索間隔而非為12的間隔,以使得圖像57及69可用作基礎(chǔ)或參考圖像。二進(jìn)制搜索可繼續(xù)直到搜索間隔為一個(gè)圖像為止。在特定實(shí)施例中,在將來(lái)自多個(gè)順序圖像的子集中的每一圖像的像素值求平均值之前將所述多個(gè)順序圖像的子集清晰化。舉例來(lái)說(shuō),圖1的多個(gè)順序圖像107的子集141 在于圖像組合模塊142中經(jīng)組合之前可在清晰化模塊145中經(jīng)清晰化。在特定實(shí)施例中, 選擇彼此對(duì)準(zhǔn)的多個(gè)順序圖像200的子集包括實(shí)時(shí)檢測(cè)具有至少一個(gè)固定的所關(guān)注區(qū)域的第一組圖像(例如,深色幀202、204、206、208及214),其中對(duì)象222處于所關(guān)注區(qū)域2M 中;及移除不具有至少一個(gè)固定的所關(guān)注區(qū)域的第二組圖像(例如,淺色幀210、212、216、 218及220),其中對(duì)象222不處于所關(guān)注區(qū)域224中。在特定實(shí)施例中,在選擇彼此對(duì)準(zhǔn)的多個(gè)順序圖像的子集之前接收由圖1的圖像捕捉裝置101捕捉的高達(dá)六十個(gè)順序圖像。參看圖5,在500處展示選擇并組合彼此對(duì)準(zhǔn)的多個(gè)順序圖像的方法的第一說(shuō)明性實(shí)施例的流程圖。舉例來(lái)說(shuō),可由圖1的圖像選擇及組合系統(tǒng)100執(zhí)行方法500。方法 500包括在連續(xù)拍攝中捕捉η個(gè)順序圖像(在502處)。舉例來(lái)說(shuō),可在約一秒的連續(xù)拍攝中捕捉高達(dá)約六十個(gè)順序圖像,其各自具有六百萬(wàn)像素(MP)。方法500還包括確定η個(gè)順序圖像中的第一圖像中的所關(guān)注區(qū)域(在504處)。舉例來(lái)說(shuō),所關(guān)注區(qū)域可為一雙眼睛。 如圖2所示,所關(guān)注區(qū)域2 可具有固定對(duì)象222。方法500進(jìn)一步包括確定各自具有所關(guān)注區(qū)域的小于閾值的絕對(duì)差的和(SAD)的 m個(gè)順序圖像(在506處)。舉例來(lái)說(shuō),m可在約二至約十的范圍中。在所關(guān)注區(qū)域?yàn)榧s200 像素乘約80像素時(shí),閾值可為約500。如圖3所示,深色幀308、310、314、316及318的子集可各自具有相對(duì)于在所關(guān)注區(qū)域(ROI)中的深色幀302的小于或等于閾值t的絕對(duì)差的和 (SAD)。方法500還包括基于每一所關(guān)注區(qū)域相對(duì)于第一圖像中的所關(guān)注區(qū)域的絕對(duì)差的和(SAD)而確定m個(gè)順序圖像中的每一者的不透明度值(在508處)。舉例來(lái)說(shuō),使用圖像j作為第一圖像,在像素值的絕對(duì)差的和(SAD)O ( SADjk ^ 200時(shí),可向圖像k指派50%的不透明度值;在201 ^ SADjk ^ 300時(shí),可向圖像k指派40 %的不透明度值;在 301 ( SADjk ^ 400時(shí),可向圖像k指派30%的不透明度值;且在401 ( SADjk ^ 500時(shí),可向圖像k指派20%的不透明度值。第一圖像具有SADjj = O,所以第一圖像可包括于各自具有每一所關(guān)注區(qū)域的小于閾值的絕對(duì)差的和(SAD)的m個(gè)順序圖像中。方法500進(jìn)一步包括使用m個(gè)順序圖像中的每一者的不透明度值而將m個(gè)順序圖像合并在一起(在510處)。舉例來(lái)說(shuō),對(duì)于m= 5來(lái)說(shuō),在四個(gè)圖像具有相對(duì)于第一圖像的低的絕對(duì)差的和(SAD)時(shí),所述四個(gè)圖像的不透明度值可分別為50^^40^^40%及 20%??上虻谝粓D像指派50%的不透明度值。用以施加于每一圖像的像素值的權(quán)重可能等于所述圖像的不透明度值除以待組合的圖像的所有不透明度值的和,其中在此狀況下所有不透明度值的和為50+50+40+40+20 = 200。舉例來(lái)說(shuō),第一圖像的紅色、綠色及藍(lán)色像素值均可乘以50/200 ;具有50%的不透明度值的其它圖像的紅色、綠色及藍(lán)色像素值還可乘以50/200 ;具有40%的不透明度值的圖像中的每一者的紅色、綠色及藍(lán)色像素值可乘以 40/200 ;且具有20%的不透明度值的圖像的紅色、綠色及藍(lán)色像素值可乘以20/200??山又鴮 = 5個(gè)順序圖像的經(jīng)適當(dāng)加權(quán)的像素值求平均值以產(chǎn)生經(jīng)組合或經(jīng)合并的圖像。參看圖6,在600處展示選擇并組合彼此對(duì)準(zhǔn)的多個(gè)順序圖像的方法的第二說(shuō)明性實(shí)施例的流程圖。方法600包括接收由圖像捕捉裝置捕捉的多個(gè)順序圖像(在602處)。 舉例來(lái)說(shuō),多個(gè)順序圖像107可由圖1的圖像捕捉裝置101捕捉。方法600還包括選擇彼此對(duì)準(zhǔn)的多個(gè)順序圖像的子集(在604處)。舉例來(lái)說(shuō),圖2的深色幀202、204、206、208及 214可經(jīng)選擇為彼此對(duì)準(zhǔn)的多個(gè)順序圖像200的子集。方法600進(jìn)一步包括將來(lái)自多個(gè)順序圖像的子集中的每一圖像的像素值求平均值以產(chǎn)生經(jīng)組合的圖像(在606處)。舉例來(lái)說(shuō),可將來(lái)自圖2的深色幀202、204、206、208及214中的每一者的像素值求平均值以產(chǎn)生類(lèi)似于經(jīng)組合的圖像226的經(jīng)組合的圖像。方法600還包括在將來(lái)自多個(gè)順序圖像的子集中的每一圖像的像素值求平均值之前將所述多個(gè)順序圖像的子集清晰化(在608處)。舉例來(lái)說(shuō),圖1的多個(gè)順序圖像107 的子集141在于圖像組合模塊142中經(jīng)組合之前可在清晰化模塊145中經(jīng)清晰化。方法 600進(jìn)一步包括實(shí)時(shí)檢測(cè)具有至少一個(gè)固定的所關(guān)注區(qū)域的第一組圖像(在610處)。舉例來(lái)說(shuō),選擇圖2的彼此對(duì)準(zhǔn)的多個(gè)順序圖像200的子集可包括實(shí)時(shí)檢測(cè)具有至少一個(gè)固定的所關(guān)注區(qū)域的第一組圖像(例如,深色幀202、204、206、208及214),其中對(duì)象222處于所關(guān)注區(qū)域224中。方法600還包括移除不具有至少一個(gè)固定的所關(guān)注區(qū)域的第二組圖像 (在612處)。舉例來(lái)說(shuō),選擇圖2的彼此對(duì)準(zhǔn)的多個(gè)順序圖像200的子集可包括移除不具有至少一個(gè)固定的所關(guān)注區(qū)域的第二組圖像(例如,淺色幀210、212、216、218及220),其中對(duì)象222不處于所關(guān)注區(qū)域224中。在一特定實(shí)施例中,設(shè)備包括用于選擇彼此對(duì)準(zhǔn)的多個(gè)順序圖像的子集的裝置。 用于選擇彼此對(duì)準(zhǔn)的多個(gè)順序圖像的子集的裝置可包括圖像處理系統(tǒng)(例如,圖1的具有圖像選擇模塊140的圖像處理系統(tǒng)130)、圖像處理電路、對(duì)應(yīng)硬件、固件或其任何組合。舉例來(lái)說(shuō),圖1的具有圖像選擇模塊140的圖像處理系統(tǒng)130可經(jīng)編程以執(zhí)行算法來(lái)選擇彼此對(duì)準(zhǔn)的多個(gè)順序圖像的子集。所述設(shè)備進(jìn)一步包括用于將來(lái)自多個(gè)順序圖像的子集中的每一圖像的像素值求平均值以產(chǎn)生經(jīng)組合的圖像的裝置。所述用于將來(lái)自多個(gè)順序圖像的子集中的每一圖像的像素值求平均值以產(chǎn)生經(jīng)組合的圖像的裝置可包括圖像處理系統(tǒng) (例如,圖1的具有圖像組合模塊142的圖像處理系統(tǒng)130)、圖像處理電路、對(duì)應(yīng)硬件、固件或其任何組合。舉例來(lái)說(shuō),圖1的具有圖像組合模塊142的圖像處理系統(tǒng)130可經(jīng)編程以執(zhí)行算法來(lái)將來(lái)自多個(gè)順序圖像的子集中的每一圖像的像素值求平均值以產(chǎn)生經(jīng)組合的圖像。圖7為包括圖像選擇及圖像組合模塊的系統(tǒng)700的特定實(shí)施例的框圖。系統(tǒng)700 包括圖像傳感器裝置722,所述圖像傳感器裝置722耦合到透鏡768且還耦合到便攜型多媒體裝置的應(yīng)用處理器芯片組770。圖像傳感器裝置722包括圖像選擇及圖像組合模塊764, 其用以例如通過(guò)實(shí)施圖1的圖像選擇模塊140及圖像組合模塊142、通過(guò)根據(jù)圖5至圖6的實(shí)施例中的任一者操作,或其任何組合而選擇彼此對(duì)準(zhǔn)的多個(gè)順序圖像的子集且將來(lái)自多個(gè)順序圖像的子集中的每一圖像的像素值求平均值以產(chǎn)生經(jīng)組合的圖像。圖像選擇及圖像組合模塊764經(jīng)耦合以(例如)經(jīng)由模/數(shù)轉(zhuǎn)換器7 (其經(jīng)耦合以接收?qǐng)D像陣列766的輸出)從圖像陣列766接收?qǐng)D像數(shù)據(jù)且將所述圖像數(shù)據(jù)提供到圖像選擇及圖像組合模塊764。圖像傳感器裝置722還可包括處理器710。在特定實(shí)施例中,處理器710經(jīng)配置以實(shí)施圖像選擇及圖像組合模塊764。在另一實(shí)施例中,圖像選擇及圖像組合模塊764經(jīng)實(shí)施為圖像處理電路。在特定實(shí)施例中,包括圖像處理電路的集成電路經(jīng)配置以處理多個(gè)順序圖像。所述圖像處理電路經(jīng)配置以選擇彼此對(duì)準(zhǔn)的多個(gè)順序圖像的子集。舉例來(lái)說(shuō),圖2的幀202、 204,206,208及214可經(jīng)選擇為彼此對(duì)準(zhǔn)的多個(gè)順序圖像的子集。圖像處理電路還經(jīng)配置以將來(lái)自多個(gè)順序圖像的子集中的每一圖像的像素值求平均值以產(chǎn)生經(jīng)組合的圖像。舉例來(lái)說(shuō),可將來(lái)自圖2的幀202、204、206、208及214中的每一者的像素值求平均值以產(chǎn)生經(jīng)組合的圖像。處理器710還可經(jīng)配置以執(zhí)行額外圖像處理操作(例如,由圖像處理系統(tǒng)執(zhí)行的操作中的一者或一者以上)。處理器710可將經(jīng)處理的圖像數(shù)據(jù)提供到便攜型多媒體裝置的應(yīng)用處理器芯片組770以用于進(jìn)一步處理、傳輸、存儲(chǔ)、顯示或其任何組合。圖8為具有圖像選擇及圖像組合模塊及用以顯示經(jīng)組合的圖像的顯示器的無(wú)線通信裝置800的實(shí)施例的框圖。無(wú)線通信裝置800可包括便攜型裝置,所述便攜型裝置包括耦合到存儲(chǔ)器832的處理器810(例如,數(shù)字信號(hào)處理器(DSP)或微控制器)。存儲(chǔ)器832為用以存儲(chǔ)計(jì)算機(jī)代碼842的可讀有形媒體,計(jì)算機(jī)代碼842在由處理器810執(zhí)行時(shí)使處理器810執(zhí)行用于圖像選擇及圖像組合的操作且執(zhí)行其它過(guò)程。處理器810包括圖像選擇及圖像組合模塊862。在說(shuō)明性實(shí)例中,圖像選擇及圖像組合模塊862例如通過(guò)實(shí)施圖1的圖像選擇模塊140及圖像組合模塊142,通過(guò)根據(jù)圖5至圖6的實(shí)施例中的任一者進(jìn)行操作, 或其任何組合而選擇彼此對(duì)準(zhǔn)的多個(gè)順序圖像的子集,且將來(lái)自多個(gè)順序圖像的子集中的每一圖像的像素值求平均值以產(chǎn)生經(jīng)組合的圖像。圖像選擇及圖像組合模塊862可處于處
13理器810中或可為沿著硬件圖像處理管線的單獨(dú)裝置或電路,或其組合。在圖像選擇及圖像組合模塊862的實(shí)施方案中,例如存儲(chǔ)器832的計(jì)算機(jī)可讀媒體包括用于接收由圖像捕捉裝置捕捉的多個(gè)順序圖像的計(jì)算機(jī)可執(zhí)行代碼842。舉例來(lái)說(shuō), 處理器810可使用計(jì)算機(jī)可執(zhí)行代碼842來(lái)接收由圖像捕捉裝置(例如,相機(jī)870)捕捉的多個(gè)順序圖像。舉例來(lái)說(shuō),相機(jī)870可為數(shù)字照相機(jī)。例如存儲(chǔ)器832的計(jì)算機(jī)可讀媒體還包括用于選擇彼此對(duì)準(zhǔn)的多個(gè)順序圖像的子集的計(jì)算機(jī)可執(zhí)行代碼842。舉例來(lái)說(shuō),具有圖像選擇及圖像組合模塊862的處理器810可使用計(jì)算機(jī)可執(zhí)行代碼842來(lái)選擇彼此對(duì)準(zhǔn)的多個(gè)順序圖像的子集。例如存儲(chǔ)器832的計(jì)算機(jī)可讀媒體進(jìn)一步包括用于將來(lái)自多個(gè)順序圖像的子集中的每一圖像的像素值求平均值以產(chǎn)生經(jīng)組合的圖像的計(jì)算機(jī)可執(zhí)行代碼 842。舉例來(lái)說(shuō),具有圖像選擇及圖像組合模塊862的處理器810可使用計(jì)算機(jī)可執(zhí)行代碼 842將來(lái)自多個(gè)順序圖像的子集中的每一圖像的像素值求平均值以產(chǎn)生經(jīng)組合的圖像。相機(jī)接口 868耦合到處理器810且還耦合到相機(jī)870。相機(jī)870可為照相機(jī)。顯示器控制器擬6耦合到處理器810且耦合到顯示裝置828。在特定實(shí)施例中,多個(gè)順序圖像包括代表物理對(duì)象的數(shù)據(jù),且將來(lái)自多個(gè)順序圖像的子集中的每一圖像的像素值求平均值會(huì)轉(zhuǎn)換所述數(shù)據(jù)以減少經(jīng)組合的圖像中的噪聲量。可經(jīng)由顯示裝置擬8顯示經(jīng)轉(zhuǎn)換的數(shù)據(jù)。音頻控制器834還可耦合到處理器810。揚(yáng)聲器836及麥克風(fēng)838可耦合到音頻控制器834。無(wú)線接口 840可耦合到處理器810且耦合到天線842。用于接收輸入且將輸入耦合到系統(tǒng)800的輸入裝置830還可由輸入控制器831耦合到系統(tǒng)800。在圖8的系統(tǒng)的操作期間,用戶可使用相機(jī)870拍照。由相機(jī)870捕捉的圖像數(shù)據(jù)經(jīng)由相機(jī)接口 868耦合到處理器810。處理器810內(nèi)的圖像選擇及圖像組合模塊862可根據(jù)存儲(chǔ)于存儲(chǔ)器832中的計(jì)算機(jī)代碼842選擇彼此對(duì)準(zhǔn)的多個(gè)順序圖像的子集且可將來(lái)自多個(gè)順序圖像的子集中的每一圖像的像素值求平均值以產(chǎn)生經(jīng)組合的圖像。顯示器828 可顯示經(jīng)組合的圖像??捎上到y(tǒng)800經(jīng)由無(wú)線接口 840及天線842無(wú)線地傳輸由相機(jī)870 捕捉的圖像。經(jīng)捕捉的圖像還可存儲(chǔ)于存儲(chǔ)器832中。所屬領(lǐng)域的技術(shù)人員應(yīng)進(jìn)一步了解,結(jié)合本文中所揭示的實(shí)施例而描述的各種說(shuō)明性邏輯塊、配置、模塊、電路及算法步驟可實(shí)施為電子硬件、計(jì)算機(jī)軟件或兩者的組合。為了清楚地說(shuō)明硬件與軟件的此可互換性,各種說(shuō)明性組件、塊、配置、模塊、電路及步驟已在上文大體上按其功能性而加以描述。所述功能性是實(shí)施為硬件還是軟件,要視特定應(yīng)用及強(qiáng)加于整個(gè)系統(tǒng)上的設(shè)計(jì)約束而定。所屬領(lǐng)域的技術(shù)人員可針對(duì)每一特定應(yīng)用以變化的方式來(lái)實(shí)施所描述的功能性,但所述實(shí)施決策不應(yīng)被解釋為導(dǎo)致脫離本發(fā)明的范疇。結(jié)合本文中所揭示的實(shí)施例而描述的方法或算法的步驟可直接以硬件、以由處理器執(zhí)行的軟件模塊或以兩者的組合體現(xiàn)。軟件模塊可駐存于隨機(jī)存取存儲(chǔ)器(RAM)、閃存、 只讀存儲(chǔ)器(ROM)、可編程只讀存儲(chǔ)器(PR0M)、可擦除可編程只讀存儲(chǔ)器(EPROM)、電可擦除可編程只讀存儲(chǔ)器(EEPROM)、寄存器、硬盤(pán)、可裝卸盤(pán)、壓縮光盤(pán)只讀存儲(chǔ)器(CD-ROM), 或此項(xiàng)技術(shù)中已知的任何其它形式的存儲(chǔ)媒體中。示范性存儲(chǔ)媒體耦合到處理器,使得處理器可從存儲(chǔ)媒體讀取信息及將信息寫(xiě)入到存儲(chǔ)媒體。在替代例中,存儲(chǔ)媒體可與處理器成一體。處理器及存儲(chǔ)媒體可駐留于專用集成電路(ASIC)中。ASIC可駐留于計(jì)算裝置或用戶終端中。在替代例中,處理器及存儲(chǔ)媒體可作為離散組件而駐留于計(jì)算裝置或用戶終端中。
提供所揭示實(shí)施例的先前描述以使任何所屬領(lǐng)域的技術(shù)人員能夠制作或使用所揭示的實(shí)施例。對(duì)于所屬領(lǐng)域的技術(shù)人員來(lái)說(shuō),對(duì)這些實(shí)施例的各種修改將為容易顯而易見(jiàn)的,且可在不脫離本發(fā)明的精神或范疇的情況下將本文中所定義的一般原理應(yīng)用于其它實(shí)施例。因此,本發(fā)明不意在限于本文所示的實(shí)施例,而是應(yīng)被賦予與如由所附權(quán)利要求書(shū)所定義的原理及新穎特征一致的可能的最廣范疇。
權(quán)利要求
1.一種方法,其包含接收由圖像捕捉裝置捕捉的多個(gè)順序圖像;選擇彼此對(duì)準(zhǔn)的所述多個(gè)順序圖像的子集;及將來(lái)自所述多個(gè)順序圖像的所述子集中的每一圖像的像素值求平均值以產(chǎn)生經(jīng)組合的圖像。
2.根據(jù)權(quán)利要求1所述的方法,其中所述多個(gè)順序圖像的所述子集包括具有至少一個(gè)固定的所關(guān)注區(qū)域的圖像。
3.根據(jù)權(quán)利要求1所述的方法,其中所述多個(gè)順序圖像包括代表物理對(duì)象的數(shù)據(jù),且其中將來(lái)自所述多個(gè)順序圖像的所述子集中的每一圖像的所述像素值求平均值會(huì)轉(zhuǎn)換所述數(shù)據(jù)以減少所述經(jīng)組合的圖像中的噪聲量,且進(jìn)一步包含經(jīng)由顯示裝置顯示所述經(jīng)轉(zhuǎn)換的數(shù)據(jù)。
4.根據(jù)權(quán)利要求2所述的方法,其中至少部分地基于所述至少一個(gè)固定的所關(guān)注區(qū)域中的像素的至少一個(gè)通道中相應(yīng)圖像之間的像素值的絕對(duì)差的和而選擇具有所述至少一個(gè)固定的所關(guān)注區(qū)域的所述圖像。
5.根據(jù)權(quán)利要求4所述的方法,其中至少部分地基于絕對(duì)差的所述和處于閾值或低于閾值而選擇具有所述至少一個(gè)固定的所關(guān)注區(qū)域的所述圖像。
6.根據(jù)權(quán)利要求4所述的方法,其中至少部分地基于絕對(duì)差的所述和而向具有所述至少一個(gè)固定的所關(guān)注區(qū)域的所述圖像各自指派不透明度值,其中所述不透明度值是用于將來(lái)自所述多個(gè)順序圖像的所述子集的所述像素值求平均值以產(chǎn)生所述經(jīng)組合的圖像。
7.根據(jù)權(quán)利要求2所述的方法,其中至少部分地基于所述至少一個(gè)固定的所關(guān)注區(qū)域中的像素的至少一個(gè)通道中相應(yīng)圖像之間的像素值的差的平方的和而選擇具有所述至少一個(gè)固定的所關(guān)注區(qū)域的所述圖像。
8.根據(jù)權(quán)利要求7所述的方法,其中至少部分地基于差的平方的所述和處于閾值或低于閾值而選擇具有所述至少一個(gè)固定的所關(guān)注區(qū)域的所述圖像。
9.根據(jù)權(quán)利要求7所述的方法,其中至少部分地基于差的平方的所述和而向具有所述至少一個(gè)固定的所關(guān)注區(qū)域的所述圖像各自指派不透明度值,其中所述不透明度值是用于將來(lái)自所述多個(gè)順序圖像的所述子集的所述像素值求平均值以產(chǎn)生所述經(jīng)組合的圖像。
10.根據(jù)權(quán)利要求1所述的方法,其進(jìn)一步包含在將來(lái)自所述多個(gè)順序圖像的所述子集中的每一圖像的像素值求平均值之前將所述多個(gè)順序圖像的所述子集清晰化。
11.根據(jù)權(quán)利要求1所述的方法,其中選擇彼此對(duì)準(zhǔn)的所述多個(gè)順序圖像的所述子集包括實(shí)時(shí)檢測(cè)具有至少一個(gè)固定的所關(guān)注區(qū)域的第一組圖像且移除不具有所述至少一個(gè)固定的所關(guān)注區(qū)域的第二組圖像。
12.根據(jù)權(quán)利要求11所述的方法,其中在選擇彼此對(duì)準(zhǔn)的所述多個(gè)順序圖像的所述子集之前接收由所述圖像捕捉裝置捕捉的高達(dá)六十個(gè)順序圖像。
13.根據(jù)權(quán)利要求1所述的方法,其進(jìn)一步包含在連續(xù)拍攝中捕捉η個(gè)順序圖像;確定所述η個(gè)順序圖像中的第一圖像中的所關(guān)注區(qū)域;確定m個(gè)順序圖像,其各自具有小于閾值的所述所關(guān)注區(qū)域的絕對(duì)差的和;基于所述m個(gè)順序圖像中的每一者中的所述所關(guān)注區(qū)域相對(duì)于所述第一圖像中的所述所關(guān)注區(qū)域的絕對(duì)差的所述和而確定所述m個(gè)順序圖像中的每一者的不透明度值;及使用所述m個(gè)順序圖像中的每一者的所述不透明度值將所述m個(gè)順序圖像合并在一起。
14.一種設(shè)備,其包含圖像處理系統(tǒng),其經(jīng)配置以選擇彼此對(duì)準(zhǔn)的多個(gè)順序圖像的子集;及將來(lái)自所述多個(gè)順序圖像的所述子集中的每一圖像的像素值求平均值以產(chǎn)生經(jīng)組合的圖像。
15.根據(jù)權(quán)利要求14所述的設(shè)備,其進(jìn)一步包含經(jīng)配置以捕捉所述多個(gè)順序圖像的圖像捕捉裝置,其中所述多個(gè)順序圖像包括代表物理對(duì)象的數(shù)據(jù),且其中將來(lái)自所述多個(gè)順序圖像的所述子集中的每一圖像的所述像素值求平均值會(huì)轉(zhuǎn)換所述數(shù)據(jù)以減少所述經(jīng)組合的圖像中的噪聲量,且進(jìn)一步包含經(jīng)配置以顯示所述經(jīng)轉(zhuǎn)換的數(shù)據(jù)的顯示裝置。
16.根據(jù)權(quán)利要求14所述的設(shè)備,其中選擇彼此對(duì)準(zhǔn)的所述多個(gè)順序圖像的所述子集包括實(shí)時(shí)檢測(cè)具有至少一個(gè)固定的所關(guān)注區(qū)域的第一組圖像且移除不具有所述至少一個(gè)固定的所關(guān)注區(qū)域的第二組圖像。
17.一種集成電路,其包含圖像處理電路,其經(jīng)配置以處理多個(gè)順序圖像以選擇彼此對(duì)準(zhǔn)的所述多個(gè)順序圖像的子集;及將來(lái)自所述多個(gè)順序圖像的所述子集中的每一圖像的像素值求平均值以產(chǎn)生經(jīng)組合的圖像。
18.根據(jù)權(quán)利要求17所述的集成電路,其中彼此對(duì)準(zhǔn)的所述多個(gè)順序圖像的所述子集包括具有至少一個(gè)固定的所關(guān)注區(qū)域的圖像。
19.根據(jù)權(quán)利要求17所述的集成電路,其中選擇彼此對(duì)準(zhǔn)的所述多個(gè)順序圖像的所述子集包括實(shí)時(shí)檢測(cè)具有至少一個(gè)固定的所關(guān)注區(qū)域的第一組圖像且移除不具有所述至少一個(gè)固定的所關(guān)注區(qū)域的第二組圖像。
20.一種設(shè)備,其包含用于選擇彼此對(duì)準(zhǔn)的多個(gè)順序圖像的子集的裝置;及用于將來(lái)自所述多個(gè)順序圖像的所述子集中的每一圖像的像素值求平均值以產(chǎn)生經(jīng)組合的圖像的裝置。
21.根據(jù)權(quán)利要求20所述的設(shè)備,其進(jìn)一步包含經(jīng)配置以捕捉所述多個(gè)順序圖像的圖像捕捉裝置,其中所述多個(gè)順序圖像包括代表物理對(duì)象的數(shù)據(jù),且其中將來(lái)自所述多個(gè)順序圖像的所述子集中的每一圖像的所述像素值求平均值會(huì)轉(zhuǎn)換所述數(shù)據(jù)以減少所述經(jīng)組合的圖像中的噪聲量,且進(jìn)一步包含經(jīng)配置以顯示所述經(jīng)轉(zhuǎn)換的數(shù)據(jù)的顯示裝置。
22.根據(jù)權(quán)利要求20所述的設(shè)備,其中選擇彼此對(duì)準(zhǔn)的所述多個(gè)順序圖像的所述子集包括實(shí)時(shí)檢測(cè)具有至少一個(gè)固定的所關(guān)注區(qū)域的第一組圖像。
23.一種存儲(chǔ)計(jì)算機(jī)可執(zhí)行代碼的計(jì)算機(jī)可讀媒體,所述計(jì)算機(jī)可執(zhí)行代碼包含用于從圖像捕捉裝置接收多個(gè)順序圖像的代碼;用于選擇彼此對(duì)準(zhǔn)的所述多個(gè)順序圖像的子集的代碼;及用于將來(lái)自所述多個(gè)順序圖像的所述子集中的每一圖像的像素值求平均值以產(chǎn)生經(jīng)組合的圖像的代碼。
24.根據(jù)權(quán)利要求23所述的計(jì)算機(jī)可讀媒體,其中彼此對(duì)準(zhǔn)的所述多個(gè)順序圖像的所述子集包括具有至少一個(gè)固定的所關(guān)注區(qū)域的圖像。
25.根據(jù)權(quán)利要求23所述的計(jì)算機(jī)可讀媒體,其中選擇彼此對(duì)準(zhǔn)的所述多個(gè)順序圖像的所述子集包括實(shí)時(shí)檢測(cè)具有至少一個(gè)固定的所關(guān)注區(qū)域的第一組圖像且移除不具有所述至少一個(gè)固定的所關(guān)注區(qū)域的第二組圖像。
全文摘要
本發(fā)明揭示一種包括接收由圖像捕捉裝置捕捉的多個(gè)順序圖像的方法。所述方法包括選擇彼此對(duì)準(zhǔn)的多個(gè)順序圖像的子集。所述方法進(jìn)一步包括將來(lái)自所述多個(gè)順序圖像的所述子集中的每一圖像的像素值求平均值以產(chǎn)生經(jīng)組合的圖像。
文檔編號(hào)G06T5/00GK102405482SQ201080017580
公開(kāi)日2012年4月4日 申請(qǐng)日期2010年4月22日 優(yōu)先權(quán)日2009年4月22日
發(fā)明者巴巴克·福魯坦保爾, 李京強(qiáng) 申請(qǐng)人:高通股份有限公司