專利名稱：利用不同分辨率的圖像形成改良圖像的制作方法
技術(shù)領(lǐng)域：
本發(fā)明涉及從多個(gè)圖像中生成改良的圖像。更具體地，涉及使用多個(gè)圖像來(lái)形成 具有減少的運(yùn)動(dòng)模糊和減少的噪聲的改良圖像。
背景技術(shù)：
在圖像捕捉過(guò)程中運(yùn)動(dòng)時(shí)的弱光攝像引起圖像中的運(yùn)動(dòng)模糊是要解決的問(wèn)題。運(yùn) 動(dòng)可以是被成像的整個(gè)場(chǎng)景一起運(yùn)動(dòng)的全局變化，或者是場(chǎng)景的一個(gè)或多個(gè)部分相對(duì)于剩 余場(chǎng)景以不同速度或不同方向運(yùn)動(dòng)的局部變化。全局運(yùn)動(dòng)是因?yàn)樵趫D像捕捉過(guò)程中場(chǎng)景和 相機(jī)之間的相對(duì)運(yùn)動(dòng)。局部運(yùn)動(dòng)是因?yàn)閳?chǎng)景內(nèi)的物體相對(duì)于場(chǎng)景的其他部分運(yùn)動(dòng)。在場(chǎng)景 的不同部分中可以發(fā)生不同的局部運(yùn)動(dòng)。在曝光時(shí)間短、運(yùn)動(dòng)緩慢的情況中，單個(gè)圖像捕捉可以用于捕捉具有良好圖像質(zhì) 量的圖像。然而，因?yàn)榈玫礁咝旁氡鹊膱D像所需的曝光時(shí)間相對(duì)于在圖像捕捉過(guò)程中出現(xiàn) 的運(yùn)動(dòng)變得更長(zhǎng)，或可用光減少，捕捉的圖像質(zhì)量以圖像中的運(yùn)動(dòng)模糊增加以及噪聲增加 的形式降低。對(duì)于消費(fèi)者的數(shù)碼相機(jī)，有像素的尺寸隨時(shí)間變得越來(lái)越小的趨勢(shì)，這減少了在 曝光過(guò)程中捕捉光的可用區(qū)域，從而噪聲變成大問(wèn)題。可以增加曝光時(shí)間來(lái)補(bǔ)償較小的像 素，但是另一方面運(yùn)動(dòng)模糊會(huì)變成大問(wèn)題。因此，用于增加像素對(duì)光的靈敏度的方法已描述 于Hamilton的美國(guó)專利申請(qǐng)No. 11/191，729 (代理機(jī)構(gòu)號(hào)91045)中，其在圖像傳感器中增 加了全色像素。因?yàn)檫\(yùn)動(dòng)相對(duì)于曝光時(shí)間或可用光的減少而增加，可以進(jìn)行一系列的折衷。 可以在攝像空間中進(jìn)行一些折衷以增加空間分辨率、時(shí)間分辨率或圖像質(zhì)量，但是重要的 是要注意到，有收獲也會(huì)損失。例如，可以減少曝光時(shí)間來(lái)減少運(yùn)動(dòng)模糊從而增加時(shí)間分辨 率，但是代價(jià)是增加了圖像中的噪聲。閃光燈是減少圖像中的噪聲的有效方式，并且通過(guò)更 短的曝光時(shí)間，增加時(shí)間分辨率，但是代價(jià)是不均勻照明和紅眼?？梢栽谄毓膺^(guò)程中使用基 于光學(xué)的圖像穩(wěn)定器以延長(zhǎng)曝光時(shí)間來(lái)減少圖像中的噪聲，同時(shí)減少運(yùn)動(dòng)模糊以及增加空 間分辨率。然而，基于光學(xué)的圖像穩(wěn)定器只能用于減少來(lái)自相機(jī)運(yùn)動(dòng)(全局運(yùn)動(dòng))的運(yùn)動(dòng) 模糊?？梢酝ㄟ^(guò)像素合并(binning，S卩，將相鄰像素彼此連接到一起，因此相鄰像素上的電 荷被加在一起，信號(hào)增強(qiáng))增加像素的有效尺寸來(lái)減少曝光時(shí)間。然而，伴隨像素合并的是 空間分辨率的減小。可以用多個(gè)低分辨率的視頻圖像來(lái)形成具有改良的圖像質(zhì)量的單個(gè)圖 像，同時(shí)保持空間分辨率并提供時(shí)間分辨率和曝光時(shí)間之間的平衡。通過(guò)對(duì)每個(gè)圖像使用 更短的曝光時(shí)間，在給定時(shí)間內(nèi)讀取多個(gè)圖像可以減少運(yùn)動(dòng)模糊，然而，每個(gè)圖像會(huì)變得噪 聲更大。通過(guò)將多個(gè)圖像彼此對(duì)準(zhǔn)來(lái)修正各個(gè)圖像捕捉之間的運(yùn)動(dòng)，然后將各個(gè)圖像加到 一起(堆疊)，可以減少所形成的單個(gè)圖像中的噪聲。雖然多個(gè)低分辨率視頻圖像可以相對(duì)快速(通常為30-60個(gè)圖像/秒)的讀出， 且所述圖像通常具有更低的噪聲，因?yàn)橄袼赝ǔ１幌袼睾喜?，但是形成的單個(gè)圖像被限制 為相對(duì)低的分辨率。相反，多個(gè)高分辨率圖像可以用于形成高分辨率單個(gè)圖像。然而，高分 辨率圖像通常噪聲更大，因?yàn)橄袼馗。@著的，由于硬件限制，需要相對(duì)大量的時(shí)間來(lái)讀取多個(gè)高分辨率圖像(通常1. 5-7個(gè)圖像/秒)。另外，由于圖像捕捉之間的顯著運(yùn)動(dòng)， 對(duì)準(zhǔn)圖像的問(wèn)題變得更大。因此，本領(lǐng)域需要改良的技術(shù)方案來(lái)組合多個(gè)圖像以形成改良的圖像，特別是在 場(chǎng)景中出現(xiàn)運(yùn)動(dòng)的情況中。

發(fā)明內(nèi)容
通過(guò)根據(jù)本發(fā)明各實(shí)施例的用于形成圖像的系統(tǒng)和方法，上述問(wèn)題得到解決，且 在本領(lǐng)域中實(shí)現(xiàn)了一種技術(shù)方案。在本發(fā)明的一些實(shí)施例中，在相同的時(shí)間段內(nèi)獲取場(chǎng)景 的多個(gè)圖像，其中所述多個(gè)圖像的大部分圖像為以比所述多個(gè)圖像的其他圖像更低的分辨 率獲得的低分辨率圖像。所述低分辨率圖像的至少一些可以為視頻圖像或預(yù)覽圖像，可以 在獲取所述多個(gè)圖像的所述其他圖像之前獲取所述低分辨率圖像。在一些實(shí)施例中，所述 低分辨率圖像具有與所述多個(gè)圖像的所述其他圖像相同或更長(zhǎng)的曝光時(shí)間。在一些實(shí)施例 中，所述多個(gè)圖像的所述其他圖像只包括單個(gè)高分辨率圖像。至少通過(guò)修正出現(xiàn)在所述低 分辨率圖像的至少一些之間的運(yùn)動(dòng)來(lái)形成圖像的修正集。另外，至少通過(guò)將所述圖像的修 正集中的至少一個(gè)圖像的至少一部分(a)與所述多個(gè)圖像的所述其他圖像的至少一個(gè)的 至少一部分(b)相合并來(lái)形成合成圖像。進(jìn)一步地，所述合成圖像存儲(chǔ)在處理器可訪問(wèn)存 儲(chǔ)器系統(tǒng)中。所述合成圖像展現(xiàn)了改良的圖像質(zhì)量，包括相對(duì)于傳統(tǒng)技術(shù)的減少的運(yùn)動(dòng)模 糊、更高的信噪比以及更高的分辨率。在一些實(shí)施例中，形成圖像的修正集包括將運(yùn)動(dòng)修正后的所述低分辨率圖像合并 到單個(gè)低分辨率圖像，其中所述圖像的修正集只包括單個(gè)低分辨圖像。在一些實(shí)施例中，形 成圖像的修正集還包括對(duì)準(zhǔn)所述低分辨率圖像中的至少一些內(nèi)的特征，以使這些圖像彼此 偏移，其中對(duì)準(zhǔn)發(fā)生在合并所述低分辨率圖像之前。在一些實(shí)施例中，所述低分辨率圖像保存在輪詢緩存器中。這些實(shí)施例有助于防 止用于捕捉多個(gè)低分辨率圖像的時(shí)間造成快門時(shí)滯(shutter lag)。在一些實(shí)施例中，收到部分按下捕捉按鈕信號(hào)(partially-cbpressed-capture-button signal)會(huì)獲取所述低分辨率圖像，收到全按下捕捉按鈕信號(hào) (fully-d印ressed-capture-button signal)會(huì)獲取所述多個(gè)圖像的所述其他圖像。在一些實(shí)施例中，例如所述低分辨率圖像為視頻圖像的實(shí)施例，在獲取所述低分 辨率圖像的同時(shí)獲取音頻數(shù)據(jù)。在這些情況中，以將所述音頻數(shù)據(jù)和所述低分辨率圖像鏈 接到所述合成圖像的方式，將所述音頻數(shù)據(jù)和所述低分辨率數(shù)據(jù)存儲(chǔ)在處理器可訪問(wèn)存儲(chǔ) 器系統(tǒng)中。所述實(shí)施例提供了伴隨所述合成圖像的視頻和音頻參考。除了上述實(shí)施例，通過(guò)參考附圖以及研究如下詳細(xì)說(shuō)明，其他實(shí)施例將變得明顯。


通過(guò)結(jié)合附圖描述的示例性實(shí)施例的詳細(xì)描述，本發(fā)明將更容易理解，其中圖1顯示了根據(jù)本發(fā)明實(shí)施例的用于形成圖像的系統(tǒng)；圖2為根據(jù)本發(fā)明實(shí)施例，獲取多個(gè)圖像的集合的過(guò)程的流程圖，所述多個(gè)圖像 的大部分圖像比其他圖像的分辨率低；圖3為根據(jù)本發(fā)明實(shí)施例，從多個(gè)圖像的捕捉集形成一個(gè)圖像的過(guò)程的流程圖4為根據(jù)本發(fā)明實(shí)施例，從多個(gè)圖像的獲取集形成一個(gè)圖像的過(guò)程的示意圖；圖5為根據(jù)本發(fā)明的另一實(shí)施例，用于從多個(gè)圖像的獲取集形成一個(gè)圖像的另一 過(guò)程的示意圖；以及圖6顯示了根據(jù)本發(fā)明的各實(shí)施例的圖像處理工作流程，其中在各個(gè)點(diǎn)插入了例 如圖3、4和5中所示的過(guò)程。應(yīng)理解附圖用于描述本發(fā)明的概念，可能沒(méi)有按比例繪制。
具體實(shí)施例方式本發(fā)明的實(shí)施例涉及獲取或捕捉場(chǎng)景的多個(gè)圖像，其中所述多個(gè)圖像形成了由低 分辨率圖像和較少數(shù)量的高分辨率圖像組成的捕捉集。所有圖像在相對(duì)短的時(shí)間段內(nèi)獲 得，從而可以認(rèn)為它們彼此之間是同時(shí)的。低分辨率圖像與高分辨率圖像具有相同或更長(zhǎng) 的曝光時(shí)間以及由于傳感器上的像素合并造成的相對(duì)更大的像素。因此，低分辨率圖像在 每個(gè)圖像中具有更高的信噪比、更低的分辨率、相同或更大的運(yùn)動(dòng)模糊。相反，與低分辨率 圖像相比，高分辨率圖像具有由于傳感器上更少的像素合并造成的更高分辨率、更低信噪 比、相同或更小的運(yùn)動(dòng)模糊。然后將捕捉集中的圖像的至少一部分合并到一起來(lái)形成具有 改良的圖像質(zhì)量(更高的分辨率、減少的運(yùn)動(dòng)模糊、以及增加的信噪比)的合成圖像。合成 圖像中的運(yùn)動(dòng)模糊被減少是通過(guò)(a)進(jìn)行合并以針對(duì)獲取捕捉集過(guò)程中發(fā)生的運(yùn)動(dòng)進(jìn)行 修正之前，將捕捉集中的圖像彼此偏移；(b)利用具有減少的運(yùn)動(dòng)模糊的高分辨率圖像以 針對(duì)低分辨率圖像中的運(yùn)動(dòng)模糊進(jìn)行修正；或者結(jié)合(a)和(b)。在通常的數(shù)碼相機(jī)內(nèi)，低分辨率圖像和高分辨率圖像通常都可以被捕捉到。高分 辨率圖像通常以圖像傳感器的全分辨率提供，而低分辨率圖像通過(guò)傳感器上的像素合并或 抽取(decimating)來(lái)提供。像素合并涉及將相鄰像素電子地連接到一起，從而相鄰像素的電荷加到一起，從 而增加了信噪比還有效地增加了像素尺寸，同時(shí)減少了傳感器的分辨率(減少了像素的數(shù) 量)。抽取涉及重置一些像素上的電荷，因此不利用這些抽取的像素的像素?cái)?shù)據(jù)。為了增加 信噪比，本發(fā)明的實(shí)施例采用了像素合并以產(chǎn)生捕捉集中的低分辨率圖像。在一些條件中， 例如弱光下，甚至可以將高分辨率圖像像素合并以增加圖像中的信噪比，然而，像素合并等 級(jí)將小于針對(duì)低分辨率圖像所使用的。由于數(shù)碼相機(jī)的硬件限制，對(duì)處理路徑的時(shí)機(jī)有限制?？焖賻俾什蹲蕉鄠€(gè)圖像 容易獲得低分辨率圖像。另外，高信噪比圖像容易獲得具有更長(zhǎng)的曝光時(shí)間的低分辨率圖 像。多個(gè)圖像之間的運(yùn)動(dòng)修正減少了如果用與捕捉集中的多個(gè)圖像的結(jié)合的曝光時(shí)間相等 的曝光時(shí)間來(lái)捕捉單個(gè)圖像時(shí)可能發(fā)生的運(yùn)動(dòng)模糊。然而，精細(xì)的邊緣細(xì)節(jié)必須來(lái)自于高 分辨率圖像。在本發(fā)明的各實(shí)施例中，可以在高像素合并視頻模式或預(yù)覽模式中獲取低分辨率 圖像，其中快速地連續(xù)獲取圖像，例如30-120個(gè)圖像/秒。相反，可以在全分辨率模式或低 像素合并模式中慢速地捕捉高分辨率圖像。另外，以相比于通常由自動(dòng)曝光系統(tǒng)針對(duì)場(chǎng)景 中呈現(xiàn)的攝像條件所計(jì)算的曝光時(shí)間更短的曝光時(shí)間來(lái)獲取高分辨率圖像。通常，多個(gè)圖 像的獲取速率首先受曝光時(shí)間限制，另一方面受圖像傳感器可以被讀取以及圖像被存儲(chǔ)的 速度限制，所述速度由圖像中的像素的數(shù)量確定。因此，具有更少像素的低分辨率圖像比具有更多像素的高分辨率圖像可以更快速地被讀取和存儲(chǔ)。視頻圖像的像素?cái)?shù)量和全分辨率 圖像中的像素?cái)?shù)量之間的差通常為IOX至20X。因此，為了減少多個(gè)圖像捕捉集的捕捉時(shí) 間，有利地，使用更大數(shù)量的低分辨率圖像和更小數(shù)量的高分辨率圖像。因此，本發(fā)明的實(shí) 施例涉及包括多個(gè)低分辨率圖像以及更少數(shù)量(或單個(gè))的高分辨率圖像的捕捉集。在獲取捕捉集中的圖像的過(guò)程中，盡可能地快速獲取低分辨率圖像，以減少獲取 捕捉集的過(guò)程中場(chǎng)景中的運(yùn)動(dòng)和可能發(fā)生在圖像之間的相機(jī)相對(duì)于場(chǎng)景的運(yùn)動(dòng)的影響。即 使快速地獲取了低分辨率圖像，用于每個(gè)低分辨率圖像的曝光時(shí)間可以與用于高分辨率圖 像的曝光時(shí)間相等或更長(zhǎng)，這可能導(dǎo)致每個(gè)低分辨率圖像中相同或更大的運(yùn)動(dòng)模糊?？梢?基于場(chǎng)景中存在的光的量和檢測(cè)到的運(yùn)動(dòng)的量來(lái)選擇曝光時(shí)間。對(duì)低分辨率圖像和高分辨 率圖像均使用相同的曝光時(shí)間可以產(chǎn)生具有均勻銳度的合成圖像，而對(duì)低分辨率圖像使用 更長(zhǎng)的曝光時(shí)間可以產(chǎn)生具有最高信噪比和最低色度噪聲的合成圖像。最終結(jié)果是，由于 相同或更長(zhǎng)的曝光時(shí)間以及來(lái)自像素合并的有效的更大的像素，使得低分辨率圖像具有更 高的信噪比，代價(jià)是具有更低的分辨率和相同或更大的運(yùn)動(dòng)模糊。相反，選擇用于高分辨率 圖像的曝光時(shí)間比通常針對(duì)成像條件所使用的短，以減少運(yùn)動(dòng)模糊，同時(shí)獲得更低的信噪 比。然后可以由具有高信噪比的多個(gè)低分辨率圖像以及一個(gè)或多個(gè)具有低信噪比和減少的 運(yùn)動(dòng)模糊的高分辨率圖像組成捕捉集。另外，本發(fā)明的實(shí)施例可以包括利用輪詢緩沖器，其中可以存儲(chǔ)捕捉集中的低分 辨率圖像。使用輪詢緩沖器的好處是可以在獲取高分辨率圖像之前連續(xù)獲取并讀取低分辨 率圖像至輪詢緩沖器中。這樣，獲取低分辨率圖像的時(shí)間不會(huì)造成操作者可以察覺(jué)的快門 時(shí)滯?？扉T時(shí)滯是操作者所察覺(jué)的當(dāng)捕捉按鈕全按下時(shí)的時(shí)間與圖像被實(shí)際捕捉到的時(shí)間 之間的延遲。實(shí)際上，當(dāng)相機(jī)檢測(cè)到操作者正準(zhǔn)備捕捉圖像時(shí)，這是通過(guò)操作者部分按下捕 捉按鈕或相機(jī)檢測(cè)到操作者將相機(jī)放置到捕捉位置實(shí)現(xiàn)，則開始獲取低分辨率圖像并讀入 輪詢緩沖器。當(dāng)操作者用信號(hào)通知圖像捕捉的時(shí)刻時(shí)(通過(guò)全按下捕捉按鈕)，則停止將低 分辨率圖像捕捉到輪詢緩沖器，然后捕捉高分辨率圖像。這樣，可察覺(jué)的快門時(shí)滯只是捕捉 高分辨率圖像所需的時(shí)間。進(jìn)一步，本發(fā)明公開了除了使用低分辨率圖像來(lái)產(chǎn)生具有改良的圖像質(zhì)量的圖像 之外，還可以將低分辨率圖像連同合成圖像一起存儲(chǔ)以提供對(duì)合成圖像的參考。這提供了 視頻參考給產(chǎn)生的具有改良的圖像質(zhì)量的靜止圖像。對(duì)此，可以捕捉同步的音頻并與低分 辨率圖像一起存儲(chǔ)。圖1顯示了根據(jù)本發(fā)明實(shí)施例的用于形成圖像的系統(tǒng)100。系統(tǒng)100包括數(shù)據(jù)處 理系統(tǒng)110、外圍系統(tǒng)120、用戶接口系統(tǒng)130以及處理器可訪問(wèn)存儲(chǔ)器系統(tǒng)140。處理器 可訪問(wèn)存儲(chǔ)器系統(tǒng)140、外圍系統(tǒng)120和用戶接口系統(tǒng)130可通信地連接到數(shù)據(jù)處理系統(tǒng) 110。盡管本發(fā)明未如此限制，整個(gè)系統(tǒng)100可以是靜態(tài)式數(shù)碼相機(jī)、數(shù)字?jǐn)z像機(jī)、或任何其 他數(shù)字圖像獲取系統(tǒng)或裝置?？蛇x地，可以只有系統(tǒng)100的一部分駐留在數(shù)字圖像獲取裝 置中，例如外圍系統(tǒng)110，而系統(tǒng)100的其他部分可以駐留在更普通的數(shù)據(jù)處理系統(tǒng)內(nèi)，例 如計(jì)算機(jī)系統(tǒng)。數(shù)據(jù)處理系統(tǒng)110包括一個(gè)或多個(gè)數(shù)據(jù)處理裝置，所述裝置實(shí)現(xiàn)或者有利于實(shí)現(xiàn) 包括圖2-5中所描述的示例過(guò)程的本發(fā)明各實(shí)施例的過(guò)程。術(shù)語(yǔ)“數(shù)據(jù)處理裝置”或“數(shù)據(jù) 處理器”意指包括任何數(shù)據(jù)處理裝置，例如中央處理單元(“CPU”)或用于處理數(shù)據(jù)、管理數(shù)據(jù)或操作數(shù)據(jù)的通過(guò)電、磁、光學(xué)、生物部件或其他方式實(shí)現(xiàn)的任何其他裝置。所述數(shù)據(jù) 處理裝置可以駐留在例如臺(tái)式計(jì)算機(jī)、筆記本電腦、大型計(jì)算機(jī)、個(gè)人數(shù)字助理、黑莓 、數(shù) 碼相機(jī)或手機(jī)中。應(yīng)注意，除非上下文中明確指出或需要，詞語(yǔ)“或”以非排他性的理解在 本公開中使用。處理器可訪問(wèn)存儲(chǔ)器系統(tǒng)140包括被配置為存儲(chǔ)信息的一個(gè)或多個(gè)處理器可訪 問(wèn)存儲(chǔ)器，所述信息包括執(zhí)行或有利于執(zhí)行包括圖2-5中所描述的示例過(guò)程的本發(fā)明各實(shí) 施例的過(guò)程所需的信息。處理器可訪問(wèn)存儲(chǔ)器系統(tǒng)140可以是分布式處理器可訪問(wèn)存儲(chǔ)器 系統(tǒng)，包括通過(guò)多個(gè)計(jì)算機(jī)和/或裝置可通信地連接到數(shù)據(jù)處理系統(tǒng)110的多個(gè)處理器可 訪問(wèn)存儲(chǔ)器。另一方面，處理器可訪問(wèn)存儲(chǔ)器系統(tǒng)140不必然是分布式處理器可訪問(wèn)存儲(chǔ) 器系統(tǒng)，因此，可以包括位于單個(gè)數(shù)據(jù)處理器或裝置內(nèi)的一個(gè)或多個(gè)處理器可訪問(wèn)存儲(chǔ)器。術(shù)語(yǔ)“處理器可訪問(wèn)存儲(chǔ)器”意指包括任何處理器可訪問(wèn)數(shù)據(jù)存儲(chǔ)裝置，無(wú)論是易 失性的或非易失性的、電的、磁的、光學(xué)的等，包括但不限于寄存器、軟盤、硬盤、CD、DVD、閃 存、ROM 禾口 RAM。術(shù)語(yǔ)“可通信地連接”意指包括裝置、數(shù)據(jù)處理器或可以對(duì)數(shù)據(jù)進(jìn)行通信的程序之 間任何類型的連接，無(wú)論是有線的或無(wú)線的。進(jìn)一步地，術(shù)語(yǔ)“可通信地連接”意指包括在 單個(gè)數(shù)據(jù)處理器內(nèi)的裝置或程序之間的連接，位于不同的數(shù)據(jù)處理器內(nèi)的裝置或程序之間 的連接，以及根本不位于數(shù)據(jù)處理器內(nèi)的裝置之間的連接。就這點(diǎn)而言，盡管處理器可訪問(wèn) 存儲(chǔ)器系統(tǒng)140顯示為與數(shù)據(jù)處理系統(tǒng)110分離，本領(lǐng)域技術(shù)人員應(yīng)知曉處理器可訪問(wèn)存 儲(chǔ)器系統(tǒng)140可以完全或部分地位于數(shù)據(jù)處理系統(tǒng)110內(nèi)。進(jìn)一步就這點(diǎn)而言，盡管外圍 系統(tǒng)120和用戶接口系統(tǒng)130顯示為與數(shù)據(jù)處理系統(tǒng)110分離，本領(lǐng)域技術(shù)人員應(yīng)知曉所 述系統(tǒng)的一個(gè)或兩個(gè)可以完全或部分地位于數(shù)據(jù)處理系統(tǒng)110內(nèi)。外圍系統(tǒng)120可以包括配置為提供數(shù)字圖像至數(shù)據(jù)處理系統(tǒng)110的一個(gè)或多個(gè)裝 置。例如，外圍系統(tǒng)120可以包括數(shù)字?jǐn)z像機(jī)、手機(jī)、普通數(shù)碼相機(jī)、或其他數(shù)據(jù)處理器。數(shù) 據(jù)處理系統(tǒng)110收到來(lái)自外圍系統(tǒng)120中的裝置的數(shù)字內(nèi)容記錄之后，可以將所述數(shù)字內(nèi) 容記錄存儲(chǔ)到處理器可訪問(wèn)存儲(chǔ)器系統(tǒng)140中。用戶接口系統(tǒng)130可以包括鼠標(biāo)、鍵盤、觸摸屏、另一個(gè)計(jì)算機(jī)或數(shù)據(jù)從其輸入到 數(shù)據(jù)處理系統(tǒng)Iio的任何其他裝置或裝置的組合。就這點(diǎn)而言，盡管外圍系統(tǒng)120顯示為 與用戶接口系統(tǒng)130分離，外圍系統(tǒng)120也可以作為一部分包括在用戶接口系統(tǒng)130內(nèi)。用戶接口系統(tǒng)130還可以包括顯示裝置、處理器可訪問(wèn)存儲(chǔ)器或通過(guò)數(shù)據(jù)處理系 統(tǒng)110將數(shù)據(jù)輸出到的任何裝置或裝置的組合。就這點(diǎn)而言，如果用戶接口系統(tǒng)130包括 處理器可訪問(wèn)存儲(chǔ)器，該存儲(chǔ)器可以是處理器可訪問(wèn)存儲(chǔ)器系統(tǒng)140的一部分，即使用戶 接口系統(tǒng)130和處理器可訪問(wèn)存儲(chǔ)器系統(tǒng)140在圖1中顯示為分離的。圖2為根據(jù)本發(fā)明的實(shí)施例的獲取多個(gè)圖像集的過(guò)程的流程圖，所述多個(gè)圖像集 的大部分圖像比其他圖像分辨率低。在步驟210，操作者通過(guò)將相機(jī)上的捕捉按鈕從SO位 置(非按下位置)推到Sl位置(部分按下位置)來(lái)開始獲取過(guò)程，從而發(fā)送部分按下捕捉 按鈕信號(hào)至相機(jī)中的數(shù)據(jù)處理器，如同操作者編輯圖像。然后數(shù)據(jù)處理器指示相機(jī)開始連 續(xù)地將多個(gè)低分辨率圖像獲取到相機(jī)上的輪詢緩沖器中，如步驟220所示。輪詢緩沖器能 存儲(chǔ)至少3張或更多低分辨率圖像。應(yīng)注意，與此同時(shí)，相機(jī)中的數(shù)據(jù)處理器還通常將完成 自動(dòng)對(duì)焦和自動(dòng)曝光。當(dāng)操作者識(shí)別出了獲取時(shí)刻時(shí)，操作者將捕捉按鈕從Sl推到S2 (完全按下位置)，從而發(fā)送完全按下捕捉按鈕信號(hào)至相機(jī)中的數(shù)據(jù)處理器，如步驟230所示。 在此，在步驟MO中，數(shù)據(jù)處理器指示相機(jī)停止連續(xù)獲取或者捕捉低分辨率圖像至輪詢緩 沖器，并開始獲取高分辨率圖像。然后在步驟250，數(shù)據(jù)處理器指示相機(jī)存儲(chǔ)由多個(gè)低分辨 率圖像和該高分辨率圖像組成的捕捉集中的多個(gè)圖像。雖然這里所述的本發(fā)明僅獲取了捕 捉集中的單個(gè)高分辨率圖像，但是捕捉集中包括超過(guò)一個(gè)的高分辨率圖像也在本發(fā)明的保 護(hù)范圍內(nèi)。應(yīng)注意，如同本發(fā)明內(nèi)的實(shí)施例所描述的，存儲(chǔ)的來(lái)自輪詢緩沖器的低分辨率圖 像在時(shí)間上超前于該高分辨率圖像，因?yàn)樗鼈兪窃诓襟E230之前捕捉的。然而，本發(fā)明也包 括在該高分辨率圖像之后捕捉低分辨率圖像的方法，例如當(dāng)相機(jī)被直接從SO致動(dòng)到S2時(shí)。 捕捉集中的多個(gè)圖像由存儲(chǔ)的該高分辨率圖像和存儲(chǔ)的低分辨率圖像組成。捕捉集的一個(gè)例子是如下針對(duì)10兆像素的數(shù)碼相機(jī)。當(dāng)操作者將捕捉按鈕從SO 推到Sl時(shí)，數(shù)據(jù)處理器指示相機(jī)開始將低分辨率視頻圖像連續(xù)獲取到輪詢緩沖器中。視頻 圖像為9X像素合并，從而每個(gè)視頻圖像的分辨率大約為1兆像素。以30張圖像/秒的速 度來(lái)獲取視頻圖像。取決于場(chǎng)景內(nèi)的光線水平，可以每張1/30秒或更少的曝光時(shí)間來(lái)獲取 視頻圖像。輪詢緩沖器足夠大以同時(shí)存儲(chǔ)10張視頻圖像。一旦輪詢緩沖器滿了，在存儲(chǔ)新 的視頻圖像之前刪除最老的視頻圖像，連續(xù)進(jìn)行該過(guò)程直到操作者將捕捉按鈕從Sl推到 S2。當(dāng)捕捉按鈕被推到S2時(shí)，捕捉了單個(gè)高分辨率圖像?？梢匀直媛驶?0兆像素來(lái)獲 取該高分辨率圖像。針對(duì)高分辨率圖像的曝光時(shí)間可以是1/30秒或更少，使得針對(duì)低分辨 率圖像的曝光時(shí)間基本上等于高分辨率圖像的曝光時(shí)間。為了減少高分辨率圖像中的運(yùn)動(dòng) 模糊，曝光時(shí)間可以是1/60秒或更少。那么捕捉集由單個(gè)10兆像素圖像和十個(gè)1兆像素 圖像組成，其中該十個(gè)1兆像素圖像在時(shí)間上超前于該單個(gè)10兆像素圖像。然后數(shù)據(jù)處理 器指示相機(jī)存儲(chǔ)該捕捉集中的多個(gè)圖像。圖3為根據(jù)本發(fā)明的實(shí)施例并由數(shù)據(jù)處理器指示的從多個(gè)圖像的捕捉集形成單 個(gè)改良的圖像的過(guò)程的流程圖。以由多個(gè)圖像組成的捕捉集中存儲(chǔ)的圖像開始步驟310。 在步驟320，分析捕捉集中的多個(gè)圖像以識(shí)別圖像之間的運(yùn)動(dòng)。有多種方法可用于分析捕捉 集中的圖像以識(shí)別圖像之間的運(yùn)動(dòng)。在Deever的美國(guó)專利申請(qǐng)No. 11/130，690 (代理機(jī)構(gòu) 號(hào)8910 中，描述了一種基于塊的方法來(lái)關(guān)聯(lián)圖像以識(shí)別圖像之間的運(yùn)動(dòng)并消除視頻序 列中的抖動(dòng)。該技術(shù)非常適用于圖像之間的運(yùn)動(dòng)相對(duì)均勻的圖像。^iao的美國(guó)專利申請(qǐng) 2003/0213892描述了一種用于識(shí)別圖像之間的運(yùn)動(dòng)的方法，其中所述圖像的各部分之間的 運(yùn)動(dòng)不同。在步驟330，基于來(lái)自數(shù)據(jù)處理器的指令，將圖像橫向平移或彼此偏移以對(duì)準(zhǔn)圖像 內(nèi)的共同特征并修正識(shí)別出的圖像之間的運(yùn)動(dòng)，以形成圖像的修正集。在對(duì)準(zhǔn)過(guò)程中，將多 個(gè)圖像平移以與相同的單個(gè)基準(zhǔn)圖像對(duì)準(zhǔn)。該單個(gè)基準(zhǔn)圖像優(yōu)選地為高分辨率圖像。然后 在步驟340，通過(guò)將圖像的修正集的一部分與高分辨率圖像的一部分合并來(lái)合成出改良的 圖像，其中該改良的圖像的一部分至少具有高信噪比或減少的運(yùn)動(dòng)模糊?？梢酝ㄟ^(guò)將捕捉 集中的多個(gè)圖像內(nèi)的公共特征的對(duì)準(zhǔn)部分的像素值相加來(lái)實(shí)現(xiàn)合并。圖4為根據(jù)本發(fā)明的實(shí)施例，從捕捉集中的多個(gè)圖像的獲取集形成改良的單個(gè)圖 像的進(jìn)一步的過(guò)程的示意圖。在步驟410，提供多個(gè)低分辨率圖像來(lái)用于圖像處理。在步驟 420，針對(duì)圖像之間的運(yùn)動(dòng)來(lái)修正所述低分辨率圖像。步驟420包括對(duì)低分辨率圖像之間的 運(yùn)動(dòng)進(jìn)行分析。還應(yīng)注意到，步驟420還可以包括對(duì)例如通過(guò)移動(dòng)場(chǎng)景內(nèi)的物體產(chǎn)生的低分辨率圖像內(nèi)的運(yùn)動(dòng)進(jìn)行分析?；谌缦滤鰜?lái)選擇哪些低分辨率圖像將被用于合成圖像 中運(yùn)動(dòng)分析(針對(duì)低分辨率圖像之間的運(yùn)動(dòng)以及針對(duì)低分辨率圖像內(nèi)的運(yùn)動(dòng))，以及所選 擇的低分辨率圖像彼此對(duì)準(zhǔn)的好壞。如果一個(gè)低分辨率圖像具有太多的運(yùn)動(dòng)或如果其沒(méi)有 很好地對(duì)準(zhǔn)，則不用它來(lái)形成合成圖像。在步驟430，將修正的低分辨率圖像合并以形成單 個(gè)合成的低分辨率圖像。在合并步驟中，數(shù)據(jù)處理器可以指示該合成的低分辨率圖像由捕 捉集中的某些圖像的一部分組成，以補(bǔ)償場(chǎng)景內(nèi)的運(yùn)動(dòng)物體。然后在步驟440，對(duì)該單個(gè)合 成的低分辨率圖像上采樣以將低分辨率圖像中的像素?cái)?shù)量增加到與高分辨率圖像中的像 素?cái)?shù)量相同。用于形成上采樣圖像的插值方法可以是雙三次或任何其他本領(lǐng)域技術(shù)人員所 公知的。在步驟460提供高分辨率圖像來(lái)用于圖像處理。在步驟450將該上采樣圖像與該 高分辨率圖像對(duì)準(zhǔn)。步驟450可以包括模糊高分辨率圖像的亮度或綠色通道，以將邊緣細(xì) 節(jié)調(diào)制為更類似于該上采樣圖像。步驟450中的對(duì)準(zhǔn)步驟產(chǎn)生了對(duì)準(zhǔn)映射，用于將來(lái)自該 上采樣圖像的色彩應(yīng)用到該高分辨率圖像上。在步驟470，從該高分辨率圖像(步驟460) 和該上采樣圖像(步驟440)產(chǎn)生色差圖像，然后與來(lái)自步驟450的該對(duì)準(zhǔn)映射相結(jié)合以形 成合成的色差。對(duì)于給定像素應(yīng)用色差可以是80%來(lái)自該上采樣圖像像素值以及20%來(lái) 自該高分辨率圖像像素值的平均值，或者是該上采樣圖像和該高分辨率圖像的其他比重的 組合。然后在步驟480將該色差圖像轉(zhuǎn)換為合成的彩色圖像，其中該合成的彩色圖像由該 上采樣圖像的一部分和該高分辨率圖像的一部分組成。圖5為根據(jù)本發(fā)明的另一實(shí)施例，用于從捕捉集中的多個(gè)圖像的獲取集形成改良 的單個(gè)圖像的另一過(guò)程的示意圖。與圖4中所示的方法相似，在步驟410呈現(xiàn)的低分辨率 圖像在步驟420中針對(duì)圖像之間的運(yùn)動(dòng)被修正，并在步驟430中用于形成低分辨率合成圖 像，在步驟440該低分辨率合成圖像被上采樣來(lái)匹配該高分辨率圖像。然后在步驟450將 該上采樣圖像與在步驟460中呈現(xiàn)的高分辨率圖像對(duì)準(zhǔn)。然而，在步驟570，該上采樣圖像 的色彩或色度部分與該高分辨率圖像的黑和白或亮度部分相合并，以在步驟580形成具有 改良的圖像質(zhì)量的合成的彩色圖像。應(yīng)注意，相比于靜止圖像，通常用不同的屏幕高寬比來(lái)捕捉視頻圖像。如果捕捉集 中的低分辨率圖像是通過(guò)視頻成像路徑獲取的，則從多個(gè)圖像捕捉集產(chǎn)生的合成圖像可能 被限制為視頻圖像的屏幕高寬比。可選地，可以用高分辨率圖像的屏幕高寬比和更高等級(jí) 的像素合并來(lái)獲取低分辨率圖像，從而合成圖像將是高分辨率圖像的屏幕高寬比。圖6顯示了根據(jù)本發(fā)明的各實(shí)施例，由數(shù)據(jù)處理器指示的圖像處理工作流程，其 中例如圖3、4和5中所示的過(guò)程可以插入各個(gè)點(diǎn)。步驟610為圖像獲取步驟，其中捕捉集 中的多個(gè)圖像如圖2所示進(jìn)行獲取和存儲(chǔ)。步驟620修正來(lái)自傳感器的暗電流類型的噪 聲。步驟630修正傳感器上的缺陷，包括壞點(diǎn)和壞列。步驟640為噪聲減小步驟，其基于包 括色彩濾波器陣列的影響的像素?cái)?shù)據(jù)。步驟650對(duì)像素?cái)?shù)據(jù)插值以獲得針對(duì)每個(gè)像素的完 整色彩信息。步驟660對(duì)插值的像素?cái)?shù)據(jù)進(jìn)行分析以識(shí)別圖像內(nèi)的邊緣。步驟670為噪聲 減小步驟，其基于只包括色度通道的該插值的像素?cái)?shù)據(jù)。步驟680為應(yīng)用數(shù)字縮放以限定 將被全處理的圖像的部分。步驟690針對(duì)場(chǎng)景中的普通照明進(jìn)行修正。步驟691是色彩修 正步驟。步驟692將圖像從紅/綠/藍(lán)轉(zhuǎn)換為YCrCb (其中Y為明亮(亮度)，Cb為減藍(lán)亮 度(B-Y)，Cr為減紅亮度(R-Y))。在步驟693，增強(qiáng)圖像中的物體的邊緣。在步驟694，將圖 像壓縮為JPEG文件或其他壓縮文件格式。在步驟695，存儲(chǔ)處理后的圖像。基于該圖像處理鏈，可以在任何噪聲減小之前執(zhí)行如圖3、4和5中所示的對(duì)捕捉集中的多個(gè)圖像的處理， 以減少要在步驟610和620之間被圖像處理的圖像數(shù)量。另一個(gè)選擇是，在從捕捉集中的 多個(gè)圖像的每個(gè)中消除了傳感器相關(guān)噪聲之后，如步驟640和650之間的步驟，再處理捕捉 集中的多個(gè)圖像。一個(gè)可選的選擇是，在對(duì)所述多個(gè)圖像進(jìn)行邊緣識(shí)別以輔助對(duì)運(yùn)動(dòng)進(jìn)行 修正之后，如步驟660和670之間的步驟，再執(zhí)行捕捉集中的多個(gè)圖像的圖像處理。又一選 擇是，當(dāng)消除了捕捉集中的每個(gè)圖像中的多數(shù)噪聲時(shí)再清除色度通道噪聲之后，如步驟670 和680之間的步驟，再進(jìn)行捕捉集中的多個(gè)圖像的圖像處理。又一選擇是，在對(duì)捕捉集中的 圖形進(jìn)行全色彩修正和邊緣增強(qiáng)之后，如步驟693和694之間的步驟，再進(jìn)行捕捉集中的多 個(gè)圖像的圖像處理。上面列出的對(duì)捕捉集中的多個(gè)圖像進(jìn)行圖像處理的所有情況將得到具 有相似的改良的圖像質(zhì)量的最終圖像，不同選擇之間的差別在于圖像處理過(guò)程中所需的計(jì) 算功率水平和存儲(chǔ)多個(gè)圖像所需的計(jì)算存儲(chǔ)器的大小。根據(jù)本發(fā)明的一些實(shí)施例，可以在處理路徑中提供多個(gè)噪聲消除操作以進(jìn)一步改 良信噪比。有空間噪聲清除，因?yàn)椴蹲郊械拇蟛糠謭D像為具有合并像素的低分辨率圖像。 有時(shí)間噪聲消除，因?yàn)槎鄠€(gè)低分辨率圖像針對(duì)圖像之間的運(yùn)動(dòng)被修正，然后被相加來(lái)產(chǎn)生 低分辨率合成圖像。有針對(duì)低分辨率合成圖像的上采樣噪聲清除，因?yàn)閺牡头直媛实礁叻?辨率的上采用過(guò)程不會(huì)引入高頻噪聲。將上采樣圖像對(duì)準(zhǔn)到高分辨率圖像時(shí)還有另一時(shí)間 噪聲清除。將低分辨率色差應(yīng)用到高分辨率色差圖像時(shí)還有另一空間噪聲清除?？梢韵氲?， 可以將其他的噪聲清除步驟應(yīng)用到在整個(gè)圖像處理過(guò)程中產(chǎn)生的各個(gè)圖像。產(chǎn)生的合成的彩色圖像可以表征為具有如下質(zhì)量類似于低分辨率圖像的高信噪 比；類似于高分辨率圖像的減少的運(yùn)動(dòng)模糊；類似于高分辨率圖像的分辨率；以及類似于 捕捉單個(gè)高分辨率圖像的快門時(shí)滯。部件列表
100用于形成圖像的系統(tǒng)
110數(shù)據(jù)處理系統(tǒng)
120外圍系統(tǒng)
130用戶接口系統(tǒng)
140處理器可訪問(wèn)存儲(chǔ)器系統(tǒng)
210步驟
220步驟
230步驟
240步驟
250步驟
310步驟
320步驟
330步驟
340步驟
410步驟
420步驟
430步驟
440步驟
450步驟
460步驟
470步驟
480步驟
570步驟
580步驟
610步驟
620步驟
630步驟
640步驟
650步驟
660步驟
670步驟
680步驟
690步驟
691步驟
692步驟
693步驟
694步驟
695步驟。
權(quán)利要求
1.一種至少部分由數(shù)據(jù)處理系統(tǒng)實(shí)現(xiàn)的方法，所述方法用于形成圖像，所述方法包括 以下步驟指示在相同的時(shí)間段內(nèi)獲取場(chǎng)景的多個(gè)圖像，其中所述多個(gè)圖像的大部分圖像為以比 所述多個(gè)圖像的其他圖像更低的分辨率獲得的低分辨率圖像；指示至少通過(guò)修正所述低分辨率圖像中的至少一些圖像之間的運(yùn)動(dòng)來(lái)形成圖像的修 正集；指示至少通過(guò)將所述圖像的修正集中的至少一個(gè)圖像的至少一部分(a)與所述多個(gè) 圖像的所述其他圖像的至少一個(gè)圖像的至少一部分(b)相合并，來(lái)形成合成圖像；以及指示存儲(chǔ)所述合成圖像至處理器可訪問(wèn)存儲(chǔ)器系統(tǒng)。
2.根據(jù)權(quán)利要求1所述的方法，其中指示形成圖像的修正集的步驟還包括，指示將運(yùn) 動(dòng)修正后的所述低分辨率圖像合并到單個(gè)低分辨率圖像中，其中所述圖像的修正集只包括 所述單個(gè)低分辨率圖像。
3.根據(jù)權(quán)利要求2所述的方法，其中指示形成圖像的修正集的步驟還包括，將所述低 分辨率圖像中的至少一些圖像內(nèi)的特征對(duì)準(zhǔn)以使得這些圖像彼此偏移，并且其中所述對(duì)準(zhǔn) 發(fā)生在合并所述低分辨率圖像之前。
4.根據(jù)權(quán)利要求3所述的方法，其中執(zhí)行所述低分辨率圖像的對(duì)準(zhǔn)從而將特征與所述 多個(gè)圖像中的所述其他圖像之一相對(duì)準(zhǔn)。
5.根據(jù)權(quán)利要求1所述的方法，其中所述多個(gè)圖像中的所述其他圖像只包括單個(gè)高分 辨率圖像。
6.根據(jù)權(quán)利要求1所述的方法，其中指示獲取的步驟還包括，指示在獲取所述多個(gè)圖 像的所述其他圖像之前獲取所述低分辨率圖像。
7.根據(jù)權(quán)利要求6所述的方法，其中指示獲取的步驟還包括，指示將所述低分辨率圖 像存儲(chǔ)到輪詢緩沖器中。
8.根據(jù)權(quán)利要求6所述的方法，還包括接收部分按下捕捉按鈕信號(hào)的步驟，這使得指 示獲取所述低分辨率圖像，其中所述方法還包括在收到部分按下捕捉按鈕信號(hào)之后接收完 全按下捕捉按鈕信號(hào)的步驟，且其中接收完全按下捕捉按鈕信號(hào)使得指示獲取所述多個(gè)圖 像的所述其他圖像。
9.根據(jù)權(quán)利要求1所述的方法，其中所述低分辨率圖像的至少一些圖像為視頻圖像或 預(yù)覽圖像。
10.根據(jù)權(quán)利要求8所述的方法，其中所述低分辨率圖像為視頻圖像，其中指示獲取的步驟還包括，指示獲取在獲取所述低分辨率圖像的同時(shí)獲取音頻數(shù) 據(jù)，以及其中所述方法還包括，指示以將所述視頻數(shù)據(jù)和所述低分辨率圖像鏈接至所述合成圖 像的方式在所述處理器可訪問(wèn)存儲(chǔ)器系統(tǒng)中存儲(chǔ)所述音頻數(shù)據(jù)和所述低分辨率圖像的步馬聚ο
11.根據(jù)權(quán)利要求1所述的方法，其中所述低分辨率圖像具有實(shí)質(zhì)上與所述多個(gè)圖像 的所述其他圖像相同的曝光時(shí)間。
12.根據(jù)權(quán)利要求1所述的方法，其中，其中所述低分辨率圖像具有比所述多個(gè)圖像的所述其他圖像更長(zhǎng)的曝光時(shí)間。
13.根據(jù)權(quán)利要求1所述的方法，其中指示形成圖像的修正集的步驟、指示形成合成圖 像的步驟、以及指示存儲(chǔ)合成圖像的步驟發(fā)生于在所述多個(gè)圖像的任一個(gè)上進(jìn)行噪聲減小 處理之前。
14.根據(jù)權(quán)利要求1所述的方法，其中指示形成圖像的修正集的步驟、指示形成合成圖 像的步驟、以及指示存儲(chǔ)合成圖像的步驟發(fā)生于從所述多個(gè)圖像的每一個(gè)消除圖像-傳感 器相關(guān)噪聲之后。
15.根據(jù)權(quán)利要求1所述的方法，其中指示形成圖像的修正集的步驟、指示形成合成 圖像的步驟、以及指示存儲(chǔ)合成圖像的步驟發(fā)生于從所述多個(gè)圖像的每一個(gè)識(shí)別出邊緣之后。
16.根據(jù)權(quán)利要求1所述的方法，其中指示形成圖像的修正集的步驟、指示形成合成圖 像的步驟、以及指示存儲(chǔ)合成圖像的步驟發(fā)生于從所述多個(gè)圖像被全色彩修正和邊緣增強(qiáng) 之后。
17.一種存儲(chǔ)指令的處理器可訪問(wèn)存儲(chǔ)器系統(tǒng)，所述指令配置為使得數(shù)據(jù)處理系統(tǒng)實(shí) 現(xiàn)用于形成圖像的方法，其中所述指令包括用于在相同時(shí)間段內(nèi)獲取場(chǎng)景的多個(gè)圖像的指令，其中所述多個(gè)圖像的大部分圖像為 以比所述多個(gè)圖像的其他圖像更低的分辨率獲得的低分辨率圖像；至少通過(guò)修正所述低分辨率圖像中的至少一些圖像之間的運(yùn)動(dòng)來(lái)形成圖像的修正集 的指令；至少通過(guò)將所述圖像的修正集中的至少一個(gè)圖像的至少一部分(a)與所述多個(gè)圖像 的所述其他圖像的至少一個(gè)的至少一部分(b)相合并來(lái)形成合成圖像的指令；以及 存儲(chǔ)所述合成圖像至處理器可訪問(wèn)存儲(chǔ)器系統(tǒng)的指令。
18.根據(jù)權(quán)利要求17所述的存儲(chǔ)器系統(tǒng)，其中所述多個(gè)圖像的所述其他圖像只包括單 個(gè)高分辨率圖像。
19.根據(jù)權(quán)利要求17所述的存儲(chǔ)器系統(tǒng)，其中獲取指令還包括，用于在獲取所述多個(gè) 圖像的所述其他圖像之前獲取所述低分辨率圖像的指令。
20.一種系統(tǒng)，包括 數(shù)據(jù)處理系統(tǒng)；以及存儲(chǔ)器系統(tǒng)，其可通信地連接到所述數(shù)據(jù)處理系統(tǒng)并存儲(chǔ)指令，所述指令配置為使得 所述數(shù)據(jù)處理系統(tǒng)實(shí)現(xiàn)用于形成圖像的方法，其中所述指令包括用于在相同時(shí)間段內(nèi)獲取場(chǎng)景的多個(gè)圖像的指令，其中所述多個(gè)圖像的大部分圖像為 以比所述多個(gè)圖像的其他圖像更低的分辨率獲得的低分辨率圖像；至少通過(guò)修正所述低分辨率圖像中的至少一些圖像之間的運(yùn)動(dòng)來(lái)形成圖像的修正集 的指令；至少通過(guò)將所述圖像的修正集中的至少一個(gè)圖像的至少一部分(a)與所述多個(gè)圖像 的所述其他圖像的至少一個(gè)的至少一部分(b)相合并來(lái)形成合成圖像的指令；以及 存儲(chǔ)所述合成圖像至處理器可訪問(wèn)存儲(chǔ)器系統(tǒng)的指令。
21.根據(jù)權(quán)利要求20所述的系統(tǒng)，其中所述多個(gè)圖像的所述其他圖像只包括單個(gè)高分辨率圖像。
22.根據(jù)權(quán)利要求20所述的系統(tǒng)，其中獲取指令還包括，用于在獲取所述多個(gè)圖像的 所述其他圖像之前獲取所述低分辨率圖像的指令。
全文摘要
在相同時(shí)間段內(nèi)獲取場(chǎng)景的多個(gè)圖像。所述多個(gè)圖像的大部分圖像為用比所述多個(gè)圖像的其他圖像低的分辨率獲得的低分辨率圖像。至少通過(guò)針對(duì)所述低分辨率圖像的至少一些圖像之間的運(yùn)動(dòng)進(jìn)行修正來(lái)形成圖像的修正集。另外，至少通過(guò)將所述圖像的修正集中的至少一個(gè)圖像的至少一部分(a)與所述多個(gè)圖像的所述其他圖像的至少一個(gè)圖像的至少一部分(b)合并，來(lái)形成合成圖像。所述合成圖像存儲(chǔ)在處理器可訪問(wèn)存儲(chǔ)器系統(tǒng)中。所述合成圖像展現(xiàn)了改良的圖像質(zhì)量，包括相對(duì)于傳統(tǒng)技術(shù)減少的運(yùn)動(dòng)模糊、更高的信噪比以及更高的分辨率。
文檔編號(hào)H04N9/64GK102090068SQ200980126512
公開日2011年6月8日 申請(qǐng)日期2009年7月21日 優(yōu)先權(quán)日2008年8月1日
發(fā)明者A·D·恩格, J·N·博德 申請(qǐng)人:伊斯曼柯達(dá)公司