專利名稱：圖像處理設(shè)備以及圖像處理方法
技術(shù)領(lǐng)域：
本公開(kāi)涉及圖像處理設(shè)備以及圖像處理方法，其中圖像存儲(chǔ)部分和各種圖像處理器經(jīng)由系統(tǒng)總線連接，并且各種圖像處理器通過(guò)訪問(wèn)圖像存儲(chǔ)器進(jìn)行各自類型的圖像數(shù)據(jù)處理。
背景技術(shù)：
從圖像信息本身中獲取兩個(gè)屏幕之間的運(yùn)動(dòng)矢量的塊匹配技術(shù)是一種老技術(shù)。主要在電視攝像機(jī)的搖動(dòng)和傾斜檢測(cè)及對(duì)象跟蹤、運(yùn)動(dòng)圖像專家組(MPEG)系統(tǒng)的運(yùn)動(dòng)圖像編碼等方面取得了發(fā)展。而且，自上世紀(jì)九十年代初以來(lái)，關(guān)于基于圖像疊加的多種技術(shù)正得到應(yīng)用，如低亮度下拍攝中的無(wú)傳感器攝像機(jī)抖動(dòng)校正和噪聲消除(噪聲降低，下文表示成NR)。塊匹配是計(jì)算兩個(gè)屏幕(即，作為感興趣屏幕的參考屏幕和作為這個(gè)參考屏幕的運(yùn)動(dòng)原點(diǎn)的原始屏幕(稱為目標(biāo)屏幕))之間的運(yùn)動(dòng)矢量的方法。在計(jì)算兩個(gè)屏幕之間的運(yùn)動(dòng)矢量時(shí)，針對(duì)具有預(yù)定尺寸的矩形區(qū)域的塊計(jì)算參考屏幕與原始屏幕之間的相關(guān)性， 從而計(jì)算運(yùn)動(dòng)矢量。存在如下兩種情況將原始屏幕當(dāng)作在時(shí)間上早于參考屏幕的屏幕的情況(例如，MPEG中的運(yùn)動(dòng)檢測(cè)的情況)；和將參考屏幕當(dāng)作在時(shí)間上早于原始屏幕的屏幕的情況(例如，后面所述的通過(guò)圖像幀的疊加而降低噪聲的情況)。在本說(shuō)明書(shū)中，屏幕指的是由一個(gè)幀或一個(gè)場(chǎng)的圖像數(shù)據(jù)組成并作為一個(gè)圖像顯示在顯示器上的圖像。但是，為了便于本說(shuō)明書(shū)中的如下描述起見(jiàn)，基于屏幕由一個(gè)幀組成的假設(shè)，往往將屏幕稱為幀。例如，參考屏幕往往被稱為參考幀，并且原始屏幕往往被稱為原始幀。在塊匹配技術(shù)中，將目標(biāo)幀劃分成多個(gè)目標(biāo)塊，并在參考幀中為每個(gè)目標(biāo)塊設(shè)置搜索范圍。然后，從圖像存儲(chǔ)器中讀出目標(biāo)幀的目標(biāo)塊和參考幀的搜索范圍內(nèi)的參考?jí)K，并計(jì)算各個(gè)像素的絕對(duì)差之和。在下文中，將絕對(duì)差之和稱為SAD值。當(dāng)計(jì)算SAD值時(shí)，形成與搜索范圍的大小相對(duì)應(yīng)的SAD值表。將SAD值表中的SAD值的最小值的坐標(biāo)值當(dāng)作有關(guān)目標(biāo)塊的運(yùn)動(dòng)矢量。進(jìn)行塊匹配時(shí)存儲(chǔ)圖像數(shù)據(jù)的圖像存儲(chǔ)器經(jīng)由系統(tǒng)總線與運(yùn)動(dòng)矢量檢測(cè)器等連接，并通過(guò)存儲(chǔ)器控制器控制對(duì)圖像存儲(chǔ)器的讀寫。在塊匹配技術(shù)中，計(jì)算有關(guān)來(lái)自圖像存儲(chǔ)器的以像素為單位的數(shù)據(jù)的SAD值。因此，訪問(wèn)圖像存儲(chǔ)器的次數(shù)與圖像本身的像素?cái)?shù)量和搜索范圍的大小成比例地變大，因此需要將總線頻帶設(shè)置得更寬?？偩€頻帶指的是在用于傳送數(shù)據(jù)的總線上避免擁塞的情況下、可以用于傳送數(shù)據(jù)的由數(shù)據(jù)速率、總線寬度(位數(shù))等組成的數(shù)值。將總線頻帶加寬會(huì)弓丨起系統(tǒng)規(guī)模變大和成本增大的問(wèn)題。為了解決這個(gè)問(wèn)題，人們提出了例如如果圖像狀態(tài)是圖像不運(yùn)動(dòng)的靜止?fàn)顟B(tài)則不進(jìn)行匹配處理的技術(shù)、和通過(guò)抽取參考幀的圖像減少信息量的技術(shù)。作為在不降低塊匹配精度的情況下減小總線頻帶的技術(shù)，保留參考幀的參考?jí)K的共同部分而只更新附加部分的技術(shù)是有效的。但是，存在這些技術(shù)導(dǎo)致塊匹配的精度降低和只能應(yīng)用于不要求高精度的某些有限應(yīng)用的問(wèn)題。如果應(yīng)用保留參考幀的參考?jí)K的共同部分而只更新附加部分的技術(shù)，則可以在不降低塊匹配精度的情況下減小總線頻帶。但是，經(jīng)歷匹配處理的塊的次序是重要的，并且存在不能實(shí)現(xiàn)總線頻帶減小的問(wèn)題，例如，當(dāng)未對(duì)相鄰塊連續(xù)進(jìn)行匹配處理時(shí)，以及當(dāng)不能指定匹配處理的次序時(shí)。而且，假設(shè)除了塊匹配處理器之外的多個(gè)圖像數(shù)據(jù)處理器也經(jīng)由系統(tǒng)總線與圖像存儲(chǔ)器連接。在這種情況下，即使將用于塊匹配處理的有效系統(tǒng)用作對(duì)圖像存儲(chǔ)器的圖像數(shù)據(jù)的存儲(chǔ)器訪問(wèn)方式，這種對(duì)圖像存儲(chǔ)器的圖像數(shù)據(jù)的存儲(chǔ)器訪問(wèn)技術(shù)也不適用于其它圖像數(shù)據(jù)處理器。存在關(guān)于其它圖像數(shù)據(jù)處理器這種技術(shù)有可能相反地使總線頻帶增大的問(wèn)題。

發(fā)明內(nèi)容
日本專利公開(kāi)第2009-116763號(hào)提出了這樣的技術(shù)，其中結(jié)合在圖像的垂直方向的線數(shù)和沿著水平方向的像素?cái)?shù)，以不同的兩種類型的塊為單位將輸出圖像數(shù)據(jù)寫入兩個(gè)存儲(chǔ)區(qū)中。在這種技術(shù)中，準(zhǔn)備了兩種適合將數(shù)據(jù)傳遞給隨后級(jí)電路的格式和適合塊匹配的數(shù)據(jù)格式，從而滿足兩種要求。但是，動(dòng)態(tài)隨機(jī)存取存儲(chǔ)器(DRAM)上的存儲(chǔ)容量加倍了。 因此，盡管解決了與總線頻帶減小有關(guān)的問(wèn)題，但新引起了有關(guān)存儲(chǔ)容量和功耗的問(wèn)題?？偩€頻帶和存儲(chǔ)容量存在密切關(guān)系。只減小它們之一不會(huì)導(dǎo)致系統(tǒng)成本降低，只有當(dāng)減小兩者時(shí)才有價(jià)值。需要一種對(duì)于多個(gè)圖像數(shù)據(jù)處理器經(jīng)由系統(tǒng)總線與圖像存儲(chǔ)器連接的情況，在避免上述問(wèn)題的情況下實(shí)現(xiàn)總線頻帶減小和存儲(chǔ)容量減小的技術(shù)。按照本公開(kāi)的一個(gè)實(shí)施例，提供了一種包括圖像處理器的圖像處理設(shè)備，所述圖像處理器被配置成以塊為單位計(jì)算目標(biāo)幀的圖像數(shù)據(jù)與參考幀的圖像數(shù)據(jù)之間的運(yùn)動(dòng)矢量。為了讓所述圖像處理器進(jìn)行處理，所述圖像處理設(shè)備包括配置成保留過(guò)去幀的圖像數(shù)據(jù)作為參考幀的圖像數(shù)據(jù)的參考幀圖像存儲(chǔ)器。而且，所述圖像處理設(shè)備還包括配置成保留在所述圖像處理器的計(jì)算中的參考幀的匹配處理范圍的一級(jí)存儲(chǔ)器。此外，所述圖像處理設(shè)備還包括配置成從存儲(chǔ)在所述參考幀圖像存儲(chǔ)器中的參考幀的圖像數(shù)據(jù)中讀出和保留所希望范圍的圖像數(shù)據(jù)的二級(jí)存儲(chǔ)器。所述二級(jí)存儲(chǔ)器從保留的圖像數(shù)據(jù)中讀出匹配處理范圍的數(shù)據(jù)，并將所讀數(shù)據(jù)供應(yīng)給所述一級(jí)存儲(chǔ)器。另外，所述圖像處理設(shè)備還包括數(shù)據(jù)壓縮器和擴(kuò)展器。按照本公開(kāi)的實(shí)施例，由像DRAM那樣的大容量存儲(chǔ)器配置的參考幀圖像存儲(chǔ)器可以具有這樣的配置，即以在隨后級(jí)電路中使用所存儲(chǔ)圖像數(shù)據(jù)時(shí)方便的格式等記錄數(shù)據(jù)。另一方面，經(jīng)由二級(jí)存儲(chǔ)器將匹配處理范圍中的圖像數(shù)據(jù)供應(yīng)給一級(jí)存儲(chǔ)器。因此，通過(guò)二級(jí)存儲(chǔ)器側(cè)的轉(zhuǎn)換，可以容易地將圖像數(shù)據(jù)保留成適合塊匹配的格式的圖像數(shù)據(jù)。而且，也可以壓縮大容量存儲(chǔ)器的圖像數(shù)據(jù)，并有效地記錄該圖像數(shù)據(jù)。按照本公開(kāi)的實(shí)施例，可以以在隨后級(jí)電路中使用所存儲(chǔ)圖像數(shù)據(jù)時(shí)方便的格式等將數(shù)據(jù)記錄在由大容量存儲(chǔ)器配置的參考幀圖像存儲(chǔ)器中，并且例如可以壓縮數(shù)據(jù)和有效地記錄數(shù)據(jù)。而且，一級(jí)存儲(chǔ)器接收二級(jí)存儲(chǔ)器事先轉(zhuǎn)換成適合塊匹配的格式的數(shù)據(jù)。因此，配備二級(jí)存儲(chǔ)器具有這樣的有利效果提高由大容量存儲(chǔ)器配置的參考幀圖像存儲(chǔ)器的記錄效率以及提高一級(jí)存儲(chǔ)器中用于塊匹配處理的數(shù)據(jù)的獲取處理的效率，并且可以進(jìn)行適當(dāng)?shù)拇鎯?chǔ)器訪問(wèn)。


圖1是示出按照本公開(kāi)一個(gè)實(shí)施例的作為圖像處理設(shè)備的成像設(shè)備的配置例子的方塊圖；圖2是示出按照本公開(kāi)一個(gè)實(shí)施例的自動(dòng)存儲(chǔ)器復(fù)制部分的配置例子的方塊圖；圖3是示出本公開(kāi)一個(gè)實(shí)施例的成像設(shè)備中拍攝圖像的噪聲降低處理的一個(gè)例子的說(shuō)明圖4是示出本公開(kāi)一個(gè)實(shí)施例的成像設(shè)備中拍攝圖像的噪聲降低處理的一個(gè)例子的說(shuō)明圖5是示出基本平面和縮小平面的例子的說(shuō)明圖；圖6是示出基本平面和縮小平面的例子的說(shuō)明圖；圖7A到7C是示出利用基本平面和縮小平面處理的例子的說(shuō)明圖；圖8是示出本公開(kāi)一個(gè)實(shí)施例的成像設(shè)備中運(yùn)動(dòng)檢測(cè)和運(yùn)動(dòng)補(bǔ)償部分中的操作例子的說(shuō)明圖；圖9是示出本公開(kāi)一個(gè)實(shí)施例的成像設(shè)備中運(yùn)動(dòng)檢測(cè)和運(yùn)動(dòng)補(bǔ)償部分的配置例子的方塊圖；圖10是示出本公開(kāi)一個(gè)實(shí)施例的運(yùn)動(dòng)檢測(cè)和運(yùn)動(dòng)補(bǔ)償部分的一部分的詳細(xì)配置例子的方塊圖；圖11是示出本公開(kāi)一個(gè)實(shí)施例的運(yùn)動(dòng)檢測(cè)和運(yùn)動(dòng)補(bǔ)償部分的一部分的詳細(xì)配置例子的方塊圖；圖12是示出本公開(kāi)一個(gè)實(shí)施例的成像設(shè)備中圖像疊加部分的配置例子的方塊圖13是說(shuō)明本公開(kāi)一個(gè)實(shí)施例的成像設(shè)備中的圖像處理例子的流程14是說(shuō)明本公開(kāi)一個(gè)實(shí)施例的成像設(shè)備中的圖像處理例子的流程15是說(shuō)明本公開(kāi)一個(gè)實(shí)施例的成像設(shè)備中的圖像處理例子的流程16是說(shuō)明本公開(kāi)一個(gè)實(shí)施例的運(yùn)動(dòng)矢量計(jì)算器的處理操作例子的流程圖；圖17是說(shuō)明本公開(kāi)一個(gè)實(shí)施例的運(yùn)動(dòng)矢量計(jì)算器的處理操作例子的流程圖；圖18A和18B是示出帶訪問(wèn)形式的說(shuō)明圖；圖19A和19B是示出圖像數(shù)據(jù)的存儲(chǔ)器訪問(wèn)的系統(tǒng)的說(shuō)明圖；圖20是示出圖像處理單位的例子的說(shuō)明圖；圖21A和21B是示出圖像數(shù)據(jù)的存儲(chǔ)器訪問(wèn)的操作的說(shuō)明圖；圖22是示出圖像數(shù)據(jù)的存儲(chǔ)器訪問(wèn)的操作的說(shuō)明23是示出圖像數(shù)據(jù)的存儲(chǔ)器訪問(wèn)的操作的說(shuō)明24是示出圖像數(shù)據(jù)的存儲(chǔ)器訪問(wèn)的操作的說(shuō)明圖
圖25是示出圖像數(shù)據(jù)的存儲(chǔ)器訪問(wèn)的操作的說(shuō)明圖；圖26是示出圖像數(shù)據(jù)的存儲(chǔ)器訪問(wèn)的操作的說(shuō)明圖；圖27是示出圖像數(shù)據(jù)的存儲(chǔ)器訪問(wèn)的操作的說(shuō)明圖；圖28A和28B是示出圖像數(shù)據(jù)的存儲(chǔ)器訪問(wèn)的操作的說(shuō)明圖；圖29是示出圖像數(shù)據(jù)的存儲(chǔ)器訪問(wèn)的操作的說(shuō)明圖；圖30是示出圖像數(shù)據(jù)的存儲(chǔ)器訪問(wèn)的操作的說(shuō)明圖；圖31是說(shuō)明按照本公開(kāi)一個(gè)實(shí)施例的圖像處理例子的流程圖；圖32是說(shuō)明按照本公開(kāi)一個(gè)實(shí)施例的圖像處理例子的流程圖；圖33是說(shuō)明按照本公開(kāi)一個(gè)實(shí)施例的圖像處理例子的流程圖；圖34是示出按照本公開(kāi)一個(gè)實(shí)施例的存儲(chǔ)器上的格式例子的說(shuō)明圖；圖35是示出按照本公開(kāi)一個(gè)實(shí)施例的存儲(chǔ)器上的格式例子的說(shuō)明圖；圖36A和36B是示出按照本公開(kāi)一個(gè)實(shí)施例的復(fù)制到存儲(chǔ)器的區(qū)域的改變例子的說(shuō)明圖；圖37A和37B是示出按照本公開(kāi)一個(gè)實(shí)施例的復(fù)制到存儲(chǔ)器的區(qū)域的改變例子的說(shuō)明圖；以及圖38是本公開(kāi)一個(gè)實(shí)施例的例子與其它例子的處理之間的比較的說(shuō)明圖。
具體實(shí)施例方式下面按如下次序描述本公開(kāi)一個(gè)實(shí)施例的例子I.成像設(shè)備的配置(圖1，圖3，圖4)；2.存儲(chǔ)器復(fù)制部分的配置(圖2);3.運(yùn)動(dòng)檢測(cè)和運(yùn)動(dòng)補(bǔ)償部分的描述(圖5到12)；4.拍攝圖像的噪聲降低處理的流程(圖13到15)；5.分層塊匹配處理的流程的例子(圖16和17)；6.存儲(chǔ)器上的格式的描述(圖18A到圖30);以及7.利用二級(jí)存儲(chǔ)器的處理的描述(圖31到圖38)。[I.成像設(shè)備的配置]下面參考附圖將成像設(shè)備作為一個(gè)例子地描述按照本公開(kāi)一個(gè)實(shí)施例的圖像處
理設(shè)備。該成像設(shè)備包括進(jìn)行圖像處理的圖像處理器，其中通過(guò)塊匹配檢測(cè)兩個(gè)屏幕之間的運(yùn)動(dòng)矢量，以便使用檢測(cè)的運(yùn)動(dòng)矢量生成運(yùn)動(dòng)補(bǔ)償圖像，并且通過(guò)將生成的運(yùn)動(dòng)補(bǔ)償圖像疊加在作為噪聲降低對(duì)象的圖像上，進(jìn)行噪聲降低。首先描述這種圖像處理的概況。這個(gè)例子被配置成可以通過(guò)使用運(yùn)動(dòng)檢測(cè)和運(yùn)動(dòng)補(bǔ)償對(duì)準(zhǔn)連續(xù)拍攝的多個(gè)圖像， 然后疊加(相加)這些圖像獲得其中降低了噪聲的圖像。也就是說(shuō)，因?yàn)槎鄠€(gè)圖像每一個(gè)中的噪聲是隨機(jī)的，所以如果疊加具有相同內(nèi)容的圖像，則可以降低圖像的噪聲。在下文中，將通過(guò)使用運(yùn)動(dòng)檢測(cè)和運(yùn)動(dòng)補(bǔ)償疊加多個(gè)圖像來(lái)降低噪聲稱為NR(噪聲降低)，并將通過(guò)NR降低了噪聲的圖像稱為NR圖像。而且，在本說(shuō)明書(shū)中，將希望經(jīng)歷降低噪聲的屏幕(圖像)定義為目標(biāo)屏幕(目標(biāo)幀)，并且將希望疊加的屏幕定義為參考屏幕(參考幀)。連續(xù)拍攝的圖像包括因拍攝人員等引起的攝像機(jī)抖動(dòng)導(dǎo)致的圖像位置的偏移，并且為了疊加兩個(gè)圖像，對(duì)準(zhǔn)是很重要的。應(yīng)該考慮的地方是，除了像由攝像機(jī)抖動(dòng)引起的模糊那樣的整個(gè)屏幕的模糊之外，還存在屏眷中的拍攝對(duì)象的運(yùn)動(dòng)。在本示例的成像設(shè)備中，在靜止圖像拍攝中，如圖3所示，高速拍攝多個(gè)圖像，并將第一拍攝圖像當(dāng)作目標(biāo)幀100。而且，將作為第二和隨后圖像的預(yù)定數(shù)量的拍攝圖像當(dāng)作參考幀101。疊加目標(biāo)幀100和參考幀101，并將疊加所得的圖像記錄成拍攝靜止圖像。也就是說(shuō)，當(dāng)拍攝人員進(jìn)行按下成像設(shè)備的快門按鈕的操作時(shí)，高速拍攝預(yù)定數(shù)量的圖像。而且，在第一拍攝圖像(幀)上，疊加稍后拍攝的多個(gè)圖像(幀)。在運(yùn)動(dòng)圖像拍攝中，如圖4所示，將從成像元件輸出的當(dāng)前幀的圖像當(dāng)作目標(biāo)幀 100的圖像，將前一幀的過(guò)去圖像當(dāng)作參考幀101的圖像。因此，為了進(jìn)行當(dāng)前幀的圖像的噪聲降低，將當(dāng)前幀的前一幀的圖像疊加在當(dāng)前幀的圖像上。將參考圖I描述進(jìn)行這樣的運(yùn)動(dòng)檢測(cè)和運(yùn)動(dòng)補(bǔ)償?shù)某上裨O(shè)備的配置。在顯示在圖I中的成像設(shè)備中，中央處理單元(CPU) I與系統(tǒng)總線2連接。另外， 成像信號(hào)處理系統(tǒng)、用戶操作輸入部分3、大容量存儲(chǔ)器40、記錄和再現(xiàn)設(shè)備5等也與系統(tǒng)總線2連接。盡管省略了圖形表示，但CPU I被定義成包括存儲(chǔ)執(zhí)行各類軟件處理的程序的只讀存儲(chǔ)器(ROM)、用作工作區(qū)的隨機(jī)存取存儲(chǔ)器(RAM)等。這也適用于在本說(shuō)明書(shū)中描述的除了 CPUl之外的其它CPU。大容量存儲(chǔ)器40由像DRAM那樣具有相對(duì)大容量的存儲(chǔ)器及其控制器組成，并且是具有允許存儲(chǔ)一個(gè)幀或多個(gè)幀的圖像數(shù)據(jù)的容量的圖像存儲(chǔ)器。也可以應(yīng)用這樣的配置，其中將存儲(chǔ)器的控制器配備在存儲(chǔ)器40的外部，并經(jīng)由系統(tǒng)總線2等控制讀寫。在下文中，將大容量存儲(chǔ)器40稱為圖像存儲(chǔ)器40。響應(yīng)經(jīng)由用戶操作輸入部分3開(kāi)始成像和記錄的操作，圖I的成像設(shè)備中的成像信號(hào)處理系統(tǒng)進(jìn)行后面所述的拍攝圖像數(shù)據(jù)的記錄處理。而且，響應(yīng)經(jīng)由用戶操作輸入部分3開(kāi)始再現(xiàn)拍攝記錄圖像的操作，圖I的成像設(shè)備中的成像信號(hào)處理系統(tǒng)進(jìn)行記錄在記錄和再現(xiàn)設(shè)備5的記錄介質(zhì)中的拍攝圖像數(shù)據(jù)的再現(xiàn)處理。如圖I所示，作為成像信號(hào)處理系統(tǒng)，將經(jīng)由包括成像鏡頭IOL的攝像機(jī)光學(xué)系統(tǒng) (未示出)來(lái)自被攝體的入射光照射在成像元件11上，并將它的圖像拍攝下來(lái)。在本示例中，成像元件11由電荷耦合器件(CXD)成像器形成。成像元件11也可以由像互補(bǔ)金屬氧化物半導(dǎo)體(CMOS)成像器那樣的其它成像器形成。在本示例的成像設(shè)備中，當(dāng)進(jìn)行開(kāi)始成像和記錄的操作時(shí)，由成像元件11將經(jīng)由鏡頭IOL輸入的視頻轉(zhuǎn)換成拍攝圖像信號(hào)。這個(gè)拍攝圖像信號(hào)被輸出作為由三原色(即， 紅色(R)、綠色(G)和藍(lán)色(B))組成的拜耳(Bayer)陣列的RAW信號(hào)(原始信號(hào))的模擬成像信號(hào)，作為與來(lái)自定時(shí)信號(hào)發(fā)生器12的定時(shí)信號(hào)同步的信號(hào)。將輸出的模擬成像信號(hào)供應(yīng)給預(yù)處理部分13，并經(jīng)受如缺陷校正和伽瑪校正的預(yù)處理。將所得信號(hào)供應(yīng)給數(shù)據(jù)轉(zhuǎn)換器14。數(shù)據(jù)轉(zhuǎn)換器14將作為輸入其中的RAW信號(hào)的模擬成像信號(hào)轉(zhuǎn)換成由亮度信號(hào)分量Y和色差信號(hào)分量Cb/Cr組成的數(shù)字圖像數(shù)據(jù)(YC數(shù)據(jù))，并且將數(shù)字圖像數(shù)據(jù)作為目標(biāo)圖像供應(yīng)給運(yùn)動(dòng)檢測(cè)和運(yùn)動(dòng)補(bǔ)償部分16。在運(yùn)動(dòng)檢測(cè)和運(yùn)動(dòng)補(bǔ)償部分16中，將數(shù)字圖像數(shù)據(jù)存儲(chǔ)在緩沖存儲(chǔ)器16a中用于目標(biāo)圖像的區(qū)域中。
運(yùn)動(dòng)檢測(cè)和運(yùn)動(dòng)補(bǔ)償部分16經(jīng)由自動(dòng)存儲(chǔ)器復(fù)制部分50和二級(jí)存儲(chǔ)器60獲取已經(jīng)寫到圖像存儲(chǔ)器40中的前一幀的圖像信號(hào)作為參考圖像。將所獲參考圖像存儲(chǔ)在運(yùn)動(dòng)檢測(cè)和運(yùn)動(dòng)補(bǔ)償部分16的緩沖存儲(chǔ)器16a中用于參考圖像的區(qū)域中。緩沖存儲(chǔ)器16a 的具體配置例子將在后面描述。這個(gè)緩沖存儲(chǔ)器16a用作后面所述的內(nèi)部一級(jí)存儲(chǔ)器。在下文中，將緩沖存儲(chǔ)器16a稱為一級(jí)存儲(chǔ)器或內(nèi)部一級(jí)存儲(chǔ)器。運(yùn)動(dòng)檢測(cè)和運(yùn)動(dòng)補(bǔ)償部分16使用目標(biāo)幀的圖像數(shù)據(jù)和參考幀的圖像數(shù)據(jù)進(jìn)行后面所述的塊匹配處理，并以目標(biāo)塊為單位檢測(cè)運(yùn)動(dòng)矢量。在檢測(cè)運(yùn)動(dòng)矢量時(shí)，進(jìn)行縮小平面的搜索和基本平面的搜索。在檢測(cè)運(yùn)動(dòng)矢量時(shí)，計(jì)算和輸出指示運(yùn)動(dòng)矢量的檢測(cè)精度的命中率3。并且，在運(yùn)動(dòng)檢測(cè)和運(yùn)動(dòng)補(bǔ)償部分16中，根據(jù)檢測(cè)的運(yùn)動(dòng)矢量生成逐塊進(jìn)行運(yùn)動(dòng)補(bǔ)償?shù)倪\(yùn)動(dòng)補(bǔ)償圖像。將生成的運(yùn)動(dòng)補(bǔ)償圖像和原始目標(biāo)圖像的數(shù)據(jù)供應(yīng)給構(gòu)成圖像疊加部分17的相加率計(jì)算器171和加法器172。相加率計(jì)算器171根據(jù)命中率P計(jì)算目標(biāo)圖像和運(yùn)動(dòng)補(bǔ)償圖像的相加的相加率 a，并將計(jì)算的相加率a供應(yīng)給加法器172。加法器172利用相加率a進(jìn)行目標(biāo)圖像的數(shù)據(jù)和運(yùn)動(dòng)補(bǔ)償圖像的數(shù)據(jù)的相加處理，并進(jìn)行圖像疊加處理，以獲得其中降低了噪聲的相加圖像。在下文中，將其中降低了噪聲的相加圖像稱為NR圖像。讓數(shù)據(jù)壓縮器35對(duì)作為加法器172輸出的疊加結(jié)果的降低了噪聲的相加圖像的圖像數(shù)據(jù)進(jìn)行數(shù)據(jù)壓縮，然后存儲(chǔ)在圖像存儲(chǔ)器40中。數(shù)據(jù)壓縮器35為了有效地將數(shù)據(jù)存儲(chǔ)在圖像存儲(chǔ)器40中而進(jìn)行壓縮處理。在本示例中，數(shù)據(jù)壓縮器35將一個(gè)幀的圖像數(shù)據(jù)劃分成以目標(biāo)塊為單位的圖像數(shù)據(jù)以便在運(yùn)動(dòng)檢測(cè)和運(yùn)動(dòng)補(bǔ)償部分16中進(jìn)行塊匹配處理，并且對(duì)以目標(biāo)塊為單位的圖像數(shù)據(jù)進(jìn)行壓縮處理。在這種壓縮處理中，以每一條線為基礎(chǔ)，進(jìn)一步劃分以一個(gè)目標(biāo)塊為單位的數(shù)據(jù)， 并且對(duì)以一條線為單位的數(shù)據(jù)進(jìn)行壓縮處理。為壓縮處理而劃分的例子將在后面描述(圖 34 等)。圖像存儲(chǔ)器40將壓縮處理所得和與一個(gè)幀相對(duì)應(yīng)的NR圖像的數(shù)據(jù)存儲(chǔ)和保留在圖像存儲(chǔ)器40中的IV前幀存儲(chǔ)部分41中。除了 IV前幀存儲(chǔ)部分41之外，圖像存儲(chǔ)器40 還包括2V前幀存儲(chǔ)部分42，并且在每一個(gè)幀周期將存儲(chǔ)的數(shù)據(jù)從IV前幀存儲(chǔ)部分41移動(dòng)到2V前幀存儲(chǔ)部分42。與存儲(chǔ)數(shù)據(jù)從IV前幀存儲(chǔ)部分41到2V前幀存儲(chǔ)部分42的這種移動(dòng)結(jié)合，將存儲(chǔ)在2V前幀存儲(chǔ)部分42中的數(shù)據(jù)讀出到數(shù)據(jù)擴(kuò)展器36。在圖I的配置中，存儲(chǔ)兩個(gè)幀的圖像數(shù)據(jù)。但是，如果在運(yùn)動(dòng)檢測(cè)和運(yùn)動(dòng)補(bǔ)償部分 16等中使用更多過(guò)去圖像數(shù)據(jù)，則可以存儲(chǔ)更多個(gè)幀的過(guò)去圖像數(shù)據(jù)，并將其用作參考幀。數(shù)據(jù)擴(kuò)展器36進(jìn)行將在數(shù)據(jù)壓縮器35中壓縮的圖像數(shù)據(jù)擴(kuò)展成將圖像數(shù)據(jù)存儲(chǔ)在圖像存儲(chǔ)器40中時(shí)的原始數(shù)據(jù)的處理。也就是說(shuō)，進(jìn)行擴(kuò)展在數(shù)據(jù)壓縮器35中以目標(biāo)塊為單位壓縮的圖像數(shù)據(jù)的處理。將數(shù)據(jù)擴(kuò)展器36擴(kuò)展的視頻數(shù)據(jù)供應(yīng)給分辨率轉(zhuǎn)換器 37。分辨率轉(zhuǎn)換器37將數(shù)據(jù)轉(zhuǎn)換成具有適合顯示或適合輸出的分辨率的圖像數(shù)據(jù)。如果將轉(zhuǎn)換的圖像數(shù)據(jù)記錄在記錄和再現(xiàn)設(shè)備5中，則通過(guò)運(yùn)動(dòng)圖像編解碼器19轉(zhuǎn)換圖像數(shù)據(jù)。 將運(yùn)動(dòng)圖像編解碼器19轉(zhuǎn)換的圖像數(shù)據(jù)記錄在記錄和再現(xiàn)設(shè)備5中的記錄介質(zhì)中，在需要的時(shí)候從記錄和再現(xiàn)設(shè)備5中的記錄介質(zhì)中讀出。
將分辨率轉(zhuǎn)換器37輸出的圖像數(shù)據(jù)或記錄和再現(xiàn)設(shè)備5再現(xiàn)的圖像數(shù)據(jù)供應(yīng)給 NTSC(美國(guó)國(guó)家電視系統(tǒng)委員會(huì))編碼器20。圖像數(shù)據(jù)被這個(gè)NTSC編碼器20轉(zhuǎn)換成NTSC 系統(tǒng)的標(biāo)準(zhǔn)彩色視頻信號(hào)，并供應(yīng)給由例如液晶顯示面板形成的監(jiān)視顯示器6。通過(guò)這樣供應(yīng)給監(jiān)視顯示器6，將監(jiān)視圖像顯示在監(jiān)視顯示器6的顯示屏上。盡管在圖I中省略了圖形表示，但可以經(jīng)由視頻輸出端將來(lái)自NTSC編碼器20的輸出視頻信號(hào)引到外部。在自動(dòng)存儲(chǔ)器復(fù)制部分50的控制下讀出存儲(chǔ)在圖像存儲(chǔ)器40中的一部分圖像數(shù)據(jù)，以便供應(yīng)給二級(jí)存儲(chǔ)器60并存儲(chǔ)在其中。其配置將在后面描述的自動(dòng)存儲(chǔ)器復(fù)制部分 50具有用于圖像數(shù)據(jù)的格式轉(zhuǎn)換器56。二級(jí)存儲(chǔ)器60包括用于IV前幀的局部存儲(chǔ)61和用于2V前幀的局部存儲(chǔ)62。將各自存儲(chǔ)61和62的存儲(chǔ)數(shù)據(jù)供應(yīng)給運(yùn)動(dòng)檢測(cè)和運(yùn)動(dòng)補(bǔ)償部分16，并用作參考幀的搜索范圍中的數(shù)據(jù)。一級(jí)存儲(chǔ)器16a和二級(jí)存儲(chǔ)器60是例如內(nèi)置在構(gòu)成運(yùn)動(dòng)檢測(cè)和運(yùn)動(dòng)補(bǔ)償部分16的圖像處理器中(或與其連接)的存儲(chǔ)器，并且由例如靜態(tài)隨機(jī)存取存儲(chǔ)器(SRAM) 形成。[2.存儲(chǔ)器復(fù)制部分的配置]圖2是示出本實(shí)施例的例子的自動(dòng)存儲(chǔ)器復(fù)制部分50的配置的圖形。在自動(dòng)存儲(chǔ)器復(fù)制部分50中，將搜索范圍的坐標(biāo)信息從運(yùn)動(dòng)檢測(cè)和運(yùn)動(dòng)補(bǔ)償部分16供應(yīng)給高速緩存旋轉(zhuǎn)控制器51。根據(jù)搜索范圍的坐標(biāo)信息，生成從圖像存儲(chǔ)器40中讀取的地址和寫入圖像存儲(chǔ)器60中的地址。將生成的讀取地址從讀取控制器52供應(yīng)給圖像存儲(chǔ)器40并進(jìn)行讀取。將生成的寫入地址從寫入控制器53供應(yīng)給二級(jí)存儲(chǔ)器60并進(jìn)行寫入。從圖像存儲(chǔ)器40讀出的圖像數(shù)據(jù)本身在數(shù)據(jù)控制器54的控制下傳送。明確地說(shuō)， 將從圖像存儲(chǔ)器40中讀出的圖像數(shù)據(jù)供應(yīng)到數(shù)據(jù)擴(kuò)展器55，讓寫到圖像存儲(chǔ)器40中時(shí)壓縮的圖像數(shù)據(jù)經(jīng)受擴(kuò)展處理。數(shù)據(jù)擴(kuò)展器55中的這種擴(kuò)展處理是根據(jù)與壓縮時(shí)相同的數(shù)據(jù)單位進(jìn)行。對(duì)于擴(kuò)展處理所得的圖像數(shù)據(jù)，在格式轉(zhuǎn)換器56中進(jìn)行使圖像數(shù)據(jù)具有適合運(yùn)動(dòng)檢測(cè)和運(yùn)動(dòng)補(bǔ)償部分16中的處理的數(shù)據(jù)排列(像素排列)的格式轉(zhuǎn)換。將格式轉(zhuǎn)換所得的圖像數(shù)據(jù)暫時(shí)累積在緩沖存儲(chǔ)器57中，然后與寫入控制器53的指令同步地寫入二級(jí)存儲(chǔ)器60中。[3.運(yùn)動(dòng)檢測(cè)和運(yùn)動(dòng)補(bǔ)償部分的描述]運(yùn)動(dòng)檢測(cè)和運(yùn)動(dòng)補(bǔ)償部分16通過(guò)使用作為絕對(duì)差值之和的SAD值進(jìn)行塊匹配處理來(lái)進(jìn)行運(yùn)動(dòng)矢量檢測(cè)?！捶謱訅K匹配處理的概況〉在一般塊匹配中的運(yùn)動(dòng)矢量檢測(cè)處理中，以像素為單位(以一個(gè)像素或多個(gè)像素為單位)移動(dòng)參考?jí)K，并計(jì)算每個(gè)移動(dòng)位置上與參考?jí)K有關(guān)的SAD值。然后，從計(jì)算的SAD 值當(dāng)中檢測(cè)顯示最小值的SAD值，并根據(jù)呈現(xiàn)這個(gè)最小SAD值的參考?jí)K位置檢測(cè)運(yùn)動(dòng)矢量。但是，在這種運(yùn)動(dòng)矢量檢測(cè)處理中，因?yàn)樵谒阉鞣秶鷥?nèi)逐個(gè)像素地移動(dòng)參考?jí)K，所以計(jì)算SAD值的匹配處理的次數(shù)與搜索范圍成正比地增加。這引起了使匹配處理時(shí)間變長(zhǎng)并且也使SAD表的大小變大的問(wèn)題。因此，在本示例中，為目標(biāo)圖像(目標(biāo)幀)和參考圖像(參考幀)創(chuàng)建縮小圖像， 并對(duì)創(chuàng)建的縮小圖像進(jìn)行塊匹配。根據(jù)對(duì)縮小圖像的運(yùn)動(dòng)檢測(cè)的結(jié)果，進(jìn)行對(duì)原始目標(biāo)圖像的塊匹配。將縮小圖像稱為縮小平面，而將未縮小的原始圖像稱為基本平面。因此，在本示例中，在進(jìn)行對(duì)縮小平面的塊匹配之后，使用匹配結(jié)果進(jìn)行對(duì)基本平面的塊匹配。圖5和6例示了目標(biāo)幀(圖像)和參考幀(圖像)的圖像縮小的概念。明確地說(shuō)， 在本示例中，例如如圖5所示，通過(guò)在水平方向和垂直方向的每個(gè)方向都將尺寸縮小到I/ n (n是正值)，將基本平面目標(biāo)幀130轉(zhuǎn)換成縮小平面目標(biāo)幀132。因此，將基本平面目標(biāo)幀 130劃分成多個(gè)塊生成的基本平面目標(biāo)塊131變成縮小平面目標(biāo)幀中通過(guò)在水平方向和垂直方向的每個(gè)方向都將尺寸縮小到1/n獲得的縮小平面目標(biāo)塊133。而且，依照目標(biāo)幀的圖像縮小率1/n縮小每個(gè)參考幀。明確地說(shuō)，如圖6所示，通過(guò)在水平方向和垂直方向的每個(gè)方向都將尺寸縮小到1/n，將基本平面參考幀134轉(zhuǎn)換成縮小平面參考幀135。在基本平面參考幀134上檢測(cè)的有關(guān)運(yùn)動(dòng)補(bǔ)償塊103的運(yùn)動(dòng)矢量104 像在縮小平面參考幀135中通過(guò)縮小到1/nXl/n獲得的縮小平面運(yùn)動(dòng)矢量136那樣檢測(cè)。在上述的例子中，目標(biāo)幀的圖像縮小率被設(shè)置成等于參考幀的圖像縮小率。但是， 為了減少計(jì)算量，可以使用在目標(biāo)幀(圖像)和參考幀(圖像)之間不同的圖像縮小率，并且可以這樣進(jìn)行匹配，使得通過(guò)例如像素內(nèi)插的處理將兩個(gè)幀的像素的數(shù)量設(shè)置成彼此相同。盡管垂直方向和水平方向的縮小率被設(shè)置成彼此相等，但水平方向的縮小率可以不同于垂直方向的縮小率。例如，如果在水平方向?qū)⒊叽缈s小到1/n而在垂直方向?qū)⒊叽缈s小到1/m (m是正數(shù)，m#n)，則縮小屏幕具有原始屏幕的1/n X 1/m的尺寸。圖7A到7C示出了縮小平面參考矢量與基本平面參考矢量之間的關(guān)系。假設(shè)在基本平面參考幀134中，如圖7A所示確定運(yùn)動(dòng)檢測(cè)原點(diǎn)105和搜索范圍106。在這種情況下， 在將圖像縮小到1/nXl/n獲得的縮小平面參考巾貞135上,搜索范圍是如圖7B所示縮小到 1/nX 1/n獲得的縮小平面搜索范圍137。在本示例中，在縮小平面搜索范圍137內(nèi)，設(shè)置代表相對(duì)于縮小平面參考幀135中的運(yùn)動(dòng)檢測(cè)原點(diǎn)105的位置偏移量的縮小平面參考矢量138。而且，評(píng)估每個(gè)縮小平面參考矢量138指示的位置上的縮小平面參考?jí)K139與縮小平面目標(biāo)塊133 (在圖7A到7C中未示出)之間的相關(guān)性。在這種情況下，因?yàn)樵诳s小圖像中進(jìn)行塊匹配，所以可以減少應(yīng)該在縮小平面參考幀135中計(jì)算SAD值的縮小平面參考?jí)K位置(縮小平面參考矢量)的數(shù)量。與計(jì)算SAD 的次數(shù)(匹配處理的次數(shù))的這種減少相對(duì)應(yīng)，可以提高處理的速度，并且可以縮小SAD表的規(guī)模。如圖8所示，獲得了通過(guò)多個(gè)縮小平面參考?jí)K139與縮小平面目標(biāo)塊133之間的塊匹配進(jìn)行的相關(guān)性評(píng)估，該多個(gè)縮小平面參考?jí)K139設(shè)置在取決于縮小平面搜索范圍 137定義的縮小平面匹配處理范圍143中。通過(guò)這種相關(guān)性評(píng)估，計(jì)算出縮小平面參考幀 135中的縮小平面運(yùn)動(dòng)矢量136。因?yàn)閳D像縮小到1/nXl/n，所以這種縮小平面運(yùn)動(dòng)矢量 136的精度是等于一個(gè)像素精度的1/n的低精度。因此，即使將這樣計(jì)算的縮小平面運(yùn)動(dòng)矢量136放大n倍，在基本平面參考幀134中也不能獲得一個(gè)像素精度的運(yùn)動(dòng)矢量104。但是，顯而易見(jiàn)，在基本平面參考幀134中，在通過(guò)將縮小平面運(yùn)動(dòng)矢量136放大 n倍獲得的運(yùn)動(dòng)矢量的附近存在一個(gè)像素精度的基本平面運(yùn)動(dòng)矢量104。因此，在本示例中，如圖7C和8所示，把將縮小平面運(yùn)動(dòng)矢量136放大n倍獲得的運(yùn)動(dòng)矢量(基本平面對(duì)參考矢量141)指示的位置當(dāng)作基本平面參考幀134中的中心。在將存在基本平面運(yùn)動(dòng)矢量104的小范圍中，這樣設(shè)置基本平面搜索范圍140使得這個(gè)位置被定義成中心，并取決于設(shè)置的基本平面搜索范圍140設(shè)置基本平面匹配處理范圍144。而且，如圖7C所示，將基本平面參考幀134中的基本平面參考矢量141設(shè)置成指示這個(gè)基本平面搜索范圍140中的位置的矢量，并將基本平面參考?jí)K142設(shè)置在每個(gè)基本平面參考矢量141指示的位置上。根據(jù)這些類型的設(shè)置，進(jìn)行基本平面參考幀134中的塊匹配。在本示例中設(shè)置的基本平面搜索范圍140和基本平面匹配處理范圍144可能是非常小的范圍。明確地說(shuō)，如圖8所示，它們與將縮小平面搜索范圍137和縮小平面匹配處理范圍143放大作為縮小率的倒數(shù)倍的n倍獲得的搜索范圍137'和匹配處理范圍143'相比，可能是非常小的范圍。因此，如果不進(jìn)行分層匹配而只在基本平面中進(jìn)行塊匹配處理，則需要在基本平面中的搜索范圍137'和匹配處理范圍143'中設(shè)置多個(gè)參考?jí)K，并需要進(jìn)行獲取與目標(biāo)塊的相關(guān)性的計(jì)算。相反，在分層匹配處理中，如圖8所示，只在非常小的范圍中進(jìn)行匹配處理就足夠了。因此，設(shè)置在小范圍的基本平面搜索范圍140和基本平面匹配處理范圍144中的基本平面參考?jí)K的數(shù)量很少。因此，匹配處理的次數(shù)(相關(guān)性計(jì)算的次數(shù))和所保留SAD 值的數(shù)量可以設(shè)置得很小。于是，可以達(dá)到可以提高處理的速度和可以縮小SAD表的規(guī)模的有利效果。<運(yùn)動(dòng)檢測(cè)和運(yùn)動(dòng)補(bǔ)償部分的配置例子>圖9示出了運(yùn)動(dòng)檢測(cè)和運(yùn)動(dòng)補(bǔ)償部分16的配置例子的方塊圖。在本示例中，運(yùn)動(dòng)檢測(cè)和運(yùn)動(dòng)補(bǔ)償部分16包括保留目標(biāo)塊102的像素?cái)?shù)據(jù)的目標(biāo)塊緩沖器161、和保留參考?jí)K108的像素?cái)?shù)據(jù)的參考?jí)K緩沖器162。這些緩沖器161和162等效于顯示在圖I中的緩沖器(一級(jí)存儲(chǔ)器)16a。而且，運(yùn)動(dòng)檢測(cè)和運(yùn)動(dòng)補(bǔ)償部分16包括用于計(jì)算與在目標(biāo)塊102與參考?jí)K108之間對(duì)應(yīng)的像素有關(guān)的SAD值的匹配處理部分163。此外，運(yùn)動(dòng)檢測(cè)和運(yùn)動(dòng)補(bǔ)償部分16包括從自匹配處理部分163輸出的SDA值信息中計(jì)算運(yùn)動(dòng)矢量的運(yùn)動(dòng)矢量計(jì)算器164和控制各個(gè)塊的控制部分165。經(jīng)由自動(dòng)存儲(chǔ)器復(fù)制部分50和二級(jí)存儲(chǔ)器60，將存儲(chǔ)在圖像存儲(chǔ)器40中的圖像數(shù)據(jù)供應(yīng)給運(yùn)動(dòng)檢測(cè)和運(yùn)動(dòng)補(bǔ)償部分16中的目標(biāo)塊緩沖器161和參考?jí)K緩沖器162。在拍攝靜止圖像時(shí)，依照存儲(chǔ)器控制器8的讀取控制，從圖像存儲(chǔ)器40中讀出以下圖像并將其寫入目標(biāo)塊緩沖器161中。明確地說(shuō)，從圖像存儲(chǔ)器40中讀出來(lái)自存儲(chǔ)在圖像存儲(chǔ)器40中的縮小平面目標(biāo)圖像Prt或基本平面目標(biāo)圖像Pbt的圖像幀的縮小平面目標(biāo)塊或基本平面目標(biāo)塊，并將其寫入目標(biāo)塊緩沖器161中。作為縮小平面目標(biāo)圖像Prt或基本平面目標(biāo)圖像Pbt的第一圖像，從圖像存儲(chǔ)器 40中讀出按下快門按鈕之后的第一成像幀的圖像，并且將它作為目標(biāo)幀102寫入目標(biāo)塊緩沖器161中。當(dāng)根據(jù)與參考圖像的塊匹配疊加圖像時(shí)，將這種圖像疊加所得的NR圖像寫入圖像存儲(chǔ)器40中，并且將目標(biāo)塊緩沖器161中的目標(biāo)幀102重寫成這個(gè)NR圖像。將來(lái)自存儲(chǔ)在圖像存儲(chǔ)器40中的縮小平面參考圖像Prr或基本平面參考圖像Pbr的圖像幀的縮小平面匹配處理范圍或基本平面匹配處理范圍中的圖像數(shù)據(jù)寫入?yún)⒖級(jí)K緩沖器162中。作為縮小平面參考圖像Prr或基本平面參考圖像Pbr，將第一成像幀之后的成像幀作為參考幀108寫入圖像存儲(chǔ)器40中。在這種情況下，在捕獲連續(xù)拍攝的多個(gè)拍攝圖像的情況下進(jìn)行圖像疊加處理的情況下，將第一成像幀之后的成像幀一個(gè)接一個(gè)地順序捕獲到圖像存儲(chǔ)器40中，作為基本平面參考圖像和縮小平面參考圖像。如果在連續(xù)拍攝的多個(gè)拍攝圖像被捕獲到圖像存儲(chǔ)器40中之后，在運(yùn)動(dòng)檢測(cè)和運(yùn)動(dòng)補(bǔ)償部分16和圖像疊加部分17中進(jìn)行運(yùn)動(dòng)矢量檢測(cè)和圖像疊加，則應(yīng)該保留多個(gè)成像幀。下文將連續(xù)拍攝的多個(gè)拍攝圖像被捕獲到圖像存儲(chǔ)器40中之后的這種處理稱為拍攝后相加。也就是說(shuō)，在這種拍攝后相加中，應(yīng)該將第一成像幀之后的所有多個(gè)成像幀存儲(chǔ)和保留在圖像存儲(chǔ)器40中，作為基本平面參考圖像和縮小平面參考圖像。成像設(shè)備可以使用拍攝時(shí)相加或拍攝后相加。但是，考慮到盡管需要稍長(zhǎng)處理時(shí)間，但提供噪聲降低了的高質(zhì)量圖像的靜止圖像NR處理請(qǐng)求，本實(shí)施例應(yīng)用拍攝后相加的處理。在運(yùn)動(dòng)圖像拍攝中，將來(lái)自圖像校正和分辨率轉(zhuǎn)換部分15的成像幀輸入運(yùn)動(dòng)檢測(cè)和運(yùn)動(dòng)補(bǔ)償部分16中作為目標(biāo)幀102。將從來(lái)自圖像校正和分辨率轉(zhuǎn)換部分15的目標(biāo)幀中提取的目標(biāo)塊寫入目標(biāo)塊緩沖器161中。而且，將目標(biāo)幀前一個(gè)的和存儲(chǔ)在圖像存儲(chǔ)器40中的成像幀設(shè)置成參考幀108。將來(lái)自這個(gè)參考幀(基本平面參考圖像Pbr或縮小平面參考圖像Prr)的基本平面匹配處理范圍或縮小平面匹配處理范圍寫入?yún)⒖級(jí)K緩沖器 162 中。在這種運(yùn)動(dòng)圖像拍攝中，至少將應(yīng)該與來(lái)自運(yùn)動(dòng)檢測(cè)和運(yùn)動(dòng)補(bǔ)償部分15的目標(biāo)幀進(jìn)行塊匹配的前一個(gè)拍攝圖像幀保留在圖像存儲(chǔ)器40中，作為基本平面參考圖像Pbr和縮小平面參考圖像Prr。匹配處理部分163對(duì)存儲(chǔ)在目標(biāo)塊緩沖器161中的目標(biāo)塊和存儲(chǔ)在參考?jí)K緩沖器 162中的參考?jí)K，進(jìn)行縮小平面中的匹配處理和基本平面中的匹配處理。這里，下面對(duì)這樣的情況預(yù)以考慮，其中存儲(chǔ)在目標(biāo)塊緩沖器161中的數(shù)據(jù)是縮小平面目標(biāo)塊的圖像數(shù)據(jù)，并且存儲(chǔ)在參考?jí)K緩沖器162中的數(shù)據(jù)是從縮小平面參考屏幕中提取的縮小平面匹配處理范圍中的圖像數(shù)據(jù)。在這種情況下，匹配處理部分163進(jìn)行縮小平面匹配處理。而且，存儲(chǔ)在目標(biāo)塊緩沖器161中的數(shù)據(jù)變成基本平面目標(biāo)塊的圖像數(shù)據(jù)。如果存儲(chǔ)在參考?jí)K緩沖器162中的數(shù)據(jù)是從基本平面目標(biāo)屏幕中提取的基本平面匹配處理范圍中的圖像數(shù)據(jù)，則匹配處理部分163進(jìn)行基本平面匹配處理。為了讓匹配處理部分163在塊匹配中檢測(cè)目標(biāo)塊與參考?jí)K之間的相關(guān)性的強(qiáng)度， 使用圖像數(shù)據(jù)的亮度信息計(jì)算SAD值。然后，檢測(cè)最小SAD值，并檢測(cè)呈現(xiàn)這個(gè)最小SAD值的參考?jí)K作為最強(qiáng)相關(guān)性參考?jí)K。顯然，不僅亮度信息而且色差信號(hào)或三原色信號(hào)R，G和B的信息都可以用于計(jì)算 SAD值。而且，通常，塊中的所有像素都用于計(jì)算SAD值。但是，為了減少計(jì)算量，可以通過(guò)例如抽取只使用間歇位置上的有限像素的像素值。運(yùn)動(dòng)矢量計(jì)算器164從匹配處理部分163的匹配處理的結(jié)果中，檢測(cè)參考?jí)K相對(duì)于目標(biāo)塊的運(yùn)動(dòng)矢量。在本示例中，運(yùn)動(dòng)矢量計(jì)算器164檢測(cè)并保留SAD值的最小值。
控制器165在CPU I的控制下，控制運(yùn)動(dòng)檢測(cè)和運(yùn)動(dòng)補(bǔ)償部分16中的分層塊匹配處理的處理操作。<目標(biāo)塊緩沖器的配置例子>圖10示出了目標(biāo)塊緩沖器的配置例子的方塊圖。如圖10所示，目標(biāo)塊緩沖器161 包括基本平面緩沖器1611、縮小平面緩沖器1612、縮小處理部分1613和選擇器1614、1615 和1616。盡管在圖10中省略了示意性表示，但通過(guò)來(lái)自控制部分165的選擇控制信號(hào)控制選擇器1614,1615和1616每個(gè)的選擇?；酒矫婢彌_器1611臨時(shí)存儲(chǔ)基本平面目標(biāo)塊。這個(gè)基本平面緩沖器1611將基本平面目標(biāo)塊發(fā)送到圖像疊加部分17，并將它供應(yīng)給選擇器1616?？s小平面緩沖器1612臨時(shí)存儲(chǔ)縮小平面目標(biāo)塊。縮小平面緩沖器1612將縮小平面目標(biāo)塊供應(yīng)給選擇器1616。在運(yùn)動(dòng)畫(huà)面圖像拍攝中，如上所述，從圖像校正和分辨率轉(zhuǎn)換部分15發(fā)送目標(biāo)塊。因此，配備縮小處理部分1613以便生成縮小平面目標(biāo)塊。將來(lái)自縮小處理部分1613 的縮小平面目標(biāo)塊供應(yīng)給選擇器1615。在運(yùn)動(dòng)圖像拍攝中，選擇器1614輸出來(lái)自數(shù)據(jù)轉(zhuǎn)換器14的目標(biāo)塊(基本平面目標(biāo)塊)。在靜止圖像拍攝中，它輸出從圖像存儲(chǔ)器40讀出的基本平面目標(biāo)塊或縮小平面目標(biāo)塊。這些輸出通過(guò)來(lái)自控制器165的選擇控制信號(hào)來(lái)選擇，并將輸出供應(yīng)給基本平面緩沖器1611、縮小處理部分1613和選擇器1615。依照來(lái)自控制器165的選擇控制信號(hào)，選擇器1615在運(yùn)動(dòng)圖像拍攝中，選擇和輸出來(lái)自縮小處理部分1613的縮小平面目標(biāo)塊，而在靜止圖像拍攝中，選擇和輸出來(lái)自圖像存儲(chǔ)器40的縮小平面目標(biāo)塊。將輸出供應(yīng)給縮小平面緩沖器1612。依照來(lái)自控制器165的選擇控制信號(hào)，選擇器1616在縮小平面上的塊匹配中輸出來(lái)自縮小平面緩沖器1612的縮小平面目標(biāo)塊。在基本平面上的塊匹配中，它輸出來(lái)自基本平面緩沖器1611的基本平面目標(biāo)塊。將輸出的縮小平面目標(biāo)塊或基本平面目標(biāo)塊發(fā)送給匹配處理部分163。<參考?jí)K緩沖器的配置例子>圖11示出了參考?jí)K緩沖器162的配置例子的方塊圖。如圖11所示，參考?jí)K緩沖器162包括基本平面緩沖器1621、縮小平面緩沖器1622和選擇器1623。盡管在圖11中省略了示意性表示，但通過(guò)來(lái)自控制部分165的選擇控制信號(hào)控制選擇器1623的選擇?；酒矫婢彌_器1621臨時(shí)存儲(chǔ)來(lái)自圖像存儲(chǔ)器40的基本平面參考?jí)K?；酒矫婢彌_器1621將基本平面參考?jí)K供應(yīng)給選擇器1623，并將它作為運(yùn)動(dòng)補(bǔ)償塊發(fā)送給圖像疊加部分17。縮小平面緩沖器1622臨時(shí)存儲(chǔ)來(lái)自圖像存儲(chǔ)器40的縮小平面參考?jí)K?？s小平面緩沖器1622將縮小平面參考?jí)K供應(yīng)給選擇器1623。依照來(lái)自控制器165的選擇控制信號(hào)，選擇器1623在縮小平面上的塊匹配中輸出來(lái)自縮小平面緩沖器1622的縮小平面參考?jí)K。但是，在基本平面上的塊匹配中，它輸出來(lái)自基本平面緩沖器1621的基本平面參考?jí)K。將輸出的縮小平面參考?jí)K或基本平面參考?jí)K發(fā)送給匹配處理部分163。<圖像疊加部分的配置例子>
圖12示出了圖像疊加部分17的配置例子的方塊圖。如圖12，圖像疊加部分17包括相加率計(jì)算器171、加法器172、基本平面輸出緩沖器173、縮小平面生成器174和縮小平面輸出緩沖器175。圖像疊加部分17的輸出圖像數(shù)據(jù)經(jīng)過(guò)數(shù)據(jù)壓縮器35壓縮存儲(chǔ)在圖像存儲(chǔ)器40 中。相加率計(jì)算器171接收來(lái)自運(yùn)動(dòng)檢測(cè)和運(yùn)動(dòng)補(bǔ)償部分16的目標(biāo)塊和運(yùn)動(dòng)補(bǔ)償塊， 并取決于應(yīng)用的相加系統(tǒng)是簡(jiǎn)單相加系統(tǒng)還是平均相加系統(tǒng)來(lái)定義兩者的相加率。將定義的相加率與目標(biāo)塊和運(yùn)動(dòng)補(bǔ)償塊一起供應(yīng)給加法器172。將作為加法器172的相加結(jié)果的基本平面NR圖像加以壓縮，然后寫到圖像存儲(chǔ)器 40中。而且，在縮小平面生成器174中將作為加法器172的相加結(jié)果的基本平面NR圖像轉(zhuǎn)換成縮小平面NR圖像，并將來(lái)自縮小平面生成器174的縮小平面NR圖像寫入圖像存儲(chǔ)器 40中。[4.拍攝圖像的噪聲降低處理的流程]〈靜止圖像拍攝〉圖13和14示出了在具有上述配置的本實(shí)施例的成像設(shè)備中在靜止圖像拍攝時(shí)通過(guò)圖像疊加進(jìn)行噪聲降低處理的流程圖。在CPU I以及受這個(gè)CPUl控制的運(yùn)動(dòng)檢測(cè)和運(yùn)動(dòng)補(bǔ)償部分16的控制部分165的控制下，由圖像疊加部分17執(zhí)行圖13和14的流程圖中的各自步驟。首先，當(dāng)按下快門按鈕時(shí)，在本示例的成像設(shè)備中，在CPU I的控制下高速拍攝多個(gè)圖像。在本示例中，高速捕獲在靜止圖像拍攝中應(yīng)該相互疊加的M個(gè)拍攝圖像數(shù)據(jù)(M個(gè)幀，M是等于或大于2的整數(shù))，并將其放在圖像存儲(chǔ)器40上(步驟SI)。然后，作為參考幀，設(shè)置累積在圖像存儲(chǔ)器40中的M個(gè)圖像幀當(dāng)中的時(shí)間上第N 圖像幀(N是等于或大于2的整數(shù)，它的最大值是M)?？刂破?65將定義幀的次序的N的初始值設(shè)置成2 (N = 2)(步驟S2)。接著，控制器165將第一圖像幀設(shè)置成目標(biāo)圖像(目標(biāo)幀)，并將N = 2的圖像設(shè)置成參考圖像(參考幀)(步驟S3)。接著，控制器165設(shè)置目標(biāo)幀中的目標(biāo)塊(步驟S4)，并且將目標(biāo)塊從圖像存儲(chǔ)部分40讀到運(yùn)動(dòng)檢測(cè)和運(yùn)動(dòng)補(bǔ)償部分16中的目標(biāo)塊緩沖器161中(步驟S5)。而且，將匹配處理范圍中的像素?cái)?shù)據(jù)從圖像存儲(chǔ)部分40讀到參考?jí)K緩沖器162中(步驟S6)。接著，控制器165從參考?jí)K緩沖器162中讀出搜索范圍中的參考?jí)K，以及匹配處理部分163進(jìn)行分層匹配處理。在對(duì)搜索范圍中的所有參考矢量重復(fù)上述處理之后，輸出高精度的基本平面運(yùn)動(dòng)矢量(步驟S7)。接著，依照以上述方式檢測(cè)的高精度基本平面運(yùn)動(dòng)矢量，控制器165從參考?jí)K緩沖器162中讀出通過(guò)補(bǔ)償與所檢測(cè)運(yùn)動(dòng)矢量相對(duì)應(yīng)的運(yùn)動(dòng)獲得的運(yùn)動(dòng)補(bǔ)償塊(步驟S8)。 然后，控制部分165與目標(biāo)塊同步地在隨后級(jí)將運(yùn)動(dòng)補(bǔ)償塊發(fā)送給圖像疊加部分17(步驟 S9)。接著，依照CPU I的控制，圖像疊加部分17進(jìn)行目標(biāo)塊和運(yùn)動(dòng)補(bǔ)償塊的疊加，并且將疊加塊的NR圖像數(shù)據(jù)放在圖像存儲(chǔ)部分40上。也就是說(shuō)，圖像疊加部分17使疊加塊的 NR圖像數(shù)據(jù)輸出到圖像存儲(chǔ)器40這一側(cè)并寫入其中(步驟S10)。接著，控制器165確定有關(guān)目標(biāo)幀中的所有目標(biāo)塊的塊匹配是否都已結(jié)束(步驟
15Sll)。如果確定還未對(duì)所有目標(biāo)塊結(jié)束塊匹配的處理，則該處理返回到步驟S4，并設(shè)置目標(biāo)幀中的下一個(gè)目標(biāo)塊，以便重復(fù)步驟S4到Sll的處理。如果在步驟Sll中確定有關(guān)目標(biāo)幀中的所有目標(biāo)塊的塊匹配都已結(jié)束，則處理轉(zhuǎn)移到步驟S12。在步驟S12中，確定有關(guān)應(yīng)該相互疊加的所有參考幀的處理是否都已結(jié)束， 即，N是否等于M。如果在步驟S12中確定N不等于M，則將N加1(N = N+1)(步驟S13)。接著，將在步驟SlO中疊加生成的NR圖像設(shè)置成目標(biāo)圖像(目標(biāo)幀)，并將N = N+1的圖像設(shè)置成參考圖像(參考幀)(步驟S14)。此后，該處理返回到步驟S4，重復(fù)這個(gè)步驟S4和隨后步驟的處理。也就是說(shuō)，如果M等于或大于3，則以這樣的方式重復(fù)上述處理，即將有關(guān)所有目標(biāo)塊的疊加所得的圖像設(shè)置成下一個(gè)目標(biāo)圖像，并將第三或以下圖像設(shè)置成參考幀。重復(fù)這種處理直到第M圖像的疊加結(jié)束。如果在步驟S12中確定N等于M，則結(jié)束這個(gè)處理例程?！催\(yùn)動(dòng)圖像拍攝〉圖15示出了在這個(gè)實(shí)施例的成像設(shè)備中在運(yùn)動(dòng)圖像拍攝時(shí)通過(guò)圖像疊加進(jìn)行噪聲降低處理的流程圖。圖15的流程圖中的各自步驟也在CPU I以及受這個(gè)CPU I控制的運(yùn)動(dòng)檢測(cè)和運(yùn)動(dòng)補(bǔ)償部分16的控制器165的控制下執(zhí)行。當(dāng)用戶操作運(yùn)動(dòng)圖形記錄按鈕時(shí)，CPU I命令從開(kāi)始處啟動(dòng)圖15的處理。在本示例中，運(yùn)動(dòng)檢測(cè)和運(yùn)動(dòng)補(bǔ)償部分16具有適合以目標(biāo)塊為單位進(jìn)行匹配處理的配置。因此，依照CPU I的控制，運(yùn)動(dòng)檢測(cè)和運(yùn)動(dòng)補(bǔ)償部分15保留幀圖像，并以目標(biāo)塊為單位將圖像數(shù)據(jù)發(fā)送給運(yùn)動(dòng)檢測(cè)和運(yùn)動(dòng)補(bǔ)償部分16(步驟S21)。將發(fā)送給運(yùn)動(dòng)檢測(cè)和運(yùn)動(dòng)補(bǔ)償部分16的目標(biāo)塊的圖像數(shù)據(jù)存儲(chǔ)在目標(biāo)塊緩沖器 161中。接著，控制器165根據(jù)目標(biāo)塊的坐標(biāo)，計(jì)算從圖像存儲(chǔ)器40中復(fù)制參考?jí)K的坐標(biāo)， 并且將所計(jì)算坐標(biāo)的數(shù)據(jù)從圖像存儲(chǔ)器40讀到自動(dòng)存儲(chǔ)器復(fù)制部分50中(步驟S22)。將讀取的數(shù)據(jù)寫到二級(jí)存儲(chǔ)器60中，然后將所希望區(qū)域的數(shù)據(jù)供應(yīng)給作為一級(jí)存儲(chǔ)器的參考?jí)K緩沖器162 (步驟S23)。接著，匹配處理部分163和運(yùn)動(dòng)矢量計(jì)算器164在本示例中通過(guò)分層塊匹配處理進(jìn)行運(yùn)動(dòng)檢測(cè)(步驟S24)。明確地說(shuō)，匹配處理部分163首先在縮小平面中計(jì)算縮小平面目標(biāo)塊的像素值與縮小平面參考?jí)K的像素值之間的SAD值，并且將計(jì)算的SAD值發(fā)送給運(yùn)動(dòng)矢量計(jì)算器164。匹配處理部分163在搜索范圍中對(duì)所有縮小平面參考?jí)K重復(fù)這種處理。 在對(duì)搜索范圍中的所有縮小平面參考?jí)K計(jì)算SAD值結(jié)束之后，運(yùn)動(dòng)矢量計(jì)算器164指定最小SAD值以便檢測(cè)縮小平面運(yùn)動(dòng)矢量?？刂破?65將運(yùn)動(dòng)矢量計(jì)算器164檢測(cè)的縮小平面運(yùn)動(dòng)矢量乘以縮小率的倒數(shù)， 以便將它轉(zhuǎn)換成基本平面上的運(yùn)動(dòng)矢量。然后，控制器165將基本平面中中心是轉(zhuǎn)換矢量指示的位置的區(qū)域當(dāng)作基本平面上的搜索范圍。然后，控制器165進(jìn)行控制，使匹配處理部分163在這個(gè)搜索范圍中進(jìn)行基本平面上的塊匹配處理。匹配處理部分163計(jì)算基本平面目標(biāo)塊的像素值與基本平面參考?jí)K的像素值之間的SAD值，并且將計(jì)算的SAD值發(fā)送給運(yùn)動(dòng)矢量計(jì)算器164。在對(duì)搜索范圍中的所有基本平面參考?jí)K計(jì)算SAD值結(jié)束之后，運(yùn)動(dòng)矢量計(jì)算器 164確定最小SAD值以便檢測(cè)基本平面運(yùn)動(dòng)矢量，并確定最小SAD值附近的SAD值。然后， 運(yùn)動(dòng)矢量計(jì)算器164使用這些SAD值進(jìn)行二次曲線近似內(nèi)插處理，并輸出子像素精度的高精度運(yùn)動(dòng)矢量。接著，控制器165依照在步驟S24中計(jì)算的高精度運(yùn)動(dòng)矢量，從參考?jí)K緩沖器162 中讀出運(yùn)動(dòng)補(bǔ)償塊的圖像數(shù)據(jù)(步驟S25)。然后，控制器165與目標(biāo)塊同步地在隨后級(jí)將這個(gè)圖像數(shù)據(jù)發(fā)送給圖像疊加部分17 (步驟S26)。圖像疊加部分17進(jìn)行目標(biāo)塊和運(yùn)動(dòng)補(bǔ)償塊的疊加，并且使作為疊加的結(jié)果的NR 圖像的圖像數(shù)據(jù)輸出到圖像存儲(chǔ)器40這一側(cè)并寫入其中(步驟S27)。然后，將NR圖像的圖像數(shù)據(jù)存儲(chǔ)在圖像存儲(chǔ)器40中作為下一個(gè)目標(biāo)幀的參考幀(步驟S28)。然后，CPU I確定用戶是否進(jìn)行了停止運(yùn)動(dòng)圖像記錄的操作(步驟S29)。如果CPU I確定用戶未進(jìn)行停止運(yùn)動(dòng)圖像記錄的操作，CPU I就命令返回到步驟S21，重復(fù)這個(gè)步驟 S21和隨后步驟的處理。如果CPU I在步驟S29中確定用戶進(jìn)行了停止運(yùn)動(dòng)圖像記錄的操作，CPU I就結(jié)束這個(gè)處理例程。在上述對(duì)運(yùn)動(dòng)圖像的噪聲降低處理的處理例程中，將前一幀的圖像幀設(shè)置成參考幀。但是，可以將前兩幀或更多幀的幀的圖像用作參考幀?？商娲氖牵部梢郧耙粠颓皟蓭膸膱D像存儲(chǔ)在圖像存儲(chǔ)器40中，并取決于這兩個(gè)圖像信息的內(nèi)容來(lái)選擇哪個(gè)圖像幀用作參考幀。通過(guò)使用上述測(cè)量、過(guò)程、和系統(tǒng)配置，可以通過(guò)用于一種共同類型的塊匹配處理的硬件進(jìn)行靜止圖像噪聲降低處理和運(yùn)動(dòng)圖像噪聲降低處理。[5.分層塊匹配處理的流程的例子]圖16和17示出了運(yùn)動(dòng)檢測(cè)和運(yùn)動(dòng)補(bǔ)償部分16中的分層塊匹配處理的操作的例子的流程圖。顯示在圖16和17中的處理的流程與對(duì)匹配處理部分163和運(yùn)動(dòng)矢量計(jì)算部分 164的上述處理例子的流程的說(shuō)明部分重疊。但是，為了有助于理解本示例的操作，將描述這個(gè)流程。首先，在運(yùn)動(dòng)檢測(cè)和運(yùn)動(dòng)補(bǔ)償部分16中，從目標(biāo)塊緩沖器161中讀入目標(biāo)塊的縮小圖像，即，縮小平面目標(biāo)塊(圖16中的步驟S71)。接著，將縮小平面最小SAD值的初始值設(shè)置成保留在運(yùn)動(dòng)矢量計(jì)算器164中的最小SAD值Smin的初始值(步驟S72)。例如設(shè)置像素差的最大值作為這個(gè)縮小平面最小SAD值Smin的初始值。接著，匹配處理部分163設(shè)置縮小平面搜索范圍。匹配處理部分163在所設(shè)置縮小平面搜索范圍中設(shè)置縮小平面參考矢量(Vx/n，Vy/n :I/η是縮小率)，并設(shè)置計(jì)算SAD值的縮小平面參考?jí)K的位置(步驟S73)。然后，匹配處理部分163從參考?jí)K緩沖器162中讀入設(shè)置縮小平面參考?jí)K的像素?cái)?shù)據(jù)(步驟S74)，并獲取縮小平面目標(biāo)塊與縮小平面參考?jí)K之間的各自像素?cái)?shù)據(jù)之差的絕對(duì)值的總和，即，縮小平面SAD值。將所獲縮小平面SAD值發(fā)送到運(yùn)動(dòng)矢量計(jì)算器164 (步驟S75)。運(yùn)動(dòng)矢量計(jì)算器164將在匹配處理部分163中計(jì)算的縮小平面SAD值Sin與保留的縮小平面最小SAD值Smin相比較。然后，運(yùn)動(dòng)矢量計(jì)算器164確定計(jì)算的縮小平面SAD 值Sin是否小于保留到那時(shí)的縮小平面最小SAD值Smin (步驟S76)。如果在這個(gè)步驟S76中確定計(jì)算的縮小平面SAD值Sin小于縮小平面最小SAD值 Smin,則該處理前進(jìn)到步驟S77，更新保留的縮小平面最小SAD值Smin及其位置信息。明確地說(shuō)，在SAD值比較處理中，輸出指示計(jì)算的縮小平面SAD值Sin小于縮小平面最小SAD值Smin的比較結(jié)果的信息。然后，將這個(gè)計(jì)算的縮小平面SAD值Sin及其位置信息(縮小平面參考矢量)保留成新縮小平面最小SAD值Smin的信息。在步驟S77之后，該處理前進(jìn)到步驟S78。如果在步驟S76中確定計(jì)算的縮小平面 SAD值Sin大于縮小平面最小SAD值Smin，則該處理前進(jìn)到步驟S78，而進(jìn)行步驟S77中的更新保留信息的處理。在步驟S78中，匹配處理部分163確定是否在縮小平面搜索范圍中的所有縮小平面參考?jí)K(縮小平面參考矢量)的位置上都結(jié)束了匹配處理。如果確定在縮小平面搜索范圍中還存在未處理的縮小平面參考?jí)K，則該處理返回到步驟S73，重復(fù)步驟S73和隨后步驟的上述處理。如果匹配處理部分163在步驟S78中確定在縮小平面搜索范圍中的所述縮小平面參考?jí)K(縮小平面參考矢量)的位置上都結(jié)束了匹配處理，則匹配處理部分163進(jìn)行如下處理。明確地說(shuō)，匹配處理部分163接收縮小平面最小SAD值Smin的位置信息(縮小平面運(yùn)動(dòng)矢量)。然后，匹配處理部分163將基本平面目標(biāo)塊設(shè)置在中心是基本平面目標(biāo)幀中將接收的縮小平面運(yùn)動(dòng)矢量乘以縮小率的倒數(shù)(即，乘以η)獲得的矢量指示的位置坐標(biāo)的位置上。而且，匹配處理部分163將基本平面目標(biāo)幀中的基本平面搜索范圍設(shè)置成中心是乘以η獲得的矢量指示的坐標(biāo)位置的相對(duì)較小范圍(步驟S79)。然后，匹配處理部分163從目標(biāo)塊緩沖器161中讀取基本平面目標(biāo)塊的像素?cái)?shù)據(jù)(步驟S80)。接著，將基本平面最小SAD值的初始值設(shè)置成保留在運(yùn)動(dòng)矢量計(jì)算器164中的最小SAD值Smin的初始值(圖17中的步驟S81)。例如設(shè)置像素差的最大值作為基本平面最小SAD值Smin的初始值。接著，匹配處理部分163在步驟S79中設(shè)置的基本平面搜索范圍中，設(shè)置基本平面參考矢量(Vx，Vy)和計(jì)算SAD值的基本平面參考?jí)K的位置(步驟S82)。然后，匹配處理部分163從參考?jí)K緩沖器162中讀入設(shè)置的基本平面參考?jí)K的像素?cái)?shù)據(jù)(步驟S83)。隨后，匹配處理部分163獲取基本平面目標(biāo)塊與基本平面參考?jí)K之間的各自像素?cái)?shù)據(jù)之差的絕對(duì)值的總和(即，基本平面SAD值)，并將所獲基本平面SAD值發(fā)送到運(yùn)動(dòng)矢量計(jì)算器164 (步驟 S84)。 運(yùn)動(dòng)矢量計(jì)算器164將匹配處理部分163計(jì)算的基本平面SAD值Sin與保留的基本平面最小SAD值Smin相比較。通過(guò)這種比較，運(yùn)動(dòng)矢量計(jì)算器164確定計(jì)算的基本平面 SAD值Sin是否小于保留到那時(shí)的基本平面最小SAD值Smin (步驟S85)。如果在步驟S85中確定計(jì)算的基本平面SAD值Sin小于基本平面最小SAD值Smin， 則該處理前進(jìn)到步驟S86，并更新所保留基本平面最小SAD值Smin及其位置信息。明確地說(shuō)，輸出指示計(jì)算的基本平面SAD值Sin小于基本平面最小SAD值Smin的比較結(jié)果的信息。因此，將這個(gè)計(jì)算的基本平面SAD值Sin及其位置信息(參考矢量)用作新基本平面最小SAD值Smin的信息，并進(jìn)行新基本平面最小SAD值Sin及其位置信息的更新。在步驟S86之后，該處理前進(jìn)到步驟S87。如果在步驟S85中確定計(jì)算的基本平面 SAD值Sin大于基本平面最小SAD值Smin，則該處理進(jìn)到步驟S87，而不在步驟S86中進(jìn)行更新保留信息的處理。在步驟S87中，匹配處理部分163確定是否在基本平面搜索范圍中的所有基本平面參考?jí)K(基本平面參考矢量)的位置上都結(jié)束了匹配處理。如果確定在基本平面搜索范圍中還存在未處理的基本平面參考?jí)K，則該處理返回到步驟S82，重復(fù)步驟S82和隨后步驟的上述處理。如果匹配處理部分163在步驟S87中確定在基本平面搜索范圍中的所有基本平面參考?jí)K(基本平面參考矢量)的位置上都結(jié)束了匹配處理，則匹配處理部分163進(jìn)行如下處理。明確地說(shuō)，匹配處理部分163接收基本平面最小SAD值Smin的位置信息(基本平面運(yùn)動(dòng)矢量)，并使基本平面SAD值保留下來(lái)(步驟S88)。到此結(jié)束與一個(gè)參考幀有關(guān)的本示例的塊匹配處理。[6.存儲(chǔ)器上的格式的描述]在本實(shí)施例的例子中，如圖18A所示劃分一個(gè)幀的圖像數(shù)據(jù)。明確地說(shuō)，以一個(gè)突發(fā)傳送(burst transfer) (64個(gè)像素)為單位劃分一個(gè)屏幕的圖像的水平方向，并且以垂直方向劃分塊(下文稱為帶)的圖像為單位將一個(gè)屏幕的圖像當(dāng)作多個(gè)數(shù)據(jù)。而且，應(yīng)用這樣的存儲(chǔ)器訪問(wèn)系統(tǒng)，其中以這條帶為單位將圖像數(shù)據(jù)寫入圖像存儲(chǔ)器40中和從圖像存儲(chǔ)器40中讀取圖像數(shù)據(jù)(下文稱為帶訪問(wèn)形式)。在靜止圖像NR處理中，通過(guò)這種帶訪問(wèn)形式進(jìn)行對(duì)圖像存儲(chǔ)器40的圖像數(shù)據(jù)的基本存儲(chǔ)器訪問(wèn)。將以16個(gè)突發(fā)進(jìn)行沿著水平方向?qū)?4個(gè)像素的總線訪問(wèn)的格式稱為64X1格式。如圖18B所示，這種64X1格式是以四個(gè)像素為單位的突發(fā)傳送連續(xù)重復(fù)16次(連續(xù)突發(fā)的最大次數(shù))的存儲(chǔ)器訪問(wèn)系統(tǒng)。如圖18B所示，如果定義了以四個(gè)像素為單位的突發(fā)傳送的開(kāi)始地址Al，A2, A3，...，A16，則可以自動(dòng)進(jìn)行64X I格式的總線訪問(wèn)。帶訪問(wèn)形式是沿著屏幕的垂直方向連續(xù)進(jìn)行64X1格式的系統(tǒng)。沿著水平方向重復(fù)64X1格式。在結(jié)束一條線的所有訪問(wèn)之后，對(duì)下一條線進(jìn)行類似訪問(wèn)。這允許光柵掃描形式的圖像數(shù)據(jù)訪問(wèn)。如果水平方向的圖像數(shù)據(jù)不可被64個(gè)像素除盡，則如圖18A和18B中的陰影區(qū)所示，在水平方向的右端提供啞區(qū)域151，并且將例如黑色或白色的像素?cái)?shù)據(jù)作為啞數(shù)據(jù)加入這個(gè)啞區(qū)域151中。這樣，沿著水平方向的像素?cái)?shù)被設(shè)置成64的倍數(shù)。現(xiàn)有光柵掃描系統(tǒng)適用于以每條線為基礎(chǔ)地讀取數(shù)據(jù)，因?yàn)榫驮L問(wèn)存儲(chǔ)器而言， 地址沿著水平方向是連續(xù)的。相反，帶訪問(wèn)形式適用于讀取其中沿著水平方向的像素?cái)?shù)等于或小于64的塊狀數(shù)據(jù)，因?yàn)榈刂芬砸粋€(gè)突發(fā)傳送(64個(gè)像素)為單位沿著垂直方向遞
士豳
>曰ο例如，假設(shè)在64個(gè)像素X 64條線的帶形式的一個(gè)塊的讀取中，存儲(chǔ)器控制器8以 16個(gè)突發(fā)就YC像素?cái)?shù)據(jù)(64位)的四像素?cái)?shù)據(jù)對(duì)圖像存儲(chǔ)器40進(jìn)行總線訪問(wèn)。在這種情況下，這16個(gè)突發(fā)對(duì)應(yīng)于4X 16 = 64個(gè)像素的數(shù)據(jù)。因此，沿著水平方向設(shè)置了由64個(gè)像素組成的第一條線的地址之后，可以通過(guò)沿著垂直方向的地址遞增設(shè)置其余63條線的像素?cái)?shù)據(jù)的地址。圖19A示出了一個(gè)屏幕的圖像由水平X垂直=640X480個(gè)像素組成的例子中帶單元的劃分例子。在本示例中，沿著水平方向以64個(gè)像素為單位劃分一個(gè)屏幕的圖像，因此被分成10條帶TO到T9。當(dāng)在靜止圖像NR處理中從圖像存儲(chǔ)器40中讀取基本平面目標(biāo)塊時(shí)，以64個(gè)像素Xl條線為單位進(jìn)行訪問(wèn)來(lái)提高本示例中的總線效率，以便利用帶訪問(wèn)形式的優(yōu)點(diǎn)。CN 102592259 A例如，如圖20所示，當(dāng)縮小平面相對(duì)于基本平面的縮小率是1/2時(shí)，基本平面目標(biāo)塊的尺寸在本實(shí)施例中是水平X垂直=16個(gè)像素X 16條線。因此，當(dāng)沿著水平方向排列四個(gè)基本平面目標(biāo)塊時(shí)，沿著水平方向的像素?cái)?shù)變成64個(gè)像素。因此，在本示例中，當(dāng)縮小率是1/2時(shí)，如圖20的右側(cè)所示，訪問(wèn)圖像存儲(chǔ)器40的單位被設(shè)置成四個(gè)目標(biāo)塊，并通過(guò)上述64X I格式的帶訪問(wèn)形式進(jìn)行訪問(wèn)。也就是說(shuō)，四個(gè)目標(biāo)塊可以利用垂直方向的地址改變，通過(guò)沿著水平方向以64個(gè)像素為單位(4個(gè)像素X 16個(gè)突發(fā))，重復(fù)訪問(wèn)16次來(lái)傳送。類似地，如圖20所示，當(dāng)縮小平面相對(duì)于基本平面的縮小率是1/4時(shí)，基本平面目標(biāo)塊的尺寸在本示例中是水平X垂直=32個(gè)像素X32條線。因此，以兩個(gè)基本平面目標(biāo)塊為單位進(jìn)行對(duì)圖像存儲(chǔ)器的訪問(wèn)。這允許通過(guò)上述64X1格式的帶訪問(wèn)形式進(jìn)行訪問(wèn)。當(dāng)縮小平面相對(duì)于基本平面的縮小率是1/8時(shí)，基本平面目標(biāo)塊的尺寸在本示例中是水平X垂直=64個(gè)像素X64條線。因此，以一個(gè)基本平面目標(biāo)塊為單位進(jìn)行對(duì)圖像存儲(chǔ)器的訪問(wèn)。這允許通過(guò)上述64X1格式的帶訪問(wèn)形式進(jìn)行訪問(wèn)。下面參考圖21A到30描述運(yùn)動(dòng)圖像NR處理中存儲(chǔ)器訪問(wèn)的數(shù)據(jù)格式的例子。在這些例子中，為在運(yùn)動(dòng)圖像NR處理中對(duì)用于參考的圖像數(shù)據(jù)的存儲(chǔ)器的參考圖像訪問(wèn)，準(zhǔn)備了以由多條線X多個(gè)像素組成的矩形區(qū)域的塊為單位的像素?cái)?shù)據(jù)的存儲(chǔ)器訪問(wèn)系統(tǒng)(塊訪問(wèn)形式)。明確地說(shuō)，作為運(yùn)動(dòng)圖像NR處理中參考圖像訪問(wèn)的形式之一，顯示在圖21A中的形式是考慮到64個(gè)像素(可以通過(guò)上述突發(fā)傳送傳送的像素的最大數(shù)量)而準(zhǔn)備的。更明確地說(shuō)，使用將圖像(屏幕)劃分成水平X垂直=8個(gè)像素X8條線(突發(fā)傳送的最大單位(64個(gè)像素))的塊，并以塊為單位進(jìn)行對(duì)圖像存儲(chǔ)器40的讀寫的塊訪問(wèn)形式。在下文中，將這種以8個(gè)像素X8條線的塊為單位的塊訪問(wèn)形式稱為8X8格式。在這種8X8格式中，如圖21B所示，將沿著水平方向的四個(gè)像素當(dāng)作一個(gè)突發(fā)傳送的單位，沿著水平方向的八個(gè)像素通過(guò)兩次突發(fā)傳送(兩個(gè)突發(fā))來(lái)傳送。在沿著水平方向的這八個(gè)像素的突發(fā)傳送結(jié)束之后，類似地以兩個(gè)突發(fā)傳送下一條線的八個(gè)像素。在 16個(gè)突發(fā)(最大突發(fā)長(zhǎng)度)中，一次傳送64個(gè)像素。如果將這種8X8格式的塊訪問(wèn)形式中的開(kāi)始地址ADl定義成初始地址，則如圖 21B所示，自動(dòng)定義以四個(gè)像素為單位的地址AD2到AD16，并且可以通過(guò)連續(xù)16個(gè)突發(fā)進(jìn)行8 X 8格式的存儲(chǔ)器訪問(wèn)。當(dāng)在圖像存儲(chǔ)器40上指定8X8格式的開(kāi)始地址ADl時(shí)，存儲(chǔ)器控制器為8X8格式的存儲(chǔ)器訪問(wèn)計(jì)算地址ADl到AD16，并進(jìn)行8X8格式的存儲(chǔ)器訪問(wèn)。8X8格式基本上導(dǎo)致如圖21B所示的以64個(gè)像素(16個(gè)突發(fā))為單位的訪問(wèn)，因此是最有效的。但是，如后所述，16個(gè)突發(fā)是最大突發(fā)長(zhǎng)度，也可以采用較短突發(fā)長(zhǎng)度。在這種情況下，訪問(wèn)形式基本上不是8X8格式。但是例如在8個(gè)像素X4條線的情況下，可以以八個(gè)突發(fā)(16個(gè)突發(fā)的一半)傳送圖像數(shù)據(jù)。如果水平方向和垂直方向的圖像數(shù)據(jù)不可被八個(gè)像素除盡，則如圖21A和21B中的陰影區(qū)所示，在水平方向的右端和垂直方向的下端提供啞區(qū)域152，并且將例如黑色或白色的像素?cái)?shù)據(jù)作為啞數(shù)據(jù)加入這個(gè)啞區(qū)域152中。于是，沿著水平方向和垂直方向的圖像尺寸都被設(shè)置成8的倍數(shù)。
20
可以通過(guò)8X8格式的存儲(chǔ)器訪問(wèn)以8X8個(gè)像素為單位進(jìn)行訪問(wèn)意味著，縮小平面匹配處理范圍和基本平面匹配處理范圍都可以以8X8像素塊為單位從圖像存儲(chǔ)部分40 中讀取。因此，在本實(shí)施例的成像設(shè)備中，實(shí)現(xiàn)了只通過(guò)最有效數(shù)據(jù)傳送(16個(gè)突發(fā))的總線訪問(wèn)，因此使總線效率達(dá)到最大。如果將這種8X8格式修改成基于8X8個(gè)像素的倍數(shù)的格式(16X16個(gè)像素或 16X8個(gè)像素)，則修改后的格式可以應(yīng)用于以這些多個(gè)像素為單位的訪問(wèn)。盡管在上述例子中總線的最有效數(shù)據(jù)傳送單位(最大突發(fā)長(zhǎng)度的單位)是64個(gè)像素，但最有效數(shù)據(jù)傳送單位是由一個(gè)突發(fā)可以傳送的像素?cái)?shù)P和最大突發(fā)長(zhǎng)度(連續(xù)突發(fā)的最大次數(shù))q決定的PXq個(gè)像素。根據(jù)該像素?cái)?shù)(P Xq)，決定寫圖像存儲(chǔ)器40的塊訪問(wèn)形式的格式。當(dāng)縮小平面匹配處理范圍和基本平面匹配處理范圍具有與沿著塊格式的水平方向和垂直方向的像素?cái)?shù)的倍數(shù)接近的尺寸時(shí)，總線傳送效率最高。如圖22所示，縮小平面匹配處理范圍143在本示例中是44個(gè)像素X 24條線。如果以64X1格式訪問(wèn)這個(gè)縮小平面匹配處理范圍143，則如圖22的上側(cè)所示，應(yīng)該進(jìn)行將沿著垂直方向4個(gè)像素Xll個(gè)突發(fā)的傳送重復(fù)24次的傳送訪問(wèn)。 相反，如果以8 X 8格式訪問(wèn)相同縮小平面匹配處理范圍143，則如圖23所示，以使縮小平面參考矢量(0，0)的縮小平面參考?jí)K是中心的方式，決定44個(gè)像素X 24條線的縮小平面匹配處理范圍143?？s小平面參考矢量(0，0)的縮小平面參考?jí)K指的是處在與縮小平面目標(biāo)塊相同的坐標(biāo)上的縮小平面參考?jí)K。在這種情況下，只以八個(gè)像素為單位和以八條線為單位設(shè)置縮小平面目標(biāo)塊?？s小平面匹配處理范圍143沿著垂直方向的線數(shù)是24。因此，如果搜索范圍沿著垂直方向的尺寸被設(shè)置成8 X 8塊尺寸的倍數(shù)，則可以就垂直方向而言都有用地通過(guò)8 X 8 格式進(jìn)行訪問(wèn)。另一方面，縮小平面匹配處理范圍143沿著水平方向的像素?cái)?shù)是44，因此不是八的倍數(shù)，于是，在顯示在圖23中的例子中，沿著水平方向的像素?cái)?shù)被設(shè)置成56，以8 X 8 格式將例如黑色或白色的啞圖像數(shù)據(jù)153的六個(gè)像素插在水平方向的兩側(cè)上。從圖23中可以明白，盡管在左右端都存在啞圖像數(shù)據(jù)153的六個(gè)像素，但與需要傳送24次的64X I格式不同，可以通過(guò)以8X8格式傳送21次來(lái)讀取數(shù)據(jù)。而且，在8X8 格式下，在本實(shí)施例的成像設(shè)備中所有傳送都是最有效數(shù)據(jù)傳送(16個(gè)突發(fā))，并且也提高了總線效率?？s小率是1/2時(shí)的基本平面匹配處理范圍144是20個(gè)像素X 20條線。當(dāng)訪問(wèn)這個(gè)基本平面匹配處理范圍144時(shí)，在64X I格式的下，如圖22的下側(cè)所示，應(yīng)該進(jìn)行沿著垂直方向重復(fù)傳送4個(gè)像素X 5個(gè)突發(fā)20次的傳送訪問(wèn)。相反，在8X8格式的情況下，如圖24所示，以使基本平面參考矢量(0，0)的基本平面參考?jí)K是中心的方式，將20個(gè)像素X20條線的基本平面匹配處理范圍確定為基本平面匹配處理范圍144?；酒矫嫫ヅ涮幚矸秶?44是經(jīng)由通過(guò)縮小平面匹配計(jì)算的縮小平面運(yùn)動(dòng)矢量確定的，因此，當(dāng)以一個(gè)像素為單位時(shí)，可能有各種組合。例如，最有效的情況是如圖24所示，當(dāng)將20個(gè)像素X20條線的基本平面匹配處理范圍144分配給8 X 8個(gè)像素的九個(gè)塊時(shí)。在這種情況下，如圖24所示，在20個(gè)像素X 20 條線的基本平面匹配處理范圍144中在水平方向的端部和垂直方向的端部存在比八個(gè)像素和八條線小的區(qū)域。因此，將啞圖像數(shù)據(jù)153插入這些區(qū)域中，并進(jìn)行以8 X 8格式重復(fù)
2傳送4個(gè)像素X 16個(gè)突發(fā)九次的傳送訪問(wèn)。這允許訪問(wèn)20個(gè)像素X 20條線的基本平面匹配處理范圍144的圖像數(shù)據(jù)。但是，如圖25所示，也可以應(yīng)用如下方式的傳送訪問(wèn)。明確地說(shuō)，在20個(gè)像素X20 條線的基本平面匹配處理范圍144中不將啞圖像數(shù)據(jù)153插入垂直方向的端部中。對(duì)于這個(gè)垂直方向的端部，使突發(fā)的次數(shù)與應(yīng)該傳送的數(shù)據(jù)(四條線)相適應(yīng)，重復(fù)傳送4個(gè)像素X 8個(gè)突發(fā)三次。在這種情況下，在顯示在圖25中的例子中，可以通過(guò)總共九次傳送，SP， 以8 X 8格式重復(fù)傳送4個(gè)像素X 16個(gè)突發(fā)六次，再重復(fù)傳送4個(gè)像素X 8個(gè)突發(fā)三次，進(jìn)行對(duì)20個(gè)像素X20條線的基本平面匹配處理范圍144的圖像數(shù)據(jù)的訪問(wèn)。相反，效率最低的例子是如圖26所示，20個(gè)像素X 20條線的基本平面匹配處理范圍144分布在8X8個(gè)像素的16個(gè)塊上的情況。在這種情況下，如圖26所示，在20個(gè)像素X20條線的基本平面匹配處理范圍144中，在水平方向的端部和垂直方向的端部存在比八個(gè)像素和八條線小的區(qū)域。將啞圖像數(shù)據(jù)153插入這些區(qū)域中，并進(jìn)行以8X8格式重復(fù)傳送4個(gè)像素X 16個(gè)突發(fā)16次的傳送訪問(wèn)。這允許訪問(wèn)20個(gè)像素X 20條線的基本平面匹配處理范圍144的圖像數(shù)據(jù)。但是，如圖27所示，如下方式也是可以的。明確地說(shuō)，在20個(gè)像素X20條線的基本平面匹配處理范圍144中，不將啞圖像數(shù)據(jù)153插入垂直方向的端部中。對(duì)于這些垂直方向的上下端部，使突發(fā)的次數(shù)與應(yīng)該傳送的數(shù)據(jù)(每個(gè)端部?jī)蓷l線)相適應(yīng)。就是說(shuō)，也可以應(yīng)用重復(fù)傳送4個(gè)像素X4個(gè)突發(fā)總共八次的傳送訪問(wèn)。在這種情況下，在顯示在圖 27中的例子中，可以通過(guò)總共16次傳送，S卩，以8 X 8格式重復(fù)傳送4個(gè)像素X 16個(gè)突發(fā)八次，再重復(fù)傳送4個(gè)像素X 4個(gè)突發(fā)八次，進(jìn)行對(duì)基本平面匹配處理范圍144的圖像數(shù)據(jù)的訪問(wèn)。因此，在就20個(gè)像素X20條線的基本平面匹配處理范圍144的圖像數(shù)據(jù)對(duì)圖像存儲(chǔ)器40的訪問(wèn)中，在64 X I格式下必須傳送20次。相反，在8 X 8格式下，至少傳送九次和至多傳送16次就足夠了。此外，在8X8格式下，在本示例的成像設(shè)備中，多半傳送是最有效數(shù)據(jù)傳送(16個(gè)突發(fā))。而且，本實(shí)施例是如此配置的，它也可以選擇如圖28A所示，將圖像(屏幕)劃分成4個(gè)像素X4條線的塊一最大突發(fā)傳送單位(64個(gè)像素)的1/4，并以此為單位對(duì)圖像存儲(chǔ)部分進(jìn)行讀寫的塊訪問(wèn)形式，作為運(yùn)動(dòng)圖像NR處理中的參考圖像訪問(wèn)的另一種形式。在下文中，將這種以由4個(gè)像素X4條線組成的塊為單位的塊訪問(wèn)形式稱為4X4格式。在4X4格式中，如圖28B所示，將沿著水平方向的四個(gè)像素當(dāng)作一個(gè)突發(fā)傳送的單位，沿著水平方向的四個(gè)像素通過(guò)一個(gè)突發(fā)傳送(一個(gè)突發(fā))來(lái)傳送。在沿著水平方向的這個(gè)像素的突發(fā)傳送結(jié)束之后，傳送下一條線上的四個(gè)像素。也就是說(shuō)，類似地以一個(gè)突發(fā)傳送下一條線上的四個(gè)像素，并且可以以四個(gè)突發(fā)傳送4X4格式的圖像數(shù)據(jù)。在4X4 格式的情況下，如圖28B所示，通過(guò)沿著水平方向連續(xù)訪問(wèn)由4個(gè)像素X4條線=16個(gè)像素組成的塊四次(四個(gè)塊)一次可以傳送64個(gè)像素的數(shù)據(jù)。也就是說(shuō)，可以以四個(gè)突發(fā)傳送4X4格式的圖像數(shù)據(jù)?？梢砸?6個(gè)突發(fā)(最大突發(fā)長(zhǎng)度)連續(xù)訪問(wèn)沿著水平方向的4個(gè)像素X4條線的四個(gè)塊，一次傳送4個(gè)像素X4 條線的這四個(gè)塊的64個(gè)像素的數(shù)據(jù)。在通過(guò)這種4X4格式一次傳送64個(gè)像素(作為最大突發(fā)長(zhǎng)度的16個(gè)突發(fā))的數(shù)據(jù)的情況下，如圖28B所示，將4個(gè)像素X4條線的開(kāi)始地址ADl定義成初始地址。此時(shí)，如圖所示定義以四個(gè)像素為單位的地址AD2到AD16，并且可以以連續(xù)16個(gè)突發(fā)進(jìn)行按 4X4格式的以64個(gè)像素為單位的存儲(chǔ)器訪問(wèn)。當(dāng)如圖28B所示，以64個(gè)像素(16個(gè)突發(fā))為單位進(jìn)行訪問(wèn)時(shí)，4X4格式的效率是最高的。但是，也存在沿著水平方向應(yīng)該以四個(gè)或更少個(gè)塊為單位進(jìn)行訪問(wèn)的情況。例如，在沿著水平方向以兩個(gè)塊(32個(gè)像素)為單位的訪問(wèn)中，在圖28B中定義了以四個(gè)像素為單位的地址ADl到AD8，并且可以以連續(xù)八個(gè)突發(fā)進(jìn)行以32個(gè)像素為單位的訪問(wèn)。也可以類似地以4個(gè)像素X4條線的一個(gè)塊(16個(gè)像素)為單位和以三個(gè)塊(48個(gè)像素)為單位進(jìn)行訪問(wèn)。當(dāng)在圖像存儲(chǔ)器40的幀存儲(chǔ)器上指定了 4X4格式的開(kāi)始地址ADl和沿著水平方向的4個(gè)像素X4條線的塊的編號(hào)時(shí)，存儲(chǔ)器控制器計(jì)算為4X4格式的存儲(chǔ)器訪問(wèn)計(jì)算地址AD2和隨后地址，并訪問(wèn)存儲(chǔ)器40。與上述8X8格式的情況類似，如果圖像數(shù)據(jù)不可被四個(gè)像素除盡，則如圖28A所示，在水平方向的右端和垂直方向的下端提供啞區(qū)域154，以便將水平方向和垂直方向的尺寸設(shè)置成四的倍數(shù)。該4X4格式與8X8格式相比進(jìn)一步改善了上述對(duì)基本平面匹配處理范圍(20個(gè)像素X 20條線)144的總線訪問(wèn)。利用4個(gè)像素X 4條線的塊單位的最有效情況是如圖29所示，當(dāng)將20個(gè)像素X 20 條線的基本平面匹配處理范圍140剛好分配給沿著水平方向5個(gè)塊X沿著垂直方向5個(gè)塊時(shí)。對(duì)于對(duì)這25個(gè)塊的訪問(wèn)，可以將這些塊劃分成沿著水平方向四個(gè)塊的五條線和沿著垂直方向一個(gè)塊的五條線?？梢酝ㄟ^(guò)總共十次傳送，即，根據(jù)圖28B的最大突發(fā)長(zhǎng)度以四個(gè)塊為單位傳送4個(gè)像素X 16個(gè)突發(fā)五次，再以一個(gè)塊為單位傳送4個(gè)像素X 4個(gè)突發(fā)五次來(lái)進(jìn)行訪問(wèn)。相反，效率最低的例子是如圖30所示，20個(gè)像素X20條線的基本平面匹配處理范圍144分布在4個(gè)像素X 4條線的沿著水平方向6個(gè)塊X沿著垂直方向6個(gè)塊=36個(gè)塊上的情況。在這種情況下，如圖30所示，在20個(gè)像素X20條線的基本平面匹配處理范圍144中在水平方向的左右端部和垂直方向的上下端部都存在比四個(gè)像素和四條線小的區(qū)域。因此，將啞圖像數(shù)據(jù)153插入這些區(qū)域中。對(duì)于以4X 4格式對(duì)這36個(gè)塊的訪問(wèn)，可以將這些塊劃分成沿著水平方向四個(gè)塊的六條線和沿著垂直方向兩個(gè)塊的六條線?？梢酝ㄟ^(guò)總共12次傳送，即，根據(jù)圖28B的最大突發(fā)長(zhǎng)度以四個(gè)塊為單位傳送4個(gè)像素X 16個(gè)突發(fā)六次，再以兩個(gè)塊為單位傳送4個(gè)像素X 8個(gè)突發(fā)六次來(lái)進(jìn)行訪問(wèn)。因此，傳送訪問(wèn)的次數(shù)小于在顯示在圖27中的8X8格式的情況下16次的傳送次數(shù)。而且，作為在本實(shí)施例的成像設(shè)備中最有效數(shù)據(jù)傳送的16-突發(fā)傳送的使用率提高了， 進(jìn)一步提聞了總線效率。[7.利用二級(jí)存儲(chǔ)器的處理的描述]在本實(shí)施例的例子中，如圖I和2所示，自動(dòng)存儲(chǔ)器復(fù)制部分50格式轉(zhuǎn)換存儲(chǔ)在圖像存儲(chǔ)器40中的數(shù)據(jù)所得的數(shù)據(jù)被讀出到二級(jí)存儲(chǔ)器60中。然后，將數(shù)據(jù)從二級(jí)存儲(chǔ)器60寫入一級(jí)存儲(chǔ)器中。在本實(shí)施例中，如圖2所示，沿著垂直方向旋轉(zhuǎn)的緩沖器(二級(jí)存儲(chǔ)器60)配備在基本平面參考緩沖器(內(nèi)部一級(jí)存儲(chǔ)器)的外部。近年來(lái)，正在促進(jìn)系統(tǒng)LSI的內(nèi)置SRAM 的發(fā)展，并且可以在配置成內(nèi)置SRAM的存儲(chǔ)器中管理放在外部圖像存儲(chǔ)器上時(shí)造成嚴(yán)重帶負(fù)擔(dān)的數(shù)據(jù)。作為本實(shí)施例的內(nèi)置緩沖器的二級(jí)存儲(chǔ)器60，由內(nèi)置在例如運(yùn)動(dòng)檢測(cè)和運(yùn)動(dòng)補(bǔ)償部分16中那樣的SRAM構(gòu)成。一般說(shuō)來(lái)，在像DRAM那樣的圖像存儲(chǔ)器中，由于控制器的陣列(bank)管理以及刷新操作，使數(shù)據(jù)效率低下，因此，像訪問(wèn)參考?jí)K那樣的隨機(jī)存取往往消耗更寬的總線頻帶。 相反，內(nèi)置DRAM與降低數(shù)據(jù)效率的因素(如陣列管理和刷新)無(wú)關(guān)，因此，具有隨機(jī)存取時(shí)還不錯(cuò)的優(yōu)點(diǎn)。如后面所述的數(shù)據(jù)寫入處理所述，以這樣的方式將數(shù)據(jù)從由DRAM配置的圖像存儲(chǔ)器40復(fù)制到內(nèi)部二級(jí)存儲(chǔ)器60，即以突發(fā)傳送形式復(fù)制連續(xù)數(shù)據(jù)，以便可以防止隨機(jī)存取的發(fā)生。因此，在對(duì)圖像存儲(chǔ)器40的數(shù)據(jù)訪問(wèn)中效率下降小。另一方面，作為圖像處理器的運(yùn)動(dòng)檢測(cè)和運(yùn)動(dòng)補(bǔ)償部分16對(duì)內(nèi)部二級(jí)存儲(chǔ)器60進(jìn)行隨機(jī)存取。但是，因?yàn)樗莾?nèi)置SRAM，所以不存在像訪問(wèn)DRAM時(shí)觀察到的那樣的效率下降。參考圖31和和32的流程圖，描述在自動(dòng)存儲(chǔ)器復(fù)制部分50的控制下進(jìn)行的讀寫第一幀的數(shù)據(jù)的處理(圖31)和讀寫第二和隨后幀的數(shù)據(jù)的處理(圖32)。作為圖31中的第一幀的處理，等待主線處理結(jié)束(步驟S101)，并進(jìn)行從圖像存儲(chǔ)器40中讀取用在下一個(gè)幀的開(kāi)始?jí)K的運(yùn)動(dòng)檢測(cè)中的區(qū)域和將其寫入二級(jí)存儲(chǔ)器60中的復(fù)制處理(步驟S102)。作為圖32中的第二或隨后幀的處理，等待一個(gè)目標(biāo)塊的運(yùn)動(dòng)檢測(cè)開(kāi)始(步驟 sin),并復(fù)制與一個(gè)目標(biāo)塊相對(duì)應(yīng)的區(qū)域(步驟Si 12)。然后，確定一個(gè)幀的復(fù)制是否結(jié)束了(步驟S113)。如果復(fù)制還沒(méi)有結(jié)束，該處理返回到步驟S111，繼續(xù)進(jìn)行復(fù)制處理。如果在步驟S113中確定一個(gè)幀的復(fù)制結(jié)束了，則結(jié)束這個(gè)幀的復(fù)制處理。這樣，以一個(gè)參考幀的數(shù)據(jù)為單位將數(shù)據(jù)傳送到內(nèi)部二級(jí)存儲(chǔ)器60，并且將參考幀的匹配處理范圍中的數(shù)據(jù)從內(nèi)部二級(jí)存儲(chǔ)器60傳送到作為內(nèi)部一級(jí)存儲(chǔ)器的緩沖器 16a，并保留在其中。作為內(nèi)部一級(jí)存儲(chǔ)器的緩沖器16a等效于顯示在圖9中的參考?jí)K緩沖器 162。圖33是更詳細(xì)地示出顯示在圖2中的自動(dòng)存儲(chǔ)器復(fù)制部分50執(zhí)行的圖31和圖 32的復(fù)制處理的圖形。首先，從第一幀的平面外狀態(tài)或從第二或隨后幀的平面內(nèi)狀態(tài)開(kāi)始處理(步驟 S121)。然后，檢驗(yàn)狀態(tài)(步驟S122)。在平面內(nèi)狀態(tài)的情況下，等待來(lái)自運(yùn)動(dòng)檢測(cè)的信息并讀取目標(biāo)塊的坐標(biāo)(步驟S123)。從目標(biāo)塊的坐標(biāo)中計(jì)算下一個(gè)循環(huán)的狀態(tài)(步驟 S124)。然后，計(jì)算傳送目的地地址(步驟S125)。在這個(gè)步驟中，計(jì)算圖像存儲(chǔ)器40中的開(kāi)始地址的坐標(biāo)作為地址。而且，計(jì)算傳送源地址(步驟S126)。在這個(gè)步驟中，計(jì)算二級(jí)存儲(chǔ)器60中的開(kāi)始地址的的坐標(biāo)作為地址。將各自計(jì)算的地址發(fā)送給各自存儲(chǔ)器(步驟S127)。進(jìn)行各自數(shù)據(jù)讀取和數(shù)據(jù)寫入并遞增開(kāi)始地址(步驟S128)，以便該處理返回到步驟S122。如果在步驟S122中檢驗(yàn)的狀態(tài)是平面外狀態(tài)，則計(jì)算傳送目的地地址(步驟 (S129)。在這個(gè)步驟中，計(jì)算圖像存儲(chǔ)器40中的開(kāi)始地址的坐標(biāo)作為地址。而且，計(jì)算傳送源地址(步驟S130)。在這個(gè)步驟中，計(jì)算二級(jí)存儲(chǔ)器60中的開(kāi)始地址的的坐標(biāo)作為地址。將各自計(jì)算地址發(fā)送給各自存儲(chǔ)器(步驟S131)。進(jìn)行各自數(shù)據(jù)讀取和數(shù)據(jù)寫入并遞增開(kāi)始地址(步驟S132)。此后，確定一個(gè)幀的復(fù)制是否結(jié)束了(步驟S133)。如果該復(fù)制還沒(méi)有結(jié)束，該處理返回到步驟S122。如果一個(gè)幀的復(fù)制結(jié)束了，則結(jié)束這個(gè)處理。下面參考圖34和圖35描述將數(shù)據(jù)存儲(chǔ)在圖像存儲(chǔ)器40中的狀態(tài)和從圖像存儲(chǔ)器40中讀出數(shù)據(jù)的狀態(tài)。為了進(jìn)行幀NR，應(yīng)該將與一個(gè)屏幕相對(duì)應(yīng)的數(shù)據(jù)寫入大容量存儲(chǔ)器中。為了減少這個(gè)一個(gè)屏幕的數(shù)據(jù)，以任何形式壓縮數(shù)據(jù)。如果使用JPEG系統(tǒng)所代表的DCT變換進(jìn)行壓縮，則作為壓縮對(duì)象的數(shù)據(jù)是像8個(gè)像素X8個(gè)像素的塊那樣的二的冪數(shù)的塊。而且，這樣的壓縮技術(shù)壓縮一個(gè)屏幕的所有數(shù)據(jù)，因此，以后不可能只擴(kuò)展必要部分。在本實(shí)施例的成像設(shè)備中，在大容量存儲(chǔ)器40的隨后級(jí)上的大多數(shù)電路是逐條線地進(jìn)行處理的電路，如運(yùn)動(dòng)圖像編解碼器19和NTSC編碼器20。因此，以線為單位一點(diǎn)一點(diǎn)地進(jìn)行擴(kuò)展處理對(duì)于大容量存儲(chǔ)器來(lái)說(shuō)也是方便的。因此，數(shù)據(jù)壓縮器35以進(jìn)一步以一條線為單位劃分目標(biāo)塊單位(64個(gè)像素X64 個(gè)像素)所得的64個(gè)像素X I個(gè)像素(一條線)為單位壓縮數(shù)據(jù)。作為這種壓縮處理，例如通過(guò)虛線近似和數(shù)據(jù)重新排序?qū)?4個(gè)像素X I條線的圖像數(shù)據(jù)壓縮成1/2數(shù)據(jù)量。如果進(jìn)行這樣的壓縮，則在數(shù)據(jù)經(jīng)過(guò)幀NR然后寫入存儲(chǔ)器40中之后，當(dāng)讀取信號(hào)經(jīng)過(guò)成為NTSC 信號(hào)的輸出處理和作為隨后級(jí)處理的編解碼處理時(shí)，數(shù)據(jù)訪問(wèn)和擴(kuò)展也變得容易。因此，在本實(shí)施例中，可以以一條線上的64個(gè)像素為單位進(jìn)行壓縮，因?yàn)樗?4 個(gè)像素等效于如圖34所示的幀NR的垂直方向處理(帶處理)的輸入寬度。一條線上的64 個(gè)像素的信號(hào)在例如8位的亮度信號(hào)和8位的色差信號(hào)的情況下是(8+8) X 64 = 1024位， 對(duì)它的數(shù)據(jù)加以壓縮。讀出這樣一個(gè)幀的寫入圖像存儲(chǔ)器40中的數(shù)據(jù)作為數(shù)據(jù)擴(kuò)展器36中以一條水平線為單位的數(shù)據(jù)，并供應(yīng)給分辨率轉(zhuǎn)換器37，以便轉(zhuǎn)換成可以在隨后級(jí)圖像數(shù)據(jù)處理系統(tǒng)中處理的圖像數(shù)據(jù)。如圖35所示，當(dāng)自動(dòng)存儲(chǔ)器復(fù)制部分50復(fù)制存儲(chǔ)在圖像存儲(chǔ)器40中的數(shù)據(jù)時(shí)， 擴(kuò)展和格式轉(zhuǎn)換所希望區(qū)域的圖像數(shù)據(jù)，以便根據(jù)目標(biāo)塊的坐標(biāo)讀出到二級(jí)存儲(chǔ)器60中。 此時(shí)，讀出64條線的寫入圖像存儲(chǔ)器40中的以64個(gè)像素Xl條線為單位的圖像數(shù)據(jù)。于是，讀出以目標(biāo)塊為單位的數(shù)據(jù)。然后，將所希望目標(biāo)塊的圖像數(shù)據(jù)從二級(jí)存儲(chǔ)器60供應(yīng)給參考?jí)K緩沖器162，并進(jìn)行計(jì)算與目標(biāo)塊的SAD值的處理。圖36A和36B示出了從圖像存儲(chǔ)器40傳送到二級(jí)存儲(chǔ)器60的范圍和可能進(jìn)一步從這個(gè)二級(jí)存儲(chǔ)器60發(fā)送給參考?jí)K緩沖器162的范圍的例子。也就是說(shuō)，盡管并非整個(gè)范圍都必要，但應(yīng)該保留縮小平面中取決于運(yùn)動(dòng)矢量檢測(cè)的結(jié)果可能訪問(wèn)的范圍。在本示例中，將目標(biāo)塊的坐標(biāo)位置投影到參考圖像上獲得的塊是中心塊211，以及上述的搜索范圍以使這個(gè)塊成為中心的方式通過(guò)保證搜索范圍圍繞這個(gè)塊來(lái)定義。圖36A示出了在某個(gè)定時(shí)上的處理狀態(tài)，圖36B示出了目標(biāo)塊的位置相對(duì)于圖36的狀態(tài)前進(jìn)了一個(gè)塊時(shí)的狀態(tài)。在這種情況下，存在將圍繞中心塊211的搜索范圍210中的數(shù)據(jù)讀出到參考?jí)K緩沖器162中，以及應(yīng)該將包括搜索范圍210的數(shù)據(jù)存儲(chǔ)在二級(jí)存儲(chǔ)器60中的可能性。在圖像存儲(chǔ)器40中，如所述那樣存儲(chǔ)以帶形式轉(zhuǎn)換成塊的數(shù)據(jù)。在圖36A的例子中，將帶狀垂直塊線VI，V2，V3，V4和V5上各個(gè)塊復(fù)制到二級(jí)存儲(chǔ)器60中。但是，當(dāng)將塊線V5當(dāng)作最近線時(shí)，已經(jīng)將到用在下一處理級(jí)中的塊212的數(shù)據(jù)讀出到二級(jí)存儲(chǔ)器60中。當(dāng)將塊線Vl 當(dāng)作最后線時(shí)，已經(jīng)從二級(jí)存儲(chǔ)器60中擦除了在下一次處理中無(wú)用的塊213以前的數(shù)據(jù)。在這種狀態(tài)下，將圍繞中心塊211的搜索范圍210中的數(shù)據(jù)傳送給作為一級(jí)存儲(chǔ)器的參考?jí)K緩沖器162，并進(jìn)行搜索。假設(shè)如圖36B所示，經(jīng)過(guò)運(yùn)動(dòng)檢測(cè)和運(yùn)動(dòng)補(bǔ)償部分16處理的目標(biāo)塊的坐標(biāo)位置從中心塊211移動(dòng)到正好在中心塊211下面的塊211'。此時(shí)，搜索范圍210也變成向下移動(dòng)一個(gè)塊所得的搜索范圍210'，并且將相應(yīng)數(shù)據(jù)從二級(jí)存儲(chǔ)器60傳送到參考?jí)K緩沖器162。 這個(gè)搜索范圍21(V包括塊212，而塊213已經(jīng)變成無(wú)用塊。因此，在圖36B的這種狀態(tài)下， 進(jìn)一步將塊212下面的塊讀出到二級(jí)存儲(chǔ)器60中，并且從二級(jí)存儲(chǔ)器60中擦除已經(jīng)出了搜索范圍210'的方塊213的數(shù)據(jù)。這樣，讀出到二級(jí)存儲(chǔ)器60中的數(shù)據(jù)的范圍在一個(gè)幀中前進(jìn)。當(dāng)該范圍前進(jìn)到一個(gè)幀的最后塊時(shí)，進(jìn)行預(yù)先將下一個(gè)幀的開(kāi)始部分的數(shù)據(jù)讀到二級(jí)存儲(chǔ)器60中的處理。明確地說(shuō)，假設(shè)如圖37所示，中心塊211"接近一個(gè)幀的右下端和搜索范圍210" 已經(jīng)移動(dòng)到一個(gè)幀的右下端。此時(shí)，如果假定帶狀垂直塊線VII，V12，V13，V13和V15上的數(shù)據(jù)已經(jīng)傳送到參考?jí)K緩沖器162，則下一次要讀出的塊在如果繼續(xù)下去就在一個(gè)幀的屏幕之外的線V16上。因此，在本示例中，在這樣的狀況下，如圖37B所示，開(kāi)始讀取圍繞下一個(gè)幀的左端的塊線V17，V18和V19上的塊，并將這些塊的數(shù)據(jù)傳送到二級(jí)存儲(chǔ)器60。因此，如圖37B所示，在搜索下一個(gè)幀的開(kāi)始時(shí)刻，將圍繞作為目標(biāo)塊的中心塊 221的搜索范圍220中的數(shù)據(jù)讀出到二級(jí)存儲(chǔ)器60中。因此，可以馬上將搜索范圍220中的數(shù)據(jù)讀出到一級(jí)存儲(chǔ)器的參考?jí)K緩沖器162中，并可以進(jìn)行搜索。圖38示出了本實(shí)施例的處理與作為現(xiàn)有技術(shù)提出的其它類型的處理之間的比較。在圖38中的操作模式當(dāng)中，底行的[光柵掃描+內(nèi)部二級(jí)存儲(chǔ)器]等效于本實(shí)施例的處理。而且，頂行的[光柵掃描模式]對(duì)應(yīng)于未配備二級(jí)存儲(chǔ)器而以光柵掃描模式將數(shù)據(jù)存儲(chǔ)在圖像存儲(chǔ)器40中的情況。此外，中行的[光柵掃描+塊格式]對(duì)應(yīng)于以光柵掃描模式將數(shù)據(jù)存儲(chǔ)在圖像存儲(chǔ)器40中并且也以塊格式存儲(chǔ)的例子。在顯示在圖38中的[光柵掃描模式]的情況下，經(jīng)常發(fā)生從作為大容量存儲(chǔ)器的圖像存儲(chǔ)器40到參考?jí)K緩沖器162的數(shù)據(jù)傳送。因此，圖像存儲(chǔ)器的數(shù)據(jù)帶的使用效率低下，并且存儲(chǔ)器效率也低下。在[光柵掃描+塊格式]的情況下，因?yàn)榭梢宰x出塊格式的數(shù)據(jù)，所以可以減輕存儲(chǔ)器效率的負(fù)擔(dān)。但是，存儲(chǔ)一個(gè)幀的數(shù)據(jù)的大容量存儲(chǔ)器需要兩個(gè)屏幕的容量，因此必須
多寫一個(gè)屏幕。相反，本實(shí)施例的例子的[光柵掃描+內(nèi)部二級(jí)存儲(chǔ)器]具有這樣的有利效果，即足以使作為大容量存儲(chǔ)器的圖像存儲(chǔ)器40具有一個(gè)屏幕的存儲(chǔ)容量，并且讀寫效率也很聞。如上所述，按照本實(shí)施例的例子，以壓縮具有相對(duì)較大數(shù)據(jù)量的圖像數(shù)據(jù)所得的格式有效地將數(shù)據(jù)存儲(chǔ)在由DRAM等配置的圖像存儲(chǔ)器40中。另外，經(jīng)由二級(jí)存儲(chǔ)器60將存儲(chǔ)在圖像存儲(chǔ)器40中的數(shù)據(jù)寫到運(yùn)動(dòng)檢測(cè)和運(yùn)動(dòng)補(bǔ)償部分16中的一級(jí)存儲(chǔ)器中。因此，有效地將數(shù)據(jù)寫到一級(jí)存儲(chǔ)器中。也就是說(shuō)，只將進(jìn)行搜索的區(qū)域的數(shù)據(jù)寫入一級(jí)存儲(chǔ)器中，而讓為了便于幀掃描而可能冗余讀出的區(qū)域的數(shù)據(jù)留在二級(jí)存儲(chǔ)器中。因此，可以將對(duì)圖像存儲(chǔ)器40的訪問(wèn)降到最低程度。而且，在通過(guò)顯示在圖2中的自動(dòng)存儲(chǔ)器復(fù)制部分 50中的處理圖像數(shù)據(jù)已經(jīng)變成適合塊匹配的格式的數(shù)據(jù)的狀態(tài)下進(jìn)行二級(jí)存儲(chǔ)器寫入。因此，只將所希望區(qū)域的數(shù)據(jù)從二級(jí)存儲(chǔ)器復(fù)制到一級(jí)存儲(chǔ)器中就足夠了，并且可以處理負(fù)擔(dān)較輕地進(jìn)行復(fù)制。顯示在圖36A和36B以及圖37A和37B中的復(fù)制塊的運(yùn)動(dòng)只是一個(gè)例子，也可以應(yīng)用另一種處理配置。構(gòu)成一個(gè)塊的像素的數(shù)量也只是一個(gè)例子，也可以應(yīng)用另一種配置。 復(fù)制不僅可以以塊為單位進(jìn)行，而且可以以一條線或一個(gè)像素為單位進(jìn)行。盡管上述實(shí)施例是將按照本公開(kāi)一個(gè)實(shí)施例的圖像處理設(shè)備應(yīng)用于成像設(shè)備的情況，但本公開(kāi)不局限于成像設(shè)備，也可以應(yīng)用于各種圖像處理設(shè)備。上述實(shí)施例是通過(guò)塊匹配技術(shù)將本公開(kāi)的一個(gè)實(shí)施例應(yīng)用于通過(guò)圖像疊加的噪聲降低處理的情況。但是，本公開(kāi)不局限于此，也可以應(yīng)用于多個(gè)處理器訪問(wèn)寫到圖像存儲(chǔ)部分中的圖像數(shù)據(jù)的所有圖像處理設(shè)備。本申請(qǐng)包含與公開(kāi)在2011年I月5日向日本專利局提交的日本優(yōu)先權(quán)專利申請(qǐng) JP 2011-000803中的主題有關(guān)的主題，特此通過(guò)引用并入其全部?jī)?nèi)容。本領(lǐng)域的普通技術(shù)人員應(yīng)該明白，只要在所附權(quán)利要求書(shū)或其等效物的范圍之內(nèi)，視設(shè)計(jì)要求和其它因素而定，可以作出各種各樣的修改、組合、分組合和變更。
權(quán)利要求
1.一種圖像處理設(shè)備，包含圖像處理器，被配置成以塊為單位計(jì)算目標(biāo)幀的圖像數(shù)據(jù)與參考幀的圖像數(shù)據(jù)之間的運(yùn)動(dòng)矢量；參考幀圖像存儲(chǔ)器，配置成保留過(guò)去幀的圖像數(shù)據(jù)作為參考幀的圖像數(shù)據(jù)；一級(jí)存儲(chǔ)器，配置成保留在所述圖像處理器的計(jì)算中的參考幀的匹配處理范圍；以及二級(jí)存儲(chǔ)器，配置成從存儲(chǔ)在所述參考幀圖像存儲(chǔ)器中的參考幀的圖像數(shù)據(jù)中讀出和保留所希望范圍的圖像數(shù)據(jù)，所述二級(jí)存儲(chǔ)器從保留的圖像數(shù)據(jù)中讀出匹配處理范圍的數(shù)據(jù)，并將所讀數(shù)據(jù)供應(yīng)給所述一級(jí)存儲(chǔ)器。
2.按照權(quán)利要求I所述的圖像處理設(shè)備，其中所述參考幀圖像存儲(chǔ)器是保留轉(zhuǎn)換成預(yù)定格式的圖像數(shù)據(jù)的存儲(chǔ)器，以及當(dāng)將保留在所述參考幀圖像存儲(chǔ)器中的圖像數(shù)據(jù)供應(yīng)給所述二級(jí)存儲(chǔ)器時(shí)，進(jìn)行從預(yù)定格式的格式轉(zhuǎn)換。
3.按照權(quán)利要求I所述的圖像處理設(shè)備，其中所述參考幀圖像存儲(chǔ)器是保留以預(yù)定格式經(jīng)受壓縮處理的圖像數(shù)據(jù)的存儲(chǔ)器，以及當(dāng)將保留在所述參考幀圖像存儲(chǔ)器中的圖像數(shù)據(jù)供應(yīng)給所述二級(jí)存儲(chǔ)器時(shí)，經(jīng)過(guò)壓縮處理的圖像數(shù)據(jù)在經(jīng)過(guò)擴(kuò)展處理之后供應(yīng)。
4.按照權(quán)利要求I所述的圖像處理設(shè)備，其中所述圖像處理器根據(jù)運(yùn)動(dòng)矢量的檢測(cè)設(shè)置將參考幀的圖像數(shù)據(jù)加入目標(biāo)幀的圖像數(shù)據(jù)中的位置，并在設(shè)置位置上進(jìn)行多個(gè)幀的圖像的相加處理。
5.按照權(quán)利要求4所述的圖像處理設(shè)備，其中所述圖像處理器在多個(gè)幀的圖像的相加處理中進(jìn)行圖像的噪聲消除和噪聲降低之一。
6.—種圖像處理方法,包含以塊為單位計(jì)算目標(biāo)幀的圖像數(shù)據(jù)與參考幀的圖像數(shù)據(jù)之間的運(yùn)動(dòng)矢量；保留過(guò)去幀的圖像數(shù)據(jù)作為參考幀的圖像數(shù)據(jù)；在這樣的狀態(tài)下保留參考幀的匹配處理范圍，使得在圖像處理中計(jì)算運(yùn)動(dòng)矢量時(shí)，在圖像處理中可能參考匹配處理范圍；以及從在參考幀保留處理中保留的參考幀的圖像數(shù)據(jù)中，讀出和保留所希望范圍的圖像數(shù)據(jù)，讀出所保留圖像數(shù)據(jù)的一部分，并將所保留圖像數(shù)據(jù)的一部分發(fā)送給匹配處理范圍保留處理。
7.按照權(quán)利要求6所述的圖像處理方法，其中所述參考幀保留處理是保留轉(zhuǎn)換成預(yù)定格式的圖像數(shù)據(jù)的處理，以及當(dāng)讀出在所述參考幀保留處理中保留的圖像數(shù)據(jù)并進(jìn)行中間保留處理時(shí)，進(jìn)行從預(yù)定格式的格式轉(zhuǎn)換。
8.按照權(quán)利要求6所述的圖像處理方法，其中所述參考幀保留處理是保留以預(yù)定格式經(jīng)受壓縮處理的圖像數(shù)據(jù)的處理，以及當(dāng)讀出在所述參考幀保留處理中保留的圖像數(shù)據(jù)并進(jìn)行中間保留處理時(shí)，經(jīng)過(guò)壓縮處理的圖像數(shù)據(jù)在經(jīng)過(guò)擴(kuò)展處理之后供應(yīng)。
9.按照權(quán)利要求6所述的圖像處理方法，其中所述圖像處理是根據(jù)運(yùn)動(dòng)矢量的檢測(cè)設(shè)置將參考幀的圖像數(shù)據(jù)加入目標(biāo)幀的圖像數(shù)據(jù)中的位置，并在設(shè)置位置上相加多個(gè)幀的圖像的處理。
10.按照權(quán)利要求9所述的圖像處理方法，其中在所述圖像處理中在相加多個(gè)幀的圖像的處理中進(jìn)行圖像的噪聲消除和噪聲降低之
全文摘要
一種圖像處理設(shè)備包括以塊為單位計(jì)算目標(biāo)幀的圖像數(shù)據(jù)與參考幀的圖像數(shù)據(jù)之間的運(yùn)動(dòng)矢量的圖像處理器、和保留過(guò)去幀的圖像數(shù)據(jù)作為參考幀的圖像數(shù)據(jù)的參考幀圖像存儲(chǔ)器。而且，所述圖像處理設(shè)備還包括在所述圖像處理器的計(jì)算中保留參考幀的匹配處理范圍的一級(jí)存儲(chǔ)器、和從存儲(chǔ)在所述參考幀圖像存儲(chǔ)器中的參考幀的圖像數(shù)據(jù)中讀出和保留所希望范圍的圖像數(shù)據(jù)的二級(jí)存儲(chǔ)器。所述二級(jí)存儲(chǔ)器從保留的圖像數(shù)據(jù)中讀出匹配處理范圍的數(shù)據(jù)，并將所讀數(shù)據(jù)供應(yīng)給所述一級(jí)存儲(chǔ)器。
文檔編號(hào)G06T1/20GK102592259SQ20121000153
公開(kāi)日2012年7月18日 申請(qǐng)日期2012年1月5日 優(yōu)先權(quán)日2011年1月5日
發(fā)明者沼田憐 申請(qǐng)人:索尼公司