圖像捕獲設(shè)備、圖像顯示設(shè)備、使用其之系統(tǒng)和方法
【專利摘要】一種系統(tǒng)，包括：圖像捕獲設(shè)備，被配置為捕獲來自相機(jī)系統(tǒng)的圖像數(shù)據(jù)，所述圖像數(shù)據(jù)處于第一馬賽克布局；圖像顯示設(shè)備，被配置為顯示處于第二馬賽克布局的圖像數(shù)據(jù)；以及處理器，被配置為接收處于第一馬賽克布局的圖像數(shù)據(jù)，并且向圖像顯示設(shè)備提供處于第二馬賽克布局的圖像數(shù)據(jù)而不進(jìn)行到完全并置的圖像布局的中間轉(zhuǎn)換。
【專利說明】圖像捕獲設(shè)備、圖像顯示設(shè)備、使用其之系統(tǒng)和方法
[0001]對(duì)相關(guān)申請(qǐng)的交叉引用
[0002]本申請(qǐng)要求于2013年7月8日向美國(guó)專利商標(biāo)局提交的美國(guó)臨時(shí)專利申請(qǐng)N0.61/843,871的權(quán)益，通過引用將其全部?jī)?nèi)容合并于此。

【技術(shù)領(lǐng)域】
[0003]本發(fā)明的實(shí)施例涉及數(shù)字圖像顯示設(shè)備、數(shù)字圖像捕獲設(shè)備、用于數(shù)字地存儲(chǔ)捕獲的圖像的數(shù)據(jù)格式、以及用于在顯示設(shè)備上顯示捕獲的數(shù)據(jù)的方法的領(lǐng)域。

【背景技術(shù)】
[0004]圖1是示出諸如數(shù)字相機(jī)或具有集成攝像頭的智能電話機(jī)的圖像捕獲和顯示設(shè)備100的框圖。這樣的設(shè)備100通常包括圖像捕獲設(shè)備10，其包括光敏感子像素的陣列。可以通過處理器20控制圖像捕獲設(shè)備10。當(dāng)圖像捕獲設(shè)備10被控制為捕獲圖像時(shí)，可以將捕獲的圖像數(shù)據(jù)提供給處理器20，其可以在將數(shù)據(jù)存儲(chǔ)在存儲(chǔ)設(shè)備30中之前，在所接收的數(shù)據(jù)上對(duì)數(shù)據(jù)進(jìn)行修改(例如，執(zhí)行插值或去馬賽克操作)。存儲(chǔ)設(shè)備30例如可以是NAND閃存、動(dòng)態(tài)隨機(jī)存取存儲(chǔ)器(DRAM)、轉(zhuǎn)動(dòng)磁介質(zhì)(例如，硬盤驅(qū)動(dòng)器)等。在一些實(shí)施例中，處理器可以被配置為控制顯示設(shè)備40以顯示存儲(chǔ)在存儲(chǔ)設(shè)備30上的圖像或圖像捕獲設(shè)備10捕獲的圖像。


【發(fā)明內(nèi)容】

[0005]本發(fā)明的實(shí)施例針對(duì)如下的系統(tǒng)，其中根據(jù)圖像捕獲設(shè)備的像素的原生布局(native layout)來存儲(chǔ)圖像捕獲設(shè)備捕獲的圖像，并且其中具有與圖像捕獲設(shè)備相對(duì)應(yīng)的子像素布局的顯示設(shè)備顯示捕獲的圖像而不執(zhí)行去馬賽克計(jì)算。
[0006]根據(jù)本發(fā)明的一個(gè)實(shí)施例，一種系統(tǒng)包括:圖像捕獲設(shè)備，被配置為捕獲來自相機(jī)系統(tǒng)的圖像數(shù)據(jù)，所述圖像數(shù)據(jù)處于第一馬賽克布局；圖像顯示設(shè)備，被配置為顯示處于第二馬賽克布局的圖像數(shù)據(jù)；以及處理器，被配置為接收處于第一馬賽克布局的圖像數(shù)據(jù)，并且向圖像顯示設(shè)備提供處于第二馬賽克布局的圖像數(shù)據(jù)而不進(jìn)行到完全并置的圖像布局的中間轉(zhuǎn)換。
[0007]第一馬賽克布局可以是拜耳(Bayer)布局，并且第二馬賽克布局可以是菱形布局。
[0008]該處理器可以被配置為接收處于拜耳布局的圖像數(shù)據(jù)，并且通過以下步驟來向圖像顯示設(shè)備提供處于菱形布局的圖像數(shù)據(jù):從處于拜耳布局的圖像數(shù)據(jù)的相鄰綠像素產(chǎn)生處于菱形布局的圖像數(shù)據(jù)的完整綠平面；通過識(shí)別處于拜耳布局的圖像數(shù)據(jù)中的最近的紅像素來產(chǎn)生處于菱形布局的圖像數(shù)據(jù)的紅像素；以及通過識(shí)別處于拜耳布局的圖像數(shù)據(jù)中的最近的藍(lán)像素來產(chǎn)生處于菱形布局的圖像數(shù)據(jù)的藍(lán)像素。
[0009]第一馬賽克布局可以是菱形布局，并且第二馬賽克布局也可以是菱形布局。
[0010]處理器可以被配置為接收處于菱形布局的圖像數(shù)據(jù)，并且通過向圖像顯示設(shè)備直接提供處于菱形布局的圖像數(shù)據(jù)而不進(jìn)行插值來向圖像顯示設(shè)備提供處于菱形布局的圖像數(shù)據(jù)。
[0011]該系統(tǒng)可以進(jìn)一步包括存儲(chǔ)設(shè)備，其中該處理器被配置為將處于第一馬賽克布局的圖像數(shù)據(jù)存儲(chǔ)在該存儲(chǔ)設(shè)備上。
[0012]該處理器可以進(jìn)一步被配置為加載以第一馬賽克布局存儲(chǔ)在存儲(chǔ)設(shè)備上的圖像數(shù)據(jù)，并且將所加載的處于第一馬賽克布局的圖像數(shù)據(jù)轉(zhuǎn)換為處于第二馬賽克布局的圖像數(shù)據(jù)而不進(jìn)行到完全并置的布局的轉(zhuǎn)換。
[0013]可以在一對(duì)一像素的基礎(chǔ)上在該圖像顯示設(shè)備上顯示從相機(jī)系統(tǒng)捕獲的圖像數(shù)據(jù)。
[0014]根據(jù)本發(fā)明的一個(gè)實(shí)施例，一種系統(tǒng)包括:存儲(chǔ)設(shè)備，被配置為存儲(chǔ)圖像數(shù)據(jù)，所述圖像數(shù)據(jù)具有第一馬賽克布局；圖像顯示設(shè)備，被配置為顯示處于第二馬賽克布局的圖像數(shù)據(jù)；以及處理器，被配置為接收處于第一馬賽克布局的圖像數(shù)據(jù)，并且向圖像顯示設(shè)備提供處于第二馬賽克布局的圖像數(shù)據(jù)而不進(jìn)行到完全并置的圖像布局的中間轉(zhuǎn)換。
[0015]第一馬賽克布局可以是拜耳布局并且第二馬賽克布局可以是菱形布局。
[0016]該處理器可以被配置為接收處于拜耳布局的圖像數(shù)據(jù)，并且通過以下步驟來提供處于菱形布局的圖像數(shù)據(jù):從處于拜耳布局的圖像數(shù)據(jù)的相鄰綠像素產(chǎn)生處于菱形布局的圖像數(shù)據(jù)的完整綠平面；通過識(shí)別處于拜耳布局的圖像數(shù)據(jù)中的最近的紅像素來產(chǎn)生處于菱形布局的圖像數(shù)據(jù)的紅像素；以及通過識(shí)別處于拜耳布局的圖像數(shù)據(jù)中的最近的藍(lán)像素來產(chǎn)生處于菱形布局的圖像數(shù)據(jù)的藍(lán)像素。
[0017]第一馬賽克布局可以是菱形布局并且第二馬賽克布局可以是菱形布局。
[0018]該處理器可以被配置為通過向圖像顯示設(shè)備直接提供處于菱形布局的圖像數(shù)據(jù)而不進(jìn)行插值來向圖像顯示設(shè)備提供處于菱形布局中的圖像數(shù)據(jù)。
[0019]可以在一對(duì)一像素的基礎(chǔ)上在該圖像顯示設(shè)備上顯示圖像數(shù)據(jù)。
[0020]根據(jù)本發(fā)明的一個(gè)實(shí)施例，一種方法包括:將處于第一馬賽克布局的第一圖像數(shù)據(jù)的第一多個(gè)顏色通道的第一顏色通道映射到第二多個(gè)顏色通道的第一顏色通道以產(chǎn)生處于第二馬賽克布局的第二圖像數(shù)據(jù)而不進(jìn)行插值；以及將第一多個(gè)顏色通道的第二顏色通道映射到第二多個(gè)顏色通道的第二顏色通道而不進(jìn)行插值。
[0021]該方法可以進(jìn)一步包括:對(duì)第一多個(gè)顏色通道的第三顏色通道的圖像數(shù)據(jù)進(jìn)行插值以產(chǎn)生第二多個(gè)顏色通道的第三顏色通道。
[0022]第一馬賽克布局可以是拜耳布局并且第二馬賽克布局可以是菱形布局，其中第一顏色通道是紅色通道，其中第二顏色通道是藍(lán)色通道，其中第三顏色通道是綠色通道，其中將第一顏色通道的紅色通道映射到第二顏色通道的紅色通道包括:通過識(shí)別處于拜耳布局的圖像數(shù)據(jù)的最近的紅像素來產(chǎn)生處于菱形布局的圖像數(shù)據(jù)的紅像素，并且其中將第一顏色通道的藍(lán)色通道映射到第二顏色通道的藍(lán)色通道包括:通過識(shí)別處于拜耳布局中的圖像數(shù)據(jù)的最近的藍(lán)像素來產(chǎn)生處于菱形布局的圖像數(shù)據(jù)的藍(lán)像素，并且其中對(duì)第一多個(gè)顏色通道的綠色通道的圖像數(shù)據(jù)進(jìn)行插值以產(chǎn)生第二多個(gè)顏色通道的綠色通道包括:從處于拜耳布局的圖像數(shù)據(jù)的顏色通道的綠色通道的相鄰綠像素產(chǎn)生處于菱形布局的圖像數(shù)據(jù)的完整綠平面。
[0023]根據(jù)一個(gè)實(shí)施例，一種圖像捕獲設(shè)備包括:多個(gè)第一子像素，其對(duì)第一光譜范圍內(nèi)的光敏感，所述多個(gè)第一子像素被布置為多個(gè)第一行，所述多個(gè)第一行的每個(gè)子像素對(duì)第一光譜范圍內(nèi)的光敏感，所述多個(gè)第一行沿第一方向延伸；多個(gè)第二子像素，其對(duì)第二光譜范圍內(nèi)的光敏感；以及多個(gè)第三子像素，其對(duì)第三光譜范圍內(nèi)的光敏感，所述多個(gè)第二子像素和第三子像素被排列為多個(gè)第二行，所述多個(gè)第二行的每個(gè)子像素對(duì)第二光譜范圍或第三光譜范圍內(nèi)的光敏感，其中第一光譜范圍、第二光譜范圍、和第三光譜范圍彼此不同，其中所述多個(gè)第一行沿與第一方向不同的第二方向與所述多個(gè)第二行隔開，并且其中所述多個(gè)第一行沿第一方向與所述多個(gè)第二行偏移。
[0024]一種圖像顯示設(shè)備包括沿多個(gè)行和列排列的多個(gè)子像素，所述多個(gè)行包括:子像素的第一行，所述第一行的每個(gè)子像素是被配置為發(fā)射第一光譜范圍內(nèi)的光的第一類型或被配置為發(fā)射第二光譜范圍內(nèi)的光的第二類型，第一類型和第二類型的子像素沿第一行交替地布置；以及子像素的第二行，所述第二行的每個(gè)子像素是第一類型、或被配置為發(fā)射第三光譜范圍內(nèi)的光的第三類型，第一類型和第三類型的子像素沿第二方向交替地布置，其中第一光譜范圍、第二光譜范圍、和第三光譜范圍彼此不同。

【專利附圖】

【附圖說明】
[0025]附圖與說明書一起示出本發(fā)明的示范性實(shí)施例，并且與說明書一起用于解釋本發(fā)明的原理。
[0026]圖1是諸如數(shù)字相機(jī)或具有集成攝像頭的智能電話機(jī)的圖像捕獲和顯示系統(tǒng)的示意性圖示；
[0027]圖2A是子像素的拜耳布局的示意性圖示；
[0028]圖2B是根據(jù)本發(fā)明的一個(gè)實(shí)施例的圖像捕獲設(shè)備中的子像素的替代布局的示意性圖示；
[0029]圖2C是根據(jù)本發(fā)明的一個(gè)實(shí)施例的圖像捕獲設(shè)備中的子像素的替代布局的示意性圖示；
[0030]圖3A是常規(guī)紅綠藍(lán)(RGB)條紋(stripe)顯示設(shè)備中的子像素的示意性圖示；
[0031]圖3B是具有菱形布局的顯示器的示意性圖示。
[0032]圖4是示出將使用拜耳布局傳感器捕獲的圖像轉(zhuǎn)換為將要在菱形布局顯示器上顯示的圖像的方法的流程圖；
[0033]圖5A是示出用于將通過具有拜耳布局的圖像傳感器捕獲的數(shù)據(jù)轉(zhuǎn)換為完全RGB數(shù)據(jù)的算法的流程圖；
[0034]圖5B是示出用于將完全RGB圖像數(shù)據(jù)轉(zhuǎn)換為用于在具有菱形布局的顯示器上顯示的圖像數(shù)據(jù)的算法的流程圖；
[0035]圖6是根據(jù)本發(fā)明的一個(gè)實(shí)施例的用于將通過具有拜耳布局的圖像傳感器捕獲的數(shù)據(jù)轉(zhuǎn)換為用于具有菱形布局的顯示器的數(shù)據(jù)的算法的圖示；
[0036]圖7是根據(jù)本發(fā)明的一個(gè)實(shí)施例的用于將來自拜耳布局的數(shù)據(jù)轉(zhuǎn)換為用于在具有菱形布局的顯示器上顯示的算法的圖示；
[0037]圖8是根據(jù)本發(fā)明的一個(gè)實(shí)施例的具有類拜耳布局的顯示器中的子像素的布局的示意性圖示；
[0038]圖9是示出根據(jù)本發(fā)明的一個(gè)實(shí)施例的用于將從馬賽克布局捕獲的圖像轉(zhuǎn)換為菱形布局的方法的流程圖；以及
[0039]圖10是示出根據(jù)本發(fā)明的一個(gè)實(shí)施例的用于將圖像數(shù)據(jù)轉(zhuǎn)換為RGB條紋布局圖像數(shù)據(jù)的方法的流程圖。

【具體實(shí)施方式】
[0040]下面詳細(xì)描述中，作為例示僅僅示出和描述本發(fā)明的某些示范性實(shí)施例。本領(lǐng)域技術(shù)人員將認(rèn)識(shí)到，本發(fā)明可以實(shí)現(xiàn)為許多不同的形式，并且不應(yīng)被解讀為限于這里闡述的實(shí)施例。說明書全文中，相同的引用數(shù)字表示相同的元件。
[0041]現(xiàn)在回來參照?qǐng)D1，圖像捕獲設(shè)備10包括不同類型(或種類)的光敏元件的陣列，每個(gè)不同類型(或種類)對(duì)光的不同波長(zhǎng)(或不同的光譜范圍)敏感以使得在任何給定采樣位置可以捕獲僅僅一個(gè)顏色強(qiáng)度值。在一些實(shí)施例中，這些不同的光譜范圍重疊，圖2A示出被稱為拜耳排列(美國(guó)專利N0.3971065中對(duì)拜耳進(jìn)行了詳細(xì)描述，其全部?jī)?nèi)容通過引用并入本文)中子像素的可供對(duì)比的排列。如圖2A所示，部分地由于人眼對(duì)光的不同波長(zhǎng)的敏感度的差異，拜耳排列包含兩倍于紅子像素(R)或藍(lán)子像素(B)的綠子像素(G)。因?yàn)椴东@設(shè)備10上的每個(gè)位置只能記錄紅、綠、或藍(lán)光之一，來自每個(gè)子像素的數(shù)據(jù)不足以自己確定顏色。典型地將所記錄的顏色數(shù)據(jù)插值以產(chǎn)生用于圖像平面上的每個(gè)位置的完整顏色信息(例如，紅、綠、和藍(lán)值)。包括用于圖像平面上的每個(gè)位置的完整顏色信息的圖像數(shù)據(jù)在這里被稱為“并置顏色通道(collocated color channel)”。
[0042]圖2B示出根據(jù)本發(fā)明的一個(gè)實(shí)施例的圖像捕獲設(shè)備中的子像素的替代布局。如圖2B所示，子像素210被排列為綠子像素212的行以及紅和藍(lán)子像素214的行。每個(gè)行沿第一方向延伸(例如，圖2B所示的X方向)，并且沿第二方向(例如，圖2B中所示的y方向)彼此隔開。此外，綠行212以及紅和藍(lán)行214的子像素沿第一方向(例如，X方向)彼此偏移以使得綠行212的子像素與紅和藍(lán)行214的子像素沿第二方向(例如，y方向)不對(duì)齊。
[0043]此外，圖2C示出根據(jù)本發(fā)明的一個(gè)實(shí)施例的圖像捕獲設(shè)備中的子像素的另一替代布局。如圖2C所示，子像素210’被以與圖2B中的布局基本類似的方式布置成行，其不同之處在于紅和藍(lán)子像素214每隔一行反轉(zhuǎn)。例如，紅和藍(lán)子像素的第一行214在最左列具有藍(lán)子像素，而紅和藍(lán)子像素的第二行214’在最左列具有紅子像素。如此，紅和藍(lán)子像素的相鄰列222’和224’在紅和藍(lán)子像素之間也是交替，而在圖2B的布局中，紅或藍(lán)子像素的相鄰列是全紅子像素222或全藍(lán)子像素224。
[0044]雖然圖2B和圖2C中將子像素210描繪為圓形并且各自具有相同尺寸，但本發(fā)明的實(shí)施例不限于此。例如，像素的尺寸例如可以根據(jù)所使用的探測(cè)器的光敏感度而變化。此夕卜，光敏感區(qū)域的形狀可以是正方形、矩形，或者可以具有其他形狀。
[0045]用于存儲(chǔ)彩色圖像數(shù)據(jù)的可供對(duì)比的圖像數(shù)據(jù)格式(例如，JPEG、TIFF等)通常采用并置顏色通道。換句話說，可供對(duì)比的圖像數(shù)據(jù)格式典型地存儲(chǔ)數(shù)據(jù)如同對(duì)于圖像中的每個(gè)位置能夠同時(shí)顯示多種顏色(例如，紅，綠和藍(lán))一樣。
[0046]諸如液晶顯示器(LCD)或有機(jī)發(fā)光顯示設(shè)備的可供對(duì)比的顯示設(shè)備通常通過在顯示器的不同部分處同時(shí)地顯示紅、綠、和藍(lán)光來顯示彩色圖像。例如，圖3A示出如下的像素排列，其中每個(gè)像素包括被排列為條紋(或RGB條紋)布局紅的子像素(R)、綠子像素(G)、和藍(lán)子像素(B)，如可以在例如IXD顯示器中使用的。
[0047]最近，已經(jīng)開發(fā)出減少子像素密度但是具有等效有效分辨率的顯示設(shè)備。圖3B示出一種這樣的排列，這里可以稱為菱形布局。在菱形布局中，綠子像素的行312與交替的紅和藍(lán)子像素的行314A和314B交替，其中存在相等數(shù)量的紅和藍(lán)子像素，并且存在兩倍于紅子像素或藍(lán)子像素的數(shù)量的綠像素。
[0048]由于如圖3A和3B所示的可供對(duì)比的圖像捕獲設(shè)備(例如，圖2A所示的拜耳布局圖像捕獲設(shè)備)的布局與顯示設(shè)備的布局之間的不匹配，必須在顯示在顯示設(shè)備上之前將捕獲的圖像數(shù)據(jù)轉(zhuǎn)換為不同的格式。該轉(zhuǎn)換過程通常涉及對(duì)所捕獲的像素的值進(jìn)行插值以產(chǎn)生并置圖像數(shù)據(jù)。然而，在這些不同布局之間的轉(zhuǎn)換可能是計(jì)算密集的，并且由于捕獲設(shè)備、存儲(chǔ)格式、和顯示設(shè)備的布局之間的插值而可能導(dǎo)致信息的損失或圖像質(zhì)量的劣化。
[0049]在可供對(duì)比的系統(tǒng)中，通過具有拜耳布局的圖像捕獲設(shè)備捕獲圖像，通過處理器將所捕獲的拜耳布局圖像插值到并置RGB空間中以便應(yīng)用使用，然后可以轉(zhuǎn)換為其他布局(例如，菱形布局)用于顯示。圖4是示出由處理器20執(zhí)行的用于捕獲圖像、存儲(chǔ)圖像、以及在菱形布局顯示設(shè)備上顯示圖像的方法400的流程圖。
[0050]在操作410中，圖像被捕獲為拜耳布局圖像510，其中，圖像可以每個(gè)采樣具有8比特(例如，每個(gè)采樣位置8比特)。處理器接著對(duì)圖像施加去馬賽克操作420，以獲得具有每采樣位置24比特(例如，對(duì)每個(gè)采樣位置的紅、藍(lán)、和綠各8比特)的并置RGB格式數(shù)據(jù)520。下面將針對(duì)圖5A詳細(xì)描述去馬賽克操作。在操作440中，RGB格式圖像數(shù)據(jù)520將被存儲(chǔ)在存儲(chǔ)設(shè)備30中。RGB格式圖像520也可以在顯示設(shè)備40上顯示。為了在顯示設(shè)備40上顯示，在操作450中將RGB格式圖像數(shù)據(jù)重采樣為與顯示設(shè)備40的布局相匹配的分辨率和布局。例如，如果顯示器40具有菱形布局(例如，參見圖3B)，則根據(jù)菱形布局將RGB格式圖像數(shù)據(jù)重采樣。
[0051]圖5A是示出執(zhí)行用于將所捕獲的拜耳布局圖像510轉(zhuǎn)換為并置RGB圖像數(shù)據(jù)520的去馬賽克操作420的方法的流程圖。更詳細(xì)地，所捕獲的拜耳布局圖像數(shù)據(jù)510包括以格式Cxy在圖5A中表示為“G00，R01, G02,...B1, Gil, B12, G13，...,，，的多個(gè)數(shù)據(jù)值，其中，字母(C)指子像素元素的顏色(從R、G、和B中選擇)，并且值X和y分別指圖像內(nèi)的子像素元素的列和行位置。所捕獲的拜耳布局?jǐn)?shù)據(jù)被轉(zhuǎn)換為RGB圖像數(shù)據(jù)520，包括完整綠(G)平面520G、完整紅(R)平面520R、和完整藍(lán)(B)平面520B。在操作422a和422b中，對(duì)來自所捕獲的拜耳布局?jǐn)?shù)據(jù)510的綠像素以及紅或藍(lán)像素的值進(jìn)行插值，以產(chǎn)生用于完整圖像平面中的沒有相應(yīng)的綠像素的位置的像素?cái)?shù)據(jù)。
[0052]例如，在如圖5A所示的拜耳布局圖像數(shù)據(jù)510中，位置01、03、和05被紅子像素占據(jù)，并且位置10、12、和14被藍(lán)子像素占據(jù)。如此，為了填充完整綠平面520G內(nèi)的這些位置處的綠數(shù)據(jù)的空隙，根據(jù)相鄰的綠和紅像素對(duì)值G01、G03、和G05進(jìn)行插值。例如，完整綠平面520G中的GOl可以根據(jù)拜耳布局圖像數(shù)據(jù)510中的像素G00、R01、和G02進(jìn)行插值，并且完整圖像平面中的G12可以根據(jù)像素Gil、B12、和G13來插值。
[0053]類似地，在操作424a和426a中，處理器20通過根據(jù)相鄰綠和紅像素進(jìn)行插值來計(jì)算用于完整紅平面520R中的不具有相應(yīng)的捕獲的紅數(shù)據(jù)的位置的值，并且在操作424b和426b中，處理器20通過根據(jù)相鄰綠和藍(lán)像素進(jìn)行插值來計(jì)算用于完整藍(lán)平面520B中的不具有相應(yīng)的捕獲的藍(lán)數(shù)據(jù)的位置的值。
[0054]圖5B是示出執(zhí)行重采樣操作450以對(duì)并置RGB數(shù)據(jù)520R、520G、520B (統(tǒng)稱520)來進(jìn)行插值以產(chǎn)生處于菱形布局530的圖像數(shù)據(jù)用于在菱形布局顯示器上顯示數(shù)據(jù)的方法的流程圖。在操作452a中，根據(jù)相鄰紅像素對(duì)紅像素進(jìn)行插值(例如，X24可以是完整紅平面520R的像素R24、R25、R34、和R35的算術(shù)平均值)。同樣地，在操作452b中，根據(jù)相鄰藍(lán)像素對(duì)藍(lán)像素進(jìn)行插值(例如，X23可以是完整藍(lán)平面520B的像素B23、B24、B33、和B34的算術(shù)平均值)。
[0055]然而，如上所述的用于從拜耳布局轉(zhuǎn)換為并置RGB布局以及用于從并置RGB布局轉(zhuǎn)換為菱形布局的去馬賽克過程涉及對(duì)值的大量插值以便在不同布局之間進(jìn)行轉(zhuǎn)換來存儲(chǔ)和顯示圖像，從而增加處理要求并且由于作為去馬賽克過程的結(jié)果引入視覺偽像而導(dǎo)致降低圖像質(zhì)量。如此，以拜耳格式捕獲并且以并置圖像格式存儲(chǔ)的圖像甚至顯示之前就具有降低的質(zhì)量。此外，如上所述，當(dāng)被轉(zhuǎn)換用于在諸如菱形布局顯示器的各種顯示設(shè)備上顯示時(shí)，并置圖像格式的圖像也遭受質(zhì)量的降低。
[0056]根據(jù)本發(fā)明的一個(gè)實(shí)施例，包括圖像捕獲設(shè)備10的系統(tǒng)100被配置為捕獲圖像，并且根據(jù)圖像捕獲設(shè)備的像素的原生布局來存儲(chǔ)所捕獲的圖像。在一些實(shí)施例中，系統(tǒng)進(jìn)一步包括顯示設(shè)備40，其具有與圖像捕獲設(shè)備相對(duì)應(yīng)(例如，相匹配)的子像素布局，并且系統(tǒng)被配置為顯示所捕獲的圖像而不執(zhí)行去馬賽克計(jì)算。這里可以將圖像數(shù)據(jù)的布局稱為“馬賽克布局”或“馬賽克格式”，其中在圖像內(nèi)的每個(gè)位置處(例如，在圖像的二維區(qū)域內(nèi)的每個(gè)位置處)僅允許特定顏色通道的一個(gè)顏色值。如此，以未壓縮的馬賽克格式存儲(chǔ)的圖像可以只占以常規(guī)圖像格式存儲(chǔ)的可供對(duì)比的圖像的未壓縮數(shù)據(jù)尺寸的大約1/3。
[0057]根據(jù)本發(fā)明的一個(gè)實(shí)施例，在其中捕獲布局和顯示布局同步的基本均勻的管道允許視覺內(nèi)容(例如，圖像或視頻)以其原生的、非并置馬賽克格式來存儲(chǔ)，以用于具有減少的或者不具有由于插值(例如，由于轉(zhuǎn)換為并置RGB空間而導(dǎo)致的插值)而導(dǎo)致的質(zhì)量損耗的存儲(chǔ)。通過同步捕獲器、存儲(chǔ)格式、和/或顯示布局，可以在僅使用用于存儲(chǔ)、遞送、和呈現(xiàn)未壓縮的原始視覺數(shù)據(jù)的傳統(tǒng)帶寬中的三分之一(1/3)的同時(shí)提高整體的視覺質(zhì)量。
[0058]本發(fā)明的實(shí)施例還涉及如下的圖像和視頻格式，其對(duì)于捕獲和顯示設(shè)備這兩者是原生的(native)，并且能夠?yàn)槿祟愐曈X系統(tǒng)提供更高的質(zhì)量圖像。通過以“原生”馬賽克格式(或其壓縮變型)來存儲(chǔ)視覺數(shù)據(jù)，本發(fā)明的實(shí)施例可以減少數(shù)據(jù)帶寬，減少由插值導(dǎo)致的數(shù)據(jù)丟失，并且可以減少可能由于多個(gè)中間顏色轉(zhuǎn)換以及原生布局(例如，拜耳)、存儲(chǔ)布局(例如，完全并置RGB)、和顯示布局(例如，菱形)之間的插值而引入的誤差。本發(fā)明的實(shí)施例還可以對(duì)給定的通信帶寬和存儲(chǔ)空間增加視覺質(zhì)量，并且對(duì)圖像捕獲設(shè)備的各種布局以高質(zhì)量提供更低成本的顯示解決方案。
[0059]圖6是根據(jù)本發(fā)明的一個(gè)實(shí)施例的用于將通過具有拜耳布局的圖像傳感器捕獲的圖像轉(zhuǎn)換為用于具有菱形布局的顯示器的數(shù)據(jù)的方法600的圖示。參照?qǐng)D6，可以在操作410中通過具有拜耳布局的圖像捕獲設(shè)備捕獲圖像?？梢栽诓僮?40中在存儲(chǔ)設(shè)備30中以其原生格式(例如，以保留數(shù)據(jù)的原始拜耳布局的數(shù)據(jù)格式)存儲(chǔ)拜耳布局圖像數(shù)據(jù)510。當(dāng)將要在具有菱形布局的顯示設(shè)備上顯示拜耳布局圖像數(shù)據(jù)510時(shí)，可以在操作602中將圖像重映射到菱形布局530。
[0060]圖7是示出根據(jù)本發(fā)明的一個(gè)實(shí)施例的將拜耳布局圖像數(shù)據(jù)510轉(zhuǎn)換為菱形布局圖像數(shù)據(jù)530而不執(zhí)行將數(shù)據(jù)中間去馬賽克、轉(zhuǎn)換、或插值為完全并置的RGB數(shù)據(jù)的方法602的流程圖。換句話說，本發(fā)明的實(shí)施例涉及如下的系統(tǒng)和方法，其用于將顏色信息數(shù)據(jù)從第一布局“重映射”到第二布局而不對(duì)處于第一布局的子像素的顏色信息數(shù)據(jù)進(jìn)行插值(例如，從已知的數(shù)據(jù)點(diǎn)構(gòu)造新的數(shù)據(jù)點(diǎn))以產(chǎn)生用于處于第二布局的子像素的顏色信息數(shù)據(jù)。本發(fā)明的實(shí)施例并不打算排除在保持相同的布局的同時(shí)縮放圖像或調(diào)整圖像尺寸(例如，在菱形布局圖像上的放大)時(shí)對(duì)像素進(jìn)行插值的可能性。如上針對(duì)圖5A所述，在操作422a和422b中，將來自捕獲的拜耳布局?jǐn)?shù)據(jù)510的綠像素以及紅或藍(lán)像素的值插值，以產(chǎn)生用于完整綠圖像平面520G的像素?cái)?shù)據(jù)。
[0061]在操作702a中，根據(jù)原始拜耳布局中的最近位置來映射處于菱形布局顯示布局530 的紅子像素的值(X(2j) (2i) = R(2j) (2?+1)和 X(2j+1) (2i+l) = R(2j) (2i+l))。類似地，在操作702b中，根據(jù)原始拜耳布局中的最近位置來映射藍(lán)子像素(X(2j) (2?-1)=B(2j+1) (2i)和X(2j+1) (2i) = B(2j+1) (2i))。在本發(fā)明的一些實(shí)施例中，如果存在與菱形布局中的相應(yīng)像素的位置等距的原始拜耳布局的多個(gè)子像素，則可以通過對(duì)原始拜耳布局的等距像素的值進(jìn)行平均、或者通過使用等距像素之間的顏色表決(voting)來計(jì)算菱形布局中的像素的值。替換地，在一些實(shí)施例中，總是使用沿特定方向的子像素(例如，等距像素的最左和最上的像素)。如此，根據(jù)本發(fā)明的一個(gè)實(shí)施例，以原生格式存儲(chǔ)在拜耳布局中捕獲的圖像數(shù)據(jù)，并且轉(zhuǎn)換為在菱形布局顯示器上顯示而不進(jìn)行到并置RGB格式的中間轉(zhuǎn)換，從而減少視覺偽像并且降低帶寬和存儲(chǔ)要求，同時(shí)由于插值運(yùn)算數(shù)量減少(例如，只對(duì)綠通道中的位置進(jìn)行插值)而導(dǎo)致保持較高水平的視覺質(zhì)量。
[0062]在本發(fā)明的一個(gè)實(shí)施例中，可以通過匹配圖像捕獲、存儲(chǔ)、和顯示組件的子像素布局來進(jìn)一步改善圖像質(zhì)量。圖8是根據(jù)本發(fā)明的一個(gè)實(shí)施例的具有類拜耳布局的顯示器中的子像素的布局的示意性圖示。顯示設(shè)備40是具有以類似于拜耳圖案(例如，圖2A中所示)的類拜耳布局800排列的子像素(或“濾色器陣列”)的顯示設(shè)備(例如，有機(jī)發(fā)光顯示設(shè)備、液晶顯示設(shè)備、等離子顯示面板、或陰極射線管)。
[0063]如圖8所示，在根據(jù)本發(fā)明的一個(gè)實(shí)施例的顯示設(shè)備中，對(duì)每個(gè)紅子像素802R存在兩個(gè)綠子像素802G，并且對(duì)每個(gè)藍(lán)子像素802B存在兩個(gè)綠子像素802G。雖然這里將本發(fā)明的實(shí)施例描述為包括“紅”、“綠”、和“藍(lán)”子像素，但本發(fā)明的實(shí)施例不限于此，并且可以包括不同類型(或種類)的子像素，每一類型(或種類)被配置為在不同的光譜范圍上發(fā)射光。在一些實(shí)施例中，這些不同的光譜范圍部分地重疊。
[0064]在本發(fā)明的實(shí)施例中，如圖8所示，子像素802沿多個(gè)行和列來排列。沿第一行812，紅子像素802R被排列在相鄰的綠子像素802G之間，并且紅子像素802R位于綠子像素802G附近，在其之間不存在不同顏色的子像素(例如，在其之間沒有藍(lán)子像素)。如此，紅子像素802R和綠子像素802G可以被稱為沿第一行812 “交替排列”。同樣地，沿第二行814，藍(lán)子像素802B被排列在相鄰的綠子像素802G之間，并且藍(lán)子像素802B位于綠子像素802G附近，在其之間不存在不同顏色的子像素(例如，在其之間沒有紅子像素)。如此，藍(lán)子像素802B和綠子像素802G可以被稱為沿第二行814交替排列。
[0065]類似地，沿第一列822，藍(lán)子像素802B被排列在相鄰的綠子像素802G之間，并且藍(lán)子像素802B位于綠子像素802G附近，在其之間不存在不同顏色的子像素(例如，在其之間沒有紅子像素)，并且沿第二列824，紅子像素802R被排列在相鄰的綠子像素802G之間，并且紅子像素802R位于綠子像素802G附近，在其之間不存在不同顏色的子像素(例如，在其之間沒有藍(lán)子像素)。因此，藍(lán)子像素802B和綠子像素802G沿第一列822交替排列，并且紅子像素802R和綠子像素802G沿第二列824交替排列。
[0066]此外，在本發(fā)明的一個(gè)實(shí)施例中，例如，如圖8所示，每個(gè)綠子像素802G具有比紅子像素802R和藍(lán)子像素802B更小的區(qū)域(例如，更小的發(fā)光區(qū)域)以補(bǔ)償每種顏色的子像素的不同數(shù)量。此外，在本發(fā)明的一些實(shí)施例中，紅子像素802R、綠子像素802G、和藍(lán)子像素802B的相對(duì)尺寸可以根據(jù)像素802的發(fā)光效率和操作壽命而變化。例如，在有機(jī)發(fā)光顯示設(shè)備中，紅子像素可以比藍(lán)子像素更小，以減小通過藍(lán)像素的電流密度，從而提提高藍(lán)像素的工作壽命。然而，本發(fā)明的實(shí)施例不限于此，并且不同顏色的子像素的相對(duì)尺寸可以根據(jù)相對(duì)發(fā)光效率、操作壽命、或子像素之間的其他特征的差異而變化。
[0067]如此，回來參照1，根據(jù)本發(fā)明一個(gè)實(shí)施例，通過具有馬賽克布局(例如，拜耳布局)的圖像傳感器10捕獲的圖像以CMOS傳感器的原生馬賽克布局(例如，拜耳布局)存儲(chǔ)在存儲(chǔ)設(shè)備30上，并且可以在具有如圖8中所示的匹配馬賽克布局(例如，拜耳狀布局)的顯示設(shè)備40上直接顯示，而不需要在任何階段處進(jìn)行插值，從而減少或避免由于插值(或去馬賽克)過程而導(dǎo)致的偽像和圖像質(zhì)量的其他劣化，并且在存儲(chǔ)所捕獲的圖像之前和之后進(jìn)一步降低圖像處理要求。
[0068]類似地，根據(jù)本發(fā)明另一實(shí)施例，通過具有菱形狀布局(例如，圖2C所示)的圖像傳感器10而捕獲的圖像可以直接在具有匹配布局(例如，圖3B中所示的菱形布局)的顯示設(shè)備40上顯示。
[0069]圖9是示出根據(jù)本發(fā)明的一個(gè)實(shí)施例的用于將從馬賽克圖像數(shù)據(jù)512重映射為RGB條紋布局圖像數(shù)據(jù)522 (例如，圖3A所示的布局)而不執(zhí)行將數(shù)據(jù)中間轉(zhuǎn)換或插值為完全并置的RGB數(shù)據(jù)的方法900的流程圖。
[0070]例如，如果所捕獲的圖像數(shù)據(jù)具有如圖2C所示的菱形格式，并且如以下的表I所示:
[0071]表I
[0072]R00B01R02B03R04B0V
[0073]G00G01G02G03G04G05."
[0074]---R11B12R13B14R15By
[0075]G10G11G12G13G14G15*..
[0076]R20B21R22B23R24B25-
[0077]G2tlG21G22G23G24G25…
[0078]R31B32R33B34R35B36 …
[0079]并且如果輸出設(shè)備(例如，顯示器或打印機(jī))使用如圖3A所示的RGB條紋布局，如以下的表2所示:
[0080]^2[0081 ]
[0082]r1g1b1rngnbnr^g^b^—
[0083]^20S20^20r2lS01^21T22S22^l22'"
[0084]那么，在操作902中，可以通過選擇最近的相應(yīng)顏色值而將具有菱形馬賽克布局的捕獲的圖像數(shù)據(jù)512直接映射到輸出RGB條紋圖像數(shù)據(jù)522。例如，表3:
[0085]表3
[0086]gn = G11, g12 = G12, g21 = G21, g22 = G22
[0087]rn = R11, r12 = R22, r21 = R31, r22 = R22
[0088]bn = B12, b12 = B23, b21 = B32, b22 = B23
[0089]概括而言，根據(jù)一個(gè)實(shí)施例，如下從所捕獲的菱形布局?jǐn)?shù)據(jù)中重映射RGB條紋布局的顏色值gij、rij、和bij:
[0090]g^.= Gij

Γ Rjj if i = j mod 2
[0091]U JO
J [Rmj Iti 氣/mod2
, f Bi /+1 if /= /mod2
[0092]bn=< -.[5;+1/+1 if/^.7 mod 2
[0093]如上所示，在重映射的過程期間，不執(zhí)行顏色值的插值(例如，輸出條紋布局圖像中的紅像素r的值不是通過平均或以其他方式組合輸入菱形布局圖像中的多于一個(gè)紅像素R的值來計(jì)算的，而是輸入圖像中的一個(gè)像素的實(shí)際顏色值)。
[0094]圖10是示出根據(jù)本發(fā)明的一個(gè)實(shí)施例的重映射操作902的流程圖。重映射操作902可以包括:在操作904中，將菱形布局的綠子像素的位置與RGB條紋圖像布局對(duì)準(zhǔn)(或者將來自源菱形布局圖像中的綠像素的顏色值重映射到具有RGB條紋布局的輸出圖像中的相應(yīng)位置)，然后在操作906和908中，通過映射所捕獲的菱形布局圖像的最近的相應(yīng)的紅和藍(lán)子像素的顏色值來填充RGB條紋圖像布局的紅和藍(lán)子像素的值。如果所捕獲的菱形布局圖像的多個(gè)子像素與輸出RGB條紋布局圖像等距，則可以使用顏色表決、顏色平均、或者根據(jù)方向的決勝?zèng)Q定(tie breaking)來提供具有RGB條紋圖像布局的輸出中的子像素的值。本發(fā)明的實(shí)施例不限于這里示出的操作的特定順序。例如，不同顏色的子像素的顏色值的映射可以同時(shí)發(fā)生，或者可以交錯(cuò)。
[0095]如此，本發(fā)明的一個(gè)實(shí)施例提供用于將以菱形馬賽克布局512捕獲的圖像數(shù)據(jù)轉(zhuǎn)換為RGB條紋布局?jǐn)?shù)據(jù)而無需中間轉(zhuǎn)換為完全并置RGB數(shù)據(jù)的系統(tǒng)和方法。
[0096]雖然以上針對(duì)具有拜耳布局的圖像捕獲設(shè)備和圖像數(shù)據(jù)存儲(chǔ)格式來描述本發(fā)明的實(shí)施例，但是本發(fā)明的實(shí)施例不限于此。
[0097]例如，根據(jù)本發(fā)明的另一實(shí)施例，用于捕獲、存儲(chǔ)、和顯示圖像的系統(tǒng)包括具有以根據(jù)如圖2B的類菱形布局排列的子像素的圖像傳感器10，其中第一行子像素僅包括綠子像素，并且相鄰行的子像素包括以交替圖案排列的藍(lán)和紅子像素?？梢灾貜?fù)第一行全部為綠像素并且第二行為交替的藍(lán)和紅像素的該圖案以覆蓋圖像傳感器10的區(qū)域，如圖2B所
/Jn ο
[0098]系統(tǒng)可以被配置為以與圖2C中所示的類菱形布局對(duì)應(yīng)的馬賽克數(shù)據(jù)格式存儲(chǔ)圖像。當(dāng)在具有菱形布局的顯示設(shè)備上顯示以類菱形圖像格式存儲(chǔ)的圖像時(shí)，在顯示之前不需要轉(zhuǎn)換圖像數(shù)據(jù)，從而改善圖像質(zhì)量。
[0099]雖然在單個(gè)設(shè)備的組件(例如，數(shù)字相機(jī)或具有集成攝像頭的智能電話機(jī))的背景下描述本發(fā)明的實(shí)施例，但本發(fā)明的實(shí)施例不限于此。例如，本發(fā)明的實(shí)施例還可以包括諸如處理單元的計(jì)算機(jī)系統(tǒng)，其包括處理器、存儲(chǔ)裝置、以及用于接收?qǐng)D像數(shù)據(jù)(例如，從外部相機(jī)或網(wǎng)絡(luò)連接接收)以及用于與耦合到計(jì)算機(jī)系統(tǒng)的顯示設(shè)備進(jìn)行通信的輸入/輸出接口。
[0100]雖然以上針對(duì)在一對(duì)一像素(或“1:1像素映射”)的基礎(chǔ)上顯示所捕獲的圖像數(shù)據(jù)來描述本發(fā)明的實(shí)施例，但是本發(fā)明的實(shí)施例也允許縮放圖像數(shù)據(jù)以匹配顯示器分辨率而沒有由于顯示布局之間的轉(zhuǎn)換而導(dǎo)致的質(zhì)量損失。
[0101]此外，處理器20可以以各種方式實(shí)現(xiàn)而不背離本發(fā)明的精神和范圍。在一些實(shí)施例中，處理器20可以是通用中央處理單元(例如，基于ARM或X86架構(gòu)的處理器)，其耦合到存儲(chǔ)將在處理器20上被執(zhí)行以執(zhí)行給定功能的指令的存儲(chǔ)器。在其他實(shí)施例中，處理器是現(xiàn)場(chǎng)可編程門陣列(FPGA)，其被編程來執(zhí)行給定操作。在其他實(shí)施例中，處理器是專用集成電路(ASIC)，其被專門設(shè)計(jì)來執(zhí)行根據(jù)本發(fā)明的實(shí)施例的操作，其中，邏輯操作在ASIC的物理結(jié)構(gòu)中實(shí)施。
[0102]雖然已經(jīng)結(jié)合特定示范性實(shí)施例描述本發(fā)明，但是應(yīng)當(dāng)理解，本發(fā)明不限于所公開的實(shí)施例，而是相反，其意在覆蓋被包括在所附權(quán)利要求及其等同物的精神和范圍內(nèi)的各種修改和等效配置。
【權(quán)利要求】
1.一種系統(tǒng)，包括: 圖像捕獲設(shè)備，被配置為捕獲來自相機(jī)系統(tǒng)的圖像數(shù)據(jù)，所述圖像數(shù)據(jù)處于第一馬賽克布局; 圖像顯示設(shè)備，被配置為顯示處于第二馬賽克布局的圖像數(shù)據(jù)；以及處理器，被配置為接收處于第一馬賽克布局的圖像數(shù)據(jù)，并且向圖像顯示設(shè)備提供處于第二馬賽克布局的圖像數(shù)據(jù)而不進(jìn)行到完全并置的圖像布局的中間轉(zhuǎn)換。
2.如權(quán)利要求1所述的系統(tǒng)，其中第一馬賽克布局是拜耳布局并且第二馬賽克布局是菱形布局。
3.如權(quán)利要求2所述的系統(tǒng)，其中該處理器被配置為接收處于拜耳布局的圖像數(shù)據(jù)，并且通過以下步驟向圖像顯示設(shè)備提供處于菱形布局的圖像數(shù)據(jù): 從處于拜耳布局的圖像數(shù)據(jù)的相鄰綠像素產(chǎn)生處于菱形布局的圖像數(shù)據(jù)的完整綠平面； 通過識(shí)別處于拜耳布局的圖像數(shù)據(jù)中的最近的紅像素來產(chǎn)生處于菱形布局的圖像數(shù)據(jù)的紅像素；以及 通過識(shí)別處于拜耳布局的圖像數(shù)據(jù)中的最近的藍(lán)像素來產(chǎn)生處于菱形布局的圖像數(shù)據(jù)的藍(lán)像素。
4.如權(quán)利要求1所述的系統(tǒng)，其中第一馬賽克布局是菱形布局，并且其中第二馬賽克布局是菱形布局。
5.如權(quán)利要求4所述的系統(tǒng)，該處理器被配置為接收處于菱形布局的圖像數(shù)據(jù)，并且通過向圖像顯示設(shè)備直接提供處于菱形布局的圖像數(shù)據(jù)而不進(jìn)行插值來向圖像顯示設(shè)備提供處于菱形布局的圖像數(shù)據(jù)。
6.如權(quán)利要求1所述的系統(tǒng)，進(jìn)一步包括存儲(chǔ)設(shè)備，其中該處理器被配置為在該存儲(chǔ)設(shè)備上存儲(chǔ)處于第一馬賽克布局的圖像數(shù)據(jù)。
7.如權(quán)利要求6所述的系統(tǒng)，其中該處理器進(jìn)一步被配置為加載以第一馬賽克布局存儲(chǔ)在該存儲(chǔ)設(shè)備上的圖像數(shù)據(jù)，并且將所加載的處于第一馬賽克布局的圖像數(shù)據(jù)轉(zhuǎn)換為處于第二馬賽克布局的圖像數(shù)據(jù)而不進(jìn)行到完全并置的布局的轉(zhuǎn)換。
8.如權(quán)利要求1所述的系統(tǒng)，其中在一對(duì)一像素的基礎(chǔ)上在該圖像顯示設(shè)備上顯示從相機(jī)系統(tǒng)捕獲的圖像數(shù)據(jù)。
9.一種系統(tǒng)包括: 存儲(chǔ)設(shè)備，被配置為存儲(chǔ)圖像數(shù)據(jù)，所述圖像數(shù)據(jù)具有第一馬賽克布局； 圖像顯示設(shè)備，被配置為顯示處于第二馬賽克布局的圖像數(shù)據(jù)；以及處理器，被配置為接收處于第一馬賽克布局的圖像數(shù)據(jù)，并且向圖像顯示設(shè)備提供處于第二馬賽克布局的圖像數(shù)據(jù)而不進(jìn)行到完全并置的圖像布局的中間轉(zhuǎn)換。
10.如權(quán)利要求9所述的系統(tǒng)，其中第一馬賽克布局是拜耳布局，并且其中第二馬賽克布局是菱形布局。
11.如權(quán)利要求10所述的系統(tǒng)，其中該處理器被配置為接收處于拜耳布局的圖像數(shù)據(jù)，并且通過以下步驟來提供處于菱形布局的圖像數(shù)據(jù): 從處于拜耳布局的圖像數(shù)據(jù)的相鄰綠像素產(chǎn)生處于菱形布局的圖像數(shù)據(jù)的完整綠平面； 通過識(shí)別處于拜耳布局的圖像數(shù)據(jù)中的最近的紅像素來產(chǎn)生處于菱形布局的圖像數(shù)據(jù)的紅像素；以及 通過識(shí)別處于拜耳布局的圖像數(shù)據(jù)中的最近的藍(lán)像素來產(chǎn)生處于菱形布局的圖像數(shù)據(jù)的藍(lán)像素。
12.如權(quán)利要求9所述的系統(tǒng),其中第一馬賽克布局是菱形布局,并且其中第二馬賽克布局是菱形布局。
13.如權(quán)利要求12所述的系統(tǒng)，其中該處理器被配置為通過向圖像顯示設(shè)備直接提供處于菱形布局的圖像數(shù)據(jù)而不進(jìn)行插值來向圖像顯示設(shè)備提供處于菱形布局的圖像數(shù)據(jù)。
14.如權(quán)利要求9所述的系統(tǒng)，其中在一對(duì)一像素的基礎(chǔ)上在該圖像顯示設(shè)備上顯示圖像數(shù)據(jù)。
15.—種方法包括: 將處于第一馬賽克布局的第一圖像數(shù)據(jù)的第一多個(gè)顏色通道的第一顏色通道映射到第二多個(gè)顏色通道的第一顏色通道以產(chǎn)生處于第二馬賽克布局的第二圖像數(shù)據(jù)而不進(jìn)行插值；以及 將第一多個(gè)顏色通道的第二顏色通道映射到第二多個(gè)顏色通道的第二顏色通道而不進(jìn)行插值。
16.如權(quán)利要求15所述的方法，進(jìn)一步包括: 對(duì)第一多個(gè)顏色通道的第三顏色通道的圖像數(shù)據(jù)進(jìn)行插值以產(chǎn)生第二多個(gè)顏色通道的第三顏色通道。
17.如權(quán)利要求16所述的方法，其中第一馬賽克布局是拜耳布局并且第二馬賽克布局是菱形布局， 其中第一顏色通道是紅通道， 其中第二顏色通道是藍(lán)通道， 其中第三顏色通道是綠通道， 其中將第一顏色通道的紅色通道映射到第二顏色通道的紅色通道包括:通過識(shí)別處于拜耳布局的圖像數(shù)據(jù)的最近的紅像素來產(chǎn)生處于菱形布局的圖像數(shù)據(jù)的紅像素， 其中將第一顏色通道的藍(lán)色通道映射到第二顏色通道的藍(lán)色通道包括:通過識(shí)別處于拜耳布局的圖像數(shù)據(jù)的最近的藍(lán)像素來產(chǎn)生處于菱形布局的圖像數(shù)據(jù)的藍(lán)像素，并且 其中對(duì)第一多個(gè)顏色通道的綠色通道的圖像數(shù)據(jù)進(jìn)行插值以產(chǎn)生第二多個(gè)顏色通道的綠色通道包括:從處于拜耳布局的圖像數(shù)據(jù)的顏色通道的綠色通道的相鄰綠像素產(chǎn)生處于菱形布局的圖像數(shù)據(jù)的完整綠平面。
18.一種圖像捕獲設(shè)備，包括: 多個(gè)第一子像素，其對(duì)第一光譜范圍內(nèi)的光敏感，所述多個(gè)第一子像素被排列為多個(gè)第一行，所述多個(gè)第一行的每個(gè)子像素對(duì)第一光譜范圍內(nèi)的光敏感，所述多個(gè)第一行沿第一方向延伸； 多個(gè)第二子像素，其對(duì)第二光譜范圍內(nèi)的光敏感；以及 多個(gè)第三子像素，其對(duì)第三光譜范圍內(nèi)的光敏感，所述多個(gè)第二子像素和第三子像素被排列為多個(gè)第二行，所述多個(gè)第二行的每個(gè)子像素對(duì)第二光譜范圍或第三光譜范圍內(nèi)的光敏感， 其中第一光譜范圍、第二光譜范圍、和第三光譜范圍彼此不同， 其中所述多個(gè)第一行沿與第一方向不同的第二方向與所述多個(gè)第二行隔開，并且 其中所述多個(gè)第一行沿第一方向與所述多個(gè)第二行偏移。
19.一種圖像顯示設(shè)備，其包括沿多個(gè)行和列排列的多個(gè)子像素，所述多個(gè)行包括: 子像素的第一行，所述第一行的每個(gè)子像素是被配置為發(fā)射第一光譜范圍內(nèi)的光的第一類型、或被配置為發(fā)射第二光譜范圍內(nèi)的光的第二類型，第一類型和第二類型的子像素沿所述第一行交替地排列；以及 子像素的第二行，所述第二行的每個(gè)子像素是第一類型、或被配置為發(fā)射第三光譜范圍內(nèi)的光的第三類型，第一類型和第三類型的子像素沿所述第二行交替地排列， 其中第一光譜范圍、第二光譜范圍、和第三光譜范圍彼此不同。
【文檔編號(hào)】H04N5/232GK104284167SQ201410322780
【公開日】2015年1月14日 申請(qǐng)日期:2014年7月8日 優(yōu)先權(quán)日:2013年7月8日
【發(fā)明者】魯寧 申請(qǐng)人:三星顯示有限公司