專利名稱：圖像處理裝置及使用該圖像處理裝置的電子設備的制作方法
技術領域：
本發(fā)明涉及一種如下的圖像處理裝置，S卩，通過對在使曝光量發(fā)生變化的同時所拍攝到的多張圖像進行合成，從而生成過度曝光或曝光不足較少的、具有寬大的動態(tài)范圍的圖像的圖像處理裝置。而且，本發(fā)明涉及對使用這種圖像處理裝置而生成的圖像進行記錄的行駛記錄儀或攝像機等電子設備等。
背景技術：
例如，由于行駛記錄儀被用于，在發(fā)生了汽車事故時，對哪輛汽車的駕駛員存在過失等進行證明的用途，因此需要記錄清晰的圖像。但是，在通過行駛記錄儀而在白天對隧道的出口附近進行拍攝的情況下，如果曝光量較小，則隧道外的明亮的被拍攝物體將被清晰地拍攝，但隧道中的較暗的被拍攝物體將以亮度不足的方式而被拍攝(曝光不足)。另一方面，如果曝光量較大，則隧道中的較暗的被拍攝物體將被清晰地拍攝，但隧道外的明亮的被拍攝物體將以亮度飽和的方式而被拍攝(過度曝光)。因此，考慮到在行駛記錄儀中，使用高動態(tài)范圍(也被稱為HDR:high dynamicrange、或者寬動態(tài)范圍(WDR:wide dynamic range))合成。高動態(tài)范圍合成是指如下的方法，即，通過在使曝光量變化的同時對多張圖像進行拍攝，并對這些圖像進行合成，從而生成過度曝光或曝光不足較少的、具有寬大的動態(tài)范圍的圖像(HDR圖像)的方法(例如，參照專利文獻I及專利文獻2)。根據高動態(tài)范圍合成，從而能夠在汽車行駛于隧道的出口附近的情況或逆光的情況下，獲得過度曝光或曝光不足較少的圖像。在現(xiàn)有技術中，通過將圖像數(shù)據臨時存儲于幀存儲器中，并在HDR圖像處理電路中對從幀存儲器中被讀取出的圖像數(shù)據進行合成，從而生成HDR圖像，其中，所述圖像數(shù)據表示通過利用攝像元件而使曝光時間變化的同時進行拍攝從而獲得的多張圖像。因此，存儲于幀存儲器中的圖像數(shù)據的量、以及、在HDR圖像處理電路與幀存儲器之間被傳送的圖像數(shù)據的傳送頻帶(位傳輸速率 )，對應于曝光時間不同的圖像的張數(shù)而變大。作為關聯(lián)技術，在專利文獻3中公開了一種如下的物理信息獲取方法，該物理信息獲取方法能夠在具有動態(tài)范圍擴大處理功能的攝像裝置中，實現(xiàn)與通常時同等的幀速率和低消耗電力。該物理信息獲取方法在固體攝像元件中的、由在整個攝像范圍內于垂直列方向上連續(xù)的多個行(水平列)構成的區(qū)域內，將垂直列方向分割成多個(例如三個)區(qū)域，并將其中的一部分區(qū)域(例如區(qū)域B)作為有助于動態(tài)范圍擴大處理的有效區(qū)域而處理，并使用該區(qū)域B而在曝光時間不同的條件下，以與從整體的檢測區(qū)域中獲取處理對象信號時的處理速度相同的處理速度，獲得多個圖像信號。但是，根據專利文獻3，僅從固體攝像元件中的一部分檢測區(qū)域中獲取圖像信號。根據這種情況，為了實現(xiàn)HDR圖像的進一步的動態(tài)范圍擴大、高分辨率化、或者高幀率化，而使在HDR圖像處理電路與幀存儲器之間被傳送的圖像數(shù)據的量或位傳輸速率達到瓶頸的可能性較大。如果為了解決這個問題，而增大幀存儲器的存儲容量、或者增高傳送時鐘信號的頻率、或者擴大幀存儲器的總線的寬度，則會導致成本的增加等，由此難以實現(xiàn)上述改善項目。此外，在欲將HDR圖像處理電路與后序系統(tǒng)一起組裝進系統(tǒng)級芯片(SOC)中的情況下，當對HDR合成用的幀存儲器和后序系統(tǒng)的存儲器一體化時，也將產生關于存儲器容量或內部總線頻帶的課題或制約。專利文獻1:日本特開2009-213032號公報(第0006-0012段落)專利文獻2:日本特開2007-329896號公報(第0004-0009段落)專利文獻3:日本特開2006-14117號公報(摘要)

發(fā)明內容
根據本發(fā)明的幾個觀點，在實施HDR合成的圖像處理裝置中，能夠削減在存儲器與HDR圖像處理電路之間被傳送的圖像數(shù)據的量，并降低圖像數(shù)據的位傳輸速率，其中，所述存儲器對表示在使曝光量變化的同時所拍攝到的多張圖像的圖像數(shù)據進行存儲。本發(fā)明的一個觀點所涉及的圖像處理裝置具備:圖像數(shù)據獲取部，其獲取多個種類的圖像數(shù)據，多個種類的圖像數(shù)據分別表示以不同的曝光量來拍攝拍攝對象而生成的多個彩色圖像；壓縮電路，其在以按照多個顏色成分中的每一個的方式，而對通過圖像數(shù)據獲取部而獲取的至少一個種類的圖像數(shù)據中、被包含于多個行中的像素的配置重新排列之后，再對該圖像數(shù)據進行壓縮；存儲器，其對包含通過圖像數(shù)據獲取部而獲取、且通過壓縮電路而被壓縮的至少一個種類的圖像數(shù)據在內的多個種類的圖像數(shù)據，以針對各個種類的圖像數(shù)據而至少存儲與一幀相對應的量的方式進行存儲；展開電路，其對在從存儲器中所讀取的多個種類的圖像數(shù)據內、被實施了壓縮的圖像數(shù)據進行展開，并對所展開的圖像數(shù)據中、被包含于多個行中的像素的配置進行復原；插補電路，其通過使用周圍像素的數(shù)據值，來對包含至少一個種類的圖像數(shù)據在內的多個種類的圖像數(shù)據中的各個像素實施插補運算，從而輸出針對于各個像素而包含多個顏色成分的圖像數(shù)據，所述至少一個種類的圖像數(shù)據為，從存儲器中被讀取出、且通過展開電路而被展開及復原的圖像數(shù)據；動態(tài)范圍擴張電路，其通過對由插補電路輸出 的多個種類的圖像數(shù)據進行合成，從而生成表示動態(tài)范圍被擴張了的一個彩色圖像的合成圖像數(shù)據。在此，也可以采用如下方式，S卩，通過圖像數(shù)據獲取部而獲取的圖像數(shù)據中的第奇數(shù)個行包含表示第一顏色成分的像素、和表示第二顏色成分的像素，該圖像數(shù)據中的第偶數(shù)個行包含表示第二顏色成分的像素、和表示第三顏色成分的像素，壓縮電路將至少一個種類的圖像數(shù)據中、鄰接的多個行中所包含的像素的配置重新排列為，表示第一顏色成分的像素的列、表示第二顏色成分的像素的列、和表示第三顏色成分的像素的列。尤其是，也可以采用如下方式，S卩，壓縮電路將至少一個種類的圖像數(shù)據中、鄰接的兩個行中所包含的像素的配置重新排列為，表示第一顏色成分的像素的一個列、表示第二顏色成分的像素的兩個列、和表示第三顏色成分的像素的一個列。在上文中，也可以采用如下方式，即，壓縮電路根據表示濾色器的信息的設定信號，而以按照多個顏色成分中的每一個的方式，將至少一個種類的圖像數(shù)據中、被包含于多個行中的像素的配置重新排列，所述濾色器在生成由通過圖像數(shù)據獲取部而獲取的圖像數(shù)據所表示的圖像時被使用。本發(fā)明的一個觀點所涉及的電子設備具備:攝像部，其通過以不同的曝光量來對拍攝對象進行拍攝，從而生成多個種類的圖像數(shù)據，所述多個種類的圖像數(shù)據分別表示以不同的曝光量來拍攝拍攝對象而生成的多個彩色圖像；本發(fā)明的任意一個觀點所涉及的圖像處理裝置，其被供給通過攝像部而生成的多個種類的圖像數(shù)據。根據本發(fā)明的一個觀點，通過在以按照多個顏色成分中的每一個的方式，而將由圖像數(shù)據獲取部獲取的至少一個種類的圖像數(shù)據中、被包含于多個行中的像素的配置重新排列之后，再對該圖像數(shù)據進行壓縮，并將被實施了壓縮的圖像數(shù)據存儲于存儲器中，從而能夠削減在HDR圖像處理電路與存儲器之間被傳送的圖像數(shù)據的量，并降低圖像數(shù)據的位傳輸速率。


圖1為表示使用了第一實施方式所涉及的圖像處理裝置的電子設備的框圖。圖2為用于對二維圖像傳感器的動作進行說明的圖。圖3為表示圖1所示的攝像部中的濾色器的配置示例的圖。圖4為表示圖1所示的壓縮電路及展開電路的結構示例的框圖。圖5為用于對像素的配置的重新排列的第一示例進行說明的圖。圖6為用于對像素的配置的重新排列的第二示例進行說明的圖。圖7為表示圖1所示的動態(tài)范圍擴張電路的結構示例的框圖。圖8為表示在曝光時間不同的圖像中構成橙色的顏色成分的圖。圖9為用于對圖像合成處理的第一示例進行說明的圖。
`
圖10為表示合成圖像數(shù)據中的原來的圖像數(shù)據的混合比例的示例的圖。圖11為表示由行駛記錄儀拍攝到的圖像的示例的圖。圖12為表示使用了第二實施方式所涉及的圖像處理裝置的電子設備的框圖。
具體實施例方式以下，參照附圖，對本發(fā)明的實施方式進行詳細說明。另外，對相同的結構要素標記相同的參照符號，并省略重復的說明。圖1為表示使用了本發(fā)明的第一實施方式所涉及的圖像處理裝置的電子設備的結構示例的框圖。根據本發(fā)明的第一實施方式，能夠實現(xiàn)對通過圖像處理裝置而生成的HDR圖像進行記錄的行駛記錄儀或攝像機等電子設備。如圖1所示，該電子設備包括攝像部10、HDR圖像處理電路20、幀存儲器30和動態(tài)圖像處理電路40。在此，至少HDR圖像處理電路20和幀存儲器30構成了圖像處理裝置。此外，HDR圖像處理電路20、幀存儲器30和動態(tài)圖像處理電路40既可以通過一個半導體集成電路(IC)而構成，也可以分別通過單獨的半導體集成電路而構成。攝像部10包括使用了 CO) (Charge Coupled Device:電荷稱合裝置)等攝像元件的二維圖像傳感器，并以不同的曝光量而對拍攝對象(被拍攝物體)進行拍攝。由此，攝像部10生成多個種類的圖像數(shù)據，所述多個種類的圖像數(shù)據分別表示以不同的曝光量來拍攝拍攝對象而生成的多個彩色圖像。在下文中，對如下情況進行說明，S卩，通過在二維圖像傳感器中使用(XD，并以不同的曝光時間Tl、T2、T3來對拍攝對象進行拍攝，從而生成圖像數(shù)據A、B、C的情況。由圖像數(shù)據A表示的圖像的曝光時間Tl、由圖像數(shù)據B表示的圖像的曝光時間T2、和由圖像數(shù)據C表示的圖像的曝光時間Τ3滿足Tl <Τ2<Τ3的關系，例如，設定為Tl: Τ2: Τ3 = 2:
3: 6。在此，將獲得中間的曝光量的曝光時間Τ2設定為標準曝光時間，將以標準曝光時間拍攝到的拍攝對象的圖像設定為標準圖像。另外，在通過以四種以上的曝光量對拍攝對象進行拍攝從而獲得四個以上的圖像的情況下，只需從以最小的曝光量而拍攝到的圖像、及以最大的曝光量而拍攝到的圖像以外的圖像中，選擇一個圖像作為標準圖像即可。圖2為用于對二維圖像傳感器以不同的曝光時間對拍攝對象進行拍攝的動作進行說明的圖。在包含CCDlOla在內的二維圖像傳感器101的曝光區(qū)域內，為了讀取積存于CXDlOla中的電荷而設置有三個讀取行L1、L2、L3。CXDlOla在圖中所示的掃描方向上被反復掃描，從而積存于CCDlOla中的電荷被讀取。從讀取行LI L3讀取出的電荷經由未圖示的AFE (Analog Front End:模擬前端)而被輸入至A/D轉換部中，并被轉換為圖像數(shù)據。讀取行LI為，為了讀取最少的被積蓄于CCD中的電荷而被使用的讀取行。根據從讀取行LI讀取出的電荷，而生成表示曝光時間最短的圖像的圖像數(shù)據A。此外，根據從讀取行L2讀取出的電荷，而生成表示基于標準曝光時間的標準圖像的圖像數(shù)據(標準圖像數(shù)據)B。另外，從讀取行LI及L2的讀取均為不伴隨有重置的非破壞讀取。讀取行L3為，為了讀取最多的被積蓄于CXD中的電荷、且對CXD進行重置而被使用的讀取行。伴隨有重置的讀取也被稱為破壞讀取。根據從讀取行L3讀取出的電荷，而生成表示曝光時間最長的圖像的圖像數(shù)據C。

在一次拍攝中，分別獨立地執(zhí)行從讀取行LI的非破壞讀取、從讀取行L2的非破壞讀取、和從讀取行L3的破壞讀取。這種讀取時刻的控制通過電子快門功能而被實現(xiàn)。但是，本發(fā)明并不限定于這種結構，也可以采用對攝像部的光闌進行控制從而改變曝光量的方式。但是，為了使用二維圖像傳感器來實施彩色拍攝，而需要通過濾色器來將光分解為三原色。一般情況下，通過將濾色器設定為拜耳(Bayer)型像素配置，從而實現(xiàn)了對總像素數(shù)的削減，其中，所述濾色器被配置在二維圖像傳感器中所包含的多個攝像元件(像素)中。圖1所示的攝像部10的濾色器也按照拜耳型像素配置而被配置。S卩，二維圖像傳感器的第奇數(shù)個行中交替地包括:接受使第一顏色成分透過的濾色器的透射光的元件、和接受使第二顏色成分透過的濾色器的透射光的元件。此外，二維圖像傳感器的第偶數(shù)個行中交替地包括:接受使第二顏色成分透過的濾色器的透射光的元件、和接受使第三顏色成分透過的濾色器的透射光的元件。圖3為表示圖1所示的攝像部中的濾色器的配置示例的圖。在該示例中，將第一顏色成分設定為藍色(B)，將第二顏色成分設定為綠色(G)，并將第三顏色成分設定為紅色(R)。在該情況下，對于二維圖像傳感器的總像素數(shù)N而言，綠色(G)的分辨率為N/2，藍色
(B)或紅色(R)的分辨率為N/4。在此，將綠色(G)的像素設置為藍色(B)或紅色(R)的像素的兩倍的原因在于，人眼的光譜靈敏度以綠色附近為峰值，并且提高綠色的分辨率會使外觀上的分辨率得到提高。由此，在通過圖1所示的攝像部10而生成的圖像數(shù)據中，第奇數(shù)個行中交替地包含表示第一顏色成分的像素、和表示第二顏色成分的像素。此外，第偶數(shù)個行中交替地包含表示第二顏色成分的像素、和表示第三顏色成分的像素。如此，通過攝像部10而生成的圖像數(shù)據針對于各個像素而包含單一的顏色成分。該圖像數(shù)據作為RAW數(shù)據(原始數(shù)據)，而以行為單位被供給至HDR圖像處理電路20。HDR圖像處理電路20通過將由攝像部10供給的多個種類的圖像數(shù)據臨時存儲于幀存儲器30中，并對從幀存儲器30中讀取出的多個種類的圖像數(shù)據進行合成，從而生成合成圖像數(shù)據(HDR圖像數(shù)據)，所述合成圖像數(shù)據表示動態(tài)范圍被擴張了的一個彩色圖像。如圖1所示，HDR圖像處理電路20包括圖像數(shù)據獲取部21、壓縮電路22、幀存儲器控制電路23、展開電路24、插補電路25、和動態(tài)范圍擴張電路26。圖像數(shù)據獲取部21從攝像部10獲取多個種類的圖像數(shù)據，所述多個種類的圖像數(shù)據分別表示以不同的曝光量來拍攝拍攝對象而生成的多個彩色圖像。例如，假設根據從攝像部10輸出的10位的RAW數(shù)據(曝光時間T1、T2、T3)，而生成每秒30幀的HDR圖像。在二維圖像傳感器為VGA尺寸(水平640像素、垂直480像素)時，為了同時實施對圖像數(shù)據的寫入及讀取，而需要640X480X10X3X30X2 + 8 =大約69Μ字節(jié)/秒的傳輸速率。實際上，由于還獲取未被利用于HDR圖像的生成的圖像數(shù)據、作為曝光前的初始值的與一幀相對應的量的圖像數(shù)據，因此傳輸速率有時會達到大約100Μ字節(jié)/秒。在二維圖像傳感 器為全高清尺寸(水平1920像素、垂直1080像素)時，通過簡單計算，需要大約467Μ字節(jié)/秒的傳輸速率，而根據實現(xiàn)方法，則需要大約630Μ字節(jié)/秒的傳輸速率。該大約467Μ字節(jié)/秒 大約630Μ字節(jié)/秒的傳輸速率為，幾乎用盡一般的32位總線寬度的SDR (單數(shù)據速率)-SDRAM、或16位總線寬度的DDR (雙倍數(shù)據速率)-SDRAM的理想的有效頻帶、或者超過該理想的有效頻帶的傳輸速率。此外，數(shù)據容量也達到大約16Μ字節(jié) 大約21Μ字節(jié)。因此，在本實施方式中，設置有壓縮電路22，在將通過圖像數(shù)據獲取部21而獲取的多個種類的圖像數(shù)據存儲于幀存儲器30中之前，所述壓縮電路22對至少一個種類的圖像數(shù)據進行壓縮。由于圖像數(shù)據以行為單位而從攝像部10被供給至圖像數(shù)據獲取部21，因此，作為壓縮電路22中的壓縮方式，適用以一行或兩行為單位而結束的算法。其原因在于，為了以JPEG (Joint Photographic Experts Group:聯(lián)合圖像專家組)的方式對二維狀(8X8像素)的圖像數(shù)據進行壓縮，而需要用于對幾行量的圖像數(shù)據進行保持的緩沖存儲器。此外，由于攝像部10的濾色器被設定為拜耳型像素配置，因此，相鄰的像素的RAW數(shù)據是基于透過了不同顏色的濾色器的光的光量的，從而鄰接的像素中的數(shù)據值的連續(xù)性較為缺乏。因此，對于對各個像素實施插補運算之前的RAW數(shù)據而言，不適用利用了鄰接的像素中的數(shù)據值的連續(xù)性的、一般的圖像壓縮算法。因此，壓縮電路22在以按照多個顏色成分中的每一個的方式，而將通過圖像數(shù)據獲取部21而獲取的多個種類的圖像數(shù)據內的至少一個種類的圖像數(shù)據中、被包含于多個行中的像素的配置進行重新排列之后，再對該圖像數(shù)據進行壓縮并將其存儲于幀存儲器30中。與此相對應，展開電路24對在從幀存儲器30中被讀取出的多個種類的圖像數(shù)據內、被實施了壓縮了圖像數(shù)據進行展開，并對被展開的圖像數(shù)據中、包含于多個行中的像素的配置進行復原。
圖4為表示圖1所示的壓縮電路及展開電路的結構示例的框圖。如圖4所示,壓縮電路22包括重新排列電路220、和行壓縮電路221 223。重新排列電路220將至少一個種類的圖像數(shù)據中、鄰接的多個行中所包含的像素的配置重新排列為，表示第一顏色成分的像素的列、表示第二顏色成分的像素的列、和表示第三顏色成分的像素的列。例如，重新排列電路220通過根據表示濾色器的信息的設定信號，而將至少一個種類的圖像數(shù)據中、鄰接的兩個行中所包含的像素的配置重新排列為，表示綠色(G)的像素的列、表示藍色(B)的像素的列、和表示紅色(R)的像素的列，從而輸出G數(shù)據、B數(shù)據和R數(shù)據，其中，所述濾色器在生成通過圖像數(shù)據獲取部21而獲取的RAW數(shù)據時被使用。行壓縮電路221 223以行為單位而分別對從重新排列電路220輸出的G數(shù)據、B數(shù)據、R數(shù)據進行壓縮。幀存儲器控制電路23將幀存儲器30 (圖1)控制為，對包含通過壓縮電路22而被壓縮的至少一個種類的圖像數(shù)據在內的多個種類的圖像數(shù)據，以針對于各個種類的圖像數(shù)據而至少存儲與一幀相對應的量的方式進行存儲。另外，對于未壓縮的圖像數(shù)據，壓縮電路22直接輸出通過圖像數(shù)據獲取部21而獲取的圖像數(shù)據。例如，壓縮電路22對圖像數(shù)據A、B、C進行壓縮，所述圖像數(shù)據A、B、C分別表示以曝光時間T1、T2、T3來拍攝拍攝對象而生成的三個彩色圖像。幀存儲器30將被實施了壓縮的圖像數(shù)據A、B、C分別存儲于各自的存儲區(qū)域30A、30B、30C中。另一方面，例如在未對標準圖像數(shù)據B實施壓縮的情況下，幀存儲器30將被實施了壓縮的圖像數(shù)據A及C存儲于各自的存儲區(qū)域30A及30C中，并將未被壓縮的圖像數(shù)據B存儲于存儲區(qū)域30B中。此外，幀存儲器控制電路23從幀存儲器30中讀取多個種類的圖像數(shù)據并向展開電路24供給。展開電路24對在從幀存儲器30中讀取出的多個種類的圖像數(shù)據內、被實施了壓縮的圖像數(shù)據進行展開。而且，展開電路24通過對被實施了展開的圖像數(shù)據中、被包含于多個行中的像素的配置進行復原，從而輸出與RAW數(shù)據相同或與RAW數(shù)據大致相等的復原數(shù)據。另外，對于未被壓縮 的圖像數(shù)據，展開電路24直接輸出從幀存儲器30中讀取的圖像數(shù)據。如圖4所示，展開電路24包括復原電路240、行展開電路241 243。行展開電路241 243以行為單位而分別對由幀存儲器控制電路23輸出的G數(shù)據、B數(shù)據、R數(shù)據進行展開。復原電路240對通過行展開電路241 243而被實施了展開的G數(shù)據、B數(shù)據、R數(shù)據中、被包含于多個行中的像素的配置進行復原。例如，復原電路240根據表示濾色器的信息的設定信號，而對被包含于多個行中的像素的配置進行復原，其中，所述濾色器在生成通過圖像數(shù)據獲取部21而獲取的RAW數(shù)據時被使用。圖5為，用于對圖像數(shù)據中被包含于多個行中的像素的配置的重新排列的、第一示例進行說明的圖。圖5 (a)圖示了 RAW數(shù)據中被包含于第奇數(shù)個行及第偶數(shù)個行中的像素的配置，圖5 (b)圖示了重新排列后的圖像數(shù)據中的像素的配置。如圖5 (a)所示，在RAW數(shù)據中，第奇數(shù)個行中交替地包含表示藍色(B)的像素B0、B1、B2、…、Bn，和表示綠色(G)的像素G1、G3、G5、...、G (2n + I)。此外，第偶數(shù)個行中交替地包含表示綠色(G)的像素GO、G2、G4、...、G (2n)，和表示紅色(R)的像素R0、Rl、R2、…、Rn ο通過對RAW數(shù)據中被包含于第奇數(shù)個行及第偶數(shù)個行中的像素的配置進行重新排列，從而獲得了如圖5 (b)所示的像素的配置。在重新排列后的圖像數(shù)據中，第一行包含表示綠色(G)的像素GO、Gl、G2、…、G(2n)、G (2n + 1)，第二行包含表示藍色(B)的像素B0、B1、B2、…、Bn，第三行包含表示紅色(R)的像素RO、Rl、R2、...、Rn。如此，在第一示例中，行數(shù)從兩行增加到三行，并且第一行中所包含的表示綠色(G)的像素數(shù)成為,第二行或第三行中所包含的表示藍色(B)或紅色(R)的像素數(shù)的兩倍。圖6為，用于對圖像數(shù)據中被包含于多個行中的像素的配置的重新排列的、第二示例進行說明的圖。圖6 (a)圖示了 RAW數(shù)據中被包含于第奇數(shù)個行及第偶數(shù)個行中的像素的配置，圖6 (b)圖示了重新排列后的圖像數(shù)據中的像素的配置。如圖6 (a)所示，在RAW數(shù)據中，第奇數(shù)個行中交替地包含表示藍色(B)的像素B0、B1、B2、…、Bn，和表示綠色(G)的像素G1、G3、G5、...、G (2n + I)。此外，第偶數(shù)個行中交替地包含表示綠色(G)的像素GO、G2、G4、...、G (2n)，和表示紅色(R)的像素R0、Rl、R2、…、Rn ο通過對RAW數(shù)據中被包含于第奇數(shù)個行及第偶數(shù)個行中的像素的配置進行重新排列，從而獲得了如圖6(b)所示的像素的配置。在被包含于第奇數(shù)個行中的像素的配置的重新排列中，第一行包含表示綠色(G)的像素G1、G3、G5、…、G (2n + 1)，第二行包含表示藍色(B)的像素B0、B1、B2、…、Bn。此外，在被包含于第偶數(shù)個行中的像素的配置的重新排列中，第三行包含表示綠色(G)的像素GO、G2、G4、…、G (2n)，第四行包含表示紅色(R)的像素R0、R1、R2、…、Rn。如此，在第二示例中，行數(shù)從兩行增加到四行，并且被包含于各行中的像素數(shù)變得相等。如在以上所說明的那樣，通過在以按照濾色器的每種顏色的方式而對像素進行重新排列之后，再對圖像數(shù)據進行壓縮，從而能夠確保鄰接的像素中的數(shù)據值的連續(xù)性，其中，所述濾色器在生成圖像時被使用。因此，能夠實現(xiàn)更高效率的數(shù)據壓縮，以及/或者降低壓縮及展開對畫質的影響。此外，通過對幀存儲器控制電路23與幀存儲器30之間的傳送頻帶(位傳輸速率)進行控制，從而能夠抑制成本的增大等，且實現(xiàn)HDR圖像的進一步的動態(tài)范圍擴大、高分辨率化、或高幀率化。在圖4所示的行壓縮電路221 223對圖像數(shù)據的壓縮中，能夠利用在一行或兩行內連續(xù)的多個像素的數(shù)據值的連續(xù)性。例如，作為行壓縮電路221 223中的圖像數(shù)據的壓縮方式，能夠使用日本特開2007-181051號公報中所記載的圖像編碼裝置及方法。在下文中，對其內容進行簡單說明。該圖像編碼裝置包括:有損編碼部，其在有損模式下，以成為規(guī)定壓縮率的定長碼，來表現(xiàn)編碼對象像素的像素數(shù)據并對編碼對象像素的像素數(shù)據進行編碼；無損編碼部，其在無損模式下，在編碼對象像素的像素數(shù)據的壓縮率成為高于規(guī)定壓縮率的壓縮率時，使相對于定長碼的冗余碼冗余，并對編碼對象像素的像素數(shù)據進行編碼，而在編碼對象像素的像素數(shù)據的壓縮率成為低于規(guī)定壓縮率的壓縮率時，消耗被追加于定長碼中的冗余碼，并對編碼對象像素的像素數(shù)據進行編碼；冗余碼計數(shù)器，其在通過無損編碼部而實施編碼時，對冗余碼進行累加，并對被消耗的冗余碼進行倒數(shù)計數(shù)；編碼控制部，其在冗余碼計數(shù)器的計數(shù)值不會 成為表示低于規(guī)定壓縮率的低壓縮率的值的范圍內，使無損編碼部的編碼動作持續(xù)進行。根據該圖像編碼裝置，通過在冗余碼計數(shù)器的計數(shù)值不會成為表示低于規(guī)定壓縮率的低壓縮率的值的范圍內，使無損編碼部的編碼動作持續(xù)進行，從而無損模式下的編碼常時成為規(guī)定壓縮率以上的高壓縮率。此外，由于在有損模式下常時以規(guī)定壓縮率來實施編碼，因此保證了無損模式及有損模式下的總壓縮率也成為規(guī)定壓縮率以上的高壓縮率。而且，由于使無損模式優(yōu)先，因此與使有損模式優(yōu)先的情況相比，能夠提高壓縮率，而且提高了數(shù)據的再現(xiàn)性，其中，在所述有損模式下，以與規(guī)定壓縮率相等的壓縮率進行編碼。再次參照圖1，插補電路25通過使用周圍像素的數(shù)據值，來對包含至少一個種類的圖像數(shù)據在內的多個種類的圖像數(shù)據中的各個像素實施插補運算，從而輸出針對于各個像素而包含紅色(R)、綠色(G)、藍色(B)的成分的、多個種類的RGB圖像數(shù)據，其中，所述至少一個種類的圖像數(shù)據從幀存儲器30中被讀取、且通過展開電路24而被展開及復原。在此，多個種類的RGB圖像數(shù)據按照時間序列而包含圖像數(shù)據A、標準圖像數(shù)據B和圖像數(shù)據C，其中，所述圖像數(shù)據A表示以最短的曝光時間Tl所拍攝到的圖像，所述標準圖像數(shù)據B表示以標準曝光時間T2所拍攝到的標準圖像，所述圖像數(shù)據C表示以最長的曝光時間T3所拍攝到的圖像。動態(tài)范圍擴張電路26對由插補電路25輸出的多個種類的RGB圖像數(shù)據進行合成，從而生成表示動態(tài)范圍被擴張了的一個彩色圖像的HDR圖像數(shù)據。圖7為表示圖1所示的動態(tài)范圍擴張電路的結構示例的框圖。動態(tài)范圍擴張電路26包括:圖像切換部261、歸一化部262、圖像可靠性評價部263、圖像合成部264、和色調映射處理部265。

圖像切換部261對由插補電路25依次供給的圖像數(shù)據A、B、C進行分離，并向歸一化部262及圖像可靠性評價部263供給。歸一化部262對圖像數(shù)據A、B、C進行歸一化。與此同時，圖像可靠性評價部263對圖像數(shù)據A、B、C的可靠性進行評價，并向圖像合成部264供給可靠性的評價結果。圖像合成部264根據由圖像可靠性評價部263供給的可靠性的評價結果，通過對被歸一化部262歸一化的圖像數(shù)據A、B、C進行高動態(tài)范圍合成,從而生成表示動態(tài)范圍被擴張了的圖像的合成圖像數(shù)據D。色調映射處理部265實施使合成圖像數(shù)據D的位數(shù)與由圖像數(shù)據獲取部21獲取的RAW數(shù)據的位數(shù)(例如，對于綠色(G)成分、藍色(B)成分、紅色(R)成分的各個成分而言，為8位)相一致的色調映射處理，其中，所述合成圖像數(shù)據D為，由圖像合成部264輸出的、表示動態(tài)范圍被擴張了的圖像的數(shù)據。接下來，對圖7所示的動態(tài)范圍擴張電路的動作示例進行說明。首先，對在圖7所示的歸一化部262中實施的歸一化處理的示例進行說明。在以下的式中，“x、y”表示像素的座標，“R”表示R成分。將被輸入至歸一化部262的、歸一化前的圖像數(shù)據A、B、C的R成分的數(shù)據值分別設定為A_T1 (x、y、R)、B_T2 (x、y、R)、C_T3 (x、
1、R)。此外，將被歸一化部262歸一化的圖像數(shù)據A、B、C的數(shù)據值分別設定為A_NT3 (x、y、R)、B_NT3 (x、y、R)、C_NT3 (x、y、R)。歸一化中的兩者的關系由下式表示。A_NT3 (x、y、R)=A_Tl (x、y、R) X (T3/T1)B_NT3 (x、y、R) = B_T2 (x、y、R) X (T3/T2)C_NT3 (x、y、R) = C_T3 (x、y、R)雖然這些式是關于圖像數(shù)據的R成分的，但是，對于G成分及B成分，這些式也同樣成立。
接下來，對由圖7所示的圖像可靠性評價部263實施的、對圖像數(shù)據的可靠性評價的第一示例進行說明。圖8圖示了，通過以不同的曝光時間對同一拍攝對象進行拍攝而獲得的圖像中，構成橙色的R、G、B成分的數(shù)據值。在圖8中，橫軸區(qū)分出了 R、G、B成分，縱軸表示各個成分的數(shù)據值。此外，圖8 (A)圖示了圖像數(shù)據A的數(shù)據值，所述圖像數(shù)據A表示以最短的曝光時間Tl所拍攝到的圖像，圖8 (B)圖示了圖像數(shù)據B的數(shù)據值，所述圖像數(shù)據B表示以標準曝光時間T2所拍攝到的圖像，圖8 (C)圖示了圖像數(shù)據C的數(shù)據值，所述圖像數(shù)據C表示以最長的曝光時間T3所拍攝到的圖像。圖像可靠性評價部263通過根據數(shù)據值來對圖像數(shù)據的可靠性進行評價，從而求出作為表示可靠性的評價結果的值的可靠度。在本實施方式中，由于數(shù)據值越大，S/N比變得越高，因此對更大的數(shù)據值賦予更高的可靠度。然而，在數(shù)據值過大并達到最大值255(飽和)的情況下，無法獲得原來的圖像的準確的數(shù)據值。因此，對與最大值255相比稍低的數(shù)據值(例如，224)賦予可靠度的最高值。這種可靠度的賦予通過將數(shù)據值代入預先設定的公式中，或者，基于數(shù)據值而參照LUT (Look Up Table:查閱表)，從而被實現(xiàn)。以下，例示了用于在圖像數(shù)據A_T1 U、1、R)的數(shù)據值超過了 224的情況下，對可靠度E_T1 (x、y、R)進行計算的公式。if A_T1 (x、y、R) > 224then E_T1 (x、y、R) = (255 — A_T1 (x、y、R))/31else E_T1 (x、y、R)=A_Tl (x、y、R))/224雖然這些公式是關于圖像數(shù)據的R成分的，但是，對于G成分及B成分，這些公式也同樣成立。上式中的數(shù)字“31”為數(shù)據值的最大值255與可靠度成為最高值的數(shù)據值224之差。通過數(shù)據值的最大值255與圖像數(shù)據A_T1 (x、y、R)的數(shù)據值之差除以數(shù)據值的最大值255與數(shù)據值224之差，從而能夠在圖像數(shù)據A_T1 (x、y、R)的數(shù)據值接近飽和時，使可靠度降低。 圖像可靠性評價部263執(zhí)行以上所敘述的可靠性的評價，并向圖像合成部264輸出所計算出的可靠度。另外，計算可靠度的公式并不限定于如上所述的形式，只要是考慮到輸出特性和噪聲特性而成為數(shù)據值的可靠性的指標的公式，則可以為任何一種形式的公式。此外，可靠性的評價并不限定于使用可靠度，也可以采用輸出對具有最高可靠性的圖像數(shù)據進行指定的信號的方式。當根據上式而對圖8 (A) (C)所示的數(shù)據值進行評價時，關于R成分，圖8 (A)所示的圖像數(shù)據A的R成分Rl與圖8 (B)所示的圖像數(shù)據B的R成分R2、和圖8 (C)所示的圖像數(shù)據C的R成分R3相比，獲得較高的可靠度。此外，關于G成分，圖8 (B)所示的圖像數(shù)據B的G成分G2與圖8 (A)所示的圖像數(shù)據A的G成分G1、和圖8 (C)所示的圖像數(shù)據C的G成分G3相比，獲得較高的可靠度。而且，關于B成分，圖8 (C)所示的圖像數(shù)據C的B成分B3與圖8 (A)所示的圖像數(shù)據A的B成分B1、和圖8 (B)所示的圖像數(shù)據B的B成分B2相比，獲得較高的可靠度。接下來，對由圖7所示的圖像合成部264實施的圖像合成處理的第一示例進行說明。圖像合成部264針對R、G、B成分的各個成分，選擇圖像數(shù)據A、B、C內可靠度最高的圖像數(shù)據。而且，通過對所選擇的圖像數(shù)據的R、G、B成分進行合成，從而生成表示橙色的合成圖像數(shù)據D。圖9為用于對圖像合成處理的第一示例進行說明的圖。圖9 (A)、圖9 (B)、圖9(C)分別圖示了通過圖1所示的歸一化部262而被歸一化的圖像數(shù)據A、B、C的各個顏色成分的數(shù)據值，圖9 (D)圖示了由圖7所示的圖像合成部264合成的合成圖像數(shù)據D的各個顏色成分的數(shù)據值。圖像合成部264通過對圖9 (A)所示的圖像數(shù)據A的R成分R1、圖9 (B)所示的圖像數(shù)據B的G成分G2和圖9 (C)所示的圖像數(shù)據C的B成分B3進行選擇并合成，從而生成圖9 (D)所示的合成圖像數(shù)據D。由于該合成圖像數(shù)據D是基于圖8 (A)所示的數(shù)據值未飽和的短時間曝光的R成分R1、圖8 (B)所示的數(shù)據值較為適當?shù)臉藴势毓獾腉成分G2、和圖8(C)所示的數(shù)據值被改善了的長時間曝光的B成分B3而生成的，因此，與圖8(B)所示的標準曝光的圖像數(shù)據B相比較，動態(tài)范圍被擴張了。但是，在圖9 (D)所示的合成圖像數(shù)據D中，由于歸一化，從而使數(shù)據值的最大值超過了 255。因此，圖7所示的色調映射處理部265實施色調映射處理，所述色調映射處理使從圖像合成部264輸出的合成圖像數(shù)據D的位數(shù)，與由圖像數(shù)據獲取部21獲取的RAW數(shù)據的位數(shù)(例如，對于R、G、B成分的各個成分而言，為8位)相一致。該色調映射處理例如通過使合成圖像數(shù)據D的各個顏色成分的數(shù)據值乘以(T1/T3)而被實施。接下來，對圖像數(shù)據的可靠性評價及圖像合成處理的第二示例進行說明。在第二示例中，圖像合成部264通過對曝光量不同的多個圖像數(shù)據A、B、C中的同一顏色成分進行混合，從而生成合成圖像數(shù)據D。為此，圖像可靠性評價部263計算出多個圖像數(shù)據A、B、C中的各個顏色成分的混合比例(加權系數(shù))以作為可靠性評價結果，并供給至圖像合成部264。圖像合成部264根據所供給的混合比例，而對多個圖像數(shù)據A、B、C中的同一顏色成分進行混合。這種混合的結果為，圖像數(shù)據A的R成分R1、圖像數(shù)據B的R成分R2和圖像數(shù)據C的R成分R3被混合，從而生成合成圖像數(shù)據D的R成分。同樣地，圖像數(shù)據A的G成分G1、圖像數(shù)據B的G成分G2和圖像數(shù)據C的G成分G3被混合，從而生成合成圖像數(shù)據D的G成分。此外，圖像數(shù)據A的B成分B1、圖像數(shù)據B的B成分B2和圖像數(shù)據C的B成分B3被混合，從而生成合成圖像數(shù)據D的B成分。通過所混合的R、G、B成分，從而構成了合成圖像數(shù)據D。圖像可靠性評價部263也可以以下述方式來對多個圖像數(shù)據A、B、C中的各個顏色成分的加權系數(shù)進行確定。在此，加權系數(shù)表示圖像數(shù)據A、B、C的混合比例，并且設定為，加權系數(shù)越大，混合比例越大。圖像數(shù)據A的R成分的加權系數(shù)W_T1 (X、γ、R)、圖像數(shù)據B的R成分的加權系數(shù)W_T2 U、y、R)、圖像數(shù)據C的R成分的加權系數(shù)W_T3 (x、y、R)，例如根據可靠度而通過下式被計算出。ff_Tl (x、y、R) = E_Tl (x、y、R)/Esumff_T2 (x、y、R) = E_T2 (x、y、R)/Esumff_T3 (x、y、R) = E_T3 (x、y、R)/Esum其中，Esum= E_T1 (x、y、R) + E_T2 (x、y、R) + E_T3 (x、y、R)。雖然這些公式為與圖像數(shù)據的R成分相關的公式，但對于G成分及B成分，這些公式也同樣成立。由圖像可靠性評 價部263計算出的加權系數(shù)被供給至圖像合成部264。圖像合成部264將這些加權系數(shù)與圖像數(shù)據A、B、C中的各自的顏色成分相乘,并針對于每個顏色成分而將乘算后的數(shù)據值相加,從而生成合成圖像數(shù)據D。D (x、y、R)=W_Tl (x、y、R) XA_NT3 (x、y、R)+ W_T2 (x、y、R) XB_NT3 (x、y、R)+ W_T3 (x、y、R) XC_NT3 (x、y、R)雖然該式為關于圖像數(shù)據的R成分的公式，但對于G成分及B成分，該式也同樣成立。圖10為表示合成圖像數(shù)據中的原來的圖像數(shù)據的混合比例的示例的圖。在該示例中，雖然合成圖像數(shù)據D的R、G、B成分分別包含了全部圖像數(shù)據A、B、C的R、G、B成分，但也可以通過將可靠性最低的圖像數(shù)據的顏色成分的加權系數(shù)設定為零，從而排除可靠性最低的圖像數(shù)據的顏色成分。根據上文敘述的動態(tài)范圍擴張?zhí)幚?，從而能夠以按照圖像數(shù)據的顏色成分中的每一個的方式，對以不同的曝光量來拍攝拍攝對象而生成的多個圖像數(shù)據的可靠性進行評價。此外，能夠根據所評價的可靠性，而從這些圖像數(shù)據的顏色成分中采用可靠性較高的顏色成分，并對所采用的顏色成分進行合成，從而生成合成圖像數(shù)據。圖11為表示通過應用了本發(fā)明的行駛記錄儀而被拍攝到的圖像的示例的圖。圖11中圖示了以三個階段來改變曝光時間并對隧道的出口附近進行拍攝而獲得的圖像、及對這些圖像進行合成而獲得的合成圖像。圖11 (A)圖示了短時間曝光的 圖像。在短時間曝光的情況下，雖然清晰地拍攝了隧道外的被拍攝物體，但隧道內的被拍攝物體由于曝光不足而變得不清晰。另一方面，圖11
(C)圖示了長時間曝光的圖像。在長時間曝光的情況下，雖然清晰地拍攝了隧道內的被拍攝物體，但隧道外的被拍攝物體由于過度曝光而變得不清晰。此外，圖11 (B)圖示了標準曝光的圖像。在標準曝光的情況下，在隧道中的一部分處產生曝光不足，并在隧道外的一部分處產生過度曝光。圖11 (D)圖示了對圖11 (A) (C)所示的圖像進行合成而獲得的合成圖像。通過從圖11 (A) (C)所示的圖像中切割出亮度適當?shù)膮^(qū)域(像素)的圖像，從而能夠獲得不存在曝光不足和過度曝光的一張(幀)圖像。再次參照圖1,動態(tài)圖像處理電路40通過按照MPEG (Moving Picture ExpertsGroup:動態(tài)圖像專家組)等的動態(tài)圖像壓縮方式，而對由HDR圖像處理電路20生成的HDR圖像數(shù)據進行壓縮，從而生成應當保存的圖像數(shù)據。此外，動態(tài)圖像處理電路40將應當保存的圖像數(shù)據記錄在SD卡或硬盤等記錄介質中。SD卡為屬于閃存的、可攜帶運輸?shù)挠涗浗橘|。或者，未圖示的圖像數(shù)據保存部也可以通過經由網絡而向其他的終端發(fā)送應當保存的圖像數(shù)據，從而由其他的終端對圖像數(shù)據進行記錄。接下來，對本發(fā)明的第二實施方式進行說明。圖12為表示使用了本發(fā)明的第二實施方式所涉及的圖像處理裝置的電子設備的結構示例的框圖。在第二實施方式中，圖1所示的第一實施方式中的HDR圖像處理電路20及動態(tài)圖像處理電路40與主CPU50 —起被組裝進系統(tǒng)級芯片中，并構成了圖像處理電路60。此外，使用主存儲器70及主存儲器控制電路23a，以代替幀存儲器30及幀存儲器控制電路23。關于其他方面,與第一實施方式相同。
主CPU50對在動態(tài)范圍擴張電路26實施動態(tài)范圍擴張動作時所使用的各種參數(shù)進行設定，或者對動態(tài)圖像處理電路40的動態(tài)圖像壓縮動作進行控制，或者實施對為了存儲應當保存的圖像數(shù)據而使用的文件系統(tǒng)的管理。主存儲器70包括:存儲區(qū)域7(^、7( 、70(:，其分別存儲從壓縮電路22輸出的圖像數(shù)據A、B、C ;臨時存儲區(qū)域70D，其在動態(tài)圖像處理電路40實施動態(tài)圖像壓縮動作時被使用；用于主CPU50的工作區(qū)域70E。主存儲器控制電路23a通過內部總線I而與壓縮電路22及展開電路24相連接。主存儲器控制電路23a將主存儲器70控制為，對從壓縮電路22輸出的多個種類的圖像數(shù)據A、B、C，以針對于各個種類的圖像數(shù)據而至少存儲與一幀相對應的量的方式進行存儲，并且，主存儲器控制電路23a從主存儲器70中讀取圖像數(shù)據A、B、C并供給至展開電路24。此外，主存儲器控制電路23a通過內部總線2而與動態(tài)圖像處理電路40及主CPU50相連接。主存儲器控制電路23a將主存儲器70控制為，對從動態(tài)圖像處理電路40輸出的圖像數(shù)據進行存儲，并且，主存儲器控制電路23a從主存儲器70中讀取圖像數(shù)據并供給至動態(tài)圖像處理電路40。而且，主存儲器控制電路23a將主存儲器70控制為，對從主CPU50輸出的參數(shù)等進行存儲，并且，主存儲器控制電路23a從主存儲器70中讀取參數(shù)等并供給至主CPU50。如在本實施方式中這樣，即使在使動態(tài)范圍擴張動作用的幀存儲器與后續(xù)系統(tǒng)的存儲器一體化的情況下，也能夠通過利用壓縮電路22來削減圖像數(shù)據的量，從而降低對其他功能的影響，并解決關于存儲器容量或內部總線頻帶的課題或制約。雖然在以上的實施方式中，對在攝像部10的濾色器中，將第一顏色成分設定為藍色(B)、將第二顏色成分設定為綠色(G)、將第三顏色成分設定為紅色(R)的情況進行了說明，但本發(fā)明也能夠應用于除此之外的情況中。例如，也可以將第一顏色成分設定為亮度信號(Y)，將第二顏色成分及第三顏色成分設定為色差信號(Cr、Cb)。此外，對于攝像部10的濾色器中的像素配置，也可以使各個顏色的位置或順序不同，或者在第奇數(shù)個行和第偶數(shù)個行中，使像素的水平方向位置不同。符號說明1、2…內部總線、10…攝像部、101…二維圖像傳感器、101a...CCD、20…HDR圖像處理裝置、21...圖像數(shù)據獲取部、22…壓縮電路、220…重新排列電路、221 223…行壓縮電路、23...巾貞存儲器控制電路、23a…主存儲器控制電路、24...展開電路、240…復原電路、241 243...行展開電路、25...插補電路、26...動態(tài)范圍擴張電路、261…圖像切換部、262…歸一化部、263…圖像可靠性評價部、264…圖像合成部、265…色調映射處理部、30...幀存儲器、40...動態(tài)圖像處理電路、50.. .主CPU、60…圖像處理電路、70...主存儲器。
權利要求
1.一種圖像處理裝置，具備: 圖像數(shù)據獲取部，其獲取多個種類的圖像數(shù)據，所述多個種類的圖像數(shù)據分別表示以不同的曝光量來拍攝拍攝對象而生成的多個彩色圖像； 壓縮電路，其在以按照多個顏色成分中的每一個的方式，而對通過所述圖像數(shù)據獲取部而獲取的至少一個種類的圖像數(shù)據中、被包含于多個行中的像素的配置進行重新排列之后，再對該圖像數(shù)據進行壓縮； 存儲器，其對包含通過所述圖像數(shù)據獲取部而獲取、且通過所述壓縮電路而被壓縮的至少一個種類的圖像數(shù)據在內的多個種類的圖像數(shù)據，以針對于各個種類的圖像數(shù)據而至少存儲與一幀相對應的量的方式進行存儲； 展開電路，其對從所述存儲器中所讀取出的多個種類的圖像數(shù)據內、被實施了壓縮的圖像數(shù)據進行展開，并對所展開的圖像數(shù)據中、被包含于多個行中的像素的配置進行復原； 插補電路，其通過使用周圍像素的數(shù)據值，來對包含至少一個種類的圖像數(shù)據在內的多個種類的圖像數(shù)據中的各個像素實施插補運算，從而輸出針對于各個像素而包含多個顏色成分的圖像數(shù)據，所述至少一個種類的圖像數(shù)據為，從所述存儲器中被讀取出、且通過所述展開電路而被展開及復原的圖像數(shù)據； 動態(tài)范圍擴張電路，其通過對由所述插補電路輸出的多個種類的圖像數(shù)據進行合成，從而生成表示動態(tài)范圍被擴張了的一個彩色圖像的合成圖像數(shù)據。
2.如權利要求1所述的圖像處理裝置，其中， 通過所述圖像數(shù)據獲取部而獲取的圖像數(shù)據中的第奇數(shù)個行包含表示第一顏色成分的像素、和表示第二顏色成分的像素，該圖像數(shù)據中的第偶數(shù)個行包含表示第二顏色成分的像素、和表示第三顏色 成分的像素， 所述壓縮電路將至少一個種類的圖像數(shù)據中、鄰接的多個行中所包含的像素的配置重新排列為，表示第一顏色成分的像素的列、表示第二顏色成分的像素的列、和表示第三顏色成分的像素的列。
3.如權利要求2所述的圖像處理裝置，其中， 所述壓縮電路將至少一個種類的圖像數(shù)據中、鄰接的兩個行中所包含的像素的配置重新排列為，表示第一顏色成分的像素的一個列、表示第二顏色成分的像素的兩個列、和表示第三顏色成分的像素的一個列。
4.如權利要求1至3中任一項所述的圖像處理裝置，其中， 所述壓縮電路根據表示濾色器的信息的設定信號，而以按照多個顏色成分中的每一個的方式，將至少一個種類的圖像數(shù)據中、被包含于多個行中的像素的配置重新排列，所述濾色器在生成由通過所述圖像數(shù)據獲取部而獲取的圖像數(shù)據所表示的圖像時被使用。
5.—種電子設備,具備: 攝像部，其通過以不同的曝光量來對拍攝對象進行拍攝，從而生成多個種類的圖像數(shù)據，所述多個種類的圖像數(shù)據分別表示以不同的曝光量來拍攝拍攝對象而生成的多個彩色圖像； 權利要求1至4中任一項所述的圖像處理裝置，其被供給通過所述攝像部而生成的多個種類的圖像數(shù)據。
全文摘要
本發(fā)明提供一種圖像處理裝置及使用該圖像處理裝置的電子設備。在實施HDR合成的圖像處理裝置中，降低在存儲器與HDR圖像處理電路之間被傳送的圖像數(shù)據的量，所述存儲器對表示曝光量不同的多張圖像的、多個種類的圖像數(shù)據進行存儲。該圖像處理裝置的特征在于，具備壓縮電路，其在以按照多個顏色成分中的每一個的方式，而將圖像數(shù)據中的、被包含于多個行中的像素的配置重新排列之后，再實施對圖像數(shù)據的壓縮；存儲器，其對該被實施了壓縮的圖像數(shù)據進行存儲；展開電路，其對被實施了壓縮的圖像數(shù)據進行展開，并對像素的配置進行復原。
文檔編號H04N9/04GK103248901SQ201310042769
公開日2013年8月14日 申請日期2013年1月31日 優(yōu)先權日2012年2月3日
發(fā)明者蓮達弘, 石川真己, 小林雅暢 申請人:精工愛普生株式會社