成像設(shè)備、控制該成像設(shè)備的方法和計(jì)算機(jī)程序的制作方法
【專利摘要】公開了成像設(shè)備以及控制該成像設(shè)備的方法和程序。該成像設(shè)備包括:成像單元,其利用彼此不同的成像器件分別產(chǎn)生被攝體的特定方向被設(shè)置在縱向方向上的第一捕捉圖像、垂直于該特定方向的垂直方向被設(shè)置在縱向方向上并且包括與第一捕捉圖像中所包括的被攝體的垂直方向的一側(cè)相鄰的被攝體的第二捕捉圖像、以及垂直方向被設(shè)置在縱向方向上并且包括與第一捕捉圖像中所包括的被攝體的垂直方向的另一側(cè)相鄰的被攝體的第三捕捉圖像;檢測單元,其檢測成像設(shè)備的狀態(tài);以及控制單元,其基于所檢測的狀態(tài),確定在第一到第三捕捉圖像之中的作為顯示或記錄的目標(biāo)的目標(biāo)圖像的范圍。
【專利說明】成像設(shè)備、控制該成像設(shè)備的方法和計(jì)算機(jī)程序
[0001]本申請是申請日為2010年8月16日,申請?zhí)枮?01010256083.2,發(fā)明名稱為“成像設(shè)備、控制該成像設(shè)備的方法和計(jì)算機(jī)程序”的發(fā)明專利申請的分案申請。
【技術(shù)領(lǐng)域】
[0002]本發(fā)明涉及成像設(shè)備,更具體地涉及包括多個(gè)成像系統(tǒng)的成像設(shè)備、控制該成像設(shè)備的方法及用于使得計(jì)算機(jī)執(zhí)行該方法的計(jì)算機(jī)程序。
【背景技術(shù)】
[0003]近年來,包括對諸如人之類的被攝體(subject)成像的成像系統(tǒng)并被配置為將該成像系統(tǒng)所產(chǎn)生的圖像(捕捉的圖像)記錄為圖像文件的諸如數(shù)字靜止相機(jī)或數(shù)字?jǐn)z像機(jī)(例如與相機(jī)集成的記錄器)之類的成像設(shè)備廣泛流傳。
[0004]提出了一種成像設(shè)備,其包括多個(gè)成像系統(tǒng),并能夠通過組合由成像系統(tǒng)產(chǎn)生的各圖像而產(chǎn)生全景圖像(panorama image)。例如,提出了一種成像設(shè)備,其包括三個(gè)成像系統(tǒng),并被配置為通過排列和組合從各成像系統(tǒng)輸出的圖像而產(chǎn)生全景圖像(例如參見JP-A-2007-166317 (圖 6))。
【發(fā)明內(nèi)容】
[0005]根據(jù)現(xiàn)有技術(shù),能夠容易地拍攝全景圖像。因此,例如,即使在旅行期間在觀光地(sightseeing spot)中將點(diǎn)綴有(dot with)在背景中的著名建筑的多個(gè)人作為構(gòu)圖(composition)拍攝的狀態(tài)時(shí),也能夠容易地拍攝包括人的全景圖像。例如,假設(shè)是期望拍攝帶有如下構(gòu)圖的圖像的用戶:該構(gòu)圖在全景圖像中所包括的被攝體當(dāng)中,包括位于中心附近的人和出現(xiàn)在該人的背景中的高的建筑。在此情況下,能夠通過例如將成像設(shè)備繞著光軸旋轉(zhuǎn)90度使得獲得在垂直方向上長的圖像來執(zhí)行帶有期望構(gòu)圖的拍攝。
[0006]假設(shè)拍攝了全景圖像和在垂直方向上長的圖像。在此情況下,能夠通過例如在拍攝了全景圖像后將成像設(shè)備旋轉(zhuǎn)90度來拍攝在垂直方向上長的圖像。但是,例如,對于不習(xí)慣應(yīng)對成像設(shè)備的人來說,認(rèn)為很難在拍攝全景圖像后將成像設(shè)備旋轉(zhuǎn)90度以設(shè)置期望的構(gòu)圖。例如,如上所述,當(dāng)在旅行期間在觀光地進(jìn)行拍攝時(shí),拍攝定時(shí)很重要,因?yàn)槿藗冊谀承┣闆r下移動(dòng)。但是,如果在旋轉(zhuǎn)成像設(shè)備后用于設(shè)置期望的構(gòu)圖的時(shí)間長,則很可能錯(cuò)過了拍攝定時(shí)。
[0007]因此,期望容易地拍攝用戶喜歡的圖像。
[0008]根據(jù)本發(fā)明的實(shí)施例,提出了成像設(shè)備、控制該成像設(shè)備的方法以及用于使得計(jì)算機(jī)執(zhí)行該方法的計(jì)算機(jī)程序。該成像設(shè)備包括:成像單元,其利用彼此不同的成像器件分別產(chǎn)生被攝體的特定方向被設(shè)置在縱向方向上的第一捕捉圖像、垂直于該特定方向的垂直方向被設(shè)置在縱向方向上并且包括與第一捕捉圖像中所包括的被攝體的垂直方向的一側(cè)相鄰的被攝體的第二捕捉圖像、以及垂直方向被設(shè)置在縱向方向上并且包括與第一捕捉圖像中所包括的被攝體的垂直方向的另一側(cè)相鄰的被攝體的第三捕捉圖像;檢測單元,其檢測所述成像設(shè)備的狀態(tài);以及控制單元,其基于所檢測的狀態(tài),確定在由所述成像單元產(chǎn)生的第一到第三捕捉圖像之中的作為顯示或記錄的目標(biāo)的目標(biāo)圖像的范圍。因此,存在基于所檢測的成像設(shè)備的狀態(tài)確定在由成像單元產(chǎn)生的第一到第三捕捉圖像之中的作為顯示或記錄的目標(biāo)的目標(biāo)圖像的范圍的動(dòng)作。
[0009]該實(shí)施例可以被配置為使得成像設(shè)備還包括:第一殼體,其包括所述成像單元;第二殼體,其包括顯示所述目標(biāo)圖像的顯示單元;以及樞軸旋轉(zhuǎn)部件,其樞軸旋轉(zhuǎn)地耦接第一殼體和第二殼體,并且所述檢測單元檢測第二殼體相對于第一殼體的樞軸旋轉(zhuǎn)狀態(tài)作為所述成像設(shè)備的狀態(tài)。因此存在檢測第二殼體相對第一殼體的樞軸旋轉(zhuǎn)狀態(tài)作為成像設(shè)備的狀態(tài)的動(dòng)作。
[0010]該實(shí)施例可以被配置為使得所述檢測單元檢測第一特定狀態(tài)作為所述成像設(shè)備的狀態(tài),在所述第一特定狀態(tài)中,顯示單元的縱向方向和產(chǎn)生第一捕捉圖像的第一成像器件的縱向方向基本上相互平行,以及所述控制單元確定當(dāng)檢測到所述第一特定狀態(tài)時(shí),僅第一捕捉圖像用作目標(biāo)圖像。因此,存在確定當(dāng)檢測到所述第一特定狀態(tài)時(shí)僅第一捕捉圖像用作目標(biāo)圖像的動(dòng)作。
[0011]該實(shí)施例可以被配置為使得所述控制單元確定當(dāng)檢測到所述第一特定狀態(tài)時(shí),整個(gè)第一捕捉圖像用作目標(biāo)圖像。因此,存在當(dāng)檢測到所述第一特定狀態(tài)時(shí)整個(gè)第一捕捉圖像用作目標(biāo)圖像的動(dòng)作。
[0012]該實(shí)施例可以被配置為使得所述檢測單元檢測第二特定狀態(tài)作為所述成像設(shè)備的狀態(tài),在所述第二特定狀態(tài)中,與顯示單元的縱向方向垂直的垂直方向和產(chǎn)生第一捕捉圖像的第一成像器件的縱向方向基本上相互平行,以及所述控制單元確定當(dāng)檢測到所述第二特定狀態(tài)時(shí),第一到第三捕捉圖像用作所述目標(biāo)圖像。因此,存在確定當(dāng)檢測到所述第二特定狀態(tài)時(shí)第一到第三 捕捉圖像用作所述目標(biāo)圖像的動(dòng)作。
[0013]該實(shí)施例可以被配置為使得所述控制單元確定當(dāng)檢測到第二特定狀態(tài)時(shí),將通過組合第一捕捉圖像的部分與第二和第三捕捉圖像而產(chǎn)生的組合圖像用作所述目標(biāo)圖像。因此,存在確定當(dāng)檢測到第二特定狀態(tài)時(shí)將通過組合第一捕捉圖像的部分與第二和第三捕捉圖像而產(chǎn)生的組合圖像用作所述目標(biāo)圖像的動(dòng)作。
[0014]該實(shí)施例可以被配置為使得所述樞軸旋轉(zhuǎn)部件將第一殼體和第二殼體耦接,使得第一殼體的一個(gè)表面和第二殼體的一個(gè)表面彼此相對,在第一殼體的所述一個(gè)表面的相對側(cè)上的表面上并排地排列分別與所述成像單元中所包括的各成像器件對應(yīng)的一組透鏡,以及所述顯示單元被提供在所述第二殼體的所述一個(gè)表面的相對側(cè)上的表面上。因此,存在所述控制單元使得在相對側(cè)上的表面上提供的顯示單元顯示由所述成像單元產(chǎn)生的捕捉圖像的動(dòng)作。
[0015]該實(shí)施例可以被配置為使得所述樞軸旋轉(zhuǎn)部件將第一殼體和第二殼體耦接,使得顯示單元中的顯示表面和與產(chǎn)生第一捕捉圖像的第一成像器件對應(yīng)的該組透鏡的光軸方向基本上垂直。因此,存在產(chǎn)生包括基本上垂直于顯示單元的光軸方向上出現(xiàn)的被攝體的第一捕捉圖像的動(dòng)作。
[0016]該實(shí)施例可以被配置為使得成像設(shè)備還包括圖像組合單元,其將第一捕捉圖像的部分與第二和第三捕捉圖像組合以產(chǎn)生組合圖像,并且所述控制單元確定當(dāng)所檢測的狀態(tài)是特定狀態(tài)時(shí),將所述組合圖像用作所述目標(biāo)圖像。因此,存在確定當(dāng)成像設(shè)備的所檢測的狀態(tài)是特定狀態(tài)時(shí),將所述組合圖像用作所述目標(biāo)圖像的動(dòng)作。
[0017]該實(shí)施例可以被配置為使得所述圖像組合單元產(chǎn)生基本上是矩形的圖像作為所述組合圖像。因此,存在產(chǎn)生基本上是矩形的圖像作為所述組合圖像的動(dòng)作。
[0018]該實(shí)施例可以被配置為使得所述控制單元基于所檢測的狀態(tài)切換通過使用所述成像單元中所包括的多個(gè)成像器件執(zhí)行的復(fù)合眼成像操作以及通過僅使用產(chǎn)生第一捕捉圖像的第一成像器件執(zhí)行的單眼成像操作,并確定所述目標(biāo)圖像的范圍。因此存在基于所述成像設(shè)備的所檢測的狀態(tài)切換復(fù)合眼成像操作以及單眼成像操作以確定目標(biāo)圖像的范圍的動(dòng)作。
[0019]該實(shí)施例可以被配置為使得當(dāng)所述復(fù)合眼成像操作被切換到所述單眼成像操作時(shí),所述控制單元停止產(chǎn)生所述第二和第三捕捉圖像的成像器件的操作。因此,存在當(dāng)所述復(fù)合眼成像操作被切換到所述單眼成像操作時(shí)停止產(chǎn)生所述第二和第三捕捉圖像的成像器件的操作的動(dòng)作。
[0020]該實(shí)施例可以被配置為使得所述控制單元確定當(dāng)所述單眼成像操作被切換到所述復(fù)合眼成像操作時(shí),預(yù)定頻率的時(shí)鐘用于所述復(fù)合眼成像操作,以及當(dāng)所述復(fù)合眼成像操作被切換到所述單眼成像操作時(shí),低于所述預(yù)定頻率的頻率的時(shí)鐘用于所述單眼成像操作。因此,存在確定當(dāng)所述單眼成像操作被切換到所述復(fù)合眼成像操作時(shí)預(yù)定頻率的時(shí)鐘用于所述復(fù)合眼成像操作、以及 當(dāng)所述復(fù)合眼成像操作被切換到所述單眼成像操作時(shí)低于所述預(yù)定頻率的頻率的時(shí)鐘用于所述單眼成像操作的動(dòng)作。
[0021]該實(shí)施例可以被配置為使得當(dāng)所述第二殼體相對于所述第一殼體的樞軸旋轉(zhuǎn)狀態(tài)是特定狀態(tài)時(shí),所述控制單元使得所述目標(biāo)圖像經(jīng)歷旋轉(zhuǎn)處理,并使得所述顯示單元顯示所述目標(biāo)圖像。因此,存在當(dāng)所述第二殼體相對于所述第一殼體的樞軸旋轉(zhuǎn)狀態(tài)是特定狀態(tài)時(shí)所述目標(biāo)圖像經(jīng)歷旋轉(zhuǎn)處理并被顯示在顯示單元上的動(dòng)作。
[0022]根據(jù)本發(fā)明的另一實(shí)施例,提供了成像設(shè)備、控制該成像設(shè)備的方法以及使得計(jì)算機(jī)執(zhí)行該方法的計(jì)算機(jī)程序,該成像設(shè)備包括:成像單元,其利用彼此不同的成像器件分別產(chǎn)生被攝體的特定方向被設(shè)置在縱向方向上的第一捕捉圖像、垂直于該特定方向的垂直方向被設(shè)置在縱向方向上并且包括與第一捕捉圖像中所包括的被攝體的垂直方向的一側(cè)相鄰的被攝體的第二捕捉圖像、以及垂直方向被設(shè)置在縱向方向上并且包括與第一捕捉圖像中所包括的被攝體的垂直方向的另一側(cè)相鄰的被攝體的第三捕捉圖像;操作接收單元,其接收用于指示成像范圍的改變的指令操作;以及控制單元,其基于所接收的指令操作確定在由所述成像單元產(chǎn)生的第一到第三捕捉圖像之中的作為顯示或記錄的目標(biāo)的目標(biāo)圖像的范圍。因此,存在基于所接收的指令操作,確定在由所述成像單元產(chǎn)生的第一到第三捕捉圖像之中的作為顯示或記錄的目標(biāo)的目標(biāo)圖像的范圍的動(dòng)作。
[0023]根據(jù)本發(fā)明的各實(shí)施例,能夠?qū)崿F(xiàn)能容易地拍攝用戶喜歡的圖像的優(yōu)異效果。
【專利附圖】
【附圖說明】
[0024]圖1A到圖1D是本發(fā)明的第一實(shí)施例中的蜂窩電話設(shè)備的外部配置示例的圖;
[0025]圖2是第一實(shí)施例中的蜂窩電話設(shè)備的內(nèi)部配置示例的圖;
[0026]圖3是第一實(shí)施例中的成像單元的內(nèi)部配置示例的圖;
[0027]圖4A到圖4C是第一實(shí)施例中的成像單元中所包括的成像器件的排列配置示例的圖;
[0028]圖5是第一實(shí)施例中的聚焦在成像器件上的圖像與讀出圖像數(shù)據(jù)的方法之間的關(guān)系的圖;
[0029]圖6A到圖6C是第一實(shí)施例中的聚焦在成像器件上的圖像與讀出圖像數(shù)據(jù)的方法之間的關(guān)系的圖;
[0030]圖7是第一實(shí)施例中的DSP的內(nèi)部配置示例的框圖;
[0031]圖8是第一實(shí)施例中的圖像信號處理單元的內(nèi)部配置示例的框圖;
[0032]圖9是第一實(shí)施例中的時(shí)鐘產(chǎn)生電路的內(nèi)部配置示例的框圖;
[0033]圖10是第一實(shí)施例中的時(shí)鐘產(chǎn)生電路的修改的框圖;
[0034]圖11是第一實(shí)施例中的時(shí)鐘產(chǎn)生電路的修改的框圖;
[0035]圖12是第一實(shí)施例中的成像器件的內(nèi)部配置示例的圖;
[0036]圖13A和圖13B是第一實(shí)施例中的成像器件中所包括的寄存器的存儲(chǔ)內(nèi)容的示意圖; [0037]圖14是第一實(shí)施例中對成像器件中的像素的控制信號以及從像素輸出的數(shù)據(jù)的狀態(tài)的不意時(shí)序圖;
[0038]圖15是第一實(shí)施例中對成像器件的像素的控制信號以及從像素輸出的數(shù)據(jù)的狀態(tài)的不意時(shí)序圖;
[0039]圖16是第一實(shí)施例中對成像器件的像素的控制信號以及從像素輸出的數(shù)據(jù)的狀態(tài)的不意時(shí)序圖;
[0040]圖17A和圖17B是第一實(shí)施例中用于執(zhí)行成像器件的稀疏處理的掃描電路的不例的不意圖;
[0041]圖18是第一實(shí)施例中的成像單元和被攝體之間的關(guān)系的圖;
[0042]圖19是第一實(shí)施例中的成像單元中的成像系統(tǒng)與作為成像系統(tǒng)的成像目標(biāo)的被攝體之間的關(guān)系的不意圖;
[0043]圖20是第一實(shí)施例中的成像單元中的成像系統(tǒng)與作為成像系統(tǒng)的成像目標(biāo)的各被攝體之間的關(guān)系的示意圖;
[0044]圖21是第一實(shí)施例中的成像單元中的成像系統(tǒng)與作為成像系統(tǒng)的成像目標(biāo)的各被攝體之間的關(guān)系的示意圖;
[0045]圖22是第一實(shí)施例中的成像單元中的成像系統(tǒng)與作為成像系統(tǒng)的成像目標(biāo)的各被攝體之間的關(guān)系的示意圖;
[0046]圖23是第一實(shí)施例中的成像單元中的成像系統(tǒng)與由成像系統(tǒng)產(chǎn)生的捕捉圖像和在校正以后的已校正圖像之間的關(guān)系的示意圖;
[0047]圖24A到圖24C是第一實(shí)施例中的圖像組合處理單元產(chǎn)生組合圖像的組合的流程的不意圖;
[0048]圖25A到圖25C是第一實(shí)施例中的圖像組合處理單元產(chǎn)生組合圖像的組合的流程的不意圖;
[0049]圖26A到圖26C是第一實(shí)施例中的圖像組合處理單元產(chǎn)生組合圖像的組合的流程的不意圖;
[0050]圖27是第一實(shí)施例中作為蜂窩電話設(shè)備的成像處理的成像目標(biāo)的被攝體的圖;[0051]圖28A和圖28B是第一實(shí)施例中讀出成像器件中的圖像數(shù)據(jù)的方法(第一讀出方法)的示例的示意圖;
[0052]圖29A到圖29C是第一實(shí)施例中的顯示單元中的圖像的顯示示例的圖;
[0053]圖30A和圖30B是第一實(shí)施例中讀出成像器件中的圖像數(shù)據(jù)的方法(第二讀出方法)的示例的示意圖;
[0054]圖31A到圖31C是第一實(shí)施例中的顯示單元中的圖像的顯示示例的圖;
[0055]圖32A和圖32B是第一實(shí)施例中讀出成像器件中的圖像數(shù)據(jù)的方法(第三讀出方法)的示例的示意圖;
[0056]圖33A到圖33C是第一實(shí)施例中的顯示單元中的圖像的顯示示例的圖;
[0057]圖34A和圖34B是第一實(shí)施例中讀出成像器件中的圖像數(shù)據(jù)的方法(第四讀出方法)的示例的示意圖;
[0058]圖35A到圖35C是第一實(shí)施例中的顯示單元中的圖像的顯示示例的圖;
[0059]圖36A和圖36B是第一實(shí)施例中讀出成像器件中的圖像數(shù)據(jù)的方法(第五讀出方法)的示例的示意圖;
[0060]圖37A到圖37C是第一實(shí)施例中的顯示單元中的圖像的顯示示例的圖;
[0061]圖38A到圖38C是第一實(shí)施例中的顯示單元中的圖像的顯示示例的圖;
[0062]圖39A到圖39E是第一實(shí)施例中用于旋轉(zhuǎn)在顯示單元中顯示的圖像的旋轉(zhuǎn)處理的示意圖;
[0063]圖40A到圖40C是第一實(shí)施例中的顯示單元中的圖像的顯示示例的圖;
[0064]圖41A到圖41C是第一實(shí)施例中的顯示單元中的圖像的顯示示例的圖;
[0065]圖42A到圖42C是第一實(shí)施例中的顯示單元中的圖像的顯示示例的圖;
[0066]圖43是第一實(shí)施例中由成像器件執(zhí)行像素稀疏和像素相加的圖像數(shù)據(jù)的流程的示意圖;
[0067]圖44是第一實(shí)施例中由像素相加處理單元改變像素的數(shù)量的圖像數(shù)據(jù)的流程的示意圖;
[0068]圖45是第一實(shí)施例中當(dāng)從圖像存儲(chǔ)器讀出圖像數(shù)據(jù)時(shí)改變像素的數(shù)量的圖像數(shù)據(jù)的流程的示意圖;
[0069]圖46是第一實(shí)施例中由成像器件改變讀出區(qū)域的圖像數(shù)據(jù)的流程的示意圖;
[0070]圖47是第一實(shí)施例中當(dāng)從圖像存儲(chǔ)器讀出圖像數(shù)據(jù)時(shí)改變讀出區(qū)域的圖像數(shù)據(jù)的流程的示意圖;
[0071]圖48是第一實(shí)施例中的蜂窩電話設(shè)備的功能配置示例的框圖;
[0072]圖49A到圖49D是第一實(shí)施例中的蜂窩電話設(shè)備的功能配置示例的框圖;
[0073]圖50是第一實(shí)施例中用于停止成像系統(tǒng)的操作的控制方法與信號線之間的關(guān)系的圖;
[0074]圖51是第一實(shí)施例中從成像器件的輸出定時(shí)和圖像緩沖器中的寫狀態(tài)的示意時(shí)序圖;
[0075]圖52A和圖52B是第一實(shí)施例中用于成像器件中的像素的讀出和圖像緩沖器中的寫的時(shí)鐘頻率與用于從圖像緩沖器中讀出圖像數(shù)據(jù)的時(shí)鐘頻率之間的關(guān)系的圖;
[0076]圖53A和圖53B是第一實(shí)施例中用于成像器件中的像素的讀出和圖像緩沖器中的寫的時(shí)鐘頻率與用于從圖像緩沖器中讀出圖像數(shù)據(jù)的時(shí)鐘頻率之間的關(guān)系的圖;
[0077]圖54A和圖54B是第一實(shí)施例中用于成像器件中的像素的讀出和圖像緩沖器中的寫的時(shí)鐘頻率與用于從圖像緩沖器中讀出圖像數(shù)據(jù)的時(shí)鐘頻率之間的關(guān)系的圖;
[0078]圖55是第一實(shí)施例中由成像器件產(chǎn)生的圖像數(shù)據(jù)的流程的示意圖;
[0079]圖56A和圖56B是第一實(shí)施例中用于占用數(shù)據(jù)總線的處理和時(shí)間之間的關(guān)系的示意圖;
[0080]圖57是第一實(shí)施例中用于確定與蜂窩電話設(shè)備100的各種成像操作有關(guān)的數(shù)據(jù)總線204的操作頻率的參數(shù)的示例的圖;
[0081]圖58是第一實(shí)施例中用于確定與蜂窩電話設(shè)備的各種成像操作有關(guān)的數(shù)據(jù)總線的操作頻率的參數(shù)的示例的 圖;
[0082]圖59是第一實(shí)施例中由圖像信號處理單元執(zhí)行的時(shí)間劃分處理的示意圖;
[0083]圖60A和圖60B是第一實(shí)施例中由圖像信號處理單兀執(zhí)行的時(shí)間劃分處理的不意圖;
[0084]圖61是第一實(shí)施例中用于確定與蜂窩電話設(shè)備的靜止圖像記錄操作有關(guān)的數(shù)據(jù)總線的操作頻率的參數(shù)的示例的圖;
[0085]圖62是第一實(shí)施例中用于確定與蜂窩電話設(shè)備的運(yùn)動(dòng)圖像記錄操作有關(guān)的數(shù)據(jù)總線的操作頻率的參數(shù)的示例的圖;
[0086]圖63是第一實(shí)施例中用于圖像緩沖器中的寫的定時(shí)和用于捕捉到DSP中的定時(shí)的狀態(tài)的示意時(shí)序圖;
[0087]圖64是第一實(shí)施例中用于圖像緩沖器中的寫的定時(shí)和用于捕捉到DSP中的定時(shí)的狀態(tài)的示意時(shí)序圖;
[0088]圖65是第一實(shí)施例中的蜂窩電話設(shè)備的成像控制處理的處理過程的流程圖;
[0089]圖66是第一實(shí)施例中的蜂窩電話設(shè)備的成像控制處理的處理過程中的橫向狀態(tài)成像處理的流程圖;
[0090]圖67是第一實(shí)施例中的蜂窩電話設(shè)備的成像控制處理的處理過程中的靜止圖像成像處理的流程圖;
[0091]圖68是第一實(shí)施例中的蜂窩電話設(shè)備的成像控制處理的處理過程中的運(yùn)動(dòng)圖像成像處理的流程圖;
[0092]圖69是第一實(shí)施例中的蜂窩電話設(shè)備的成像控制處理的處理過程中的縱向狀態(tài)成像處理的流程圖;
[0093]圖70A到圖70D是第一實(shí)施例中的蜂窩電話設(shè)備的修改的圖;
[0094]圖7IA到圖71C是第一實(shí)施例中的蜂窩電話設(shè)備的修改的圖;以及
[0095]圖72A到圖72C是本發(fā)明的第二實(shí)施例中的成像設(shè)備的外部配置的圖。
【具體實(shí)施方式】
[0096]以下說明用于實(shí)現(xiàn)本發(fā)明的模式(下文中稱為實(shí)施例)。按如下順序說明各實(shí)施例。
[0097]1.第一實(shí)施例(成像控制:在蜂窩電話設(shè)備中執(zhí)行單眼成像操作和復(fù)合眼成像操作的示例)[0098]2.第二實(shí)施例(成像控制:在成像設(shè)備中執(zhí)行單眼成像操作和復(fù)合眼成像操作的示例)
[0099]〈1.第一實(shí)施例>
[0100][蜂窩電話設(shè)備的外部配置示例]
[0101]圖1A到圖1D是根據(jù)本發(fā)明的第一實(shí)施例的蜂窩電話設(shè)備100的外部配置示例的圖。在圖1A中,示出了在使用蜂窩電話設(shè)備100時(shí)的形態(tài)的前側(cè)。在圖1B中,示出了該形態(tài)的后側(cè)。在圖1C中,示出了在使用蜂窩電話設(shè)備100時(shí)的另一形態(tài)的前側(cè)。在圖1D中,示出了該形態(tài)的后側(cè)。
[0102]蜂窩電話設(shè)備100包括第一殼體110和第二殼體120。第一殼體110和第二殼體120以作為樞軸旋轉(zhuǎn)基準(zhǔn)的樞軸旋轉(zhuǎn)部件101可樞軸旋轉(zhuǎn)地耦接。例如通過具有多個(gè)成像功能的蜂窩電話設(shè)備(所謂的帶有相機(jī)的蜂窩電話設(shè)備)實(shí)現(xiàn)蜂窩電話設(shè)備100。在圖1A到圖1D中,為了易于說明,以簡化形式示出了蜂窩電話設(shè)備100。未示出在蜂窩電話設(shè)備100的外表面上提供的電源開關(guān)等。
[0103]第一殼體110包括成像范圍變換(changeover)開關(guān)111、靜止圖像/運(yùn)動(dòng)圖像變換開關(guān)112、十個(gè)鍵(tenkey)113、確定鍵114、十字鍵115和成像單元130。當(dāng)用戶持有并使用蜂窩電話設(shè)備100時(shí),用戶需要用手握住蜂窩電話設(shè)備100的某部分。例如,在正常使用期間,通常在用戶用手握住第一殼體110的某部分(所謂的主體外殼)的狀態(tài)下使用蜂窩電話設(shè)備100。
[0104]成像范圍變換開關(guān)111是用于在以成像單元130產(chǎn)生圖像數(shù)據(jù)時(shí)切換成像范圍的操作部件。每次通過用戶 操作按下成像范圍變換開關(guān)111時(shí),依次切換成像范圍。稍后參考圖28A和圖28B到圖42A和圖42B詳細(xì)說明成像范圍的切換。成像范圍變換開關(guān)111是在所附權(quán)利要求中所述的操作接收單元的示例。
[0105]靜止圖像/運(yùn)動(dòng)圖像變換開關(guān)112是在將成像模式切換為用于記錄靜止圖像的靜止圖像成像模式和用于記錄運(yùn)動(dòng)圖像的運(yùn)動(dòng)圖像成像模式時(shí)使用的操作部件。成像范圍變換開關(guān)111和靜止圖像/運(yùn)動(dòng)圖像變換開關(guān)112是所謂的反轉(zhuǎn)(toggle)開關(guān)。
[0106]十個(gè)鍵113是用于輸入數(shù)字、符號等的操作部件。
[0107]確定鍵114是在設(shè)置各種功能時(shí)由用戶按下的操作部件。例如,當(dāng)在設(shè)置了靜止圖像成像模式時(shí)按下確定鍵114時(shí),確定鍵114用作快門按鈕。
[0108]十字鍵115是在改變顯示屏幕上所顯示的項(xiàng)的選擇狀態(tài)時(shí)以及在上下和左右方向上移動(dòng)顯示屏幕上所顯示的對象時(shí)所按下的操作鍵。
[0109]成像單元130對被攝體成像并產(chǎn)生圖像數(shù)據(jù)。在圖1A中,在與圖1B所示的成像單元130對應(yīng)的前側(cè)上的位置由虛線指示。在圖1B中所示的成像單元130中的圓圈示意性地指示在成像單元130中所包括的多個(gè)成像系統(tǒng)的透鏡。在第一實(shí)施例中,作為例子說明其中在特定方向上并排排列的一組三個(gè)透鏡的成像單元130。特定方向可以是例如當(dāng)將第一外殼Iio的縱向方向(longitudinal direction)設(shè)置在垂直方向上時(shí)的水平方向。
[0110]第二殼體120包括顯示單元140。顯示單元140是顯示各種圖像的顯示器件。例如,通過成像操作產(chǎn)生的圖像被作為監(jiān)視圖像顯示在顯示單元140中。作為顯示單元140,例如,可以使用LCD (液晶顯示器)面板或有機(jī)EL (電致發(fā)光)面板。帶有照相機(jī)的蜂窩電話設(shè)備或者一般的成像設(shè)備中所包括的顯示器件的縱橫比通常是4:3或16:9。因此,在第一實(shí)施例中所說明的示例中,當(dāng)?shù)诙んw120的縱向方向被設(shè)置在水平方向上時(shí),顯示單元140的縱橫比被設(shè)置為4:3。
[0111]如上所述,第一殼體110和第二殼體120可樞軸旋轉(zhuǎn)地稱接。具體地,第二殼體120可以以樞軸旋轉(zhuǎn)部件101 (由虛線指示)作為樞軸旋轉(zhuǎn)基準(zhǔn)而相對于第一殼體110樞軸旋轉(zhuǎn)。這使得能夠改變第二殼體120相對于第一殼體110的相對位置關(guān)系。例如,在圖1C和圖1D中示出了其中第二殼體120在圖1A和IB中所示的箭頭102的方向上樞軸旋轉(zhuǎn)90度的形態(tài)。
[0112]除了第二外殼120以樞軸旋轉(zhuǎn)部件101作為樞軸旋轉(zhuǎn)基準(zhǔn)相對于第一殼體110旋轉(zhuǎn)了 90度之外,圖1C和圖1D所示的蜂窩電話設(shè)備100與圖1A和圖1B所示的示例相同。當(dāng)?shù)诙んw120在箭頭103的方向上進(jìn)一步樞軸旋轉(zhuǎn)90度時(shí),蜂窩電話設(shè)備100改變到不使用狀態(tài)(所謂的閉合狀態(tài))。通過以此方式相對于第一殼體110樞軸旋轉(zhuǎn)第二殼體120,可以將至少兩個(gè)或更多的位置關(guān)系取作第二殼體120相對于第一殼體110的相對位置關(guān)系。還能夠以樞軸旋轉(zhuǎn)部件101作為樞軸旋轉(zhuǎn)基準(zhǔn)在與箭頭102的方向相反的方向上樞軸旋轉(zhuǎn)第二殼體120。但是,在第一實(shí)施例中,省略了這些形態(tài)的圖示和說明。
[0113]將如下狀態(tài)稱為第二殼體120的縱向(portrait)狀態(tài):其中第一殼體110的縱向方向和第二殼體120的縱向方向被設(shè)置在相同的方向上,并且顯示單元140和十個(gè)鍵113在樞軸旋轉(zhuǎn)部件101兩端彼此相對,如圖1A和圖1B所示。將在此狀態(tài)下將第一殼體110和第二殼體120的縱向方向設(shè)置在垂直方向時(shí)所執(zhí)行的成像操作稱為縱向狀態(tài)成像操作。
[0114]將如下狀態(tài)稱為第二殼體120的橫向(landscape)狀態(tài):其中第一殼體110的縱向方向和第二殼體120的縱向方向基本上相互垂直,如圖1C和圖1D所示。將在此狀態(tài)下第一殼體110的縱向方向被設(shè)置在垂直方向上并且第二殼體120的縱向方向被設(shè)置在水平方向上時(shí)所執(zhí)行的成像操作稱為橫 向成像操作。
[0115][蜂窩電話設(shè)備的內(nèi)部配置示例]
[0116]圖2是第一實(shí)施例中的蜂窩電話設(shè)備100的內(nèi)部配置示例的圖。蜂窩電話設(shè)備100包括應(yīng)用處理器11、數(shù)字基帶處理單元12、模擬基帶處理單元13和RF (射頻)處理單元14。蜂窩電話設(shè)備100包括電池15、麥克風(fēng)16、揚(yáng)聲器17、天線18、成像范圍變換開關(guān)111、靜止圖像/運(yùn)動(dòng)圖像變換開關(guān)112、確定鍵114、成像單元130和顯示單元140。此外,蜂窩電話設(shè)備100包括樞軸旋轉(zhuǎn)狀態(tài)檢測單元150、程序存儲(chǔ)器160、圖像存儲(chǔ)器170、記錄介質(zhì)180和DSP (數(shù)字信號處理器)200。天線18被提供在RF處理單元14中。麥克風(fēng)16和揚(yáng)聲器17被提供在模擬基帶處理單元13中。
[0117]應(yīng)用處理器11基于在并入蜂窩電話設(shè)備100中的存儲(chǔ)器中所存儲(chǔ)的各種計(jì)算機(jī)程序控制蜂窩電話設(shè)備100的各單元。應(yīng)用處理器11包括例如CPU (中央處理單元)、ROM(只讀存儲(chǔ)器)和RAM (隨機(jī)存取存儲(chǔ)器)。
[0118]例如,當(dāng)執(zhí)行語音接收操作時(shí),由天線18接收的無線電波經(jīng)過RF處理單元14和模擬基帶處理單元13由數(shù)字基帶處理單元12解調(diào)。將數(shù)字基帶處理單元12的解調(diào)結(jié)果經(jīng)過模擬基帶處理單元13從揚(yáng)聲器17輸出。
[0119]當(dāng)執(zhí)行語音發(fā)送操作時(shí),從麥克風(fēng)16輸入的聲音經(jīng)過模擬基帶處理單元13由數(shù)字基帶處理單元12調(diào)制。將已解調(diào)的聲音數(shù)據(jù)經(jīng)過模擬基帶處理單元13和RF處理單元14從天線18傳輸。[0120]當(dāng)用戶執(zhí)行用于成像操作的開始指令操作時(shí),在蜂窩電話設(shè)備100中執(zhí)行成像操作。例如,當(dāng)用戶執(zhí)行用于成像操作的開始指令操作時(shí),應(yīng)用處理器11命令與成像操作有關(guān)的各單元(成像單元130、DSP200等)開始成像操作,并啟動(dòng)各單元。由啟動(dòng)的單元執(zhí)行成像操作,并且所產(chǎn)生的圖像被顯示在顯示單元140中。當(dāng)用戶執(zhí)行對于圖像的記錄指令操作時(shí),所產(chǎn)生的圖像被記錄在記錄介質(zhì)180中。當(dāng)用戶執(zhí)行用于通過無線電傳輸圖像的指令操作時(shí),將所產(chǎn)生的圖像通過無線電而傳輸。例如,所產(chǎn)生的圖像數(shù)據(jù)由數(shù)字基帶處理單元12調(diào)制,并經(jīng)過模擬基帶處理單元13和RF處理單元14從天線18傳輸。電池15是向蜂窩電話設(shè)備100供電的電池。
[0121]稍后參考圖3、圖7等詳細(xì)說明開關(guān)111和112、確定鍵114、成像單兀130、顯不單元140、樞軸旋轉(zhuǎn)狀態(tài)檢測單元150、程序存儲(chǔ)器160、圖像存儲(chǔ)器170、記錄介質(zhì)180和DSP200。
[0122][成像單元的內(nèi)部配置示例]
[0123]圖3是第一實(shí)施例中的成像單元130的內(nèi)部配置示例的圖。在圖3中,示出了與成像單元130連接的DSP200的一部分。稍后參考圖7和圖8詳細(xì)說明DSP200的整體配置。
[0124]成像單元130包括三個(gè)成像系統(tǒng)(第一到第三成像系統(tǒng)191到193)、電源控制單元207和電源供應(yīng)單元208和209。以特定方向并排排列三個(gè)成像系統(tǒng)。具體地,第一成像系統(tǒng)191被排列在中央,并且第二和第三成像系統(tǒng)192和193被排列在第一成像系統(tǒng)191的兩側(cè)。
[0125]第一成像系統(tǒng)191包括光學(xué)系統(tǒng)131、成像器件134和DSP I/F (接口)137。第二成像系統(tǒng)192包括光學(xué)系統(tǒng)132、成像器件135和DSP I/F138。第三成像系統(tǒng)193包括光學(xué)系統(tǒng)133、成像器件136 和DSP I/F139。因?yàn)榈谝坏降谌上裣到y(tǒng)191到193的配置基本上相同,因此主要說明第一成像系統(tǒng)191的配置,并省略第二和第三成像系統(tǒng)192和193的說明。
[0126]光學(xué)系統(tǒng)131包括會(huì)聚來自被攝體的光的多個(gè)透鏡(包括變焦透鏡和聚焦透鏡)。通過光圈快門(Stop)(未示出)調(diào)整通過這些透鏡傳輸?shù)墓饬?即曝光)。使得從被攝體會(huì)聚的光入射在成像器件134上。
[0127]成像器件134是聚焦使得經(jīng)由光學(xué)系統(tǒng)131而入射的被攝體圖像并產(chǎn)生圖像信號的成像器件。具體地,成像器件134接收使得經(jīng)由光學(xué)系統(tǒng)131入射的來自被攝體的光,并執(zhí)行光電轉(zhuǎn)換以由此產(chǎn)生與接收的光量對應(yīng)的模擬圖像信號。以此方式將由成像器件134產(chǎn)生的模擬圖像信號經(jīng)由DSP I/F137提供給DSP200。作為成像器件,例如,可以使用CXD(電荷耦合器件)類型或者CMOS (互補(bǔ)金屬氧化物半導(dǎo)體)類型的固態(tài)成像器件。
[0128]DSP I/F137是用于連接成像器件134和DSP200的接口。
[0129]電源控制單元207基于來自DSP200的成像控制單元201 (圖7中所示)的電源控制的指令來控制電源供應(yīng)單元208和209。具體地,當(dāng)電源控制單元207接收到來自成像控制單元201的用于電源控制的指令時(shí),電源控制單元207創(chuàng)建符合被請求作為電源供應(yīng)單元208和209的控制信號的輸入規(guī)范的信號的振幅以及信號的上升速度和下降速度的信號。電源控制單元207將創(chuàng)建的信號輸出到電源供應(yīng)單元208和209,并控制電源供應(yīng)單元208和209。當(dāng)成像控制單元201的輸出信號符合電源供應(yīng)單元208和209的控制信號的輸入規(guī)范時(shí),成像控制單元201的輸出信號可以被直接輸入到電源供應(yīng)單元208和209。[0130]電源供應(yīng)單元208基于電源控制單元207的控制向第一成像系統(tǒng)191供電。電源供應(yīng)單元209基于電源控制單元207的控制向第二和第三成像系統(tǒng)192和193供電。通過例如可購買到的電源供應(yīng)IC (集成電路)實(shí)現(xiàn)電源供應(yīng)單元208和209。
[0131]第一到第三成像系統(tǒng)191到193的每個(gè)經(jīng)由一個(gè)數(shù)據(jù)線和七種信號線連接到DSP200。用于連接第一成像系統(tǒng)191和DSP200的一個(gè)信號線被表示為LI,并且七種信號線被表示為L2到L8。第二和第三成像系統(tǒng)192和193的數(shù)據(jù)線和信號線基本上與第一成像系統(tǒng)191的數(shù)據(jù)線和信號線相同。因此,主要說明第一成像系統(tǒng)191的數(shù)據(jù)線和信號線。省略了第二和第三成像系統(tǒng)192和193的說明。
[0132]數(shù)據(jù)線LI是用于將圖像數(shù)據(jù)從成像器件134傳輸?shù)紻SP200的數(shù)據(jù)線。數(shù)據(jù)線LI按期望地包括例如多個(gè)數(shù)據(jù)線以便增加圖像數(shù)據(jù)的傳輸速率。期望使用差分傳輸系統(tǒng)的高速數(shù)據(jù)線作為數(shù)據(jù)線LI,以便增加圖像數(shù)據(jù)的傳輸速率和增加傳輸線上的抗噪聲性。例如,期望使用LVDS (低電壓差分 信號傳輸)作為數(shù)據(jù)線LI。
[0133]信號線L2是成像器件134和DSP200之間的雙向通信線。例如,可以使用四線結(jié)構(gòu)串行通信線。例如,信號線L2用于從DSP200側(cè)設(shè)置使用成像器件134所需的各種設(shè)置值。作為示例,用于稀疏(thinning out)并輸出從成像器件134輸出的圖像數(shù)據(jù)到DSP200的設(shè)置值被從DSP200經(jīng)由信號線L2寫入寄存器370和380中(圖12所示)。
[0134]信號線L3是用于從DSP200向成像器件134提供時(shí)鐘的時(shí)鐘信號線。成像器件134使用經(jīng)由信號線L3提供的時(shí)鐘在每一個(gè)時(shí)鐘時(shí)段執(zhí)行對一個(gè)像素的成像操作。還能夠在成像器件134中提供倍頻器(multiplier),在成像器件134中對從DSP200提供的時(shí)鐘進(jìn)行倍頻,并在倍頻之后在每一個(gè)時(shí)鐘時(shí)段執(zhí)行對一個(gè)像素的成像操作。
[0135]信號線L4是用于從DSP200向成像器件134提供復(fù)位信號的復(fù)位信號線。
[0136]信號線L5是用于從DSP200控制成像器件134的成像操作的開和關(guān)的信號線。具體地,信號線L5是用于從DSP20向成像器件通知操作的停止和開始的信號線。例如,當(dāng)用戶指示用于僅使用三個(gè)系統(tǒng)之中的一個(gè)成像器件的成像模式時(shí),通過停止未在使用的兩個(gè)成像器件的成像操作可以降低功耗。
[0137]信號線L6是垂直同步信號線。具體地,信號線L6是用于從DSP200向成像器件134通知指示每幀的成像定時(shí)的同步信號的信號線。
[0138]信號線L7是水平同步信號線。具體地,信號線L7是用于從DSP200向成像器件134通知指示一幀中的每條線的成像定時(shí)的同步信號的信號線。
[0139]信號線L8是快門信號線。例如,當(dāng)在蜂窩電話設(shè)備100中由用戶按下用于執(zhí)行捕捉圖像記錄的操作部件(例如確定鍵114)時(shí),與該按下對應(yīng)的快門信號被從DSP200經(jīng)由信號線L8通知給成像器件134。
[0140][成像器件的排列配置示例]
[0141]圖4A到圖4C是第一實(shí)施例中的成像單元130中所包括的成像器件134到136的排列配置示例的圖。在圖4A中,示出了成像器件134到136的排列配置??偟膩碚f,在成像器件的光接收表面上陣列排列(arraying)像素的區(qū)域的形狀基本上是矩形。因此,在在以下說明中,成像器件134到136示意性地由矩形表示。
[0142]在圖4A中,示出了在將第一殼體110的縱向方向設(shè)置在垂直方向上以將樞軸旋轉(zhuǎn)部件101側(cè)設(shè)置在上側(cè)時(shí)的排列配置示例。具體地,成像器件134被排列在中央,并且成像器件135和136被排列在成像器件134的兩側(cè)。排列在中央的成像器件134被排列為使得其縱向方向與垂直于陣列排列方向的方向一致。另一方面,排列在成像器件134的兩側(cè)的成像器件135和136被排列為使得其縱向方向與陣列排列方向一致。成像器件134到136被排列為使得其中心位置在同一平面上。具體地,在陣列排列方向上,成像器件135和136被排列在橫向并且成像器件134被排列在縱向。在圖4A中,可以讀出像素的像素?cái)?shù)據(jù)讀出可能區(qū)域400到402示意性地由成像器件134到136中的矩形表示。例如,被攝體的特定方向被設(shè)置在縱向方向上的第一捕捉圖像由成像器件134產(chǎn)生。垂直于特定方向的垂直方向被設(shè)置在縱向方向上、并包括與在第一捕捉圖像中所包括的被攝體的垂直方向的一側(cè)相鄰的被攝體的第二捕捉圖像由成像器件135產(chǎn)生。垂直方向被設(shè)置在縱向方向上、并包括與在第一捕捉圖像中所包括的被攝體的垂直方向的另一側(cè)相鄰的被攝體的第三捕捉圖像由成像器件136產(chǎn)生。以此方式,在第一實(shí)施例中,在中央的成像器件134的縱橫比被設(shè)置得小于排列在成像器件134的兩側(cè)的成像器件135和136的縱橫比。從而,即使當(dāng)通過僅使用成像器件134而產(chǎn)生縱向圖像時(shí),也能夠維持足夠的分辨率。另一方面,關(guān)于通過使用成像器件134到136產(chǎn)生的廣角圖像(例如全景圖像),能夠有效利用成像器件134的圖像幀。
[0143]在圖4B中,示出了其中在第二殼體120處于縱向狀態(tài)時(shí)產(chǎn)生圖像數(shù)據(jù)的像素?cái)?shù)據(jù)讀出區(qū)域的示例。像素?cái)?shù)據(jù)讀出區(qū)域403到405是當(dāng)在像素?cái)?shù)據(jù)讀出可能區(qū)域400到402中產(chǎn)生用于顯示或記錄的圖像數(shù)據(jù)時(shí)從其讀出像素?cái)?shù)據(jù)的區(qū)域的示例。在圖4B中,像素?cái)?shù)據(jù)讀出區(qū)域403到405的輪廓由粗線表示。像素?cái)?shù)據(jù)讀出區(qū)域404和405可以被設(shè)置為例如與像素?cái)?shù)據(jù)讀出可能區(qū)域401和402相同。在像素?cái)?shù)據(jù)讀出區(qū)域403中,垂直方向上的長度VlO可以被設(shè)置為與像素?cái)?shù)據(jù)讀出可能區(qū)域401和402的垂直方向的長度Vll相同,并且水平方向上的長度HlO可以被設(shè)置為與像素?cái)?shù)據(jù)讀出可能區(qū)域400的水平方向上的長度相問。
[0144]在圖4C中,示出了其中當(dāng)?shù)诙んw120處于橫向狀態(tài)時(shí)產(chǎn)生圖像數(shù)據(jù)的像素?cái)?shù)據(jù)讀出區(qū)域的示例。在此示例中,示出了其中僅通過成像器件134到136之中的成像器件134產(chǎn)生圖像數(shù)據(jù)的像素?cái)?shù)據(jù)讀出區(qū)域406。像素?cái)?shù)據(jù)讀出區(qū)域406是在像素?cái)?shù)據(jù)讀出可能區(qū)域400到402中產(chǎn)生用于顯示或記錄的組合圖像時(shí)讀出像素的區(qū)域的示例。在圖4C中,像素?cái)?shù)據(jù)讀出區(qū)域406的輪廓由粗線表示。像素?cái)?shù)據(jù)讀出區(qū)域406可以被設(shè)置為例如與像素?cái)?shù)據(jù)讀出可能區(qū)域400相同。稍后參考圖28A和圖28B到圖42A到圖42C來詳細(xì)說明這些圖像產(chǎn)生示例。
[0145]例如,假設(shè)其中成像器件134到136被排列為成像器件134到136的縱向方向與特定方向一致的成像設(shè)備。具體地,假設(shè)在圖4A所示的狀態(tài)中,成像器件134被排列為旋轉(zhuǎn)90度,并且成像器件134到136的縱向方向和陣列排列方向相同。在此情況下,當(dāng)拍攝具有正常長度的靜止圖像時(shí)垂直方向上的像素的數(shù)量最大僅是成像器件134的短邊方向上的像素的數(shù)量。垂直方向上的視角限于其中使得光入射在成像器件134的短邊方向上的區(qū)域。因此,為了增加垂直方向上的視角并增加垂直方向上的像素的數(shù)量以執(zhí)行成像,用戶需要將成像設(shè)備90旋轉(zhuǎn)90度并進(jìn)行拍攝。
[0146] 另一方面,根據(jù)第一實(shí)施例,即使當(dāng)拍攝具有正常長度的靜止圖像時(shí),也能夠進(jìn)行拍攝,同時(shí)像素?cái)?shù)量和視角與用戶以置于側(cè)向(sideways)的包括一個(gè)成像系統(tǒng)的蜂窩電話設(shè)備進(jìn)行拍攝時(shí)的像素?cái)?shù)量和視角相同。因此能夠降低用戶將成像設(shè)備導(dǎo)向側(cè)向的工作和時(shí)間。
[0147]說明了用于讀出成像器件134到136中的一條線中的數(shù)據(jù)的讀出方法。例如,作為用于讀出成像器件134到136中的一條線中的數(shù)據(jù)的數(shù)據(jù)讀出方法,可以使用以下所述的兩種方法。
[0148]第一數(shù)據(jù)讀出方法是如下方法:其中,當(dāng)讀出成像器件134中的一條線中的數(shù)據(jù)時(shí),該一條線的方向被設(shè)置在與成像器件134對應(yīng)的矩形的短邊方向上。在第一數(shù)據(jù)讀出方法中,當(dāng)讀出成像器件135到136中的一條線中的數(shù)據(jù)時(shí),該一條線的方向被設(shè)置在與成像器件135和136對應(yīng)的矩形區(qū)域的長邊方向上。在圖6A中示出了此方法的示例。在第一數(shù)據(jù)讀出方法中,從三個(gè)成像器件134到136中讀出的圖像數(shù)據(jù)可以被以讀出順序?qū)懭雸D像存儲(chǔ)器170中。即使當(dāng)讀出數(shù)據(jù)并執(zhí)行圖像信號處理時(shí),因?yàn)榭梢砸韵嗤樞蜃x出數(shù)據(jù),因此可以容易地執(zhí)行數(shù)據(jù)向存儲(chǔ)器中的寫和從存儲(chǔ)器的讀出。但是,總的來說,因?yàn)樽x出線方向是成像器件中的縱向方向,因此需要重新準(zhǔn)備其中讀出線方向是短邊方向的成像器件。
[0149]第二數(shù)據(jù)讀出方法是如下方法:其中,當(dāng)讀出成像器件134的一條線中的數(shù)據(jù)時(shí),該一條線的方向被設(shè)置在如在成像器件135和136中的長邊方向。在此情況下,不需要重新準(zhǔn)備其中讀出方向是短邊方向的成像器件。但是,成像器件134的圖像數(shù)據(jù)的讀出方向被從成像器件135和136的圖像數(shù)據(jù)的讀出方向旋轉(zhuǎn)了 90度。因此,當(dāng)通過使用從成像器件134讀出的圖像數(shù)據(jù)執(zhí)行圖像信號處理時(shí),期望在將該圖像數(shù)據(jù)的圖像旋轉(zhuǎn)90度以將該圖像設(shè)置在與由成像器件135和136產(chǎn)生的圖像的方向相同的方向上之后執(zhí)行圖像信號處理。在第一實(shí)施例中,說明了使用第一數(shù)據(jù)讀出方法的示例。具體地,在以下說明中,在讀出成像器件134中的一條線中的像素?cái)?shù)據(jù)時(shí)的線方向被設(shè)置在成像器件134到136的陣列排列方向上。類似地,在讀 出成像器件135和136中的一條線中的像素?cái)?shù)據(jù)時(shí)的線方向被設(shè)置在成像器件134到136的陣列排列方向上。
[0150]圖5和圖6A到圖6C是第一實(shí)施例中聚焦在成像器件134到136上的圖像和讀出圖像數(shù)據(jù)的方法之間的關(guān)系的圖。一般而言,倒轉(zhuǎn)的圖像被聚焦在成像器件上。
[0151]圖5是當(dāng)產(chǎn)生倒轉(zhuǎn)的圖像作為聚焦在成像器件上的圖像時(shí)被攝體409、光學(xué)系統(tǒng)131和聚焦在成像器件134上的捕捉圖像410之間的關(guān)系的示意圖。如圖5所示,使得經(jīng)由光學(xué)系統(tǒng)131入射的來自被攝體409的光聚焦在成像器件134上,并產(chǎn)生捕捉圖像410。在此情況下,被攝體409的上下方向和捕捉圖像410的上下方向被倒轉(zhuǎn)。
[0152]圖6A是在從成像器件134到136讀出像素?cái)?shù)據(jù)時(shí)的讀出開始位置411到413以及讀出方向的示意圖。在此示例中,在圖4B所示的像素?cái)?shù)據(jù)讀出區(qū)域403到405中讀出像素?cái)?shù)據(jù)。在以下說明中,像素?cái)?shù)據(jù)讀出區(qū)域中的讀出開始位置示意性地由矩形表示。例如,從在像素?cái)?shù)據(jù)讀出區(qū)域403到405的右下角的讀出開始位置411到413依次開始讀出,并且按箭頭方向讀出像素?cái)?shù)據(jù)。例如,在像素?cái)?shù)據(jù)讀出區(qū)域403中,像素?cái)?shù)據(jù)的讀出從讀出開始位置411開始,并且在箭頭方向上每次移位一個(gè)像素的同時(shí)依次執(zhí)行像素?cái)?shù)據(jù)的讀出。當(dāng)執(zhí)行位于水平方向上的一條線的末端處(在圖6A中示出的像素?cái)?shù)據(jù)讀出區(qū)域403的左端)的像素的讀出時(shí),在作為讀出對象的線中向上側(cè)移位一個(gè)像素的同時(shí)執(zhí)行位于另一端處的像素的讀出。其后,以相同方式依次執(zhí)行像素的讀出。當(dāng)執(zhí)行位于像素?cái)?shù)據(jù)讀出區(qū)域403中的上端的線中的末端處的像素的讀出時(shí),完成對于成像器件134的讀出處理。同時(shí)執(zhí)行關(guān)于成像器件135和136的讀出處理。
[0153]圖6B是其中組合了從成像器件134到136讀出的像素?cái)?shù)據(jù)的圖像存儲(chǔ)器170上的組合圖像414的示意圖。在此示例中,組合了通過圖6A所示的讀出方法讀出的像素?cái)?shù)據(jù)。假設(shè)組合圖像414中的箭頭方向是圖像存儲(chǔ)器170上的圖像數(shù)據(jù)的陣列排列方向。
[0154]在圖6C中,示出了當(dāng)從成像器件134到136讀出的像素?cái)?shù)據(jù)被顯示在顯示單元140中時(shí)所獲得的組合圖像的顯示示例。在此示例中,顯示了圖6B所示的組合圖像414。例如,組合圖像414被顯示在捕捉圖像顯示區(qū)域415中,并且單色圖像(例如黑色圖像或白色圖像)被顯示在捕捉圖像顯示區(qū)域415以上和以下的邊緣圖像顯示區(qū)域416和417中。假設(shè)顯示單元140中的箭頭方向是顯示單元140中的掃描方向。
[0155][DSP的配置示例]
[0156]圖7是第一實(shí)施例中的DSP200的內(nèi)部配置示例的框圖。DSP200包括成像控制單元201、CPU202、DMA (直接存儲(chǔ)器存取)控制器203、數(shù)據(jù)總線204、程序存儲(chǔ)器I/F205和圖像存儲(chǔ)器I/F206。DSP200包括成像器件I/F210、圖像緩沖器211到219、圖像信號處理單元220、分辨率轉(zhuǎn)換單元231、241和251以及圖像旋轉(zhuǎn)處理單元232和242。此外,DSP200包括顯示單元I/F233、外部顯示裝置I/F243、編碼單元252、記錄介質(zhì)I/F253、振蕩電路264到266和時(shí)鐘產(chǎn)生電路270。CPU202、DMA控制器203、圖像存儲(chǔ)器I/F206、圖像緩沖器211到219、圖像信號處理單元220等連接到數(shù)據(jù)總線204。來自成像范圍變換開關(guān)111、靜止圖像/運(yùn)動(dòng)圖像變換開關(guān)112、確定鍵114和樞軸旋轉(zhuǎn)狀態(tài)檢測單元150的信號被輸入到成像控制單元201。
[0157]樞軸旋轉(zhuǎn)狀態(tài)檢測單元150檢測第二殼體120相對于第一殼體110的樞軸旋轉(zhuǎn)狀態(tài),并將檢測結(jié)果輸出到成像控制單元201。樞軸旋轉(zhuǎn)狀態(tài)檢測單元150檢測例如由第一殼體110和第二殼體120形成的角度作為第二殼體120相對于第一殼體110的樞軸旋轉(zhuǎn)狀態(tài),并將檢測結(jié)果輸出到成像控制單元201。例如,在樞軸旋轉(zhuǎn)部件101中的某處提供角度檢測開關(guān),當(dāng)?shù)诙んw120相對于第一殼體110的樞軸旋轉(zhuǎn)角度小于固定值時(shí),該角度檢測開關(guān)未被按下,且當(dāng)樞軸旋轉(zhuǎn)角度等于或大于該固定值時(shí)該角度檢測開關(guān)被按下。樞軸旋轉(zhuǎn)狀態(tài)檢測單元150利用角度檢測開關(guān)檢測由第一殼體110和第二殼體120形成的角度。樞軸旋轉(zhuǎn)狀態(tài)檢測單元150是在所附權(quán)利要求中描述的檢測單元的示例。
[0158]成像控制單元201控制與成像處理有關(guān)的各單元。例如,成像控制單元201基于來自樞軸旋轉(zhuǎn)狀態(tài)檢測單元150的確定結(jié)果來確定第二殼體120相對于第一殼體110的樞軸旋轉(zhuǎn)狀態(tài),并基于該確定結(jié)果對各單元執(zhí)行成像控制。例如,成像控制單元201基于該確定結(jié)果確定作為由成像器件134到136產(chǎn)生的圖像數(shù)據(jù)之中的顯示或記錄的目標(biāo)的目標(biāo)圖像的范圍。成像控制單元201基于來自成像范圍變換開關(guān)111、靜止圖像/運(yùn)動(dòng)圖像變換開關(guān)112和確定鍵114的輸入信號對各單元執(zhí)行成像控制。稍后參考圖28A和圖28B到圖42A到圖42C詳細(xì)說明這些種類的成像控制。成像控制單元201是所附權(quán)利要求中描述的控制單元的示例。
[0159] 在第一實(shí)施例中,用戶可以預(yù)先設(shè)置記錄由成像單元130產(chǎn)生的圖像時(shí)的成像模式(圖像大小等)。例如,成像控制單元201使得顯示單元140顯示用于設(shè)置成像模式的菜單屏幕。用戶使用確定鍵114和十字鍵115在菜單屏幕上輸入期望的設(shè)置內(nèi)容。成像模式包括例如在成像期間使用的成像器件的數(shù)量以及在記錄期間的圖像的垂直方向圖像大小和水平方向圖像大小。成像模式包括表示圖像的有效面積與垂直同步信號之間的間隔的垂直后沿(back porch)和垂直前沿(front porch)以及表示圖像的有效面積與水平同步信號之間的間隔的水平后沿和水平前沿。成像控制單元201、DSP200中的單元以及成像器件134到136包括存儲(chǔ)成像模式的寄存器。
[0160]當(dāng)由用戶設(shè)置了成像模式時(shí),成像控制單元201向DSP200中的各單元和成像器件134到136通知所設(shè)置的成像模式,并使得各單元中所包括的寄存器存儲(chǔ)成像模式。以此方式,由用戶設(shè)置的成像模式的設(shè)置內(nèi)容被存儲(chǔ)在各單元中所包括的寄存器中。從而,用戶可以容易地切換并使用多個(gè)拍攝條件。
[0161]成像控制單元201例如基于并入其中的寄存器中所存儲(chǔ)的成像模式的設(shè)置內(nèi)容向DSP200中的各單元和成像器件134到136通知垂直同步信號、水平同步信號和時(shí)鐘信號。成像控制單元201例如基于并入其中的寄存器中所存儲(chǔ)的成像模式的設(shè)置內(nèi)容向DSP200中的與顯示有關(guān)的單 元和顯示單元140通知該垂直同步信號、水平同步信號和時(shí)鐘信號。成像控制單元201例如向電源控制單元207輸出用于控制電源的開啟和關(guān)閉的信號。
[0162]CPU202基于存儲(chǔ)在程序存儲(chǔ)器160中的各種計(jì)算機(jī)程序來控制整個(gè)DSP200。
[0163]DMA控制器203基于CPU202的控制來控制數(shù)據(jù)在各存儲(chǔ)器之間的傳送。
[0164]程序存儲(chǔ)器I/F205是用于連接程序存儲(chǔ)器160和DSP200的接口。
[0165]圖像存儲(chǔ)器I/F206是用于連接圖像存儲(chǔ)器170和DSP200的接口。
[0166]成像器件I/F210是用于連接成像器件134到136和DSP200的接口。具體地,由成像器件134到136產(chǎn)生的圖像數(shù)據(jù)被輸入到成像器件I/F210。例如,當(dāng)用于傳輸來自成像器件134到136的圖像數(shù)據(jù)的數(shù)據(jù)線LI是具有微小振幅的LVDS類型時(shí),來自成像器件134到136的圖像數(shù)據(jù)被轉(zhuǎn)換成DSP I/F137到139中的GND電勢或者電源電勢。與成像器件134到136對應(yīng)的三個(gè)系統(tǒng)中的圖像緩沖器211到219被提供在成像器件I/F210的后一級。
[0167]圖像緩沖器211到219是存儲(chǔ)從成像器件134到136輸出的圖像數(shù)據(jù)的圖像緩沖器。所存儲(chǔ)的圖像數(shù)據(jù)被經(jīng)由數(shù)據(jù)總線204寫入圖像存儲(chǔ)器170中。例如,為每個(gè)成像器件提供三個(gè)圖像緩沖器。圖像緩沖器連接到數(shù)據(jù)總線204。例如,為成像器件134提供三個(gè)圖像緩沖器211到213。為成像器件135提供三個(gè)圖像緩沖器214到216。為成像器件136提供三個(gè)圖像緩沖器217到219。在第一實(shí)施例中,即使在從圖像緩沖器211到219讀出圖像數(shù)據(jù)以便將圖像數(shù)據(jù)寫入圖像存儲(chǔ)器170中時(shí),重新從成像器件134到136輸入的圖像數(shù)據(jù)也被依次存儲(chǔ)在圖像緩沖器211到219中。因此,期望為每個(gè)成像器件134到136提供兩個(gè)或更多個(gè)圖像緩沖器作為圖像緩沖器211到219。
[0168]期望圖像緩沖器211到219之一的容量大于數(shù)據(jù)總線204的位寬。例如,當(dāng)數(shù)據(jù)總線具有128位寬時(shí),期望圖像緩沖器具有等于或大于128位的容量。期望圖像緩沖器211到219之一的容量等于或大于數(shù)據(jù)總線204的位寬的兩倍。例如,當(dāng)數(shù)據(jù)總線204具有128位寬時(shí),期望圖像緩沖器具有等于或大于256位的容量。
[0169]另一方面,圖像緩沖器211到219之一的容量可以被設(shè)置為等于或小于由一個(gè)成像器件產(chǎn)生的一個(gè)圖像的圖像數(shù)據(jù)量。例如,期望圖像緩沖器211到219之一的容量等于或小于由成像器件134的一條線的像素產(chǎn)生的圖像數(shù)據(jù)的數(shù)據(jù)量。[0170]在第一實(shí)施例中,連接成像器件134到136和DSP200的數(shù)據(jù)線的位寬被設(shè)置為例如12位。例如,DSP200的數(shù)據(jù)總線204的位寬被設(shè)置為128位寬,并且圖像緩沖器211到219之一的容量被設(shè)置為128位。
[0171]圖像信號處理單元220基于成像控制單元201的控制將各種圖像信號處理應(yīng)用于經(jīng)由圖像緩沖器211到219和數(shù)據(jù)總線220輸入的圖像數(shù)據(jù)。稍后參考圖8詳細(xì)說明圖像信號處理單元220的內(nèi)部配置。
[0172]分辨率轉(zhuǎn)換單元231基于成像控制單元201的控制執(zhí)行分辨率轉(zhuǎn)換以使得顯示單元140顯示圖像,并將經(jīng)歷了分辨率轉(zhuǎn)換的圖像數(shù)據(jù)輸出到圖像旋轉(zhuǎn)處理單元232。
[0173]分辨率轉(zhuǎn)換單元241基于成像控制單元201的控制執(zhí)行分辨率轉(zhuǎn)換以使得外部顯示裝置245顯示圖像,并將經(jīng)歷了分辨率轉(zhuǎn)換的圖像數(shù)據(jù)輸出到圖像旋轉(zhuǎn)處理單元242。
[0174]圖像旋轉(zhuǎn)處理單元232基于成像控制單元201的控制將旋轉(zhuǎn)處理應(yīng)用于經(jīng)歷了分辨率轉(zhuǎn)換的圖像數(shù)據(jù),并將經(jīng)歷了旋轉(zhuǎn)處理的圖像數(shù)據(jù)輸出到顯示單元I/F233。
[0175]圖像旋轉(zhuǎn)處理單元242基于成像控制單元201的控制將旋轉(zhuǎn)處理應(yīng)用于經(jīng)歷了分辨率轉(zhuǎn)換的圖像數(shù)據(jù),并將經(jīng)歷了旋轉(zhuǎn)處理的圖像數(shù)據(jù)輸出到外部顯示裝置I/F243。
[0176]顯示單元I/F233是用于連接顯示單元140和DSP200的接口。
[0177]外部顯示裝置I/F243是用于連接外部顯示裝置245和DSP200的接口。外部顯示裝置245是例如電視機(jī)。
[0178]分辨率轉(zhuǎn)換單元2 51基于成像控制單元201的控制轉(zhuǎn)換用于記錄圖像的分辨率,并將經(jīng)歷了分辨率轉(zhuǎn)換的圖像數(shù)據(jù)輸出到編碼單元252。例如,分辨率轉(zhuǎn)換單元251執(zhí)行用于將分辨率轉(zhuǎn)換到用戶期望的記錄圖像大小的分辨率轉(zhuǎn)換處理和用于產(chǎn)生縮略圖圖像的分辨率轉(zhuǎn)換處理。
[0179]編碼單元252執(zhí)行用于壓縮從分辨率轉(zhuǎn)換單元251輸出的圖像數(shù)據(jù)的編碼,并將已編碼的圖像數(shù)據(jù)輸出到記錄介質(zhì)I/F253。
[0180]記錄介質(zhì)I/F253是用于連接記錄介質(zhì)180和DSP200的接口。
[0181]記錄介質(zhì)180是記錄經(jīng)由記錄介質(zhì)I/F253提供的圖像數(shù)據(jù)的記錄介質(zhì)。記錄介質(zhì)180可以被并入蜂窩電話設(shè)備100中,或者可以被可拆卸地附于蜂窩電話設(shè)備100。作為記錄介質(zhì)180,例如,可以使用帶(例如磁帶)或光盤(例如可記錄DVD (數(shù)字通用盤))。作為記錄介質(zhì)180,例如可以使用磁盤(例如硬盤)、半導(dǎo)體存儲(chǔ)器(例如存儲(chǔ)卡)或磁光盤(例如MD (迷你盤))。
[0182]稍后參考圖9到圖11詳細(xì)說明振蕩電路264到266和時(shí)鐘產(chǎn)生電路270。
[0183][圖像信號處理單元220的內(nèi)部配置示例]
[0184]圖8是第一實(shí)施例中的圖像信號處理單元220的內(nèi)部配置示例的框圖。圖像信號處理單元220包括像素相加處理單元221、解馬賽克處理單元222、YC轉(zhuǎn)換處理單元223、圖像組合處理單元224、銳度處理單元225、顏色調(diào)整處理單元226和RGB轉(zhuǎn)換處理單元227。
[0185]像素相加處理單元221將像素相加處理和像素稀疏處理應(yīng)用于由成像器件134到136產(chǎn)生的圖像數(shù)據(jù)。稍后參考圖43等詳細(xì)說明圖像相加處理單元221。
[0186]解馬賽克處理單元222執(zhí)行解馬賽克處理(插值處理),使得在由成像器件134到136產(chǎn)生的圖像數(shù)據(jù)(馬賽克圖像)的像素位置中,對于R、G、B的所有信道的強(qiáng)度被設(shè)置為相同。解馬賽克處理單元222將經(jīng)歷了解馬賽克處理的RGB圖像提供給YC轉(zhuǎn)換處理單元223。具體地,解馬賽克處理單元222對僅具有對每一個(gè)像素一個(gè)顏色的像素?cái)?shù)據(jù)的Bayer數(shù)據(jù)進(jìn)行插值,并計(jì)算一個(gè)像素的R、G、B的三個(gè)像素?cái)?shù)據(jù)。
[0187]YC轉(zhuǎn)換處理單元223將YC矩陣處理以及對于色度分量的帶限制應(yīng)用于由解馬賽克處理單元222產(chǎn)生的RGB圖像,以由此產(chǎn)生亮度信號(Y)和色差信號(Cr,Cb)。所產(chǎn)生的亮度信號(Y)和色差信號(Cr,Cb)被提供給圖像組合處理單元224。
[0188]圖像組合處理單元224將圖像組合應(yīng)用于由YC轉(zhuǎn)換處理單元223產(chǎn)生的圖像數(shù)據(jù),并將所組合的圖像數(shù)據(jù)輸出到銳度處理單元225。稍后參考圖18到圖26A到圖26C詳細(xì)說明該圖像組合處理。圖像組合處理單元224是所附權(quán)利要求中描述的圖像組合單元的示例。
[0189]銳度處理單元225將用于提取帶有大的信號改變的部分并高亮顯示該部分的銳度處理(高亮顯示被攝體的輪廓的處理)應(yīng)用于由圖像組合處理單元224產(chǎn)生的圖像數(shù)據(jù)。銳度處理單元225將經(jīng)歷了銳度處理的圖像數(shù)據(jù)提供給顏色調(diào)整處理單元226。
[0190]顏色調(diào)整處理單元226將色調(diào)和色度調(diào)整應(yīng)用于經(jīng)歷了銳度處理單元225的銳度處理的圖像數(shù)據(jù)。
[0191]RGB轉(zhuǎn)換處理單元227將經(jīng)歷了顏色調(diào)整處理單元226的色調(diào)和色度調(diào)整的圖像數(shù)據(jù)從YCbCr數(shù)據(jù)轉(zhuǎn)換成RGB數(shù)據(jù)。
[0192]說明圖像信號處理單元220的信號的圖像數(shù)據(jù)的流程。例如,假設(shè)圖像信號處理單元220中的每個(gè)信號處理單元通過數(shù)據(jù)總線204直接從圖像存儲(chǔ)器170讀取圖像數(shù)據(jù),并將信號處理之后的圖像數(shù)據(jù)經(jīng)過數(shù)據(jù)總線204寫入圖像存儲(chǔ)器170中。其優(yōu)點(diǎn)在于,圖像信號處理單元220可以在期望的時(shí)刻讀取圖像數(shù)據(jù)中的期望位置處的圖像數(shù)據(jù)。但是,因?yàn)樾枰?jīng)過數(shù)據(jù)總線204傳輸?shù)臄?shù)據(jù)量增加,需要增加數(shù)據(jù)總線204的工作頻率。因此,很可能數(shù)據(jù)總線204的設(shè)計(jì)很困難并且功耗增加。
[0193]例如,假設(shè)圖像信號處理單元220中的每個(gè)信號處理單元不經(jīng)過數(shù)據(jù)總線204而從在前一級處的信號處理單元接收圖像數(shù)據(jù),并且不經(jīng)過數(shù)據(jù)總線204而將在信號處理之后的圖像數(shù)據(jù)傳遞到后一級處的信號處理單元。在此情況下,不使用數(shù)據(jù)總線204。其優(yōu)點(diǎn)在于,LSI的設(shè)計(jì)容易,并且可以降低功耗。但是,很可能每個(gè)信號處理單元可能不能在期望時(shí)刻讀取圖像數(shù)據(jù)中的期望位置處的圖像數(shù)據(jù)。
[0194]因此,在第一實(shí)施例中,在解馬賽克處理單元222和具有基本上固定的圖像大小的顏色調(diào)整處理單元226之間,為了降低數(shù)據(jù)總線204的工作頻率和功耗,在各信號處理單元之間直接傳遞圖像數(shù)據(jù)。在分辨率轉(zhuǎn)換中使用大量的圖像數(shù)據(jù)的前一級信號處理單元處,當(dāng)圖像數(shù)據(jù)被寫入圖像存儲(chǔ)器170中并且執(zhí)行分辨率轉(zhuǎn)換時(shí),從圖像存儲(chǔ)器170讀出期望的圖像數(shù)據(jù)。
[0195][時(shí)鐘產(chǎn)生電路的配置示例]
[0196] 圖9是第一實(shí)施例中的時(shí)鐘產(chǎn)生電路270的內(nèi)部配置示例的框圖。時(shí)鐘產(chǎn)生電路270包括用于高頻時(shí)鐘20和24的倍頻器、用于高頻時(shí)鐘21和25的分頻器、用于低頻時(shí)鐘22和26的倍頻器、以及用于低頻時(shí)鐘23和27的分頻器。時(shí)鐘產(chǎn)生電路270包括用于時(shí)鐘28和30的倍頻器以及用于時(shí)鐘29和31的分頻器。倍頻器將輸入時(shí)鐘的頻率倍頻。分頻器將輸入時(shí)鐘的頻率降低到1/η (η是任意整數(shù))。在此示例中,時(shí)鐘產(chǎn)生電路270根據(jù)圖7所示的DSP中的各單元的連接目的地而產(chǎn)生至少六種時(shí)鐘。[0197]振蕩器261到263是用于產(chǎn)生被提供到DSP200中的時(shí)鐘信號的振蕩源。例如,使
用石英振蕩器。
[0198]振蕩電路264到266產(chǎn)生被提供到DSP200中的時(shí)鐘信號,并將所產(chǎn)生的時(shí)鐘信號輸出到時(shí)鐘產(chǎn)生電路270。
[0199]由時(shí)鐘產(chǎn)生電路270產(chǎn)生的六種時(shí)鐘的兩種是被提供給成像器件134到136的時(shí)鐘。被提供給成像器件134到136的時(shí)鐘中的一種是具有相對大的頻率的時(shí)鐘,用于產(chǎn)生具有相對大的數(shù)量的像素的圖像。從振蕩電路264輸出的時(shí)鐘被輸入到用于高頻時(shí)鐘20的倍頻器并被倍頻,且倍頻后的時(shí)鐘被輸入到用于高頻時(shí)鐘21的分頻器并被分頻,由此產(chǎn)生具有相對大的頻率的時(shí)鐘。另一種是具有相對小的頻率的時(shí)鐘,用于產(chǎn)生具有相對小數(shù)量的像素的圖像。從振蕩電路264輸出的時(shí)鐘被輸入到用于低頻時(shí)鐘22的倍頻器,并被倍頻,并且倍頻后的時(shí)鐘被輸入到用于低頻時(shí)鐘23的分頻器并被分頻,由此產(chǎn)生具有相對小的頻率的時(shí)鐘。由用于高頻時(shí)鐘21的分頻器和用于低頻時(shí)鐘23的分頻器分頻的時(shí)鐘被作為在時(shí)鐘產(chǎn)生電路270中產(chǎn)生的時(shí)鐘輸出,并經(jīng)過DSP200的內(nèi)部被提供給成像器件134到136。被提供給成像器件134到136的時(shí)鐘不限于此示例中說明的兩種。期望根據(jù)成像操作產(chǎn)生的圖像的大小而產(chǎn)生并使用很多種類的時(shí)鐘。
[0200]由時(shí)鐘產(chǎn)生電路270產(chǎn)生的六種時(shí)鐘中的另外兩種是在DSP200的內(nèi)部使用的時(shí)鐘。在DSP200的內(nèi)部使用的時(shí)鐘中的一種是具有相對大的頻率的時(shí)鐘,用于產(chǎn)生具有相對大的數(shù)量的像素的圖像。從振蕩電路264輸出的時(shí)鐘被輸入到用于高頻時(shí)鐘24的倍頻器并被倍頻,且倍頻后的 時(shí)鐘被輸入到用于高頻時(shí)鐘25的分頻器并被分頻,由此產(chǎn)生具有相對大的頻率的時(shí)鐘。另一種是具有相對小的頻率的時(shí)鐘,用于產(chǎn)生具有相對小的數(shù)量的像素的圖像。從振蕩電路264輸出的時(shí)鐘被輸入到用于低頻時(shí)鐘26的倍頻器并被倍頻,并且倍頻后的時(shí)鐘被輸入到用于低頻時(shí)鐘27的分頻器并被分頻,由此產(chǎn)生具有相對小的頻率的時(shí)鐘。由用于高頻時(shí)鐘25的分頻器和用于低頻時(shí)鐘27的分頻器分頻的時(shí)鐘被作為在時(shí)鐘產(chǎn)生電路270中產(chǎn)生的時(shí)鐘而輸出,并被提供給DSP200的內(nèi)部。在DSP200的內(nèi)部使用的時(shí)鐘不限于在此示例中說明的兩種。期望根據(jù)成像操作產(chǎn)生的圖像的大小而產(chǎn)生并使用很多種類的時(shí)鐘。
[0201]由時(shí)鐘產(chǎn)生電路270產(chǎn)生的六種時(shí)鐘中的其余兩種是用于在顯示單元140中顯示圖像的像素時(shí)鐘和用于在蜂窩電話設(shè)備100外部的顯示裝置(例如外部顯示裝置245)中顯示圖像的像素時(shí)鐘。從振蕩電路265輸出的時(shí)鐘被輸入到用于時(shí)鐘28的倍頻器并被倍頻,并且倍頻后的時(shí)鐘被輸入到用于時(shí)鐘29的分頻器并被分頻,由此產(chǎn)生用于在顯示單元140中顯示圖像的像素時(shí)鐘。從振蕩電路266輸出的時(shí)鐘被用于時(shí)鐘30的倍頻器倍頻,并且倍頻后的時(shí)鐘被輸入到用于時(shí)鐘31的分頻器并被分頻,由此產(chǎn)生用于在蜂窩電話設(shè)備100的外部的顯示裝置中顯示圖像的像素時(shí)鐘。由用于時(shí)鐘29的分頻器分頻的時(shí)鐘被作為在時(shí)鐘產(chǎn)生電路270中產(chǎn)生的時(shí)鐘而輸出,并經(jīng)過DSP200的內(nèi)部被提供給顯示單元140。由用于時(shí)鐘31的分頻器分頻的時(shí)鐘被作為在時(shí)鐘產(chǎn)生電路270中產(chǎn)生的時(shí)鐘而輸出,并經(jīng)過DSP200的內(nèi)部被提供給蜂窩電話設(shè)備100外部的顯示裝置。用于圖像顯示的時(shí)鐘不限于在此示例中說明的兩種。期望根據(jù)與蜂窩電話設(shè)備100連接的顯示裝置的規(guī)范而產(chǎn)生并使用很多種類的時(shí)鐘。
[0202]圖10和圖11是第一實(shí)施例中的時(shí)鐘產(chǎn)生電路270的修改的框圖。[0203]在圖10所示的示例中,被提供給成像器件134到136的兩種時(shí)鐘共享一個(gè)倍頻器(用于時(shí)鐘32的倍頻器),并且被提供給DSP200的內(nèi)部的兩種時(shí)鐘共享一個(gè)倍頻器(用于時(shí)鐘33的倍頻器)。
[0204]在圖11所示的示例中。被提供給成像器件134到136的多種時(shí)鐘和被提供給DSP200的內(nèi)部的多種時(shí)鐘共享一個(gè)倍頻器(用于時(shí)鐘34的倍頻器)。
[0205][成像器件的配置示例和像素讀出示例]
[0206]圖12是第一實(shí)施例中的成像器件的內(nèi)部配置示例的圖。因?yàn)槌上衿骷?34到136的內(nèi)部配置基本相同,因此在圖12中僅示出了成像器件134,并省略了其他成像器件的說明。在圖12中,作為成像器件134,作為例子說明CMOS成像器件。
[0207]成像器件134包括像素40-47、垂直掃描電路340和水平掃描電路345。成像器件134包括ADC (A/D (模擬/數(shù)字)轉(zhuǎn)換器)350到353、加法器354到357和366以及列鎖存器358到361。此外,成像器件134包括開關(guān)362到365、輸出鎖存器367、輸出電路368、寄存器370和380以及倍頻器/分頻器電路391和392??偟膩碚f,縱向方向上的成像器件的陣列被稱為列,而橫向方向(lateral direction)上的成像器件的陣列被稱為行。因此,在以下說明中,適當(dāng)?shù)厥褂妹Q“列”和“行”。在此示例中,在成像器件134中,代表性地說明一部分像素(像素40到47)和與像素有關(guān)的單元。省略了其他組件的例示和說明。
[0208]在成像器件134中,垂直控制線341到344在行方向上連線,并且出現(xiàn)在同一條線上的每隔一個(gè)像素連接到相同的垂直控制線。數(shù)據(jù)讀出線346到349在列方向上連線,并且出現(xiàn)在同一條線上的像素共享一條讀出線。
[0209]垂直掃描電路340 經(jīng)過在行方向上連線的垂直控制線341到344接通和斷開在像素40到47與數(shù)據(jù)讀出線346到349之間的開關(guān)。具體地,在行方向上的像素中,出現(xiàn)在行方向上的同一條線上的像素中的每隔一個(gè)像素被共同地接通和斷開。像素40到47的圖像數(shù)據(jù)被經(jīng)過各像素和與各像素對應(yīng)的數(shù)據(jù)讀出線之間開關(guān)而輸出到數(shù)據(jù)讀出線346到349。
[0210]水平掃描電路345接通和斷開列鎖存器358到361和開關(guān)362到365。能夠在根據(jù)垂直掃描電路340對開關(guān)的開和關(guān)的選擇以及水平掃描電路345對開關(guān)362到365的開和關(guān)的選擇而依次選擇像素的同時(shí)以時(shí)分方式讀出所有像素的信號。輸出數(shù)據(jù)線369是用于從成像器件134輸出列的輸出結(jié)果的輸出數(shù)據(jù)線。
[0211]在成像器件134中,按二維方格形狀排列像素40到47。因?yàn)橄袼?0到47的配置相同,所以將像素40作為例子進(jìn)行說明。像素40包括作為光接收單元的光電二極管51、放大器52和開關(guān)53。光電二極管51將照射在像素上的光轉(zhuǎn)換成與光量對應(yīng)的電荷。放大器52是放大由光電二極管51轉(zhuǎn)換的電荷的信號的放大器。開關(guān)53是根據(jù)垂直控制線342的開和關(guān)而控制像素40的電荷轉(zhuǎn)移的開關(guān)。
[0212]各列包括ADC350到353、加法器354到357和列鎖存器358到361。在以下說明中,將與數(shù)據(jù)讀出線346連接的ADC350、加法器354和列鎖存器358作為示例進(jìn)行說明。
[0213]ADC350是將作為模擬值的來自像素的圖像數(shù)據(jù)轉(zhuǎn)換成數(shù)字?jǐn)?shù)據(jù)(數(shù)字值)的AD轉(zhuǎn)換器。
[0214]每次圖像數(shù)據(jù)由ADC350轉(zhuǎn)換成數(shù)字?jǐn)?shù)據(jù)時(shí),加法器354將轉(zhuǎn)換之后的新數(shù)字?jǐn)?shù)據(jù)加到列鎖存器158中所存儲(chǔ)的數(shù)字?jǐn)?shù)據(jù)。
[0215]列鎖存器358是依次存儲(chǔ)由ADC350轉(zhuǎn)換的數(shù)字?jǐn)?shù)據(jù)的列鎖存器。列鎖存器是指示存儲(chǔ)AD轉(zhuǎn)換之后的數(shù)字?jǐn)?shù)據(jù)的數(shù)據(jù)存儲(chǔ)電路的名稱。作為數(shù)據(jù)存儲(chǔ)電路,除了包括線性電路的鎖存器之外,還可以使用諸如包括同步電路的觸發(fā)器之類的可以存儲(chǔ)數(shù)字?jǐn)?shù)據(jù)的電路。
[0216]例如,從像素40輸出的圖像數(shù)據(jù)在通過ADC350、加法器354和列鎖存器358之后經(jīng)過與數(shù)據(jù)讀出線346連接的開關(guān)362而輸出到輸出數(shù)據(jù)線390。在第一實(shí)施例中,像各列的數(shù)據(jù)讀出線一樣,輸出數(shù)據(jù)線390包括加法器366和輸出鎖存器367,并執(zhí)行圖像數(shù)據(jù)的相加和存儲(chǔ)。存儲(chǔ)在輸出鎖存器367中的圖像數(shù)據(jù)被經(jīng)過輸出電路368輸出到輸出數(shù)據(jù)線369。來自輸出數(shù)據(jù)線369的圖像數(shù)據(jù)被輸出到數(shù)據(jù)線LI。
[0217]倍頻器/分頻器391和392基于來自DSP200的控制執(zhí)行輸入時(shí)鐘的頻率的倍頻或者輸入時(shí)鐘的頻率的分頻。倍頻器/分頻器391和392將產(chǎn)生的時(shí)鐘提供給垂直掃描電路340、水平掃描電路345和輸出電路368。
[0218]信號線393是用于供應(yīng)來自DSP200的垂直同步信號的垂直同步信號線。信號線394是用于供應(yīng)來自DSP200的水平同步信號的水平同步信號線。
[0219]信號線395是用于供應(yīng)來自DSP200的時(shí)鐘信號的時(shí)鐘信號線。信號線396是用于從DSP200控制成像操作的開啟和關(guān)閉的信號線以及用于控制像素稀疏的信號線。信號線397是成像器件134和DSP200之間的雙向通信線。信號線398是電源線。
[0220]寄存器370和380是其中存儲(chǔ)了與成像操作有關(guān)的設(shè)置值的寄存器。在圖13A和13B中示出了所存儲(chǔ)的內(nèi)容的示例。
[0221]圖13A和圖13B是第一實(shí)施例中的成像器件134中所包括的寄存器370和380的所存儲(chǔ)內(nèi)容的示意圖。在寄存器370和380中,存儲(chǔ)了與成像操作有關(guān)的設(shè)置值。設(shè)置值被提供給垂直掃描電路340和水平掃描電路345。設(shè)置值可以是可通過用戶操作改變的。稍后參考圖28A和圖28B以及圖42A到圖42C詳細(xì)說明所存儲(chǔ)的內(nèi)容和基于所存儲(chǔ)的內(nèi)容執(zhí)行的成像操作。
[0222]圖14到圖16是第一實(shí)施例中對成像器件134中的像素的控制信號和從像素輸出的數(shù)據(jù)的狀態(tài)的示意時(shí)序圖。圖14到圖16中所示的橫軸是時(shí)間軸。圖14到圖16中所示的垂直控制線341到344和列鎖存器358到361由與對應(yīng)于其的圖12中所示的附圖標(biāo)記相同的附圖標(biāo)記指示。圖14到圖16所示的列鎖存器讀出信號由與對應(yīng)于其的圖12中所示的開關(guān)362到365的附圖標(biāo)記相同的附圖標(biāo)記指示。
[0223]在圖14所示的示例中,說明讀出成像器件134中的所有像素時(shí)的成像操作。
[0224]通過使用垂直控制線341到344將與某些行(例如像素40到43的線)連接的所有成像器件134的圖像數(shù)據(jù)輸出到各列的數(shù)據(jù)讀出線346到349。隨后,輸出到數(shù)據(jù)讀出線346到349的像素?cái)?shù)據(jù)被各列的ADC350到353進(jìn)行AD轉(zhuǎn)換。隨后,ADC350到353的輸出被存儲(chǔ)在各列的列鎖存器348到361中。例如,像素?cái)?shù)據(jù)dl到d4被存儲(chǔ)在圖14所示的列鎖存器358到361中。隨后,水平掃描電路345以逐列的順序接通從列鎖存器358至361到輸出數(shù)據(jù)線390的讀出開關(guān)362到365。這使得能夠按順序讀出一條線中的像素?cái)?shù)據(jù)。例如,在像素?cái)?shù)據(jù)dl被輸出到圖14所示的輸出數(shù)據(jù)線390后,依次輸出像素?cái)?shù)據(jù)d2和d3。
[0225] 其后,類似地,每次完成水平方向上的一條線的讀出時(shí),垂直掃描電路340以逐行的順序接通從像素到垂直信號線的讀出開關(guān)。從而,各行中的像素?cái)?shù)據(jù)被輸入到ADC350到353。在輸入像素?cái)?shù)據(jù)被ADC350到353進(jìn)行AD轉(zhuǎn)換之后,像素?cái)?shù)據(jù)被存儲(chǔ)在各列的列鎖存器358到361中。例如,像素?cái)?shù)據(jù)d5到d8被存儲(chǔ)在圖14所示的列鎖存器358到361中。隨后,水平掃描電路354以逐列的順序接通從列鎖存器358至361到輸出數(shù)據(jù)線390的讀出開關(guān)362到365,并按順序讀出一條線中的像素?cái)?shù)據(jù)。例如,像素?cái)?shù)據(jù)d5到d8被依次輸出到圖14所示的輸出數(shù)據(jù)線309。
[0226]在圖15所示的示例中,將通過水平稀疏像素而讀取成像器件134中的像素的成像操作作為像素稀疏讀出的示例進(jìn)行說明。
[0227]垂直掃描電路340接通僅在期望的列中的從像素到垂直信號線346至349的讀出開關(guān)。從而,僅特定行中的像素?cái)?shù)據(jù)被輸入到ADC350到353,并被ADC350到353進(jìn)行AD轉(zhuǎn)換。ADC350到353的輸出被存儲(chǔ)在各列中的列鎖存器358到361中。例如,連接到垂直控制線342和344的讀出開關(guān)被接通,由此像素?cái)?shù)據(jù)dl和d3被存儲(chǔ)在圖15所示的列鎖存器358和360中。在完成對于一行的此讀出之后,例如,連接到垂直控制線342和344的讀出開關(guān)被接通,由此像素?cái)?shù)據(jù)d5和d7被存儲(chǔ)在圖15所示的列鎖存器358和360中。
[0228]水平掃描電路345接通僅期望 的列中的從列鎖存器358至361到輸出數(shù)據(jù)線390的讀出開關(guān)。這使得能夠按順序僅讀出一條線中的特定像素?cái)?shù)據(jù)。
[0229]例如,在水平方向上,當(dāng)從N條(piece)像素?cái)?shù)據(jù)中讀出一條像素?cái)?shù)據(jù)時(shí),在水平方向上執(zhí)行1/N稀疏讀出。例如,當(dāng)讀出兩條像素?cái)?shù)據(jù)中的一條像素?cái)?shù)據(jù)時(shí),在水平方向上執(zhí)行1/2稀疏讀出。當(dāng)讀出四條像素?cái)?shù)據(jù)之中的一條像素?cái)?shù)據(jù)時(shí),在水平方向上執(zhí)行1/4稀疏讀出。
[0230]與水平方向上(即行方向)的稀疏操作同時(shí)地,還可以執(zhí)行垂直方向上(即列方向)的稀疏操作。例如,當(dāng)在垂直方向上讀出M條線中的一條線中的像素?cái)?shù)據(jù)時(shí),執(zhí)行垂直方向上的1/M稀疏讀出。例如,當(dāng)讀出兩行中的一行的像素?cái)?shù)據(jù)時(shí),在垂直方向上執(zhí)行1/2稀疏讀出。當(dāng)讀出四行中的一行的像素?cái)?shù)據(jù)時(shí),在垂直方向上執(zhí)行1/4稀疏讀出。
[0231]在圖16所示的示例中,說明在執(zhí)行成像器件134中的像素的像素相加讀出時(shí)的成像操作。在此示例中,將水平方向上的1/2像素相加讀出和垂直方向上的1/2像素相加讀出情況下的成像操作作為示例進(jìn)行說明。
[0232]如在所有像素讀出的情況下,通過使用垂直控制線,連接到某一行的所有成像器件134的數(shù)據(jù)被輸出到各列中所包括的數(shù)據(jù)讀出線、進(jìn)行AD轉(zhuǎn)換并被存儲(chǔ)在列鎖存器中。不像所有像素讀出的情況那樣,通過使用另一垂直控制線,連接到另一行的所有成像器件134的數(shù)據(jù)被輸出到各列中所包括的數(shù)據(jù)讀出線,并被進(jìn)行AD轉(zhuǎn)換。通過使用加法器,該數(shù)據(jù)被加到列鎖存器中所存儲(chǔ)的數(shù)據(jù)。通過此方法根據(jù)垂直方向上的期望數(shù)量的線累加像素?cái)?shù)據(jù)的值。相加后的數(shù)據(jù)被存儲(chǔ)在列鎖存器中。例如,像素?cái)?shù)據(jù)dl+d5、d2+d6、d3+d7和d4+d8被存儲(chǔ)在列鎖存器358至361中。在累加了垂直方向上的N條像素?cái)?shù)據(jù)后,將相加結(jié)果作為一條像素?cái)?shù)據(jù)輸出,由此執(zhí)行垂直方向上的1/N像素相加讀出。
[0233]隨后,水平掃描電路345依次逐列地接通從列鎖存器到輸出數(shù)據(jù)線390的讀出開關(guān)。在此情況下,從列鎖存器讀出到輸出數(shù)據(jù)線390的數(shù)據(jù)由輸出數(shù)據(jù)線390的加法器366累加并被存儲(chǔ)在輸出鎖存器367中。在水平方向?qū)ζ谕麛?shù)量的列重復(fù)相加處理,并且相加后的數(shù)據(jù)被輸出到成像器件134。例如,通過累加像素?cái)?shù)據(jù)dl+d5和像素?cái)?shù)據(jù)d2+d6獲得的數(shù)據(jù)dl+d5+d2+d6被經(jīng)由輸出數(shù)據(jù)線369輸出到成像器件134。在水平方向上累加M行中的像素?cái)?shù)據(jù),由此在水平方向上執(zhí)行1/M像素相加讀出。以上所述的處理使得能夠執(zhí)行水平方向上(行方向)的相加處理和垂直方向上(列方向)的相加處理。
[0234]當(dāng)執(zhí)行圖15所示的稀疏讀出和圖16所示的像素相加讀出時(shí),期望使得成像器件根據(jù)多種稀疏比率和像素相加比率而工作。因此,以下說明使得成像器件根據(jù)多種稀疏比率和像素相加比率而工作的掃描電路。
[0235]圖17A和圖17B是第一實(shí)施例中用于執(zhí)行成像器件134的稀疏處理的掃描電路的示例的示意圖。在圖17A中,示出了三種掃描電路104到106。在圖17B中,示出了 1/N間隔(curtaining)掃描電路。在圖17A和17B所示的示例中,關(guān)于與用于所有像素讀出、1/2稀疏讀出和1/4稀疏讀出的三種像素稀疏比率對應(yīng)的成像器件的掃描電路,成像器件的橫向方向像素的數(shù)量是1024。
[0236]如圖17A所示,掃描電路104是包括1024條輸出信號線的1024到I掃描電路(scan_a[n (O ^ n ^ 1023:η是整數(shù))])。掃描電路104將信號線逐一改變到使能狀態(tài),然后將信號線改變到禁能狀態(tài)。掃描電路105是包括512條輸出信號線的512到I掃描電路(scan_b[n (O < η < 511:n是整數(shù))])。掃描電路105將信號線逐一改變到使能狀態(tài),然后將信號線改變到禁能狀態(tài)。掃描電路106是包括256條輸出信號線的256到I掃描電路(scan_c[n (O ^ n ^ 255:η是整數(shù))])。掃描電路106將信號線逐一改變到使能狀態(tài),然后將信號線改變到禁能狀態(tài)。
[0237]如圖17B所示,掃描電路105的輸出信號線、掃描電路106的輸出信號線和指示選擇三種像素稀疏比率中的哪個(gè)的控制線連接到掃描電路104的1024條輸出信號線中的具有4的倍數(shù)的數(shù)字的信號線。三種控制線是與所有像素讀出(Sel_lperl)、l/2稀疏讀出(sel_lper2)和1/4稀疏讀出(sel_lper4)對應(yīng)的控制線。
[0238]掃描電路105的輸出信號線和指示選擇兩種像素稀疏比率中的哪個(gè)的控制線連接到掃描電路104的1024條輸出信號線中的具有2的倍數(shù)而不是4的倍數(shù)的數(shù)字的信號線。兩種控制線是與所有像素讀出和1/2稀疏讀出對應(yīng)的控制線。
[0239]指示是否選擇所有像素讀出的控制線連接到掃描電路104的1024條輸出信號線之中的上述信號線以外的信號線。
[0240]根據(jù)來自圖17B所示的掃描電路的輸出(scan_out[n(0≤η≤1023:η是整數(shù))]),在成像器件134中,能夠執(zhí)行所有像素讀出、1/2稀疏讀出和1/4稀疏讀出中每個(gè)的稀疏處理。
[0241] [成像系統(tǒng)的排列配置示例]
[0242]圖18是第一實(shí)施例中的成像單元130和被攝體之間的關(guān)系的示意圖。在圖18中,僅示出了圖3所示的成像單元130中的第一到第三成像系統(tǒng)191到193中的光學(xué)系統(tǒng)131到133和成像器件134到136,并省略了其他組件。在圖18中,作為成像目標(biāo)的被攝體被表不為被攝體表面300。蜂窩電話設(shè)備100被排列為使得第一成像系統(tǒng)191的光軸垂直于被攝體表面300。
[0243]在成像單元130中,由第一成像系統(tǒng)191的光軸194和第二成像系統(tǒng)192的光軸195形成的角度被表不為Θ O。類似地,由第一成像系統(tǒng)191的光軸194和第三成像系統(tǒng)193的光軸196形成的角度被表不為Θ O。第三成像系統(tǒng)193被排列在第一成像系統(tǒng)191的光軸194的兩端與第二成像系統(tǒng)192線對稱的位置。
[0244]在第一成像系統(tǒng)191中,由在被使得入射在成像器件134上的光的入射光路徑的最外側(cè)上的線和光軸194形成的角度被表示為Θ I。在第二成像系統(tǒng)192中,由在被使得入射在成像器件135上的光的入射光路徑的最外側(cè)上的線和光軸195形成的角度被表示為Θ 2。類似地,在第三成像系統(tǒng)193中,由在被使得入射在成像器件136上的光的入射光路徑的最外側(cè)上的線和光軸196形成的角度被表示為Θ 2。例如,如圖18所示,光接收表面的水平方向上的寬度小于成像器件135和136中的光接收表面的水平方向上的寬度。因此,被使得入射在成像器件134上的光的視角2X Θ I小于被使得入射在成像器件135和136上的光的視角2X Θ 2。
[0245]成像表面300上的成像范圍301由被使得入射在成像器件134上的光的視角2X Θ I指定。類似地,成像表面300上的成像范圍302由被使得入射在成像器件135上的光的視角2X Θ 2指定,并且成像表面300上的成像范圍303由被使得入射在成像器件136上的光的視角2X Θ 2指定。在第一實(shí)施例中,由成像器件134到136產(chǎn)生的圖像被組合以產(chǎn)生全景圖像。因此,由光軸形成的角度被設(shè)置為使得成像表面300上的成像范圍301和成像表面300上的成像范圍302部分重疊。具體地,由第一成像系統(tǒng)191的光軸194和第二成像系統(tǒng)192的光軸195形成的角度Θ O以及由第一成像系統(tǒng)191的光軸194和第三成像系統(tǒng)193的光軸196形成的角度Θ O被設(shè)置為使得成像范圍301和302部分重疊。光軸194到196被包括在同一平面中。第一到第三成像系統(tǒng)191到193被排列為使得光軸194到196在一個(gè)點(diǎn)處相交(交叉點(diǎn)PO)。 [0246]第一成像系統(tǒng)191的透鏡中心被表示為Rl,第二成像系統(tǒng)192的透鏡中心被表示為R2,并且第三成像系統(tǒng)193的透鏡中心被表示為R3。透鏡中心Rl和交叉點(diǎn)PO之間的距離被表示為LI I,透鏡中心R2和交叉點(diǎn)PO之間的距離被表示為L21,并且透鏡中心R3和交叉點(diǎn)PO之間的距離被表示為L31。在此情況下,期望第一到第三成像系統(tǒng)191到193被排列為使得距離L11、L21和L31相等。
[0247][梯形失真的校正示例]
[0248]圖19和圖20是第一實(shí)施例中的成像單元130中的成像系統(tǒng)和作為成像系統(tǒng)的成像目標(biāo)的被攝體之間的關(guān)系的示意圖。在圖19的(a)中,示意地示出了作為成像單元130的成像目標(biāo)的被攝體310。被攝體310是與圖18中所示的被攝體表面300對應(yīng)的被攝體。與被攝體310對應(yīng)的范圍由矩形表示。該矩形的內(nèi)部以格形示意示出。
[0249]在圖20的(a)中,示意性示出作為成像單元130的成像目標(biāo)的被攝體311到313。被攝體311是圖19的(a)中所示的被攝體310中的、與第一成像系統(tǒng)191對應(yīng)的被攝體。類似地,被攝體312是被攝體310中的與第二成像系統(tǒng)192對應(yīng)的被攝體。被攝體313是被攝體310中的與第三成像系統(tǒng)193對應(yīng)的被攝體。被攝體311到313中的被攝體311的水平方向上的兩端和被攝體312和313的水平方向上的一端重疊。
[0250]在圖19和圖20的(b)中,示出了成像單元130中的成像系統(tǒng)。除了省略了參考數(shù)字和標(biāo)記之外,圖19和20的(b)中所示的示例與圖18所示的示例相同。
[0251]圖21是第一實(shí)施例中的成像單元130中的成像系統(tǒng)和由成像系統(tǒng)產(chǎn)生的捕捉圖像之間的關(guān)系的示意圖。在圖21中的(a)中,示意性示出了由成像單元130產(chǎn)生的捕捉圖像314到316。捕捉圖像314到316是與圖20的(a)中所示的被攝體311到313對應(yīng)的捕捉圖像。示意性示出了被攝體311到313中所示的格形的矩形。
[0252]如圖21的(a)中所示,第二和第三成像系統(tǒng)192和193的光軸195和196不與被攝體表面300垂直。因此,在捕捉圖像315和316中發(fā)生梯形失真。參考圖22詳細(xì)說明梯形失真。
[0253]圖22是第一實(shí)施例中的成像單元130中的成像系統(tǒng)和作為成像系統(tǒng)的成像目標(biāo)的被攝體之間的關(guān)系的示意圖。在圖22中,為了易于說明,省略了與第三成像系統(tǒng)193有關(guān)的組件,并且僅示出了第一和第二成像系統(tǒng)191和192。除了省略了與第三成像系統(tǒng)193有關(guān)的組件之外,圖22所示的示例與圖18所示的示例基本相同。交叉點(diǎn)PO、角度Θ O、Θ I和Θ 2、透鏡中心Rl和R2以及距離Lll與圖18所示的示例中的相同,并因此由相同的附圖標(biāo)記表不O
[0254]在圖22中,第一成像系統(tǒng)191的光軸194和被攝體表面300的交叉點(diǎn)被表示為Sllo第一成像系統(tǒng)191的視角的右可見輪廓和被攝體表面300交叉點(diǎn)被表不為S12。第一成像系統(tǒng)191的視角的左可見輪廓和被攝體表面300的交叉點(diǎn)被表示為S13。
[0255]作為包括交叉點(diǎn)Sll并與光軸194垂直的平面并被使得入射在第一成像系統(tǒng)191上的平面被攝體區(qū)域被表示為被攝體表面SlO。
[0256]第二成像系統(tǒng)192的光軸195和被攝體表面300的交叉點(diǎn)被表示為S21。第二成像系統(tǒng)192的視角的右可見輪廓和被攝體表面300的交叉點(diǎn)被表示為S32。第二成像系統(tǒng)192的視角的左可見輪廓和被攝體表面300的交叉點(diǎn)被表示為S43。
[0257]作為包括交叉點(diǎn)S21并與光軸195垂直的平面并被使得入射在第二成像系統(tǒng)192上的平面被攝體區(qū)域被表示為被攝體表面S20。
[0258]作為包括交叉點(diǎn)S32并與光軸195垂直的平面并被使得入射在第二成像系統(tǒng)192上的平面被攝體區(qū)域被 表示為被攝體表面S30。
[0259]作為包括交叉點(diǎn)S43并與光軸195垂直的平面并被使得入射在第二成像系統(tǒng)192上的平面被攝體區(qū)域被表示為被攝體表面S40。
[0260]被攝體表面S30和光軸195的交叉點(diǎn)被表示為S31。被攝體表面S40和光軸195的交叉點(diǎn)被表示為S41。
[0261]第二成像系統(tǒng)192的視角的右可見輪廓和被攝體表面S20的交叉點(diǎn)被表示為S22。第二成像系統(tǒng)192的視角的右可見輪廓和被攝體表面S40的交叉點(diǎn)被表示為S42。
[0262]第二成像系統(tǒng)192的視角的左可見輪廓和被攝體表面S20的交叉點(diǎn)被表示為S23。第二成像系統(tǒng)192的視角的右可見輪廓和被攝體表面S30的交叉點(diǎn)被表示為S33。
[0263]通過第二成像系統(tǒng)192的透鏡中心R2并垂直于被攝體表面300的線段197與被攝體表面300的交叉點(diǎn)被表示為S51。
[0264]例如,當(dāng)將包括在視角的左端處的點(diǎn)S43的被攝體表面S40和包括在視角的右端的點(diǎn)S32的被攝體表面S30相比較時(shí),被攝體表面S40出現(xiàn)在比被攝體表面S30更遠(yuǎn)離透鏡中心R2的位置處。因此,當(dāng)對被攝體表面S40成像時(shí),所成像的區(qū)域?qū)捰趯Ρ粩z體表面S30成像時(shí)所成像的區(qū)域。例如,假設(shè)具有相同長度的線段被排列為被攝體表面S30和被攝體表面S40上的被攝體。在此情況下,當(dāng)比較對于被攝體表面S30產(chǎn)生的捕捉圖像和對于被攝體表面S40產(chǎn)生的捕捉圖像時(shí),被包括在對于被攝體表面S40產(chǎn)生的捕捉圖像中的線段更短。
[0265]因此,例如,當(dāng)?shù)诙上裣到y(tǒng)192對圖20的(a)中所示的被攝體312成像時(shí),如在圖21的(a)中所示的捕捉圖像315中那樣,按梯形形成與被攝體312對應(yīng)的區(qū)域。具體地,在圖21的(a)中所示的示例中,在捕捉圖像315中,與被攝體312對應(yīng)的矩形中的左邊短于右邊。
[0266]類似地,當(dāng)?shù)谌上裣到y(tǒng)193對圖20的(a)中所示的被攝體313成像時(shí),如在圖21的(a)中所示的捕捉圖像316中那樣,按梯形形成與被攝體313對應(yīng)的區(qū)域。以此方式,在由三眼成像單元產(chǎn)生的捕捉圖像中發(fā)生梯形失真。因此,以下說明用于校正捕捉圖像的梯形失真的梯形失真校正方法。
[0267]交叉點(diǎn)Sll和透鏡中心Rl之間的距離被表示為L12。交叉點(diǎn)S13和透鏡中心SI之間的距離以及交叉點(diǎn)S12和透鏡中心Rl之間的距離被表示為L13。
[0268]交叉點(diǎn)S21和透鏡中 心R2之間的距離被表示為L22。交叉點(diǎn)S31和透鏡中心R2之間的距離被表示為L30。交叉點(diǎn)S41和透鏡中心R2之間的距離被表示為L40。
[0269]交叉點(diǎn)S32和透鏡中心R2之間的距離被表示為L23。交叉點(diǎn)S43和透鏡中心R2之間的距離被表示為L24。交叉點(diǎn)S51和透鏡中心R2之間的距離被表示為L51。稍后參考圖24A到圖24C說明距離L61到L66。
[0270]根據(jù)三角函數(shù)的公式,以下公式成立。
[0271]L21+L22=L11+L22= (L11+L12) /cos θ O
[0272]根據(jù)此公式獲得以下公式I。
[0273]L22= {(LI 1+L12) /cos Θ 0} -LI 1...(公式 I)
[0274]其中L1=L21
[0275]關(guān)于距離L51,根據(jù)三角函數(shù)的公式和公式1,獲得以下公式2。
[0276]L51=L22Xcos Θ O
[0277]=[{(Lll+L12)/cos Θ 0}_L11] Xcos Θ 0...(公式 2)
[0278]關(guān)于距離L23,根據(jù)三角函數(shù)的公式和公式2,獲得以下公式3。
[0279]L23=L51/cos( Θ 2-Θ O)
[0280]=(L22Xcos Θ 0)/cos( Θ 2-Θ O)...(公式 3)
[0281]關(guān)于距離L30,根據(jù)三角函數(shù)的公式和公式3,獲得以下公式4。
[0282]L30=L23Xcos Θ 2
[0283]= {(L22 X cos θ O) /cos ( θ 2_ θ 0)} X cos θ 2
[0284]= ([ ({(LI1+L12)/cosθ0}-LII)X cosθ0]/cos (θ 2_ θ 0))X cos θ 2
[0285]...(公式4)
[0286]當(dāng)確定了第一成像系統(tǒng)191的光軸194中的距離Lll和L12時(shí),通過使用公式4可以計(jì)算距離L30。通過以此方式計(jì)算距離L30,能夠計(jì)算距離L30與距離L12的比率的值XR (=L12/L30)。XR 小于 I。
[0287]關(guān)于距離L24,根據(jù)三角函數(shù)的公式和公式2,可以獲得以下公式5。
[0288]L24=L5Ι/cos ( θ 2+ θ 0)
[0289]= (L22 X cos θ 0) /cos ( θ 2+ θ 0)...(公式 5)
[0290]關(guān)于距離L40,根據(jù)三角函數(shù)的公式、公式I和公式5,可以獲得以下公式6。
[0291]L40=L24Xcos Θ 2
[0292]= {(L22 X cos θ 0) /cos ( θ 2+ θ 0)} X cos θ 2
[0293]=[[{(Lll+L12)/cos θ 0-L11} Xcos θ 0]/cos( θ 2+ θ 0)] Xcos θ 2...(公式 6)[0294]當(dāng)確定了第一成像系統(tǒng)191的光軸194中的距離Lll和L12時(shí),通過使用公式6可以計(jì)算距離L40。通過以此方式計(jì)算距離L40,可以計(jì)算距離L40與距離L12的比率的值XL (=L12/L40)。XL 大于 I。
[0295]通過使用比率值XR和XL說明用于校正梯形失真的校正方法。
[0296]關(guān)于圖21的(a)中所示的捕捉圖像315,轉(zhuǎn)換坐標(biāo)使得右邊的長度乘以XR,并且左邊的長度乘以XL。具體地,捕捉圖像315中的右邊在箭頭321方向上減小,使得右邊的長度乘以XR。捕捉圖像315中的左邊在箭頭322方向上擴(kuò)大,使得左邊的長度乘以XL。在圖23的(a)中示出了以此方式校正的已校正圖像317。
[0297]圖23是成像單元130中的成像系統(tǒng)與由成像系統(tǒng)產(chǎn)生的捕捉圖像和在第一實(shí)施例中的校正后的已校正圖像之間的關(guān)系的示意圖。在圖23的(a)中,示意性示出了由成像單元130產(chǎn)生的捕捉圖像314以及通過校正圖21的(a)中所示的捕捉圖像315和316獲得的已校正圖像317和318。除了省略了參考數(shù)字和標(biāo)記之外,圖23的(b)中所示的示例與圖18所示的示例相同。
[0298]如上所述,關(guān)于圖21的(a)中所示的捕捉圖像315,轉(zhuǎn)換坐標(biāo)使得右邊的長度乘以XR并且左邊的長度乘以XL,由此產(chǎn)生圖23的(a)中所示的已校正圖像317。以此方式產(chǎn)生的已校正圖像317是外部形狀是梯形的圖像。因此能夠通過以矩形形狀裁掉已校正圖像317中的中心來獲得梯形失真已被校正的圖像325 (由粗線指示)。
[0299]類似地,關(guān)于圖21的(a)中所示的捕捉圖像316,轉(zhuǎn)換坐標(biāo)使得左邊的長度乘以XR并且右邊的長度乘以XL,由此產(chǎn)生圖23的(a)中示出的已校正圖像318。能夠通過以矩形形狀裁掉已校正圖像318中 的中心來獲得梯形失真已被校正的圖像326 (由粗線指示)。由圖像組合處理單元224執(zhí)行對于捕捉圖像的梯形失真校正處理。
[0300]當(dāng)執(zhí)行這樣的梯形失真校正時(shí),例如,測量在梯形形狀中失真的捕捉圖像的像素的坐標(biāo),并預(yù)先計(jì)算比率值XR和XL。能夠使用預(yù)先計(jì)算的比率值XR和XL,利用比如并入蜂窩電話設(shè)備100中的CPU之類的運(yùn)算裝置以軟件方式執(zhí)行梯形失真校正處理。
[0301]以上說明了用于校正由三眼成像操作引起的捕捉圖像的梯形失真的校正方法的示例。但是,可以通過其他梯形失真校正方法來進(jìn)行校正(例如參見JP-A-08-307770)。
[0302]捕捉圖像的組合示例
[0303]圖24A到圖24C是其中在第一實(shí)施例中圖像組合處理單元224產(chǎn)生組合圖像的組合的流程的示意圖。在此示例中,基于由三個(gè)成像系統(tǒng)的光軸形成的角度(會(huì)聚角)來組合由三個(gè)成像系統(tǒng)產(chǎn)生的三個(gè)捕捉圖像。具體地,在由兩個(gè)成像系統(tǒng)產(chǎn)生的兩個(gè)捕捉圖像的重疊部分中,移除捕捉圖像之一,在移除后,組合兩個(gè)捕捉圖像。
[0304]在圖24A中,示出了由成像單元130中的第一到第三成像系統(tǒng)191到193產(chǎn)生的捕捉圖像314以及已校正圖像317和318。捕捉圖像314和已校正圖像317和318與圖23的(a)中所示的相同。如圖24A所示,獲取了捕捉圖像314和梯形失真已由梯形失真校正處理校正的已校正圖像317和318。
[0305]如上所示,同一被攝體被包括在已校正圖像317的右端的區(qū)域以及捕捉圖像314的左端的區(qū)域中。同一被攝體被包括在已校正圖像318的左端的區(qū)域以及捕捉圖像314的右端的區(qū)域中。因此,以下說明計(jì)算包括相同被攝體的區(qū)域的方法。
[0306]在圖22中,交叉點(diǎn)Sll和S12之間的距離被表示為L61。交叉點(diǎn)Sll和交叉點(diǎn)S13之間的距離被表示為L62。交叉點(diǎn)S51和交叉點(diǎn)S21之間的距離被表示為L63。交叉點(diǎn)S13和交叉點(diǎn)S51之間的距離被表示為L64。交叉點(diǎn)S32和交叉點(diǎn)S51之間的距離被表示為L65。交叉點(diǎn)S32和交叉點(diǎn)S13之間的距離被表示為L66。距離L66是用于指定在由第一成像系統(tǒng)191產(chǎn)生的捕捉圖像中和由第二成像系統(tǒng)192產(chǎn)生的捕捉圖像中包括相同被攝體的區(qū)域的距離。這些區(qū)域是由第一成像系統(tǒng)191產(chǎn)生的捕捉圖像的左端處的區(qū)域和由第二成像系統(tǒng)192產(chǎn)生的捕捉圖像的右端處的區(qū)域的公共區(qū)域。
[0307]根據(jù)三角函數(shù)的公式,以下公式7和8成立。
[0308]L61=(L11+L12) Xtan Θ 0...(公式 7)
[0309]L62=L12 X tan θ 1...(公式 8)
[0310]根據(jù)三角函數(shù)公式和公式2,獲得以下公式9。
[0311]L63=L51 X tan Θ O
[0312]=[ {(L11+L12)/cos Θ 0}_L11] Xcos Θ OXtan θ 0...(公式 9)
[0313]通過使用公式7和8,獲得以下公式10。
[0314]L64=L61-L62-L63
[0315]={(LI1+L12)X tanθ 0}-(L12 X tanθ I)-{(L1+L12)/cosθ0}-LII) [0316]X cos Θ OXtan θ 0...(公式 10)
[0317]根據(jù)三角函數(shù)的公式和公式2,獲得以下公式11。
[0318]L65=L51Xtan( Θ 2-Θ O)
[0319]=[{ (LI 1+L12) /cos θ 0} -LI I] X cos θ O X tan ( θ 2_ θ 0)
[0320]…(公式11)
[0321]通過使用以上獲得的公式10和11,獲得以下公式12。
[0322]L66=L65-L64
[0323]= {[ {(LI 1+L12) /cos θ 0} -LI I] X cos θ O X tan ( θ 2_ θ 0)}
[0324]-{{(LI1+L12)Xtanθ 0}-(L12Xtanθ I)-{(LI1+L12)/cosθ0}-Lll}
[0325]Xcos Θ OXtan θ 0...(公式 12)
[0326]當(dāng)確定了第一成像系統(tǒng)191的光軸194中的距離Lll和L12時(shí),可以通過使用公式12計(jì)算距離L66。關(guān)于在由第一成像系統(tǒng)191產(chǎn)生的捕捉圖像的右端處的區(qū)域和由第三成像系統(tǒng)193產(chǎn)生的捕捉圖像的左端處的區(qū)域的公共區(qū)域,可以按相同的方式計(jì)算距離。
[0327]在圖24B中,示出了在捕捉圖像314中和已校正圖像317和318中作為組合目標(biāo)的區(qū)域。例如,關(guān)于由第一成像系統(tǒng)191產(chǎn)生的捕捉圖像314,刪除等效于通過使用公式12計(jì)算的距離L66的區(qū)域。類似地,關(guān)于捕捉圖像314,刪除了關(guān)于捕捉圖像314的右端而計(jì)算的公共區(qū)域。在圖24B中,在兩端處的公共區(qū)域之后的圖像327的外部形狀由粗線指示。
[0328]在圖24C中,示出了通過使用捕捉圖像314和已校正圖像317和318產(chǎn)生的全景圖像330。在如圖24B所示捕捉圖像314中刪除了在兩端處的圖像后,通過使用刪除后的圖像327以及已校正圖像317和318產(chǎn)生全景圖像。例如,已校正圖像317被接合到圖像327的左端,而已校正圖像318被接合到圖像327的右端,以產(chǎn)生全景圖像330。
[0329]圖25A到圖25C是其中在第一實(shí)施例中圖像組合處理單元224產(chǎn)生組合圖像的組合的流程的示意圖。圖25A到圖25C所示的示例是圖24A到圖24C的修改。包括在圖像組合中刪除的區(qū)域的圖像是不同的。具體地,如圖25B所示,關(guān)于與由第二成像系統(tǒng)192產(chǎn)生的捕捉圖像對應(yīng)的已校正圖像317,刪除等效于通過使用公式12所計(jì)算的距離L66的區(qū)域(右端處的區(qū)域)。類似地,關(guān)于已校正圖像318,刪除關(guān)于左端計(jì)算的公共區(qū)域。在圖25B中,在刪除公共區(qū)域后的圖像332和333的外部形狀由粗線指示。
[0330]在圖25C中,示出了通過使用圖像331到333產(chǎn)生的全景圖像330。如圖25B所示,例如,圖像332被接合到圖像331的左端,并且圖像333被接合到圖像331的右端,以產(chǎn)生全景圖像330。
[0331]圖26A到圖26C是其中在第一實(shí)施例中圖像組合處理單元224產(chǎn)生組合圖像的組合的流程的示意圖。圖26A到圖26C所示的示例是圖24A到圖24C的修改。包括要在圖像組合中刪除的區(qū)域的圖像是不同的。具體地,如圖26B所示,關(guān)于由第一成像系統(tǒng)191產(chǎn)生的捕捉圖像314,刪除等效于通過使用公式12計(jì)算的距離L66的一半的區(qū)域。關(guān)于與由第二成像系統(tǒng)192產(chǎn)生的捕捉圖像對應(yīng)的已校正圖像317,刪除等效于通過使用公式12計(jì)算的距離L66的一半的區(qū)域(右端處的區(qū)域)。
[0332]類似地,關(guān)于捕捉圖像314,刪除關(guān)于捕捉圖像314的右端計(jì)算的公共區(qū)域的一半。關(guān)于與由第三成像系統(tǒng)193產(chǎn)生的捕捉圖像對應(yīng)的已校正圖像318,刪除等效于公共區(qū)域的一半的區(qū)域(左端處的區(qū)域)。在圖26B中,在刪除公共區(qū)域后的圖像334到336的外部形狀由粗線指示。
[0333]在圖26C中,示出了通過使用圖像334到336產(chǎn)生的全景圖像330。如圖26B所示,例如,圖像335被接合到圖像334的左端,并且圖像336被接合到圖像334的右端,以產(chǎn)生全景圖像330。能夠按此方式通過刪除圖像的部分來適當(dāng)?shù)亟M合圖像。
[0334]這些種類的圖像組合處理由圖像組合處理單元224進(jìn)行。在圖8所示的示例中,在圖像信號處理單元220中,圖像 組合處理單元224被排列在YC轉(zhuǎn)換處理單元223的后級和銳度處理單元225的前級。但是,可以在圖像信號處理單元220的其它級執(zhí)行圖像組合處理。例如,可以在解馬賽克處理單元222的前級執(zhí)行梯形失真校正處理和圖像組合處理。例如,可以在解馬賽克處理單元222的后級和YC轉(zhuǎn)換處理單元223的前級執(zhí)行梯形失真校正處理和圖像組合處理。此外,例如,可以在顏色調(diào)整處理單元226的后級執(zhí)行梯形失真校正處理和圖像組合處理。
[0335]例如,當(dāng)執(zhí)行這樣的圖像組合處理時(shí),關(guān)于在梯形失真校正后的圖像,預(yù)先測量圖像的重疊區(qū)域。能夠使用測量值利用比如并入蜂窩電話設(shè)備100中的CPU之類的運(yùn)算裝置按軟件方式執(zhí)行對于圖像的重疊區(qū)域的刪除處理。
[0336]在此示例中,基于會(huì)聚角組合三個(gè)捕捉圖像。但是,例如,可以通過使用其他圖像組合方法來執(zhí)行圖像組合處理。例如,關(guān)于由兩個(gè)成像系統(tǒng)產(chǎn)生的兩個(gè)捕捉圖像的重疊部分,能夠使用匹配兩個(gè)圖像的樣式并通過樣式匹配組合這兩個(gè)圖像的圖像組合方法。還能夠使用計(jì)算由兩個(gè)成像系統(tǒng)產(chǎn)生的兩個(gè)圖像中的密度級的改變、基于密度級的改變計(jì)算重疊部分并組合這兩個(gè)圖像的圖像組合方法。
[0337][成像模式的控制示例]
[0338]說明其中從成像器件134到136讀出圖像數(shù)據(jù)并在顯示單元140中顯示圖像數(shù)據(jù)的圖像的示例。
[0339]圖27是作為第一實(shí)施例中的蜂窩電話設(shè)備100的成像處理的成像目標(biāo)的被攝體500的圖。被攝體500是例如包括站在山的背景中的人501和502以及在人周圍的汽車503和房子504的被攝體。
[0340][第二殼體的橫向狀態(tài)下的成像模式的控制示例]
[0341]首先,說明當(dāng)?shù)诙んw120被設(shè)置在橫向狀態(tài)時(shí)從成像器件讀出圖像數(shù)據(jù)的方法和顯示讀出的圖像數(shù)據(jù)的方法。在第一實(shí)施例中,說明五種成像模式作為第二殼體120的橫向狀態(tài)下的成像模式。
[0342][三眼橫向廣角圖像成像模式的控制示例]
[0343]圖28A和圖28B是第一實(shí)施例中讀出成像器件134到136中的圖像數(shù)據(jù)的方法(第一讀出方法)的示例的示意圖。
[0344]在圖28A中,示出了其中在成像器件134到136中讀出像素?cái)?shù)據(jù)的像素?cái)?shù)據(jù)讀出區(qū)域403到405。像素?cái)?shù)據(jù)讀出 區(qū)域403到405與圖4B所示的像素?cái)?shù)據(jù)讀出區(qū)域403到405相同。因此,由相同的參考數(shù)字表示與圖4B所示相同的組件,并省略各組件的說明。成像器件134到136中的像素?cái)?shù)據(jù)讀出區(qū)域的輪廓由粗線指示。像素?cái)?shù)據(jù)讀出區(qū)域403到405是基于存儲(chǔ)在圖13A和圖13B所示的寄存器370和380中的設(shè)置內(nèi)容而確定的區(qū)域。在此示例中,讀出被包括在像素?cái)?shù)據(jù)讀出區(qū)域403到405中的像素的所有像素。
[0345]在第一實(shí)施例中,例如,作為成像器件134,使用具有像素?cái)?shù)量為1440X1920和像素的縱橫比為3:4的成像器件。作為成像器件135和136,使用具有像素?cái)?shù)量為1920X 1440和像素的縱橫比為4:3的成像器件。
[0346]關(guān)于在執(zhí)行讀出操作時(shí)的成像器件134到136的像素?cái)?shù)據(jù)的讀出的設(shè)置值被存儲(chǔ)在如圖13A和圖13B所示的寄存器370和380中。具體地,以下說明的設(shè)置值(11)到(17)在復(fù)合眼(composite-eye)所有像素讀出成像期間被存儲(chǔ)在縱向方向成像區(qū)域設(shè)置寄存器374中,并在復(fù)合眼所有像素讀出成像期間被存儲(chǔ)在橫向方向成像區(qū)域設(shè)置寄存器384中。
[0347](11)成像器件134中的要被讀出的區(qū)域(像素?cái)?shù)據(jù)讀出區(qū)域403)的水平方向上的像素?cái)?shù)量HlO
[0348](12)成像器件134中的要被讀出的區(qū)域(像素?cái)?shù)據(jù)讀出區(qū)域403)的垂直方向上的像素的數(shù)量VlO
[0349](13)成像器件135和136中的要被讀出的區(qū)域(像素?cái)?shù)據(jù)讀出區(qū)域404和405)的水平方向上的像素的數(shù)量Hll
[0350](14)成像器件135和136中的要被讀出的區(qū)域(像素?cái)?shù)據(jù)讀出區(qū)域404和405)的垂直方向上的像素的數(shù)量Vll
[0351](15)成像器件134到136中的從像素陣列的陣列末端到讀出開始位置的水平方向上的像素的數(shù)量和垂直方向上的像素的數(shù)量
[0352](16)成像器件134到136中的從垂直同步信號到垂直方向上的像素讀出開始的垂直后沿時(shí)段
[0353](17)成像器件134到136中的從水平同步信號到水平方向上的像素讀出開始的水平后沿時(shí)段
[0354]可以在復(fù)合眼所有像素讀出成像期間在縱向方向成像區(qū)域設(shè)置寄存器374中以及在復(fù)合眼所有像素讀出成像期間在橫向方向成像區(qū)域設(shè)置寄存器384中預(yù)先設(shè)置這些設(shè)置值,或者可以經(jīng)由信號線112通過用戶操作而設(shè)置這些設(shè)置值。
[0355]在圖28B中,示出了像素?cái)?shù)據(jù)讀出區(qū)域403到405中的讀出開始位置411到413以及讀出掃描方向。讀出開始位置411到413以及讀出掃描方向與圖6A中的讀出開始位置411到413以及讀出掃描方向相同。因此,與圖6A所示相同的組件由相同的參考數(shù)字表示,并省略該組件的說明。
[0356]關(guān)于按此方式從成像器件134到136讀出的圖像數(shù)據(jù),如上所述,圖像的重疊部分被組合以產(chǎn)生組合圖像。但是,在以下說明中,為了易于說明,不考慮圖像的重疊區(qū)域。在此示例中,從具有1440X1920個(gè)像素的成像器件134中讀出一部分像素的圖像數(shù)據(jù)(1440X1440個(gè)像素)。從具有1920 X 1440個(gè)像素的成像器件135和136中讀出所有像素的圖像數(shù)據(jù)。當(dāng)按此方式讀出的圖像數(shù)據(jù)被組合時(shí),產(chǎn)生具有大約760萬個(gè)像素(5280 X 1440個(gè)像素)和縱橫比為11:3的圖像。在圖29A到圖29C中示出了按此方式產(chǎn)生的組合圖像的顯示示例。
[0357]圖29A到圖29C是第一實(shí)施例中的顯示單元140中的圖像的顯示示例的圖。圖29A到圖29C所示的示例是其中顯示了通過圖28A和圖28B所示的第一讀出方法讀出的圖像數(shù)據(jù)的顯示示例。
[0358]在圖29A中,示出了作為蜂窩電話設(shè)備100的成像處理的成像目標(biāo)的被攝體500。被攝體500與圖27所示的相同。被攝體500中的成像范圍511到513是與圖4A所示的成像器件134到136的像素?cái)?shù)據(jù)讀出可能區(qū)域400到402對應(yīng)的成像范圍。具體地,成像范圍511對應(yīng)于成像器件134的像素?cái)?shù)據(jù)讀出可能區(qū)域400,成像范圍512對應(yīng)于成像器件135的像素?cái)?shù)據(jù)讀出可能區(qū)域401,成像范圍513對應(yīng)于成像器件136的像素?cái)?shù)據(jù)讀出可能區(qū)域402。與圖28A和圖28B中所示的像素?cái)?shù)據(jù)讀出區(qū)域403和404對應(yīng)的成像范圍511到513中的區(qū)域的輪廓由粗線指示。
[0359]在圖29B中,示出了其中當(dāng)被攝體500被設(shè)置為成像目標(biāo)時(shí)顯示通過圖28A和圖28B所示的第一讀出方法 讀出的圖像數(shù)據(jù)的顯示示例。在圖29B中,被包括在蜂窩電話設(shè)備100中的第一和第二殼體110和120中的第一殼體110被省略。在以下所述的顯示示例中,第一殼體Iio被省略。
[0360]因?yàn)槿缟纤鲲@示單元140的縱橫比是4:3,因此難以在顯示單元140的整個(gè)屏幕上顯示具有縱橫比11:3的圖像。因此,例如,當(dāng)顯示單元140中的像素被排列成方格形時(shí),通過圖28A和圖28B所示的第一讀出方法讀出并產(chǎn)生的具有縱橫比為11:3的圖像經(jīng)歷分辨率轉(zhuǎn)換并被顯示。例如,該圖像經(jīng)歷水平方向和垂直方向上的分辨率轉(zhuǎn)換,使得圖像的橫向方向上的像素的數(shù)量與顯示單元的橫向方向上的像素的數(shù)量基本上相同,并且縱橫比是 11:3。
[0361]如圖29B所示,經(jīng)歷了分辨率轉(zhuǎn)換的組合圖像被顯示在顯示單元140中的垂直方向上的中心(捕捉圖像顯示區(qū)域521)。例如,在所顯示的圖像以上和以下的邊緣部分(邊緣圖像顯示區(qū)域522和523)中,可以顯示單色圖像。
[0362]當(dāng)顯示單元140的像素未被排列成方格形時(shí),能夠使用顯示單元140的像素的縱向和橫向長度的比率改變分辨率轉(zhuǎn)換的縮放因子,使得當(dāng)被顯示在顯示單元140中時(shí),圖像的形狀不是不規(guī)則的,并能夠顯示經(jīng)歷了以所改變的縮放因子的分辨率轉(zhuǎn)換的圖像。
[0363]在圖29C中,示出了在顯示從成像器件134到136中讀出的像素?cái)?shù)據(jù)時(shí)顯示單元140中的掃描方向。該掃描方向與圖6C中所示的示例中同。因此,省略該掃描方向的說明。
[0364][三眼橫向窄角圖像成像模式的控制示例][0365]圖30A和圖30B是讀出第一實(shí)施例中的成像器件134到136中的圖像數(shù)據(jù)的方法(第二讀出方法)的示例的示意圖。
[0366]在圖30A中,示出了成像器件134到136中讀出像素?cái)?shù)據(jù)的像素?cái)?shù)據(jù)讀出區(qū)域421到423。第二讀出方法是諸如數(shù)碼相機(jī)之類的成像設(shè)備的用戶所熟悉的讀出橫向圖像的方法。例如,讀出作為成像器件134的一部分的區(qū)域,并且讀出作為成像器件135和136的部分的區(qū)域。
[0367]像素?cái)?shù)據(jù)讀出區(qū)域421與例如圖28A和圖28B所示的像素?cái)?shù)據(jù)讀出區(qū)域403 (例如1440X1440像素的區(qū)域)相同。例如,在像素?cái)?shù)據(jù)讀出區(qū)域422和423中,垂直方向上的長度V21與像素?cái)?shù)據(jù)讀出可能區(qū)域401和402的垂直方向上的長度V20相同。例如,在像素?cái)?shù)據(jù)讀出區(qū)域422和423中,水平方向上的長度H21是像素?cái)?shù)據(jù)讀出可能區(qū)域401和402的水平方向上的長度的1/6。換句話說,例如,像素?cái)?shù)據(jù)讀出區(qū)域422和423是240X1440像素的區(qū)域。像素?cái)?shù)據(jù)讀出區(qū)域421到423是基于存儲(chǔ)在圖13A和圖13B中所示的寄存器370和380中的設(shè)置內(nèi)容而確定的區(qū)域。在此示例中,讀出被包括在像素?cái)?shù)據(jù)讀出區(qū)域421到423中的像素的所有像素。所謂的反轉(zhuǎn)圖像被聚焦在成像器件134到136上。因此,成像器件135和136的像素?cái)?shù)據(jù)讀出區(qū)域422和423是在成像器件134的相對側(cè)上的區(qū)域。
[0368]關(guān)于在執(zhí)行此讀出操作時(shí)成像器件134到136的像素?cái)?shù)據(jù)的讀出的設(shè)置值被存儲(chǔ)在圖13A和圖13B中示出的寄存器370和380中。具體地,以下說明的設(shè)置值(21)到(27)在復(fù)合眼所有像素讀出成像期間被存儲(chǔ)在縱向方向成像區(qū)域設(shè)置寄存器374中,并在復(fù)合眼所有像素讀出成像期間被存儲(chǔ)在橫向方向成像區(qū)域設(shè)置寄存器384中。
[0369](21)成像器件134中的要被讀出的區(qū)域(像素?cái)?shù)據(jù)讀出區(qū)域421)的水平方向上的像素的數(shù)量H20 [0370](22)成像器件134中的要被讀出的區(qū)域(像素?cái)?shù)據(jù)讀出區(qū)域421)的垂直方向上的像素的數(shù)量V20
[0371](23)成像器件135和136中的要被讀出的區(qū)域(像素?cái)?shù)據(jù)讀出區(qū)域422和423)的水平方向上的像素的數(shù)量H21
[0372](24)成像器件135和136中的要被讀出的區(qū)域(像素?cái)?shù)據(jù)讀出區(qū)域422和423)的垂直方向上的像素的數(shù)量V21
[0373](25)成像器件134到136中的從像素陣列的陣列末端到讀出開始位置的水平方向上的像素?cái)?shù)量和垂直方向上的像素?cái)?shù)量
[0374](26)成像器件134到136中的從垂直同步信號到垂直方向上的像素讀出開始的垂直后沿時(shí)段
[0375](27)成像器件134到136中的從水平同步信號到水平方向上的像素讀出開始的水平后沿時(shí)段
[0376]可以在復(fù)合眼所有像素讀出成像期間在縱向方向成像區(qū)域設(shè)置寄存器374中以及在復(fù)合眼所有像素讀出成像期間在橫向方向成像區(qū)域設(shè)置寄存器384中預(yù)先設(shè)置這些設(shè)置值,或者可以經(jīng)由信號線L2通過用戶操作而設(shè)置這些設(shè)置值。
[0377]在圖30B中,示出了像素?cái)?shù)據(jù)讀出區(qū)域421到423中的讀出開始位置424到426以及讀出掃描方向。在此示例中,從具有1440X1920個(gè)像素的成像器件134中讀出一部分像素的圖像數(shù)據(jù)(1440X1440個(gè)像素)。從具有1920X1440個(gè)像素的成像器件135和136中讀出一部分像素的圖像數(shù)據(jù)(240X1440個(gè)像素)。當(dāng)按此方式組合讀出的圖像數(shù)據(jù)時(shí),產(chǎn)生具有大約276萬像素(1920X 1440個(gè)像素)和縱橫比為4:3的圖像。在圖29A到圖29C中示出了按此方式產(chǎn)生的組合圖像的顯示示例。
[0378]如上所述,在像素?cái)?shù)據(jù)讀出區(qū)域421到423中,成像器件135和136中的讀出區(qū)域的大小被設(shè)置為小于第一讀出方法中的大小。通過組合由第二讀出方法讀出的圖像數(shù)據(jù)產(chǎn)生的組合圖像具有4:3的縱橫比(縱橫比可以是16:9等)。因此,能夠產(chǎn)生并顯示具有與當(dāng)前可購買到的成像設(shè)備中的記錄圖像的縱橫比相同的縱橫比的組合圖像。
[0379]圖31A到圖31C是第一實(shí)施例中的顯示單元140中的圖像的顯示示例的圖。圖31A到圖31C所示的示例是其中顯示了通過圖30A和圖30B所示的第二讀出方法讀出的圖像數(shù)據(jù)的顯示示例。
[0380]在圖31A中,示出了作為蜂窩電話設(shè)備100的成像處理的成像目標(biāo)的被攝體500。除了像素?cái)?shù)據(jù)讀出區(qū)域改變之外,圖31A所示的示例與圖29A所示的示例基本相同。因此,與圖29A所示相同的組件由相同的參考數(shù)字表示,并省略各組件的說明。與圖30A和圖30B所示的像素?cái)?shù)據(jù)讀出區(qū)域421到423對應(yīng)的成像范圍511到513中的區(qū)域的輪廓由粗線指示。
[0381]在圖31B中,示出了其中當(dāng)被攝體500被設(shè)置為成像目標(biāo)時(shí)在顯示單元140中顯示通過圖30A和圖30B所示的第二讀出方法讀出的圖像數(shù)據(jù)的顯示示例。
[0382]因?yàn)槿缟纤鲲@示單元140的縱橫比是4:3,并且組合圖像的縱橫比是4:3,因此可以在顯示單元140的整個(gè)屏幕上顯示組合圖像。例如,組合圖像經(jīng)歷了分辨率轉(zhuǎn)換以具有與顯示單元140的像素?cái)?shù)量相同的大小,并被顯示在顯示單元140中。在此情況下,不需要圖29B所示的邊緣圖像顯示區(qū)域522和523。
[0383]當(dāng)通過圖30A和圖30B所示的第二讀出方法讀出并產(chǎn)生的組合圖像的縱橫比與顯示裝置的縱橫比不同時(shí),可以按與第一讀出方法相同的方式顯示組合圖像。例如,在此情況下,在所顯示的組合圖像以上和以下的邊緣部分(邊緣圖像顯示區(qū)域)中,例如,顯示單色圖像。
[0384]在圖31C中,示出了在顯示從成像器件134到136讀出的像素?cái)?shù)據(jù)時(shí)顯示單元140中的掃描方向。該掃描方向與圖6C所示的示例中的相同。因此,省略了該掃描方向的說明
[0385][單眼橫向圖像成像模式的控制示例]
[0386]圖32A和圖32B是讀出第一實(shí)施例中的成像器件134到136中的圖像數(shù)據(jù)的方法(第三讀出方法)的示意圖。
[0387]在圖32A中,示出了成像器件134到136中的讀出像素?cái)?shù)據(jù)的像素?cái)?shù)據(jù)讀出區(qū)域431。第三讀出方法是諸如數(shù)碼相機(jī)之類的成像設(shè)備的用戶所熟悉的讀出橫向圖像的方法。例如,讀出成像器件134的橫向方向上的基本上整個(gè)區(qū)域,并且在縱向方向上,讀出比橫向方向上小的像素?cái)?shù)量的區(qū)域。不執(zhí)行從成像器件135和136的讀出。
[0388]例如,在像素?cái)?shù)據(jù)讀出區(qū)域431中,水平方向上的長度H30被設(shè)置為與像素?cái)?shù)據(jù)讀出可能區(qū)域400的水平方向上的長度相同,并且垂直方向上的長度V30被設(shè)置為大約是像素?cái)?shù)據(jù)讀出可能區(qū)域400的垂直方向上的長度的一半。像素?cái)?shù)據(jù)讀出區(qū)域431是例如1440X1080像素的區(qū)域。像素?cái)?shù)據(jù)讀出區(qū)域431是基于存儲(chǔ)在圖13A和圖13B中所示的寄存器370和380中的設(shè)置內(nèi)容而確定的區(qū)域。在此示例中,讀出被包括在像素?cái)?shù)據(jù)讀出區(qū)域431中的像素的所有像素。
[0389]關(guān)于在執(zhí)行此讀出操作時(shí)成像器件134的像素?cái)?shù)據(jù)的讀出的設(shè)置值被存儲(chǔ)在圖13A和圖13B所示的寄存器370和380中。具體地,以下說明的設(shè)置值(31)到(35)在單眼所有像素讀出成像期間被存儲(chǔ)在縱向方向成像區(qū)域設(shè)置寄存器371中,并在單眼所有像素讀出成像期間被存儲(chǔ)在橫向方向成像區(qū)域設(shè)置寄存器381中。
[0390](31)成像器件134中的要被讀出的區(qū)域(像素?cái)?shù)據(jù)讀出區(qū)域431)的水平方向上的像素的數(shù)量H30
[0391](32)成像器件134中的要被讀出的區(qū)域(像素?cái)?shù)據(jù)讀出區(qū)域431)的垂直方向上的像素的數(shù)量V30
[0392](33)成像器件134中的從像素陣列的陣列末端到讀出開始位置的水平方向上的像素?cái)?shù)量和垂直方向上的像素?cái)?shù)量
[0393](34)成像器件134中的從垂直同步信號到垂直方向上的像素讀出開始的垂直后沿時(shí)段
[0394](35)成像器件134中的從水平同步信號到水平方向上的像素讀出開始的水平后沿時(shí)段
[0395]可以在單眼所有像素讀出成像期間在縱向方向成像區(qū)域設(shè)置寄存器371中以及在單眼所有像素讀出成像期間在橫向方向成像區(qū)域設(shè)置寄存器381中預(yù)先設(shè)置這些設(shè)置值,或者可以經(jīng)由信號線L2通過用戶操作而設(shè)置這些設(shè)置值。
[0396]在圖32B中,示出了像素?cái)?shù)據(jù)讀出區(qū)域431中的讀出開始位置432以及讀出掃描方向。在此示例中,從具有1440X1920個(gè)像素的成像器件134中讀出一部分像素的圖像數(shù)據(jù)(1440X1080個(gè)像素)。不執(zhí)行從成像器件135和136的讀出。通過使用按此方式讀出的像素?cái)?shù)據(jù),產(chǎn)生具有大約156萬像素(1440X1080個(gè)像素)和縱橫比為4:3的圖像。在圖33A到圖33C中示出了按此方式產(chǎn)生的圖像的顯示示例。
[0397]如上所述,在像素?cái)?shù)據(jù)讀出區(qū)域431中,僅執(zhí)行從成像器件134的讀出,不執(zhí)行從成像器件135和136的讀出。如第二讀出方法那樣,基于由第三讀出方法讀出的圖像數(shù)據(jù)產(chǎn)生的圖像具有4:3的縱橫比(縱橫比可以是16:9等)。因此,能夠產(chǎn)生并顯示具有與當(dāng)前可購買到的成像設(shè)備中的記錄圖像的縱橫比相同的縱橫比的圖像。此外,例如,能夠在不使得成像器件135和136工作的情況下產(chǎn)生清晰度比正廣泛使用的VGA (視頻圖像陣列)圖像(640X480像素)更高的圖像。這使得能夠降低功耗。
[0398]圖33A到圖33C是第一實(shí)施例中的顯示單元140中的圖像的顯示示例的圖。圖33A到圖33C所示的示例是其中顯示了通過圖32A和圖32B所示的第三讀出方法讀出的圖像數(shù)據(jù)的顯示示例。
[0399]在圖33A中,示出了作為蜂窩電話設(shè)備100的成像處理的成像目標(biāo)的被攝體500。除了像素?cái)?shù)據(jù)讀出區(qū)域改變之外,圖33A所示的示例與圖29A所示的示例基本相同。因此,與圖29A所示相同的組件由相同的參考數(shù)字表示,并省略各組件的說明。與圖32A和圖32B所示的像素?cái)?shù)據(jù)讀出區(qū)域431對應(yīng)的成像范圍511到513中的區(qū)域的輪廓由粗線指示。
[0400]在圖33B中,示出了其中當(dāng)被攝體500被設(shè)置為成像目標(biāo)時(shí)在顯示單元140中顯示通過圖32A和圖32B所示的第三讀出方法讀出的圖像數(shù)據(jù)的顯示示例。
[0401]因?yàn)槿缟纤鲲@示單元140的縱橫比是4:3,并且產(chǎn)生的圖像的縱橫比是4:3,因此可以在顯示單元140的整個(gè)屏幕上顯示該圖像。例如,該圖像經(jīng)歷了分辨率轉(zhuǎn)換以具有與顯示單元140的像素?cái)?shù)量相同的大小,并被顯示在顯示單元140中。在此情況下,不需要圖29B所示的邊緣圖像顯示區(qū)域522和523。
[0402]當(dāng)通過圖32A和圖32B所示的第三讀出方法讀出并產(chǎn)生的圖像的縱橫比與顯示裝置的縱橫比不同時(shí),可以按與第一讀出方法相同的方式顯示該圖像。例如,在此情況下,在所顯示的圖像以上和以下的邊緣部分(邊緣圖像顯示區(qū)域)中,例如,顯示單色圖像。
[0403]在圖33C中,示出了在顯示從成像器件134到136讀出的像素?cái)?shù)據(jù)時(shí)顯示單元140中的掃描方向。該掃描方向與圖6C所示的示例中的相同。因此,省略了該掃描方向的說明。
[0404][單眼縱向圖像成像模式的控制示例]
[0405]圖34A和圖34B是讀出第一實(shí)施例中的成像器件134到136中的圖像數(shù)據(jù)的方法(第四讀出方法)的示例的示意圖。
[0406]在圖34A中,示出了成像器件134到136中讀出像素?cái)?shù)據(jù)的像素?cái)?shù)據(jù)讀出區(qū)域435。第四讀出方法是蜂窩電話設(shè)備的用戶所熟悉的讀出縱向圖像的方法。例如,讀出成像器件134的整個(gè)區(qū)域。不執(zhí)行從成像器件135和136的讀出。
[0407]例如,在像素?cái)?shù)據(jù)讀出區(qū)域435中,水平方向上的長度H40被設(shè)置為與像素?cái)?shù)據(jù)讀出可能區(qū)域400的水平方向上的長度相同,并且垂直方向上的長度V40被設(shè)置為與像素?cái)?shù)據(jù)讀出可能區(qū)域400的垂直方向上的長度相同。像素?cái)?shù)據(jù)讀出區(qū)域435是例如1440X1920像素的區(qū)域。像素?cái)?shù)據(jù)讀出區(qū)域435是基于存儲(chǔ)在圖13A和圖13B中所示的寄存器370和380中的設(shè)置內(nèi)容而確定的區(qū)域。在此示例中,讀出被包括在像素?cái)?shù)據(jù)讀出區(qū)域435中的像素的所有像素。
[0408]關(guān)于在執(zhí)行此讀出操作時(shí)成像器件134的像素?cái)?shù)據(jù)的讀出的設(shè)置值被存儲(chǔ)在圖13A和圖13B所示的寄存器370和380中。具體地,以下說明的設(shè)置值(41)到(45)在單眼所有像素讀出成像期間被存儲(chǔ)在縱向方向成像區(qū)域設(shè)置寄存器371中,并在單眼所有像素讀出成像期間被存儲(chǔ)在橫向方向成像區(qū)域設(shè)置寄存器381中。
[0409](41)成像器件134中的要被讀出的區(qū)域(像素?cái)?shù)據(jù)讀出區(qū)域435)的水平方向上的像素的數(shù)量H40
[0410](42)成像器件134中的要被讀出的區(qū)域(像素?cái)?shù)據(jù)讀出區(qū)域435)的垂直方向上的像素的數(shù)量V40
[0411](43)成像器件134中的從像素陣列的陣列末端到讀出開始位置的水平方向上的像素?cái)?shù)量和垂直方向上的像素?cái)?shù)量
[0412](44)成像器件134中的從垂直同步信號到垂直方向上的像素讀出開始的垂直后沿時(shí)段
[0413](45)成像器件134中的從水平同步信號到水平方向上的像素讀出開始的水平后沿時(shí)段
[0414]可以在單眼所有像素讀出成像期間在縱向方向成像區(qū)域設(shè)置寄存器371中以及在單眼所有像素讀出成像期間在橫向方向成像區(qū)域設(shè)置寄存器381中預(yù)先設(shè)置這些設(shè)置值,或者可以經(jīng)由信號線L2通過用戶操作而設(shè)置這些設(shè)置值。
[0415] 在圖34B中,示出了像素?cái)?shù)據(jù)讀出區(qū)域435中的讀出開始位置436以及讀出掃描方向。在此示例中,從具有1440X1920個(gè)像素的成像器件134中讀出所有像素的圖像數(shù)據(jù)(1440X 1920個(gè)像素)。不執(zhí)行從成像器件135和136的讀出。通過使用按此方式讀出的像素?cái)?shù)據(jù),產(chǎn)生具有大約276萬像素(1440 X 1920個(gè)像素)和縱橫比為3:4的圖像。在圖35A到圖35C中示出了按此方式產(chǎn)生的圖像的顯示示例。
[0416]如上所述,在像素?cái)?shù)據(jù)讀出區(qū)域435中,僅執(zhí)行從成像器件134的讀出,不執(zhí)行從成像器件135和136的讀出。基于由第四讀出方法讀出的圖像數(shù)據(jù)產(chǎn)生的圖像具有3:4的縱橫比。因此,能夠在不使得成像器件135和136工作的情況下產(chǎn)生清晰度比正廣泛使用的縱向VGA (640X480像素)更高的圖像。這使得能夠降低功耗。
[0417]圖35A到圖35C是第一實(shí)施例中的顯示單元140中的圖像的顯示示例的圖。圖35A到圖35C所示的示例是其中顯示了通過圖34A和圖34B所示的第四讀出方法讀出的圖像數(shù)據(jù)的顯示示例。
[0418]在圖35A中,示出了作為蜂窩電話設(shè)備100的成像處理的成像目標(biāo)的被攝體500。除了像素?cái)?shù)據(jù)讀出區(qū)域改變之外,圖35A所示的示例與圖29A所示的示例基本相同。因此,與圖29A所示相同的組件由相同的參考數(shù)字表示,并省略各組件的說明。與圖34A和圖34B所示的像素?cái)?shù)據(jù)讀出區(qū)域435對應(yīng)的成像范圍511到513中的區(qū)域的輪廓由粗線指示。
[0419]在圖35B中,示出了其中當(dāng)被攝體500被設(shè)置為成像目標(biāo)時(shí)在顯示單元140中顯示通過圖34A和圖34B所示的第四讀出方法讀出的圖像數(shù)據(jù)的顯示示例。
[0420]因?yàn)槿缟纤鲲@示單元140的縱橫比是4:3,因此難以在顯示單元140的整個(gè)屏幕上顯示具有縱橫比為3:4的產(chǎn)生的圖像。因此,例如,如在第一讀出方法中那樣,具有3:4的縱橫比的圖像經(jīng)歷了分辨率轉(zhuǎn)換并被顯示。例如,該圖像經(jīng)歷水平方向上和垂直方向上的分辨率轉(zhuǎn)換,使得該圖像的縱向方向上的像素的數(shù)量與顯示單元140的縱向方向上的像素的數(shù)量基本相同,并且 該圖像的縱橫比是3:4。
[0421]如圖35B所示,經(jīng)歷了分辨率轉(zhuǎn)換的圖像被顯示在顯示單元140中的水平方向上的中心(捕捉圖像顯示區(qū)域527)。例如,在所顯示的圖像左邊和右邊的邊緣部分(邊緣圖像顯示區(qū)域528和528)中,可以顯示單色圖像。
[0422]當(dāng)通過第四讀出方法讀出并產(chǎn)生的圖像的縱橫比與顯示裝置的縱橫比不同時(shí),可以按與第一讀出方法相同的方式顯示該圖像。
[0423]在圖35C中,示出了在顯示從成像器件134到136讀出的像素?cái)?shù)據(jù)時(shí)顯示單元140中的掃描方向。該掃描方向與圖6C所示的示例中的相同。因此,省略了該掃描方向的說明。
[0424][單眼縱向小區(qū)域圖像成像模式的控制示例]
[0425]圖36A和圖36B是讀出第一實(shí)施例中的成像器件134到136中的圖像數(shù)據(jù)的方法(第五讀出方法)的示例的示意圖。
[0426]在圖36A中,示出了成像器件134到136中的讀出像素?cái)?shù)據(jù)的像素?cái)?shù)據(jù)讀出區(qū)域437。第五讀出方法是蜂窩電話設(shè)備的用戶所熟悉的讀出縱向圖像的方法。例如,讀出作為成像器件134的一部分的區(qū)域。不執(zhí)行從成像器件135和136的讀出。
[0427]例如,在像素?cái)?shù)據(jù)讀出區(qū)域437中,水平方向上的長度H50被設(shè)置為短于像素?cái)?shù)據(jù)讀出可能區(qū)域400的水平方向上的長度,并且垂直方向上的長度V50被設(shè)置為短于像素?cái)?shù)據(jù)讀出可能區(qū)域400的垂直方向上的長度。像素?cái)?shù)據(jù)讀出區(qū)域437是例如480X640像素的區(qū)域。像素?cái)?shù)據(jù)讀出區(qū)域437是基于存儲(chǔ)在圖13A和圖13B中所示的寄存器370和380中的設(shè)置內(nèi)容而確定的區(qū)域。在此示例中,讀出被包括在像素?cái)?shù)據(jù)讀出區(qū)域437中的像素的所有像素。
[0428]關(guān)于在執(zhí)行此讀出操作時(shí)成像器件134的像素?cái)?shù)據(jù)的讀出的設(shè)置值被存儲(chǔ)在圖13A和圖13B所示的寄存器370和380中。具體地,以下說明的設(shè)置值(51)到(55)在單眼所有像素讀出成像期間被存儲(chǔ)在縱向方向成像區(qū)域設(shè)置寄存器371中,并在單眼所有像素讀出成像期間被存儲(chǔ)在橫向方向成像區(qū)域設(shè)置寄存器381中。
[0429](51)成像器件134中的要被讀出的區(qū)域(像素?cái)?shù)據(jù)讀出區(qū)域437)的水平方向上的像素的數(shù)量H50
[0430](52)成像器件134中的要被讀出的區(qū)域(像素?cái)?shù)據(jù)讀出區(qū)域437)的垂直方向上的像素的數(shù)量V50
[0431](53)成像器件134中的從像素陣列的陣列末端到讀出開始位置的水平方向上的像素?cái)?shù)量和垂直方向上的像素?cái)?shù)量
[0432](54)成像器件134中的從垂直同步信號到垂直方向上的像素讀出開始的垂直后沿時(shí)段
[0433](55)成像器件134中的從水平同步信號到水平方向上的像素讀出開始的水平后沿時(shí)段
[0434]可以在單眼所有像素讀出成像期間在縱向方向成像區(qū)域設(shè)置寄存器371中以及在單眼所有像素讀出成像期間在橫向方向成像區(qū)域設(shè)置寄存器381中預(yù)先設(shè)置這些設(shè)置值,或者可以經(jīng)由信號線L2通過用戶操作而設(shè)置這些設(shè)置值。
[0435]在圖36B中,示出了像素?cái)?shù)據(jù)讀出區(qū)域437中的讀出開始位置438以及讀出掃描方向。在此示例中,從具有1440X1920個(gè)像素的成像器件134中讀出一部分像素的圖像數(shù)據(jù)(480 X 640個(gè)像素)。不執(zhí)行從成像器件135和136的讀出。通過使用按此方式讀出的像素?cái)?shù)據(jù),產(chǎn)生具有大約31萬像素(480X640個(gè)像素)和縱橫比為3:4的圖像。在圖37A到圖37C中示出了按此方式產(chǎn)生的圖像的顯示示例。
[0436]如上所述,在像素?cái)?shù)據(jù)讀出區(qū)域437中,執(zhí)行從成像器件134的一部分的讀出,不執(zhí)行從成像器件135和136的讀出?;谟傻谖遄x出方法讀出的圖像數(shù)據(jù)產(chǎn)生的圖像是比例如通過第四讀出方法產(chǎn)生的圖像更適合于無線電傳輸?shù)膱D像(即具有更小的數(shù)據(jù)量的圖像)。
[0437]圖37A到圖37C是第一實(shí)施例中的顯示單元140中的圖像的顯示示例的圖。圖37A到圖37C所示的示例是其中顯示了通過圖36A和圖36B所示的第五讀出方法讀出的圖像數(shù)據(jù)的顯示示例。
[0438]在圖37A中,示出了作為蜂窩電話設(shè)備100的成像處理的成像目標(biāo)的被攝體500。除了像素?cái)?shù)據(jù)讀出區(qū)域改變之外,圖37A所示的示例與圖29A所示的示例基本相同。因此,與圖29A所示相同的組件由相同的參考數(shù)字表示,并省略各組件的說明。與圖36A和圖36B所示的像素?cái)?shù)據(jù)讀出區(qū)域437對應(yīng)的成像范圍511到513中的區(qū)域的輪廓由粗線指示。
[0439]在圖37B中,示出了其中當(dāng)被攝體500被設(shè)置為成像目標(biāo)時(shí)在顯示單元140中顯示通過圖36A和圖36B所示的第五讀出方法讀出的圖像數(shù)據(jù)的顯示示例。
[0440]因?yàn)槿缟纤鲲@示單元140的縱橫比是4:3,因此難以在顯示單元140的整個(gè)屏幕上顯示具有縱橫比為3:4的產(chǎn)生的圖像。因此,例如,如在第四讀出方法中那樣,具有3:4的縱橫比的圖像經(jīng)歷了分辨率轉(zhuǎn)換并被顯示。例如,該圖像經(jīng)歷水平方向上和垂直方向上的分辨率轉(zhuǎn)換,使得該圖像的縱向方向上的像素的數(shù)量與顯示單元140的縱向方向上的像素的數(shù)量基本上相同,并且該圖像的縱橫比是3:4。
[0441]如圖37B所示,經(jīng)歷了分辨率轉(zhuǎn)換的圖像被顯示在顯示單元140中的水平方向上的中心(捕捉圖像顯示區(qū)域531)。例如,在所顯示的圖像的左邊和右邊的邊緣部分(邊緣圖像顯示區(qū)域532和533)中,可以顯示單色圖像。
[0442]當(dāng)通過第五讀出方法讀出并產(chǎn)生的圖像的縱橫比與顯示裝置的縱橫比不同時(shí),可以按與第一讀出方法相同的方式顯示該圖像。
[0443]在圖37C中,示出了在顯示從成像器件134到136讀出的像素?cái)?shù)據(jù)時(shí)顯示單元140中的掃描方向。該掃描方向與圖6C所示的示例中的相同。因此,省略了該掃描方向的說明。
[0444]關(guān)于成像器件134到136的像素?cái)?shù)據(jù)的讀出的設(shè)置值被存儲(chǔ)在圖13A和圖13B所示的寄存器370和380中,并被存儲(chǔ)在成像控制單元201中。當(dāng)?shù)诙んw120處于縱向狀態(tài)時(shí),每次圖1A到圖1D所示的成像范圍變換開關(guān)111等被用戶按下時(shí),切換第一到第五讀出方法。在此情況下,每次按下成像范圍變換開關(guān)111時(shí),成像控制單元201檢測該按下,并依次切換第一到第五讀出方法。例如,就在蜂窩電話設(shè)備100啟動(dòng)后,當(dāng)?shù)诙んw120處于橫向狀態(tài)時(shí),可以設(shè)置第一讀出方法。
[0445][像素稀疏和像素相加的示例]
[0446]作為第一到第五讀出方法,說明了其中讀出被包括在像素?cái)?shù)據(jù)讀出區(qū)域中的所有像素的示例。但是,取決于使用目的,高清晰度不是必需的。因此,以下說明其中讀出被包括在像素?cái)?shù)據(jù)讀出區(qū)域中的像素的一部分以降低功耗的示例。
[0447]以下說明的第六到第十讀出方法是其中通過在成像器件134到136中執(zhí)行像素稀疏處理而讀出被包括在像素?cái)?shù)據(jù)讀出區(qū)域中的像素的一部分的示例。盡管以下未說明,但是也可以通過在成像器件134到136中執(zhí)行像素相加處理來讀出被包括在像素?cái)?shù)據(jù)讀出區(qū)域中的像素的一部分。
[0448][三眼橫向廣角圖像成像模式的稀疏示例]
[0449]首先,參考圖28A和圖28B以及圖29A到圖29C說明第六讀出方法。第六讀出方法對應(yīng)于第一讀出方法。在圖28A和圖28B所示的像素?cái)?shù)據(jù)讀出區(qū)域403到405中,在縱向方向上執(zhí)行1/2像素稀疏讀出,并在橫向方向上執(zhí)行1/2像素稀疏讀出。具體地,從具有1440X 1920像素的成像器件134中的像素?cái)?shù)據(jù)讀出區(qū)域403中讀出在縱向方向上和橫向方向上被稀疏到1/2的圖像數(shù)據(jù)(720X720像素)。從具有1920X1440像素的成像器件135和136中的像素?cái)?shù)據(jù)讀出區(qū)域404和405中讀出在縱向方向上和橫向方向上被稀疏到1/2的圖像數(shù)據(jù)(960X720像素)。當(dāng)組合按此方式讀出的圖像數(shù)據(jù)時(shí),產(chǎn)生具有大約190萬像素(2640X720像素)并具有11:3的縱橫比的圖像。如在圖29A到圖29C所示的示例中,該圖像是在水平方向上具有相對廣的視角的、并且精度比VGA圖像更高的圖像。可以以比第一讀出方法中的功耗更小的功耗產(chǎn)生該圖像。
[0450]關(guān)于在執(zhí)行此讀出操作時(shí)成像器件134到136的像素?cái)?shù)據(jù)的讀出的設(shè)置值被存儲(chǔ)在圖13A和圖13B所示的寄存器370和380中。具體地,以上所述的設(shè)置值(11)到(17)在復(fù)合眼像素稀疏讀出期間被存儲(chǔ)在縱向方向成像區(qū)域設(shè)置寄存器375中,并在復(fù)合眼像素稀疏讀出期間被存儲(chǔ)在橫向方向成像區(qū)域設(shè)置寄存器385中。水平方向和垂直方向上的稀疏間隔在復(fù)合眼像素稀疏讀出期間被存儲(chǔ)在縱向方向像素稀疏間隔設(shè)置寄存器376中,并在復(fù)合眼像素稀疏讀出期間被存儲(chǔ)在橫向方向像素稀疏間隔設(shè)置寄存器386中.[0451]可以預(yù)先設(shè)置該設(shè)置值或者可以經(jīng)由信號線L2通過用戶操作設(shè)置該設(shè)置值。
[0452][三眼橫向窄角圖像成像模式的稀疏示例]
[0453]參考圖30A和圖30B以及圖3IA到圖3IC說明第七讀出方法。第七讀出方法對應(yīng)于第二讀出方法。在圖30A和圖30B所示的像素?cái)?shù)據(jù)讀出區(qū)域421到423中,在縱向方向上執(zhí)行1/2像素稀疏讀出,并在橫向方向上執(zhí)行1/2像素稀疏讀出。具體地,從具有1440X1920像素的成像器件134中的像素?cái)?shù)據(jù)讀出區(qū)域421中讀出在縱向方向上和橫向方向上被稀疏到1/2的圖像數(shù)據(jù)(720X720像素)。從具有1920X 1440像素的成像器件135和136中的像素?cái)?shù)據(jù)讀出區(qū)域422和423中讀出在縱向方向上和橫向方向上被稀疏到1/2的圖像數(shù)據(jù)(240X 720像素)。當(dāng)組合按此方式讀出的圖像數(shù)據(jù)時(shí),產(chǎn)生具有大約69萬像素(960X 720像素)并具有4:3的縱橫比的圖像。如在圖31A到圖31C所示的示例中,該圖像是在水平方向上具有相對廣的視角的、并且精度比VGA圖像更高的圖像??梢砸员鹊诙x出方法中的功耗更小的功耗產(chǎn)生該圖像。
[0454]關(guān)于在執(zhí)行此讀出操作時(shí)成像器件134到136的像素?cái)?shù)據(jù)的讀出的設(shè)置值被存儲(chǔ)在圖13A和圖13B所示的寄存器370和380中。具體地,以上所述的設(shè)置值(21)到(27)在復(fù)合眼像素稀疏讀出期間被存儲(chǔ)在縱向方向成像區(qū)域設(shè)置寄存器375中,并在復(fù)合眼像素稀疏讀出期間被存儲(chǔ)在橫向方向成像區(qū)域設(shè)置寄存器385中。水平方向和垂直方向上的稀疏間隔在復(fù)合眼像素稀疏讀出期間被存儲(chǔ)在縱向方向像素稀疏間隔設(shè)置寄存器376中,并在復(fù)合眼像素稀疏讀出期間被存儲(chǔ)在橫向方向像素稀疏間隔設(shè)置寄存器386中。
[0455]可以預(yù)先設(shè)置該設(shè)置值或者可以經(jīng)由信號線L2通過用戶操作設(shè)置該設(shè)置值。
[0456][單眼橫向圖像 成像模式的稀疏示例]
[0457]參考圖32A和圖32B以及圖33A到圖33C說明第八讀出方法。第八讀出方法對應(yīng)于第三讀出方法。在圖32A和圖32B所示的像素?cái)?shù)據(jù)讀出區(qū)域431中,在縱向方向上執(zhí)行1/2像素稀疏讀出,并在橫向方向上執(zhí)行1/2像素稀疏讀出。具體地,從具有1440 X 1920像素的成像器件134中的像素?cái)?shù)據(jù)讀出區(qū)域431中讀出在縱向方向上和橫向方向上被稀疏到1/2的圖像數(shù)據(jù)(720X540像素)。當(dāng)組合按此方式讀出的圖像數(shù)據(jù)時(shí),產(chǎn)生具有大約39萬像素(720X540像素)并具有4:3的縱橫比的圖像。該圖像是具有與圖33A到圖33C所示的示例中相同的視角的、并且精度比VGA圖像更高的圖像。可以以比第三讀出方法中的功耗更小的功耗產(chǎn)生該圖像。
[0458]關(guān)于在執(zhí)行此讀出操作時(shí)成像器件134的像素?cái)?shù)據(jù)的讀出的設(shè)置值被存儲(chǔ)在圖13A和圖13B所示的寄存器370和380中。具體地,以上所述的設(shè)置值(31)到(35)在單眼像素稀疏讀出期間被存儲(chǔ)在縱向方向成像區(qū)域設(shè)置寄存器372中,并在單眼像素稀疏讀出期間被存儲(chǔ)在橫向方向成像區(qū)域設(shè)置寄存器382中。水平方向和垂直方向上的稀疏間隔在單眼像素稀疏讀出期間被存儲(chǔ)在縱向方向像素稀疏間隔設(shè)置寄存器373中,并在單眼像素稀疏讀出期間被存儲(chǔ)在橫向方向像素稀疏間隔設(shè)置寄存器383中。
[0459]可以預(yù)先設(shè)置該設(shè)置值或者可以經(jīng)由信號線L2通過用戶操作設(shè)置該設(shè)置值。
[0460][單眼縱向圖像成像模式的稀疏示例]
[0461]參考圖34A和圖34B以及圖35A到圖35C說明第九讀出方法。第九讀出方法對應(yīng)于第四讀出方法。在圖34A和圖34B所示的像素?cái)?shù)據(jù)讀出區(qū)域435中,在縱向方向上執(zhí)行1/2像素稀疏讀出,并在橫向方向上執(zhí)行1/2像素稀疏讀出。具體地,從具有1440 X 1920像素的成像器件134中的像素?cái)?shù)據(jù)讀出區(qū)域435中讀出在縱向方向上和橫向方向上被稀疏到1/2的圖像數(shù)據(jù)(720X960像素)。當(dāng)組合按此方式讀出的圖像數(shù)據(jù)時(shí),產(chǎn)生具有大約69萬像素(720 X 960像素)并具有3:4的縱橫比的圖像。該圖像是具有與圖35A到圖35C所示的示例中相同的視角的、并且精度比VGA圖像更高的圖像??梢砸员鹊谒淖x出方法中的功耗更小的功耗產(chǎn)生該圖像。
[0462]關(guān)于在執(zhí)行此讀出操作時(shí)成像器件134的像素?cái)?shù)據(jù)的讀出的設(shè)置值被存儲(chǔ)在圖13A和圖13B所示的寄存器370和380中。具體地,以上所述的設(shè)置值(41)到(45)在單眼像素稀疏讀出期間被存儲(chǔ)在縱向方向成像區(qū)域設(shè)置寄存器372中,并在單眼像素稀疏讀出期間被存儲(chǔ)在橫向方向成像區(qū)域設(shè)置寄存器382中。水平方向和垂直方向上的稀疏間隔在單眼像素稀疏讀出期間被存儲(chǔ)在縱向方向像素稀疏間隔設(shè)置寄存器373中,并在單眼像素稀疏讀出期間被存儲(chǔ)在橫向方向像素稀疏間隔設(shè)置寄存器383中。
[0463]可以預(yù)先設(shè)置該設(shè)置值或者可以經(jīng)由信號線L2通過用戶操作設(shè)置該設(shè)置值。
[0464][單眼縱向小區(qū)域圖像成像模式的稀疏示例]
[0465]參考圖36A和圖36B以及圖37A到圖37C說明第十讀出方法。第十讀出方法對應(yīng)于第五讀出方法。在圖36A和圖36B所示的像素?cái)?shù)據(jù)讀出區(qū)域437中,在縱向方向上執(zhí)行1/2像素稀疏讀出,并在橫向方向上執(zhí)行1/2像素稀疏讀出。具體地,從具有1440 X 1920像素的成像器件134中的像素?cái)?shù)據(jù)讀出區(qū)域437中讀出在縱向方向上和橫向方向上被稀疏到1/2的圖像數(shù)據(jù)(240X320像素)。當(dāng)組合按此方式讀出的圖像數(shù)據(jù)時(shí),產(chǎn)生具有大約8萬像素(240 X 320像素)并具有3:4的縱橫比的圖像。該圖像是具有與圖37A到圖37C所示的示例中相同的視角的圖像??梢砸员鹊谖遄x出方法中的功耗更小的功耗產(chǎn)生該圖像。
[0466]關(guān)于在執(zhí)行此讀出操作時(shí)成像器件134的像素?cái)?shù)據(jù)的讀出的設(shè)置值被存儲(chǔ)在圖13A和圖13B所示的寄存器370和380中。具體地,以上所述的設(shè)置值(51)到(55)在單眼像素稀疏讀出期間被存儲(chǔ)在縱向方向成像區(qū)域設(shè)置寄存器372中,并在單眼像素稀疏讀出期間被存儲(chǔ)在橫向方向成像區(qū)域設(shè)置寄存器382中。水平方向和垂直方向上的稀疏間隔在單眼像素稀疏讀出期間被存儲(chǔ)在縱向方向像素稀疏間隔設(shè)置寄存器373中,并在單眼像素稀疏讀出期間被存儲(chǔ)在橫向方向像素稀疏間隔設(shè)置寄存器383中。
[0467]可以預(yù)先設(shè)置該設(shè)置值或者可以經(jīng)由信號線L2通過用戶操作設(shè)置該設(shè)置值。
[0468][第二殼體的縱向狀態(tài)中的成像模式的控制示例]
[0469]說明當(dāng)?shù)诙んw120被設(shè)置在縱向狀態(tài)下時(shí)從成像器件讀出圖像數(shù)據(jù)的方法以及顯示所讀出的圖像數(shù)據(jù)的方法。在第一實(shí)施例中,作為第二殼體120的縱向狀態(tài)下的成像模式,說明四種成像模式。例如,當(dāng)利用被設(shè)置在縱向狀態(tài)下的第二殼體120執(zhí)行拍攝時(shí),認(rèn)為用戶不想要拍攝橫向廣角圖像。因此,在第一實(shí)施例中,說明當(dāng)?shù)诙んw120被設(shè)置在縱向狀態(tài)下時(shí)產(chǎn)生水平方向上的相對窄的范圍的圖像的示例。
[0470][三眼橫向窄角圖像成像的控制示例]
[0471]類似于第二讀出方法,第十一讀出方法是諸如數(shù)碼相機(jī)之類的成像設(shè)備的用戶所熟悉的讀出 橫向圖像的方法。例如,讀出作為成像器件134的一部分的區(qū)域,并且讀出作為成像器件135和136的部分的區(qū)域。因此,作為第十一讀出方法說明與第二讀出方法相同的其中在像素?cái)?shù)據(jù)讀出區(qū)域421到423 (示出在圖30A和30B中)中讀出所有像素的示例。[0472]像素?cái)?shù)據(jù)讀出區(qū)域421到423以及與像素?cái)?shù)據(jù)讀出區(qū)域421到423有關(guān)的設(shè)置值的寄存器370和380的所存儲(chǔ)內(nèi)容與圖30A所示的示例中的相同。因此,省略對像素?cái)?shù)據(jù)讀出區(qū)域421到423以及寄存器370和380的所存儲(chǔ)內(nèi)容的說明。像素?cái)?shù)據(jù)讀出區(qū)域421到423中的讀出開始位置424到426以及讀出掃描方向與圖30B所示的示例中的相同。因此,省略對讀出開始位置424到426以及讀出掃描方向的說明。圖38A和圖38B示出了所產(chǎn)生的組合圖像的顯示示例。
[0473]圖38A和圖38B是第一實(shí)施例中的顯示單元140中的圖像的顯示示例的圖。圖38A和圖38B所示的示例是其中顯示了通過第十一讀出方法讀出的圖像數(shù)據(jù)的示例。
[0474]在圖38A中,示出了作為蜂窩電話設(shè)備100的成像處理的成像目標(biāo)的被攝體500。除了像素?cái)?shù)據(jù)讀出區(qū)域改變之外,圖38A所示的示例與圖29A所示的示例基本相同。因此,與圖29A所示相同的組件由相同的參考數(shù)字表示,并省略各組件的說明。與圖30A和圖30B所示的像素?cái)?shù)據(jù)讀出區(qū)域421到423對應(yīng)的成像范圍511到513中的區(qū)域的輪廓由粗線指
/Jn ο
[0475]在圖38B中,示出了其中當(dāng)被攝體500被設(shè)置為成像目標(biāo)時(shí)在顯示單元140中顯示通過第十一讀出方法讀出的圖像數(shù)據(jù)的顯示示例。在圖38中,第一殼體110被設(shè)置在縱向狀態(tài)。當(dāng)?shù)谝粴んw110被設(shè)置在縱向狀態(tài)時(shí),顯示單元140的縱橫比是3:4。
[0476]因?yàn)槿缟纤鲲@示單元140的縱橫比是3:4,因此難以在顯示單元140的整個(gè)屏幕上顯示具有縱橫比為4:3的產(chǎn)生的圖像。因此,例如,如在第一讀出方法中那樣,具有4:3的縱橫比的圖像經(jīng)歷了分辨率轉(zhuǎn)換并被顯示。例如,該圖像經(jīng)歷水平方向上和垂直方向上的分辨率轉(zhuǎn)換,使得該圖像的橫向方向上的像素的數(shù)量與顯示單元140的橫向方向上的像素的數(shù)量基本相同,并且該圖像的縱橫比是4:3。
[0477]如圖37B所示,經(jīng)歷了分辨率轉(zhuǎn)換的圖像被顯示在顯示單元140中的垂直方向上的中心(捕捉圖像顯示區(qū)域541)。例如,在所顯示的圖像以上和以下的邊緣部分(邊緣圖像顯示區(qū)域542和543)中,可以顯示單色圖像。
[0478]在圖38C中,示意性示出了在顯示被寫入圖像存儲(chǔ)器170中的捕捉圖像以及邊緣圖像時(shí)顯示單元140中的掃描方向。
[0479][捕捉圖像的旋轉(zhuǎn)處理示例]
[0480]假設(shè)當(dāng)?shù)诙んw120處于縱向狀態(tài)時(shí),如在以上所述的第二殼體120的橫向狀態(tài)下,在成像器件中讀出的圖像被顯示在顯示單元140中。在此情況下,因?yàn)榈诙んw120樞軸旋轉(zhuǎn)了 90度,因此相對于第一殼體110樞軸旋轉(zhuǎn)了 90度的圖像被顯示在顯示單元140中。具體地,因?yàn)楸话ㄔ陲@示單元140中所顯示的圖像的被攝體也旋轉(zhuǎn)了 90度,因此用戶感到不舒服的感覺。因此,以下說明其中圖像在第二殼體120的樞軸旋轉(zhuǎn)方向的相反方向上旋轉(zhuǎn)90度并被顯示的示例。
[0481]圖39A到圖39E是用于旋轉(zhuǎn)第一實(shí)施例中的顯示單元140中顯示的圖像的旋轉(zhuǎn)處理的示意圖。在此實(shí)施例中,說明成像期間被攝體的方向、成像器件中的掃描方向、向圖像存儲(chǔ)器170中寫及從其讀出圖像數(shù)據(jù)期間的方向、顯示單元140中的顯示的掃描方向以及顯示單元140中顯示的被攝體的方向之間的關(guān)系。向圖像存儲(chǔ)器170中寫及從其讀出圖像數(shù)據(jù)由DSP200執(zhí)行。
[0482]圖39A是其中在成像器件134到136的掃描方向上讀出的捕捉圖像545由DSP200按該掃描方向?qū)懭雸D像存儲(chǔ)器170中的狀態(tài)的示意圖。在圖39A中,成像器件134到136的掃描方向由箭頭指示。
[0483]圖39B是其中寫入圖像存儲(chǔ)器170中的捕捉圖像545在與成像器件134到136的掃描方向垂直的方向上被掃描的同時(shí)被讀出的狀態(tài)的示意圖。在圖39B中,從圖像存儲(chǔ)器170讀出的捕捉圖像545的掃描方向由箭頭指示。
[0484]圖39C是其中按圖39B所示的掃描方向從圖像存儲(chǔ)器170讀出的捕捉圖像545在以與圖39A所示的方向相同的方向上被掃描的同時(shí)被寫回到圖像存儲(chǔ)器170中的狀態(tài)的示意圖。在圖39C中,被寫入圖像存儲(chǔ)器170中的捕捉圖像545的掃描方向由箭頭指示。以此方式,在與成像器件134到136的掃描方向垂直的方向上被掃描的同時(shí)被從圖像存儲(chǔ)器170讀出的捕捉圖像545在讀出捕捉圖像55的方向上被掃描的同時(shí)被寫回到圖像存儲(chǔ)器170中。這使得能夠在從成像器件134到136讀出的捕捉圖像545旋轉(zhuǎn)了 90度的狀態(tài)下將該捕捉圖像545存儲(chǔ)在圖像存儲(chǔ)器170中。
[0485]圖39D是其中在圖39C所示的掃描方向上將邊緣圖像546和547添加到寫入圖像存儲(chǔ)器170中的捕捉圖像545的狀態(tài)的示意圖。邊緣圖像546和547是顯示在圖38B所示的邊緣圖像顯示區(qū)域542和543中的圖像。
[0486]圖39E是其中在與第一次寫期間的方向相同的方向上掃描的同時(shí)讀出被寫入圖像存儲(chǔ)器170中的捕捉圖像545和邊緣圖像546和547的狀態(tài)的示意圖。通過在顯示單元140中顯示在圖39E所示的狀態(tài)下讀出的捕捉圖像545和邊緣圖像546和547,可以顯示不給予用戶不舒服的感覺的圖像。在圖38B中示出了其中在顯示單元140中顯示在圖39E所示的狀態(tài)下讀出的捕捉圖像545和邊緣 圖像546和547的顯示示例。
[0487][單眼橫向圖像成像模式的控制示例]
[0488]類似于第十一讀出方法,第十二讀出方法是諸如數(shù)碼相機(jī)之類的成像設(shè)備的用戶所熟悉的讀出橫向圖像的方法。例如,讀出成像器件134的橫向方向上的基本上整個(gè)區(qū)域,并在縱向方向上,讀出比橫向方向上的像素?cái)?shù)量少的像素?cái)?shù)量的區(qū)域。不執(zhí)行從成像器件135和136的讀出。因此,作為第十二讀出方法說明與第三讀出方法中相同的其中在像素?cái)?shù)據(jù)讀出區(qū)域431 (示出在圖32A和圖32B中)中讀出所有像素的示例。
[0489]像素?cái)?shù)據(jù)讀出區(qū)域431以及與像素?cái)?shù)據(jù)讀出區(qū)域431有關(guān)的設(shè)置值的寄存器370和380的所存儲(chǔ)內(nèi)容與圖32A所示的示例中的相同。因此,省略對像素?cái)?shù)據(jù)讀出區(qū)域431以及寄存器370和380的所存儲(chǔ)內(nèi)容的說明。像素?cái)?shù)據(jù)讀出區(qū)域431中的讀出開始位置432以及讀出掃描方向與圖32B所示的示例中的相同。因此,省略對讀出開始位置432以及讀出掃描方向的說明。圖40A到圖40C示出了所產(chǎn)生的組合圖像的顯示示例。
[0490]圖40A到圖40C是第一實(shí)施例中的顯示單元140中的圖像的顯示示例的圖。圖40A到圖40B所示的示例是其中顯示了通過第十二讀出方法讀出的圖像數(shù)據(jù)的顯示示例。
[0491]在圖40A中,示出了作為蜂窩電話設(shè)備100的成像處理的成像目標(biāo)的被攝體500。除了像素?cái)?shù)據(jù)讀出區(qū)域改變之外,圖40A所示的示例與圖29A所示的示例基本相同。因此,與圖29A所示相同的組件由相同的參考數(shù)字表示,并省略各組件的說明。與圖32A和圖32B所示的像素?cái)?shù)據(jù)讀出區(qū)域431對應(yīng)的成像范圍511到513中的區(qū)域的輪廓由粗線指示。
[0492]在圖40B中,示出了其中當(dāng)被攝體500被設(shè)置為成像目標(biāo)時(shí)在顯示單元140中顯示通過第十二讀出方法讀出的圖像數(shù)據(jù)的顯示示例。圖40B中示出的顯示示例是通過圖39A到圖39E所示的旋轉(zhuǎn)處理旋轉(zhuǎn)的捕捉圖像的顯示示例。
[0493]因?yàn)槿缟纤鲲@示單元140的縱橫比是3:4,因此難以在顯示單元140的整個(gè)屏幕上顯示具有縱橫比為4:3的產(chǎn)生的圖像。因此,例如,如在第十一讀出方法中那樣,具有4:3的縱橫比的圖像經(jīng)歷了分辨率轉(zhuǎn)換并被顯示。例如,該圖像經(jīng)歷水平方向上和垂直方向上的分辨率轉(zhuǎn)換,使得該圖像的橫向方向上的像素的數(shù)量與顯示單元140的橫向方向上的像素的數(shù)量基本相同,并且該圖像的縱橫比是4:3。
[0494]如圖40B所示,經(jīng)歷了分辨率轉(zhuǎn)換的圖像被顯示在顯示單元140中的垂直方向上的中心(捕捉圖像顯示區(qū)域551)。例如,在所顯示的圖像以上和以下的邊緣部分(邊緣圖像顯示區(qū)域552和553)中,可以顯示單色圖像。
[0495]在圖40C中,示出了在顯示從成像器件134讀出的圖像數(shù)據(jù)時(shí)顯示單元140中的掃描方向。
[0496][單眼縱向圖像成像模式的控制示例]
[0497]第十三讀出方法是諸如數(shù)碼相機(jī)之類的成像設(shè)備的用戶所熟悉的讀出縱向圖像的方法。例如,讀出成像器件134的整個(gè)區(qū)域。不執(zhí)行從成像器件135和136的讀出。因此,作為第十三讀出方法說明與第四讀出方法中相同的其中在像素?cái)?shù)據(jù)讀出區(qū)域435(示出在圖34A和圖34B中)中讀出所有像素的示例。
[0498]像素?cái)?shù)據(jù)讀出區(qū)域435以及與像素?cái)?shù)據(jù)讀出區(qū)域435有關(guān)的設(shè)置值的寄存器370和380的所存儲(chǔ)內(nèi)容與圖34A所示的示例中的相同。因此,省略對像素?cái)?shù)據(jù)讀出區(qū)域435以及寄存器370和380的所存儲(chǔ)內(nèi)容的說明。像素?cái)?shù)據(jù)讀出區(qū)域435中的讀出開始位置436以及讀出掃描方向與圖34 B所示的示例中的相同。因此,省略對讀出開始位置436以及讀出掃描方向的說明。在圖41A到圖41C中示出了所產(chǎn)生的組合圖像的顯示示例。
[0499]圖41A到圖41C是第一實(shí)施例中的顯示單元140中的圖像的顯示示例的圖。圖41A到圖41C所示的示例是其中顯示了通過第十三讀出方法讀出的圖像數(shù)據(jù)的顯示示例。
[0500]在圖41A中,示出了作為蜂窩電話設(shè)備100的成像處理的成像目標(biāo)的被攝體500。除了像素?cái)?shù)據(jù)讀出區(qū)域改變之外,圖41A所示的示例與圖29A所示的示例基本相同。因此,與圖29A所示相同的組件由相同的參考數(shù)字表示,并省略各組件的說明。與圖32A和圖32B所示的像素?cái)?shù)據(jù)讀出區(qū)域435對應(yīng)的成像范圍511到513中的區(qū)域的輪廓由粗線指示。
[0501]在圖41B中,示出了其中當(dāng)被攝體500被設(shè)置為成像目標(biāo)時(shí)在顯示單元140中顯示通過第十三讀出方法讀出的圖像數(shù)據(jù)的顯示示例。圖41B中示出的顯示示例是通過圖39A到圖39E所示的旋轉(zhuǎn)處理旋轉(zhuǎn)的捕捉圖像的顯示示例。
[0502]因?yàn)槿缟纤鲲@示單元140的縱橫比是3:4并且產(chǎn)生的圖像的縱橫比是3:4,因此可以在顯示單元140的整個(gè)屏幕上顯示該圖像。例如,該圖像經(jīng)歷了分辨率轉(zhuǎn)換以具有與顯示單元140的像素?cái)?shù)量相同的大小,并被顯示在顯示單元140中。在此情況下,不需要邊緣圖像顯示區(qū)域。
[0503]當(dāng)通過第十三讀出方法讀出并產(chǎn)生的圖像的縱橫比與顯示裝置的縱橫比不同時(shí),可以按與第十二讀出方法相同的方式顯示該圖像。例如,在此情況下,在所顯示的組合圖像以上和以下的邊緣部分(邊緣圖像顯示區(qū)域)中,例如,顯示單色圖像。
[0504]在圖41C中,示出了在顯示從成像器件134讀出的像素?cái)?shù)據(jù)時(shí)顯示單元140中的掃描方向。[0505][單眼縱向小區(qū)域圖像成像模式的控制示例]
[0506]第十四讀出方法是諸如數(shù)碼相機(jī)之類的成像設(shè)備的用戶所熟悉的讀出縱向圖像的方法。例如,讀出作為成像器件134的一部分的區(qū)域。不執(zhí)行從成像器件135和136的讀出。因此,作為第十四讀出方法說明與第五讀出方法中相同的其中在像素?cái)?shù)據(jù)讀出區(qū)域437 (示出在圖36A和圖36B中)中讀出所有像素的示例。
[0507]像素?cái)?shù)據(jù)讀出區(qū)域437以及與像素?cái)?shù)據(jù)讀出區(qū)域437有關(guān)的設(shè)置值的寄存器370和380的所存儲(chǔ)內(nèi)容與圖36A所示的示例中的相同。因此,省略對像素?cái)?shù)據(jù)讀出區(qū)域437以及寄存器370和380的所存儲(chǔ)內(nèi)容的說明。像素?cái)?shù)據(jù)讀出區(qū)域437中的讀出開始位置438以及讀出掃描方向與圖36B所示的示例中的相同。因此,省略對讀出開始位置438以及讀出掃描方向的說明。在圖42A到圖42C中示出了所產(chǎn)生的組合圖像的顯示示例。
[0508]圖42A到圖42C是第一實(shí)施例中的顯示單元140中的圖像的顯示示例的圖。圖42A到圖42C所示的示例是其中顯示了通過第十四讀出方法讀出的圖像數(shù)據(jù)的顯示示例。
[0509]在圖42A中,示出了作為蜂窩電話設(shè)備100的成像處理的成像目標(biāo)的被攝體500。除了像素?cái)?shù)據(jù)讀出區(qū)域改變之外,圖42A所示的示例與圖29A所示的示例基本相同。因此,與圖29A所示相同的組件由相同的參考數(shù)字表示,并省略各組件的說明。與圖36A和圖36B所示的像素?cái)?shù)據(jù)讀出區(qū)域437對應(yīng)的成像范圍511到513中的區(qū)域的輪廓由粗線指示。
[0510]在圖42B中,示出了其中當(dāng)被攝體500被設(shè)置為成像目標(biāo)時(shí)在顯示單元140中顯示通過第十四讀出方法讀出的圖像數(shù)據(jù)的顯示示例。圖42B中示出的顯示示例是通過圖39A到圖39E所示的旋轉(zhuǎn)處理被旋轉(zhuǎn)的捕捉圖像的顯示示例。
[0511]因?yàn)槿缟纤鲲@示單元140的縱橫比是3:4并且所產(chǎn)生的圖像的縱橫比是3:4,因此可以在顯示單元140的整個(gè)屏幕上顯示該圖像。例如,該圖像經(jīng)歷了分辨率轉(zhuǎn)換以具有與顯示單元140的像素?cái)?shù)量相同的大小,并被顯示在顯示單元140中。在此情況下,不需要邊緣圖像顯示區(qū)域。
[0512]當(dāng)通過第十四讀出方法讀出并產(chǎn)生的圖像的縱橫比與顯示裝置的縱橫比不同時(shí),可以按與第十二讀出方法相同的方式顯示該圖像。例如,在此情況下,在所顯示的組合圖像以上和以下的邊緣部分(邊緣圖像顯示區(qū)域)中,例如,顯示單色圖像。
[0513]在圖42C中,示出了在顯示從成像器件134讀出的像素?cái)?shù)據(jù)時(shí)顯示單元140中的掃描方向。
[0514]關(guān)于成像器件134到136的像素?cái)?shù)據(jù)的讀出的設(shè)置值被存儲(chǔ)在圖13A和圖13B所示的寄存器370和380中,并被存儲(chǔ)在成像控制單元201中。當(dāng)?shù)诙んw120處于縱向狀態(tài)時(shí),每次圖1A到圖1D所示的成像范圍變換開關(guān)111等被用戶按下時(shí),切換第十一到第十四讀出方法。在此情況下,每次按下成像范圍變換開關(guān)111時(shí),成像控制單元201檢測該按下,并依次切換第十一到第十四讀出方法。例如,就在蜂窩電話設(shè)備100啟動(dòng)后,當(dāng)?shù)诙んw120處于縱向狀態(tài)時(shí),可以設(shè)置第十四讀出方法。
[0515][像素稀疏和像素相加的示例]
[0516]作為第十一到第十四讀出方法,說明了其中讀出被包括在像素?cái)?shù)據(jù)讀出區(qū)域中的所有像素的示例。但是,取決于使用目的,高清晰度圖像不是必需的。因此,以下說明其中讀出被包括在像素?cái)?shù)據(jù)讀出區(qū)域中的像素的一部分以降低功耗的示例。
[0517]以下說明的第十五到第十八讀出方法是其中通過在成像器件134到136中執(zhí)行像素稀疏處理而讀出被包括在像素?cái)?shù)據(jù)讀出區(qū)域中的像素的一部分的示例。盡管以下未說明,但是也可以通過在成像器件134到136中執(zhí)行像素相加處理來讀出被包括在像素?cái)?shù)據(jù)讀出區(qū)域中的像素的一部分。
[0518][三眼橫向窄角圖像成像模式的稀疏示例]
[0519]首先,參考圖38A到圖38C說明第十五讀出方法。第十五讀出方法對應(yīng)于第十一讀出方法。在圖30A和圖30B所示的像素?cái)?shù)據(jù)讀出區(qū)域421到423中,在縱向方向上執(zhí)行1/2像素稀疏讀出,并在橫向方向上執(zhí)行1/2像素稀疏讀出。因?yàn)檫@些類型的稀疏處理與在第七讀出方法中說明的示例中的相同,因此省略該稀疏處理的詳細(xì)說明。在這些類型的稀疏處理中關(guān)于成像器件134到136的像素?cái)?shù)據(jù)的讀出的設(shè)置值的寄存器370和380的所存儲(chǔ)內(nèi)容與在第七讀出方法中說明的示例中的相同。因此將省略所存儲(chǔ)內(nèi)容的詳細(xì)說明。
[0520][單眼橫向圖像成像模式的稀疏示例]
[0521]參考圖40A到圖40C說明第十六讀出方法。第十六讀出方法對應(yīng)于第十二讀出方法。在圖32A和圖32B所示的像素?cái)?shù)據(jù)讀出區(qū)域431中,在縱向方向上執(zhí)行1/2像素稀疏讀出,并在橫向方向上執(zhí)行1/2像素稀疏讀出。因?yàn)檫@些類型的稀疏處理與在第八讀出方法中說明的示例中的相同,因此省略該稀疏處理的詳細(xì)說明。在這些類型的稀疏處理中關(guān)于成像器件134到136的像素?cái)?shù)據(jù)的讀出的設(shè)置值的寄存器370和380的所存儲(chǔ)內(nèi)容與在第八讀出方法中說明的示例中的相同。因此將省略所存儲(chǔ)內(nèi)容的詳細(xì)說明。
[0522][單眼縱向圖像成像模式的稀疏示例]
[0523] 參考圖41A到圖41C說明第十七讀出方法。第十七讀出方法對應(yīng)于第十三讀出方法。在圖34A和圖34B所示的像素?cái)?shù)據(jù)讀出區(qū)域435中,在縱向方向上執(zhí)行1/2像素稀疏讀出,并在橫向方向上執(zhí)行1/2像素稀疏讀出。因?yàn)檫@些類型的稀疏處理與在第九讀出方法中說明的示例中的相同,因此省略該稀疏處理的詳細(xì)說明。在這些類型的稀疏處理中關(guān)于成像器件134到136的像素?cái)?shù)據(jù)的讀出的設(shè)置值的寄存器370和380的存儲(chǔ)內(nèi)容與在第九讀出方法中說明的示例中的相同。因此將省略所存儲(chǔ)內(nèi)容的詳細(xì)說明。
[0524][單眼縱向小區(qū)域圖像成像模式的稀疏示例]
[0525]參考圖42A到圖42C說明第十八讀出方法。第十八讀出方法對應(yīng)于第十四讀出方法。在圖36A和圖36B所示的像素?cái)?shù)據(jù)讀出區(qū)域437中,在縱向方向上執(zhí)行1/2像素稀疏讀出,并在橫向方向上執(zhí)行1/2像素稀疏讀出。因?yàn)檫@些類型的稀疏處理與在第十讀出方法中說明的示例中的相同,因此省略該稀疏處理的詳細(xì)說明。在這些類型的稀疏處理中關(guān)于成像器件134到136的像素?cái)?shù)據(jù)的讀出的設(shè)置值的寄存器370和380的所存儲(chǔ)內(nèi)容與在第十讀出方法中說明的示例中的相同。因此將省略所存儲(chǔ)內(nèi)容的詳細(xì)說明。
[0526][監(jiān)視操作期間的讀出示例]
[0527]說明當(dāng)執(zhí)行監(jiān)視操作時(shí)讀出像素?cái)?shù)據(jù)的方法。例如,當(dāng)設(shè)置了用于記錄靜止圖像的靜止圖像記錄模式時(shí),執(zhí)行監(jiān)視操作,直到執(zhí)行用于命令記錄靜止圖像的操作為止。例如,監(jiān)視操作是用于在執(zhí)行命令記錄靜止圖像的操作之前使得顯示單元140顯示用于檢查蜂窩電話設(shè)備100的方向和被攝體的大小是否適當(dāng)?shù)谋O(jiān)視圖像。監(jiān)視圖像是用于用戶檢查蜂窩電話設(shè)備100的方向和被攝體的大小是否適當(dāng)?shù)膱D像,而不是用于記錄的圖像。因此,與用于記錄的圖像相比,監(jiān)視圖像不需要是高清晰度圖像。
[0528]總的來說,被包括在成像設(shè)備中的顯示器件的像素的數(shù)量經(jīng)常是被包括在成像設(shè)備中的成像器件的像素的數(shù)量的幾十分之一。因此,當(dāng)執(zhí)行監(jiān)視操作時(shí),與在圖像記錄期間相比,能夠降低從成像器件讀出的像素的數(shù)量。另一方面,因?yàn)楸O(jiān)視圖像是用于檢查蜂窩電話設(shè)備100的方向和被攝體的大小的圖像,因此期望監(jiān)視圖像的視角與記錄操作情況下的視角相同。因此,說明當(dāng)執(zhí)行監(jiān)視操作時(shí)讀出用于設(shè)置與記錄操作的情況下相同的視角的監(jiān)視圖像并降低要讀出的像素的數(shù)量的方法。
[0529]例如,當(dāng)設(shè)置了第一到第五讀出方法的任意一個(gè)并執(zhí)行監(jiān)視操作時(shí),通過執(zhí)行如在第六到第十讀出方法中的像素稀疏處理降低要讀出的像素的數(shù)量。在此情況下,稀疏比可以是比在第六到第十讀出方法中說明的稀疏比(1/2)更大的稀疏比。
[0530]例如,類似地,當(dāng)設(shè)置了第六到第十讀出方法的任意一個(gè)并執(zhí)行監(jiān)視操作時(shí),通過執(zhí)行像素稀疏處理降低要讀出的像素的數(shù)量。在此情況下,稀疏比可以是仍比所述稀疏比(1/2)更大的稀疏比(例如通過將1/2乘以1/M獲得的值(M>1,M是整數(shù)))。類似地,當(dāng)設(shè)置了第十一到第十八讀出方法中的任意一個(gè)并執(zhí)行監(jiān)視操作時(shí),可以降低要讀出的像素的數(shù)量??梢酝ㄟ^執(zhí)行像素相加處理而不是像素稀疏處理來降低要讀出的像素的數(shù)量。除了讀出的像素的數(shù)量不同之外,監(jiān)視圖像的顯示與第一到第五讀出方法中的顯示示例相同。因此,省略顯示的說明。
[0531][像素稀疏和像素相加的修改]
[0532]以上說明了其中通過在成像器件134到136中執(zhí)行像素稀疏和像素相加來降低圖像數(shù)據(jù)的像素?cái)?shù)量的示例。在此示例中,說明其中在DSP200中執(zhí)行像素稀疏和像素相加的示例。
[0533]圖8所示的像素相加處理單元221執(zhí)行像素相加處理和像素稀疏處理。在DSP200的內(nèi)部,像素相加處理單元221被排列在圖像緩沖器211到219的后級的位置以及解馬賽克處理單元222的前級的位置中。像素相加處理單元221的配置可以與成像器件134到136的加法器354到357和366基本相同。
[0534]例如,像素相加處理單元221包括數(shù)據(jù)存儲(chǔ)器以便在垂直方向上執(zhí)行像素相加,該數(shù)據(jù)存儲(chǔ)器存儲(chǔ)被包括在圖像數(shù)據(jù)的至少兩個(gè)或更多水平線中的固定量的圖像數(shù)據(jù)。像素相加處理單元221執(zhí)行對來自圖像存儲(chǔ)器170的圖像數(shù)據(jù)讀出位于同一列中的圖像數(shù)據(jù)并用加法器累加所讀出的圖像數(shù)據(jù)的相加處理(即對于垂直像素的相加處理)
[0535]例如,在執(zhí)行對于水平像素的相加處理時(shí),像素相加處理單元221執(zhí)行讀出多個(gè)列中的圖像數(shù)據(jù)并用加法器累加所讀出的圖像數(shù)據(jù)的處理(即對于水平像素的相加處理)。
[0536]例如,在執(zhí)行對于垂直像素的相加處理和對于水平像素的相加處理兩者時(shí),像素相加處理單元221對于多個(gè)列中的垂直像素執(zhí)行相加處理,并進(jìn)一步對于與通過對于垂直像素的相加處理獲得的圖像數(shù)據(jù)有關(guān)的水平像素執(zhí)行相加處理。
[0537]在這些類型的相加處理之后,像素相加處理單元221將經(jīng)相加處理后的圖像數(shù)據(jù)輸出到在后級的解馬賽克處理單元222。像素相加處理單元221將經(jīng)相加處理后的圖像數(shù)據(jù)寫入圖像存儲(chǔ)器170中。
[0538]例如,在像素相加處理單元221中,用于將在相加處理中輸入的兩個(gè)圖像數(shù)據(jù)中的一個(gè)圖像數(shù)據(jù)輸入到加法器的數(shù)據(jù)線包括選擇信號線。數(shù)據(jù)線和選擇信號線的AND結(jié)果被輸入到加法器。像素相加處理單元221存儲(chǔ)另一條圖像數(shù)據(jù)。例如,當(dāng)選擇了選擇信號線時(shí),數(shù)據(jù)線的值被輸入到加法器,并且執(zhí)行像素相加處理。另一方面,當(dāng)未選擇選擇信號線時(shí),從數(shù)據(jù)線輸入到加法器的值是O,并且不執(zhí)行像素相加處理。在此情況下,執(zhí)行像素稀疏處理,并且從在加法器的不包括選擇信號線一側(cè)上的數(shù)據(jù)線輸入的圖像數(shù)據(jù)被輸出。
[0539][像素稀疏和像素相加中的圖像數(shù)據(jù)的流程的示例]
[0540]圖43是其中通過第一實(shí)施例中的成像器件134執(zhí)行像素稀疏和像素相加的圖像數(shù)據(jù)的流程的示意圖。排列在圖43中的粗線的箭頭附近的標(biāo)記表示像素?cái)?shù)據(jù)的像素的數(shù)量。在圖43所示的示例中,通過使用具有1920X1440像素的成像器件134,在水平方向上稀疏像素?cái)?shù)據(jù)的數(shù)量的1/2,并在垂直方向上稀疏1/2。當(dāng)像素?cái)?shù)據(jù)的數(shù)量的1/2經(jīng)歷水平方向上的像素相加并且1/2經(jīng)歷垂直方向上的像素相加時(shí),圖像數(shù)據(jù)的流程相同。如圖43所示,從成像器件134輸出的圖像數(shù)據(jù)的像素的數(shù)量(960X720像素)小于成像器件134的像素的數(shù)量(1920 X 1440像素)。
[0541]圖44是其中通過第一實(shí)施例中的像素相加處理單元221改變像素的數(shù)量的圖像數(shù)據(jù)的流程的示意圖。排列在圖44的粗線的箭頭附近的標(biāo)記表示圖像數(shù)據(jù)的像素的數(shù)量。在圖44所示的示例中,關(guān)于從具有1920X1440像素的成像器件134輸出的圖像數(shù)據(jù),像素相加處理單元221將水平方向上的像素?cái)?shù)據(jù)的數(shù)量減少到1/2,并將垂直方向上的像素?cái)?shù)據(jù)的數(shù)量減少到1/2。如圖44所示,從像素相加處理單元221輸出的圖像數(shù)據(jù)的像素的數(shù)量(960X720像素)小于成像器件134的像素的數(shù)量和被輸入到像素相加處理單元221的圖像數(shù)據(jù)的像素的數(shù)量。
[0542]圖45是當(dāng)從第一實(shí)施例中的圖像存儲(chǔ)器170中讀出圖像數(shù)據(jù)時(shí)改變像素的數(shù)量的圖像數(shù)據(jù)的流程的示意圖。排列在圖45中的粗線的箭頭附近的標(biāo)記表示圖像數(shù)據(jù)的像素的數(shù)量。在圖45所示的示例中,當(dāng)從圖像存儲(chǔ)器170讀出圖像數(shù)據(jù)時(shí),通過按對于圖像數(shù)據(jù)上的每固定數(shù)量的 像素的間隔讀出圖像數(shù)據(jù)來減少圖像數(shù)據(jù)的像素的數(shù)量。具體地,從具有1920X 1440像素的成像器件134輸出的圖像數(shù)據(jù)被存儲(chǔ)在圖像存儲(chǔ)器170中。當(dāng)解馬賽克處理單元222讀出存儲(chǔ)在圖像存儲(chǔ)器170中的圖像數(shù)據(jù)時(shí),解馬賽克處理單元222讀出水平方向上的像素?cái)?shù)據(jù)的數(shù)量減少到1/2并且垂直方向上的像素?cái)?shù)據(jù)的數(shù)量減少到1/2的圖像數(shù)據(jù)。如圖45所示,從圖像存儲(chǔ)器170讀出并被輸入到解馬賽克處理單元222的圖像數(shù)據(jù)的像素的數(shù)量小于成像器件134的像素的數(shù)量和從圖像緩沖器211到213寫入圖像存儲(chǔ)器170中的圖像數(shù)據(jù)的像素的數(shù)量。
[0543][改變圖像數(shù)據(jù)的區(qū)域的修改]
[0544]在此示例中,改變了通過使用DSP200從其讀出圖像數(shù)據(jù)的區(qū)域,并減少了圖像數(shù)據(jù)的像素的數(shù)量。
[0545]圖46是其中通過第一實(shí)施例中的成像器件134改變讀出區(qū)域的圖像數(shù)據(jù)的流程的示意圖。排列在圖46中所示的粗線的箭頭附近的標(biāo)記表示圖像數(shù)據(jù)的像素的數(shù)量。在圖46所示的示例中,通過使用具有1920X1440像素的成像器件134讀出具有480X640像素的圖像數(shù)據(jù)。如圖46所示,盡管成像器件134的像素的數(shù)量是1920X 1440,但是從成像器件134輸出的圖像數(shù)據(jù)的像素的數(shù)量是480X640。
[0546]圖47是當(dāng)從第一實(shí)施例中的圖像存儲(chǔ)器170讀出圖像數(shù)據(jù)時(shí)改變讀出區(qū)域的圖像數(shù)據(jù)的流程的示意圖。排列在圖47的粗線的箭頭附近的標(biāo)記表示圖像數(shù)據(jù)的像素的數(shù)量。在圖47所示的示例中,當(dāng)從圖像存儲(chǔ)器170讀出圖像數(shù)據(jù)時(shí),通過讀出在作為圖像數(shù)據(jù)的一部分的區(qū)域中的圖像數(shù)據(jù)來改變圖像數(shù)據(jù)的區(qū)域以減少圖像數(shù)據(jù)的像素的數(shù)量。具體地,從具有1920X1440像素的成像器件134輸出的圖像數(shù)據(jù)被存儲(chǔ)在圖像存儲(chǔ)器170中。當(dāng)解馬賽克處理單元222讀出存儲(chǔ)在圖像存儲(chǔ)器170中的圖像數(shù)據(jù)時(shí),解馬賽克處理單元222讀出與480X640像素的區(qū)域?qū)?yīng)的圖像數(shù)據(jù)。如圖47所示,成像器件134的像素的數(shù)量和從圖像緩沖器211到213寫入圖像存儲(chǔ)器170中的圖像數(shù)據(jù)的像素的數(shù)量是1920X1440。另一方面,從圖像存儲(chǔ)器170讀出并被輸入到解馬賽克處理單元222的圖像數(shù)據(jù)的像素的數(shù)量是480 X 640。
[0547][在單眼成像操作期間兩個(gè)成像系統(tǒng)的停止的示例]
[0548]說明使用三個(gè)成像系統(tǒng)中的至少一個(gè)成像系統(tǒng)產(chǎn)生捕捉圖像的示例。例如,為了降低功耗,期望停止不產(chǎn)生捕捉圖像的成像系統(tǒng)的操作。因此以下說明例如當(dāng)產(chǎn)生捕捉圖像時(shí)停止不產(chǎn)生捕捉圖像的成像系統(tǒng)的操作的示例。
[0549][蜂窩電話設(shè)備的配置示例]
[0550]圖48是第一實(shí)施例中的蜂窩電話設(shè)備100的功能配置示例的框圖。圖48中所示的配置示例是其中在圖3所示的配置中省略了與涉及向第一到第三成像系統(tǒng)191到193供電的組件以外的組件并添加了成像控制單元201的示例。在此示例中,通過中斷向成像系統(tǒng)供電(圖50所示的控制方法I)停止成像系統(tǒng)的操作。電源控制單元207和電源供應(yīng)單元208和209與圖3所示的相同。因此,以下主要說明與成像系統(tǒng)的操作的停止有關(guān)的組件。省略與圖3所示相同的組件的說明。
[0551]例如,當(dāng)選擇了用于僅使用由成像器件134產(chǎn)生的圖像數(shù)據(jù)的成像操作(單眼成像操作)時(shí),成像控制單元201命令電源供應(yīng)單元209中斷向第二和第三成像系統(tǒng)192和193的供電。這使得能夠在執(zhí)行單眼成像操作時(shí)停止不用于該成像操作的第二和第三成像系統(tǒng)192和193的操作,并降低功耗。當(dāng)對第二和第三成像系統(tǒng)192和193的供電被中斷時(shí),期望停止時(shí)鐘信號、垂直同步信號和水平同步信號等從DSP200到第二和第三成像系統(tǒng)192和193的輸出。這使得能夠進(jìn)一步降低功耗。
[0552]圖49A到圖49D是第一實(shí)施例中的蜂窩電話設(shè)備100的功能配置示例的框圖。在圖49A到圖49D所示的配置示例中,以簡化形式僅示出了與用于停止成像操作的處理有關(guān)的組件。具體地,僅示出了 AND電路801到807以及信號線。兩條輸入信號線連接到AND電路801到807中的每個(gè)。當(dāng)從每條輸入信號先輸入“H”信號時(shí),AND電路執(zhí)行用于將“H”信號輸出到輸出信號線的AND (與操作)。在此示例中,當(dāng)停止成像系統(tǒng)的操作時(shí),中斷向要被停止的成像系統(tǒng)的時(shí)鐘供應(yīng)等而不中斷向要被停止的成像系統(tǒng)的電力供應(yīng)。
[0553] 在圖49A中,示出了用于停止向成像系統(tǒng)的時(shí)鐘供應(yīng)的DSP200中的電路配置示例。信號線809是用于輸出到成像器件134的時(shí)鐘信號的信號線。信號線810是用于輸出到成像器件135的時(shí)鐘信號的信號線。信號線811是用于輸出到成像器件136的時(shí)鐘信號的信號線。信號線812是用于輸出到成像器件134的開/關(guān)控制信號的信號線。信號線813是用于輸出到成像器件135的開/關(guān)控制信號的信號線。信號線814是用于輸出到成像器件136的開/關(guān)控制信號的信號線。信號線815是用于輸出到成像器件134的時(shí)鐘信號的信號線。信號線816是用于輸出到成像器件135的時(shí)鐘信號的信號線。信號線817是用于輸出到成像器件136的時(shí)鐘信號的信號線。例如,當(dāng)選擇了單眼成像操作時(shí),成像控制單元201將信號線812到814中的信號線813和814的信號改變?yōu)椤癓”信號。從而,停止向成像器件135和136的時(shí)鐘供應(yīng)(圖50所示的控制方法2)。[0554]在圖49B中,示出了在停止用于產(chǎn)生成像器件134到136中的時(shí)鐘而不中斷向成像系統(tǒng)的電源和時(shí)鐘供應(yīng)的電路的操作的電路配置示例。在此示例中,示出圖10所示的倍頻器/分頻器391和392中的倍頻器818作為示例。假設(shè)此示例中所示的倍頻器818是成像器件135和136的倍頻器。信號線819是用于來自DSP200的時(shí)鐘信號的信號線。信號線820是用于來自DSP200的成像開/關(guān)信號的信號線。信號線821是用于倍頻后的時(shí)鐘信號的信號線。例如,當(dāng)選擇了單眼成像操作時(shí),DSP200將信號線820的信號改變?yōu)椤癓”信號。從而,停止成像器件135和136中的倍頻器(圖50中所示的控制方法3)。
[0555]在圖49C中,示出了在停止成像器件134到136中的垂直掃描電路和水平掃描電路的操作而不中斷向成像系統(tǒng)的電源和時(shí)鐘供應(yīng)以及不中斷用于成像器件中的時(shí)鐘的倍頻器的電路配置示例。信號線823是用于垂直掃描電路822的內(nèi)部的第一線中的垂直控制信號的信號線。信號線824是用于垂直掃描電路822的內(nèi)部的第二線中的垂直控制信號的信號線。信號線825和831是來自DSP200的成像開/關(guān)信號的信號線。信號線828和830是用于來自成像器件中的倍頻器/分配器的時(shí)鐘信號的信號線。信號線826是用于被輸出到垂直掃描電路822的外部的第一線中的垂直控制信號的信號線。信號線827是用于被輸出到垂直掃描電路822的外部的第二線中的垂直控制信號的信號線。信號線832是用于到水平掃描電路829的內(nèi)部的時(shí)鐘信號的信號線。信號線833是用于被輸出到水平掃描電路829的外部的第一線中的水平控制信號的信號線。信號線834是用于被輸出到水平掃描電路829的外部的第二線中的水平控制信號的信號線。在此示例中,僅示出了第一線和第二線中的信號線,并省略了其他線的信號線。例如,當(dāng)選擇了單眼成像操作時(shí),DSP200將信號線825和831的信號改變?yōu)椤癓”信號。從而,在成像器件135和136的垂直掃描電路和水平掃描電路中停止垂直掃描信號和水平掃描信號的輸出(圖50中所不的控制方法4)。在圖49C所示的示例中,與以上說明的示例相比,因?yàn)楦髷?shù)量的電路在第二和第三成像系統(tǒng)192和193的內(nèi)部工作,因此功耗降低的效果小。但是,因?yàn)楸惶峁┙o成像器件和成像器件中的倍頻器的時(shí)鐘在工作,因此當(dāng)執(zhí)行從單眼成像操作到復(fù)合眼成像操作的切換操作時(shí),能夠迅速地恢復(fù)第二和第三成像系統(tǒng)192和193的操作。
[0556]可以通過固定從DSP200提供到成像系統(tǒng)的垂直同步信號和水平同步信號來停止成像系統(tǒng)的操作(圖50所示的控制方法5)。在此情況下,因?yàn)槲摧斎胪叫盘枺虼顺上衿骷荒軋?zhí)行用于讀出圖像數(shù)據(jù)的操作。
[0557]圖50是用于停止成像系統(tǒng)的操作的控制方法和第一實(shí)施例中的信號線之間的關(guān)系的圖。圖50所示的列表表示控制方法和信號線之間的關(guān)系。可以通過執(zhí)行圖50所示的控制方法來停止成像系統(tǒng)的操作。期望不通過在與控制方法I對應(yīng)的空間中的用斜線標(biāo)記的空間中的信號線輸出信號。期望將在與控制方法2到5對應(yīng)的空間中的用斜線標(biāo)記的空間中的信號線固定為“H”或“L”。在圖50所示的表中描述的信號線(從DSP200到成像系統(tǒng)的信號線)可以被設(shè)置在狀態(tài)“H”輸出、“L”輸出、不充分輸出和無輸出中的任意一個(gè)。但是,期望將信號線設(shè)置在無輸出的狀態(tài)以便降低功耗。
[0558][從成像系統(tǒng)到DSP中的圖像數(shù)據(jù)的捕捉的示例]
[0559]圖51是第一實(shí)施例中的來自成像器件的輸出定時(shí)以及圖像緩沖器中的寫的狀態(tài)的示意時(shí)序圖。圖51所示的橫軸表示時(shí)間軸。波形700表示從DSP200到成像系統(tǒng)的水平同步信號。橫軸701到703表示從成像系統(tǒng)輸出到DSP200的圖像數(shù)據(jù)的時(shí)間轉(zhuǎn)變(transition)。橫軸704到706表示圖像緩沖器211到219的寫狀態(tài)的時(shí)間轉(zhuǎn)變。在圖51所示的示例中,在同一行中示出了與成像系統(tǒng)對應(yīng)的一組三個(gè)圖像緩沖器的寫狀態(tài)。
[0560]例如,作為例子說明與第一成像系統(tǒng)191相對的圖像緩沖器1A、1B和1C。例如,完成從成像器件134到第一圖像緩沖器IA的圖像數(shù)據(jù)的寫,圖像緩沖器IA改變到待機(jī)狀態(tài),以等待讀出到DSP200的內(nèi)部。在圖像緩沖器IA的待機(jī)狀態(tài)期間,執(zhí)行從成像器件134向第二圖像緩沖器IB的圖像數(shù)據(jù)的寫。當(dāng)完成從成像器件134向第二圖像緩沖器IB的圖像數(shù)據(jù)的寫的時(shí)候,圖像緩沖器IB改變到待機(jī)狀態(tài),以等待讀出到DSP200的內(nèi)部。當(dāng)完成第二圖像緩沖器IB中的圖像數(shù)據(jù)的寫時(shí),執(zhí)行從第一圖像緩沖器IA向DSP200的內(nèi)部的圖像數(shù)據(jù)的讀出。在完成圖像緩沖器IC中的寫之前,完成從圖像緩沖器IA讀出圖像數(shù)據(jù),并且圖像數(shù)據(jù)可以被寫入圖像緩沖器IA中。隨后,重復(fù)執(zhí)行一系列這些類型的操作。按相同的方式對圖像緩沖器2A到2C和圖像緩沖器3A到3C執(zhí)行該操作。
[0561]當(dāng)通過使用一條數(shù)據(jù)總線204讀出被寫入三個(gè)圖像緩沖器中的圖像數(shù)據(jù)時(shí),需要在等于或短于成像器件寫圖像數(shù)據(jù)的時(shí)間的1/3的時(shí)間內(nèi)讀取圖像緩沖器中的圖像數(shù)據(jù)。
[0562]以下說明成像器件讀出像素的圖像數(shù)據(jù)和將圖像數(shù)據(jù)寫入圖像緩沖器211到219中的時(shí)鐘頻率與DSP200讀出圖像緩沖器211到219中的圖像數(shù)據(jù)的時(shí)鐘頻率之間的關(guān)系。此外,以下說明在復(fù)合眼成像操作中DSP200讀出圖像緩沖器211到219中的圖像數(shù)據(jù)的時(shí)鐘頻率與在單眼成像記錄中DSP200讀出圖像緩沖器211到219中的圖像數(shù)據(jù)的時(shí)鐘頻率之間的關(guān)系。
[0563]圖52A和圖52B到圖 54A和圖54B是用于像素的讀出和寫入第一實(shí)施例中的成像器件中的圖像緩沖器中的時(shí)鐘頻率與從圖像緩沖器讀取圖像數(shù)據(jù)的時(shí)鐘頻率之間的關(guān)系的圖。假設(shè)圖52A和圖52B到圖54A和圖54B所示的橫軸的關(guān)系表示一條線中的時(shí)間的流逝,且縱軸的關(guān)系表不一幀中的每條線中的時(shí)間的流逝。圖52A和圖52B所不的不例是與圖28A和圖28B所示的第一讀出方法(三眼橫向廣角圖像成像模式)對應(yīng)的示例。圖53A和圖53B所示的示例是與圖32A和圖32B中所示的第三讀出方法(單眼橫向圖像成像模式)對應(yīng)的示例。圖54A和圖54B所示的示例是與圖36A和圖36B所示的第五讀出方法(單眼縱向小區(qū)域圖像成像模式)對應(yīng)的示例。
[0564]在圖52A中,示出了在三眼橫向廣角圖像成像模式下成像器件中的時(shí)鐘頻率和來自成像器件的圖像數(shù)據(jù)的輸出定時(shí)之間的關(guān)系。波形710表示當(dāng)設(shè)置了三眼橫向廣角圖像成像模式時(shí)在從成像器件134到136中的所有區(qū)域讀出所有像素時(shí)使用的時(shí)鐘。橫軸713到718將從成像器件134到136讀出并被輸出到圖像緩沖器211到219的圖像數(shù)據(jù)的時(shí)間轉(zhuǎn)變示意性表示為矩形。在線719中,示出了輸出到圖像緩沖器211的圖像數(shù)據(jù)。在線720中,示出了輸出到圖像緩沖器212的圖像數(shù)據(jù)。在線721中,示出了輸出到圖像緩沖器213的圖像數(shù)據(jù)。在此示例中,僅在橫軸715上將不同的標(biāo)記(Dll到DlC等)附在矩形中,并在其他橫軸的矩形中省略了標(biāo)記。橫軸713上所示的大的虛線圓圈表示垂直同步信號的定時(shí)。橫軸713到718上所示的小的點(diǎn)線圓圈表示水平同步信號的定時(shí)。類似地,在以下所述的圖52B到圖54A和圖54B中所示的橫軸上,示出大的虛線圓圈和小的點(diǎn)線圓圈以表示垂直同步信號的定時(shí)和水平同步信號的定時(shí)。
[0565]在圖52B中,示出了在三眼橫向廣角圖像成像模式下DSP200中的時(shí)鐘頻率和用于從圖像緩沖器中讀出圖像數(shù)據(jù)的定時(shí)之間的關(guān)系。波形722表示當(dāng)設(shè)置了三眼橫向廣角圖像成像模式時(shí)在從圖像緩沖器211到219讀出圖像數(shù)據(jù)時(shí)由DSP200使用的時(shí)鐘。橫軸725到732將從圖像緩沖器211到219讀出的圖像數(shù)據(jù)的時(shí)間轉(zhuǎn)變示意性表示為矩形。在此示例中,通過僅在橫軸729上的箭頭將不同的標(biāo)記(Dll到DlC等)與矩形相關(guān)聯(lián)。在其他橫軸上省略了矩形中的標(biāo)記。這些標(biāo)記對應(yīng)于圖52A所示的標(biāo)記。部分733是成像器件134的讀出部分,部分734是成像器件135的讀出部分,部分735是成像器件136的讀出部分。
[0566]當(dāng)從三個(gè)成像器件134到136向DSP200輸入圖像數(shù)據(jù)時(shí),輸入的圖像數(shù)據(jù)被寫入圖像緩沖器211到219中。寫入圖像緩沖器211到219中的圖像數(shù)據(jù)被經(jīng)由DSP200中的一條數(shù)據(jù)總線204讀出,并經(jīng)由與圖像存儲(chǔ)器的I/F206被寫入圖像存儲(chǔ)器170中。例如,假設(shè)設(shè)置了三眼橫向廣角圖像成像模式。在此情況下,如圖52A和圖52B所示,需要在等于或短于成像器件134到136將圖像數(shù)據(jù)寫入圖像緩沖器211到219中的時(shí)間的1/3的時(shí)間內(nèi)讀出圖像緩沖器211到219中的圖像數(shù)據(jù)。
[0567]在圖53A中,示出了在單眼橫向圖像成像模式下成像器件中的時(shí)鐘頻率和用于從成像器件輸出圖像數(shù)據(jù)的定時(shí)之間的關(guān)系。在圖53B中,示出了在單眼橫向圖像成像模式下DSP200中的時(shí)鐘頻率和用于從圖像緩沖器讀出圖像數(shù)據(jù)的定時(shí)之間的關(guān)系。波形736表示當(dāng)設(shè)置了單眼橫向圖像成像模式時(shí)在從圖像緩沖器211到219讀出圖像數(shù)據(jù)時(shí)由DSP200使用的時(shí)鐘。部分737是成像器件134的讀出部分。與圖52A和圖52B中所示的示例中相同的組件有相同的參考數(shù)字和標(biāo)記表示。
[0568]當(dāng)比較圖52A和圖52B與圖53A和圖53B時(shí),可以理解,當(dāng)設(shè)置了三眼橫向廣角圖像成像模式時(shí),圖像數(shù)據(jù)的量是在單眼橫向圖像成像模式下的圖像數(shù)據(jù)的量的三倍。因此,當(dāng)設(shè)置了三眼橫向廣角圖像成像模式時(shí),需要高達(dá)單眼橫向成像操作中的時(shí)鐘頻率的三倍的時(shí)鐘頻率作為用于讀出圖像緩沖器211到219的圖像數(shù)據(jù)的時(shí)鐘頻率。類似地,當(dāng)設(shè)置了三眼橫向廣角圖像成像模式并執(zhí)行DSP200的內(nèi)部的信號處理時(shí),需要高達(dá)單眼橫向圖像成像模式中的時(shí)鐘頻 率的三倍的時(shí)鐘頻率。
[0569]在圖54A中,示出了在單眼縱向小區(qū)域圖像成像模式下成像器件中的時(shí)鐘頻率和用于從成像器件輸出圖像數(shù)據(jù)的定時(shí)之間的關(guān)系。波形738表示當(dāng)設(shè)置了單眼縱向小區(qū)域圖像成像模式時(shí)在從成像器件134到136中的特定區(qū)域讀出所有像素時(shí)使用的時(shí)鐘。在圖54B中,示出了在單眼縱向小區(qū)域圖像成像模式下DSP200中的時(shí)鐘頻率和用于從圖像緩沖器中讀出圖像數(shù)據(jù)的定時(shí)之間的關(guān)系。波形739表示當(dāng)設(shè)置了單眼縱向小區(qū)域圖像成像模式時(shí)在從圖像緩沖器211到219讀出圖像數(shù)據(jù)時(shí)由DSP200使用的時(shí)鐘。部分740是成像器件134的讀出部分。與圖52A和圖52B中所示的示例中相同的組件由相同的參考數(shù)字和標(biāo)記表不O
[0570]當(dāng)比較圖53A和圖53B與圖54A和圖54B時(shí),可以理解,當(dāng)設(shè)置了單眼縱向小區(qū)域圖像成像模式時(shí),圖像數(shù)據(jù)的數(shù)據(jù)量比讀出光接收表面的所有像素時(shí)的數(shù)據(jù)量小。因此,當(dāng)設(shè)置了單眼縱向小區(qū)域圖像成像模式時(shí),需要與讀出所有像素時(shí)的時(shí)鐘頻率相比小的時(shí)鐘頻率作為用于讀出圖像緩沖器211的圖像數(shù)據(jù)的時(shí)鐘頻率。類似地,當(dāng)執(zhí)行DSP200的內(nèi)部的圖像信號處理時(shí),時(shí)鐘頻率可以比讀出所有像素時(shí)的時(shí)鐘頻率小。
[0571][向DSP的數(shù)據(jù)總線請求的工作頻率的示例]
[0572]圖55是由第一實(shí)施例中的成像器件134產(chǎn)生的圖像數(shù)據(jù)的流程的示意圖。圖55所示的配置與圖43所示的配置示例基本相同,并且不同之處僅在于,添加了由各單元經(jīng)過數(shù)據(jù)總線204傳輸?shù)膱D像數(shù)據(jù)的數(shù)據(jù)格式。在此示例中,假設(shè)不使用DSP200中的像素相加處理單元221,圖像輸出僅是到顯示單元140的輸出,并且不執(zhí)行到外部顯示裝置的輸出。
[0573]從成像器件134寫入圖像緩沖器211到219中的圖像數(shù)據(jù)是Bayer數(shù)據(jù)750。輸入到DSP200的圖像數(shù)據(jù)按Bayer數(shù)據(jù)格式向上傳輸?shù)揭訠ayer數(shù)據(jù)對RGB (R (紅)、G (綠)和B (藍(lán)))數(shù)據(jù)進(jìn)行插值的解馬賽克處理單元222的前級。具體地,關(guān)于從圖像緩沖器211到213向圖像存儲(chǔ)器170寫圖像數(shù)據(jù)以及將圖像數(shù)據(jù)讀出到解馬賽克處理單元222,按Bayer數(shù)據(jù)格式傳輸圖像數(shù)據(jù)。
[0574]經(jīng)歷了解馬賽克處理單元222的解馬賽克處理的圖像數(shù)據(jù)在執(zhí)行分辨率轉(zhuǎn)換處理之前被直接在各處理單元之間傳送。在信號處理中處理大量數(shù)據(jù)的分辨率轉(zhuǎn)換中,經(jīng)過數(shù)據(jù)總線204將圖像數(shù)據(jù)預(yù)先寫入圖像存儲(chǔ)器170中,使得可以在期望的定時(shí)容易地輸入期望的圖像數(shù)據(jù)。分辨率轉(zhuǎn)換單元231和251從圖像存儲(chǔ)器170中讀取分辨率轉(zhuǎn)換處理所需的圖像數(shù)據(jù)。
[0575]從而,RGB格式的圖像數(shù)據(jù)在用于記錄圖像的分辨率轉(zhuǎn)換之前被經(jīng)過數(shù)據(jù)總線204寫入圖像存儲(chǔ)器170中。當(dāng)執(zhí)行用于圖像記錄的分辨率轉(zhuǎn)換時(shí),經(jīng)過數(shù)據(jù)總線204從圖像存儲(chǔ)器170讀出RGB數(shù)據(jù)格式的圖像數(shù)據(jù)。
[0576]當(dāng)使得顯示單元140顯示圖像時(shí),通常,顯示單元以YCbCr格式請求圖像數(shù)據(jù)。因此,YCbCr格式的圖像數(shù)據(jù)在用于顯示裝置的分辨率轉(zhuǎn)換之前被經(jīng)過數(shù)據(jù)總線204寫入圖像存儲(chǔ)器170中。當(dāng)執(zhí)行用于圖像顯示的分辨率轉(zhuǎn)換時(shí),經(jīng)過數(shù)據(jù)總線204從圖像存儲(chǔ)器170讀出YCbCr格式的圖像數(shù)據(jù)。
[0577]說明經(jīng)過數(shù)據(jù)總線204傳輸?shù)囊粭l圖像數(shù)據(jù)的數(shù)據(jù)量。例如,假設(shè)當(dāng)將一條圖像數(shù)據(jù)從成像器件134輸入到DSP200時(shí),將輸入的圖像數(shù)據(jù)記錄在記錄介質(zhì)180中作為一個(gè)圖像文件,并且使得顯示單元140顯示圖像數(shù)據(jù)。在此情況下,作為Bayer數(shù)據(jù)的兩條圖像數(shù)據(jù)、作為YCbCr數(shù)據(jù)的兩條圖像數(shù)據(jù)以及作為RGB數(shù)據(jù)的兩條圖像數(shù)據(jù)被經(jīng)過數(shù)據(jù)總線204傳輸。換句話說,在圖像緩沖器211到213與解馬賽克處理單元222之間的兩條圖像數(shù)據(jù)被按Bayer格式傳輸(Bayer751和Bayer752)。在顏色調(diào)整處理單元226與分辨率轉(zhuǎn)換單元231之間的兩條圖像數(shù)據(jù)被按YCbCr數(shù)據(jù)格式傳輸(YCbCr753和YCbCr756)。在RGB轉(zhuǎn)換處理單元227和分辨率轉(zhuǎn)換單元251之間的兩條圖像數(shù)據(jù)被按RGB數(shù)據(jù)格式傳輸(RGB754 和 RGB755)。
[0578]YCbCr數(shù)據(jù)格式的一條圖像數(shù)據(jù)的數(shù)據(jù)量大約是具有相同圖像大小的Bayer格式的圖像數(shù)據(jù)的數(shù)據(jù)量的兩倍大。RGB數(shù)據(jù)格式的一條圖像數(shù)據(jù)的數(shù)據(jù)量大約是具有相同圖像大小的Bayer格式的圖像數(shù)據(jù)的數(shù)據(jù)量的三倍大。例如,當(dāng)將一條圖像數(shù)據(jù)作為一個(gè)圖像文件記錄在記錄介質(zhì)180中并使得顯示單元140顯示該圖像數(shù)據(jù)時(shí),需要經(jīng)過數(shù)據(jù)總線204傳輸Bayer數(shù)據(jù)格式下的大約十二條圖像數(shù)據(jù)。圖56A和圖56B中示出了關(guān)于圖像數(shù)據(jù)的傳輸?shù)奶幚怼?br>
[0579]圖56A和圖56B是第一實(shí)施例中的占用數(shù)據(jù)總線204的處理和時(shí)間之間的關(guān)系的示意圖。在圖56A中,示出了在將從成像器件134輸入到DSP200的一條圖像數(shù)據(jù)作為一個(gè)圖像文件記錄在記錄介質(zhì)180中并使得顯示單元140顯示該圖像數(shù)據(jù)時(shí)占用數(shù)據(jù)總線204的處理和時(shí)間之間的關(guān)系。在圖56A和圖56B中,橫軸是時(shí)間軸,且不出了處理一幀時(shí)的關(guān)系。與圖55所示的示例對應(yīng)的各種處理由相同的參考數(shù)字表示。[0580]在圖56B中,示出了在使得顯示單元140顯示從成像器件134輸入到DSP200的一條圖像數(shù)據(jù)而不將該圖像數(shù)據(jù)記錄在記錄介質(zhì)180中時(shí)占用數(shù)據(jù)總線204的處理和時(shí)間之間的關(guān)系。該示例是其中執(zhí)行對于所謂的監(jiān)視圖像的顯示操作的示例。當(dāng)執(zhí)行對于監(jiān)視圖像的顯示操作時(shí),在顯示單元140中顯示圖像,但不產(chǎn)生用于記錄的圖像數(shù)據(jù)。具體地,在用于記錄圖像的分辨率轉(zhuǎn)換中,用于將RGB數(shù)據(jù)寫入圖像存儲(chǔ)器170中的處理754和用于從圖像存儲(chǔ)器170中讀出RGB數(shù)據(jù)的處理755在用于記錄圖像的分辨率轉(zhuǎn)換的前級處是不需要的。因此,在對于監(jiān)視圖像的顯示操作中,當(dāng)使得顯示單元140顯示從成像單元130輸入到DSP200的一條圖像數(shù)據(jù)時(shí),必須經(jīng)過數(shù)據(jù)總線204傳輸僅Bayer數(shù)據(jù)格式的大約六個(gè)圖像數(shù)據(jù)。
[0581]如上所述,可以計(jì)算經(jīng)過數(shù)據(jù)總線204傳輸?shù)膱D像數(shù)據(jù)的數(shù)據(jù)量。以下說明向數(shù)據(jù)總線204請求的工作頻率。
[0582]以下說明用于計(jì)算向數(shù)據(jù)總線204請求的工作頻率的變量。
[0583]H:在成像器件中執(zhí)行像素?cái)?shù)據(jù)讀出的區(qū)域中的橫向方向上的像素?cái)?shù)量
[0584]V:在成像器件中執(zhí)行像素?cái)?shù)據(jù)讀出的區(qū)域中的縱向方向上的像素?cái)?shù)量
[0585]R:當(dāng)在成像器件中執(zhí)行像素?cái)?shù)據(jù)讀出時(shí)在執(zhí)行像素稀疏讀出時(shí)的稀疏比
[0586]B:圖像的像素?cái)?shù)據(jù)的位寬
[0587]F:可以在DSP200中在一秒內(nèi)經(jīng)歷圖像信號處理的從成像器件輸入的圖像的數(shù)量
[0588]Kb:直到從成像器件輸入的一個(gè)圖像被記錄在記錄介質(zhì)180中并顯示在顯示單元140中為止,需要按Bayer數(shù)據(jù)格式在DSP200的數(shù)據(jù)總線204上傳輸?shù)膱D像的數(shù)量
[0589]Ky:直到從成像器件輸入的一個(gè)圖像被記錄在記錄介質(zhì)180中并顯示在顯示單元140中為止,需要按YCbCr數(shù)據(jù)格式在DSP200的數(shù)據(jù)總線204上傳輸?shù)膱D像的數(shù)量
[0590]Kr:直到從成像器件輸入的一個(gè)圖像被記錄在記錄介質(zhì)180中并顯示在顯示單元140中為止,需要按RGB數(shù)據(jù)格式在DSP200的數(shù)據(jù)總線204上傳輸?shù)膱D像的數(shù)量
[0591]K:直到從成像器件輸入的一個(gè)圖像被記錄在記錄介質(zhì)180中并顯示在顯示單元140中為止,在DSP200的數(shù)據(jù)總線204上傳輸?shù)膱D像的數(shù)量的Bayer圖像數(shù)據(jù)方面的值
[0592]K通過以下公式計(jì)算。
[0593]K=KbXl+KyX2+KrX3
[0594]D:DSP200的數(shù)據(jù)總線204的位寬
[0595]使用這些變量通過以下公式13計(jì)算在一秒內(nèi)輸入到DSP200的數(shù)據(jù)的量DDl (單位:位)。
[0596]DD1=HXVXRXBXF...(公式 13)
[0597]通過以下公式14計(jì)算在一秒內(nèi)應(yīng)該在數(shù)據(jù)總線204上傳輸?shù)臄?shù)據(jù)量(單DD2位:位)。
[0598]DD2=HXVXRXBXFXK...(公式 14)
[0599]通過以下公式15計(jì)算傳輸圖像數(shù)據(jù)所需的數(shù)據(jù)總線204的時(shí)鐘頻率(單位:Hz)
[0600]Fclk=HXVXRXBXFXK/(D-DmodB)...(公式 15)
[0601]通過以下公式16可以計(jì)算時(shí)鐘頻率Fclk的優(yōu)選范圍內(nèi)的下限Fclk min。
[0602]Fclkmin=(HXVXRXBXFXKX0.1) / (D-DmodB)...(公式 16)
[0603]在數(shù)據(jù)總線204上,并不總是在數(shù)據(jù)間沒有任何間隔地傳輸數(shù)據(jù)。因此,本領(lǐng)域技術(shù)人員公知的是,當(dāng)基于需要通過使用數(shù)據(jù)總線204傳輸?shù)臄?shù)據(jù)量計(jì)算數(shù)據(jù)總線204的工作頻率時(shí),為數(shù)據(jù)總線204的傳送能力給出百分之幾十的余量。
[0604]例如,當(dāng)給出百分之幾的余量時(shí),很可能給出的余量的量太小。另一方面,當(dāng)給出百分之一百幾十的余量時(shí),余量太大。這也是本領(lǐng)域技術(shù)人員公知的。例如,按某個(gè)間隔執(zhí)行數(shù)據(jù)總線204上的數(shù)據(jù)傳輸,并且當(dāng)余量是百分之幾十時(shí),數(shù)據(jù)總線204的傳輸量下降。因此,如果給出100%的最大余量,數(shù)據(jù)總線204的傳輸能力是足夠的。因此,以下說明在時(shí)鐘頻率Fclk的優(yōu)選范圍內(nèi)的上限Fclk max。
[0605]可以通過以下公式17計(jì)算時(shí)鐘頻率Fclk的優(yōu)選范圍內(nèi)的上限Fclk max。
[0606]Fclk max= (HXVXRXBXFXKX2.0)/(D-DmodB)...(公式 17)
[0607]以此方式,可以計(jì)算時(shí)鐘頻率Fclk的優(yōu)選范圍內(nèi)的下限Fclk min和上限Fclkmax ο因此,可以通過以下公式18定義數(shù)據(jù)總線204的時(shí)鐘頻率Fclk的優(yōu)選范圍。
[0608](HXVXRXBXFXKX1.0)/(D-DmodB)≤ Fclk ≤(HXVXRXBXFXKX2.0)/(D-DmodB)...(公式 18)
[0609]說明公式16到18中的“D-DmodB”。
[0610]當(dāng)數(shù)據(jù)總線204的位寬不是成像器件的像素的位寬的整數(shù)倍大時(shí),在圖像存儲(chǔ)器170的寫入操作中發(fā)生浪費(fèi)。例如,當(dāng)數(shù)據(jù)總線204的位寬是128位并且成像器件的像素的位寬是12位時(shí),難以傳輸?shù)刃в谑粋€(gè)像素的12位像素?cái)?shù)據(jù),并且僅可以傳輸?shù)刃в谑畟€(gè)像素的像素?cái)?shù)據(jù)。因此,在寫操作中出現(xiàn)發(fā)生8位的浪費(fèi)。指示浪費(fèi)的量是DmodB。具體地,通過從數(shù)據(jù)總線204的位寬(有效數(shù)據(jù)總線寬度)減去指示浪費(fèi)的量獲得的值是“D-DmodB”。
[0611]如公式16到18指示的,可以根據(jù)H、V、R、B、F、K和D計(jì)算數(shù)據(jù)總線204的工作頻率的優(yōu)選范圍。但是,H、V、R、B、F、K和D的值根據(jù)蜂窩電話設(shè)備100執(zhí)行的成像操作的內(nèi)容而改變。因此,期望根據(jù)在相應(yīng)類型的成像操作中設(shè)置的H、V、R、B、F、K和D的值而改變數(shù)據(jù)總線204的工作頻率。通過按此方式改變數(shù)據(jù)總線204的工作頻率,在DSP200中,能夠?qū)?shù)據(jù)總線204的工作頻率降低到所需和足夠的值,并降低功耗。
[0612]圖57是用于確定關(guān)于第一實(shí)施例中的蜂窩電話設(shè)備100的各個(gè)種類的成像操作的數(shù)據(jù)總線204的工作頻率的參數(shù)的圖。通過設(shè)置圖57所示的參數(shù)(Hlsr、Vlsr等),能夠確定關(guān)于蜂窩電話設(shè)備100的各個(gè)種類的成像操作的數(shù)據(jù)總線204的工作頻率。圖58中示出了參數(shù)的示例。
[0613]圖58是用于確定關(guān)于第一實(shí)施例中的蜂窩電話設(shè)備100的各個(gè)種類的成像操作的數(shù)據(jù)總線204的工作頻率的參數(shù)的圖。在此示例中,執(zhí)行靜止圖像記錄操作??梢曰诟鲄?shù)預(yù)先計(jì)算數(shù)據(jù)總線204的工作頻率的下限Fclk min和上限Fclk max。在圖58所示的示例中,要在一秒內(nèi)經(jīng)歷靜止圖像記錄處理的圖像的數(shù)量和要在一秒內(nèi)經(jīng)歷監(jiān)視操作的圖像的數(shù)量被設(shè)置為三十。
[0614][靜止圖像記錄操作的時(shí)分處理的示例]
[0615]說明關(guān)于靜止圖像記錄操作的時(shí)分處理。時(shí)分處理意味例如靜止圖像的成像和記錄處理未在一幀的時(shí)段內(nèi)(即被提供給圖像信號處理單元220的垂直同步信號的一個(gè)時(shí)段內(nèi))完成而是執(zhí)行幾幀的時(shí)段。
[0616]例如,近年來,即使當(dāng)用戶使用帶有廣泛使用的相機(jī)的蜂窩電話設(shè)備拍攝相對大量的靜止圖像時(shí),通常在一秒內(nèi)僅拍攝一個(gè)靜止圖像。因此,當(dāng)執(zhí)行靜止圖像記錄操作時(shí),例如,即使在大約一秒內(nèi)執(zhí)行對于一個(gè)靜止圖像的圖像信號處理、記錄處理等,也不太可能破壞對于用戶的便利性。通過按此方式執(zhí)行對于一個(gè)靜止圖像的圖象信號處理、記錄處理等,能夠降低DSP200的數(shù)據(jù)總線204的工作頻率,并降低功耗。
[0617]直到在記錄了一個(gè)靜止圖像后完成圖像信號處理,記錄處理等,能夠在顯示單元140中顯示諸如“請稍等”之類的消息以通知正在執(zhí)行靜止圖像成像處理。除了消息之外,可以顯示指示正在執(zhí)行靜止圖像成像處理的圖標(biāo)或標(biāo)記,或者可以并行地執(zhí)行監(jiān)視操作以顯示監(jiān)視圖像。
[0618]圖59以及圖60A和圖60B是由第一實(shí)施例中的圖像信號處理單元220執(zhí)行的時(shí)分處理的示意圖。圖59以及圖60A和圖60B所示的示例表示當(dāng)執(zhí)行對于靜止圖像的記錄指令操作且同時(shí)執(zhí)行監(jiān)視操作時(shí)所執(zhí)行的時(shí)分處理。圖59所示的橫軸表示時(shí)間軸。波形760表示垂直同步信號。坐標(biāo)軸795表示占用數(shù)據(jù)總線204的處理與時(shí)間之間的關(guān)系。坐標(biāo)軸795上的白色矩形表示對于各個(gè)幀的監(jiān)視處理所需的占用數(shù)據(jù)總線204的處理。坐標(biāo)軸795上所示的帶陰影的矩形表示對于靜止圖像的記錄處理所需的占用數(shù)據(jù)總線204的處理(時(shí)分處理)。
[0619]如上所述,當(dāng)執(zhí)行監(jiān)視操作時(shí),與對于靜止圖像的成像操作相比,需要經(jīng)過數(shù)據(jù)總線204傳輸?shù)臄?shù)據(jù)量小。例如,假設(shè)在部分796中在任意時(shí)間,執(zhí)行對于靜止圖像的記錄指令操作。在此情況下,關(guān)于由箭頭797所示的幀3執(zhí)行對于靜止圖像的記錄操作。例如,當(dāng)從用戶接收到記錄指令操作時(shí),DSP200執(zhí)行對于與記錄指令操作的定時(shí)對應(yīng)的幀(例如幀3)以及該幀后的多個(gè)幀 (例如幀4到8)的圖像信號處理和記錄處理。在執(zhí)行圖像信號處理和記錄處理的同時(shí),成像器件和DSP200并行執(zhí)行監(jiān)視操作。當(dāng)完成記錄操作時(shí)(例如,在由箭頭798指示的時(shí)間時(shí)),成像器件和DSP200僅執(zhí)行監(jiān)視操作。
[0620]當(dāng)執(zhí)行對于靜止圖像的記錄處理的時(shí)分處理時(shí),在執(zhí)行時(shí)分處理的同時(shí),還能夠顯示單色圖像或者預(yù)先準(zhǔn)備的圖像而不執(zhí)行監(jiān)視操作。還能夠顯示用于向用戶通知執(zhí)行圖像記錄處理的圖像或消息等。
[0621]在圖60A和圖60B中,示出了需要經(jīng)過數(shù)據(jù)總線204傳輸以便在垂直同步信號的時(shí)段內(nèi)執(zhí)行監(jiān)視操作和記錄處理的時(shí)分處理的數(shù)據(jù)量。圖60A和圖60B所示的示例是其中修改了圖56A和圖56B所示的示例的一部分的示例。該示例與圖56A和圖56B所示的示例的不同之處在于,添加了記錄操作時(shí)分處理759。與圖59A和圖59B所示的示例中相同的組件由相同的參考數(shù)字表示。
[0622]例如,圖60A所示的記錄處理被劃分成十二個(gè)。如圖60B所示,在監(jiān)視操作中,通過涉及對于每一幀兩個(gè)Bayer圖像的數(shù)據(jù)傳輸?shù)牧繄?zhí)行各個(gè)種類的信號處理(例如記錄操作時(shí)分處理759)。在其中開始記錄處理的幀之后,執(zhí)行對于記錄處理的信號處理,同時(shí)執(zhí)行在記錄處理的開始后的監(jiān)視處理。但是,第一處理通常以等于或大于一個(gè)Bayer圖像的量來執(zhí)行,以便完成圖像存儲(chǔ)器170中的圖像數(shù)據(jù)的寫。圖60B所示的矩形751到753和756對應(yīng)于圖59所示的橫軸795上的白色矩形。圖60B所示的矩形759對應(yīng)于圖59所示的橫軸795上的帶有陰影的矩形。
[0623]圖61是用于確定關(guān)于第一實(shí)施例中的蜂窩電話設(shè)備100的靜止圖像記錄操作的數(shù)據(jù)總線204的工作頻率的參數(shù)的示例的圖。除了要在一秒內(nèi)經(jīng)歷靜止圖像記錄處理的圖像的數(shù)量是一并且與圖像的數(shù)量有關(guān)的值改變之外,圖61所示的示例與圖58所示的示例相同。通過將要在一秒內(nèi)經(jīng)歷靜止圖像記錄處理的圖像的數(shù)量設(shè)置為一,能夠降低數(shù)據(jù)總線204的工作頻率的下限Fclk min和上限Fclk max,并降低DSP200的功耗。
[0624]如上所述,因?yàn)樵诒O(jiān)視操作中產(chǎn)生的圖像不是用于欣賞的圖像,期望對像素?cái)?shù)據(jù)稀疏以降低功耗。因此,在圖58和圖61所示的示例中,在監(jiān)視操作的情況下,使用小于I的值作為像素?cái)?shù)據(jù)的稀疏比。這使得能夠?qū)SP200的數(shù)據(jù)總線204所需的工作頻率設(shè)置得小于在圖58和圖61中所示的靜止圖像記錄操作時(shí)數(shù)據(jù)總線204所需的工作頻率,并降低功耗。
[0625]圖62是用于確定關(guān)于第一實(shí)施例中的蜂窩電話設(shè)備100的運(yùn)動(dòng)圖像記錄操作的數(shù)據(jù)總線204的工作頻率的參數(shù)的示例的圖。在圖62所示的示例中,將運(yùn)動(dòng)圖像記錄操作的示例示為圖57所示的參數(shù)。
[0626]當(dāng)設(shè)置了三眼橫向廣角圖像成像模式時(shí),圖像數(shù)據(jù)的量大約是單眼橫向圖像成像模式下的圖像數(shù)據(jù)的量的三倍大。因此,例如,當(dāng)執(zhí)行靜止圖像記錄操作時(shí),在對于幾個(gè)垂直同步信號的時(shí)間內(nèi)(即幾幀的時(shí)間內(nèi))執(zhí)行對于大圖像的信號處理。這使得能夠防止數(shù)據(jù)總線204所需的工作頻率變得過大。但是,當(dāng)執(zhí)行運(yùn)動(dòng)圖像記錄操作時(shí),因?yàn)閷τ诿繋斎胄碌膱D像,因此需要在一幀的時(shí)段中使三眼圖像數(shù)據(jù)經(jīng)歷信號處理。因此,為了防止數(shù)據(jù)總線204所需的工作頻率變得過大,期望對圖像執(zhí)行稀疏處理并降低數(shù)據(jù)量,如圖62所示。
[0627][針對捕捉圖像數(shù)據(jù)時(shí)的延遲的措施的示例]
[0628]在第一實(shí)施例中,同時(shí)從三個(gè)成像器件輸入到DSP200的三條圖像數(shù)據(jù)被臨時(shí)存儲(chǔ)在具有環(huán)形緩沖器結(jié)構(gòu)的圖像緩沖器中。通過使用環(huán)形緩沖器結(jié)構(gòu)的圖像緩沖器,能夠經(jīng)由一條數(shù)據(jù)總線204和圖 像存儲(chǔ)器I/F206將同時(shí)從三個(gè)成像器件輸入到DSP200的三條圖像數(shù)據(jù)寫入最小的一個(gè)圖像存儲(chǔ)器170中。但是,當(dāng)使用具有環(huán)形緩沖器結(jié)構(gòu)的圖像緩沖器211到219時(shí),如下所述,發(fā)生圖像數(shù)據(jù)的延遲,直到從圖像緩沖器211到219讀出圖像數(shù)據(jù)并將其捕捉到DSP200中為止。因此,需要對于按此方式發(fā)生的延遲執(zhí)行處理。
[0629]圖63是第一實(shí)施例中用于寫入圖像緩沖器211到219中的定時(shí)以及用于捕捉到DSP200中的定時(shí)的示意時(shí)序圖。圖63所示的橫軸表示時(shí)間軸。波形761表示從DSP200到成像系統(tǒng)的垂直同步信號。波形762表示從DSP200到成像系統(tǒng)的水平同步信號。波形762中的BPl表示對于兩條線的垂直后沿。在圖63所示的示例中,假設(shè)圖像緩沖器211到219之一的容量與從成像器件134到136輸入到DSP200的圖像數(shù)據(jù)的一條線的數(shù)據(jù)量相同。
[0630]在橫軸763上,示出了從第一成像系統(tǒng)191輸入到DSP200的圖像數(shù)據(jù)的時(shí)間轉(zhuǎn)變。在橫軸764上,示出了從第二成像系統(tǒng)192輸入到DSP200的圖像數(shù)據(jù)的時(shí)間轉(zhuǎn)變。在橫軸765上,示出了從第三成像系統(tǒng)193輸入到DSP200的圖像數(shù)據(jù)的時(shí)間轉(zhuǎn)變。
[0631]在橫軸766上,示出了圖像緩沖器211到213的寫狀態(tài)的時(shí)間轉(zhuǎn)變。在橫軸767上,示出了圖像緩沖器214到216的寫狀態(tài)的時(shí)間轉(zhuǎn)變。在橫軸768上,示出了圖像緩沖器217到219的寫狀態(tài)的時(shí)間轉(zhuǎn)變。在圖63所示的示例中,在同一條線上示出了與成像系統(tǒng)對應(yīng)的一組三個(gè)圖像緩沖器的寫狀態(tài)。
[0632]在橫軸769上,示出了作為從DSP200的圖像緩沖器211到219的數(shù)據(jù)讀出和到DSP200的內(nèi)部的數(shù)據(jù)傳輸?shù)哪繕?biāo)的圖像數(shù)據(jù)。
[0633]波形770表不與從DSP200輸入到成像系統(tǒng)的垂直同步信號相同的定時(shí)的垂直同步信號。波形771表示要提供給DSP200的內(nèi)部的延遲的垂直同步信號。波形770中的BP2表示對于四條線的垂直后沿。波形771中的BP3表示對于兩條線的垂直后沿。
[0634]如圖63所示,對于兩條線的延遲發(fā)生在圖像的有效數(shù)據(jù)到圖像緩沖器211到219的寫開始后,直到從圖像緩沖器讀出該數(shù)據(jù)并捕捉到DSP200中為止。
[0635]圖64是第一實(shí)施例中用于寫入圖像緩沖器211到219中的定時(shí)以及用于捕捉到DSP200中的定時(shí)的示意時(shí)序圖。圖64所示的橫軸表示時(shí)間軸。波形781表示從DSP200到成像系統(tǒng)的水平同步信號。波形781中的BP4表示由成像器件134到136產(chǎn)生的圖像中的水平后沿。在圖64所示的示例中,假設(shè)圖像緩沖器211到219之一的容量是從成像器件134到136輸入到DSP200的一條線的圖像數(shù)據(jù)的數(shù)據(jù)量。
[0636]在橫軸782上,示出了從第一成像系統(tǒng)191輸入到DSP200的圖像數(shù)據(jù)的時(shí)間轉(zhuǎn)變。在橫軸783上,示出了從第二成像系統(tǒng)192輸入到DSP200的圖像數(shù)據(jù)的時(shí)間轉(zhuǎn)變。在橫軸784上,示出了從第三成像系統(tǒng)193輸入到DSP200的圖像數(shù)據(jù)的時(shí)間轉(zhuǎn)變。
[0637]在橫軸785上,示出了圖像緩沖器211到213的寫狀態(tài)的時(shí)間轉(zhuǎn)變。在橫軸786上,示出了圖像緩沖器214到216的寫狀態(tài)的時(shí)間轉(zhuǎn)變。在橫軸787上,示出了圖像緩沖器217到219的寫狀態(tài)的時(shí)間轉(zhuǎn)變。在圖64所示的示例中,在同一條線上示出了與成像系統(tǒng)對應(yīng)的一組三個(gè)圖像緩沖器的寫狀態(tài)。
[0638]在橫軸789上,示出了作為從DSP200的圖像緩沖器211到219的數(shù)據(jù)讀出以及到DSP200的內(nèi)部的數(shù)據(jù)傳輸?shù)哪繕?biāo)的圖像數(shù)據(jù)。
[0639]波形790表示與從DSP200輸入到成像系統(tǒng)的水平同步信號相同的定時(shí)的水平同步信號。波形791表示要提供到DSP200的內(nèi)部的延遲的水平同步信號。波形790中的BP5表示水平后沿。波形791中的BP6表示水平后沿。
[0640]如圖64所示,對圖像的有效數(shù)據(jù)區(qū)域中的2/3線的延遲發(fā)生在開始圖像的有效數(shù)據(jù)向圖像緩沖器211到219的寫之后,直到從圖像緩沖器中讀出數(shù)據(jù)并被捕捉到DSP200中為止。
[0641]需要移除這些延遲并將垂直同步信號與圖像的有效數(shù)據(jù)之間的間隔以及水平同步信號與圖像的有效數(shù)據(jù)之間的間隔設(shè)置為與成像器件134到136中產(chǎn)生圖像數(shù)據(jù)的間隔相同。因此,在第一實(shí)施例中,具有與從DSP200輸入到成像器件134到136的同步信號相同的時(shí)段以及延遲的相位的信號至少被用在DSP200的內(nèi)部的圖像信號處理單元220的一部分中。DSP200的成像控制單元201產(chǎn)生從DSP200輸入到成像器件134到136的同步信號,并且還產(chǎn)生具有與輸入到成像器件134到135的同步信號相同的時(shí)段以及延遲的相位的信號。成像控制單元201將產(chǎn)生的同步信號提供給DSP200內(nèi)的各單元。
[0642][成像設(shè)備的操作示例]
[0643]圖65是第一實(shí)施例中的蜂窩電話設(shè)備100的成像控制處理的處理過程的流程圖。
[0644]首先,開啟蜂窩電話設(shè)備100中的電源(步驟S901)。隨后,確定是否接收到對于成像操作的開始指令操作(步驟S902)。例如,用戶可以通過在顯示單元140中的菜單屏幕上執(zhí)行命令開始成像操作的指令操作來開始成像操作。當(dāng)未接收到對于成像操作的開始指令操作時(shí)(步驟S902),繼續(xù)監(jiān)視直到接收到對于成像操作的開始指令操作為止。
[0645]當(dāng)接收到對于成像操作的開始指令操作時(shí)(步驟S902),樞軸旋轉(zhuǎn)狀態(tài)檢測單元150檢測第二殼體120的樞軸旋轉(zhuǎn)狀態(tài)(步驟S903)。步驟S903是所附權(quán)利要求書中描述的檢測過程的示例。隨后,成像控制單元201確定第二殼體120的樞軸旋轉(zhuǎn)狀態(tài)是否是橫向狀態(tài)(步驟S904)。當(dāng)?shù)诙んw210的樞軸旋轉(zhuǎn)狀態(tài)是橫向狀態(tài)時(shí),執(zhí)行橫向狀態(tài)成像處理(步驟S910)。稍后參考圖66詳細(xì)說明橫向狀態(tài)成像處理。另一方面,當(dāng)?shù)诙んw120的樞軸旋轉(zhuǎn)狀態(tài)是縱向狀態(tài)時(shí),執(zhí)行縱向狀態(tài)成像處理(步驟S950)。稍后參考圖69詳細(xì)說明縱向狀態(tài)成像處理。步驟S904、S910和S950是所附權(quán)利要求書中所述的控制過程的示例。
[0646]隨后,確定是否接收到對于成像操作的結(jié)束指令操作(步驟S905)。當(dāng)未接收到對于成像操作的結(jié)束指令操作時(shí)(步驟S905),成像控制處理返回到步驟S903。另一方面,當(dāng)接收到對于成像操作的結(jié)束指令操作時(shí)(步驟S905),完成成像控制處理的操作。
[0647]圖66是第一實(shí)施例中的蜂窩電話設(shè)備100的成像控制處理的處理過程中的橫向狀態(tài)成像處理(圖65中所示的步驟S910中的處理過程)的流程圖。
[0648]首先,成像控制單元201將三眼橫向廣角圖像成像模式設(shè)置為初始設(shè)置(步驟S911)。隨后,成像控制單元201確定設(shè)置了靜止圖像成像模式和運(yùn)動(dòng)圖像成像模式中的哪個(gè)成像模式(步驟S912)。當(dāng)設(shè)置了靜止圖像成像模式時(shí)(步驟S912),執(zhí)行靜止圖像成像處理(步驟S920)。稍后參考圖67詳細(xì)說明靜止圖像成像處理。另一方面,當(dāng)設(shè)置了運(yùn)動(dòng)圖像成像模式時(shí)(步驟S912),執(zhí)行運(yùn)動(dòng)圖像成像處理(步驟S930)。稍后參考圖68詳細(xì)說明運(yùn)動(dòng)圖像成像處理。
[0649]隨后,確定是否接受到成像范圍切換指令操作(步驟S913)。例如,確定是否按下了圖1A到圖1D所示的成像范圍變換開關(guān)111等。當(dāng)未接收到成像范圍切換指令操作時(shí)(步驟S913),橫向狀態(tài)成像處理前進(jìn)到步驟S915。另一方面,當(dāng)接收到成像范圍切換指令操作時(shí)(步驟S913),成像控制單元201根據(jù)所接收的成像范圍切換指令操作切換成像模式(步驟S914)。例如,每次按下成像范圍變換開關(guān)111時(shí),按以下順序切換成像模式:(I)三眼橫向廣角圖像成像模式、(2)三眼橫向窄角圖像成像模式、(3)單眼橫向圖像成像模式、(4)單眼縱向圖像成像模式以及(5)單眼縱向小區(qū)域圖像成像模式。
[0650]隨后,確定第二殼體120的樞軸旋轉(zhuǎn)狀態(tài)是否存在改變(步驟S915)。當(dāng)?shù)诙んw120的樞軸旋轉(zhuǎn)狀態(tài)不存在改變時(shí),橫向狀態(tài)成像處理返回到步驟S912。另一方面,當(dāng)?shù)诙んw120的樞軸旋轉(zhuǎn)狀態(tài)存在改變時(shí)(步驟S915),完成橫向狀態(tài)成像處理的操作。
[0651]圖67是第一實(shí)施例中的蜂窩電話設(shè)備100的成像控制處理的處理過程中的靜止圖像成像處理(圖66所示的步驟S920中的處理過程)的流程圖。
[0652]首先,根據(jù)設(shè)置的成像模式執(zhí)行監(jiān)視處理(步驟S921)。例如,當(dāng)設(shè)置了三眼橫向廣角圖像成像模式時(shí),將圖29A所示的粗線的范圍內(nèi)的圖像顯示在顯示單元140中,作為圖29B所示的監(jiān)視圖像。如上所述,在監(jiān)視處理期間,可以執(zhí)行像素稀疏處理或者像素相加處理。
[0653]隨后,確定是否接收到對于靜止圖像的記錄指令操作(步驟S922)。例如,確定在顯示單元140中顯示監(jiān)視圖像的狀態(tài)下是否按下了確定鍵114。當(dāng)未接收到對于靜止圖像的記錄指令操作時(shí)(步驟S922),靜止圖像成像處理前進(jìn)到步驟S924。另一方面,當(dāng)接收到對于靜止圖像的記錄指令操作時(shí)(步驟S922),根據(jù)設(shè)置的成像模式執(zhí)行靜止圖像記錄處理(步驟S923)。例如,當(dāng)設(shè)置了三眼橫向廣角圖像成像模式時(shí),將圖29A所示的粗線的范圍內(nèi)的圖像記錄在記錄介質(zhì)180中。
[0654]隨后,確定是否接收到成像范圍切換指令操作(步驟S924)。當(dāng)未接收到成像范圍切換指令操作時(shí)(步驟S924),確定第二殼體120的樞軸旋轉(zhuǎn)狀態(tài)是否存在改變(步驟S925)。當(dāng)?shù)诙んw120的樞軸旋轉(zhuǎn)狀態(tài)不存在改變時(shí)(步驟S925),確定是否接受到從靜止圖像成像模式到運(yùn)動(dòng)圖像成像模式的切換操作(步驟S926)。例如,確定在設(shè)置了靜止圖像成像模式的狀態(tài)下是否按下了靜止圖像/運(yùn)動(dòng)圖像變換開關(guān)112。當(dāng)接收到成像范圍切換指令操作、第二殼體120的樞軸旋轉(zhuǎn)狀態(tài)存在改變、或者接收到從靜止圖像成像模式到運(yùn)動(dòng)圖像成像模式的切換操作時(shí)(步驟S924到S926),完成靜止圖像成像處理的操作。另一方面,當(dāng)未接收到成像范圍切換指令操作、第二殼體120的樞軸旋轉(zhuǎn)狀態(tài)不存在改變、以及未接收到從靜止圖像成像模式到運(yùn)動(dòng)圖像成像模式的切換操作時(shí)(步驟S924到S926),靜止圖像成像處理返回到步驟S921。
[0655]圖68是第一實(shí)施例中的蜂窩電話設(shè)備100的成像控制處理的處理過程中的運(yùn)動(dòng)圖像成像處理(圖66中所示的步驟S930中的處理過程)的流程圖。
[0656]首先,根據(jù)設(shè)置的模式執(zhí)行監(jiān)視處理(步驟S931)。
[0657]隨后,確定是否接收到對于運(yùn)動(dòng)圖像的記錄開始指令操作(步驟S932)。例如,確定在顯示單元140中顯示監(jiān)視圖像的狀態(tài)下是否按下了確定鍵114。當(dāng)未接收到對于運(yùn)動(dòng)圖像的記錄開始指令操作時(shí)(步驟S932),運(yùn)動(dòng)圖像成像處理前進(jìn)到步驟S935。另一方面,當(dāng)接收到對于運(yùn)動(dòng)圖像的記錄開始指令操作時(shí)(步驟S932),根據(jù)設(shè)置的成像模式執(zhí)行運(yùn)動(dòng)圖像記錄處理(步驟S933)。隨后,確定是否接收到對于運(yùn)動(dòng)圖像的記錄結(jié)束指令操作(步驟S934)。例如,確定在執(zhí)行運(yùn)動(dòng)圖像記錄處理的狀態(tài)下是否再次按下了確定鍵114。當(dāng)未接收到對于運(yùn)動(dòng)圖像的記錄結(jié)束指令操作時(shí)(步驟S934),繼續(xù)執(zhí)行運(yùn)動(dòng)圖像記錄處理(步驟S933)。另一方面,當(dāng)接收到對于運(yùn)動(dòng)圖像的記錄結(jié)束指令操作時(shí)(步驟S934),完成運(yùn)動(dòng)圖像記錄處理,并且運(yùn)動(dòng)圖像成像處理前進(jìn)到步驟S935。
[0658]隨后,確 定是否接收到成像范圍切換指令操作(步驟S935)。當(dāng)未接收到成像范圍切換指令操作時(shí)(步驟S935),確定第二殼體120的樞軸旋轉(zhuǎn)狀態(tài)是否存在改變(步驟S936)。當(dāng)?shù)诙んw120的樞軸旋轉(zhuǎn)狀態(tài)不存在改變時(shí)(步驟S936),確定是否接收到從運(yùn)動(dòng)圖像成像模式到靜止圖像成像模式的切換操作(步驟S937)。當(dāng)接收到成像范圍切換指令操作、第二殼體120的樞軸旋轉(zhuǎn)狀態(tài)存在改變、或者接收到從運(yùn)動(dòng)圖像成像模式到靜止圖像成像模式的切換操作時(shí)(步驟S935到S937),完成運(yùn)動(dòng)圖像成像處理的操作。另一方面,當(dāng)未接收到成像范圍切換指令操作、第二殼體120的樞軸旋轉(zhuǎn)狀態(tài)不存在改變、且未接收到從運(yùn)動(dòng)圖像成像模式到靜止圖像成像模式的切換操作時(shí)(步驟S935到S937),運(yùn)動(dòng)圖像成像處理返回到步驟S931。當(dāng)設(shè)置了運(yùn)動(dòng)圖像成像模式時(shí),可以按被設(shè)置為比靜止圖像成像模式下的稀疏比高的稀疏比執(zhí)行運(yùn)動(dòng)圖像記錄處理。
[0659]圖69是第一實(shí)施例中的蜂窩電話設(shè)備100的成像控制處理的處理過程在的縱向狀態(tài)成像處理(圖65所示的步驟S950中的處理過程)的流程圖。
[0660]首先,成像控制單元201將單眼縱向圖像成像模式設(shè)置為初始化設(shè)置(步驟S951)。隨后,成像控制單元201確定設(shè)置了靜止圖像成像模式和運(yùn)動(dòng)圖像成像模式中的哪個(gè)成像模式(步驟S952)。當(dāng)設(shè)置了靜止圖像成像模式時(shí)(步驟S952),執(zhí)行靜止圖像成像處理(步驟S960 )。除了在顯示單元140中顯示的圖像不同之外,該靜止圖像成像處理與圖67所示的處理過程基本相同。因此,省略該靜止圖像成像處理的說明。另一方面,當(dāng)設(shè)置了運(yùn)動(dòng)圖像成像模式時(shí)(步驟S952),執(zhí)行運(yùn)動(dòng)圖像成像處理(步驟S970)。除了在顯示單元140中顯示的圖像不同之外,該運(yùn)動(dòng)圖像成像處理與圖68所示的處理過程基本相同。因此,省略該運(yùn)動(dòng)圖像成像處理的說明。
[0661]隨后,確定是否接收到成像范圍切換指令操作(步驟S953)。當(dāng)未接收到成像范圍切換指令操作時(shí)(步驟S953),縱向狀態(tài)成像處理前進(jìn)到步驟S955。另一方面,當(dāng)接收到成像范圍切換指令操作時(shí)(步驟S953),成像控制單元201根據(jù)所接收的成像范圍切換指令操作來切換成像模式(步驟S954)。例如,每次按下成像范圍變換開關(guān)111時(shí),按以下順序切換成像模式:(I)單眼縱向圖像成像模式、(2)單眼縱向小區(qū)域圖像成像模式、(3)單眼橫向圖像成像模式、以及(4)三眼橫向窄角圖像成像模式。
[0662]隨后,確定第二殼體120的樞軸旋轉(zhuǎn)狀態(tài)是否存在改變(步驟S955)。當(dāng)?shù)诙んw120的樞軸旋轉(zhuǎn)狀態(tài)不存在改變時(shí),縱向狀態(tài)成像處理返回到步驟S952。另一方面,當(dāng)?shù)诙んw120的樞軸旋轉(zhuǎn)狀態(tài)存在改變時(shí)(步驟S955),完成縱向狀態(tài)成像處理的操作。
[0663]如上所述,在第一實(shí)施例中,可以容易地執(zhí)行多個(gè)成像模式的切換。例如,當(dāng)執(zhí)行蜂窩電話設(shè)備的呼叫操作或者諸如創(chuàng)建電子郵件的語句以及閱讀語句的操作時(shí),經(jīng)常以縱向使用蜂窩電話設(shè)備的殼體。因此,例如,即使通過使用帶有相機(jī)的蜂窩電話設(shè)備執(zhí)行拍攝時(shí),蜂窩電話設(shè)備的殼體和顯示裝置經(jīng)常被設(shè)置在縱向狀態(tài)下以執(zhí)行拍攝和記錄縱向圖像。例如,經(jīng)常在各蜂窩電話設(shè)備的用戶間再現(xiàn)或傳輸按此方式記錄的縱向圖像。
[0664]但是,人的視場在橫向方向上更寬。因此,認(rèn)為通過記錄具有大的縱橫比的圖像,能夠記錄在接近人的視場中的區(qū)域的成像范圍中的圖像,并減少用戶的不舒服的感覺。因此,在第一實(shí)施例中,可以僅通過第二殼體120的樞軸旋轉(zhuǎn)操作來執(zhí)行帶有相機(jī)的蜂窩電話設(shè)備的用戶所熟悉的縱向圖像和具有相對接近人的視場的大視角的圖像的切換。以此方式,可以切換縱向圖像和具有大視角的圖像。因此,能夠防止用戶錯(cuò)過拍攝時(shí)機(jī),并能夠容易地拍攝用戶喜歡的圖像。
[0665]可以在單眼縱向圖像成像模式或者單眼縱向小區(qū)域圖像成像模式下顯示或記錄帶有相機(jī)的蜂窩電話設(shè)備的用戶所熟悉的縱向圖像??梢栽谌蹤M向廣角圖像成像模式、三眼橫向窄角圖像成像模式以及單眼縱向圖像成像模式下顯示或記錄具有相對接近人的視場的大視角的圖像(例如全景圖像)。還可以通過成像范圍變換開關(guān)111容易地執(zhí)行這些種類的切換。以此方式,可以通過相對容易的操作切換多種圖像。因此,能夠防止用戶錯(cuò)過拍攝時(shí)機(jī),并能夠容易地拍攝用戶喜歡的圖像。
[0666][蜂窩電話設(shè)備的修改]
[0667]圖70A到圖71C是第一實(shí)施例中的蜂窩電話設(shè)備100的修改的圖、
[0668]在圖70A到圖70D中,示出了其中顯示單元和成像單元被包括在同一殼體中的蜂窩電話設(shè)備1040。在圖70A中,示出了使用蜂窩電話設(shè)備1040時(shí)的形式的前側(cè)。在圖70B中,示出了該形式的后側(cè)。在圖70C中,示出了使用蜂窩電話設(shè)備1040的另一形式的前側(cè)。在圖70D中示出了該形式下的后側(cè)。
[0669]蜂窩電話設(shè)備1040包括第一殼體110和第二殼體120。第二殼體120包括顯示單元140和成像單元1041。除了顯示單元和成像單元被包括在同一殼體內(nèi)以外,蜂窩電話設(shè)備1040與蜂窩電話設(shè)備100基本相同。因此,與蜂窩電話設(shè)備100的組件相同的各組件由相同的參考數(shù)字表示,并省略各組件的說明。
[0670]除了成像單元1041的排列位置不同之外,成像單元1041與被包括在蜂窩電話設(shè)備100中的成像單元130基本相同。具體地,在成像單元1041中,根據(jù)預(yù)定的規(guī)則,并排排列三個(gè)成像系統(tǒng),中心的成像器件被安排在縱向狀態(tài),左側(cè)和右側(cè)的成像器件被安排在橫向狀態(tài)。
[0671]在圖71A到圖71C中,示出了包括一個(gè)殼體的蜂窩電話設(shè)備1050。在圖71A中,示出了使用蜂窩電話設(shè)備1050的形式的前側(cè)。在圖71B中,示出了該形式下的后側(cè)。在圖71C中,示出了使用蜂窩電話設(shè)備1050的另一形式的前側(cè)。
[0672]蜂窩電話設(shè)備1050包括一個(gè)殼體并包括顯示單元140、成像單元1051和姿勢檢測單元1052。除了蜂窩電話設(shè)備1050包括一個(gè)殼體、蜂窩電話設(shè)備1050包括姿勢檢測單元1052而不是樞軸旋轉(zhuǎn)狀態(tài)檢測單元150以及成像單元的排列位置不同之外,蜂窩電話設(shè)備1050與蜂窩電話設(shè)備100基本相同。因此,與蜂窩電話設(shè)備100的組件相同的組件由相同的參考數(shù)字表示,并省略各組件的說明。
[0673]除了成像單元1051的排列位置不同之外,成像單元1051與蜂窩電話設(shè)備100中所包括的成像單元130基本相同。具體地,在成像單元1051中,根據(jù)預(yù)定的規(guī)則,并排排列三個(gè)成像系統(tǒng),中心的成像器件被安排在縱向狀態(tài),左側(cè)和右側(cè)的成像器件被安排在橫向狀態(tài)。
[0674]代替樞軸旋轉(zhuǎn)狀態(tài)檢測單元150,姿勢檢測單元1052被并入蜂窩電話設(shè)備1050中。姿勢檢測單元1052檢測施加到蜂窩電話設(shè)備1050的加速、運(yùn)動(dòng)、傾斜等。例如,通過旋轉(zhuǎn)傳感器、翻轉(zhuǎn)傳感器或者重力傳感器實(shí)現(xiàn)姿勢檢測單元1052。姿勢檢測單元1052將所檢測到的信息輸出到成像控制單元201作為姿勢信息。成像控制單元201基于所檢測到的姿勢信息檢測蜂窩電話設(shè)備1050是處于橫向狀態(tài)還是縱向狀態(tài)。成像控制單元201基于所檢測的狀態(tài)執(zhí)行成像操作的控制。例如,成像控制單元201可以執(zhí)行與根據(jù)蜂窩電話設(shè)備100的第二殼體是處于橫向狀態(tài)還是縱向狀態(tài)而執(zhí)行的控制相同的控制。成像控制單元201可以執(zhí)行用于根據(jù)通過使用預(yù)定的操作部件執(zhí)行的操作輸入來改變成像范圍的成像控制。作為操作輸入,能夠采用通過操作按鈕或者觸摸板的操作輸入。姿勢檢測單元1052是在所附權(quán)利要求書中所述的檢測單元的示例。
[0675]以此方式,第一實(shí)施例可以應(yīng)用于各種形式的蜂窩電話設(shè)備。
[0676]〈2.第二實(shí)施例>
[0677]在第一實(shí)施例中,作為實(shí)例說明了包括多個(gè)成像系統(tǒng)的蜂窩電話設(shè)備。在本發(fā)明的第二實(shí)施例中,說明諸如數(shù)碼相機(jī)或者數(shù)字?jǐn)z像機(jī)之類的成像設(shè)備。
[0678][成像設(shè)備的外部配置示例]
[0679]圖72A到圖72C是第二實(shí)施例中的成像設(shè)備1000的外部配置的圖。在圖72A中,示出了成像設(shè)備1000的前側(cè)(被攝體側(cè))的透視圖。在圖72B和圖72C中,示出了成像設(shè)備1000的后側(cè)(拍攝者側(cè))的透視圖。在成像設(shè)備1000中,第一殼體1010和第二殼體1020通過樞軸旋轉(zhuǎn)部件1001樞軸旋轉(zhuǎn)地耦接。例如通過包括三個(gè)成像系統(tǒng)的數(shù)碼相機(jī)實(shí)現(xiàn)成像設(shè)備1000。在圖72A到圖72C中,為了易于說明,按簡化形式示出成像設(shè)備1000。省略了提供在成像設(shè)備100的外表面上的電源開關(guān)等的圖示。
[0680]第一殼體1010包括成像范圍變換開關(guān)1011、靜止圖像/運(yùn)動(dòng)圖像變換開關(guān)1012、快門按鈕1013和成像單元1030。成像范圍變換開關(guān)1011、靜止圖像/運(yùn)動(dòng)圖像變換開關(guān)1012和成像單元1030與圖1A到圖1D等所示的成像范圍變換開關(guān)111、靜止圖像/運(yùn)動(dòng)圖像變換開關(guān)112和成像單元130基本相同。因此,省略各組件的說明。成像范圍變換開關(guān)1011是所附權(quán)利要求書中所述的操作接收單元的示例。
[0681]快門按鈕1013是用于指示開始圖像的記錄的操作部件。例如,當(dāng)設(shè)置了靜止圖像成像模式時(shí),在將由成像單元1030產(chǎn)生的圖像數(shù)據(jù)作為靜止圖像文件記錄在記錄介質(zhì)中時(shí)按下快門按鈕1013。
[0682]第二殼體1020包括顯示單元1021。因?yàn)轱@示單元1021與圖1A到圖1D等所示的顯示單元140基本相同,因此省略顯示單元1021的說明。在成像設(shè)備1000中,第一殼體1010和第二殼體1020樞軸旋轉(zhuǎn)地連接。具體地,第二殼體1020可以以樞軸旋轉(zhuǎn)部件1001(由虛線所示)作為樞軸旋轉(zhuǎn)基準(zhǔn)而相對于第一殼體1010樞軸旋轉(zhuǎn)。這使得能夠改變第二殼體1020相對于第一殼體1010的相對位置關(guān)系。例如,圖72C中示出了第二殼體1020在圖72B所示的箭頭1002的方向上樞軸旋轉(zhuǎn)90度的形式。如在第一實(shí)施例中那樣,基于第二殼體是處于橫向狀態(tài)還是縱向狀態(tài)來執(zhí)行對于成像操作的控制。
[0683]在各實(shí)施例中,作為示例說明了蜂窩電話設(shè)備和包括三個(gè)成像系統(tǒng)的成像設(shè)備。但是,各實(shí)施例可以應(yīng)用于包括五個(gè)或更多的奇數(shù)個(gè)成像系統(tǒng)的蜂窩電話設(shè)備、成像設(shè)備等。具體地,可以通過根據(jù)固定的規(guī)則并排排列五個(gè)或更多的奇數(shù)個(gè)成像系統(tǒng)、將中心的成像器件設(shè)置在縱向狀態(tài)并將左邊和右邊的其余成像器件設(shè)置在橫向狀態(tài)而應(yīng)用各實(shí)施例。
[0684]各實(shí)施例表示用于體現(xiàn)本發(fā)明的示例。如各實(shí)施例中清楚說明的,各實(shí)施例中的元件和所附權(quán)利要求中要求保護(hù)的元件分別具有對應(yīng)關(guān)系。類似地,所附權(quán)利要求中要求保護(hù)的元件和具有與要求保護(hù)的元件相同的名稱的各實(shí)施例中的元件分別具有對應(yīng)關(guān)系。但是,本發(fā)明不限于各實(shí)施例,并可以通過不脫離本發(fā)明的精神地向各實(shí)施例應(yīng)用各種修改來體現(xiàn)。 [0685]實(shí)施例中所說明的處理過程可以被理解為具有一系列過程的方法,或者可以被理解為用于使得計(jì)算機(jī)執(zhí)行該系列過程的計(jì)算機(jī)程序和存儲(chǔ)該計(jì)算機(jī)程序的記錄介質(zhì)。作為記錄介質(zhì),例如可以使用⑶(致密盤)、MF (迷你盤)、DVD (數(shù)字多用途盤)、存儲(chǔ)卡、藍(lán)光盤(注冊商標(biāo))。
[0686]本申請包含與于2009年8月20日在日本專利局提交的日本優(yōu)先權(quán)專利申請JP2009-190659中的公開有關(guān)的主題,通過引用將其全部內(nèi)容合并于此。
[0687]本領(lǐng)域技術(shù)人員應(yīng)當(dāng)理解,取決于設(shè)計(jì)要求和其他因素,可以發(fā)生各種修改、組合、部分組合和替換,只要其在所附權(quán)利要求或其等效物的范圍內(nèi)即可。
【權(quán)利要求】
1.一種成像設(shè)備,包括: 輸出單元,包括作為顯示單元以顯示圖像的第一輸出單元和用于記錄或者發(fā)送圖像的第二輸出單元; 第一成像系統(tǒng),包括第一鏡頭和第一光電轉(zhuǎn)換單元以產(chǎn)生第一捕捉圖像,其中第一成像系統(tǒng)的光軸垂直于顯示單元中的顯示表面; 第二成像系統(tǒng),包括第二鏡頭和第二光電轉(zhuǎn)換單元以產(chǎn)生第二捕捉圖像,其中第一成像系統(tǒng)的光軸和第二成像系統(tǒng)的光軸排列為形成一角度; 第三成像系統(tǒng),包括第三鏡頭和第三光電轉(zhuǎn)換單元以產(chǎn)生第三捕捉圖像,其中第三成像系統(tǒng)的光軸排列在第一成像系統(tǒng)的光軸兩端對第二成像系統(tǒng)的光軸線對稱的位置; 成像單元,包括第一到第三成像系統(tǒng); 圖像組合單元,至少組合來自第一到第三捕捉圖像的部分以產(chǎn)生組合圖像; 外殼,包括所述成像單元和所述顯示單元; 檢測單元,作為成像設(shè)備的狀態(tài)檢測外殼設(shè)置在水平方向或者垂直方向; 控制單元,基于所述檢測到的狀態(tài)控制由所述輸出單元輸出的輸出圖像的尺寸。
2.根據(jù)權(quán)利要求1的成像設(shè)備,其中,所述檢測單元檢測第一特定狀態(tài)作為所述成像設(shè)備的狀態(tài),在所述第一特定狀態(tài)中,包括所述顯示單元的外殼設(shè)置在垂直方向,且所述控制單元在檢測到所述第一特定狀態(tài)時(shí)確定第一捕捉圖像的捕捉范圍內(nèi)輸出圖像的輸出范圍。
3.根據(jù)權(quán)利要求1的成像設(shè)備,其中,所述控制單元在檢測到所述第一特定狀態(tài)時(shí)確定輸出圖像的輸出范圍為第一捕捉圖像的整個(gè)捕捉范圍。
4.根據(jù)權(quán)利要求1的成像設(shè)備,其中,所述檢測單元檢測第二特定狀態(tài)作為所述成像設(shè)備的狀態(tài),在所述第二特定狀態(tài)中,包括所述顯示單元的外殼設(shè)置在水平方向,且所述控制單元在檢測到所述第二特定狀態(tài)時(shí)確定組合圖像的范圍內(nèi)輸出圖像的輸出范圍。
5.根據(jù)權(quán)利要求4的成像設(shè)備,其中,所述控制單元在檢測到所述第二特定狀態(tài)時(shí)確定輸出圖像具有比第一到第三捕捉圖像更寬的縱橫比。
6.根據(jù)權(quán)利要求1的成像設(shè)備,其中,分別對應(yīng)于成像單元中包括的光電轉(zhuǎn)換單元的鏡頭并排地排列在外殼的一個(gè)表面上,且顯示單元提供在所述外殼的一個(gè)表面的相對側(cè)上的表面上。
7.根據(jù)權(quán)利要求1的成像設(shè)備,其中,所述控制單元基于檢測到的狀態(tài)切換通過使用多個(gè)光電轉(zhuǎn)換單元執(zhí)行的復(fù)眼成像操作和通過使用第一光電轉(zhuǎn)換單元執(zhí)行的單眼成像操作。
8.根據(jù)權(quán)利要求7的成像設(shè)備,其中,所述控制單元在復(fù)眼成像操作切換到單眼成像操作時(shí)停止第二和第三光電轉(zhuǎn)換單元的操作
9.根據(jù)權(quán)利要求7的成像設(shè)備,其中,所述控制單元在單眼成像操作切換到復(fù)眼成像操作時(shí),確定預(yù)定頻率的時(shí)鐘用于復(fù)眼成像操作,且在復(fù)眼成像操作切換到單眼成像操作時(shí),確定低于所述預(yù)定頻率的頻率的時(shí)鐘用于單眼成像操作。
【文檔編號】H04N17/00GK104023169SQ201410147988
【公開日】2014年9月3日 申請日期:2010年8月16日 優(yōu)先權(quán)日:2009年8月20日
【發(fā)明者】石田實(shí) 申請人:索尼公司