圖像處理設(shè)備及方法
【技術(shù)領(lǐng)域】
[0001]本公開涉及圖像處理設(shè)備及方法，并且具體地涉及可以提高使用多視點圖像的服務(wù)的便利性的圖像處理設(shè)備及方法。
【背景技術(shù)】
[0002]通過使用具有不同視點的多個圖像測量距測量目標(biāo)(攝影對象)的距離的技術(shù)是已知的。例如，已經(jīng)提出了使用被稱為立體匹配(例如，參照專利文獻(xiàn)I)的技術(shù)的距離計算方法。
[0003]此外，通過使用這樣的立體匹配技術(shù)，認(rèn)為可以從由具有相互不同的視點的多個圖像組成的多視點圖像獲得表示距所述多視點圖像中的攝影對象的距離的深度數(shù)據(jù)，通過使用所述深度數(shù)據(jù)生成與多視點圖像交疊的圖像，并且向用戶提供該圖像。
[0004]引用列表
[0005]專利文獻(xiàn)
[0006]專利文獻(xiàn)1:JP2011-171858A

【發(fā)明內(nèi)容】

[0007]技術(shù)問題
[0008]然而，作為使用這樣的多視點圖像的服務(wù)期望進(jìn)一步提高便利性。
[0009]本公開通過考慮這樣的情況被執(zhí)行，并且可以提高使用多視點圖像的服務(wù)的便利性。
[0010]問題的解決方案
[0011]根據(jù)本技術(shù)的圖像處理設(shè)備，包括:虛擬拍攝圖像生成單元，所述虛擬拍攝圖像生成單元通過使用多視點圖像數(shù)據(jù)、表示了所述多視點圖像中距攝影對象的距離的深度數(shù)據(jù)、以及包括通過虛擬光學(xué)系統(tǒng)重現(xiàn)光學(xué)效果的參數(shù)的配置信息來生成通過使用所述虛擬光學(xué)系統(tǒng)拍攝所述多視點圖像的所述攝影對象而獲得的虛擬拍攝圖像。
[0012]虛擬拍攝圖像生成單元可以基于所述多視點圖像通過所述配置信息生成指定數(shù)目的插值圖像，并且通過使用所述多視點圖像和所述插值圖像生成所述虛擬拍攝圖像。
[0013]虛擬拍攝圖像生成單元可以根據(jù)表示了所述多視點圖像的每個視點的相對位置關(guān)系的序列信息、表示了所述多視點圖像的視點數(shù)目的眼數(shù)信息、以及所述深度數(shù)據(jù)來生成所述插值圖像。
[0014]序列信息可以包括表示了從用作參考的視點至每個視點的距離的信息以及表示了每個視點相對于所述用作參考的視點的取向的信息。
[0015]虛擬拍攝圖像生成單元可以基于所述序列信息和所述眼數(shù)信息確定用作參考的圖像、匹配軸、以及插值方法。
[0016]虛擬拍攝圖像生成單元可以通過使用所確定的用作參考的圖像以及所述匹配軸，根據(jù)所述深度數(shù)據(jù)交疊由所述插值方法指定的圖像來生成所述插值圖像。
[0017]虛擬拍攝圖像生成單元可以根據(jù)待生成的插值圖像的位置確定每幅交疊圖像的混合比。
[0018]虛擬拍攝圖像生成單元可以通過交疊所述多視點圖像與所述插值圖像來生成所述虛擬拍攝圖像。
[0019]配置信息可以包括:包括在所述虛擬光學(xué)系統(tǒng)中的虛擬透鏡的PSF數(shù)據(jù)，表示了包括在所述虛擬光學(xué)系統(tǒng)中的虛擬光圈形狀的光圈形狀信息，以及表示了所述插值圖像的數(shù)目的插值圖像數(shù)目信息。
[0020]在交疊所述多視點圖像與所述插值圖像時，所述虛擬拍攝圖像生成單元使得與所述深度數(shù)據(jù)對應(yīng)的所述虛擬透鏡的PSF數(shù)據(jù)得到反映。
[0021]在交疊所述多視點圖像與所述插值圖像時，所述虛擬拍攝圖像生成單元使得通過所述光圈形狀信息表示的所述虛擬光圈形狀被反映在所述多視點圖像和所述插值圖像中。
[0022]虛擬拍攝圖像生成單元可以根據(jù)作為與由用戶指定的所述虛擬光學(xué)系統(tǒng)有關(guān)的參數(shù)的用戶指定參數(shù)來生成所述虛擬拍攝圖像。
[0023]用戶指定參數(shù)可以包括指定所述虛擬拍攝圖像內(nèi)的焦點位置的焦點位置指定信息、指定所述虛擬拍攝圖像的攝影視場深度的攝影視場深度指定信息、以及在生成所述虛擬拍攝圖像時對于超分辨率處理執(zhí)行指定的超分辨率指定信息。
[0024]虛擬拍攝圖像生成單元可以基于所述深度數(shù)據(jù)獲得由所述焦點位置指定信息指定的焦點位置的深度值，并且將所述虛擬拍攝圖像的焦距設(shè)置到所述深度值。
[0025]虛擬拍攝圖像生成單元可以將所述虛擬拍攝圖像的攝影視場深度設(shè)置到由所述攝影視場深度指定信息指定的攝影視場深度。
[0026]虛擬拍攝圖像生成單元可以根據(jù)所述超分辨率指定信息的指定對于所述虛擬拍攝圖像執(zhí)行超分辨率處理。
[0027]虛擬拍攝圖像生成單元可以僅對于所述虛擬拍攝圖像的深度值與由所述焦點位置指定信息指定的焦點位置的深度值相同或接近的部分執(zhí)行超分辨率處理。
[0028]虛擬拍攝圖像生成單元可以從存儲單元獲取特定于由用戶選擇的虛擬光學(xué)系統(tǒng)的配置信息。
[0029]虛擬拍攝圖像生成單元可以從另一設(shè)備獲取所述配置信息。
[0030]—種根據(jù)本技術(shù)的圖像處理方法，包括:通過使用多視點圖像數(shù)據(jù)、表示了所述多視點圖像中距攝影對象的距離的深度數(shù)據(jù)、以及包括通過虛擬光學(xué)系統(tǒng)重現(xiàn)光學(xué)效果的參數(shù)的配置信息來生成通過使用所述虛擬光學(xué)系統(tǒng)拍攝所述多視點圖像的所述攝影對象而獲得的虛擬拍攝圖像。
[0031]在本公開中，通過使用多視點圖像數(shù)據(jù)、表示直到多視點圖像中的攝影對象的距離的深度數(shù)據(jù)以及包括通過虛擬光學(xué)系統(tǒng)重現(xiàn)光學(xué)效果的參數(shù)的配置信息，生成了通過使用虛擬光學(xué)系統(tǒng)拍攝多視點圖像的攝影對象而獲得的虛擬拍攝圖像。
[0032]發(fā)明的有益效果
[0033]根據(jù)本公開，可以處理圖像。此外，根據(jù)本公開，可以提高使用多視點圖像的服務(wù)的便利性。
【附圖說明】
[0034]圖1是描述多視點圖像使用服務(wù)平臺的示例的圖。
[0035]圖2是描述使用多視點圖像的應(yīng)用的示例的圖。
[0036]圖3是表示多視點圖像使用服務(wù)提供系統(tǒng)的主要配置示例的圖。
[0037 ]圖4是表示終端設(shè)備的主要配置示例的圖。
[0038]圖5是描述成像單元的概要的圖。
[0039]圖6是表示服務(wù)器的主要配置示例的圖。
[0040]圖7是描述終端設(shè)備和服務(wù)器的功能的功能塊圖。
[0041 ]圖8是表示通過服務(wù)器管理的信息的示例的圖。
[0042]圖9是表示多視點圖像使用服務(wù)提供處理的流程的示例的流程圖。
[0043]圖10是表示多視點圖像和深度數(shù)據(jù)的示例的圖。
[0044]圖11是表示多視點圖像文件的主要配置示例的圖。
[0045]圖12是描述相機(jī)序列的示例的圖。
[0046]圖13是描述元數(shù)據(jù)的示例的圖。
[0047]圖14是描述深度檢測處理的流程的示例的流程圖。
[0048]圖15是表示多視點圖像使用服務(wù)提供系統(tǒng)的另一配置示例的圖。
[0049]圖16是表示應(yīng)用提供服務(wù)器的主要配置示例的圖。
[0050]圖17是描述終端設(shè)備、服務(wù)器和應(yīng)用提供服務(wù)器的功能的功能塊圖。
[0051]圖18是表示多視點圖像使用服務(wù)提供處理的流程的另一示例的流程圖。
[0052]圖19是表示信息顯示示例的圖。
[0053]圖20是表示多視點圖像使用服務(wù)提供系統(tǒng)的又一配置示例的圖。
[0054]圖21是描述虛擬透鏡處理的流程的狀態(tài)的示例的圖。
[0055]圖22是描述終端設(shè)備和服務(wù)器的功能的功能塊圖。
[0056]圖23是表示多視點圖像使用服務(wù)提供處理的流程的又一示例的流程圖。
[0057]圖24是描述虛擬透鏡選擇的狀態(tài)的示例的圖。
[0058]圖25是描述虛擬透鏡處理的流程的示例的流程圖。
[0059]圖26是描述透鏡配置的示例的圖。
[0060]圖27是表示多視點圖像使用服務(wù)提供系統(tǒng)的又一配置示例的圖。
[0061]圖28是描述家具的布局的狀態(tài)的示例的圖。
[0062]圖29是描述布局的另一示例的圖。
[0063]圖30是描述終端設(shè)備、服務(wù)器和家具銷售服務(wù)器的功能的功能塊圖。
[0064]圖31是表示多視點圖像使用服務(wù)提供處理的流程的又一示例的流程圖。
[0065]圖32是繼續(xù)圖31的表示多視點圖像使用服務(wù)提供處理的流程的又一示例的流程圖。
[0066]圖33是繼續(xù)圖32的表示多視點圖像使用服務(wù)提供處理的流程的又一示例的流程圖。
[0067]圖34是描述家具圖像布置處理的流程的示例的流程圖。
[0068]圖35是描述家具布置更新的狀態(tài)的示例的圖。
[0069]圖36是描述家具布置更新處理的流程的示例的流程圖。
[0070]圖37是描述接地確定的狀態(tài)的示例的圖。[0071 ]圖38是描述接地確定處理的流程的示例的流程圖。
[0072]圖39是描述測量的狀態(tài)的示例的圖。
[0073]圖40是描述測量處理的流程的示例的流程圖。
[0074]圖41是描述照明的模擬的狀態(tài)的示例的圖。
[0075]圖42是描述照明處理的流程的示例的流程圖。
[0076]圖43是描述移動線引導(dǎo)的狀態(tài)的示例的圖。
[0077]圖44是描述移動線引導(dǎo)處理的流程的示例的流程圖。
[0078]圖45是描述人物圖像布置的示例的圖。
[0079]圖46是描述人物圖像布置處理的流程的示例的流程圖。
[0080]圖47是描述家具列表限制處理的流程的示例的流程圖。
【具體實施方式】
[0081]在下文中，將描述用于執(zhí)行本公開的模式(下文中稱為實施例)。注意，將以如下順序給出描述。
[0082]1.第一實施例(多視點圖像使用服務(wù)平臺)
[0083]2.第二實施例(多視點圖像的管理)
[0084]3.第三實施例(應(yīng)用銷售)
[0085]4.第四實施例(虛擬透鏡處理)
[0086]5.第五實施例(產(chǎn)品銷售支持)
[0087]6.其他
[0088]〈1.第一實施例〉
[0089]〈多視點圖像使用服務(wù)平臺〉
[0090]圖1是描述了多視點圖像使用服務(wù)平臺的示例的圖。圖1中表示的多視點圖像使用服務(wù)平臺100是向用戶提供使用由具有相互不同視點的多幅圖像組成的多視點圖像的服務(wù)的基本結(jié)構(gòu)/環(huán)境。例如，多視點圖像使用服務(wù)平臺100具有云存儲101、應(yīng)用市場102等的功會K。
[0091]云存儲101是存儲并且管理多視點圖像數(shù)據(jù)111的服務(wù)，多視點圖像數(shù)據(jù)111為多視點圖像的數(shù)據(jù)。例如，通過使在多視點圖像使用服務(wù)平臺中完成注冊的用戶操作多視點成像設(shè)備121來拍攝攝影對象，并且獲得具有相互不同視點的多幅拍攝圖像作為多視點圖像。另外，通過使所述用戶操作多視點成像設(shè)備121來將所述多視點圖像數(shù)據(jù)提供至多視點圖像使用服務(wù)平臺100。云存儲101存儲所提供的多視點圖像數(shù)據(jù)，并且對于每個用戶執(zhí)行管理。
[0092]此外，云存儲101可以根據(jù)需要基于多視點圖像數(shù)據(jù)等生成與所述多視點圖像數(shù)據(jù)有關(guān)的數(shù)據(jù)。另外，云存儲101可以根據(jù)來自用戶的請求等將所述管理的多視點圖像數(shù)據(jù)提供至由用戶操作的終端設(shè)備或者下面將描述的應(yīng)用。
[0093]應(yīng)用市場102是通過使用多視點圖像數(shù)據(jù)執(zhí)行某種類型的處理，并且向用戶提供、銷售或執(zhí)行應(yīng)用112的服務(wù)，應(yīng)用112向用戶提供使用多視點圖像的服務(wù)。即，應(yīng)用112可以通過多視點圖像使用服務(wù)平臺100來執(zhí)行，或者可以在終端設(shè)備中執(zhí)行。
[0094]通過執(zhí)行這樣的應(yīng)用112來向用戶提供使用多視點圖像的具有高便利性的各種服務(wù)，例如游戲、空間組合、透鏡模擬、空間識別以及產(chǎn)品銷售支持。
[0095]由應(yīng)用112提供的服務(wù)可以是任意的，只要其使用多視點圖像即可。例如，透鏡模擬是通過使用多視點圖像來模擬(模仿外觀)虛擬光學(xué)系統(tǒng)，并且通過使用該虛擬光學(xué)系統(tǒng)生成拍攝攝影對象的虛擬拍攝圖像的服務(wù)。在這種情況下，如圖2的A中所示，例如，應(yīng)用112設(shè)置了虛擬透鏡150，并且模擬(模仿外觀)光射線向量151(其為從攝影對象入射到虛擬透鏡150上的入射光)、光射線向量152(其為透過虛擬透鏡150之后的入射光)、虛擬圖像傳感器153(其從光射線向量152等獲得虛擬拍攝圖像)。此外，應(yīng)用112基于諸如上述的模擬從多視點圖像生成虛擬拍攝圖像，并且將其提供給用戶。此外，應(yīng)用112可以執(zhí)行設(shè)置虛擬透鏡150的選擇、銷售等。
[0096]由于透鏡模擬可以設(shè)置虛擬透鏡，因此可以模擬任意規(guī)格的光學(xué)系統(tǒng)。即，透鏡模擬可以執(zhí)行模擬，即使其為實際光學(xué)系統(tǒng)或不真實的光學(xué)系統(tǒng)也是如此。因此，通過提供這樣的服務(wù)，用戶可以重現(xiàn)通過各種光學(xué)系統(tǒng)獲得的拍攝圖像。例如，通過這樣的透鏡模擬，用戶可以使用與獲得構(gòu)成多視點圖像的每幅拍攝圖像的光學(xué)系統(tǒng)相比較大的孔徑的光學(xué)系統(tǒng)來容易地獲得拍攝圖像。例如，通過這樣的透鏡模擬，用戶可以更容易地獲得與多視點圖像的每幅圖像相比具有較高分辨率的圖像、具有較寬角度的圖像、具有較窄視角的圖像以及較長的焦距等。另外，例如，通過這樣的透鏡模擬，用戶可以使用高檔的透鏡來容易地獲得拍攝圖像，或者使用非真實光學(xué)系統(tǒng)容易地獲得拍攝圖像。即，用戶可以便宜地獲得各種拍攝圖像。
[0097]此外，例如，產(chǎn)品銷售支持是通過使用多視點圖像支持產(chǎn)品的銷售的服務(wù)。銷售產(chǎn)品或支持的方法可以是任意的。例如，其可以為待銷售的產(chǎn)品被設(shè)定為家具的服務(wù)，并且如圖2的B中所示，家具的圖像虛擬地布置在拍攝圖像中。在這種情況下，應(yīng)用112通過交疊多視點圖像的每幅拍攝圖像來生成拍攝圖像，通過使用3維建模數(shù)據(jù)(也稱為3D建模數(shù)據(jù))和表示多視點圖像中距攝影對象的距離的深度數(shù)據(jù)將家具的圖像布置在所述拍攝圖像上，并且向用戶提供該合成圖像。此外，應(yīng)用112基于用戶的操作設(shè)置待布置的家具以及位置。
[0098]通過這樣的服務(wù)，例如，用戶可以拍攝他或她自己的房間，并且可以將家具的圖像布置在拍攝圖像(即，他或她自己的房間的圖像)上的期望位置處。因此，用戶可以在購買之前更精確地假定布局。即，通過這樣的服務(wù)，可以減小用戶購買之前的不確定性，例如“所購買的家具是否不能被安裝在他或她自己的房間中”或者“所購買的家具是否與他或她自己的房間不匹配”，并且可以提高用戶的購買意圖。即，應(yīng)用112可以支持家具銷售。
[0099]如上所述，由于不僅可以從多視點圖像生成并且提供I幅圖像，而且可以管理與用戶或者多視點圖像有關(guān)的數(shù)據(jù)，并且可以執(zhí)行應(yīng)用的銷售或者提供使用應(yīng)用的服務(wù)，因此多視點圖像使用服務(wù)平臺100可以提供對于用戶具有較高便利性的各種服務(wù)。即，多視點圖像使用服務(wù)平臺100可以提高使用多視點圖像的服務(wù)的便利性。
[0100]雖然在此之前已經(jīng)對于由多幅拍攝圖像組成的多視點圖像進(jìn)行了描述，但是組成多視點圖像的圖像數(shù)目是任意的。此外，組成多視點圖像的圖像的一部分或全部，或者每幅圖像的一部分或者全部可以是諸如人工繪制的計算機(jī)圖形圖像的非真實圖像(即，多視點圖像可以包括除了拍攝圖像之外的其他圖像)。
[0101]此外，多視點圖像使用服務(wù)平臺100向其提供服務(wù)的終端設(shè)備可以是由作為多視點圖像的擁有者的用戶操作的多視點成像設(shè)備121，可以是除了由所述用戶操作的多視點成像設(shè)備121之外的終端設(shè)備，或者可以是由被所述用戶允許使用多視點圖像的另一用戶操作的終端設(shè)備。
[0102]另外，多視點圖像使用服務(wù)平臺100的物理配置是任意的。例如，其可以由I臺服務(wù)器組成，或者可以由多臺服務(wù)器組成。此外，例如，多視點圖像使用服務(wù)平臺100的功能的一部分或者全部可以采用多個設(shè)備經(jīng)由網(wǎng)絡(luò)執(zhí)行分配并且共同處理的云計算配置。另外，多視點圖像使用服務(wù)平臺100的功能的一部分或者全部可以在終端設(shè)備中執(zhí)行。
[0103]在下文中，將描述通過多視點圖像使用服務(wù)平臺100提供的服務(wù)的示例的細(xì)節(jié)。
[0104]〈2.第二實施例〉
[0105]〈多視點圖像的管理〉
[0106]如第一實施例中所描述的，多視點圖像使用服務(wù)平臺100可以具有云存儲101的功能，例如，可以存儲多視點圖像數(shù)據(jù)，并且可以提供待管理的服務(wù)。在本實施例中，將描述多視點圖像的管理。
[0107]〈多視點圖像使用服務(wù)提供系統(tǒng)〉
[0108]圖3是表示多視點圖像使用服務(wù)提供系統(tǒng)的主要配置示例的圖。圖3中表示的多視點圖像使用服務(wù)提供系統(tǒng)200為應(yīng)用了本公開的系統(tǒng)的示例，并且為其中服務(wù)器202向經(jīng)由網(wǎng)絡(luò)210連接的終端設(shè)備201提供使用多視點圖像的服務(wù)的系統(tǒng)。即，多視點圖像使用服務(wù)提供系統(tǒng)200為實現(xiàn)多視點圖像使用服務(wù)平臺100的配置的示例。
[0109]圖3表示來自由多視點圖像使用服務(wù)平臺100提供的服務(wù)中的，與多視點圖像的管理有關(guān)的服務(wù)的提供有關(guān)的配置的示例。圖3中，多視點圖像使用服務(wù)提供系統(tǒng)200具有連接至網(wǎng)絡(luò)210的終端設(shè)備201和服務(wù)器202。
[0110]例如，網(wǎng)絡(luò)210為諸如因特網(wǎng)或局域網(wǎng)的任意網(wǎng)絡(luò)。網(wǎng)絡(luò)210為由有線、無線或兩者組成的I個或多個網(wǎng)絡(luò)組成。終端設(shè)備201和服務(wù)器202通過有線或無線分別連接至網(wǎng)絡(luò)210。
[0111]終端設(shè)備201執(zhí)行通過拍攝攝影對象獲得多視點圖像的多視點成像，所述多視點圖像由具有相互不同的視點的多幅拍攝圖像組成。此外，終端設(shè)備201對多視點圖像數(shù)據(jù)進(jìn)行編碼，并且生成多視點編碼數(shù)據(jù)。終端設(shè)備201將所生成的多視點編碼數(shù)據(jù)傳輸至服務(wù)器202。
[0112]服務(wù)器202管理預(yù)先已經(jīng)注冊的用戶。此外，服務(wù)器202獲取所傳輸?shù)亩嘁朁c圖像編碼數(shù)據(jù)，檢測多視點圖像的深度，并且生成深度數(shù)據(jù)。另外，服務(wù)器202將與這些多視點圖像有關(guān)的數(shù)據(jù)制成文件，并且生成多視點圖像文件。此外，服務(wù)器202存儲(保存)并且管理所生成的多視點圖像文件。根據(jù)需要，通過服務(wù)器202管理的多視點圖像文件被提供至終端設(shè)備201，或者所執(zhí)行的應(yīng)用。
[0113]〈終端設(shè)備〉
[0114]圖4是表示終端設(shè)備201的主要配置示例的框圖。如圖4所示，在終端設(shè)備201中，中央處理單元(CPU)221、只讀存儲器(R0M)222以及隨機(jī)存取存儲器(RAM)223經(jīng)由總線224相互連接。
[0115]輸入/輸出接口 230也連接至總線224。輸入單元231、輸出單元232、存儲單元233、通信單元234以及驅(qū)動器235連接至輸入/輸出接口 230。
[0116]輸入單元231由接收諸如用戶輸入的外部信息的輸入裝置組成。例如，操作按鈕、觸摸面板、麥克風(fēng)、輸入終端等被包括在輸入單元231中。此外，諸如加速度傳感器、光學(xué)傳感器和溫度傳感器的各種類型的傳感器可以包括在輸入單元231中。輸出單元232由輸出諸如圖像或音頻的信息的輸出裝置組成。例如，顯示器、揚聲器、輸出終端等被包括在輸出單元232中。
[0117]存儲單元233例如由硬盤、RAM盤、非易失性存儲器等組成。通信單元234例如由網(wǎng)絡(luò)接口組成。驅(qū)動器235例如驅(qū)動諸如磁盤、光盤、磁光盤或半導(dǎo)體存儲器的可移除介質(zhì)241。
[0118]CPU 221例如通過經(jīng)由輸入/輸出接口230和總線224將存儲在存儲單元233中的程序載入RAM 223而執(zhí)行該程序來執(zhí)行各種類型的處理。從由CPU 221執(zhí)行各種類型的處理的角度來說必要的數(shù)據(jù)等也被適當(dāng)?shù)卮鎯υ赗AM 223中。
[0119]由CPU221執(zhí)行的程序例如可以通過記錄至作為封裝介質(zhì)的可移除介質(zhì)241等來提供至終端設(shè)備201。在這種情況下，可以通過將可移除介質(zhì)241安裝在驅(qū)動器235中來經(jīng)由輸入/輸出接口 230將程序安裝在存儲單元233中。
[0120]此外，程序可以經(jīng)由諸如LAN、互聯(lián)網(wǎng)或數(shù)字衛(wèi)星廣播的有線或無線傳輸介質(zhì)來被提供至終端設(shè)備201。在這種情況下，程序可以經(jīng)由有線或無線傳輸介質(zhì)被通信單元234接收，并且可以安裝在存儲單元233中。
[0121]除此之外，所述程序可以預(yù)先安裝在ROM222中或存儲單元233中。
[0122]成像單元236被另外地連接至輸入/輸出接口230。成像單元236例如被CPU221控制，并且執(zhí)行通過拍攝攝影對象獲得由具有相互不同視點的多幅拍攝圖像組成的多視點圖像的多視點成像。成像單元236具有相機(jī)模塊242-1至相機(jī)模塊242-N J為2以上的任意整數(shù)。相機(jī)模塊242-1至相機(jī)模塊242-N為具有彼此相同的配置并且執(zhí)行類似處理的模塊。在下文中，在可能不需要相互區(qū)分相機(jī)模塊242-1至相機(jī)模塊242-N來進(jìn)行描述的情況下，將它們簡單地稱為相機(jī)模塊242。
[0123]相機(jī)模塊242為具有包括圖像傳感器(成像傳感器)的光學(xué)系統(tǒng)，并且通過拍攝攝影對象來獲得拍攝圖像的模塊。每個相機(jī)模塊242布置在平坦表面或者彎曲表面上的相互不同的位置處，并且具有相互不同的視點，例如，圖5所示的(:11、(:12、(:13、021、022、023、C31、C32和C33。即，相機(jī)模塊242-1至相機(jī)模塊242-N拍攝攝影對象，并且獲得具有相互不同的視點的拍攝圖像。
[0124]成像單元236被CPU221等控制，通過使用這樣的相機(jī)模塊242_1至相機(jī)模塊242-N拍攝攝影對象，并且獲得具有相互不同的視點的N幅(多幅)拍攝圖像。成像單元236獲得所述多幅拍攝圖像作為多視點圖像(多視點圖像數(shù)據(jù))。即，成像單元236通過使用每個相機(jī)模塊242執(zhí)行多視點成像。
[0125]成像單元236被CPU221等控制，并且將所獲得的多視點圖像數(shù)據(jù)經(jīng)由輸入/輸出接口 260、總線224等提供至CPU 221或RAM 223，經(jīng)由輸入/輸出接口 260提供并且存儲在存儲單元233中，提供并且輸出至輸出單元232，或者通過提供至通信單元234來