圖像處理裝置、圖像記錄裝置、方法及程序的制作方法

文檔序號：7920352閱讀：110來源：國知局

專利名稱：圖像處理裝置、圖像記錄裝置、方法及程序的制作方法
技術領域：
本發(fā)明涉及多視點圖像及單視點圖像的縮小圖像的一覽顯示。還有，本發(fā)明涉及
多視點圖像及單視點圖像的縮小圖像的記錄。
背景技術：
—般的立體圖像顯示系統(tǒng)是對右眼出示以右眼為視點而描繪的圖像，對左眼出示以左眼為視點而描繪的圖像，是單獨出示的。通常，在這樣的以右眼及左眼為視點的2個圖像(以下記作多視點圖像)中，處于離視點遠的位置的客體因為來自兩眼的視線大致平行，即觀看方式相同，所以描繪于大致相同的位置。另一方面，處于離視點近的位置的客體因為來自兩眼的視線不平行，即觀看方式不同，所以描繪于互相錯開的位置。在用右眼左眼分別觀看這種有視差的圖像(以下記作視差圖像)時，觀測者對客體可獲得遠近感。
在視差圖像的生成方面，有采用左右2臺攝像裝置拍攝被復制體，利用眼的錯覺而3維地展示所獲得的視差圖像的寫實手法，以及采用計算機圖形技術通過以左右兩眼為視點的模型數(shù)據(jù)的視野變換而生成視差圖像的3維計算機圖形(3維CG)顯示。3維計算機圖形顯示俗稱假想性3維顯示、疑似性3維顯示。寫實手法采用視差柵欄式或柱面透鏡式的3D監(jiān)視器進行視差圖像的立體顯示。視差柵欄式是在視差柵欄顯示層上產生由光透過部和光遮蔽部交替地以給定的節(jié)距排列而成的圖形所構成的視差柵欄，并且在其下層的圖像顯示面上交替地排列、顯示表示左右的圖像的長條狀的圖像片斷，從而使視差圖像的立體觀看成為可能。或者，寫實手法可以采用利用柱面透鏡片材的柱面透鏡方式、利用微透鏡陣列片材的集成圖形方式、利用干涉現(xiàn)象的全息方式等。 —般的計算機圖形是由多個多邊形的集合來表現(xiàn)在3維空間內定義的客體。作為多邊形，通常多采用最簡單的三角形。構成客體的各多邊形是采用矢量或矩陣等數(shù)學手法，從其自身具有的客體坐標向以觀測者的視點的位置為基準的3維坐標即視野坐標進行坐標變換。而且為了顯示到顯示裝置上，進行用于把以視野坐標表現(xiàn)的多邊形向2維平面進行透視投影的坐標變換(透視變換)。這一連串的坐標變換進行之后的最終的多邊形的位置數(shù)據(jù)就成為表示從視點到與顯示器垂直的方向(Z軸)的距離的Z值和表示顯示器面內的位置坐標的X值及Y值。在構成各多邊形的像素的色值的決定方法方面，有在視野坐標中配置假想性的光源，物理地計算從該光源向構成多邊形的各頂點照射的光的強度，再根據(jù)這些值把在多邊形內的柵格化過程中各像素位置上的光的強度通過線形插值來求出的方法。
或者，如專利文獻1所示，有在多邊形表面上粘貼稱作織構的表示物體表面的質感、特殊的模樣等圖像的方法。在該場合，在坐標變換前的客體坐標的階段，對構成客體的多邊形的各頂點，除了位置坐標以外，再賦予織構坐標。并且與上述光強度的場合同樣，在多邊形的柵格化過程中按各像素位置一一對織構坐標進行線形插值，按照所求出的織構坐標來決定像素的色值。
按照以上方式就能生成從特定的視點看到的圖形圖像，不過，為了生成如上所述的立體觀看的視差圖像，把視點的位置按右眼及左眼各自的位置進行調換，對同一客體進行2次描繪，從而生成多視點圖像。在高價系統(tǒng)中，具備可實現(xiàn)如上所述的寫實手法的顯示裝置，生成多視點圖像。另一方面，以前，在把多視點圖像和無視差的通常的圖像混在一起存放在存儲裝置中的場合，有可區(qū)別地顯示它們的縮小圖像的技術。專利文獻2的電子設備具備可實現(xiàn)寫實手法的顯示裝置，在縮略像的平面性的一覽顯示時，對于3維圖像所對應的縮略像加上「3D」的記號，并且以圓形或橢圓形標明，對于2維圖像所對應的縮略像加上「2D」的記號，以三角形標明，從而可以區(qū)別根據(jù)2維圖像制作成的縮略圖和根據(jù)3維圖像制作成的縮略圖。還有，以前，提出了即使是被復制體處于遠距離的場合，也能取得立體視覺效果的攝像方法。例如根據(jù)專利文獻3，在打開的機箱兩端設置照相機部，對于遠距離也能取得立體圖像的效果。專利文獻1 :特開2002-24850號公報
專利文獻2 :特開2004-120165號公報
專利文獻3 :特開2003-51872號公報

發(fā)明內容
發(fā)明打算解決的課題在專利文獻2中，是以「3D」、「2D」這樣的記號以及圓形、橢圓形、三角形這樣的圖
形來標明2維圖像和3維圖像的縮略圖，不過，這樣則兩者在直觀上難以區(qū)別。還有，在專利文獻2中，可實現(xiàn)寫實手法所形成的3維圖像的顯示的顯示裝置的配
置是必須的，并且2維圖像和3維圖像的顯示切換是必須的，所以存在系統(tǒng)整體的成本變高
的缺點。特別是在數(shù)碼相機一類的便攜型設備中，強迫配置這種特殊顯示裝置，在便攜性的確保、生產成本抑制方面有很大問題。還有，在專利文獻3中，存在對無限遠的被復制體不能賦予立體視覺效果的問題。
因此，本發(fā)明是以簡易的構成來實現(xiàn)用戶能從拍攝圖像的縮小圖像中容易且直觀地識別多視點圖像的縮小圖像的裝置。還有，本發(fā)明防止不產生立體效果的無意義的多視點圖像的記錄。用于解決課題的方案本發(fā)明所涉及的圖像處理裝置，具備圖像輸入部，輸入包含從2個以上的視點拍攝到的多視點圖像及從單一的視點拍攝到的單視點圖像的圖像；存儲部，存儲圖像輸入部中輸入了的圖像；縮小圖像制作部，制作縮小存儲部中存儲的圖像所得的第1縮小圖像；圖像識別部，識別存儲部中存儲的圖像是多視點圖像還是單視點圖像；圖像處理部，對與由圖像識別部識別為多視點圖像的圖像對應的第1縮小圖像實施3維計算機圖形處理，從而制作第2縮小圖像；以及顯示部，按照對存儲部中存儲的圖像進行一覽顯示的指示，一覽顯示由縮小圖像制作部制作成的第1縮小圖像作為由圖像識別部識別為單視點圖像的圖像的代表圖像，并且一覽顯示由圖像處理部制作成的第2縮小圖像作為由圖像識別部識別為多視點圖像的圖像的代表圖像。根據(jù)本發(fā)明，一覽顯示實施了 3維計算機圖形處理的縮小圖像作為多視點圖像的
代表圖像，一覽顯示單純的縮小圖像作為單視點圖像的代表圖像。對多視點圖像的代表圖像進行了3維計算機圖形處理，所以它與單純的縮小圖像的差異一目了然。還有，不需要為
顯示多視點圖像的代表圖像而使用特殊的寫實手法，可以是廉價的。本發(fā)明所涉及的圖像處理裝置，具備圖像輸入部，輸入包含從2個以上的視點拍攝到的多視點圖像及從單一的視點拍攝到的單視點圖像的圖像；存儲部，存儲圖像輸入部中輸入了的圖像；縮小圖像制作部，制作縮小存儲部中存儲的圖像所得的縮小圖像；圖像識別部，識別存儲部中存儲的圖像是多視點圖像還是單視點圖像；臉檢測部，對于由圖像識別部識別為多視點圖像的圖像，檢測被復制體臉區(qū)域的有無；以及顯示部，按照對存儲部中存儲的圖像進行一覽顯示的指示，一覽顯示縮小圖像作為由圖像識別部識別為單視點圖像的圖像的縮小圖像及由圖像識別部識別為多視點圖像且是未由臉檢測部檢測到被復制體臉區(qū)域的圖像的代表圖像，并且一覽顯示實施了 3維計算機圖形處理的給定的樣品縮小圖像作為由圖像識別部識別為多視點圖像且是由臉檢測部檢測到被復制體臉區(qū)域的圖像的代表圖像。根據(jù)本發(fā)明，一覽顯示實施了 3維計算機圖形處理的給定的樣品圖像作為檢測到臉的多視點圖像的代表圖像，一覽顯示單純的縮小圖像作為單視點圖像或未檢測到臉的多視點圖像的代表圖像。對成為多視點圖像的代表圖像的給定的樣品進行了 3維計算機圖形處理，所以有臉的多視點圖像的代表圖像和單純的縮小圖像的差異一目了然。還有，因為使用給定的樣品，所以不用為了顯示多視點圖像的代表圖像而對各個多視點圖像進行3維計算機圖形處理。本發(fā)明所涉及的圖像處理裝置，具備圖像輸入部，輸入包含從2個以上的視點拍攝到的多視點圖像及從單一的視點拍攝到的單視點圖像的圖像；存儲部，存儲圖像輸入部中輸入了的圖像；縮小圖像制作部，制作縮小存儲部中存儲的圖像所得的縮小圖像；圖像識別部，識別存儲部中存儲的圖像是多視點圖像還是單視點圖像；閃光發(fā)光識別部，對于由圖像識別部識別為多視點圖像的圖像，識別拍攝時的閃光發(fā)光的有無；以及顯示部，按照對存儲部中存儲的圖像進行一覽顯示的指示，一覽顯示縮小圖像作為由圖像識別部識別為單視點圖像的圖像的代表圖像，一覽顯示由縮小圖像制作部制作成的縮小圖像作為由圖像識別部識別為多視點圖像且是由閃光發(fā)光識別部識別為沒有閃光發(fā)光的圖像的代表圖像，一覽顯示實施了 3維計算機圖形處理的給定的樣品縮小圖像作為由圖像識別部識別為多視點圖像且是由閃光發(fā)光識別部識別為有閃光發(fā)光的圖像的代表圖像。根據(jù)本發(fā)明，一覽顯示實施了 3維計算機圖形處理的縮小圖像作為拍攝時有閃光發(fā)光的多視點圖像的代表圖像，一覽顯示單純的縮小圖像作為單視點圖像或拍攝時沒有閃光發(fā)光的多視點圖像的代表圖像。對拍攝時有閃光發(fā)光的多視點圖像的代表圖像進行了 3維計算機圖形處理，所以它與單純的縮小圖像或拍攝時沒有閃光發(fā)光的多視點圖像的代表圖像的差異一目了然。還有，不需要為顯示多視點圖像的代表圖像而使用特殊的寫實手法，可以是廉價的。還具備從由圖像識別部識別為多視點圖像的圖像中檢測被復制體臉區(qū)域的有無的臉檢測部，圖像處理部對第1縮小圖像設定了與由臉檢測部檢測到的被復制體臉區(qū)域對應的區(qū)域之后，對設定了的區(qū)域進行3維計算機圖形處理，從而制作第2縮小圖像，顯示部一覽顯示第1縮小圖像作為由圖像識別部識別為多視點圖像的圖像中的未由臉檢測部檢測到被復制體臉區(qū)域的圖像的代表圖像，并且一覽顯示第2縮小圖像作為由臉檢測部檢測到被復制體臉區(qū)域的圖像的代表圖像。只限于對臉這樣的重要部分實施圖像處理，可以通過很少的處理把實質性的疑似立體圖像作為代表圖像來顯示。本發(fā)明所涉及的圖像處理裝置，具備圖像輸入部，輸入包含從2個以上的視點拍攝到的多視點圖像及從單一的視點拍攝到的單視點圖像的圖像；存儲部，存儲圖像輸入部中輸入了的圖像；縮小圖像制作部，制作縮小存儲部中存儲的圖像所得的第1縮小圖像；圖像識別部，識別存儲部中存儲的圖像是多視點圖像還是單視點圖像；距離識別部，識別由圖像識別部識別為多視點圖像的圖像中的被復制體處于遠距離還是近距離；圖像處理部，對根據(jù)由圖像識別部識別為多視點圖像且是由距離識別部識別為被復制體處于近距離的圖像而制作成的第1縮小圖像實施3維計算機圖形處理，從而制作第2縮小圖像；以及顯示部，按照對存儲部中存儲的圖像進行一覽顯示的指示，一覽顯示由縮小圖像制作部制作成的第1縮小圖像作為由圖像識別部識別為單視點圖像的圖像的代表圖像，一覽顯示由縮小圖像制作部制作成的第1縮小圖像作為由圖像識別部識別為多視點圖像且是由距離識別部識別為被復制體處于遠距離的圖像的代表圖像，一覽顯示由圖像處理部制作成的第2縮小圖像作為由圖像識別部識別為多視點圖像且是由距離識別部識別為被復制體處于近距離的圖像的代表圖像。根據(jù)本發(fā)明，僅對被復制體處于近距離的多視點圖像實施3維計算機圖形處理，
所以不用對被復制體處于遠距離而實施該處理也無意義的圖像進行該處理。本發(fā)明所涉及的圖像處理方法，包括以下步驟輸入包含從2個以上的視點拍攝
到的多視點圖像及從單一的視點拍攝到的單視點圖像的圖像；存儲輸入了的圖像；制作縮
小所存儲的圖像所得的第1縮小圖像；識別所存儲的圖像是多視點圖像還是單視點圖像；
對與識別為多視點圖像的圖像對應的第1縮小圖像實施3維計算機圖形處理，從而制作第
2縮小圖像；以及按照對所存儲的圖像進行一覽顯示的指示，一覽顯示第l縮小圖像作為識
別為單視點圖像的圖像的代表圖像，并且一覽顯示第2縮小圖像作為識別為多視點圖像的
圖像的代表圖像。本發(fā)明所涉及的圖像處理方法，包括以下步驟輸入包含從2個以上的視點拍攝到的多視點圖像及從單一的視點拍攝到的單視點圖像的圖像；存儲輸入了的圖像；制作縮小所存儲的圖像所得的縮小圖像；識別所存儲的圖像是多視點圖像還是單視點圖像；對于識別為多視點圖像的圖像，檢測被復制體臉區(qū)域的有無；以及按照對所存儲的圖像進行一覽顯示的指示，一覽顯示縮小圖像作為識別為單視點圖像的圖像的縮小圖像及識別為多視點圖像且是未檢測到被復制體臉區(qū)域的圖像的代表圖像，并且一覽顯示實施了 3維計算機圖形處理的給定的樣品縮小圖像作為識別為多視點圖像且是檢測到被復制體臉區(qū)域的圖像的代表圖像。本發(fā)明所涉及的圖像處理方法，包括以下步驟輸入包含從2個以上的視點拍攝到的多視點圖像及從單一的視點拍攝到的單視點圖像的圖像；存儲輸入了的圖像；制作縮小所存儲的圖像所得的縮小圖像；識別所存儲的圖像是多視點圖像還是單視點圖像；對于識別為多視點圖像的圖像，識別拍攝時的閃光發(fā)光的有無；以及按照對所存儲的圖像進行一覽顯示的指示，一覽顯示縮小圖像作為識別為單視點圖像的圖像的代表圖像，一覽顯示縮小圖像作為識別為多視點圖像且是識別為沒有閃光發(fā)光的圖像的代表圖像，一覽顯示實施了 3維計算機圖形處理的給定的樣品縮小圖像作為識別為多視點圖像且是識別為有閃光發(fā)光的圖像的代表圖像。還可以包括以下步驟從識別為多視點圖像的圖像中檢測被復制體臉區(qū)域的有無；對第l縮小圖像設定了與被復制體臉區(qū)域對應的區(qū)域之后，對設定了的區(qū)域進行3維計算機圖形處理，從而制作第2縮小圖像；以及一覽顯示第1縮小圖像作為識別為多視點圖像的圖像中的未檢測到被復制體臉區(qū)域的圖像的代表圖像，并且一覽顯示第2縮小圖像作為檢測到被復制體臉區(qū)域的圖像的代表圖像。本發(fā)明所涉及的圖像處理方法，包括以下步驟輸入包含從2個以上的視點拍攝到的多視點圖像及從單一的視點拍攝到的單視點圖像的圖像；存儲輸入了的圖像；制作縮小所存儲的圖像所得的第1縮小圖像；識別所存儲的圖像是多視點圖像還是單視點圖像；識別識別為多視點圖像的圖像中的被復制體處于遠距離還是近距離；對根據(jù)識別為多視點圖像且是識別為被復制體處于近距離的圖像而制作成的第1縮小圖像實施3維計算機圖形處理，從而制作第2縮小圖像；以及按照對所存儲的圖像進行一覽顯示的指示，一覽顯示第 1縮小圖像作為識別為單視點圖像的圖像的代表圖像，一覽顯示第1縮小圖像作為識別為多視點圖像且是識別為被復制體處于遠距離的圖像的代表圖像，一覽顯示第2縮小圖像作為識別為多視點圖像且是識別為被復制體處于近距離的圖像的代表圖像。
使計算機執(zhí)行該圖像處理方法的程序也包含在本發(fā)明中。本發(fā)明所涉及的圖像記錄裝置，具備拍攝部，可拍攝包含從2個以上的視點拍攝到的多視點圖像及從單一的視點拍攝到的單視點圖像的圖像；本圖像存儲部，存儲作為由拍攝部拍攝到的多視點圖像或單視點圖像的本圖像；圖像識別部，識別本圖像存儲部中存儲的本圖像是多視點圖像還是單視點圖像；圖像處理部，制作縮小本圖像所得的第1縮小圖像之后，對根據(jù)由圖像識別部識別為多視點圖像的本圖像而制作成的第1縮小圖像，實施3維計算機圖形處理，從而制作第2縮小圖像；縮小圖像存儲部，按照圖像識別部所涉及的多視點圖像或單視點圖像的識別，存儲由圖像處理部制作成的第1縮小圖像或第2縮小圖像；以及記錄部，把縮小圖像存儲部中存儲的第1縮小圖像或第2縮小圖像和本圖像存儲部中存儲的本圖像對應起來記錄。根據(jù)該發(fā)明，作為多視點圖像的縮小圖像把實施了 3維計算機圖形處理的縮小圖
像，作為單視點圖像的縮小圖像把單純的縮小圖像，分別與本圖像對應起來記錄。對多視點圖像的縮小圖像進行了 3維計算機圖形處理，所以它與單純的縮小圖像的差異一目了然。
還有，不需要為顯示多視點圖像的縮小圖像而使用特殊的寫實手法，裝置構成可以是廉價的。還可以具備從由圖像識別部識別為多視點圖像的本圖像中檢測被復制體臉區(qū)域的有無的臉檢測部，圖像處理部對第1縮小圖像設定了與由臉檢測部檢測到的被復制體臉區(qū)域對應的區(qū)域之后，對設定了的區(qū)域進行3維計算機圖形處理，從而制作第2縮小圖像。
在這里，只限于對臉這樣的重要部分實施3維計算機圖形處理，可以通過很少的處理來記錄實質性的疑似立體縮小圖像。
10
本發(fā)明所涉及的圖像記錄裝置，具備拍攝部，可拍攝包含從2個以上的視點拍攝到的多視點圖像及從單一的視點拍攝到的單視點圖像的圖像；本圖像存儲部，存儲作為由拍攝部拍攝到的多視點圖像或單視點圖像的本圖像；圖像識別部，識別本圖像存儲部中存儲的本圖像是多視點圖像還是單視點圖像；閃光發(fā)光識別部，對于由圖像識別部識別為多視點圖像的圖像，識別拍攝時的閃光發(fā)光的有無；圖像處理部，制作縮小由圖像識別部識別為單視點圖像或由閃光發(fā)光識別部識別為拍攝時沒有閃光發(fā)光的本圖像所得的第1縮小圖像；樣品縮小圖像取得部，取得實施了 3維計算機圖形的給定的樣品縮小圖像作為與由圖像識別部識別為多視點圖像且由閃光發(fā)光識別部識別為有閃光發(fā)光的本圖像對應的第2 縮小圖像；縮小圖像存儲部，按照圖像識別部所涉及的多視點圖像或單視點圖像的識別和閃光發(fā)光識別部所涉及的拍攝時的閃光發(fā)光的有無的識別，存儲由圖像處理部制作成的第 l縮小圖像或由樣品縮小圖像取得部取得的第2縮小圖像；以及記錄部，把縮小圖像存儲部中存儲的第1縮小圖像或第2縮小圖像和本圖像存儲部中存儲的本圖像對應起來記錄。
根據(jù)本發(fā)明，作為拍攝時有閃光發(fā)光的多視點圖像的縮小圖像而把實施了 3維計算機圖形處理的給定的樣品縮小圖像，作為單視點圖像或拍攝時沒有閃光發(fā)光的多視點圖像的縮小圖像而把單純的通常的縮小圖像，與本圖像對應起來記錄。對拍攝時有閃光發(fā)光的多視點圖像的樣品縮小圖像進行了 3維計算機圖形處理，所以它與單純的縮小圖像或拍攝時沒有閃光發(fā)光的多視點圖像的縮小圖像的差異一目了然。還有，不需要為顯示多視點圖像的縮小圖像而使用特殊的寫實手法，也不需要每次拍攝都進行3維計算機圖形處理，裝置構成可以是廉價的。本發(fā)明所涉及的圖像記錄裝置，具備拍攝部，可拍攝包含從2個以上的視點拍攝到的多視點圖像及從單一的視點拍攝到的單視點圖像的圖像；本圖像存儲部，存儲作為由拍攝部拍攝到的多視點圖像或單視點圖像的本圖像；圖像識別部，識別本圖像存儲部中存儲的本圖像是多視點圖像還是單視點圖像；臉檢測部，對于由圖像識別部識別為多視點圖像的圖像，檢測被復制體臉區(qū)域的有無；圖像處理部，制作縮小由圖像識別部識別為單視點圖像或由臉檢測部未檢測到被復制體臉區(qū)域的本圖像所得的第1縮小圖像；樣品縮小圖像取得部，取得實施了 3維計算機圖形的給定的樣品縮小圖像作為與由圖像識別部識別為多視點圖像且由臉檢測部檢測到被復制體臉區(qū)域的本圖像對應的第2縮小圖像；縮小圖像存儲部，按照圖像識別部所涉及的多視點圖像或單視點圖像的識別和臉檢測部所涉及的被復制體臉區(qū)域的有無，存儲由圖像處理部制作成的第1縮小圖像或由樣品縮小圖像取得部取得的第2縮小圖像；以及記錄部，把縮小圖像存儲部中存儲的第1縮小圖像或第2縮小圖像和本圖像存儲部中存儲的本圖像對應起來記錄。根據(jù)該發(fā)明，作為有被復制體臉區(qū)域的多視點圖像的縮小圖像而把實施了 3維計算機圖形處理的給定的樣品縮小圖像，作為單視點圖像或沒有被復制體臉區(qū)域的多視點圖像的縮小圖像而把單純的通常的縮小圖像，與本圖像對應起來記錄。對有被復制體臉區(qū)域的多視點圖像的樣品縮小圖像進行了 3維計算機圖形處理，所以它與單純的縮小圖像或拍攝時沒有閃光發(fā)光的多視點圖像的縮小圖像的差異一目了然。還有，不需要為顯示多視點圖像的縮小圖像而使用特殊的寫實手法，也不需要每次拍攝都進行3維計算機圖形處理，裝置構成可以是廉價的。本發(fā)明所涉及的圖像記錄裝置，具備拍攝部，可拍攝包含從2個以上的視點拍攝到的多視點圖像及從單一的視點拍攝到的單視點圖像的圖像；本圖像存儲部，存儲作為由拍攝部拍攝到的多視點圖像或單視點圖像的本圖像；圖像識別部，識別本圖像存儲部中存儲的本圖像是多視點圖像還是單視點圖像；距離識別部，識別由圖像識別部識別為多視點圖像的圖像中的被復制體處于遠距離還是近距離；圖像處理部，制作成縮小本圖像所得的第1縮小圖像之后，對根據(jù)由圖像識別部識別為多視點圖像且是由距離識別部識別為被復制體處于近距離的本圖像而制作成的第1縮小圖像，實施3維計算機圖形處理，從而制作第 2縮小圖像；縮小圖像存儲部，按照圖像識別部所涉及的多視點圖像或單視點圖像的識別和距離識別部所涉及的被復制體的距離的識別，存儲由圖像處理部制作成的第1縮小圖像或第2縮小圖像；以及記錄部，把縮小圖像存儲部中存儲的第1縮小圖像或第2縮小圖像和本圖像存儲部中存儲的本圖像對應起來記錄。根據(jù)本發(fā)明，僅對被復制體處于近距離的多視點圖像實施3維計算機圖形處理，
所以不用對被復制體處于遠距離而實施該處理也無意義的圖像進行該處理。可以是，記錄部對于由圖像識別部識別為多視點圖像的本圖像，僅記錄由距離識
別部識別為被復制體處于近距離的本圖像。這樣就不用記錄被復制體處于給定距離以上的遠距離而難以產生立體效果的多
視點圖像，或完全不產生立體效果的多視點圖像，能防止無意義的圖像記錄。還可以具備通知部，其通知不記錄由圖像識別部識別為多視點圖像且由距離識別
部識別為被復制體處于遠距離的本圖像的意思的警告。這樣，用戶就能認識到未記錄被復制體處于遠距離而難以產生立體效果的多視點圖像。本發(fā)明所涉及的圖像記錄方法，包括以下步驟拍攝包含從2個以上的視點拍攝到的多視點圖像及從單一的視點拍攝到的單視點圖像的圖像；存儲作為拍攝到的多視點圖像或單視點圖像的本圖像；識別所存儲的本圖像是多視點圖像還是單視點圖像；制作縮小本圖像所得的第1縮小圖像之后，對根據(jù)識別為多視點圖像的本圖像而制作成的第1縮小圖像，實施3維計算機圖形處理，從而制作第2縮小圖像；按照多視點圖像或單視點圖像的識別，存儲所制作成的第1縮小圖像或第2縮小圖像；以及把所存儲的第1縮小圖像或第2 縮小圖像和所存儲的本圖像對應起來記錄。該圖像記錄方法還可以包括以下步驟從識別為多視點圖像的本圖像中檢測被復制體臉區(qū)域的有無；以及對第1縮小圖像設定了與檢測到的被復制體臉區(qū)域對應的區(qū)域之后，對設定了的區(qū)域進行3維計算機圖形處理，從而制作第2縮小圖像。本發(fā)明所涉及的圖像記錄方法，包括以下步驟拍攝包含從2個以上的視點拍攝到的多視點圖像及從單一的視點拍攝到的單視點圖像的圖像；存儲作為拍攝到的多視點圖像或單視點圖像的本圖像；識別所存儲的本圖像是多視點圖像還是單視點圖像；對于識別為多視點圖像的圖像，識別拍攝時的閃光發(fā)光的有無；制作縮小識別為單視點圖像或識別為拍攝時沒有閃光發(fā)光的本圖像所得的第1縮小圖像；取得實施了 3維計算機圖形的給定的樣品縮小圖像作為與識別為多視點圖像且識別為有閃光發(fā)光的本圖像對應的第2縮小圖像；按照多視點圖像或單視點圖像的識別和拍攝時的閃光發(fā)光的有無的識別，存儲第1 縮小圖像或第2縮小圖像；以及把所存儲的第1縮小圖像或第2縮小圖像和所存儲的本圖像對應起來記錄。
本發(fā)明所涉及的圖像記錄方法，包括以下步驟拍攝包含從2個以上的視點拍攝到的多視點圖像及從單一的視點拍攝到的單視點圖像的圖像；存儲作為拍攝到的多視點圖像或單視點圖像的本圖像；識別所存儲的本圖像是多視點圖像還是單視點圖像；對于識別為多視點圖像的圖像，檢測被復制體臉區(qū)域的有無；制作縮小識別為單視點圖像或未檢測到被復制體臉區(qū)域的本圖像所得的第1縮小圖像；取得實施了 3維計算機圖形的給定的樣品縮小圖像作為與識別為多視點圖像且檢測到被復制體臉區(qū)域的本圖像對應的第2縮小圖像；按照多視點圖像或單視點圖像的識別和被復制體臉區(qū)域的有無，存儲第1縮小圖像或第2縮小圖像；以及把所存儲的第1縮小圖像或第2縮小圖像和所存儲的本圖像對應起來記錄。
本發(fā)明所涉及的圖像記錄方法，包括以下步驟拍攝包含從2個以上的視點拍攝
到的多視點圖像及從單一的視點拍攝到的單視點圖像的圖像；存儲作為拍攝到的多視點圖
像或單視點圖像的本圖像；識別所存儲的本圖像是多視點圖像還是單視點圖像；識別識別
為多視點圖像的圖像中的被復制體處于遠距離還是近距離；制作成縮小本圖像所得的第1
縮小圖像之后，對根據(jù)識別為多視點圖像且是識別為被復制體處于近距離的本圖像而制作
成的第1縮小圖像，實施3維計算機圖形處理，從而制作第2縮小圖像；按照多視點圖像或
單視點圖像的識別和被復制體的距離的識別，存儲第l縮小圖像或第2縮小圖像；以及把所
存儲的第1縮小圖像或第2縮小圖像和所存儲的本圖像對應起來記錄。優(yōu)選的是，該圖像記錄方法對于識別為多視點圖像的本圖像，僅記錄識別為被復
制體處于近距離的本圖像。還有，優(yōu)選的是，還可以包括以下步驟顯示不記錄識別為多視點圖像且識別為被復制體處于遠距離的本圖像的意思的警告。使計算機執(zhí)行上述圖像記錄方法的程序也包含在本發(fā)明中。
發(fā)明效果根據(jù)本發(fā)明，一覽顯示實施了 3維計算機圖形處理的縮小圖像作為多視點圖像的代表圖像，一覽顯示單純的縮小圖像作為單視點圖像、未檢測到臉的多視點圖像或者被復制體處于遠距離的多視點圖像的代表圖像。對成為多視點圖像的代表圖像的給定的樣品進行了 3維計算機圖形處理，所以有臉的多視點圖像的代表圖像和單純的縮小圖像的差異一目了然。還有，不需要為顯示多視點圖像的代表圖像而使用特殊的寫實手法，可以是廉價的。根據(jù)本發(fā)明，作為多視點圖像的縮小圖像，把實施了 3維計算機圖形處理的縮小圖像，優(yōu)選的是在被復制體臉區(qū)域上實施了 3維計算機圖形處理的縮小圖像與本圖像對應起來記錄。另一方面，作為單視點圖像、未檢測到臉的多視點圖像或被復制體處于遠距離的多視點圖像的縮小圖像，把單純的縮小圖像與本圖像對應起來記錄。對多視點圖像的縮小圖像進行了 3維計算機圖形處理，所以多視點圖像的縮小圖像和單視點圖像的縮小圖像的差異一目了然。還有，不需要為顯示多視點圖像的縮小圖像而使用特殊的寫實手法，裝置構成可以是廉價的。

圖l是攝像裝置的框圖。
圖2是第1實施方式所涉及的一覽圖像顯示處理的流程圖。
圖3是表示織構映射的一個例子的圖。圖4是表示通過第1實施方式所涉及的一覽圖像顯示處理而顯示的縮略圖的一個例子的圖。圖5是第2實施方式所涉及的一覽圖像顯示處理的流程圖。圖6是表示通過第2實施方式所涉及的一覽圖像顯示處理而顯示的縮略圖的一個例子的圖。圖7是第3實施方式所涉及的一覽圖像顯示處理的流程圖。圖8是表示通過第3實施方式所涉及的一覽圖像顯示處理而顯示的縮略圖的一個例子的圖。圖9是第4實施方式所涉及的一覽圖像顯示處理的流程圖。圖10是表示通過第4實施方式所涉及的一覽圖像顯示處理而顯示的縮略圖的一個例子的圖。圖11是第5實施方式所涉及的一覽圖像顯示處理的流程圖。圖12是表示通過第5實施方式所涉及的一覽圖像顯示處理而顯示的縮略圖的一個例子的圖。圖13是個人計算機的框圖。圖14是第7實施方式所涉及的圖像記錄處理的流程圖。
圖15是第8實施方式所涉及的圖像記錄處理的流程圖。
圖16是第9實施方式所涉及的圖像記錄處理的流程圖。
圖17是第10實施方式所涉及的圖像記錄處理的流程圖。
圖18是第11實施方式所涉及的圖像記錄處理的流程圖。
圖19是第12實施方式所涉及的圖像記錄處理的流程圖。
符號說明 1 :攝像裝置，2a :第1攝像部，2b :第2攝像部，10 :LCD， 62 :主CPU， 38 :存儲卡
具體實施例方式〈第1實施方式> 圖1表示復眼攝像裝置1的電構成。第1及第2攝像部2a、2b的透鏡光軸L1、L2 按平行的方式或具有給定角度的方式排列設置。第1攝像部2a由沿著透鏡光軸Ll排列的第1變焦透鏡11a、第1光圈12a、第1 聚焦透鏡13a及第1圖像傳感器14a構成。第1光圈12a與光圈控制部16a連接，還有，第 1圖像傳感器14a與定時信號發(fā)生器(TG) 18a連接。第1光圈12a、第1聚焦透鏡13a的動作由測光測距CPU19a控制。TG18a的動作由主CPU62控制。攝像裝置1中設有用于在用戶使用該攝像裝置1時進行種種操作的操作部70。該操作部70具備用于使攝像裝置1動作的電源接通用的電源開關、用于選擇自動拍攝、手動拍攝等的模式盤、用于進行各種菜單的設定、選擇或變焦的十字鍵、閃光發(fā)光用開關及用于進行以十字鍵選擇的菜單的執(zhí)行、取消等的信息位置指定鍵。通過對操作部70的適當操作就能進行電源的接通/切斷、各種模式(拍攝模式、重放模式等)的切換、變焦等。
還有，攝像裝置1中具備主CPU62、EEPR0M146、YC/RGB變換部147及顯示用的驅動器148。主CPU62進行該攝像裝置1整體的控制。EEPR0M146中存放該攝像裝置1固有的固化數(shù)據(jù)、程序等。 YC/RGB變換部147把由YC處理部35a 35b生成的彩色視頻信號YC變換為3色的RGB信號，將其經由顯示用的驅動器148向圖像顯示LCD1輸出。按照來自輸入操作部9的變焦操作，第1變焦透鏡lla沿著透鏡光軸Ll向NEAR 側(伸出側)或INF側(縮入側)移動，改變變焦倍率。該移動由未圖示的馬達驅動。光圈12a在AE (Auto E鄧osure)動作時改變開口值(光圈值)而限制光通量，進行曝光調整。聚焦透鏡13a在AF(Auto Focus)動作時沿著透鏡光軸Ll向NEAR側或INF側移動而改變聚焦位置，進行焦點調整。該移動由未圖示的馬達驅動。在檢測到靜止畫用釋放開關的半按狀態(tài)時，主CPU62分別從距離用攝像元件 51a 51b獲得測距數(shù)據(jù)。主CPU62基于所獲得的測距數(shù)據(jù)，進行焦點、光圈等的調整。
第1圖像傳感器14a接受由第1變焦透鏡11a、第1光圈12a及第1聚焦透鏡13a 成像所得的被復制體光，按照受光量而積蓄光電荷。第1圖像傳感器14a的光電荷積蓄《轉送動作由TG18a控制，由從TG18a輸入的定時信號(時鐘脈沖)決定電子快門速度(光電荷存儲時間)。第1圖像傳感器14a在拍攝模式時按每個給定周期取得1畫面的量的圖像信號。第2攝像部2b是與第1攝像部2a相同的構成，由第2變焦透鏡11b、第2光圈12b、第2聚焦透鏡13b及與定時信號發(fā)生器(TG) 14b連接的第2圖像傳感器14b構成。它們的動作由主CPU62控制。第1攝像部2a和第2攝像部2b基本上是聯(lián)動而進行動作，不過，也可以使其各自單獨地動作。另外，作為第1及第2圖像傳感器14a 14b，可以采用CCD型、 CMOS型的圖像傳感器。從第l及第2圖像傳感器14a* 14b輸出的攝像信號分別輸入到A/D變換器 30a.30B中。A/D變換器30a.30b把所輸入的圖像數(shù)據(jù)從模擬變換為數(shù)字。通過A/D變換器30a 30b，把第1圖像傳感器14a的攝像信號作為第1圖像數(shù)據(jù)(右眼用圖像數(shù)據(jù)) 而輸出，把第2圖像傳感器14b的攝像信號作為第2圖像數(shù)據(jù)(左眼用圖像數(shù)據(jù))而輸出。
圖像信號處理電路31a 31b分別對從A/D變換器30a 31b輸入的第1及第2圖像數(shù)據(jù)實施灰度等級變換、白平衡補正、Y補正處理等各種圖像處理。緩沖存儲器32a'32b 臨時存放由圖像信號處理電路31a 31b實施了各種圖像處理的第1及第2圖像數(shù)據(jù)。
測光測距CPU19a 19b分別根據(jù)緩沖存儲器32a 32b中存放的第1及第2圖像數(shù)據(jù)一一算出AF評價值及AE評價值。AF評價值是針對各圖像數(shù)據(jù)的全區(qū)域或給定區(qū)域 (例如中央部)把亮度值的高頻成分加以累計來算出，表示圖像的清晰度。亮度值的高頻成分是針對給定區(qū)域內把互相鄰接的像素間的亮度差(對比度)相加所得的東西。還有，AE 評價值是針對各圖像數(shù)據(jù)的全區(qū)域或給定區(qū)域(例如中央部)把亮度值加以累計來算出，表示圖像的亮度。AF評價值及AE評價值分別在后述的拍攝準備處理時執(zhí)行的AF動作及 AE動作中使用。緩沖存儲器32a 32b中存儲的圖像數(shù)據(jù)分別由YC處理部35a 35b變換為亮度信號(Y信號)及色差信號(Cr、 Cb信號)，并且接受亮度校正等給定的處理。處理后的YC 信號分別存放在工作存儲器128a 128b中。
15
工作存儲器128a 128b中存儲的第1及第2圖像數(shù)據(jù)的YC信號分別由控制器34 讀出到YC/RGB變換部147中。YC/RGB變換部147把第1及第2圖像數(shù)據(jù)的YC信號變換為給定方式的視頻信號(例如NTSC方式的彩色復合視頻信號)之后，將其合成為用于進行圖像顯示LCDIO上的立體顯示的立體圖像數(shù)據(jù)。在拍攝模式時LCDIO用作電子取景器的情況下，由YC/RGB變換部147合成的立體圖像數(shù)據(jù)通過LCD驅動器148作為整畫顯示在LCDIO 上。壓縮解壓縮處理電路36a 36b分別對工作存儲器128a 128b中存儲的第1及第 2圖像數(shù)據(jù)，若是靜止畫則按照JPEG，若是動畫則按照MPEG2、EG4、H. 264方式等給定的壓縮形式實施壓縮處理。介質控制器37把由壓縮解壓縮處理電路36a 36進行壓縮處理后的各圖像數(shù)據(jù)記錄在經由I/F39而連接的存儲卡38及其他記錄介質中。
在把這樣記錄在存儲卡38中的第1及第2圖像數(shù)據(jù)重放顯示在LCDIO上的場合，存儲卡38的各圖像數(shù)據(jù)由介質控制器37讀出，由壓縮解壓縮處理電路36a 36進行解壓縮處理，由YC/R變換部147變換為立體圖像數(shù)據(jù)之后，通過LCD驅動器148作為重放圖像而顯示在CLCDIO上。 LCDIO是未采用寫實手法的通常的監(jiān)視器，在圖像拍攝時用作電子取景器，在圖像重放時進行通過拍攝而獲得的圖像數(shù)據(jù)的顯示。主CPU62統(tǒng)一控制復眼攝像裝置1整體的動作。主CPU62除了與釋放開關5a *5b、操作部70連接以外，還與作為非易失性存儲器的EEPR0M 146連接。EEPROM 146中存放著各種控制用的程序、設定信息等。主CPU62基于該程序、設定信息而執(zhí)行各種處理。
還有，主CPU62與光學系統(tǒng)控制指示部127連接，按照對光學系統(tǒng)控制指示部127 的變焦操作而變更第1攝像部2a、第2攝像部2b的拍攝倍率。釋放開關5a為2級按壓的開關構造。在拍攝模式中，若很輕地按壓(半按)釋放開關5a，則會進行AF動作及AE動作，從而進行拍攝準備處理。在該狀態(tài)下若進一步很重地按壓(全按)釋放開關5a，則會進行拍攝處理，把l畫面的量的第l及第2圖像數(shù)據(jù)從幀存儲器32轉送、記錄于存儲卡38中。 AF動作是一邊由主CPU62控制第1及第2聚焦透鏡13a 13b而使其分別在給定方向移動，一邊求出根據(jù)依次獲得的第l及第2圖像數(shù)據(jù)分別算出的AF評價值的最大值，從而進行的。AE動作是在AF動作完成之后，基于所算出的AE評價值來設定第1及第2光圈12a 12b的開口值和第1及第2圖像傳感器14a 14b的電子快門速度，從而進行的。
還有，攝像裝置1中具備用于進行輔助操作的操作LCD顯示103。
還有，攝像裝置1是電源電池68可拆裝的構成。電源電池68由可充電的二次電池，例如鎳鉻電池、鎳氫電池、鋰離子電池構成。電源電池68也可以由用完即棄型的一次電池，例如鋰電池、堿電池構成。電源電池68裝在未圖示的電池收納室中，從而與攝像裝置1 的各電路電連接。第1攝像部2a、第2攝像部2b中分別具備檢測第1攝像部2a和第2攝像部2b所構成的間隔/輻輳角的間隔/輻輳角檢測電路4a 4b、存儲間隔/輻輳角檢測電路4a 4b 所檢測到的輻輳角的透鏡間隔/輻輳角存儲電路6、進行基線長的伸縮和由驅動馬達等旋轉光軸而改變輻輳的間隔/輻輳角驅動電路3a 3b。還有，攝像裝置1中具備基于間隔/輻輳角檢測電路4a *4b所檢測到的間隔/輻輳角來控制間隔/輻輳角驅動電路3a 3b的輻輳角的變化的間隔/輻輳角控制電路5。
充電發(fā)光控制部138a 138b分別為了使閃光燈44a 44b發(fā)光而接受來自電源電池68的電力供給，對未圖示的閃光發(fā)光用的電容器進行充電，控制閃光燈44a'44b的發(fā)光。充電發(fā)光控制部138a 138b進行控制，使得在從主CPU62、測光測距 CPU19a 19b取入釋放開關5a *5b的半按全按操作信號等各種信號、表示發(fā)光量、發(fā)光定時的信號的情況下，相應地進行對閃光燈44a 44b的電流供給控制，在希望的定時獲得希望的發(fā)光量。縱拍攝/橫拍攝切換按鈕40是用于指示以縱拍攝和橫拍攝中的哪種進行拍攝的按鈕?？v拍攝/橫拍攝檢測電路166根據(jù)該按鈕的狀態(tài)來檢測以縱拍攝和橫拍攝中的哪種進行拍攝。在2D/3D模式切換標志168上，按照2D拍攝模式/3D拍攝模式，設定表示是2D模式還是3D模式的標志。距離用發(fā)光元件52a、52b各自由用于向第1攝像部2a及第2攝像部2b所捕捉到的同一被復制體照射聚光點的發(fā)光二極管(LED)構成。距離用攝像元件51a、51b分別是取得由距離用發(fā)光元件52a、52b照射聚光點所得的被復制體像的測距專用的攝像元件。距離用驅動/控制電路54進行使距離用發(fā)光元件52a、52b的發(fā)光定時和距離用攝像元件53a、53b同步的控制。通過距離用攝像元件53a、53b的攝像動作而獲得的模擬圖像信號分別由測距用 A/D變換部55a、55b變換為數(shù)字圖像數(shù)據(jù)，輸出到距離信息處理電路57中。
距離信息處理電路57根據(jù)所輸入的數(shù)字圖像數(shù)據(jù)而算出到第1攝像部2a及第2 攝像部2b所捕捉到的被復制體的距離。這是基于所謂三角測距的原理。距離信息處理電路57所算出的距離信息存儲在距離信息存儲電路58中。臉檢測部150從緩沖存儲器32a或緩沖存儲器32b中存放的圖像數(shù)據(jù)、緩沖存儲器42中存放的圖像數(shù)據(jù)中檢測作為包含成為被復制體的人物的臉部分的區(qū)域的臉區(qū)域。
臉區(qū)域的檢測方法沒有特別的限定，可以采用各種方法，例如可以適用本申請人在特開平9-101579號公報中披露的技術。該技術是判斷拍攝到的圖像的各像素的色相是否包含在膚色的范圍中，將其按膚色區(qū)域和非膚色區(qū)域進行分割，并且檢測圖像中的邊沿，把圖像中的各部位按邊沿部分或非邊沿部分進行分類。并且，提取由位于膚色區(qū)域內、按非邊沿部分分類的像素構成的并且由判斷為邊沿部分的像素圍著的區(qū)域作為臉候選區(qū)域，判斷提取到的臉候選區(qū)域是不是與人物的臉相當?shù)膮^(qū)域，基于該判斷結果將其作為臉區(qū)域來檢測。還有，除此之外，也可以采用特開2003-209683號公報、特開2002-199221號公報中記載的方法來檢測臉區(qū)域。另外，多視點圖像不是必須以上述復眼攝像裝置l來取得，也可以通過使用單眼攝像裝置的擺動立體法下的連續(xù)拍攝來取得。以下，參照圖2的流程圖，說明由主CPU62執(zhí)行的一覽圖像顯示處理的流程。規(guī)定該處理的程序存放在EEPR0M146中。按照來自操作部70的「縮略像一覽顯示」的指示，對存儲卡38中存放的所有多視點圖像統(tǒng)一進行。
在S1中，讀入存儲卡38的目錄。在S2中，判斷圖像文件在該目錄中是否存在。在圖像文件存在的場合進入S3。在圖像文件不存在的場合結束處理。在S3中，讀出圖像文件的標題部分。然后，判斷是否檢測到圖像文件是存放了多視點圖像的意思的識別信息。在存放了多視點圖像的場合進入S5，在存放了通常的圖像的場合進入S8。在S5中，根據(jù)圖像文件中存放的多視點圖像，制作縮略像。其具體手法與專利文獻2的段落0040相同，可以僅對左眼用圖像，僅對右眼用圖像，或者對兩者進行間拔制作。在S6中，對所制作的縮略像實施3維CG處理，從而制作3維縮略像。例如圖3所示，進行在與圖像中存在的主要被復制體及其他各種物體(圖3表示了茶杯，不過，也可以是人物等)對應的3維形狀模型的多邊形PG上粘貼縮略像th的對應區(qū)域的織構映射，獲得3維CG縮略像X。其具體手法與專利文獻l相同?；蛘?，也可以針對原來的多視點圖像實施3維CG處理，對其進行間拔，從而制作3維CG縮略像，不過，從處理的負荷方面考慮，優(yōu)選的是先制作縮略圖。另外，也可以把其他3D計算機圖形手法適用于縮略像來制作3維CG縮略圖圖像。在S7中，在緩沖存儲器41中確保的一覽圖像緩沖器中存放制作成的3維CG縮略像。在S8中，根據(jù)圖像文件中存放的單視點的通常圖像，制作縮略像。其具體手法與通常的縮略像相同，對單視點圖像進行間拔來制作即可。把該縮略圖稱為通常縮略像。在S9中，在緩沖存儲器41中確保的一覽圖像緩沖器中存放制作成的通?？s略圖圖像。在SIO中，判斷是否針對存儲卡38的所有圖像制作了 3維CG縮略像或通常
縮略像。在制作了的場合成進入S11，在制作未結束的場合回到S3，繼續(xù)制作。在Sll中，在LCD10上一覽顯示緩沖存儲器41的3維CG縮略像及通常縮略
像。其排序設為作為縮略像的制作基礎的圖像文件的名字順序、記錄日期時間順
序即可。即，3維CG縮略像及通常縮略像不加區(qū)別，在LCD10的一畫面中3維CG
縮略像及通?？s略像混在一起排列。另夕卜，S3 S9的處理也可以在每次新記錄圖像時進行。圖4表示在LCD10上一覽顯示的3維CG縮略像X及通?？s略像Y的一個
例子。對3維CG縮略像X實施3維CG圖形處理而賦予了立體效果，它與通?？s略圖
Y的差異一看便知，即使不采用實現(xiàn)寫實手法的特殊裝置，觀看者也能容易地認識是多視點
圖像的縮小圖像?！吹?實施方式〉圖5是表示由主CPU62執(zhí)行的一覽圖像顯示處理的另一個例子。在這里，把依臉
復制的多視點圖像的縮略像調換為特別的樣品。 S21 S24與Sl S4相同。
在S25中，對臉檢測部150發(fā)出指令，使得從多視點圖像的一方或雙方中提取臉。臉檢測部150按照來自主CPU62的指令，從圖像文件中存放的左眼用圖像或右眼用圖像中，嘗試臉區(qū)域的檢測。在S26中，判斷臉檢測部150是否檢測完臉區(qū)域。在檢測完臉區(qū)域的場合進入S27，在未檢測完臉區(qū)域的場合進入S29。在S27中，從EEPR0M146中取出象征依臉復制的多視點圖像的樣品的3維縮略圖圖像。在S28中，在一覽圖像緩沖器中存放所取出的樣品。樣品的3維縮略像不是必須與實際的被復制體的臉相同，只要是樣品的人物的臉即可，并且對其臉、身體等預先賦予了 3D圖形所形成的立體效果。在S29中，與上述S5相同。S30是在一覽圖像緩沖器中存放S29中制作成的縮略像。該縮略像稱為立體圖像縮小圖像，與通常縮略像加以區(qū)別。
S31 S34與上述S8 Sll相同。圖6表示執(zhí)行了 S34，結果在LCD10上一覽顯示的樣品的3維縮略像S、通常縮略像Y的一個例子。樣品縮略像S被實施了3維CG圖形處理，所以與通?？s略圖Y、立體圖像縮小圖像Z的差異一看便知，很容易識別把臉作為被復制體的立體圖像。
〈第3實施方式〉圖7是表示由主CPU62執(zhí)行的一覽圖像顯示處理的另一個例子。在這里，把閃光
拍攝所得的多視點圖像的縮略像調換為特別的樣品。 S41 S44與Sl S4相同。在S45中，從圖像文件取得閃光發(fā)光信息，識別圖像記錄時的閃光燈44a 44b的接通或切斷的狀況。閃光發(fā)光信息例如是Exif文件的Flash標記中存放的信息。
在S46中，基于閃光發(fā)光信息，判斷拍攝時的閃光燈44a 44b的接通或切斷。在拍攝時閃光燈44a 44b接通的場合進入S47，切斷的場合進入S49。在S47中，從EEPR0M146中取出象征多視點圖像的樣品的3維縮略像。與第2 實施方式相同，通過3維CG處理對該樣品賦予立體效果。另外，該樣品的圖案不是必須為特定人物的臉。在S48中，在一覽圖像緩沖器中存放所取出的樣品的3維縮略像。樣品的3
維縮略像不是必須與實際的被復制體的臉相同，只是對于已經復制了人物的臉這一點
進行3D圖形顯示的縮略像。 S49 S54與上述S29 S34相同。圖8表示執(zhí)行了 S54，結果在LCD10上一覽顯示的樣品的3維縮略像W、通常縮略像Y的一個例子。樣品縮略像W被實施了3維CG圖形處理，所以與通?？s略圖Y、立體圖像縮小圖像Z的差異一看便知，很容易識別把臉作為被復制體的立體圖像。而且，不用直到難以作為多視點圖像而有效利用的暗的圖像為止一律進行樣品顯
示，處理也有效率。〈第4實施方式〉
圖9是表示由主CPU62執(zhí)行的一覽圖像顯示處理的另一個例子。在這里，把依臉復制的多視點圖像的縮略像調換為僅針對該多視點圖像的臉區(qū)域實施3維CG處理所得的縮略像。 S61 S66與S21 S26相同。此處，在S66中，在判斷為有臉的場合進入S67，在判斷為無臉的場合進入S69。在S67中，從依臉復制的多視點圖像中提取臉區(qū)域，對該臉區(qū)域實施3維CG處理。這是例如從依臉復制的多視點圖像中提取臉區(qū)域，并且以給定的間拔率間拔該多視點圖像。在間拔后的縮小圖像上設定與從原多視點圖像中提取到的臉區(qū)域相當?shù)膮^(qū)域。然后，在該設定區(qū)域中的臉上制作特有的多邊形，進行在該多邊形上粘貼間拔后臉區(qū)域的織構映射，獲得僅對該臉區(qū)域實施了 3維CG處理的縮略像。該方式是在間拔圖像的制作后進行3維CG處理。或者，根據(jù)該檢測到的臉自身，進行在該人物的臉上制作特有的多邊形，在該多邊形上粘貼臉區(qū)域的織構映射，制作在多視點圖像上僅對臉區(qū)域實施3維CG處理所得的臨時的CG圖像。然后，以給定的間拔率間拔該臨時的CG圖像，獲得僅對臉區(qū)域實施3維CG處理所得的縮略像。該方式是在3維CG處理后制作間拔圖像。上述織構映射方式需要從多邊形的制作開始，若制作精密的多邊形，則處理負荷
很大。作為多邊形的簡易制作方法，可以列舉以下方法。首先，從檢測到的臉區(qū)域檢測臉的輪廓、眼、鼻、口等臉的構成部分，按照檢測到的臉的構成部分的位置來決定多邊形分割線。
例如，把從兩眼的中央部分(眉間)出發(fā)而沿著鼻梁達到鼻尖邊沿的線、圍著兩眼的線、圍
著口的線、臉的輪廓作為多邊形分割線。在該多邊形上進行織構映射的話，就能獲得口和鼻
子的部分隆起，眼周圍洼陷的簡易的3維CG縮略像。在S68中，在一覽圖像緩沖器中存放制作成的3維CG縮略像。 S69 S74與上述S29 S34相同。圖10表示執(zhí)行了 S74，結果在LCD10上一覽顯示的檢測到臉的多視點圖像所對應的3維縮略像S、通常縮略像Y、未檢測到臉的的多視點圖像所對應的縮略像 Z的一個例子。樣品縮略像U僅針對臉區(qū)域實施了3維CG圖形處理，所以與通?？s略圖Y、單純的視點圖像的縮小圖像Z的差異一看便知，很容易識別把臉作為被復制體的立體圖像。而且，采用原圖像對臉區(qū)域實施了 3維CG圖形處理，也能立體地明白原圖像的臉的概要。
〈第5實施方式〉圖11是表示由主CPU62執(zhí)行的一覽圖像顯示處理的另一個例子。在這里，僅對拍攝近距離的被復制體所得的多視點圖像的縮略像進行3維CG處理。
S81 S84與S41 S44相同。在S85中，從圖像文件中取得距離信息，識別從圖像記錄時的攝像裝置1到被復制體的距離。距離信息例如是Exif文件的"SubjectDistance"標記中存放的信息，由距離信息存儲電路58存儲。在S85中，基于距離信息D，判斷被復制體是否位于比給定的距離遠的位置(例如 D > 10m)。被復制體為遠距離的場合進入S89，不是遠距離的場合即近距離的場合進入S87。
在S87中，與S6相同，制作3維CG縮略像。
在S88中，在緩沖存儲器41中確保的一覽圖像緩沖器中存放制作成的3維CG縮略像。 S89 S94與上述S69 S74相同。圖12表示執(zhí)行了 S94，結果在LCD10上一覽顯示的3維縮略像T、通?？s略圖圖像Y、未實施3維CG處理的被復制體遠的縮略像V的一個例子。
樣品縮略像T被實施了3維CG處理，所以與通?？s略圖Y、被復制體遠的圖像的縮略像V的差異一看便知。而且，僅針對在拍攝時被復制體處于近距離的多視點圖像實施3維CG處理，不用直到實施該處理也無意義的被復制體遠的圖像為止一律進行3維CG處理，處理有效率。
〈第6實施方式〉圖13是個人計算機100的框圖。個人計算機100主要包括控制各構成要素的動作的中央處理器(CPU) 102 ;對裝置的控制程序進行存放，成為程序執(zhí)行時的作業(yè)區(qū)域的主存儲器106 ;其中存放包含個人計算機100的操作系統(tǒng)(OS)、按對與個人計算機100連接的外部設備的設備驅動器適合的方式對視點圖像進行編輯的圖像編輯處理的程序的各種應用軟件、用戶的圖像等的硬盤裝置108 ;CD-R0M裝置110 ;臨時存儲顯示用數(shù)據(jù)的顯示存儲器116 ;根據(jù)來自該顯示存儲器116的圖像數(shù)據(jù)、文字數(shù)據(jù)等來顯示圖像、文字等的CRT監(jiān) 視器、液晶監(jiān)視器等監(jiān)視裝置118 ;鍵盤120 ;作為位置輸入設備的鼠標122 ;檢測鼠標122 的狀態(tài)而把監(jiān)視裝置118上的鼠標指針的位置、鼠標122的狀態(tài)等的信號向CPU102輸出的鼠標控制器124 ;與互聯(lián)網(wǎng)等網(wǎng)絡30連接的通信接口 132 ;具有其中可拆裝存儲卡38的卡插入口的卡接口 112 ;連接上述各構成要素的總線104 ;與攝像裝置1進行USB連接的攝像裝置連接I/F134。存放在硬盤裝置108中的圖像編輯處理的應用軟件是通過在個人計算機100的 CD-ROM裝置110中設定其中記錄了該應用軟件的CD-R0M，從而安裝在個人計算機100中。
監(jiān)視裝置118，與LCD10相同，顯示圖像。在硬盤裝置108中存放通過攝像裝置連接I/F134從復眼攝像裝置1接受的多視點圖像乃至通常圖像，或者通過卡1/F112從存儲卡3取入的多視點圖像乃至通常圖像。
CPU102對于硬盤裝置108中存儲的多視點圖像及通常圖像進行上述第1 5實施方式的一覽圖像顯示處理。該處理可以是每次在硬盤裝置108中存放各圖像時，按每個圖像單獨執(zhí)行，也可以是按照來自鍵盤120、鼠標122的指示，對硬盤裝置108中存放的所有圖像統(tǒng)一進行。 S卩，一覽圖像顯示處理不是必須由攝像裝置1進行，在其他裝置中也可以實現(xiàn)。
〈第7實施方式〉以下，參照圖14的流程圖，說明由攝像裝置1執(zhí)行的圖像記錄處理的流動。規(guī)定該處理的程序存放在EEPR0M146中，主CPU62執(zhí)行該程序。按照來自操作部70的「縮略圖圖像一覽顯示」的指示，對存儲卡38中存放的所有多視點圖像統(tǒng)一進行。
在S1中，判斷靜止畫用釋放開關5a是否被全按。在靜止畫用釋放開關5a被全按的場合進入S2。在S2中，開始記錄用靜止畫數(shù)據(jù)的取入。把取入的圖像數(shù)據(jù)(本圖像) 一次存放在緩沖存儲器42中確保的本圖像緩沖器中。
21
在S3中，判斷2D/3D模式切換標志168的標志。在3D模式的標志設立的場合進入S3。在2D模式的標志設立的場合進入S7。在S4中，根據(jù)本圖像緩沖器中存放的多視點圖像，制作縮略像。其具體手法與專利文獻2的段落0040相同，可以僅對左眼用圖像，僅對右眼用圖像，或者對兩者進行間拔制作。在S5中，對所制作的縮略像實施3維CG處理，從而制作3維縮略像。例如圖3所示，進行在與圖像中存在的主要被復制體及其他各種物體(圖3表示了茶杯，不過，也可以是人物等)對應的3維形狀模型的多邊形PG上粘貼縮略像th的對應區(qū)域的織構映射，獲得3維CG縮略像X。其具體手法與專利文獻l相同。或者，也可以針對原來的多視點圖像實施3維CG處理，對其進行間拔，從而制作3維CG縮略像，不過，從處理的負荷方面考慮，優(yōu)選的是先制作縮略圖。另外，也可以把其他3D計算機圖形手法適用于縮略像來制作3維CG縮略圖圖像。在S6中，在緩沖存儲器41中確保的縮略圖緩沖器中存放制作成的3維CG縮略圖圖像。在S7中，根據(jù)圖像文件中存放的單視點的通常圖像，制作縮略像。其具體手法與通常的縮略像相同，對單視點圖像進行間拔來制作即可。把該縮略圖稱為通常縮略像。在S8中，在緩沖存儲器41中確保的縮略圖緩沖器中存放制作成的通?？s略像。在S9中，把緩沖存儲器42的縮略圖緩沖器中存放的縮略像和本圖像緩沖中存放的本圖像關聯(lián)起來記錄在存儲卡38中。兩圖像的關聯(lián)，例如可以通過把兩者存放在同一 Exif (Exchangeable image fileformat)文件中，記錄在存儲卡38中來進行。
另外，S3 S9的處理也可以在每次新取得記錄用靜止畫時進行，也可以在拍攝、積蓄一定數(shù)量的靜止畫之后進行?？傊?，只要把本圖像和縮小圖像關聯(lián)起來記錄即可，3維 CG縮略像的作成的定時無論什么時都可以。圖4表示從通過上述處理而記錄在存儲卡38中的圖像文件中取入而在LCD10或其他顯示裝置上一覽顯示的3維CG縮略像X和通?？s略像Y的一個例子。3維 CG縮略像X是在上述步驟S4 6中制作成的，被實施了 3維CG圖形處理，被賦予了立體效果，所以與上述步驟S7 8中制作成的通?？s略圖Y的差異一看便知，即使不采用實現(xiàn)寫實手法的特殊顯示裝置，觀看者也能容易地認識是多視點圖像的縮小圖像。
〈第8實施方式> 圖15表示圖像記錄處理的另一例。在這里，把依臉復制的多視點圖像的縮略像調換為僅對于該多視點圖像的臉區(qū)域實施了 3維CG處理的縮略像。
Sll S13與Sl S3相同。在S14中，對臉檢測部150發(fā)出指令，使得從多視點圖像的一方或雙方中提取臉。臉檢測部150按照來自主CPU62的指令，從圖像文件中存放的左眼用圖像或右眼用圖像中，嘗試臉區(qū)域的檢測。在S15中，判斷臉檢測部150是否檢測完臉區(qū)域。在檢測完臉區(qū)域的場合進入S15，在未檢測完臉區(qū)域的場合進入S18。在S16中，從依臉復制的多視點圖像中提取臉區(qū)域，對該臉區(qū)域實施3維CG處理。例如從依臉復制的多視點圖像中提取臉區(qū)域，并且以給定的間拔率間拔該多視點圖像。在間拔后的縮小圖像上設定與從原多視點圖像中提取到的臉區(qū)域相當?shù)膮^(qū)域。在從兩視點圖像嘗試臉檢測的場合，在檢測精度高的一方視點圖像上設定臉區(qū)域則更好。然后，在該設定區(qū)域中的臉上制作特有的多邊形，進行在該多邊形上粘貼間拔后臉區(qū)域的織構映射，獲得僅對該臉區(qū)域實施了 3維CG處理的縮略像。該方式是在間拔圖像的制作后進行3維 CG處理。或者，根據(jù)該檢測到的臉自身，進行在該人物的臉上制作特有的多邊形，在該多邊形上粘貼臉區(qū)域的織構映射，制作在多視點圖像上僅對臉區(qū)域實施3維CG處理所得的臨時的CG圖像。然后，以給定的間拔率間拔該臨時的CG圖像，獲得僅對臉區(qū)域實施3維CG處理所得的縮略像。該方式是在3維CG處理后制作間拔圖像。上述織構映射方式需要從多邊形的制作開始，若制作精密的多邊形，則處理負荷
很大。作為多邊形的簡易制作方法，可以列舉以下方法。首先，從檢測到的臉區(qū)域檢測臉的輪廓、眼、鼻、口等臉的構成部分，按照檢測到的臉的構成部分的位置來決定多邊形分割線。
例如，把從兩眼的中央部分(眉間)出發(fā)而沿著鼻梁達到鼻尖端的線、圍著兩眼的線、圍著口的線、臉的輪廓作為多邊形分割線。在該多邊形上進行織構映射，就能獲得口和鼻子的部分隆起、眼周圍洼陷的簡易的3維CG縮略像。在S17中，在縮略圖緩沖器中存放制作成的3維CG縮略像。在S18中，根據(jù)本圖像緩沖器中存放的多視點圖像，制作縮略像。其具體手法
與專利文獻2的段落0040相同，可以僅對左眼用圖像，僅對右眼用圖像，或者對兩者進行間
拔制作。 S20 S22與上述S7 S9相同。圖6表示LCDIO上一覽顯示的與檢測到臉的多視點圖像對應的3維縮略像S、通?？s略像Y、未檢測到臉的的多視點圖像所對應的縮略像Z的一個例子。
樣品縮略像U是在步驟S4 S6中制作成的，僅對于臉區(qū)域實施了 3維CG圖形處理，所以與步驟S20 S21中制作成的通?？s略圖Y、步驟S18 S19中制作成的單純的視點圖像的縮小圖像Z的差異一看便知，即使不采用實現(xiàn)寫實手法的特殊裝置，以臉作為被復制體的立體圖像的識別也很容易。而且，采用原圖像對臉區(qū)域實施了3維CG圖形處理，所以原圖像的臉的概要也能立體地顯現(xiàn)。
〈第9實施方式〉圖16表示由主CPU62執(zhí)行的圖像記錄處理的另一例。在這里，把閃光拍攝所得的多視點圖像的縮略像調換為特別的樣品。
S31 S33與Sl S3相同。在S34中，從測光測距CPU19a 19b中取得閃光發(fā)光信息，識別圖像記錄時的閃光燈44a 44b的接通或切斷的狀況。另外，閃光發(fā)光信息例如存放在Exif文件的「Flash」標記中。在S35中，基于閃光發(fā)光信息，判斷拍攝時的閃光燈44a 44b的接通或切斷。在拍攝時閃光燈44a 44b接通的場合進入S36，切斷的場合進入S38。
在S36中，從EEPR0M146中取出象征多視點圖像的樣品的3維縮略像。與第 2實施方式相同，通過3維CG處理對該樣品賦予立體效果，將其預先存放在EEPR0M146中。另外，該樣品不是必須為實際的被復制體。在S37中，把取出的樣品的3維縮略像存放在縮略圖緩沖器中。樣品的3維縮略像不是必須與實際的被復制體相同，只是用于以3D圖形表示多視點圖像的縮略像。 S38 S42與上述S18 S22相同。圖8表示LCD10上一覽表顯示的樣品的3維縮略像W、通?？s略像Y、立體圖像的縮小圖像Z的一個例子。在步驟S37中從EEPR0M146中取出的樣品縮略像W被實施3維CG圖形處理，所以與通常縮略圖Y、單純的立體圖像縮小圖像Z的差異一看便知，即使不采用實現(xiàn)寫實手法的特殊裝置，以臉作為被復制體的立體圖像的識別也很容易。而且，直到作為多視點圖像的有效利用困難的、閃光非發(fā)光條件下暗的多視點圖像為止一律不用把樣品對應起來記錄，處理有效率。
〈第10實施方式> 圖17表示圖像記錄處理的另一個例子。在這里，把依臉拍攝的多視點圖像的縮略
像調換為特別的樣品。 S51 S53與Sl S3相同。 S54 S55與S14 S15相同。此處，在S55中判斷為有臉的場合進入S56，判斷為沒有臉的場合進入S58。在S56中，從EEPR0M146中取出象征依臉拍攝的多視點圖像的樣品的3維縮略圖圖像。在S57中，把取出的樣品存放在縮略圖緩沖器中。樣品的3維縮略像不是必
須與實際的被復制體相同，只要是樣品的人物的臉即可，并且對其臉、身體等預先賦予了 3D
圖形所形成的立體效果。 S58 S62與上述S18 S22相同。圖10表示LCD10上一覽顯示的樣品的3維縮略像U、通?？s略像Y、立體圖像的縮小圖像Z的一個例子。樣品縮略像U被實施了3維CG圖形處理，所以與通?？s略圖Y、立體圖像縮小圖像Z的差異一看便知，即使不采用實現(xiàn)寫實手法的特殊裝置，以臉作為被復制體的立體圖像的識別也很容易。
〈第11實施方式〉圖18表示圖像記錄處理的另一個例子。在這里，只對拍攝近距離的被復制體所得的多視點圖像的縮略像進行3維CG處理。
S71 S73與Sl S3相同。在S74中，從距離信息存儲電路58中取得距離信息，識別拍攝時從攝像裝置1到被復制體的距離。另外，距離信息例如存放在Exif文件的「SubjectDistance」標記中。距離信息存儲電路58的距離信息有從距離用像素51a獲得的東西或從距離用像素51b獲得的東西這樣2種，采用哪種都可以，例如采用距離短的一方的距離信息。
在S75中，基于距離信息D，判斷被復制體是否處于比給定的距離遠的位置(例如 D > 10m)。在被復制體不是遠距離的場合即近距離的場合進入S76，在被復制體是遠距離的場合進入S78。在S76中，與S5相同，制作3維CG縮略像。在S77中，在緩沖存儲器42中確保的縮略圖緩沖器中存放制作成的3維CG縮略像。 S78 S82與上述S18 S22相同。圖12表示LCD10上一覽顯示的3維縮略像T、通?？s略像Y、未實施3維 CG處理的被復制體遠的縮略像V的一個例子。被復制體處于近距離的樣品縮略像T被實施了 3維CG處理，所以即使不采用實現(xiàn)寫實手法的特殊的裝置，與通?？s略圖Y、被復制體遠的圖像的縮略像V的差異也一看便知。而且，僅針對拍攝時被復制體處于近距離的多視點圖像實施3維CG處理，不用直到實施該處理也無意義的被復制體遠的圖像為止一律進行3維CG處理，處理有效率。
〈第12實施方式> 圖19表示圖像記錄處理的另一個例子。在這里，在拍攝遠距離的被復制體作為多視點圖像的場合，發(fā)出警告，不進行多視點圖像的記錄本身。另一方面，只對近距離拍攝的多視點圖像的縮略像進行3維CG處理，將其與本圖像對應起來記錄。
S91 S95與S71 S75相同。此處，在S95中，在判斷為被復制體處于遠距離的場合進入S96，在判斷為被復制體判斷處于近距離的場合進入S97。在S96中，在LCD10上顯示被復制體處于遠距離而不記錄多視點圖像的意思的警告。并且不進入SIOI的圖像記錄而結束處理。 S97 S98與S76 S77相同。還有，S99 S101與S80 S82相同。在該處理中，僅對拍攝時被復制體處于近距離的多視點圖像實施3維CG處理，將
其與本圖像對應起來記錄，所以不用直到實施該處理也無意義的被復制體遠的圖像為止一
律進行3維CG處理，處理有效率。還有，在該處理中，對拍攝時被復制體處于遠距離的多視點圖像進行警告顯示，不進行本圖像的記錄。即，不用記錄被復制體遠、不產生立體視覺效果的多視點圖像，處理有效率?！雌渌麑嵤┓绞?gt; 上述第7 12實施方式的一部分或全部可以進行組合。例如，只有在檢測到臉且拍攝時的閃光發(fā)光接通的場合，才會把實施3維CG處理所得的縮小圖像與本圖像關聯(lián)起來記錄?；蛘?，只有在檢測到臉且拍攝時的閃光發(fā)光接通的場合，才會把實施3維CG處理所得的樣品縮小圖像與本圖像關聯(lián)起來記錄。或者，只有在被復制體距離處于近距離且拍攝時的閃光發(fā)光接通的場合，才會把實施3維CG處理所得的縮小圖像與本圖像關聯(lián)起來記錄。或者，只有在被復制體距離處于近距離且拍攝時的閃光發(fā)光接通的場合，才會把實施3維CG處理所得的樣品縮小圖像與本圖像關聯(lián)起來記錄。另外，在檢測到臉的場合，可以假定被復制體距離為近距離，所以在檢測到臉的場合，可以省略被復制體距離是近距離還是遠距離的判斷。
權利要求
一種圖像記錄裝置，具備拍攝部，可拍攝包含從2個以上的視點拍攝到的多視點圖像及從單一的視點拍攝到的單視點圖像的圖像；本圖像存儲部，存儲作為由上述拍攝部拍攝到的多視點圖像或單視點圖像的本圖像；圖像識別部，識別上述本圖像存儲部中存儲的本圖像是多視點圖像還是單視點圖像；圖像處理部，制作縮小上述本圖像所得的第1縮小圖像之后，對根據(jù)由上述圖像識別部識別為多視點圖像的本圖像而制作成的第1縮小圖像，實施3維計算機圖形處理，從而制作第2縮小圖像；縮小圖像存儲部，按照上述圖像識別部所涉及的上述多視點圖像或上述單視點圖像的識別，存儲由上述圖像處理部制作成的第1縮小圖像或第2縮小圖像；以及記錄部，把上述縮小圖像存儲部中存儲的第1縮小圖像或第2縮小圖像和上述本圖像存儲部中存儲的上述本圖像對應起來記錄。
2. 根據(jù)權利要求l所述的圖像記錄裝置，其中，還具備從由上述圖像識別部識別為多視點圖像的本圖像中檢測被復制體臉區(qū)域的有無的臉檢測部，上述圖像處理部對上述第1縮小圖像設定了與由上述臉檢測部檢測到的被復制體臉區(qū)域對應的區(qū)域之后，對上述設定了的區(qū)域進行3維計算機圖形處理，從而制作上述第2縮小圖像。
3. —種圖像記錄裝置，具備拍攝部，可拍攝包含從2個以上的視點拍攝到的多視點圖像及從單一的視點拍攝到的單視點圖像的圖像；本圖像存儲部，存儲作為由上述拍攝部拍攝到的多視點圖像或單視點圖像的本圖像；圖像識別部，識別上述本圖像存儲部中存儲的本圖像是多視點圖像還是單視點圖像；閃光發(fā)光識別部，對于由上述圖像識別部識別為多視點圖像的圖像，識別拍攝時的閃光發(fā)光的有無；圖像處理部，制作縮小由上述圖像識別部識別為單視點圖像或由上述閃光發(fā)光識別部識別為拍攝時沒有閃光發(fā)光的本圖像所得的第1縮小圖像；樣品縮小圖像取得部，取得實施了 3維計算機圖形的給定的樣品縮小圖像作為與由上述圖像識別部識別為多視點圖像且由上述閃光發(fā)光識別部識別為有閃光發(fā)光的本圖像對應的第2縮小圖像；縮小圖像存儲部，按照上述圖像識別部所涉及的上述多視點圖像或上述單視點圖像的識別和上述閃光發(fā)光識別部所涉及的上述拍攝時的閃光發(fā)光的有無的識別，存儲由上述圖像處理部制作成的第1縮小圖像或由上述樣品縮小圖像取得部取得的第2縮小圖像；以及記錄部，把縮小上述圖像存儲部中存儲的第l縮小圖像或第2縮小圖像和上述本圖像存儲部中存儲的本圖像對應起來記錄。
4. 一種圖像記錄裝置，具備拍攝部，可拍攝包含從2個以上的視點拍攝到的多視點圖像及從單一的視點拍攝到的單視點圖像的圖像；本圖像存儲部，存儲作為由上述拍攝部拍攝到的多視點圖像或單視點圖像的本圖像；圖像識別部，識別上述本圖像存儲部中存儲的本圖像是多視點圖像還是單視點圖像；臉檢測部，對于由上述圖像識別部識別為多視點圖像的圖像，檢測被復制體臉區(qū)域的有無；圖像處理部，制作縮小由上述圖像識別部識別為單視點圖像或由上述臉檢測部未檢測到被復制體臉區(qū)域的本圖像所得的第1縮小圖像；樣品縮小圖像取得部，取得實施了 3維計算機圖形的給定的樣品縮小圖像作為與由上述圖像識別部識別為多視點圖像且由上述臉檢測部檢測到被復制體臉區(qū)域的本圖像對應的第2縮小圖像；縮小圖像存儲部，按照上述圖像識別部所涉及的上述多視點圖像或上述單視點圖像的識別和上述臉檢測部所涉及的上述被復制體臉區(qū)域的有無，存儲由上述圖像處理部制作成的第1縮小圖像或由上述樣品縮小圖像取得部取得的第2縮小圖像；以及記錄部，把上述縮小圖像存儲部中存儲的第1縮小圖像或第2縮小圖像和上述本圖像存儲部中存儲的本圖像對應起來記錄。
5. —種圖像記錄裝置，具備拍攝部，可拍攝包含從2個以上的視點拍攝到的多視點圖像及從單一的視點拍攝到的單視點圖像的圖像；本圖像存儲部，存儲作為由上述拍攝部拍攝到的多視點圖像或單視點圖像的本圖像；圖像識別部，識別上述本圖像存儲部中存儲的本圖像是多視點圖像還是單視點圖像；距離識別部，識別由上述圖像識別部識別為多視點圖像的圖像中的被復制體處于遠距離還是近距離；圖像處理部，制作成縮小上述本圖像所得的第1縮小圖像之后，對根據(jù)由上述圖像識別部識別為多視點圖像且是由上述距離識別部識別為被復制體處于近距離的本圖像而制作成的第1縮小圖像，實施3維計算機圖形處理，從而制作第2縮小圖像；縮小圖像存儲部，按照上述圖像識別部所涉及的上述多視點圖像或上述單視點圖像的識別和上述距離識別部所涉及的上述被復制體的距離的識別，存儲由上述圖像處理部制作成的第1縮小圖像或第2縮小圖像；以及記錄部，把縮小上述圖像存儲部中存儲的第1縮小圖像或第2縮小圖像和上述本圖像存儲部中存儲的本圖像對應起來記錄。
6. 根據(jù)權利要求5所述的圖像記錄裝置，其中，記錄部對于由上述圖像識別部識別為多視點圖像的本圖像，僅記錄由上述距離識別部識別為被復制體處于近距離的本圖像。
7. 根據(jù)權利要求6所述的圖像記錄裝置，其中，還具備通知部，其通知不記錄由上述圖像識別部識別為多視點圖像且由上述距離識別部識別為被復制體處于遠距離的本圖像的意思的警告。
8. —種圖像記錄方法，包括以下步驟拍攝包含從2個以上的視點拍攝到的多視點圖像及從單一的視點拍攝到的單視點圖像的圖像；存儲作為拍攝到的多視點圖像或單視點圖像的本圖像；識別所存儲的本圖像是多視點圖像還是單視點圖像；制作縮小上述本圖像所得的第1縮小圖像之后，對根據(jù)識別為上述多視點圖像的本圖像而制作成的第1縮小圖像，實施3維計算機圖形處理，從而制作第2縮小圖像；按照上述多視點圖像或上述單視點圖像的識別，存儲所制作成的第1縮小圖像或第2 縮小圖像；以及把上述存儲的第1縮小圖像或第2縮小圖像和上述存儲的本圖像對應起來記錄。
9. 根據(jù)權利要求8所述的圖像記錄方法，其中，還包括以下步驟從識別為上述多視點圖像的本圖像中檢測被復制體臉區(qū)域的有無；以及對上述第1縮小圖像設定了與上述檢測到的被復制體臉區(qū)域對應的區(qū)域之后，對上述設定了的區(qū)域進行3維計算機圖形處理，從而制作上述第2縮小圖像。
10. —種圖像記錄方法，包括以下步驟拍攝包含從2個以上的視點拍攝到的多視點圖像及從單一的視點拍攝到的單視點圖像的圖像；存儲作為拍攝到的多視點圖像或單視點圖像的本圖像；識別所存儲的本圖像是多視點圖像還是單視點圖像；對于識別為多視點圖像的圖像，識別拍攝時的閃光發(fā)光的有無；制作縮小識別為上述單視點圖像或識別為上述拍攝時沒有閃光發(fā)光的本圖像所得的第l縮小圖像；取得實施了 3維計算機圖形的給定的樣品縮小圖像作為與識別為上述多視點圖像且識別為有上述閃光發(fā)光的本圖像對應的第2縮小圖像；按照上述多視點圖像或上述單視點圖像的識別和上述拍攝時的閃光發(fā)光的有無的識別，存儲上述第1縮小圖像或上述第2縮小圖像；以及把上述存儲的第1縮小圖像或第2縮小圖像和上述存儲的本圖像對應起來記錄。
11. 一種圖像記錄方法，包括以下步驟拍攝包含從2個以上的視點拍攝到的多視點圖像及從單一的視點拍攝到的單視點圖像的圖像；存儲作為拍攝到的多視點圖像或單視點圖像的本圖像；識別所存儲的本圖像是多視點圖像還是單視點圖像；對于識別為上述多視點圖像的圖像，檢測被復制體臉區(qū)域的有無；制作縮小識別為上述單視點圖像或未檢測到上述被復制體臉區(qū)域的本圖像所得的第1 縮小圖像；取得實施了 3維計算機圖形的給定的樣品縮小圖像作為與識別為上述多視點圖像且檢測到上述被復制體臉區(qū)域的本圖像對應的第2縮小圖像；按照上述多視點圖像或上述單視點圖像的識別和上述被復制體臉區(qū)域的有無，存儲上述第1縮小圖像或上述第2縮小圖像；以及把上述存儲的第1縮小圖像或第2縮小圖像和上述存儲的本圖像對應起來記錄。
12. —種圖像記錄方法，包括以下步驟拍攝包含從2個以上的視點拍攝到的多視點圖像及從單一的視點拍攝到的單視點圖像的圖像；存儲作為拍攝到的多視點圖像或單視點圖像的本圖像；識別所存儲的本圖像是多視點圖像還是單視點圖像；識別識別為上述多視點圖像的圖像中的被復制體處于遠距離還是近距離；制作成縮小上述本圖像所得的第1縮小圖像之后，對根據(jù)識別為上述多視點圖像且是識別為上述被復制體處于近距離的本圖像而制作成的第1縮小圖像，實施3維計算機圖形處理，從而制作第2縮小圖像；按照上述多視點圖像或上述單視點圖像的識別和上述被復制體的距離的識別，存儲第1縮小圖像或第2縮小圖像；以及把上述存儲的第1縮小圖像或第2縮小圖像和上述存儲的本圖像對應起來記錄。
13. 根據(jù)權利要求12所述的圖像記錄方法，其中，對于識別為上述多視點圖像的本圖像，僅記錄識別為上述被復制體處于近距離的本圖像。
14. 根據(jù)權利要求13所述的圖像記錄方法，其中，還包括以下步驟顯示不記錄識別為上述多視點圖像且識別為上述被復制體處于遠距離的本圖像的意思的警告。
15. —種使計算機執(zhí)行權利要求8 14中任意一項所述的圖像記錄方法的程序。
全文摘要
一種圖像處理裝置、圖像記錄裝置、方法及程序，能以簡易的構成來實現(xiàn)圖像記錄，該圖像記錄能讓用戶容易且直觀地從拍攝圖像的縮小圖像中識別多視點圖像的縮小圖像。其中，對多視點圖像縮略像實施3維CG處理，從而制作3維縮略像，并且根據(jù)通常圖像來制作縮略像，將其與本圖像對應起來記錄。對3維CG縮略像(X)實施3維CG圖形處理而賦予立體效果，所以它與2維的通常縮略圖(Y)的差異一看便知，即使不采用實現(xiàn)寫實手法的特殊裝置，觀看者也能容易地認識是多視點圖像的縮小圖像。
文檔編號H04N13/00GK101729916SQ20081016926
公開日2010年6月9日申請日期2008年10月10日優(yōu)先權日2008年10月10日
發(fā)明者三宅泉申請人:富士膠片株式會社

完整全部詳細技術資料下載