專利名稱：立體全景圖像創(chuàng)建設(shè)備、立體全景圖像創(chuàng)建方法和立體全景圖像創(chuàng)建程序，立體全景圖像 ...的制作方法
技術(shù)領(lǐng)域：
本發(fā)明涉及立體全景圖像創(chuàng)建設(shè)備、方法和程序，立體全景圖像再現(xiàn)設(shè)備、方法和程序，以及記錄介質(zhì)，并且更具體地涉及基于通過(guò)移動(dòng)立體成像設(shè)備而拍攝的多個(gè)立體圖像來(lái)創(chuàng)建立體全景圖像的立體全景圖像創(chuàng)建設(shè)備、方法和程序，通過(guò)滾動(dòng)或逐幀播放來(lái)再現(xiàn)立體全景圖像的立體全景圖像再現(xiàn)設(shè)備、方法和程序，以及記錄介質(zhì)。
背景技術(shù)：
通常，在已知的全景合成方法中，用固定至三角架等以便其旋轉(zhuǎn)的攝像機(jī)來(lái)執(zhí)行連續(xù)拍攝，并且將從通過(guò)該連續(xù)拍攝所獲得的圖像剪切成條狀的狹縫圖像聯(lián)接在一起以合成全景圖像(專利文獻(xiàn)I)。專利文獻(xiàn)2描述了用于立體閱覽的圖像中的視差調(diào)節(jié)，但該調(diào)節(jié)調(diào)整了用于在視差屏障類型的閱覽器中的視差屏障與用于立體閱覽的圖像的像素之間的位置關(guān)系。在專利文獻(xiàn)3所描述的立體圖像顯示設(shè)備中，當(dāng)輸入了用于調(diào)節(jié)立體圖像中視差量的信息時(shí)，基于該輸入的信息放大或者縮小圖像，由此改變立體圖像的視差量。在專利文獻(xiàn)4所描述的立體圖像校正設(shè)備中，檢測(cè)在構(gòu)成立體圖像的左眼用圖像和右眼用圖像之間的視差量，并且調(diào)節(jié)該視差量以控制立體圖像的彈出量和后退量。{引用列表}{專利文獻(xiàn)}PTL I :日本專利申請(qǐng)公開No. 11-164325PTL 2 :日本專利申請(qǐng)公開 No. 2003-169351PTL 3 :日本專利申請(qǐng)公開No. 2005-73013PTL 4 :日本專利申請(qǐng)公開No. 2010-4558
發(fā)明內(nèi)容
{技術(shù)問(wèn)題}專利文獻(xiàn)I的摘要描述了 將從連續(xù)拍攝圖像剪切成狹縫形狀的狹縫圖像(slitimage)聯(lián)接在一起，以創(chuàng)建用于左眼閱覽和右眼閱覽的全景圖像。然而，專利文獻(xiàn)I的說(shuō)明書根本沒(méi)有描述關(guān)于用于左眼閱覽和右眼閱覽的全景圖像的創(chuàng)建。此外，盡管之前未提及立體全景圖像(3D全景圖像)中的視差調(diào)節(jié)，然而專利文獻(xiàn)2至4中所描述的視差量調(diào)節(jié)技術(shù)可應(yīng)用于3D全景圖像。同時(shí)，與正常3D顯示器的屏的縱橫比(4 :3、16 :9)相比，3D全景圖像較大。為了使整個(gè)3D全景圖像顯示在3D顯示器上，3D顯示器屏幕的上部和下部被掩蓋以便進(jìn)行顯示。另一方面，為了有效使用3D顯示器的整個(gè)屏幕，3D全景圖像被放大使得3D全景圖像沿縱向的寬度與3D顯示器沿縱向的寬度相一致。然后，通過(guò)滾動(dòng)再現(xiàn)該放大的3D全景圖像，或者
10CN 102918858 A
書
明
說(shuō)
2/19 頁(yè)
將3D全景圖像劃分成多個(gè)幀以具有3D顯示器的縱橫比并且之后通過(guò)逐幀播放來(lái)再現(xiàn)通過(guò)分割所獲得的這些幀。通常，不存在這樣的3D全景圖像再現(xiàn)設(shè)備當(dāng)通過(guò)滾動(dòng)或逐幀播放再現(xiàn)3D全景圖像時(shí)，該3D全景圖像再現(xiàn)設(shè)備自動(dòng)地調(diào)節(jié)視差使得該圖像具有針對(duì)每個(gè)滾動(dòng)位置或每一 幀的最佳視差。特別地，當(dāng)通過(guò)滾動(dòng)或逐幀播放再現(xiàn)3D全景圖像時(shí)，會(huì)出現(xiàn)這樣的情況，使得在于3D顯示器上顯示的3D圖像中不存在顯著影響3D圖像閱覽效果的交叉點(diǎn)部分(在左圖像與右圖像之間不存在視差的部分)，由此不利的是使立體閱覽變得困難。鑒于這些情況做出了本發(fā)明，并且本發(fā)明的目的為提供立體全景圖像創(chuàng)建設(shè)備、方法和程序，立體全景圖像再現(xiàn)設(shè)備、方法和程序，以及記錄介質(zhì)，它們能夠在通過(guò)滾動(dòng)或逐幀播放再現(xiàn)立體全景圖像時(shí)針對(duì)每個(gè)滾動(dòng)位置或每一幀自動(dòng)地調(diào)節(jié)視差。{解決問(wèn)題的方案}為了實(shí)現(xiàn)上述目的，根據(jù)本發(fā)明的第一方面的一種立體全景圖像創(chuàng)建設(shè)備包括立體圖像獲得裝置，其獲得通過(guò)立體成像設(shè)備拍攝的由左圖像和右圖像形成的多個(gè)立體圖像，這些立體圖像是立體成像設(shè)備沿恒定方向搖動(dòng)時(shí)連續(xù)地拍攝的；立體全景圖像創(chuàng)建裝置，其通過(guò)從由立體圖像獲得裝置獲得的多個(gè)立體圖像中將左圖像合成在一起且將右圖像合成在一起來(lái)創(chuàng)建由左和右全景圖像形成的立體全景圖像；對(duì)應(yīng)點(diǎn)檢測(cè)裝置，其檢測(cè)用于視差調(diào)節(jié)的多個(gè)對(duì)應(yīng)點(diǎn)，這些對(duì)應(yīng)點(diǎn)具有在由立體圖像獲得裝置獲得的多個(gè)立體圖像的左圖像和右圖像之間匹配的特征或者具有在創(chuàng)建的立體全景圖像的左和右全景圖像之間匹配的特征；圖像偏移量計(jì)算裝置，其配置成計(jì)算用于將檢測(cè)到的多個(gè)對(duì)應(yīng)點(diǎn)的視差均設(shè)置為預(yù)定視差量的多個(gè)圖像偏移量；以及記錄裝置，其在記錄介質(zhì)中記錄創(chuàng)建的立體全景圖像，并且將立體全景圖像上用于視差調(diào)節(jié)的多個(gè)對(duì)應(yīng)點(diǎn)的位置信息和計(jì)算出的多個(gè)圖像偏移量彼此相關(guān)聯(lián)地記錄在記錄介質(zhì)中作為立體全景圖像的輔助信息。根據(jù)上述第一方面的本發(fā)明，針對(duì)立體全景圖像檢測(cè)用于視差調(diào)節(jié)的多個(gè)對(duì)應(yīng)點(diǎn)。而且，用于將每個(gè)對(duì)應(yīng)點(diǎn)的視差設(shè)置在預(yù)定視差量的圖像偏移量與立體全景圖像上的每個(gè)對(duì)應(yīng)點(diǎn)的位置信息一起記錄在記錄介質(zhì)上作為立體全景圖像的輔助信息。這樣，當(dāng)通過(guò)滾動(dòng)或逐幀播放再現(xiàn)立體全景圖像時(shí)，輔助信息可以用于自動(dòng)地調(diào)節(jié)針對(duì)每個(gè)滾動(dòng)位置或者每一幀的視差。 在根據(jù)本發(fā)明的第二方面的立體全景圖像創(chuàng)建設(shè)備中，在上述第一方面中，對(duì)應(yīng)點(diǎn)檢測(cè)裝置配置成針對(duì)由立體圖像獲得裝置獲得的立體圖像中的每一個(gè)的每組左圖像和右圖像檢測(cè)一組對(duì)應(yīng)點(diǎn)，以及圖像偏移量計(jì)算裝置配置成計(jì)算圖像偏移量，其中每個(gè)圖像偏移量用于將檢測(cè)到的對(duì)應(yīng)點(diǎn)之間的視差設(shè)置為預(yù)定視差量。據(jù)此，計(jì)算并記錄了與用于立體全景圖像的合成中的立體圖像的數(shù)量一樣多的圖像偏移量。另外，可以在創(chuàng)建立體全景圖像之前計(jì)算圖像偏移量。在根據(jù)本發(fā)明的第三方面的立體全景圖像創(chuàng)建設(shè)備中，在上述第二方面中，對(duì)應(yīng)點(diǎn)檢測(cè)裝置配置成在靠近立體圖像中心的部分中檢測(cè)針對(duì)多個(gè)立體圖像中的每一個(gè)的每組左圖像和右圖像的一組對(duì)應(yīng)點(diǎn)。在根據(jù)本發(fā)明的第四方面的立體全景圖像創(chuàng)建設(shè)備中，在上述第三方面中，當(dāng)對(duì)應(yīng)點(diǎn)檢測(cè)裝置未在靠近立體圖像中心的部分中檢測(cè)所需對(duì)應(yīng)點(diǎn)時(shí)，圖像偏移量計(jì)算裝置配置成將預(yù)先設(shè)置的圖像偏移量設(shè)置作為計(jì)算值，或者圖像偏移量計(jì)算裝置配置成通過(guò)在相
11鄰圖像偏移量之間進(jìn)行內(nèi)插來(lái)計(jì)算圖像偏移量。這樣，即使未在靠近立體圖像中心的部分中檢測(cè)到具有特征的對(duì)應(yīng)點(diǎn)，也能夠得到圖像偏移量。在根據(jù)本發(fā)明的第五方面的立體全景圖像創(chuàng)建設(shè)備中，在上述第一至第四方面的任一方面中，立體全景圖像創(chuàng)建裝置配置成通過(guò)將多個(gè)狹縫圖像拼合在一起來(lái)創(chuàng)建立體全景圖像，其中每個(gè)狹縫圖像呈條形，這些狹縫圖像處于由立體圖像獲得裝置獲得的多個(gè)立·體圖像中的靠近中心的部分中。根據(jù)本發(fā)明的第六方面的立體全景圖像創(chuàng)建設(shè)備在上述第一方面的基礎(chǔ)上還包括物體檢測(cè)裝置，其檢測(cè)包括在由立體圖像獲得裝置獲得的多個(gè)立體圖像或者包括在所創(chuàng)建的立體全景圖像中的所需物體，其中對(duì)應(yīng)點(diǎn)檢測(cè)裝置配置成檢測(cè)針對(duì)由物體檢測(cè)裝置檢測(cè)到的每個(gè)物體的對(duì)應(yīng)點(diǎn)。例如，除了人的面部之外，物體檢測(cè)裝置還檢測(cè)用作主要對(duì)象的諸如建筑物或墻壁等的人工建筑。這樣，當(dāng)通過(guò)滾動(dòng)或逐幀播放再現(xiàn)立體全景圖像時(shí)，可以針對(duì)在立體全景圖像中檢測(cè)到的每個(gè)物體自動(dòng)地進(jìn)行視差調(diào)節(jié)。根據(jù)本發(fā)明的第七方面的立體全景圖像創(chuàng)建設(shè)備在上述第一至第六方面的任一方面的基礎(chǔ)上還包括內(nèi)插計(jì)算裝置，該內(nèi)插計(jì)算裝置基于由圖像偏移量計(jì)算裝置計(jì)算出的多個(gè)圖像偏移量、通過(guò)在對(duì)應(yīng)點(diǎn)之間內(nèi)插像素偏移量來(lái)計(jì)算連續(xù)的像素偏移量，其中記錄裝置配置成將由圖像偏移量計(jì)算裝置計(jì)算出的多個(gè)圖像偏移量和由內(nèi)插計(jì)算裝置計(jì)算出的圖像偏移量記錄在記錄介質(zhì)中。據(jù)此，當(dāng)通過(guò)滾動(dòng)方式再現(xiàn)立體全景圖像時(shí)，經(jīng)過(guò)內(nèi)插計(jì)算的圖像偏移量可以用于連續(xù)地進(jìn)行視差調(diào)節(jié)。在根據(jù)本發(fā)明的第八方面的立體全景圖像創(chuàng)建設(shè)備中，在上述第一至第六方面的任一方面中，預(yù)定視差量為零。根據(jù)本發(fā)明的第九方面的一種立體全景圖像再現(xiàn)設(shè)備，其包括讀取裝置，其從根據(jù)上述第一至第八方面中任一方面的記錄介質(zhì)讀取立體全景圖像和立體全景圖像的輔助信息；再現(xiàn)裝置，其以預(yù)定倍率放大讀取的立體全景圖像，并且自動(dòng)地或者根據(jù)手動(dòng)指令輸入來(lái)以在立體顯示器上滾動(dòng)的方式再現(xiàn)或者以針對(duì)通過(guò)劃分立體全景圖像而獲得的多個(gè)幀中的每一幀進(jìn)行逐幀播放的方式再現(xiàn)放大的立體全景圖像；以及視差調(diào)節(jié)裝置，其從作為立體全景圖像的輔助信息而記錄的多個(gè)圖像偏移量中選擇一個(gè)圖像偏移量，該圖像偏移量對(duì)應(yīng)于立體顯示器的屏幕中的立體圖像，并且當(dāng)立體全景圖像由再現(xiàn)裝置通過(guò)滾動(dòng)或逐幀播放的方式進(jìn)行再現(xiàn)時(shí)視差調(diào)節(jié)裝置基于選擇的圖像偏移量進(jìn)行立體圖像的視差調(diào)節(jié)。根據(jù)上述第九方面，讀取記錄在根據(jù)上述第一至第八方面中的任一方面的記錄介質(zhì)上的立體全景圖像和立體全景圖像的輔助信息(例如多個(gè)圖像偏移量)。之后，當(dāng)以預(yù)定倍率放大讀取的立體全景圖像并且自動(dòng)地或根據(jù)手動(dòng)指令輸入通過(guò)在立體顯示器上滾動(dòng)再現(xiàn)或者以針對(duì)通過(guò)分割立體全景圖像而獲得的多個(gè)幀中的每一幀以逐幀播放的方式再現(xiàn)放大的立體全景圖像時(shí)，輔助信息可用于針對(duì)每個(gè)滾動(dòng)位置或每一幀自動(dòng)地進(jìn)行視差調(diào)節(jié)。這樣，可以調(diào)節(jié)顯著影響立體圖像閱覽效果的交叉點(diǎn)部分(在左和右圖像之間不存在視差的部分)，以使立體閱覽變得容易。需要注意的是，盡管預(yù)定倍率優(yōu)選地是使立體全景圖像在縱向上的寬度與立體顯示器在縱向上的寬度一致的倍率，但是可以比該倍率更大或更小。此外，可以適當(dāng)?shù)卣{(diào)節(jié)預(yù)定倍率。根據(jù)本發(fā)明第十方面的一種立體全景圖像再現(xiàn)設(shè)備包括立體全景圖像獲得裝置，其獲得由左和右全景圖像形成的立體全景圖像；對(duì)應(yīng)點(diǎn)檢測(cè)裝置，其在再現(xiàn)獲得的立體全景圖像之前檢測(cè)立體全景圖像中用于視差調(diào)節(jié)的多個(gè)對(duì)應(yīng)點(diǎn)，這些對(duì)應(yīng)點(diǎn)具有在左和右全景圖像之間匹配的特征；圖像偏移量計(jì)算裝置，其計(jì)算用于將檢測(cè)到的多個(gè)對(duì)應(yīng)點(diǎn)的視差均設(shè)置為預(yù)定視差量的圖像偏移量；存儲(chǔ)裝置，其將立體全景圖像上用于視差調(diào)節(jié)的多個(gè)對(duì)應(yīng)點(diǎn)的位置信息和計(jì)算出的多個(gè)圖像偏移量彼此相關(guān)聯(lián)地進(jìn)行存儲(chǔ)；再現(xiàn)裝置，其以預(yù)定倍率放大獲得的立體全景圖像，并且自動(dòng)地或者根據(jù)手動(dòng)指令輸入以在立體顯示器上滾動(dòng)的方式再現(xiàn)或者以針對(duì)通過(guò)分割立體全景圖像而獲得的多個(gè)幀中的每一幀進(jìn)行逐幀播放的方式再現(xiàn)放大的立體全景圖像；以及視差調(diào)節(jié)裝置，其從相應(yīng)于立體全景圖像存儲(chǔ)在所述存儲(chǔ)裝置中的多個(gè)圖像偏移量中選擇一個(gè)圖像偏移量，該圖像偏移量對(duì)應(yīng)于立體顯示器的屏幕中的立體圖像，并且當(dāng)立體全景圖像由再現(xiàn)裝置通過(guò)滾動(dòng)或逐幀播放的方式進(jìn)行再現(xiàn)時(shí)視差調(diào)節(jié)裝置基于選擇的圖像偏移量進(jìn)行立體圖像的視差調(diào)節(jié)。上述第十方面涉及一種當(dāng)不能從記錄介質(zhì)獲得立體全景圖像的輔助信息(例如多個(gè)圖像偏移量的輔助信息)時(shí)的立體全景圖像再現(xiàn)設(shè)備。在再現(xiàn)立體全景圖像之前，立體全景圖像再現(xiàn)設(shè)備檢測(cè)用于視差調(diào)節(jié)的多個(gè)對(duì)應(yīng)點(diǎn)，這些對(duì)應(yīng)點(diǎn)具有在左和右全景圖像之間匹配的特征；計(jì)算用于將這些對(duì)應(yīng)點(diǎn)的視差均設(shè)置在預(yù)定視差量的圖像偏移量；將立體全景圖像上用于視差調(diào)節(jié)的多個(gè)對(duì)應(yīng)點(diǎn)的位置信息和計(jì)算出的多個(gè)圖像偏移量彼此相關(guān)聯(lián)地進(jìn)行存儲(chǔ)；然后使用存儲(chǔ)的多個(gè)圖像偏移量以在通過(guò)滾動(dòng)或通過(guò)逐幀播放再現(xiàn)立體全景圖像時(shí)進(jìn)行視差調(diào)節(jié)。需要注意的是，以類似于上述第九方面的方式執(zhí)行在通過(guò)滾動(dòng)或通過(guò)逐幀播放再現(xiàn)立體全景圖像時(shí)的視差調(diào)節(jié)。在根據(jù)本發(fā)明的第十一方面的立體全景圖像再現(xiàn)設(shè)備中，在上述第十方面中，對(duì)應(yīng)點(diǎn)檢測(cè)裝置配置成檢測(cè)針對(duì)通過(guò)分割全景圖像而獲得的均呈條形的多個(gè)狹縫圖像中的每一個(gè)的一組對(duì)應(yīng)點(diǎn)。在根據(jù)本發(fā)明的第十二方面的立體全景圖像再現(xiàn)設(shè)備中，在上述第十一方面中，當(dāng)對(duì)應(yīng)點(diǎn)檢測(cè)裝置未在靠近立體圖像中心的部分中檢測(cè)所需對(duì)應(yīng)點(diǎn)時(shí)，圖像偏移量計(jì)算裝置配置成將預(yù)先設(shè)置的圖像偏移量設(shè)置作為計(jì)算值，或者圖像偏移量計(jì)算裝置配置成通過(guò)在相鄰圖像偏移量之間進(jìn)行內(nèi)插來(lái)計(jì)算圖像偏移量。根據(jù)本發(fā)明的第十三方面的立體全景圖像再現(xiàn)設(shè)備在上述第十方面的基礎(chǔ)上還包括物體檢測(cè)裝置，物體檢測(cè)裝置檢測(cè)包括在獲得的立體全景圖像中的所需物體，其中對(duì)應(yīng)點(diǎn)檢測(cè)裝置配置成檢測(cè)針對(duì)由物體檢測(cè)裝置檢測(cè)到的每個(gè)物體的對(duì)應(yīng)點(diǎn)。這樣，當(dāng)通過(guò)滾動(dòng)或分割的逐幀播放再現(xiàn)立體全景圖像時(shí)，可以針對(duì)立體全景圖像中的每個(gè)物體執(zhí)行視
差調(diào)節(jié)。根據(jù)本發(fā)明的第十四方面的立體全景圖像再現(xiàn)設(shè)備在上述第十至第十三方面的任一方面的基礎(chǔ)上還包括內(nèi)插計(jì)算裝置，其基于由圖像偏移量計(jì)算裝置計(jì)算出的多個(gè)圖像偏移量、通過(guò)在對(duì)應(yīng)點(diǎn)之間內(nèi)插像素偏移量來(lái)計(jì)算連續(xù)的像素偏移量，其中存儲(chǔ)裝置配置成存儲(chǔ)由圖像偏移量計(jì)算裝置計(jì)算出的多個(gè)圖像偏移量和由內(nèi)插計(jì)算裝置計(jì)算出的圖像偏移量。在根據(jù)本發(fā)明的第十五方面的立體全景圖像再現(xiàn)設(shè)備中，在上述第十至第十四方面的任一方面中，預(yù)定視差量為零。在根據(jù)本發(fā)明的第十六方面的立體全景圖像再現(xiàn)設(shè)備中，在上述第九至第十五方面的任一方面中，視差調(diào)節(jié)裝置配置成選擇立體顯示器的屏幕中心處的或者在最靠近屏幕中心的部分中的圖像偏移量，并且基于選擇的圖像偏移量進(jìn)行立體圖像的視差調(diào)節(jié)。據(jù)此，可以將在立體顯示器的屏幕中心處或者在靠近屏幕中心的部分中的對(duì)象的視差量設(shè)置為預(yù)定視差量以使對(duì)象的立體閱覽變得容易。需要注意的是，如在上述第十五方面中，當(dāng)預(yù)定視差量為零時(shí)，目標(biāo)對(duì)象平面地顯示并且最容易閱覽到。然而，本發(fā)明并不受限于此。例如，預(yù)定視差量可以設(shè)置在合適的值，并且可以調(diào)節(jié)視差量使得目標(biāo)對(duì)象看上去略微向前彈出?！?br> 根據(jù)本發(fā)明的第十七方面的立體全景圖像再現(xiàn)設(shè)備在上述第九至第十六方面的任一方面的基礎(chǔ)上配置為當(dāng)再現(xiàn)裝置根據(jù)手動(dòng)指令輸入通過(guò)滾動(dòng)方式再現(xiàn)立體全景圖像時(shí)，在停止?jié)L動(dòng)之前選擇與在根據(jù)手動(dòng)指令輸入開始滾動(dòng)時(shí)顯示在立體顯示器的屏幕中的立體圖像相對(duì)應(yīng)的一個(gè)圖像偏移量，并且當(dāng)滾動(dòng)停止時(shí)，選擇與停止?jié)L動(dòng)時(shí)顯示在立體顯示器的屏幕中的立體圖像相對(duì)應(yīng)的一個(gè)圖像偏移量，并且基于選擇的圖像偏移量進(jìn)行立體圖像的視差調(diào)節(jié)。如此，滾動(dòng)期間的視差調(diào)節(jié)是固定的，由此能夠減小因視差波動(dòng)而造成的眼疲勞并且在停止?jié)L動(dòng)時(shí)能夠進(jìn)行與停止的立體圖像相對(duì)應(yīng)的視差調(diào)節(jié)。在根據(jù)本發(fā)明的第十八方面的立體全景圖像再現(xiàn)設(shè)備中，在上述第九至第十六方面的任一方面中，再現(xiàn)裝置配置成在根據(jù)手動(dòng)指令輸入以滾動(dòng)方式進(jìn)行再現(xiàn)的滾動(dòng)期間僅僅使左圖像和右圖像中的一個(gè)顯示在立體顯示器上，并且當(dāng)滾動(dòng)停止時(shí)使立體圖像顯示在立體顯示器上，以及在停止?jié)L動(dòng)時(shí)，視差調(diào)節(jié)裝置配置成選擇與在停止?jié)L動(dòng)時(shí)顯示在立體顯示器的屏幕中的立體圖像相對(duì)應(yīng)的一個(gè)圖像偏移量，并且基于選擇的圖像偏移量進(jìn)行立體圖像的視差調(diào)節(jié)。如此，由于在滾動(dòng)期間顯示平面圖像，因此可以減小眼疲勞，并且在停止?jié)L動(dòng)時(shí)可以執(zhí)行與停止的立體圖像相對(duì)應(yīng)的視差調(diào)節(jié)。在根據(jù)本發(fā)明的第十九方面的立體全景圖像再現(xiàn)設(shè)備中，在上述第九至第十八方面的任一方面中，再現(xiàn)裝置配置成使整個(gè)立體全景圖像顯示在立體顯示器上，然后以預(yù)定倍率放大立體全景圖像并且通過(guò)滾動(dòng)或逐幀播放的方式回放立體全景圖像。這樣，在檢查整個(gè)立體全景圖像之后，可以以滾動(dòng)或進(jìn)行了分割的逐幀播放的方式閱覽放大以及縮放后的立體全景圖像。根據(jù)本發(fā)明的第二十方面的一種立體全景圖像創(chuàng)建方法包括立體圖像獲得步驟，用于獲得由立體成像設(shè)備拍攝的左圖像和右圖像形成的多個(gè)立體圖像，這些立體圖像是立體成像設(shè)備在沿恒定方向搖動(dòng)時(shí)連續(xù)拍攝的；立體全景圖像創(chuàng)建步驟，用于通過(guò)從獲得的多個(gè)立體圖像中將左圖像合成在一起且將右圖像合成在一起來(lái)創(chuàng)建由左和右全景圖像形成的立體全景圖像；對(duì)應(yīng)點(diǎn)檢測(cè)步驟，用于檢測(cè)用于視差調(diào)節(jié)的多個(gè)對(duì)應(yīng)點(diǎn)，這些對(duì)應(yīng)點(diǎn)具有在獲得的多個(gè)立體圖像的左圖像和右圖像之間匹配的特征或者在創(chuàng)建的立體全景圖像的左和右全景圖像之間匹配的特征；圖像偏移量計(jì)算步驟，用于計(jì)算用于將檢測(cè)到的多個(gè)對(duì)應(yīng)點(diǎn)的視差均設(shè)置為預(yù)定視差量的多個(gè)圖像偏移量；以及記錄步驟，用于將創(chuàng)建的立體全景圖像記錄在記錄介質(zhì)中并且將立體全景圖像上用于視差調(diào)節(jié)的多個(gè)對(duì)應(yīng)點(diǎn)的位置信息和計(jì)算出的多個(gè)圖像偏移量彼此相關(guān)聯(lián)地記錄在記錄介質(zhì)中作為立體全景圖像的輔助信息。4在根據(jù)本發(fā)明的第二i^一方面的立體全景圖像創(chuàng)建方法中，在上述第二十方面中，對(duì)應(yīng)點(diǎn)檢測(cè)步驟配置成針對(duì)獲得的立體圖像中的每一個(gè)的每組左圖像和右圖像檢測(cè)一組對(duì)應(yīng)點(diǎn)，以及圖像偏移量計(jì)算步驟配置成從針對(duì)所述多個(gè)立體圖像中的每一個(gè)而檢測(cè)的對(duì)應(yīng)點(diǎn)中指定一組對(duì)應(yīng)點(diǎn)，并且計(jì)算均用于將對(duì)應(yīng)點(diǎn)之間的視差設(shè)置為預(yù)定視差量的圖像偏移量。在根據(jù)本發(fā)明的第二十二方面的立體全景圖像創(chuàng)建方法中，在上述第二 i^一方面中，對(duì)應(yīng)點(diǎn)檢測(cè)步驟配置成在靠近立體圖像中心的部分中檢測(cè)針對(duì)所述多個(gè)立體圖像中的每Iv的每組左圖像和右圖像的一組對(duì)應(yīng)點(diǎn)。在根據(jù)本發(fā)明的第二十三方面的立體全景圖像創(chuàng)建方法中，在上述第二十二方面中，當(dāng)對(duì)應(yīng)點(diǎn)檢測(cè)裝置未在靠近立體圖像中心的部分中檢測(cè)到所需對(duì)應(yīng)點(diǎn)時(shí)，圖像偏移量計(jì)算步驟配置成將預(yù)先設(shè)置的圖像偏移量設(shè)置作為計(jì)算值，或者圖像偏移量計(jì)算步驟配置成通過(guò)在相鄰圖像偏移量之間進(jìn)行內(nèi)插來(lái)計(jì)算圖像偏移量。在根據(jù)本發(fā)明的第二十四方面的立體全景圖像創(chuàng)建方法中，在上述第二十至第二十三方面的任一方面中，立體全景圖像創(chuàng)建步驟配置成通過(guò)將多個(gè)狹縫圖像拼合在一起來(lái)創(chuàng)建立體全景圖像，其中每個(gè)狹縫圖像呈條形，這些狹縫圖像處于獲得的多個(gè)立體圖像中的靠近中心的部分中。根據(jù)本發(fā)明的第二十五方面的立體全景圖像創(chuàng)建方法在上述第二十方面的基礎(chǔ)上還包括檢測(cè)包括在獲得的多個(gè)立體圖像或創(chuàng)建的立體全景圖像中的所需物體的物體檢測(cè)步驟，其中對(duì)應(yīng)點(diǎn)檢測(cè)步驟配置成檢測(cè)針對(duì)由物體檢測(cè)裝置檢測(cè)的每個(gè)物體的對(duì)應(yīng)點(diǎn)。根據(jù)本發(fā)明的第二十六方面的立體全景圖像創(chuàng)建方法在上述第二十至第二十五方面的任一方面的基礎(chǔ)上還包括基于在圖像偏移量計(jì)算步驟中計(jì)算出的多個(gè)圖像偏移量、通過(guò)在對(duì)應(yīng)點(diǎn)之間內(nèi)插像素偏移量來(lái)計(jì)算連續(xù)的像素偏移量的內(nèi)插計(jì)算步驟，其中記錄步驟配置成將在圖像偏移量計(jì)算步驟中計(jì)算出的多個(gè)圖像偏移量和在內(nèi)插計(jì)算步驟中計(jì)算出的圖像偏移量記錄在記錄介質(zhì)中。在根據(jù)本發(fā)明的第二十七方面的立體全景圖像創(chuàng)建方法中，在上述第二十至第二十五方面的任一方面中，預(yù)定視差量為零。根據(jù)本發(fā)明的第二十八方面的一種立體全景圖像再現(xiàn)方法包括讀取步驟，用于從根據(jù)上述第二十至第二十七方面的任一方面的記錄介質(zhì)讀取立體全景圖像和立體全景圖像的輔助信息；再現(xiàn)步驟，用于以預(yù)定倍率放大讀取的立體全景圖像，并且自動(dòng)地或者根據(jù)手動(dòng)指令輸入以在立體顯示器上滾動(dòng)的方式再現(xiàn)或者以針對(duì)通過(guò)分割立體全景圖像而獲得的多個(gè)幀中的每一幀進(jìn)行逐幀播放的方式再現(xiàn)放大的立體全景圖像；以及視差調(diào)節(jié)步驟，用于從作為立體全景圖像的輔助信息而記錄的多個(gè)圖像偏移量中選擇一個(gè)圖像偏移量，該圖像偏移量對(duì)應(yīng)于立體顯示器的屏幕中的立體圖像，并且當(dāng)在所述再現(xiàn)步驟中通過(guò)滾動(dòng)或逐幀播放的方式再現(xiàn)立體全景圖像時(shí)基于選擇的圖像偏移量進(jìn)行立體圖像的視差調(diào)節(jié)。根據(jù)本發(fā)明的第二十九方面的一種立體全景圖像再現(xiàn)方法包括立體圖像獲得步驟，獲得由左和右全景圖像形成的立體全景圖像；對(duì)應(yīng)點(diǎn)檢測(cè)步驟，用于在再現(xiàn)獲得的立體全景圖像之前，檢測(cè)立體全景圖像中用于視差調(diào)節(jié)的多個(gè)對(duì)應(yīng)點(diǎn)，這些對(duì)應(yīng)點(diǎn)具有在左和右全景圖像之間匹配的特征；圖像偏移量計(jì)算步驟，用于計(jì)算用于將檢測(cè)到的多個(gè)對(duì)應(yīng)點(diǎn)的視差均設(shè)置在預(yù)定視差量的圖像偏移量；存儲(chǔ)步驟，用于將立體全景圖像上用于視差調(diào)節(jié)的多個(gè)對(duì)應(yīng)點(diǎn)的位置信息和計(jì)算出的多個(gè)圖像偏移量彼此相關(guān)聯(lián)地進(jìn)行存儲(chǔ)；再現(xiàn)步驟，用于以預(yù)定放大倍率放大獲得的立體全景圖像，并且自動(dòng)地或者根據(jù)手動(dòng)指令輸入以在立體顯示器上滾動(dòng)的方式再現(xiàn)或者以針對(duì)通過(guò)劃分立體全景圖像而獲得的多個(gè)幀中的每一幀進(jìn)行逐幀播放的方式再現(xiàn)放大的立體全景圖像；以及視差調(diào)節(jié)步驟，用于從相應(yīng)于立體全景圖像存儲(chǔ)在存儲(chǔ)裝置中的多個(gè)圖像偏移量中選擇一個(gè)圖像偏移量，該圖像偏移量對(duì)應(yīng)于立體顯示器的屏中的立體圖像，并且當(dāng)在再現(xiàn)步驟中通過(guò)滾動(dòng)或逐幀播放的方式再現(xiàn)立體全景圖像時(shí)基于選擇的圖像偏移量進(jìn)行立體圖像的視差調(diào)節(jié)。 在根據(jù)本發(fā)明的第三十方面的立體全景圖像再現(xiàn)方法中，在上述第二十九方面中，對(duì)應(yīng)點(diǎn)檢測(cè)步驟配置成檢測(cè)針對(duì)通過(guò)分割全景圖像而獲得的均呈條形的多個(gè)狹縫圖像中的每一個(gè)的一組對(duì)應(yīng)點(diǎn)。在根據(jù)本發(fā)明的第三十一方面的立體全景圖像再現(xiàn)方法中，在上述第三十方面中，當(dāng)在對(duì)應(yīng)點(diǎn)檢測(cè)步驟中未在靠近立體圖像中心的部分中檢測(cè)到所需對(duì)應(yīng)點(diǎn)時(shí)，圖像偏移量計(jì)算步驟配置成將預(yù)先設(shè)置的圖像偏移量設(shè)置作為計(jì)算值，或者圖像偏移量計(jì)算步驟配置成通過(guò)相鄰圖像偏移量之間進(jìn)行內(nèi)插來(lái)計(jì)算圖像偏移量。根據(jù)本發(fā)明的第三十二方面的立體全景圖像再現(xiàn)方法在上述第二十九方面的基礎(chǔ)上還包括檢測(cè)包括在獲得的立體全景圖像中的所需物體的物體檢測(cè)步驟，其中對(duì)應(yīng)點(diǎn)檢測(cè)步驟配置成檢測(cè)針對(duì)物體檢測(cè)步驟中所檢測(cè)到的每個(gè)物體的對(duì)應(yīng)點(diǎn)。根據(jù)本發(fā)明的第三十三方面的立體全景圖像再現(xiàn)方法在上述第二十九至第三十二方面的任一方面的基礎(chǔ)上還包括基于在圖像偏移量計(jì)算步驟中計(jì)算出的多個(gè)圖像偏移量、通過(guò)在對(duì)應(yīng)點(diǎn)之間內(nèi)插像素偏移量來(lái)計(jì)算連續(xù)的像素偏移量的內(nèi)插計(jì)算步驟，其中存儲(chǔ)步驟配置成存儲(chǔ)在圖像偏移量計(jì)算步驟中計(jì)算出的多個(gè)圖像偏移量和在內(nèi)插計(jì)算步驟中計(jì)算出的圖像偏移量。在根據(jù)本發(fā)明的第三十四方面的立體全景圖像再現(xiàn)方法中，在上述第二十九至第三十三方面的任一方面中，預(yù)定視差量為零。在根據(jù)本發(fā)明的第三十五方面的立體全景圖像再現(xiàn)方法中，在上述第二十八至第三十四方面的任一方面中，視差調(diào)節(jié)步驟配置成選擇處于立體顯示器的屏幕中心處或者處于最靠近屏幕中心的部分中的圖像偏移量，并且基于選擇的圖像偏移量進(jìn)行立體圖像的視差調(diào)節(jié)。在根據(jù)本發(fā)明的第三十六方面的立體全景圖像再現(xiàn)方法中，在上述第二十八至第三十五方面的任一方面中，當(dāng)再現(xiàn)步驟根據(jù)手動(dòng)指令輸入通過(guò)滾動(dòng)方式再現(xiàn)立體全景圖像時(shí)，視差調(diào)節(jié)步驟配置成在停止?jié)L動(dòng)之前選擇與在根據(jù)手動(dòng)指令輸入開始滾動(dòng)時(shí)顯示在立體顯示器的屏中的立體圖像相對(duì)應(yīng)的一個(gè)圖像偏移量，并且當(dāng)滾動(dòng)停止時(shí)，選擇與停止?jié)L動(dòng)時(shí)顯示在立體顯示器的屏中的立體圖像相對(duì)應(yīng)的一個(gè)圖像偏移量，并且在視差調(diào)節(jié)步驟中基于選擇的圖像偏移量進(jìn)行立體圖像的視差調(diào)節(jié)。在根據(jù)本發(fā)明的第三十七方面的立體全景圖像再現(xiàn)方法中，在上述第二十八至第三十五方面的任一方面中，再現(xiàn)步驟配置成在根據(jù)手動(dòng)指令輸入以滾動(dòng)方式進(jìn)行再現(xiàn)的滾動(dòng)期間僅僅使左圖像和右圖像中的一個(gè)顯示在立體顯示器上，并且當(dāng)滾動(dòng)停止時(shí)使立體圖像顯示在立體顯示器上，以及在停止?jié)L動(dòng)時(shí)視差調(diào)節(jié)步驟配置成選擇與在停止?jié)L動(dòng)時(shí)顯示在立體顯示器的屏中的立體圖像相對(duì)應(yīng)的一個(gè)圖像偏移量，并且基于選擇的圖像偏移量進(jìn)行立體圖像的視差調(diào)節(jié)。在根據(jù)本發(fā)明的第三十八方面的立體全景圖像再現(xiàn)方法中，在上述第二十八至第三十七方面的任一方面中，再現(xiàn)步驟使整個(gè)立體全景圖像顯示在立體顯示器上，然后以預(yù)定倍率放大立體全景圖像并且通過(guò)滾動(dòng)或逐幀播放的方式回放立體全景圖像。根據(jù)本發(fā)明的第三十九方面的一種立體全景圖像再現(xiàn)程序配置成通過(guò)計(jì)算機(jī)實(shí)現(xiàn)根據(jù)上述第一至第八方面中的任一方面的立體全景圖像創(chuàng)建設(shè)備。
根據(jù)本發(fā)明的第四十方面的一種立體全景圖像創(chuàng)建程序配置成通過(guò)計(jì)算機(jī)實(shí)現(xiàn)根據(jù)上述第九至第十九方面中的任一方面的立體全景圖像再現(xiàn)設(shè)備。{本發(fā)明的有益效果}在本發(fā)明中，檢測(cè)針對(duì)立體全景圖像的用于視差調(diào)節(jié)的多個(gè)對(duì)應(yīng)點(diǎn)，并且用于將該立體全景圖像上的每個(gè)對(duì)應(yīng)點(diǎn)的視差設(shè)置在預(yù)定視差量的圖像偏移量與每個(gè)對(duì)應(yīng)點(diǎn)的位置信息一起被計(jì)算并記錄。因此，當(dāng)通過(guò)滾動(dòng)或逐幀播放再現(xiàn)立體全景圖像時(shí)，記錄的圖像偏移量可用于自動(dòng)地調(diào)節(jié)針對(duì)每個(gè)滾動(dòng)位置或每一幀的視差。這樣，可以通過(guò)滾動(dòng)或逐幀播放的方式來(lái)再現(xiàn)可輕松立體閱覽到的立體全景圖像。


圖IA是根據(jù)本發(fā)明的實(shí)施例的立體成像設(shè)備的正面透視圖。圖IB是根據(jù)本發(fā)明的實(shí)施例的立體成像設(shè)備的背面透視圖。圖2是顯示圖I的立體成像設(shè)備的內(nèi)部結(jié)構(gòu)的框圖。圖3是拍攝用于3D全景合成的3D圖像的方法的示圖。圖4A是用于描述3D
圖4B是用于描述3D
圖4C是用于描述3D
圖4D是用于描述3D
圖4E是用于描述3D圖5是說(shuō)明輔助信息示例的表格，在其上記錄了與每個(gè)3D圖像的交叉點(diǎn)CP的坐標(biāo)(X, y)相關(guān)聯(lián)的CP量(Δ X)。圖6是說(shuō)明用于創(chuàng)建3D全景圖像和3D全景合成的3D圖像的獲得的操作步驟的流程圖。圖7是說(shuō)明再現(xiàn)3D全景圖像的方法的第一實(shí)施例的流程圖。圖8A是當(dāng)通過(guò)滾動(dòng)和逐幀播放再現(xiàn)3D全景圖像時(shí)的圖像閱覽。圖8B是當(dāng)通過(guò)滾動(dòng)和逐幀播放再現(xiàn)3D全景圖像時(shí)的圖像閱覽。圖9是說(shuō)明再現(xiàn)3D全景圖像的方法的第二實(shí)施例的流程圖。圖10是說(shuō)明再現(xiàn)3D全景圖像的方法的第三實(shí)施例的流程圖。圖11是顯示整個(gè)3D全景圖像的液晶監(jiān)視器的顯示屏的示圖。圖12是說(shuō)明再現(xiàn)3D全景圖像的方法的第四實(shí)施例的流程圖。圖13A是拍攝用于3D全景合成的3D圖像的另一方法的示圖。圖13B是拍攝用于3D全景合成的3D圖像的又一方法的示圖。圖14是用于描述在拍攝用于3D全景合成的3D圖像時(shí)的視角匹配的示圖。
具體實(shí)施方式
下面根據(jù)附圖來(lái)描述根據(jù)本發(fā)明的立體全景圖像創(chuàng)建設(shè)備、方法和程序，立體全景圖像再現(xiàn)設(shè)備、方法和程序，以及記錄介質(zhì)。[立體成像設(shè)備的外觀]圖IA和圖IB是根據(jù)本發(fā)明的實(shí)施例的立體成像設(shè)備的外部示圖。圖IA是從上方沿對(duì)角線方向觀看時(shí)的立體成像設(shè)備I的透視圖，以及圖IB是從后表面觀看時(shí)的立體成像設(shè)備I的透視圖。如圖IA所示，立體成像設(shè)備I設(shè)有左成像單元L和右成像單元R。為進(jìn)行區(qū)分，下文將這些成像單元稱為第一成像單元L和第二成像單元R。第一成像單元L和第二成像單元R并排布置，以便能夠獲得用于立體閱覽的圖像信號(hào)。在這些成像單元L和R處，分別創(chuàng)建左圖像信號(hào)和右圖像信號(hào)。當(dāng)對(duì)圖IA和圖IB的立體成像設(shè)備I的上表面上的電源開關(guān)IOA進(jìn)行操作時(shí)，將拍攝模式撥盤IOB設(shè)置在一定模式下(例如，立體模式)，之后操作快門按鈕10C，在成像單元L和R都創(chuàng)建了用于立體閱覽的圖像數(shù)據(jù)。包括在該實(shí)施例的立體成像設(shè)備I中的快門按鈕IOC具有半按和全按兩種操作模式。在該立體成像設(shè)備I中，當(dāng)半按快門按鈕IOC時(shí)執(zhí)行曝光調(diào)節(jié)和聚焦調(diào)節(jié)，并且當(dāng)全按時(shí)執(zhí)行拍攝。此外，當(dāng)場(chǎng)亮度太暗時(shí)，向?qū)ο蟀l(fā)出閃光的閃光發(fā)出窗口 WD設(shè)置在成像單元L的上方。更進(jìn)一步地，如圖IB所示，立體成像設(shè)備I在背部設(shè)有能夠進(jìn)行三維顯示的液晶監(jiān)視器DISP。在該液晶監(jiān)視器DISP上，被成像單元L和R都捕獲到的同一對(duì)象顯示為立體圖像。需要注意的是，可以應(yīng)用的液晶監(jiān)視器DISP的示例包括使用雙凸透鏡或視差屏障的液晶監(jiān)視器和允許通過(guò)佩戴專用眼鏡(例如偏振眼鏡或液晶快門眼鏡)分別閱覽右圖像和左圖像的液晶監(jiān)視器。更進(jìn)一步地，設(shè)置并布置了諸如變焦開關(guān)10D、菜單/OK按鈕IOE和十字鍵IOF等操作器。在下文中，包括電源開關(guān)10A、拍攝模式撥盤10B、快門按鈕10C、變焦開關(guān)10D、菜單/OK按鈕IOE和十字鍵IOF的操作開關(guān)可以統(tǒng)稱為操作單元10。[立體成像設(shè)備的內(nèi)部結(jié)構(gòu)]圖2是說(shuō)明圖IA和圖IB的立體成像設(shè)備I的內(nèi)部結(jié)構(gòu)的框圖。參照?qǐng)D2，對(duì)立體成像設(shè)備I的內(nèi)部結(jié)構(gòu)進(jìn)行描述。通過(guò)主CPU (中央處理單元)100以集中的方式來(lái)控制該立體成像設(shè)備I的操作。ROM (只讀存儲(chǔ)器)101經(jīng)由總線Bus連接至主CPU 100。在R0M101中，存儲(chǔ)用于操作該立體成像設(shè)備I所需的程序。基于這些程序的進(jìn)程，主CPU 100根據(jù)來(lái)自操作單元10的指令以集中的方式控制該立體成像設(shè)備I的操作。操作單元10的模式撥盤IOB是用于從以下模式中選擇任何一種模式的選擇裝置，這些模式為自動(dòng)拍攝模式；手動(dòng)拍攝模式；人物、風(fēng)景、夜景或其它的場(chǎng)景位置；用于拍攝移動(dòng)圖片的移動(dòng)圖片模式；以及根據(jù)本發(fā)明的立體(3D)全景圖像拍攝模式和3D全景圖像再現(xiàn)模式。此外，操作單元10中未示出的再現(xiàn)按鈕是用于切換至再現(xiàn)模式的按鈕，在再現(xiàn)模式下，拍攝或記錄的靜止圖片或移動(dòng)圖片顯示在液晶監(jiān)視器DISP上。菜單/OK按鈕IOE是既用作菜單按鈕又用作OK按鈕的操作鍵，其中菜單按鈕用于發(fā)出將菜單顯示在液晶監(jiān)視器DISP的屏上的指令，并且OK按鈕用于發(fā)出對(duì)選定項(xiàng)目等進(jìn)行確定和執(zhí)行的指令。十字鍵IOF是用于沿包括上、下、左和右這四個(gè)方向的任何一個(gè)方向輸入指令的操作單元，并
18且用作從菜單屏選擇項(xiàng)目或發(fā)出從每個(gè)菜單選擇各種設(shè)置項(xiàng)目中的任何一個(gè)項(xiàng)目的指令的按鈕(光標(biāo)移動(dòng)操作裝置)。此外，十字鍵IOF上的上/下鍵在拍攝模式時(shí)用作變焦開關(guān)和在再現(xiàn)模式時(shí)用作再現(xiàn)縮放開關(guān)，并且左/右鍵在再現(xiàn)模式時(shí)用作逐幀播放(正向/反向饋送)按鈕。首先，當(dāng)對(duì)圖I所示的操作單元10中的電源開關(guān)IOA進(jìn)行操作時(shí)，主CPU 100控制電源控制單元1001以使來(lái)自電池Bt的電力經(jīng)由電源控制單元1001供給至圖2的每個(gè)單元，由此使該立體成像設(shè)備I轉(zhuǎn)變?yōu)椴僮鳡顟B(tài)。以這種方式，主CPU 100開始拍攝處理。需要注意的是，AF (自動(dòng)聚焦)檢測(cè)單元120、AE/AWB (自動(dòng)曝光/自動(dòng)白平衡)檢測(cè)單元130、圖像輸入控制器114A、數(shù)字信號(hào)處理單元116A和3D圖像創(chuàng)建單元117均被認(rèn)為是由諸如DSP (數(shù)字信號(hào)處理器)等處理器構(gòu)成，并且主CPU 100被認(rèn)為是與這些DSP協(xié)作執(zhí)行各種處理。此處，參照?qǐng)D2描述第一成像單元L和第二成像單元R (上文參照?qǐng)DI所描述的)的內(nèi)部結(jié)構(gòu)。值得注意的是，通過(guò)為第一成像單元L的每個(gè)組成元件提供單詞“第一”并且為第二成像單元R的每個(gè)組成元件提供單詞“第二”來(lái)進(jìn)行描述。第一成像單元L設(shè)有包括第一聚焦鏡頭FLA的第一拍攝光學(xué)系統(tǒng)IlOA ;第一聚焦鏡頭驅(qū)動(dòng)單元(下文稱作第一 F鏡頭驅(qū)動(dòng)單元)104A，其用于沿光軸方向移動(dòng)該第一聚焦鏡頭FLA ;以及第一成像元件111A，其用于接收通過(guò)在第一拍攝光學(xué)系統(tǒng)IlOA中形成對(duì)象圖像而獲得的對(duì)象光并且創(chuàng)建表示該對(duì)象的圖像信號(hào)。該第一拍攝光學(xué)系統(tǒng)IlOA還設(shè)有第一光圈IA以及用于改變?cè)摰谝还馊A的開口直徑的第一光圈驅(qū)動(dòng)單元105A。此外，第一拍攝光學(xué)系統(tǒng)IlOA包括變焦鏡頭ZLA。提供了 Z鏡頭驅(qū)動(dòng)單元103A，用于控制該變焦鏡頭ZLA使得該變焦鏡頭設(shè)置成具有預(yù)定焦距。值得注意的是，在圖2中，用一個(gè)鏡頭ZL示意性地示出了整個(gè)拍攝光學(xué)系統(tǒng)是變焦鏡頭的事實(shí)。另一方面，正如第一成像單元L，第二成像單元R設(shè)有包括第二聚焦鏡頭FLB的拍攝光學(xué)系統(tǒng)；第二聚焦鏡頭驅(qū)動(dòng)單元(下文稱作第二 F鏡頭驅(qū)動(dòng)單元)104B，其用于沿光軸方向移動(dòng)該第二聚焦鏡頭FLB ;以及第二成像元件111B，其用于接收通過(guò)在第二拍攝光學(xué)系統(tǒng)中形成對(duì)象圖像而獲得的對(duì)象光并且創(chuàng)建表示該對(duì)象的圖像信號(hào)。在這些第一成像單元L和第二成像單元R中，創(chuàng)建了用于立體閱覽的圖像信號(hào)。也就是說(shuō)，在第一成像單元L創(chuàng)建了左圖像信號(hào)，并且在第二成像單元R創(chuàng)建了右圖像信號(hào)。第一成像單元L和第二成像單元R具有完全相同的結(jié)構(gòu)，區(qū)別僅在于創(chuàng)建左圖像信號(hào)還是右圖像信號(hào)，兩個(gè)成像單元的圖像信號(hào)分別在第一 A/D轉(zhuǎn)換單元113A和第二 A/D轉(zhuǎn)換單元113B中轉(zhuǎn)換為數(shù)字信號(hào)并且之后被引導(dǎo)至總線Bus后面的信號(hào)處理也是相同的。因此，下面沿著關(guān)于第一成像單元L的圖像信號(hào)的流向來(lái)描述該結(jié)構(gòu)。首先，描述當(dāng)由第一成像單元L捕獲的對(duì)象直接顯示在液晶監(jiān)視器DISP上作為實(shí)時(shí)閱覽圖像(直通圖像)時(shí)的操作。對(duì)操作單元10中的電源開關(guān)IOA進(jìn)行操作之后，主CPU 100控制電源控制單元1001使得來(lái)自電池Bt的電力供給至每個(gè)單元，由此使該立體成像設(shè)備I轉(zhuǎn)變?yōu)椴僮鳡顟B(tài)。主CPU 100首先控制F鏡頭驅(qū)動(dòng)單元104A和光圈驅(qū)動(dòng)單元105A以開始曝光和聚焦調(diào)節(jié)。此外，主CPU 100指示定時(shí)發(fā)生器(TG) 106A以使成像元件IllA通過(guò)電子快門設(shè)置曝光時(shí)間，并且每隔預(yù)定時(shí)間(例如，1/60秒)使圖像信號(hào)從成像元件IllA輸出至模擬信號(hào)處理單元112A。在模擬信號(hào)處理單元112A，當(dāng)從TG 106A接收到定時(shí)信號(hào)的供給并每隔預(yù)計(jì)時(shí)間從成像元件IllA接收到圖像信號(hào)的供給時(shí)，執(zhí)行降噪等處理。之后，經(jīng)過(guò)降噪處理的模擬圖像信號(hào)在下一個(gè)階段被供給至A/D轉(zhuǎn)換單元113A。此外，在該A/D轉(zhuǎn)換單元113A，與來(lái)自TG106A的定時(shí)信號(hào)同步地，在預(yù)定時(shí)間執(zhí)行將模擬信號(hào)轉(zhuǎn)換成數(shù)字信號(hào)的處理。以這種方式，通過(guò)轉(zhuǎn)換獲得并從A/D轉(zhuǎn)換單元113A輸出的數(shù)字圖像信號(hào)在預(yù)定時(shí)間被圖像輸入控制器114A引導(dǎo)至總線Bus。經(jīng)由總線Bus引導(dǎo)的該圖像信號(hào)被存儲(chǔ)在SDRAM (同步動(dòng)態(tài)隨機(jī)存儲(chǔ)器)115中。由于每隔預(yù)定時(shí)間從成像元件IllA輸出圖像信號(hào)，因此每隔預(yù)定時(shí)間重寫該SDRAM 115的內(nèi)容。存儲(chǔ)在該SDRAM 115中的圖像信號(hào)每隔預(yù)定時(shí)間被構(gòu)成AF檢測(cè)單元120、AE/AWB檢測(cè)單元130和數(shù)字信號(hào)處理單元116A的DSP讀取。在AF檢測(cè)單元120，對(duì)于在主CPU 100控制F鏡頭驅(qū)動(dòng)單元104A以使聚焦鏡頭FLA移動(dòng)期間的每個(gè)預(yù)定時(shí)間，對(duì)焦區(qū)域中圖像信號(hào)的高頻分量被提取并被累積以計(jì)算表示圖像對(duì)比度的AF評(píng)估值。主CPU100獲得由AF檢測(cè)單元120計(jì)算的AF評(píng)估值，并且第一聚焦鏡頭FLA通過(guò)F鏡頭驅(qū)動(dòng)單元104A移動(dòng)至鏡頭位置(聚焦位置)，在該鏡頭位置處AF評(píng)估值最大。為此，即使第一成像單元L朝向任何方向，也可以立即調(diào)整焦距，并且聚焦的對(duì)象大致總是顯示在液晶監(jiān)視器DISP上。此外，在AE/AWB檢測(cè)單元130，每隔預(yù)定時(shí)間執(zhí)行對(duì)象亮度的檢測(cè)、和要設(shè)置給數(shù)字信號(hào)處理單元116A中的白平衡放大器的增益的計(jì)算。響應(yīng)于該AE/AWB檢測(cè)單元130的亮度檢測(cè)結(jié)果，主CPU 100控制光圈驅(qū)動(dòng)單元105A以改變光圈IA的開口直徑。此外，在接收到來(lái)自AE/AWB檢測(cè)單元130的檢測(cè)結(jié)果之后，數(shù)字信號(hào)處理單元116A對(duì)白平衡放大器的增益進(jìn)行設(shè)置。在該數(shù)字信號(hào)處理單元116A，執(zhí)行處理使得圖像信號(hào)變得適于顯示。然后，通過(guò)數(shù)字信號(hào)處理單元116A的信號(hào)處理轉(zhuǎn)換成更適于顯示的圖像信號(hào)被供給至3D圖像創(chuàng)建單元117，并且在該3D圖像創(chuàng)建單元117，創(chuàng)建用于顯示的右圖像信號(hào)。創(chuàng)建的右圖像信號(hào)被存儲(chǔ)在VRAM (視頻隨機(jī)存取存儲(chǔ)器)118中。第二成像單元R也以相同的時(shí)序執(zhí)行到目前為止的相同操作。因此，在VRAM 118中，存儲(chǔ)了右和左兩種類型的圖像信號(hào)。主CPU 100將VRAM 118中的右圖像信號(hào)和左圖像信號(hào)傳送至顯示控制單元119以使圖像顯示在液晶監(jiān)視器DISP上。當(dāng)基于右圖像信號(hào)和左圖像信號(hào)的圖像顯示在圖IB的液晶監(jiān)視器DISP上時(shí)，液晶監(jiān)視器DISP上的圖像對(duì)人眼來(lái)說(shuō)看起來(lái)像是立體的。由于每隔預(yù)定時(shí)間從第一成像元件IllA和第二成像元件IllB連續(xù)地輸出圖像信號(hào)，因此每隔預(yù)定時(shí)間重新寫入VRAM 118中的圖像信號(hào)，并且每隔預(yù)定時(shí)間切換液晶監(jiān)視器DISP上的立體圖像，由此使立體圖像顯示為移動(dòng)圖片。此處，當(dāng)參考液晶監(jiān)視器DISP上的對(duì)象且將操作單元10中的快門按鈕IOC半按下時(shí)，由AE/AWB檢測(cè)單元130接收就在完全按下快門按鈕IOC之前檢測(cè)到的AE值，并且第一光圈IA和第二光圈IB分別通過(guò)第一光圈驅(qū)動(dòng)單兀105A和第二光圈驅(qū)動(dòng)單兀105B設(shè)置成具有一定光圈直徑。此外，響應(yīng)于上述半按操作，主CPU 100使AF檢測(cè)單元120計(jì)算AF評(píng)估值，同時(shí)第一聚焦鏡頭FLA和第二聚焦鏡頭FLB通過(guò)第一 F鏡頭驅(qū)動(dòng)單元104A和第二F鏡頭驅(qū)動(dòng)單元104B在預(yù)定搜索范圍內(nèi)移動(dòng)?；谟葾F檢測(cè)單元120計(jì)算的AF評(píng)估值，主CPU 100檢測(cè)AF評(píng)估值變?yōu)樽畲髸r(shí)的第一聚焦鏡頭FLA的鏡頭位置和第二聚焦鏡頭FLB的鏡頭位置，并且將第一聚焦鏡頭FLA和第二聚焦鏡頭FLB分別移動(dòng)至第一鏡頭位置和第二鏡頭位置。然后，當(dāng)快門按鈕IOC被完全按下時(shí)，主CPU 100通過(guò)第一 TG106A和第二 TG 106B使第一成像元件IllA和第二成像元件IllB以預(yù)定快門速度曝光以執(zhí)行靜止圖片的拍攝。主CPU 100在電子快門的關(guān)閉時(shí)刻使圖像信號(hào)從第一成像元件IllA和第二成像元件IllB輸出至第一模擬信號(hào)處理單元112A和第二模擬信號(hào)處理單元112B，由此使第一模擬信號(hào)處理單元112A和第二模擬信號(hào)處理單元112B執(zhí)行降噪處理。在第一 A/D轉(zhuǎn)換單元113A和第二 A/D轉(zhuǎn)換單元113B，模擬圖像信號(hào)被轉(zhuǎn)換成數(shù)字圖像信號(hào)。此處，根據(jù)主CPU 100的指令，第一和第二圖像輸入控制器114A使通過(guò)在第一 A/D轉(zhuǎn)換單元113A和第二 A/D轉(zhuǎn)換單元113B的轉(zhuǎn)換而獲得的數(shù)字圖像信號(hào)經(jīng)由總線Bus —次存儲(chǔ)在SDRAM 115中。然后，數(shù)字信號(hào)處理單元116A和116B讀取SDRAM 115中的圖像信號(hào)，執(zhí)行圖像處理，并且之后將處理結(jié)果發(fā)送至3D圖像創(chuàng)建單元117，其中圖像處理包括白平衡校正、伽瑪校正、對(duì)在與單板CCD (電荷耦合器件)上的濾色片布置相關(guān)聯(lián)的R (紅)、G (綠)、B (藍(lán))以及其它顏色的顏色信號(hào)中的空間偏移進(jìn)行內(nèi)插以使每個(gè)顏色信號(hào)的位置彼此匹配的同步處理、輪廓校正、以及亮度/色差信號(hào)(YC信號(hào))產(chǎn)生。隨后，主CPU 100通過(guò)使用總線Bus將3D圖像創(chuàng)建單元117中的右圖像信號(hào)和左圖像信號(hào)提供至壓縮/解壓?jiǎn)卧?50。主CPU 100使該壓縮/解壓?jiǎn)卧?50對(duì)圖像數(shù)據(jù)進(jìn)行壓縮、然后通過(guò)使用總線Bus將壓縮數(shù)據(jù)傳送至介質(zhì)控制單元，并且將與壓縮和拍攝有關(guān)的頭部信息供給至介質(zhì)控制單元160，以使介質(zhì)控制單元160以預(yù)定格式創(chuàng)建圖像文件(例如，作為3D靜止圖片，MP (多圖片)格式的圖像文件)并且使圖像文件記錄在存儲(chǔ)卡161上。當(dāng)利用操作單元10的模式撥盤IOB選擇3D全景圖像拍攝模式時(shí)，主CPU 100執(zhí)行拍攝3D全景合成所需的多個(gè)立體圖像的處理。另外，3D圖像創(chuàng)建單元117用作根據(jù)3D全景圖像拍攝模式時(shí)拍攝的多個(gè)3D圖像(多個(gè)左圖像和多個(gè)右圖像)創(chuàng)建3D全景圖像的圖像處理單元。需要注意的是，下文進(jìn)一步描述立體成像設(shè)備I在3D全景圖像拍攝模式時(shí)的操作細(xì)節(jié)。對(duì)應(yīng)點(diǎn)檢測(cè)單元170檢測(cè)在各3D圖像(左圖像和右圖像)之間特征匹配的對(duì)應(yīng)點(diǎn)，并且還檢測(cè)在3D全景圖像拍攝模式時(shí)連續(xù)拍攝的先前圖像與后續(xù)圖像之間特征匹配的對(duì)應(yīng)點(diǎn)。前面的對(duì)應(yīng)點(diǎn)檢測(cè)用于計(jì)算圖像偏移量以便在3D全景圖像的視差調(diào)節(jié)時(shí)使用，而后面的對(duì)應(yīng)點(diǎn)檢測(cè)用于在創(chuàng)建3D全景圖像時(shí)計(jì)算光流(平移分量)。需要注意的是，對(duì)應(yīng)點(diǎn)檢測(cè)方法的示例包括通過(guò)使用Harris方案提取特征點(diǎn)并且通過(guò)使用KLT (Kanade LucasTomasi)方法等跟蹤特征點(diǎn)的方法。面部檢測(cè)單元172從直通圖像(through-the-lens image)檢測(cè)人的面部,并且將關(guān)于該面部的位置和尺寸的信息輸出至主CPU100。S卩，面部檢測(cè)單元172包括圖像檢驗(yàn)電路和面部圖像模板。圖像匹配電路在直通圖像的屏幕上移動(dòng)目標(biāo)區(qū)域的位置的同時(shí)對(duì)目標(biāo)區(qū)域中的圖像和面部圖像模板進(jìn)行彼此檢驗(yàn)以看出其間的相互關(guān)系。之后，當(dāng)相互關(guān)系得分超過(guò)預(yù)設(shè)閾值時(shí)，面部檢測(cè)單元172將目標(biāo)區(qū)域識(shí)別為面部區(qū)域。另外，面部檢測(cè)單元172可以從以相似方式從拍攝的圖像上檢測(cè)面部。需要注意的是，其它已知方法中的任何一種可用作面部檢測(cè)方法，例如通過(guò)邊緣檢測(cè)或形狀圖案檢測(cè)的面部檢測(cè)方法以及通過(guò)色相檢測(cè)或膚色檢測(cè)的面部檢測(cè)方法。當(dāng)從面部檢測(cè)單元172獲得表明面部區(qū)域的位置和尺寸的信息時(shí)，主CPU 100可以用直通圖像合成圍繞所獲得的人的面部區(qū)域的面部檢測(cè)框并且使合成結(jié)果顯示在液晶監(jiān)視器DISP上。另外，如上所述檢測(cè)到的面部區(qū)域的位置和尺寸用作聚焦人的面部的AF區(qū)域或者AE區(qū)域，以使人的面部的亮度合適。此外，在每個(gè)3D圖像中檢測(cè)到的面部區(qū)域的位置可以用作將由對(duì)應(yīng)點(diǎn)檢測(cè)單元170檢測(cè)的對(duì)應(yīng)點(diǎn)。需要注意的是，圖2示出閃光燈控制單元180、在接收到來(lái)自閃光燈控制單元180的指令之后從圖IA的閃光發(fā)出窗口 WD發(fā)出閃光的閃光燈181、以及用于檢測(cè)當(dāng)前時(shí)間的計(jì)時(shí)單元W。<獲得用于創(chuàng)建3D全景圖像和3D全景合成的3D圖像>為了拍攝用于3D全景合成的3D圖像，用操作單元10的模式撥盤IOB選擇3D全景圖像拍攝模式。之后，如圖3所示，使立體成像設(shè)備I沿恒定方向搖動(dòng)并且使其執(zhí)行持續(xù)拍攝(連續(xù)拍攝)。在圖3中，CP表示會(huì)聚點(diǎn)(下文稱作交叉點(diǎn))，在該會(huì)聚點(diǎn)處左成像單元L和右成像單元R的光軸交叉，并且Θ是由左成像單元L和右成像單元R的光軸形成的角(會(huì)聚角)。在該立體成像設(shè)備I中，交叉點(diǎn)CP和會(huì)聚角Θ是固定的，并且例如，從立體成像設(shè)備I至交叉點(diǎn)CP的距離近似為2m。然而，通過(guò)使左圖像和右圖像沿水平方向相對(duì)地移位，實(shí)際上可以調(diào)節(jié)至交叉點(diǎn)CP的距離。同時(shí)，交叉點(diǎn)CP上的對(duì)象不具有視差。因此，通過(guò)使左圖像和右圖像相對(duì)地移位使得在左圖像和右圖像之間特征匹配的特定對(duì)應(yīng)點(diǎn)(對(duì)象)的偏移量為零，可以將對(duì)象的視差設(shè)置為零(交叉點(diǎn)CP可以與對(duì)象的距離相匹配)。當(dāng)設(shè)置3D全景圖像拍攝模式時(shí)，主CPU 100執(zhí)行控制使得用于第一 3D圖像的聚焦位置、曝光條件和白平衡增益是固定的，直到預(yù)定數(shù)量的3D圖像的拍攝結(jié)束。當(dāng)3D全景合成所需的預(yù)定數(shù)量的3D圖像的拍攝結(jié)束時(shí)，主CPU100確定用于3D全景合成的3D圖像的拍攝已結(jié)束，并且轉(zhuǎn)換至諸如3D全景合成等的向前處理。圖4A至圖4E是示出3D全景圖像合成的處理序列的示圖。在圖4A中，I至6表示在立體成像設(shè)備I的搖動(dòng)期間拍攝的時(shí)間序列圖像，并且上側(cè)的圖像是左圖像，而下側(cè)的圖像是右圖像。3D圖像創(chuàng)建單元117用作從3D全景圖像拍攝模式時(shí)拍攝的多個(gè)3D圖像創(chuàng)建3D全景圖像的圖像處理單元。在全景合成處理中，根據(jù)由對(duì)應(yīng)點(diǎn)檢測(cè)單元170檢測(cè)到的時(shí)間序列圖像之間的對(duì)應(yīng)點(diǎn)來(lái)計(jì)算光流。在圖4A所示的示例中，計(jì)算相鄰圖像之間的1-2、2-3、3-4、……的光流(平移矢量)，(x，y)= (19，2)，(21,-1), (20,0),……。隨后，如圖4B所示，基于所計(jì)算的(x，y)= (19，2)，(21,-1), (20,0),……的光流(平移矢量)，每個(gè)3D圖像被修剪成條形。之后，順序地合成所修剪出的條形狹縫圖像。即，裁剪距離通過(guò)使平移矢量的水平分量X從圖像中心移位1/2所獲得的位置具有固定寬度w的條形狹縫圖像，并且在豎直方向和水平方向上將這些裁剪的條形狹縫圖像移位平移矢量來(lái)對(duì)這些圖像進(jìn)行合成，如圖4C所示。這樣，3D全景合成完成了。接下來(lái)，在具有進(jìn)行全景合成的左圖像和右圖像的重疊像素的區(qū)域中的圖像均被修剪。在圖4D所示的示例中，從進(jìn)行全景合成的左圖像和右圖像中的每一個(gè)裁剪出最大矩形區(qū)域中的圖像。這些裁剪出的左圖像和右圖像被存儲(chǔ)在存儲(chǔ)卡161中作為3D全景圖像(圖4E)。例如，從兩個(gè)左和右全景圖像生成多圖片文件(MP文件具有耦接在一起的多個(gè)圖像的格式的文件)，并且該MP文件經(jīng)由介質(zhì)控制單元160記錄在存儲(chǔ)卡161中。需要注意的是，這兩個(gè)左和右全景圖像并不受限于存儲(chǔ)在一個(gè)MP文件中，而是可以存儲(chǔ)在單獨(dú)的圖像文件中，只要它們彼此相互關(guān)聯(lián)即可。另外，在由對(duì)應(yīng)點(diǎn)檢測(cè)單元170針對(duì)每個(gè)3D圖像檢測(cè)到的對(duì)應(yīng)點(diǎn)中，主CPU 100指定3D圖像的中心附近的對(duì)應(yīng)點(diǎn)(例如，左圖像的條形狹縫圖像中的特征點(diǎn)以及相應(yīng)右圖像上的對(duì)應(yīng)點(diǎn))，并且計(jì)算這些對(duì)應(yīng)點(diǎn)的偏移量(像素?cái)?shù)量)作為圖像偏移量(下文稱作CP量)。也就是說(shuō)，主CPU 100使如上所述的針對(duì)每個(gè)3D圖像計(jì)算出的CP量與3D全景圖像(左圖像)上的交叉點(diǎn)CP的坐標(biāo)(X，y)相關(guān)聯(lián)，并且將與這些相關(guān)的信息記錄在MP文件等的頭部區(qū)域中作為3D全景圖像的輔助信息。圖5是示出輔助信息的示例的表格，其上記錄了與每個(gè)3D圖像的交叉點(diǎn)CP的坐標(biāo)(X, y)相關(guān)聯(lián)的CP量(Δ X)。圖6是示出如上所述的用于創(chuàng)建3D全景圖像和3D全景合成的3D圖像的獲得的操作程序的流程圖。在圖6中，利用操作單元10的模式撥盤IOB選擇3D全景圖像拍攝模式，然后手持立體成像設(shè)備1，并且隨著沿一定方向搖動(dòng)該設(shè)備而開始拍攝(步驟S10)。主CPU 100判斷是否已拍攝與全景合成所需一樣多的圖像(步驟S12)。如果所需數(shù)量的圖像的拍攝已結(jié)束(“Yes”的情況下)，主CPU 100結(jié)束3D全景圖像拍攝模式下的拍攝。如果所需數(shù)量的圖像的拍攝未結(jié)束(“No”的情況下)，主CPU 100使程序轉(zhuǎn)換至步驟S14。在步驟S14，從拍攝的3D圖像檢測(cè)對(duì)應(yīng)點(diǎn)。也就是說(shuō)，從3D圖像的左圖像的中心附近的一部分提取一個(gè)特征點(diǎn)，并且檢測(cè)右圖像上與該特征點(diǎn)對(duì)應(yīng)的對(duì)應(yīng)點(diǎn)。隨后，計(jì)算作為檢測(cè)到的對(duì)應(yīng)點(diǎn)之間的偏移量的CP量(步驟S16)。針對(duì)每個(gè)獲得的3D圖像存儲(chǔ)計(jì)算出的CP量(步驟S18)。需要注意的是，CP量存儲(chǔ)為與3D全景圖像(左圖像)上的交叉點(diǎn)CP的坐標(biāo)(X，y)相關(guān)聯(lián)，如圖5所示。另外，如參考圖4A至圖4E所述，基于先前的和后續(xù)的3D圖像的光流(平移矢量)從拍攝的3D圖像裁剪條形狹縫圖像，在豎直方向和水平方向上將這些條形狹縫圖像移位達(dá)平移矢量來(lái)對(duì)這些圖像進(jìn)行合成(全景合成)，然后使該程序轉(zhuǎn)換至步驟S12 (步驟S20)。針對(duì)全景合成所需的圖像通過(guò)以上述方式重復(fù)上述步驟S12至步驟S20，創(chuàng)建3D全景圖像并且計(jì)算其輔助信息(例如CP量)，并且將3D全景圖像與輔助信息一起存儲(chǔ)在存儲(chǔ)卡161中。需要注意的是，在圖6中，針對(duì)立體成像設(shè)備I的搖動(dòng)期間拍攝的每個(gè)3D圖像執(zhí)行CP量的計(jì)算和存儲(chǔ)以及全景圖像合成。然而，本發(fā)明并不受限于此。例如，可以拍攝與全景合成所需一樣多的3D圖像，可以將這些3D圖像臨時(shí)存儲(chǔ)在SDRAM 115中，然后針對(duì)每個(gè)3D圖像可以執(zhí)行CP量的計(jì)算、全景合成等?！?D全景圖像的再現(xiàn)>[第一實(shí)施例]接下來(lái)，對(duì)以上述方式存儲(chǔ)在存儲(chǔ)卡161中的3D全景圖像的再現(xiàn)進(jìn)行描述。圖7是示出再現(xiàn)3D全景圖像的方法的第一實(shí)施例的流程圖。在圖7中，用操作單元10的模式撥盤IOB選擇3D全景圖像再現(xiàn)模式，并且開始3D全景圖像的再現(xiàn)(步驟S30)。需要注意的是，在開始再現(xiàn)3D全景圖像時(shí)，從存儲(chǔ)卡161讀取預(yù)定3D全景圖像，并將其臨時(shí)存儲(chǔ)在SDRAM 115中。另外，在第一實(shí)施例中，假定多個(gè)3D圖像中的每一個(gè)的CP量被存儲(chǔ)作為如圖5所示的3D全景圖像的輔助信息。首先，從讀取的3D全景圖像的左端裁剪用于顯示的3D圖像，其中該3D圖像具有的縱橫比等于液晶監(jiān)視器DISP (圖2)的屏幕的縱橫比，并且選擇裁剪出的3D圖像的中心部分(在液晶監(jiān)視器DISP的顯示屏的中心處)的CP量(步驟S32)。在該CP量選擇中，找出待顯示在液晶監(jiān)視器DISP上的3D圖像的中心部分(3D全景圖像的一部分)的3D全景圖像(左圖像上)的位置(X坐標(biāo))，并且選擇(參考圖5)與交叉點(diǎn)CP對(duì)應(yīng)的CP量，其中交叉點(diǎn)CP的X坐標(biāo)最接近所述的X坐標(biāo)。隨后，基于所選擇的CP量，通過(guò)使右圖像相對(duì)左圖像移位該CP量來(lái)執(zhí)行視差調(diào)節(jié)，并且經(jīng)視差調(diào)節(jié)的左和右圖像(3D圖像)顯示在液晶監(jiān)視器DISP上(步驟S34)。之后，判斷是否出現(xiàn)用于滾動(dòng)3D全景圖像的指令或者用于逐幀播放通過(guò)分割3D全景圖像而獲得的多個(gè)幀中的每一幀的指令(步驟S36)。如果出現(xiàn)了滾動(dòng)指令或者逐幀播放指令，則使程序轉(zhuǎn)換至步驟S32。另一方面，如果在預(yù)定時(shí)間段(即，當(dāng)3D全景圖像顯示至其右端結(jié)束時(shí))既未出現(xiàn)滾動(dòng)指令又未出現(xiàn)逐幀播放指令，則讀取的3D全景圖像的再現(xiàn)結(jié)束。需要注意的是，通過(guò)在滾動(dòng)再現(xiàn)時(shí)連續(xù)地生成滾動(dòng)指令或者在逐幀播放再現(xiàn)時(shí)以一定間隔連續(xù)地生成逐幀播放指令，可以自動(dòng)地執(zhí)行滾動(dòng)再現(xiàn)或者逐幀播放再現(xiàn)。當(dāng)基于步驟S32選擇與下一個(gè)滾動(dòng)位置或者幀位置對(duì)應(yīng)的CP量時(shí)，基于選擇的CP量以與上述相似的方式執(zhí)行視差調(diào)節(jié)。圖8A和圖8B是通過(guò)滾動(dòng)和通過(guò)逐幀播放再現(xiàn)3D全景圖像時(shí)的圖像視圖。在圖8A和圖SB中，粗線框表示待顯示在液晶監(jiān)視器DISP上的顯示圖像。如圖8A所示，在通過(guò)滾動(dòng)再現(xiàn)3D全景圖像時(shí)，針對(duì)3D全景圖像的每個(gè)滾動(dòng)位置選擇靠近屏中心的CP量，由此執(zhí)行視差調(diào)節(jié)。如圖SB所示，在通過(guò)逐幀播放再現(xiàn)3D全景圖像時(shí)，為待進(jìn)行逐幀播放的每個(gè)幀選擇靠近屏幕中心的CP量，由此執(zhí)行視差調(diào)節(jié)。由于在通過(guò)滾動(dòng)或者通過(guò)逐幀播放再現(xiàn)3D全景圖像時(shí)基于靠近屏中心的CP量來(lái)執(zhí)行視差調(diào)節(jié)，因此可以將靠近屏幕中心的圖像的視差設(shè)置為零。這樣，明顯影響3D圖像閱覽效果的交叉點(diǎn)部分(左和右圖像之間沒(méi)有視差的部分)總是靠近屏中心，由此在通過(guò)滾動(dòng)或者通過(guò)逐幀播放再現(xiàn)時(shí)使得立體閱覽變得容易。需要注意的是，在上述第一實(shí)施例中通過(guò)滾動(dòng)或逐幀播放自動(dòng)地再現(xiàn)3D全景圖像。然而，本發(fā)明并不受限于此。例如，可以通過(guò)操作單元10的十字鍵IOF的手動(dòng)操作來(lái)執(zhí)行通過(guò)滾動(dòng)或通過(guò)逐幀播放的再現(xiàn)。根據(jù)這一點(diǎn)，在通過(guò)滾動(dòng)或通過(guò)逐幀播放再現(xiàn)3D全景圖像時(shí)，3D全景圖像可以停止在任何滾動(dòng)位置或者幀位置處。
24
另外，當(dāng)通過(guò)手動(dòng)操作執(zhí)行滾動(dòng)再現(xiàn)時(shí)，滾動(dòng)期間基于恰在圖像饋送開始之前的CP量執(zhí)行視差調(diào)節(jié)。于是，當(dāng)圖像饋送停止時(shí)，可以基于靠近停止的屏幕中心的CP量來(lái)執(zhí)行視差調(diào)節(jié)。據(jù)此，可以固定滾動(dòng)期間的視差調(diào)節(jié)，由此減小因視差波動(dòng)而引起的眼疲勞。另外，左圖像和右圖像之間僅一個(gè)圖像(平面(2D)全景圖像)在滾動(dòng)期間顯示在液晶監(jiān)視器DISP上，并且當(dāng)圖像饋送停止時(shí)，可以基于靠近停止的屏幕中心的CP量來(lái)執(zhí)行視差調(diào)節(jié)。[第二實(shí)施例]圖9是示出再現(xiàn)3D全景圖像的方法的第二實(shí)施例的流程圖。第二實(shí)施例涉及一種當(dāng)CP量未作為3D全景圖像的輔助信息存儲(chǔ)時(shí)的再現(xiàn)方法。需要注意的是，與圖7所示的第一實(shí)施例的那些共同的部分具有相同的步驟編號(hào)并且在此不再進(jìn)行詳細(xì)描述。在圖9中，利用操作單元10的模式撥盤IOB選擇3D全景圖像再現(xiàn)模式，并且開始3D全景圖像的再現(xiàn)(步驟S40)。需要注意的是，在開始再現(xiàn)3D全景圖像時(shí)，從存儲(chǔ)卡161讀取預(yù)定3D全景圖像，并將其臨時(shí)存儲(chǔ)在SDRAM 115中，但不存儲(chǔ)CP量。在第二實(shí)施例中，在再現(xiàn)3D全景圖像之前，執(zhí)行CP量的計(jì)算等。S卩，從由存儲(chǔ)卡161讀取的3D全景圖像(左圖像)提取多個(gè)特征點(diǎn)，并且檢測(cè)右圖像上與這些特征點(diǎn)相對(duì)應(yīng)的對(duì)應(yīng)點(diǎn)(步驟S42)。需要注意的是，通過(guò)以下方式提取多個(gè)特征點(diǎn)將3D全景圖像分割成多個(gè)區(qū)域(這些區(qū)域的寬度與創(chuàng)建3D全景圖像時(shí)的條形狹縫圖像的寬度大致相同)并且針對(duì)通過(guò)分割所獲得的每個(gè)區(qū)域提取一個(gè)特征點(diǎn)。隨后，計(jì)算作為在步驟S42檢測(cè)到的對(duì)應(yīng)點(diǎn)之間的偏移量的CP量(步驟S44)，并且該計(jì)算出的CP量與多個(gè)特征點(diǎn)的位置坐標(biāo)相關(guān)聯(lián)被存儲(chǔ)在SDRAM 115中(步驟S46)。之后，以與圖7所示的第一實(shí)施例相似的方式通過(guò)使用CP量來(lái)滾動(dòng)地或者逐幀播放地再現(xiàn)3D全景圖像。需要注意的是，在再現(xiàn)3D全景圖像結(jié)束之后，臨時(shí)存儲(chǔ)在SDRAM115中的CP量可作為輔助信息記錄在MP文件上，其中3D全景圖像存儲(chǔ)在MP文件中。根據(jù)第二實(shí)施例，即使在CP量未作為3D全景圖像的輔助信息存儲(chǔ)的情況下輸入了 3D全景圖像，也可以通過(guò)滾動(dòng)或通過(guò)逐幀播放來(lái)再現(xiàn)針對(duì)每個(gè)滾動(dòng)位置或每個(gè)逐幀播放進(jìn)行了視差調(diào)節(jié)的3D全景圖像。[第三實(shí)施例]圖10是示出再現(xiàn)3D全景圖像的方法的第三實(shí)施例的流程圖。第三實(shí)施例是通過(guò)對(duì)圖7所示的第一實(shí)施例進(jìn)行修改而獲得的，并且與第一實(shí)施例的不同之處在于增加了由單點(diǎn)劃線圍繞的處理。該第三實(shí)施例與第二實(shí)施例不同之處在于整個(gè)3D全景圖像被首先顯示在液晶監(jiān)視器DISP上。在圖10中，當(dāng)利用操作單元10的模式撥盤IOB選擇3D全景圖像再現(xiàn)模式并且開始再現(xiàn)3D全景圖像時(shí)(步驟S10)，選擇從存儲(chǔ)卡161讀取的3D全景圖像的中心部分處的CP量(步驟S50)。隨后，基于選擇的CP量，通過(guò)使右圖像相對(duì)左圖像僅移位該CP量來(lái)執(zhí)行視差調(diào)節(jié)，并且將整個(gè)經(jīng)視差調(diào)節(jié)的3D全景圖像顯示在液晶監(jiān)視器DISP上(步驟S52)。
圖11是顯示整個(gè)3D全景圖像的液晶監(jiān)視器DISP的顯示屏的示圖。接下來(lái)，判斷是否出現(xiàn)通過(guò)滾動(dòng)或通過(guò)逐幀播放等再現(xiàn)3D全景圖像的縮放指令(步驟S54)。當(dāng)未出現(xiàn)縮放指令時(shí)，使該過(guò)程轉(zhuǎn)換至步驟S52，然后顯示整個(gè)3D全景圖像。如果已出現(xiàn)縮放指令，那么使該過(guò)程轉(zhuǎn)換至步驟S32?？s放指令可以在顯示整個(gè)3D全景圖像后的預(yù)定時(shí)間過(guò)去之后自動(dòng)地生成，或者可以基于用戶利用操作單元10輸入的指令生成。如果縮放指令生成并且該過(guò)程轉(zhuǎn)換至步驟S32，則對(duì)3D全景圖像進(jìn)行縮放，并且從經(jīng)縮放的3D全景圖像的左端開始通過(guò)滾動(dòng)或通過(guò)逐幀播放再現(xiàn)3D全景圖像(參照?qǐng)D8A和圖SB)。需要注意的是，當(dāng)通過(guò)滾動(dòng)或通過(guò)逐幀播放再現(xiàn)3D全景圖像時(shí)，如在圖7所示的第一實(shí)施例中所描述的，為每個(gè)滾動(dòng)位置或者每個(gè)逐幀播放選擇CP量，并且通過(guò)使用選擇的CP量來(lái)執(zhí)行視差調(diào)節(jié)。根據(jù)第三實(shí)施例，在辨認(rèn)整個(gè)3D全景圖像之后，然后可以滾動(dòng)地或者進(jìn)行劃分逐幀播放地閱覽經(jīng)縮放的3D全景圖像。需要注意的是，圖9所示的第二實(shí)施例可以改型成使得與上述第三實(shí)施例一樣首先將整個(gè)3D全景圖像顯示在液晶監(jiān)視器DISP上。在該情況下，在整個(gè)3D全景圖像顯示在液晶監(jiān)視器DISP上的時(shí)間段期間可以執(zhí)行CP量的計(jì)算等。另外，當(dāng)整個(gè)3D全景圖像顯示在液晶監(jiān)視器DISP上時(shí)，可以利用預(yù)設(shè)CP量(包括CP量=0)來(lái)執(zhí)行視差調(diào)節(jié)。另外，通過(guò)滾動(dòng)或通過(guò)分割出的逐幀播放再現(xiàn)3D全景圖像時(shí)的縮放倍率優(yōu)選地為使3D全景圖像在縱向上的寬度與液晶監(jiān)視器DISP在縱向上的寬度一致的倍率。然而，本發(fā)明的范圍并不受限于該倍率。例如，可以通過(guò)手動(dòng)縮放操作適當(dāng)?shù)卣{(diào)節(jié)倍率。〈CP量計(jì)算的其它實(shí)施例>在圖6所示的實(shí)施例中，針對(duì)用于全景合成的每個(gè)3D圖像從靠近該3D圖像的中心的對(duì)應(yīng)點(diǎn)計(jì)算CP量。在3D全景圖像的CP量計(jì)算的另一個(gè)實(shí)施例中，在3D全景圖像中檢測(cè)多個(gè)主要對(duì)象，計(jì)算每個(gè)對(duì)象的左和右全景圖像之間的偏移量并且將其作為CP量。作為檢測(cè)主要對(duì)象的檢測(cè)裝置，可以使用圖2所示的面部檢測(cè)單元172。據(jù)此，根據(jù)包括在3D全景圖像中的每個(gè)面部圖像計(jì)算CP量，并且將CP量存儲(chǔ)為與3D全景圖像(左圖像)上的每個(gè)面部圖像的位置相關(guān)聯(lián)。另外，除了人的面部之外，諸如建筑物和墻壁等人工建筑以及諸如樹木和森林等的自然物也可以考慮用作3D全景圖像中的主要對(duì)象?？梢酝ㄟ^(guò)已知的物體識(shí)別技術(shù)(例如，與每個(gè)物體的字典數(shù)據(jù)相匹配)來(lái)檢測(cè)這些人工建筑以及諸如木頭和森林的自然物。因此，通過(guò)向立體成像設(shè)備I提供物體檢測(cè)裝置(包括面部檢測(cè)單元172)，可以針對(duì)主要對(duì)象(諸如臉部、人工建筑和自然物等物體)中的每一個(gè)計(jì)算CP量并且將其存儲(chǔ)。[第四實(shí)施例]圖12是示出再現(xiàn)3D全景圖像的方法的第四實(shí)施例的流程圖。需要注意的是，與圖7所示的第一實(shí)施例的那些共同的部分具有相同的步驟編號(hào)并且在本文中不再進(jìn)行詳細(xì)描述。在圖12中，利用操作單元10的模式撥盤IOB選擇3D全景圖像再現(xiàn)模式，并且開始3D全景圖像的再現(xiàn)(步驟S30’)。需要注意的是，在開始再現(xiàn)3D全景圖像時(shí)，從存儲(chǔ)卡161讀取預(yù)定3D全景圖像，并將其臨時(shí)存儲(chǔ)在SDRAM 115中。另外，在第四實(shí)施例中，假定
26CN 102918858 A
書
明
說(shuō)
18/19 頁(yè)
針對(duì)3D全景圖像中的每個(gè)物體將CP量作為3D全景圖像的輔助信息進(jìn)行存儲(chǔ)。當(dāng)開始再現(xiàn)3D全景圖像時(shí)，選擇顯示在液晶監(jiān)視器DISP (圖2)上的3D圖像(3D全景圖像的一部分)中與最靠近顯示單元的中心的物體相對(duì)應(yīng)的CP量(步驟S60)。然后，以與圖7所示的第一實(shí)施例相似的方式通過(guò)滾動(dòng)或通過(guò)逐幀播放再現(xiàn)利用CP量進(jìn)行了視差調(diào)節(jié)的3D全景圖像。根據(jù)第四實(shí)施例，當(dāng)通過(guò)滾動(dòng)或通過(guò)逐幀播放再現(xiàn)3D全景圖像時(shí)，執(zhí)行視差調(diào)節(jié)使得最靠近顯示單元的中心的物體與交叉點(diǎn)重合。為此，在通過(guò)滾動(dòng)或通過(guò)逐幀播放再現(xiàn)時(shí)可以容易地立體閱覽3D全景圖像中的物體(主要對(duì)象)。需要注意的是，在第四實(shí)施例中選擇與最靠近液晶監(jiān)視器DISP的顯示單元的中心的物體相對(duì)應(yīng)的CP量。然而，本發(fā)明并不受限于此。例如，可以為每種類型的物體預(yù)先確定優(yōu)先等級(jí)(例如，按照面部一建筑物一其它的順序)，并且當(dāng)多個(gè)不同類型的物體出現(xiàn)在顯示屏幕上時(shí)，可以選擇與具有最高優(yōu)先等級(jí)的物體相對(duì)應(yīng)的CP量。在這種情況下，關(guān)于物體類型的信息也需要存儲(chǔ)成與CP量相關(guān)聯(lián)?！从糜?D全景圖像和3D全景合成的3D圖像的獲得的其它實(shí)施例>如圖3和圖4A至圖4E所示，為了拍攝用于3D全景合成的3D圖像，沿恒定方向搖動(dòng)立體成像設(shè)備I并且使其執(zhí)行持續(xù)拍攝(連續(xù)拍攝)。然而，本發(fā)明并不受限于此。例如，可以如圖13A和圖13B所不地執(zhí)彳丁拍攝。S卩，如圖13A和圖13B所示，由立體成像設(shè)備I拍攝第一 3D圖像(圖13A)。當(dāng)設(shè)置了 3D全景圖像拍攝模式時(shí)，主CPU 100執(zhí)行控制使得用于第一 3D圖像的聚焦位置、曝光條件和白平衡增益固定，直到預(yù)定數(shù)量的3D圖像的后續(xù)拍攝結(jié)束。當(dāng)?shù)谝?3D圖像的拍攝結(jié)束時(shí)，攝影師搖動(dòng)(搖攝)立體成像設(shè)備I以改變拍攝方向，從而拍攝第二 3D圖像(圖13B)。此處，如圖14所示，攝影師通過(guò)調(diào)節(jié)立體成像設(shè)備I的拍攝方向使得第一 3D圖像和第二 3D圖像彼此部分地重疊來(lái)進(jìn)行拍攝。在3D全景圖像拍攝模式時(shí)，主CPU 100優(yōu)選地使先前拍攝的3D圖像的一部分顯示在液晶監(jiān)視器DISP上以幫助確定下一次拍攝的拍攝方向。即，攝影師可以通過(guò)閱覽先前拍攝并顯示在液晶監(jiān)視器DISP上的3D圖像的一部分以及直通圖像來(lái)確定拍攝方向。當(dāng)預(yù)設(shè)或默認(rèn)設(shè)置數(shù)量的3D圖像的拍攝結(jié)束時(shí)，主CPU 100確定用于3D全景合成的3D圖像的拍攝已結(jié)束，并且使該過(guò)程轉(zhuǎn)換到3D全景合成的后續(xù)處理。需要注意的是，任何已知技術(shù)可用作從如上所述獲得的多個(gè)3D圖像合成3D全景圖像的全景合成方法。 [其它]在圖6所示的實(shí)施例中，針對(duì)連續(xù)獲得的3D圖像中的每一個(gè)提取靠近左圖像的中心的一個(gè)特征點(diǎn)，并且檢測(cè)右圖像上與該特征點(diǎn)對(duì)應(yīng)的對(duì)應(yīng)點(diǎn)。通過(guò)這些檢測(cè)到的對(duì)應(yīng)點(diǎn)之間的偏移量計(jì)算CP量。然而，取決于拍攝場(chǎng)景，在某些情況下不能提取靠近左圖像中心的區(qū)域中的適于檢測(cè)對(duì)應(yīng)點(diǎn)的特征點(diǎn)。在這種情況下，將預(yù)設(shè)CP量(包括CP量=0)、通過(guò)在相鄰CP量之間進(jìn)行內(nèi)插得到的CP量等看作用于該3D圖像的CP量。另外，當(dāng)通過(guò)滾動(dòng)再現(xiàn)3D全景圖像時(shí)，為了允許針對(duì)每個(gè)滾動(dòng)位置進(jìn)行視差調(diào)節(jié)，可以基于計(jì)算出的多個(gè)CP量通過(guò)內(nèi)插(線性內(nèi)插)得到與每個(gè)滾動(dòng)位置相對(duì)應(yīng)的CP量，并且還可以記錄這些CP量。
27
此外，同樣當(dāng)針對(duì)3D全景圖像中的每個(gè)物體計(jì)算CP量時(shí)，可以通過(guò)內(nèi)插計(jì)算得到物體之間的CP量，并且可以記錄這些CP量。更進(jìn)一步地，在本實(shí)施例中，可以得到在左圖像和右圖像之間特征匹配的特定對(duì)應(yīng)點(diǎn)(對(duì)象)的偏移量為零的情況下的CP量(圖像偏移量)。然而，本發(fā)明并不受限于對(duì)應(yīng)點(diǎn)的偏移量設(shè)置為零的情況。例如，可以得到圖像偏移量，以實(shí)現(xiàn)預(yù)定視差量(使目標(biāo)對(duì)象略微向前彈出的視差量)。更進(jìn)一步地，可以由用戶適當(dāng)?shù)卦O(shè)置該預(yù)定視差量。針對(duì)每個(gè)滾動(dòng)量通過(guò)如上所述的內(nèi)插來(lái)得到CP量，當(dāng)通過(guò)滾動(dòng)再現(xiàn)3D全景圖像時(shí)，通過(guò)內(nèi)插計(jì)算獲得的CP量可用于連續(xù)地執(zhí)行視差調(diào)節(jié)。另外，盡管該立體成像設(shè)備I使3D全景圖像顯示在后表面上的液晶監(jiān)視器DISP上，設(shè)備I可以包括用于使3D全景圖像顯示在外部3D顯示器上的輸出接口。此外，可以由諸如不帶拍攝功能的個(gè)人計(jì)算機(jī)配置3D全景圖像創(chuàng)建設(shè)備和3D全景圖像再現(xiàn)設(shè)備。在這種情況下，由一般立體成像設(shè)備拍攝的用于3D全景合成的多個(gè)3D圖像被看作輸入圖像。更進(jìn)一步地，通過(guò)將根據(jù)本發(fā)明的全景圖像創(chuàng)建程序和全景圖像再現(xiàn)程序經(jīng)由存儲(chǔ)有這些程序的記錄介質(zhì)安裝在計(jì)算機(jī)上，可以使計(jì)算機(jī)起到3D全景圖像創(chuàng)建設(shè)備或3D全景圖像再現(xiàn)設(shè)備的作用。另外，本發(fā)明并不受限于上述實(shí)施例，并且在不背離本發(fā)明的精神的范圍內(nèi)可以進(jìn)行各種變型，例如通過(guò)適當(dāng)?shù)亟M合這些實(shí)施例。{附圖標(biāo)記列表}I……立體成像設(shè)備；10……操作單元；100……主CPU ；101……ROM； 102.......決閃
ROM ；110A......第一成像光學(xué)系統(tǒng)；110B......第二成像光學(xué)系統(tǒng)；111A......第一成像兀件；
IllB……第二成像元件；115……SDRAM ;117……3D圖像創(chuàng)建單元；119……顯示控制單元；160……介質(zhì)控制單元；161……存儲(chǔ)卡；170……對(duì)應(yīng)點(diǎn)檢測(cè)單元；172……面部檢測(cè)單元;L……第一成像單元；R……第二成像單元；以及DISP……液晶監(jiān)控器
權(quán)利要求
1.一種立體全景圖像創(chuàng)建設(shè)備，包括立體圖像獲得裝置，其配置成獲得由通過(guò)立體成像設(shè)備拍攝的左圖像和右圖像形成的多個(gè)立體圖像，這些立體圖像是所述立體成像設(shè)備沿恒定方向搖動(dòng)時(shí)連續(xù)拍攝的；立體全景圖像創(chuàng)建裝置，其配置成通過(guò)從由所述立體圖像獲得裝置獲得的所述多個(gè)立體圖像中將所述左圖像合成在一起且將所述右圖像合成在一起來(lái)創(chuàng)建由左全景圖像和右全景圖像形成的立體全景圖像；對(duì)應(yīng)點(diǎn)檢測(cè)裝置，其配置成檢測(cè)用于視差調(diào)節(jié)的多個(gè)對(duì)應(yīng)點(diǎn)，所述多個(gè)對(duì)應(yīng)點(diǎn)具有在由所述立體圖像獲得裝置獲得的所述多個(gè)立體圖像的左圖像和右圖像之間匹配的特征或者在所創(chuàng)建的立體全景圖像的左全景圖像和右全景圖像之間匹配的特征；圖像偏移量計(jì)算裝置，其配置成計(jì)算用于將所檢測(cè)到的多個(gè)對(duì)應(yīng)點(diǎn)的視差均設(shè)置為預(yù)定視差量的多個(gè)圖像偏移量；以及記錄裝置，其配置成在記錄介質(zhì)中記錄所創(chuàng)建的立體全景圖像，所述記錄裝置配置成將所述立體全景圖像上用于視差調(diào)節(jié)的所述多個(gè)對(duì)應(yīng)點(diǎn)的位置信息和所計(jì)算出的多個(gè)圖像偏移量彼此相關(guān)聯(lián)地記錄在所述記錄介質(zhì)中作為所述立體全景圖像的輔助信息。
2.根據(jù)權(quán)利要求I所述的立體全景圖像創(chuàng)建設(shè)備，其中所述對(duì)應(yīng)點(diǎn)檢測(cè)裝置針對(duì)由所述立體圖像獲得裝置獲得的所述多個(gè)立體圖像中的每一個(gè)立體圖像的每一組左圖像和右圖像來(lái)檢測(cè)一組對(duì)應(yīng)點(diǎn)，以及所述圖像偏移量計(jì)算裝置計(jì)算所述多個(gè)圖像偏移量，這些圖像偏移量中的每個(gè)圖像偏移量用于將所檢測(cè)到的對(duì)應(yīng)點(diǎn)之間的視差設(shè)置為所述預(yù)定視差量。
3.根據(jù)權(quán)利要求2所述的立體全景圖像創(chuàng)建設(shè)備，其中所述對(duì)應(yīng)點(diǎn)檢測(cè)裝置在靠近所述立體圖像中心的部分中檢測(cè)針對(duì)所述立體圖像中的每一個(gè)立體圖像的每一組左圖像和右圖像的所述一組對(duì)應(yīng)點(diǎn)。
4.根據(jù)權(quán)利要求3所述的立體全景圖像創(chuàng)建設(shè)備，其中當(dāng)所述對(duì)應(yīng)點(diǎn)檢測(cè)裝置未在靠近所述立體圖像中心的部分中檢測(cè)到所需對(duì)應(yīng)點(diǎn)時(shí)，所述圖像偏移量計(jì)算裝置將預(yù)先設(shè)置的圖像偏移量設(shè)置為計(jì)算值，或者所述圖像偏移量計(jì)算裝置通過(guò)在相鄰圖像偏移量之間進(jìn)行內(nèi)插來(lái)計(jì)算所述圖像偏移量。
5.根據(jù)權(quán)利要求I至4中任一項(xiàng)所述的立體全景圖像創(chuàng)建設(shè)備，其中所述立體全景圖像創(chuàng)建裝置通過(guò)將多個(gè)狹縫圖像拼合在一起來(lái)創(chuàng)建所述立體全景圖像，其中每個(gè)狹縫圖像呈條形，所述多個(gè)狹縫圖像位于由所述立體圖像獲得裝置獲得的所述多個(gè)立體圖像中靠近中心的部分中。
6.根據(jù)權(quán)利要求I所述的立體全景圖像創(chuàng)建設(shè)備，還包括物體檢測(cè)裝置，其配置成檢測(cè)包括在由所述立體圖像獲得裝置獲得的所述多個(gè)立體圖像或者包括在所創(chuàng)建的立體全景圖像中的所需物體，其中所述對(duì)應(yīng)點(diǎn)檢測(cè)裝置檢測(cè)針對(duì)由所述物體檢測(cè)裝置檢測(cè)到的每個(gè)物體的對(duì)應(yīng)點(diǎn)。
7.根據(jù)權(quán)利要求I至6中任一項(xiàng)所述的立體全景圖像創(chuàng)建設(shè)備，還包括內(nèi)插計(jì)算裝置，其配置成基于由所述圖像偏移量計(jì)算裝置計(jì)算出的所述多個(gè)圖像偏移量、通過(guò)在所述對(duì)應(yīng)點(diǎn)之間內(nèi)插像素偏移量來(lái)計(jì)算連續(xù)的像素偏移量，其中所述記錄裝置將由所述圖像偏移量計(jì)算裝置計(jì)算出的所述多個(gè)圖像偏移量和由所述內(nèi)插計(jì)算裝置計(jì)算出的所述圖像偏移量記錄在所述記錄介質(zhì)中。2
8.根據(jù)權(quán)利要求I至6中任一項(xiàng)所述的立體全景圖像創(chuàng)建設(shè)備，其中所述預(yù)定視差量為零。
9.一種立體全景圖像再現(xiàn)設(shè)備，包括讀取裝置，其配置成從根據(jù)權(quán)利要求I至8中任一項(xiàng)的所述記錄介質(zhì)讀取立體全景圖像和所述立體全景圖像的輔助信息；再現(xiàn)裝置，其配置成以預(yù)定倍率放大所讀取的立體全景圖像，所述再現(xiàn)裝置配置成自動(dòng)地或者根據(jù)手動(dòng)指令輸入來(lái)以在立體顯示器上滾動(dòng)的方式再現(xiàn)、或者以針對(duì)通過(guò)分割所述立體全景圖像而獲得的多個(gè)幀中的每一幀進(jìn)行逐幀播放的方式再現(xiàn)經(jīng)過(guò)放大的立體全景圖像；以及視差調(diào)節(jié)裝置，其配置成從作為所述立體全景圖像的輔助信息而記錄的多個(gè)圖像偏移量中選擇一個(gè)圖像偏移量，該圖像偏移量對(duì)應(yīng)于所述立體顯示器的屏幕中的立體圖像，所述視差調(diào)節(jié)裝置配置成當(dāng)所述立體全景圖像由所述再現(xiàn)裝置通過(guò)滾動(dòng)或逐幀播放的方式進(jìn)行再現(xiàn)時(shí)基于所選擇的圖像偏移量進(jìn)行所述立體圖像的視差調(diào)節(jié)。
10.一種立體全景圖像再現(xiàn)設(shè)備，包括立體全景圖像獲得裝置，其配置成獲得由左全景圖像和右全景圖像形成的立體全景圖對(duì)應(yīng)點(diǎn)檢測(cè)裝置，其配置成在再現(xiàn)所獲得的立體全景圖像之前檢測(cè)所述立體全景圖像中用于視差調(diào)節(jié)的多個(gè)對(duì)應(yīng)點(diǎn)，所述多個(gè)對(duì)應(yīng)點(diǎn)具有在所述左全景圖像和所述右全景圖像之間匹配的特征；圖像偏移量計(jì)算裝置，其配置成計(jì)算用于將所檢測(cè)到的多個(gè)對(duì)應(yīng)點(diǎn)的視差均設(shè)置為預(yù)定視差量的多個(gè)圖像偏移量；存儲(chǔ)裝置，其配置成將所述立體全景圖像上用于視差調(diào)節(jié)的所述多個(gè)對(duì)應(yīng)點(diǎn)的位置信息和所計(jì)算出的多個(gè)圖像偏移量彼此相關(guān)聯(lián)地進(jìn)行存儲(chǔ)；再現(xiàn)裝置，其配置成以預(yù)定倍率放大所獲得的立體全景圖像，所述再現(xiàn)裝置配置成自動(dòng)地或者根據(jù)手動(dòng)指令輸入來(lái)以在立體顯示器上滾動(dòng)的方式再現(xiàn)、或者以針對(duì)通過(guò)分割所述立體全景圖像而獲得的多個(gè)幀中的每一幀進(jìn)行逐幀播放的方式再現(xiàn)所放大的立體全景圖像；以及視差調(diào)節(jié)裝置，其配置成從相應(yīng)于所述立體全景圖像存儲(chǔ)在所示存儲(chǔ)裝置中的多個(gè)圖像偏移量中選擇一個(gè)圖像偏移量，該圖像偏移量對(duì)應(yīng)于所述立體顯示器的屏幕中的立體圖像，所述視差調(diào)節(jié)裝置配置成當(dāng)所述立體全景圖像由所述再現(xiàn)裝置通過(guò)滾動(dòng)或逐幀播放的方式進(jìn)行再現(xiàn)時(shí)基于所選擇的圖像偏移量進(jìn)行所述立體圖像的視差調(diào)節(jié)。
11.根據(jù)權(quán)利要求10所述的立體全景圖像再現(xiàn)設(shè)備，其中所述對(duì)應(yīng)點(diǎn)檢測(cè)裝置檢測(cè)針對(duì)通過(guò)分割所述全景圖像而獲得的均呈條形的多個(gè)狹縫圖像中的每一個(gè)狹縫圖像的一組對(duì)應(yīng)點(diǎn)。
12.根據(jù)權(quán)利要求11所述的立體全景圖像再現(xiàn)設(shè)備，其中當(dāng)所述對(duì)應(yīng)點(diǎn)檢測(cè)裝置未在靠近所述立體圖像中心的部分中檢測(cè)到所需對(duì)應(yīng)點(diǎn)時(shí)，所述圖像偏移量計(jì)算裝置將預(yù)先設(shè)置的圖像偏移量設(shè)置為計(jì)算值，或者所述圖像偏移量計(jì)算裝置通過(guò)在相鄰圖像偏移量之間進(jìn)行內(nèi)插來(lái)計(jì)算所述圖像偏移量。
13.根據(jù)權(quán)利要求10所述的立體全景圖像再現(xiàn)設(shè)備，還包括物體檢測(cè)裝置，其配置成檢測(cè)包括在所獲得的立體全景圖像中的所需物體，其中所述對(duì)應(yīng)點(diǎn)檢測(cè)裝置檢測(cè)針對(duì)由所述物體檢測(cè)裝置檢測(cè)到的每個(gè)物體的對(duì)應(yīng)點(diǎn)。
14.根據(jù)權(quán)利要求10至13中任一項(xiàng)所述的立體全景圖像再現(xiàn)設(shè)備，還包括內(nèi)插計(jì)算裝置，其配置成基于由所述圖像偏移量計(jì)算裝置計(jì)算出的所述多個(gè)圖像偏移量、通過(guò)在所述對(duì)應(yīng)點(diǎn)之間內(nèi)插像素偏移量來(lái)計(jì)算連續(xù)的像素偏移量，其中所述存儲(chǔ)裝置存儲(chǔ)由所述圖像偏移量計(jì)算裝置計(jì)算出的多個(gè)圖像偏移量和由所述內(nèi)插計(jì)算裝置計(jì)算出的圖像偏移量。
15.根據(jù)權(quán)利要求10至14中任一項(xiàng)所述的立體全景圖像再現(xiàn)設(shè)備，其中所述預(yù)定視差量為零。
16.根據(jù)權(quán)利要求9至15中任一項(xiàng)所述的立體全景圖像再現(xiàn)設(shè)備，其中所述視差調(diào)節(jié)裝置選擇所述立體顯示器的屏幕中心處的或者在最靠近所述屏幕中心的部分中的圖像偏移量，并且基于所選擇的圖像偏移量進(jìn)行所述立體圖像的視差調(diào)節(jié)。
17.根據(jù)權(quán)利要求9至16中任一項(xiàng)所述的立體全景圖像再現(xiàn)設(shè)備，其中當(dāng)所述再現(xiàn)裝置根據(jù)手動(dòng)指令輸入通過(guò)滾動(dòng)方式再現(xiàn)所述立體全景圖像時(shí)，所述視差調(diào)節(jié)裝置在停止?jié)L動(dòng)之前選擇與在根據(jù)手動(dòng)指令輸入開始滾動(dòng)時(shí)顯示在所述立體顯示器的屏幕中的立體圖像相對(duì)應(yīng)的一個(gè)圖像偏移量，并且當(dāng)滾動(dòng)停止時(shí)，所述視差調(diào)節(jié)裝置選擇與停止?jié)L動(dòng)時(shí)顯示在所述立體顯示器的所述屏幕中的立體圖像相對(duì)應(yīng)的一個(gè)圖像偏移量，并且基于所選擇的圖像偏移量進(jìn)行所述立體圖像的視差調(diào)節(jié)。
18.根據(jù)權(quán)利要求9至16中任一項(xiàng)所述的立體全景圖像再現(xiàn)設(shè)備，其中所述再現(xiàn)裝置在根據(jù)手動(dòng)指令輸入以滾動(dòng)方式進(jìn)行再現(xiàn)的滾動(dòng)期間僅僅使所述左圖像和所述右圖像中的一個(gè)圖像顯示在所述立體顯示器上，并且當(dāng)滾動(dòng)停止時(shí)使所述立體圖像顯示在所述立體顯示器上，以及在停止?jié)L動(dòng)時(shí)，所述視差調(diào)節(jié)裝置選擇與在停止?jié)L動(dòng)時(shí)顯示在所述立體顯示器的屏幕中的所述立體圖像相對(duì)應(yīng)的一個(gè)圖像偏移量，并且基于所選擇的圖像偏移量進(jìn)行所述立體圖像的視差調(diào)節(jié)。
19.根據(jù)權(quán)利要求9至18中任一項(xiàng)所述的立體全景圖像再現(xiàn)設(shè)備，其中所述再現(xiàn)裝置使整個(gè)立體全景圖像顯示在所述立體顯示器上，然后以預(yù)定倍率放大所述立體全景圖像并且通過(guò)滾動(dòng)或逐幀播放的方式回放所述立體全景圖像。
20.—種立體全景圖像創(chuàng)建方法，包括立體圖像獲得步驟，用于獲得由通過(guò)立體成像設(shè)備拍攝的左圖像和右圖像形成的多個(gè)立體圖像，這些立體圖像是所述立體成像設(shè)備沿恒定方向搖動(dòng)時(shí)連續(xù)拍攝的；立體全景圖像創(chuàng)建步驟，用于通過(guò)從所獲得的多個(gè)立體圖像中將所述左圖像合成在一起且將所述右圖像合成在一起來(lái)創(chuàng)建由左全景圖像和右全景圖像形成的立體全景圖像；對(duì)應(yīng)點(diǎn)檢測(cè)步驟，用于檢測(cè)用于視差調(diào)節(jié)的多個(gè)對(duì)應(yīng)點(diǎn)，所述多個(gè)對(duì)應(yīng)點(diǎn)具有在所獲得的多個(gè)立體圖像的左圖像和右圖像之間匹配的特征或者在所創(chuàng)建的立體全景圖像的左全景圖像和右全景圖像之間匹配的特征；圖像偏移量計(jì)算步驟，用于計(jì)算用于將所檢測(cè)到的多個(gè)對(duì)應(yīng)點(diǎn)的視差均設(shè)置在預(yù)定視差量的多個(gè)圖像偏移量；以及記錄步驟，用于將所創(chuàng)建的立體全景圖像記錄在記錄介質(zhì)中，并且將所述立體全景圖像上用于視差調(diào)節(jié)的所述多個(gè)對(duì)應(yīng)點(diǎn)的位置信息和所計(jì)算出的多個(gè)圖像偏移量彼此相關(guān)聯(lián)地記錄在所述記錄介質(zhì)中作為所述立體全景圖像的輔助信息。
21.根據(jù)權(quán)利要求20所述的立體全景圖像創(chuàng)建方法，其中在所述對(duì)應(yīng)點(diǎn)檢測(cè)步驟中，針對(duì)所獲得的立體圖像中的每一個(gè)立體圖像的每一組左圖像和右圖像來(lái)檢測(cè)一組對(duì)應(yīng)點(diǎn)，以及 在所述圖像偏移量計(jì)算步驟中，從針對(duì)所述立體圖像中的每一個(gè)立體圖像而檢測(cè)到的對(duì)應(yīng)點(diǎn)中指定一組對(duì)應(yīng)點(diǎn)，并且計(jì)算均用于將所述對(duì)應(yīng)點(diǎn)之間的視差設(shè)置為所述預(yù)定視差量的所述多個(gè)圖像偏移量。
22.根據(jù)權(quán)利要求21所述的立體全景圖像創(chuàng)建方法，其中在所述對(duì)應(yīng)點(diǎn)檢測(cè)步驟中，在靠近所述立體圖像中心的部分中檢測(cè)針對(duì)所述立體圖像中的每一個(gè)立體圖像的每一組左圖像和右圖像的一組對(duì)應(yīng)點(diǎn)。
23.根據(jù)權(quán)利要求22所述的立體全景圖像創(chuàng)建方法，其中當(dāng)在所述對(duì)應(yīng)點(diǎn)檢測(cè)步驟中未在靠近所述立體圖像中心的部分中檢測(cè)到所需對(duì)應(yīng)點(diǎn)時(shí)，預(yù)先設(shè)置的圖像偏移量被設(shè)置作為計(jì)算值，或者在所述圖像偏移量計(jì)算步驟中通過(guò)在相鄰圖像偏移量之間進(jìn)行內(nèi)插來(lái)計(jì)算所述圖像偏移量。
24.根據(jù)權(quán)利要求20至23中任一項(xiàng)所述的立體全景圖像創(chuàng)建方法，其中在所述立體全景圖像創(chuàng)建步驟中，通過(guò)將多個(gè)狹縫圖像拼合在一起來(lái)創(chuàng)建所述立體全景圖像，其中每個(gè)狹縫圖像均呈條形，所述多個(gè)狹縫圖像位于所獲得的多個(gè)立體圖像中靠近中心的部分中。
25.根據(jù)權(quán)利要求20所述的立體全景圖像創(chuàng)建方法，還包括物體檢測(cè)步驟，用于檢測(cè)包括在所獲得的多個(gè)立體圖像或所創(chuàng)建的立體全景圖像中的所需物體，其中在所述對(duì)應(yīng)點(diǎn)檢測(cè)步驟中，檢測(cè)針對(duì)由所述物體檢測(cè)裝置檢測(cè)到的每個(gè)物體的對(duì)應(yīng)
26.根據(jù)權(quán)利要求20至25中任一項(xiàng)所述的立體全景圖像創(chuàng)建方法，還包括內(nèi)插計(jì)算步驟，用于基于在所述圖像偏移量計(jì)算步驟中計(jì)算出的所述多個(gè)圖像偏移量、通過(guò)在所述對(duì)應(yīng)點(diǎn)之間內(nèi)插像素偏移量來(lái)計(jì)算連續(xù)的像素偏移量，其中在所述記錄步驟中，在所述圖像偏移量計(jì)算步驟中計(jì)算出的多個(gè)圖像偏移量和在所述內(nèi)插計(jì)算步驟中計(jì)算出的多個(gè)圖像偏移量被記錄在所述記錄介質(zhì)中。
27.根據(jù)權(quán)利要求20至25中任一項(xiàng)所述的立體全景圖像創(chuàng)建方法，其中所述預(yù)定視差量為零。
28.—種立體全景圖像再現(xiàn)方法，包括讀取步驟，用于從根據(jù)權(quán)利要求20至27中任一項(xiàng)的所述記錄介質(zhì)讀取立體全景圖像和所述立體全景圖像的輔助信息；再現(xiàn)步驟，用于以預(yù)定倍率放大所讀取的立體全景圖像，并且自動(dòng)地或者根據(jù)手動(dòng)指令輸入來(lái)以在立體顯示器上滾動(dòng)的方式再現(xiàn)、或者以針對(duì)通過(guò)分割所述立體全景圖像而獲得的多個(gè)幀中的每一幀進(jìn)行逐幀播放的方式再現(xiàn)所放大的立體全景圖像；以及視差調(diào)節(jié)步驟，用于從作為所述立體全景圖像的輔助信息而記錄的多個(gè)圖像偏移量中選擇一個(gè)圖像偏移量，該圖像偏移量對(duì)應(yīng)于所述立體顯示器的屏幕中的立體圖像，并且當(dāng)在所述再現(xiàn)步驟中通過(guò)滾動(dòng)或逐幀播放的方式再現(xiàn)所述立體全景圖像時(shí)基于所選擇的圖像偏移量進(jìn)行所述立體圖像的視差調(diào)節(jié)。
29.—種立體全景圖像再現(xiàn)方法，包括立體全景圖像獲得步驟，用于獲得由左全景圖像和右全景圖像形成的立體全景圖像；對(duì)應(yīng)點(diǎn)檢測(cè)步驟，用于在再現(xiàn)所獲得的立體全景圖像之前，檢測(cè)所述立體全景圖像中用于視差調(diào)節(jié)的多個(gè)對(duì)應(yīng)點(diǎn)，所述對(duì)應(yīng)點(diǎn)具有在所述左全景圖像和所述右全景圖像之間匹配的特征；圖像偏移量計(jì)算步驟，用于計(jì)算用于將所檢測(cè)到的多個(gè)對(duì)應(yīng)點(diǎn)的視差均設(shè)置為預(yù)定視差量的多個(gè)圖像偏移量；存儲(chǔ)步驟將所述立體全景圖像上用于視差調(diào)節(jié)的所述多個(gè)對(duì)應(yīng)點(diǎn)的位置信息和所計(jì)算出的多個(gè)圖像偏移量彼此相關(guān)聯(lián)地存儲(chǔ)；再現(xiàn)步驟，用于以預(yù)定倍率放大所獲得的立體全景圖像，并且自動(dòng)地或者根據(jù)手動(dòng)指令輸入來(lái)以在立體顯示器上滾動(dòng)的方式再現(xiàn)、或者以針對(duì)通過(guò)分割所述立體全景圖像而獲得的多個(gè)幀中的每一幀進(jìn)行逐幀播放的方式再現(xiàn)所放大的立體全景圖像；以及視差調(diào)節(jié)步驟，用于從相應(yīng)于所述立體全景圖像存儲(chǔ)在所述存儲(chǔ)裝置中的多個(gè)圖像偏移量中選擇一個(gè)圖像偏移量，該圖像偏移量對(duì)應(yīng)于所述立體顯示器的屏幕中的立體圖像，并且當(dāng)在所述再現(xiàn)步驟中通過(guò)滾動(dòng)或逐幀播放的方式再現(xiàn)所述立體全景圖像時(shí)基于所選擇的圖像偏移量進(jìn)行所述立體圖像的視差調(diào)節(jié)。
30.根據(jù)權(quán)利要求29所述的立體全景圖像再現(xiàn)方法，其中在所述對(duì)應(yīng)點(diǎn)檢測(cè)步驟中，檢測(cè)針對(duì)通過(guò)分割所述全景圖像而獲得的均呈條形的多個(gè)狹縫圖像中的每一個(gè)狹縫圖像的一組對(duì)應(yīng)點(diǎn)。
31.根據(jù)權(quán)利要求30所述的立體全景圖像再現(xiàn)方法，其中當(dāng)在所述對(duì)應(yīng)點(diǎn)檢測(cè)步驟中未在靠近所述立體圖像中心的部分中檢測(cè)到所需對(duì)應(yīng)點(diǎn)時(shí)，預(yù)先設(shè)置的圖像偏移量被設(shè)置作為計(jì)算值，或者在所述圖像偏移量計(jì)算步驟中通過(guò)在相鄰圖像偏移量之間進(jìn)行內(nèi)插來(lái)計(jì)算所述圖像偏移量。
32.根據(jù)權(quán)利要求29所述的立體全景圖像再現(xiàn)方法，還包括物體檢測(cè)步驟，用于檢測(cè)包括在所獲得的立體全景圖像中的所需物體，其中在所述對(duì)應(yīng)點(diǎn)檢測(cè)步驟中，檢測(cè)針對(duì)所述物體檢測(cè)步驟中所檢測(cè)到的每個(gè)物體的對(duì)應(yīng)
33.根據(jù)權(quán)利要求29至32中任一項(xiàng)所述的立體全景圖像再現(xiàn)方法，還包括內(nèi)插計(jì)算步驟，用于基于在所述圖像偏移量計(jì)算步驟中計(jì)算出的所述多個(gè)圖像偏移量、通過(guò)在所述對(duì)應(yīng)點(diǎn)之間內(nèi)插像素偏移量來(lái)計(jì)算連續(xù)的像素偏移量，其中在所述存儲(chǔ)步驟中，存儲(chǔ)在所述圖像偏移量計(jì)算步驟中計(jì)算出的多個(gè)圖像偏移量和在所述內(nèi)插計(jì)算步驟中計(jì)算出的多個(gè)圖像偏移量。
34.根據(jù)權(quán)利要求29至33中任一項(xiàng)所述的立體全景圖像再現(xiàn)方法，其中所述預(yù)定視差量為零。
35.根據(jù)權(quán)利要求28至34中任一項(xiàng)所述的立體全景圖像再現(xiàn)方法，其中在所述視差調(diào)節(jié)步驟中，選擇處于所述立體顯示器的屏幕中心處或者處于最靠近所述屏幕中心的部分中的圖像偏移量，并且基于所選擇的圖像偏移量進(jìn)行所述立體圖像的視差調(diào)節(jié)。
36.根據(jù)權(quán)利要求28至35中任一項(xiàng)所述的立體全景圖像再現(xiàn)方法，其中當(dāng)在所述再現(xiàn)步驟中根據(jù)手動(dòng)指令輸入通過(guò)滾動(dòng)方式再現(xiàn)所述立體全景圖像時(shí)，在停止?jié)L動(dòng)之前選擇與在根據(jù)手動(dòng)指令輸入開始滾動(dòng)時(shí)顯示在所述立體顯示器的屏幕中的立體圖像相對(duì)應(yīng)的一個(gè)圖像偏移量，并且當(dāng)滾動(dòng)停止時(shí)，選擇與停止?jié)L動(dòng)時(shí)顯示在所述立體顯示器的所述屏幕中的立體圖像相對(duì)應(yīng)的一個(gè)圖像偏移量，并且在所述視差調(diào)節(jié)步驟中基于所選擇的圖像偏移量進(jìn)行所述立體圖像的視差調(diào)節(jié)。
37.根據(jù)權(quán)利要求28至35中任一項(xiàng)所述的立體全景圖像再現(xiàn)方法，其中所述再現(xiàn)步驟在根據(jù)手動(dòng)指令輸入以滾動(dòng)方式進(jìn)行再現(xiàn)的滾動(dòng)期間僅僅使所述左圖像和所述右圖像中的一個(gè)圖像顯示在所述立體顯示器上，并且當(dāng)滾動(dòng)停止時(shí)使所述立體圖像顯示在所述立體顯示器上，以及在所述視差調(diào)節(jié)步驟中，在停止?jié)L動(dòng)時(shí)，選擇與在停止?jié)L動(dòng)時(shí)顯示在所述立體顯示器的屏幕中的立體圖像相對(duì)應(yīng)的一個(gè)圖像偏移量，并且基于所選擇的圖像偏移量進(jìn)行所述立體圖像的視差調(diào)節(jié)。
38.根據(jù)權(quán)利要求28至37中任一項(xiàng)所述的立體全景圖像再現(xiàn)方法，其中所述再現(xiàn)步驟使整個(gè)立體全景圖像顯示在所述立體顯示器上，然后以預(yù)定倍率放大所述立體全景圖像并且通過(guò)滾動(dòng)或逐幀播放的方式回放所述立體全景圖像。
39.一種使計(jì)算機(jī)實(shí)現(xiàn)以下功能的立體全景圖像創(chuàng)建程序立體圖像獲得功能，用于獲得由利用立體成像設(shè)備拍攝的左圖像和右圖像形成的多個(gè)立體圖像，這些立體圖像是所述立體成像設(shè)備沿恒定方向搖動(dòng)時(shí)連續(xù)地拍攝的；立體全景圖像創(chuàng)建功能，用于通過(guò)從由所述立體圖像獲得功能獲得的所述多個(gè)立體圖像中將所述左圖像合成在一起且將所述右圖像合成在一起來(lái)創(chuàng)建由左全景圖像和右全景圖像形成的立體全景圖像；對(duì)應(yīng)點(diǎn)檢測(cè)功能，用于檢測(cè)用于視差調(diào)節(jié)的多個(gè)對(duì)應(yīng)點(diǎn)，所述對(duì)應(yīng)點(diǎn)具有在由所述立體圖像獲得功能獲得的所述多個(gè)立體圖像的左圖像和右圖像之間匹配的特征或者在所創(chuàng)建的立體全景圖像的左全景圖像和右全景圖像之間匹配的特征；圖像偏移量計(jì)算功能，用于計(jì)算用于將所檢測(cè)到的多個(gè)對(duì)應(yīng)點(diǎn)的視差均設(shè)置為預(yù)定視差量的多個(gè)圖像偏移量；以及記錄功能，用于在記錄介質(zhì)中記錄所創(chuàng)建的立體全景圖像，并且將所述立體全景圖像上用于視差調(diào)節(jié)的所述多個(gè)對(duì)應(yīng)點(diǎn)的位置信息和所計(jì)算出的多個(gè)圖像偏移量彼此相關(guān)聯(lián)地記錄在所述記錄介質(zhì)中作為所述立體全景圖像的輔助信息。
40.一種使計(jì)算機(jī)實(shí)現(xiàn)以下功能的立體全景圖像再現(xiàn)程序立體全景圖像獲得功能，用于獲得由左全景圖像和右全景圖像形成的立體全景圖像；對(duì)應(yīng)點(diǎn)檢測(cè)功能，用于在再現(xiàn)所獲得的立體全景圖像之前檢測(cè)所述立體全景圖像中用于視差調(diào)節(jié)的多個(gè)對(duì)應(yīng)點(diǎn)，所述多個(gè)對(duì)應(yīng)點(diǎn)具有在所述左全景圖像和所述右全景圖像之間匹配的特征；圖像偏移量計(jì)算功能，用于計(jì)算用于將所檢測(cè)到的多個(gè)對(duì)應(yīng)點(diǎn)的視差均設(shè)置為預(yù)定視差量的多個(gè)圖像偏移量；存儲(chǔ)功能，用于將所述立體全景圖像上用于視差調(diào)節(jié)的所述多個(gè)對(duì)應(yīng)點(diǎn)的位置信息和所計(jì)算出的多個(gè)圖像偏移量彼此相關(guān)聯(lián)地進(jìn)行存儲(chǔ)；再現(xiàn)功能，用于以預(yù)定倍率放大所獲得的立體全景圖像，并且自動(dòng)地或者根據(jù)手動(dòng)指令輸入來(lái)以在立體顯示器上滾動(dòng)的方式再現(xiàn)、或者以針對(duì)通過(guò)分割所述立體全景圖像而獲得的多個(gè)幀中的每一幀進(jìn)行逐幀播放的方式再現(xiàn)所放大的立體全景圖像；以及視差調(diào)節(jié)功能，用于從相應(yīng)于所述立體全景圖像在所述存儲(chǔ)功能中存儲(chǔ)的多個(gè)圖像偏移量中選擇一個(gè)圖像偏移量，該圖像偏移量對(duì)應(yīng)于所述立體顯示器的屏幕中的立體圖像，并且當(dāng)通過(guò)所述再現(xiàn)功能以滾動(dòng)或逐幀播放的方式再現(xiàn)所述立體全景圖像時(shí)基于所選擇的圖像偏移量進(jìn)行所述立體圖像的視差調(diào)節(jié)。
41.一種計(jì)算機(jī)可讀記錄介質(zhì)，當(dāng)通過(guò)處理器讀取并執(zhí)行指令時(shí)，所述計(jì)算機(jī)可讀記錄介質(zhì)使所述處理器實(shí)現(xiàn)立體圖像獲得步驟，用于獲得由通過(guò)立體成像設(shè)備拍攝的左圖像和右圖像形成的多個(gè)立體圖像，這些立體圖像是所述立體成像設(shè)備在沿恒定方向搖動(dòng)時(shí)連續(xù)地拍攝的；立體全景圖像創(chuàng)建步驟，用于通過(guò)從在所述立體圖像獲得步驟中獲得的所述多個(gè)立體圖像中將所述左圖像合成在一起且將所述右圖像合成在一起來(lái)創(chuàng)建由左全景圖像和右全景圖像形成的立體全景圖像；對(duì)應(yīng)點(diǎn)檢測(cè)步驟，用于檢測(cè)用于視差調(diào)節(jié)的多個(gè)對(duì)應(yīng)點(diǎn)，所述多個(gè)對(duì)應(yīng)點(diǎn)具有在所述立體圖像獲得步驟中獲得的所述多個(gè)立體圖像的左圖像和右圖像之間匹配的特征或者在所創(chuàng)建的立體全景圖像的左全景圖像和右全景圖像之間匹配的特征；圖像偏移量計(jì)算步驟，用于計(jì)算用于將所檢測(cè)到的多個(gè)對(duì)應(yīng)點(diǎn)的視差均設(shè)置為預(yù)定視差量的多個(gè)圖像偏移量；以及記錄步驟，用于在記錄介質(zhì)中記錄所創(chuàng)建的立體全景圖像，并且將所述立體全景圖像上用于視差調(diào)節(jié)的所述多個(gè)對(duì)應(yīng)點(diǎn)的位置信息和所計(jì)算出的多個(gè)圖像偏移量彼此相關(guān)聯(lián)地記錄在所述記錄介質(zhì)中作為所述立體全景圖像的輔助信息。
42.—種計(jì)算機(jī)可讀記錄介質(zhì)，當(dāng)由處理器讀取并執(zhí)行指令時(shí)，所述計(jì)算機(jī)可讀記錄介質(zhì)使所述處理器實(shí)現(xiàn)立體全景圖像獲得步驟，用于獲得由左全景圖像和右全景圖像形成的立體全景圖像；對(duì)應(yīng)點(diǎn)檢測(cè)步驟，用于在再現(xiàn)所獲得的立體全景圖像之前檢測(cè)所述立體全景圖像中用于視差調(diào)節(jié)的多個(gè)對(duì)應(yīng)點(diǎn)，所述多個(gè)對(duì)應(yīng)點(diǎn)具有在所述左全景圖像和所述右全景圖像之間匹配的特征；圖像偏移量計(jì)算步驟，用于計(jì)算用于將所檢測(cè)到的多個(gè)對(duì)應(yīng)點(diǎn)的視差均設(shè)置為預(yù)定視差量的多個(gè)圖像偏移量；存儲(chǔ)步驟，用于將所述立體全景圖像上用于視差調(diào)節(jié)的所述多個(gè)對(duì)應(yīng)點(diǎn)的位置信息和所計(jì)算出的多個(gè)圖像偏移量彼此相關(guān)聯(lián)地進(jìn)行存儲(chǔ)；再現(xiàn)步驟，用于以預(yù)定倍率放大所獲得的立體全景圖像，并且自動(dòng)地或者根據(jù)手動(dòng)指令輸入來(lái)以在立體顯示器上滾動(dòng)的方式再現(xiàn)、或者以針對(duì)通過(guò)分割所述立體全景圖像而獲得的多個(gè)幀中的每一幀進(jìn)行逐幀播放的方式再現(xiàn)所放大的立體全景圖像；以及視差調(diào)節(jié)步驟，用于從相應(yīng)于所述立體全景圖像在所述存儲(chǔ)步驟中存儲(chǔ)的多個(gè)圖像偏移量中選擇一個(gè)圖像偏移量，該圖像偏移量對(duì)應(yīng)于所述立體顯示器的屏幕中的立體圖像，并且當(dāng)在所述再現(xiàn)步驟中通過(guò)滾動(dòng)或逐幀播放的方式再現(xiàn)所述立體全景圖像時(shí)基于所選擇的圖像偏移量進(jìn)行所述立體圖像的視差調(diào)節(jié)。
全文摘要
在根據(jù)本發(fā)明的一個(gè)實(shí)施例的立體全景圖像創(chuàng)建方法中，獲得了包括在沿一個(gè)方向移動(dòng)3D圖像拾取設(shè)備的同時(shí)連續(xù)地拍攝的左圖像和右圖像的多個(gè)3D圖像，通過(guò)合成各左圖像以及合成各右圖像來(lái)創(chuàng)建3D全景圖像，檢測(cè)3D圖像之間的對(duì)應(yīng)點(diǎn)，計(jì)算用于使得對(duì)應(yīng)點(diǎn)之間的視差變?yōu)轭A(yù)定值的圖像偏移量，并且以與3D全景圖像相關(guān)聯(lián)的方式記錄對(duì)應(yīng)點(diǎn)信息和圖像偏移量。
文檔編號(hào)G03B35/10GK102918858SQ201180026719
公開日2013年2月6日 申請(qǐng)日期2011年11月8日 優(yōu)先權(quán)日2010年12月24日
發(fā)明者若林覺(jué) 申請(qǐng)人:富士膠片株式會(huì)社