專利名稱：立體視覺圖像編輯裝置及立體視覺圖像編輯方法
技術(shù)領(lǐng)域：
本發(fā)明涉及從多個圖像中編輯具有視差的立體視覺圖像的立體視覺圖像編輯裝 置及立體視覺圖像編輯方法，更具體地涉及一種對該立體視覺圖像進行編輯、并且使具有 使用者所希望的立體感的立體視覺圖像顯示于顯示器上的立體視覺圖像編輯裝置及立體 視覺圖像編輯方法。
背景技術(shù)：
利用相當于從左眼看到的視野的左眼用圖像和相當于從右眼看到的視野的右眼 用圖像來進行投影，并且將左眼用圖像僅投影于左眼，將右眼用圖像僅投影于右眼。利用該 兩眼視差，使用者能夠獲得包括左眼用圖像和右眼用圖像的立體視覺圖像的立體感。為了再現(xiàn)人類的兩眼之間所產(chǎn)生的視差，立體視覺圖像通過下述方式來制作，即 至少將獲取左眼用圖像的照相機和獲取右眼用圖像的照相機配置成在水平方向上排列，并 且同時拍攝相同的視野來制作。另外，為假想地實現(xiàn)相同手法，也有下述方法利用計算機 來生成假想3D空間，并生成能夠獲得相同效果的立體視覺圖像。另外，立體視覺圖像不僅包括照片等靜態(tài)圖像也包括動態(tài)圖像，被應(yīng)用在對被拍 攝物體進行立體顯示的電影等中。另外，作為下一代的AV內(nèi)容的提供方法，采用了立體聲 視頻的立體視覺視頻正在不斷普及。這樣，立體視覺圖像顯示技術(shù)正在普及，而且被拍攝的立體視覺圖像不僅被直接 收視，還可以考慮將所拍攝的立體視覺圖像的一部分區(qū)域進行剪切編輯。作為現(xiàn)有技術(shù)的立體視覺圖像編輯技術(shù)，有下述方法使用者對顯示于顯示器的 立體視覺圖像的左眼用圖像和右眼用圖像指定剪切編輯區(qū)域，將立體視覺圖像的一部分區(qū) 域進行剪切編輯。作為使用者指定剪切編輯區(qū)域的方法，例如可以采用相同坐標選擇方法 及特征點對應(yīng)搜索方法。相同坐標選擇方法是下述方法如果對一個圖像(例如，左眼用圖像)指定剪切編 輯區(qū)域，則對另一個圖像(右眼用圖像)也選擇相同坐標的區(qū)域作為剪切編輯區(qū)域。特征點對應(yīng)搜索方法是下述方法用小的矩形區(qū)域來分割圖像，以所分割的矩形 區(qū)域單位求取圖像相關(guān)等，在左眼用圖像和右眼用圖像中檢索相同的特征點并使之相對 應(yīng)。如果對一個圖像(例如，左眼用圖像)指定剪切編輯區(qū)域，則根據(jù)與左眼用圖像相同的 特征點，在另一個圖像(右眼用圖像)上選擇與在左眼用圖像中所指定的剪切編輯區(qū)域相 對應(yīng)的區(qū)域作為剪切編輯區(qū)域。此外，在專利文獻1中公開了使用者更容易看到立體圖像 的立體圖像顯示裝置。如上所述，使用者通過對顯示于顯示器上的立體視覺圖像的左眼用圖像和右眼用 圖像指定所希望的剪切編輯區(qū)域，能夠?qū)λ臄z的立體視覺圖像的一部分區(qū)域進行剪切編輯。現(xiàn)有技術(shù)文獻專利文獻
專利文獻1 特開2001-326947號公報但是，關(guān)于立體視覺圖像的剪切編輯區(qū)域，由于使用者不能指定該剪切編輯區(qū)域 的框本身所具有的視差即基點視差，所以不能使立體視覺圖像的顯示區(qū)域具有所希望的深 度。即，不能獲得具有使用者所希望的立體感的立體視覺圖像。具體而言，在立體視覺圖像的視角本身小、或者作為畫中畫的子畫面被較小地顯 示等時，如果立體視覺圖像的顯示區(qū)域變小，則該顯示區(qū)域的框本身變成立體視覺的對象。 因此，使用者在立體視覺圖像的顯示區(qū)域的框本身和顯示于立體視覺圖像中的被拍攝物體 之間也能夠感覺到深度差。但是，不能進行下述設(shè)定使使用者所指定的剪切編輯區(qū)域的 框相對于該剪切編輯區(qū)域的圖像看上去位于最面前、并使圖像朝著顯示畫面的內(nèi)側(cè)具有深 度，或者相反使使用者所指定的剪切編輯區(qū)域的框相對于顯示畫面看上去位于最內(nèi)側(cè)、并 使被拍攝物體看上去相對于該剪切編輯區(qū)域的框向面前側(cè)突出。此外，立體視覺圖像中所顯示的被拍攝物體(特征點)也具有視差，在立體視覺圖 像中散布著視差不同的多個特征點。特別是，用畫中畫進行顯示時，顯示于母畫面的被拍攝 物體的視差與顯示于子畫面的被拍攝物體的視差不同。例如，在內(nèi)容收視觀眾已經(jīng)將視點 從母畫面轉(zhuǎn)移到子畫面時，內(nèi)容作者希望在子畫面上順暢地將視點誘導(dǎo)到希望被內(nèi)容收視 觀眾所關(guān)注的被拍攝物體上。此時，需要使子畫面上的立體視覺圖像的剪切編輯區(qū)域的框 本身所具有的視差和想讓內(nèi)容收視觀眾所關(guān)注的被拍攝物體(特征點)的視差一致。

發(fā)明內(nèi)容
因此，本發(fā)明的目的是提供一種立體視覺圖像編輯裝置及立體視覺圖像編輯方 法，該裝置和方法中，使用者通過對所指定的剪切編輯區(qū)域的框指定該剪切編輯區(qū)域的框 本身所具有的視差即基點視差，能夠使立體視覺圖像的顯示區(qū)域具有所希望的深度，結(jié)果 能夠獲得具有使用者所希望的立體感的立體視覺圖像。為了實現(xiàn)上述目的，本發(fā)明的立體視覺圖像編輯裝置是將顯示于顯示器上的、包 括左眼用圖像和右眼用圖像的立體視覺圖像編輯為具有使用者所希望的立體感的立體視 覺圖像的立體視覺圖像編輯裝置，包括存儲立體視覺圖像的存儲部；將存儲于存儲部的 立體視覺圖像轉(zhuǎn)換為能夠在顯示器上顯示的格式的壓縮擴展部；使使用者對顯示器上顯示 的立體視覺圖像的左眼用圖像和右眼用圖像指定剪切編輯區(qū)域和該剪切編輯區(qū)域的框本 身所具有的視差即基點視差的操作部；根據(jù)由使用者所指定的剪切編輯區(qū)域、對顯示器上 顯示的立體視覺圖像的左眼用圖像和右眼用圖像進行剪切編輯的剪切編輯部；根據(jù)由使用 者指定的基點視差對已被剪切編輯的左眼用圖像和右眼用圖像進行剪切編輯區(qū)域的補正 的剪切編輯區(qū)域補正部。優(yōu)選的特征是，操作部使使用者直接指定基點視差，或者，操作部使使用者對已被 剪切編輯的左眼用圖像和右眼用圖像指定剪切編輯區(qū)域內(nèi)的特征點，將特征點所具有的視 差作為基點視差。優(yōu)選的剪切編輯區(qū)域補正部的特征在于，從與由使用者指定的基點視差具有相同 視差的剪切編輯區(qū)域內(nèi)的特征點中檢測最左端的特征點和最右端的特征點，將剪切編輯區(qū) 域的左端及右端補正為被檢測出的最左端的特征點的位置和被檢測出的最右端的特征點 的位置。
而且，優(yōu)選的剪切編輯區(qū)域補正部的特征在于，設(shè)定有至少一個以上的規(guī)定的視 差，剪切編輯區(qū)域補正部從與每個該規(guī)定的視差相對應(yīng)的各剪切編輯區(qū)域內(nèi)的特征點中檢 測最左端的特征點和最右端的特征點；剪切編輯區(qū)域補正部生成將規(guī)定的視差和所檢測出 的最左端的特征點的位置及所檢測出的最右端的特征點的位置之間對應(yīng)起來的剪切編輯 區(qū)域補正候補表，剪切編輯區(qū)域補正部將剪切編輯區(qū)域的左端及右端補正為剪切編輯區(qū)域 補正候補表中的、與視差相對應(yīng)的最左端的特征點的位置及最右端的特征點的位置，其中 該視差與由使用者指定的基點視差相同。為實現(xiàn)上述目的，本發(fā)明的立體視覺圖像編輯方法是立體視覺圖像編輯裝置所執(zhí) 行的立體視覺圖像編輯方法，該立體視覺圖像編輯裝置是將顯示于顯示器上的包括左眼用 圖像和右眼用圖像的立體視覺圖像編輯為具有使用者所希望的立體感的立體視覺圖像的 裝置，該立體視覺圖像編輯方法包括下述步驟將作為編輯對象的立體視覺圖像轉(zhuǎn)換為能 夠在顯示器上顯示的格式的壓縮擴展步驟；對顯示于顯示器上的立體視覺圖像的左眼用圖 像和右眼用圖像指定剪切編輯區(qū)域的剪切編輯區(qū)域指定步驟；根據(jù)被指定的剪切編輯區(qū) 域，將顯示于顯示器上的立體視覺圖像的左眼用圖像和右眼用圖像進行剪切編輯的剪切編 輯步驟；對已剪切編輯的左眼用圖像和右眼用圖像指定剪切編輯區(qū)域的框本身所具有的視 差即基點視差的基點視差指定步驟；根據(jù)被指定的基點視差對剪切編輯區(qū)域進行補正的剪 切編輯區(qū)域補正步驟；將由已補正的剪切編輯區(qū)域進行了剪切編輯的左眼用圖像和右眼用 圖像保存到立體視覺圖像編輯裝置中的編輯圖像保存步驟。優(yōu)選的特征是，基點視差指定步驟中，使使用者直接指定基點視差，或者在基點視 差指定步驟中，使使用者對已被剪切編輯的左眼用圖像和右眼用圖像指定剪切編輯區(qū)域內(nèi) 的特征點，將特征點所具有的視差作為基點視差。優(yōu)選的剪切編輯區(qū)域補正步驟的特征在于，從與被指定的基點視差具有相同視差 的剪切編輯區(qū)域內(nèi)的特征點中檢測最左端的特征點和最右端的特征點，并且將剪切編輯區(qū) 域的左端及右端補正為被檢測出的最左端的特征點的位置及被檢測出的最右端的特征點 的位置。此外，優(yōu)選的剪切編輯區(qū)域補正步驟的特征在于，設(shè)定有至少一個以上的規(guī)定的 視差，在剪切編輯區(qū)域補正步驟中，從與每個該規(guī)定的視差相對應(yīng)的各剪切編輯區(qū)域內(nèi)的 特征點中檢測最左端的特征點和最右端的特征點，生成將規(guī)定的視差與檢測出的最左端的 特征點的位置及檢測出的最右端的特征點的位置之間相對應(yīng)起來的剪切編輯區(qū)域補正候 補表，將剪切編輯區(qū)域的左端及右端補正為剪切編輯區(qū)域補正候補表中的、與視差相對應(yīng) 的最左端的特征點的位置及最右端的特征點的位置，該視差是與被指定的基點視差相同的 視差。通過用于使計算機執(zhí)行一系列處理步驟的程序的方式提供上述本發(fā)明的立體視 覺圖像編輯方法。該程序也可以以存儲在計算機可讀取的存儲介質(zhì)中的形態(tài)導(dǎo)入到計算機 中。發(fā)明效果根據(jù)本發(fā)明的立體視覺圖像編輯裝置及立體視覺圖像編輯方法，使用者通過對所 指定的剪切編輯區(qū)域的框指定該剪切編輯區(qū)域的框本身所具有的視差即基點視差，能夠使 立體視覺圖像的顯示區(qū)域具有所希望的深度，結(jié)果能夠獲得具有使用者所希望的立體感的立體視覺圖像。


圖1是表示本發(fā)明的第一實施方式所涉及的立體視覺圖像編輯裝置100的大致結(jié) 構(gòu)的硬件結(jié)構(gòu)圖；圖2是表示本發(fā)明的第一實施方式所涉及的立體視覺圖像編輯裝置100的大致結(jié) 構(gòu)的方塊圖；圖3是表示本發(fā)明的第一實施方式所涉及的立體視覺圖像編輯方法300的流程 圖；圖4是表示本發(fā)明的第一實施方式所涉及的立體視覺圖像的編輯畫面400的結(jié)構(gòu) (剪切編輯區(qū)域的指定)的圖；圖5是表示本發(fā)明的第一實施方式所涉及的立體視覺圖像的編輯畫面400的結(jié)構(gòu) (基點視差的指定)的圖；圖6是表示與基點視差相對應(yīng)的剪切編輯區(qū)域補正方法600的流程圖；圖7是表示剪切編輯區(qū)域補正候補數(shù)據(jù)表700的圖；圖8是表示圖5所示的剪切編輯補正區(qū)域中的剪切編輯后的立體視覺圖像的圖；圖9是表示本發(fā)明的第二實施方式所涉及的立體視覺圖像的編輯畫面410的結(jié)構(gòu) (最小基點視差的指定)的圖；圖10是表示圖9所示的剪切編輯補正區(qū)域中的剪切編輯后的立體視覺圖像的 圖；圖11是表示本發(fā)明的第二實施方式所涉及的立體視覺圖像的編輯畫面411的結(jié) 構(gòu)(最大基點視差的指定)的圖；圖12是表示圖11所示的剪切編輯補正區(qū)域中的剪切編輯后的立體視覺圖像的 圖；附圖標記說明10-立體視覺圖像；11-左眼用圖像；12-右眼用圖像；13-左眼用剪切編輯補正 區(qū)域圖像；14-右眼用剪切編輯補正區(qū)域圖像；100-立體視覺圖像編輯裝置；101-存儲部； 102-壓縮擴展部；103-操作部；104-剪切編輯部；105-剪切編輯區(qū)域補正部；106-控制部； 107-外部接口 ； 110-顯示部；111-顯示器；112-VRAM;300-立體視覺圖像編輯方法；400， 410，411-立體視覺圖像的編輯畫面；401L-左畫面；401R-右畫面；402L-左畫面剪切編輯 區(qū)域；402R-右畫面剪切編輯區(qū)域；403L-左畫面剪切編輯補正區(qū)域；403R-右畫面剪切編 輯補正區(qū)域；600-剪切編輯區(qū)域補正方法；
具體實施例方式以下參照著附圖對本發(fā)明的各實施方式進行說明。<第一實施方式>圖1是表示本發(fā)明的第一實施方式所涉及的立體視覺圖像編輯裝置100的大致結(jié) 構(gòu)的硬件結(jié)構(gòu)圖。圖1中，立體視覺圖像編輯裝置100包括存儲部101、壓縮擴展部102、 操作部103、剪切編輯部104、剪切編輯區(qū)域補正部105和控制部106。而且，立體視覺圖像編輯裝置100也可以具有外部接口 107。立體視覺圖像編輯裝置100與顯示部110連接。 另外，顯示部110具有顯示器111和視頻隨機存取存儲器(VRAM，Video Random Access Memory)112。存儲部 101 是例如 ROM (Read Only Memory)及 RAM (Random access memory),存儲 著所拍攝的立體視覺圖像。另外，再現(xiàn)立體視覺圖像時，存儲部101暫時存儲該立體視覺圖 像，并且存儲后述的編輯后的立體視覺圖像。壓縮擴展部102是例如編解碼器(Codec)，將以特定的壓縮格式被壓縮的立體視 覺圖像擴展變換為能夠在顯示器上顯示的格式。而且，壓縮擴展部102以特定的壓縮格式 壓縮變換編輯后的立體視覺圖像。另外，立體視覺圖像為靜態(tài)圖像時，立體視覺圖像的代表 性的壓縮格式有JPEG格式、GIF格式及PNG格式等，立體視覺圖像為動態(tài)圖像時，立體視覺 圖像的代表性的壓縮格式有AVI格式及MPEG格式等。操作部103是例如鍵盤及鼠標等輸入裝置，被輸入來自使用者的指示內(nèi)容。此外， 操作部103也可以是以觸摸屏顯示器為代表的那種與顯示器111為一體的輸入裝置。剪切編輯部104基于剪切編輯區(qū)域來剪切編輯該立體視覺圖像，該剪切編輯區(qū)域 是通過操作部103由使用者指定的。剪切編輯區(qū)域補正部105基于深度來對由剪切編輯部104所剪切編輯的立體視覺 圖像的剪切編輯區(qū)域進行補正，該深度是相對于使用者通過操作部103所指定的顯示畫面 的深度?？刂撇?06是例如中央處理器(CPU，Central Processing Unit)，對立體視覺圖 像編輯裝置100的各功能部的處理進行控制。顯示部110具有顯示器111和視頻隨機存取存儲器(VRAM，Video Random Access Memory) 112。顯示器111顯示存儲部101中存儲的立體視覺圖像，或者顯示由使用者編輯 的立體視覺圖像。VRAM112是將立體視覺圖像顯示于顯示器111為止的緩存。另外，顯示部 110既可以包含在立體視覺圖像編輯裝置100中，也可以是與立體視覺圖像編輯裝置100連 接的顯示裝置。外部接口 107是例如通用串行總線(USB，Universal Serial Bus)，立體視覺圖像 編輯裝置100通過外部接口 107與網(wǎng)絡(luò)及外部裝置連接。立體視覺圖像編輯裝置100也 可以通過外部接口 107從外部連接的照相機及存儲介質(zhì)等獲取外部數(shù)據(jù)，并存儲到存儲部 101 中。圖2是表示本發(fā)明的第一實施方式所涉及的立體視覺圖像編輯裝置100的大致結(jié) 構(gòu)的方塊圖。圖2中，立體視覺圖像編輯裝置100包括存儲部101、壓縮擴展部102、操作部 103、剪切編輯部104、剪切編輯區(qū)域補正部105和控制部106。立體視覺圖像編輯裝置100 與顯示部110連接。此處對具有圖1所示的硬件結(jié)構(gòu)的立體視覺圖像編輯裝置100的各功 能塊進行詳細說明。存儲部101存儲被拍攝的立體視覺圖像10。立體視覺圖像10包括僅投影在收視 立體視覺圖像10的使用者的左眼的左眼用圖像11和僅投影于右眼的右眼用圖像12。此 處，立體視覺圖像10是動態(tài)圖像，是以MPEG格式壓縮的數(shù)據(jù)。此外，存儲部101存儲剪切 編輯后的立體視覺圖像，該剪切編輯后的立體視覺圖像包括后述的左眼用剪切編輯補正區(qū) 域圖像13和右眼用剪切編輯補正區(qū)域圖像14。
使用者通過操作部103選擇存儲部101中存儲的立體視覺圖像10作為編輯對象 圖像。壓縮擴展部102將以MPEG格式壓縮的立體視覺圖像10擴展變換為能夠在顯示器 111上顯示的格式。關(guān)于由壓縮擴展部102進行了擴展變換的立體視覺圖像10，該立體視 覺圖像10的左眼用圖像11和右眼用圖像12通過VRAM112顯示于顯示器111上。此外，壓 縮擴展部102將編輯后的立體視覺圖像以MPEG格式進行壓縮變換，存儲部101存儲以MPEG 格式進行了壓縮變換的編輯后的立體視覺圖像。使用者通過操作部103對顯示于顯示器111的立體視覺圖像10的左眼用圖像11 和右眼用圖像12指定剪切編輯區(qū)域。剪切編輯部104基于剪切編輯區(qū)域來對顯示于顯示器111上的立體視覺圖像10 的左眼用圖像11和右眼用圖像12進行剪切編輯，所述剪切編輯區(qū)域是通過操作部103由 使用者指定的。使用者還通過操作部103對由剪切編輯部104剪切編輯的立體視覺圖像10的左 眼用圖像11和右眼用圖像12指定相對于顯示畫面的深度。剪切編輯區(qū)域補正部105基于使用者經(jīng)由操作部103所指定的深度來對由剪切編 輯部104剪切編輯的立體視覺圖像10的左眼用圖像11和右眼用圖像12進行剪切編輯區(qū)域 的補正。更詳細地說，剪切編輯區(qū)域補正部105根據(jù)剪切編輯區(qū)域的信息和基點視差分別 對左眼用圖像11及右眼用圖像12進行剪切編輯區(qū)域的補正，以與該基點視差相對應(yīng)，其中 基點視差是相對于顯示畫面的深度信息即該剪切編輯區(qū)域的框本身所具有的視差。另外， 之后詳細敘述該補正內(nèi)容。顯示器111顯示立體視覺圖像10的左眼用圖像11和右眼用圖像12，并且顯示使 用者對該被顯示的立體視覺圖像10的左眼用圖像11和右眼用圖像12所指定的剪切編輯 區(qū)域及已經(jīng)由剪切編輯區(qū)域補正部105所補正的剪切編輯區(qū)域。雖然沒有圖示控制部106和各功能塊的關(guān)系，但是控制部106控制上述的立體視 覺圖像編輯裝置100的各功能塊。圖3是表示本發(fā)明的第一實施方式所涉及的立體視覺圖像編輯方法300的流程 圖。圖3中，立體視覺圖像編輯方法300具有畫面顯示步驟S301、剪切編輯區(qū)域指定步驟 S302、基點視差指定步驟S303、剪切編輯區(qū)域補正步驟S304和編輯圖像保存步驟S305。在畫面顯示步驟S301中，顯示器111顯示立體視覺圖像10的左眼用圖像11和右 眼用圖像12。具體而言，使用者通過操作部103將存儲部101中存儲的立體視覺圖像10選 擇作為編輯對象圖像。被選擇的立體視覺圖像10從存儲部101中被讀取，并且由壓縮擴展 部102擴展變換為能夠在顯示器111上顯示的格式。然后，已被擴展變換為能夠在顯示器 111上顯示的格式的立體視覺圖像10被傳送給VRAM 112，該立體視覺圖像10的左眼用圖 像11和右眼用圖像12被顯示于顯示器111上。圖4是表示本發(fā)明的第一實施方式所涉及的立體視覺圖像的編輯畫面400的結(jié)構(gòu) (剪切編輯區(qū)域的指定)的圖。圖4中，立體視覺圖像的編輯畫面400具有顯示編輯對象 圖像的左畫面401L和右畫面401R。其中，在將立體視覺圖像10的左眼用圖像11和右眼 用圖像12進行立體化時，作為成像方法有交叉法和平行法。此處，采用交叉法(圖4中，選 擇“交叉法”)，在左畫面401L上顯示右眼用圖像12，在右畫面401R上顯示左眼用圖像11。另外，采用平行法時，在左畫面401L上顯示左眼用圖像11，在右畫面401R上顯示右眼用圖 像12。交叉法或者平行法既可以預(yù)先選擇，也可以由使用者通過操作部103進行選擇。在剪切編輯區(qū)域指定步驟S302中，剪切編輯部104對顯示于顯示器111上的立體 視覺圖像10的左眼用圖像11和右眼用圖像12進行剪切編輯。具體而言，使用者通過操作 部103對顯示于顯示器111上的立體視覺圖像10的左眼用圖像11和右眼用圖像12指定 剪切編輯區(qū)域。作為指定剪切編輯區(qū)域的簡單并且一般的方法是使用者將鼠標光標移動 到顯示于左畫面401L的右眼用圖像12上或者顯示于右畫面401R的左眼用圖像11上，將 矩形區(qū)域的一個頂角確定為起點之后，將位于其對角位置的一個頂角確定為終點。這樣，使 用者通過操作部103來確定起點和終點，從而將由起點和終點包圍的矩形區(qū)域指定為剪切 編輯區(qū)域。而且，作為使用者對左眼用圖像11和右眼用圖像12兩個圖像指定剪切編輯區(qū)域 的方法，采用例如特征點對應(yīng)搜索方法或者相同坐標選擇方法。此處采用特征點對應(yīng)搜索 方法(在圖4中選擇“特征點對應(yīng)搜索”)，使用者對左畫面401L上顯示的右眼用圖像12 指定剪切編輯區(qū)域402L(在圖4中用虛線表示)。這樣，通過例如立體匹配方式，從右畫面 401R上顯示的左眼用圖像11中搜索與使用者指定的剪切編輯區(qū)域402L具有相同特征點的 位置，來確定剪切編輯區(qū)域402R(在圖4中用虛線表示)。特征點對應(yīng)搜索方法或者相同坐 標選擇方法既可以預(yù)先選擇，也可以由使用者通過操作部103進行選擇。在基點視差指定步驟S303中，剪切編輯區(qū)域補正部105對在剪切編輯區(qū)域指定步 驟S302中指定的剪切編輯區(qū)域402L及402R指定基點視差。具體而言，使用者通過操作部 103對顯示器111上顯示的立體視覺圖像10的左眼用圖像11和右眼用圖像12的剪切編輯 區(qū)域的框指定基點視差。另外，基點視差是指相對于顯示畫面的深度信息即該剪切編輯區(qū) 域的框本身所具有的視差。圖5是表示本發(fā)明的第一實施方式所涉及的立體視覺圖像的編輯畫面400的結(jié)構(gòu) (基點視差的指定)的圖。作為指定基點視差的方法，使用者在于0.0mm 10. Omm范圍內(nèi) 移動的基點視差指定欄上移動鼠標指針，來對剪切編輯后的立體視覺圖像指定相對于顯示 畫面的深度。例如，如果將基點視差指定為0. 0mm，則意味著立體視覺圖像10的剪切編輯 區(qū)域被設(shè)定為使得該剪切編輯區(qū)域的框本身所具有的視差為最小。如果將基點視差指定為 10. 0mm，則意味著立體視覺圖像10的剪切編輯區(qū)域被設(shè)定為使得該剪切編輯區(qū)域的框本 身所具有的視差為最大。此處，如圖5所示，使用者將基點視差指定為3. Omm左右。另外，此處雖然使用者在基點視差指定欄上能夠指定的基點視差的范圍是 0. Omm 10. 0mm，但是并不限于此。此外，指定基點視差的方法也不僅限于圖5所示的那樣 的基點視差指定欄，例如，使用者可以通過鍵盤的數(shù)字鍵等直接輸入基點視差的數(shù)值。在剪切編輯區(qū)域補正步驟S304中，關(guān)于顯示器111上顯示的立體視覺圖像10的 左眼用圖像11和右眼用圖像12，剪切編輯區(qū)域補正部105根據(jù)在基點視差指定步驟S303 中指定的基點視差來補正在剪切編輯區(qū)域指定步驟S302中指定的剪切編輯區(qū)域402L及 402R,以與該基點視差相對應(yīng)。具體而言，由于將基點視差指定為3. 0mm，為了與該基點視差 相對應(yīng)，剪切編輯區(qū)域補正部105將顯示器111上顯示的立體視覺圖像10的左眼用圖像11 和右眼用圖像12的剪切編輯區(qū)域402L及402R(圖5中用虛線表示)補正為剪切編輯補正 區(qū)域403L及403R(圖5中用實線表示)。
圖6是表示與基點視差相對應(yīng)的剪切編輯區(qū)域補正方法600的流程圖。在步驟S601中，在剪切編輯區(qū)域指定步驟S302中所指定的關(guān)于右眼用圖像12和 左眼用圖像11的剪切編輯區(qū)域402L及402R內(nèi)，以該剪切編輯區(qū)域402L及402R的左上端 為基點，將區(qū)域分別按照規(guī)定的單位面積進行分割。在右眼用圖像12和左眼用圖像11的 剪切編輯區(qū)域402L及402R內(nèi)，按所分割的區(qū)域單位，利用圖像相關(guān)計算來搜索相對應(yīng)的特 征點。即，在剪切編輯區(qū)域402L及402R中搜索相同的特征點的位置。在步驟S602中，例如，通過立體匹配方式得知在右眼用圖像12和左眼用圖像11 的剪切編輯區(qū)域402L及402R中存在相同的特征點時(步驟S602的是)，算出該特征點所 具有的視差(步驟S603)。例如，可以利用右眼用圖像12的剪切編輯區(qū)域402L內(nèi)的任意的 特征點的相對位置和左眼用圖像11的剪切編輯區(qū)域402R內(nèi)的相同特征點的相對位置間的 水平方向上的偏移量作為視差。另外，作為其他方法，也可以將人類的兩眼寬度取其平均值 6. 5cm，算出利用三角測量所獲得的左右特征點的視差。在步驟S604中，關(guān)于在步驟S602中所搜索到的特征點，在與該特征點具有相同視 差的特征點中，判斷該特征點在剪切編輯區(qū)域402L及402R內(nèi)是否是最左端的特征點。在 相同視差的特征點中，當該特征點是最左端的特征點時(步驟S604的是)，將該特征點在左 眼用圖像及右眼用圖像中的坐標作為與該視差相對應(yīng)的最左端點信息保存到存儲器等中 (步驟 S605)。同樣，在步驟S606中，關(guān)于在步驟S602中搜索到的特征點，在與該特征點具有相 同視差的特征點中，判斷該特征點在剪切編輯區(qū)域402L及402R內(nèi)是否是最右端的特征點。 在相同視差的特征點中，當該特征點是最右端的特征點時(步驟S606的是)，將該特征點在 左眼用圖像及右眼用圖像中的坐標作為與該視差相對應(yīng)的最右端點信息保存到存儲器等 中(步驟S607)。另外，在步驟S602中，在右眼用圖像12和左眼用圖像11的剪切編輯區(qū)域402L及 402R內(nèi)不存在相同特征點時(步驟S602的否)，不進行上述步驟S603 S607的處理。如上所述，對剪切編輯區(qū)域402L及402R內(nèi)的所有特征點重復(fù)執(zhí)行步驟S601 S607 (步驟S610)。這樣，剪切編輯區(qū)域補正部105通過將剪切編輯區(qū)域402L及402R內(nèi) 的、與規(guī)定的視差相對應(yīng)的左眼用圖像及右眼用圖像的最左端點信息和最右端點信息保存 到存儲器等中，來生成剪切編輯區(qū)域補正候補表。圖7是表示剪切編輯區(qū)域補正候補表700的圖。圖7中，剪切編輯區(qū)域補正候補 表700保存著左眼用圖像及右眼用圖像的各自的、與規(guī)定的視差相對應(yīng)的最左端坐標和最 右端坐標。此處，規(guī)定的視差從0. Omm開始并且每1. Omm地取值，保存的坐標為X坐標及Y 坐標，但是并不限于此。例如，通過在步驟S603中詳細地算出視差，也可以使視差的間隔小 于1.0mm。此外，在利用兩眼視差所獲得的立體視覺中，由于影響視差的僅是水平方向，所以 保存的坐標也可以僅是X坐標。然后，剪切編輯區(qū)域補正部105根據(jù)剪切編輯區(qū)域補正候補表700對在剪切編輯 區(qū)域指定步驟S302中指定的剪切編輯區(qū)域402L及402R進行補正，從而與在基點視差指定 步驟S303中指定的基點視差相對應(yīng)。具體而言，剪切編輯區(qū)域補正部105將右眼用圖像12 的剪切編輯區(qū)域402L補正為剪切編輯補正區(qū)域403L。由于基點視差被指定為3. 0mm，故根 據(jù)剪切編輯區(qū)域補正候補表700，剪切編輯補正區(qū)域403L的左端的X坐標為90，右端的X坐標為1770。而且，剪切編輯區(qū)域補正部105將左眼用圖像11的剪切編輯區(qū)域402R補正 為剪切編輯補正區(qū)域403R。由于基點視差被指定為3. 0mm，所以根據(jù)剪切編輯區(qū)域補正候 補表700，剪切編輯補正區(qū)域403R的左端的X坐標為50，右端的X坐標為1730。另外，在步驟S610中，雖然相對于剪切編輯區(qū)域402L及402R內(nèi)的所有特征點重 復(fù)執(zhí)行了上述步驟S601 S607，但是不一定必須對剪切編輯區(qū)域402L及402R內(nèi)的所有特 征點都重復(fù)執(zhí)行上述步驟S601 S607。也可以在剪切編輯區(qū)域402L及402R內(nèi)的每個視 差的最左坐標及最右坐標已經(jīng)確定的時點，結(jié)束上述步驟S601 S607的處理。另外，補正剪切編輯區(qū)域時，雖然為了與指定的基點視差相對應(yīng)而對剪切編輯區(qū) 域進行補正，但是既可以對左眼用圖像11及右眼用圖像12的剪切編輯區(qū)域402L及402R 分別進行補正，也可以固定一方(例如，左眼用圖像11的剪切編輯區(qū)域402L)而僅補正另 一方(右眼用圖像12的剪切編輯區(qū)域402R)。此外，在剪切編輯區(qū)域補正部105根據(jù)剪切編輯區(qū)域補正候補表700來將剪切編 輯區(qū)域402L及402R補正為剪切編輯補正區(qū)域403L及403R時，有時剪切編輯區(qū)域402L及 402R的水平方向的尺寸會縮小。如果補正僅使得使用者指定的剪切編輯區(qū)域402L及402R 的水平方向的尺寸縮小，則會產(chǎn)生使用者所不希望的剪切編輯的情況。因此，也可以與剪切 編輯區(qū)域402L及40 的水平方向的尺寸補正相對應(yīng)地也補正豎直方向的尺寸。即，可以 在剪切編輯補正區(qū)域403L及403R中保持使用者指定的剪切編輯區(qū)域402L及402R的縱橫 比例。在編輯圖像保存步驟S305中，存儲部101將由剪切編輯補正區(qū)域403L及403R進 行了剪切編輯的右眼用剪切編輯補正區(qū)域圖像14和左眼用剪切編輯補正區(qū)域圖像13作為 剪切編輯后的圖像進行存儲。圖8是表示圖5所示的剪切編輯補正區(qū)域中的剪切編輯后的立體視覺圖像的圖。 圖8中，剪切編輯后的立體視覺圖像包括上述那樣由剪切編輯補正區(qū)域403L及403R已剪 切編輯的右眼用剪切編輯補正區(qū)域圖像14和左眼用剪切編輯補正區(qū)域圖像13。壓縮擴展 部102以MPEG格式對右眼用剪切編輯補正區(qū)域圖像14和左眼用剪切編輯補正區(qū)域圖像13 進行壓縮變換，而且，存儲部101存儲已被壓縮變換的右眼用剪切編輯補正區(qū)域圖像14和 左眼用剪切編輯補正區(qū)域圖像13。這樣，生成剪切編輯后的立體視覺圖像。另外，剪切編輯后的立體視覺圖像可以采用下述方法進行保存將剪切編輯補正 區(qū)域403L及403R的坐標信息作為元數(shù)據(jù)信息，將剪切編輯后的立體視覺圖像與立體視覺 圖像10相關(guān)聯(lián)地進行保存。此外，也可以采用下述方法將立體視覺圖像10的畫面解像度 本身加工成為剪切編輯補正區(qū)域403L及403R，并利用壓縮擴展部102進行壓縮變換之后保 存到存儲部101中。如上所述，根據(jù)本發(fā)明的第一實施方式所涉及的立體視覺圖像編輯裝置100及立 體視覺圖像編輯方法300，使用者通過對所指定的剪切編輯區(qū)域的框指定該剪切編輯區(qū)域 的框本身所具有的視差即基點視差，能夠使立體視覺圖像的顯示區(qū)域具有所希望的深度， 結(jié)果能夠獲得具有使用者所希望的立體感的立體視覺圖像。使用者由于能夠?qū)λ付ǖ募?切編輯區(qū)域的框指定該剪切編輯區(qū)域的框本身所具有的視差即基點視差，所以能夠使使用 者所指定的剪切編輯區(qū)域的框相對于該剪切編輯區(qū)域的圖像看上去位于最面前，并且朝向 顯示畫面的內(nèi)側(cè)使圖像具有深度，相反也能夠使使用者所指定的剪切編輯區(qū)域的框相對于顯示畫面看上去位于最內(nèi)側(cè)，并使被拍攝物體看上去相對于該剪切編輯區(qū)域的框向面前側(cè) 突出來。另外，本實施方式中，立體視覺圖像10是動態(tài)圖像，并且是用MPEG格式壓縮的，但 是并不限于此。例如，立體視覺圖像10的壓縮格式也可以是AVI格式及H. 264格式等其他 壓縮格式。此外，立體視覺圖像10也可以是靜態(tài)圖像，例如可以采用JPEG格式等壓縮格式。 壓縮擴展部102根據(jù)各種壓縮格式來對立體視覺圖像進行壓縮變換及擴展變換。另外，關(guān)于立體視覺圖像10的左眼用圖像11和右眼用圖像12，顯示器111可以重 疊顯示使用者所指定的剪切編輯區(qū)域和已由剪切編輯區(qū)域補正部105補正的剪切編輯區(qū) 域。而且，顯示器111既可以顯示剪切編輯區(qū)域已被補正的右眼用剪切編輯補正區(qū)域圖像 14和左眼用剪切編輯補正區(qū)域圖像13，又可以預(yù)覽包括右眼用剪切編輯補正區(qū)域圖像14 和左眼用剪切編輯補正區(qū)域圖像13的剪切編輯后的立體視覺圖像。此外，如圖4及圖5所示，立體視覺圖像的編輯畫面400也可以具有預(yù)覽按鈕、確 定按鈕、及取消按鈕。使用者通過操作預(yù)覽按鈕、確定按鈕及取消按鈕，能夠邊確認立體視 覺圖像的編輯狀況邊進行立體視覺圖像的剪切編輯處理。具體而言，使用者通過按下預(yù)覽 按鈕，將包括右眼用剪切編輯補正區(qū)域圖像14和左眼用剪切編輯補正區(qū)域圖像13的立體 視覺圖像顯示于顯示器上并進行確認，其中，右眼用剪切編輯補正區(qū)域圖像14和左眼用剪 切編輯補正區(qū)域圖像13是基于剪切編輯補正區(qū)域403L和403R的圖像。使用者確認所顯 示的立體視覺圖像并判斷為是具有使用者所希望的立體感的立體視覺圖像時，按下確定按 鈕，從而將該右眼用剪切編輯補正區(qū)域圖像14和左眼用剪切編輯補正區(qū)域圖像13作為剪 切編輯后的圖像存儲到存儲部101中。另一方面，使用者確認所顯示的立體視覺圖像，在判 斷為不是具有使用者所希望的立體感的立體視覺圖像時，按下取消按鈕，從而刪除該右眼 用剪切編輯補正區(qū)域圖像14和左眼用剪切編輯補正區(qū)域圖像13。另外，當操作部103是鍵盤時，也可以使用表示確定的意思的鍵(Enter鍵等)及 表示取消意思的鍵(Esc鍵等)來取代圖4及圖5所示的確定按鈕和取消按鈕。這樣，使用者可以邊確認剪切編輯后的立體視覺圖像邊生成具有使用者所希望的 立體感的立體視覺圖像。使用者想獲得使所指定的剪切編輯區(qū)域的框相對于該剪切編輯區(qū) 域的圖像看上去位于更面前并且使圖像朝向顯示畫面的內(nèi)側(cè)具有深度那樣的立體感時，只 要變更為將所指定的基點視差加大即可。相反，使用者想獲得使所指定的剪切編輯區(qū)域的 框相對于顯示畫面看上去位于更內(nèi)側(cè)并且使被拍攝物體相對于該剪切編輯區(qū)域的框向面 前側(cè)突出來那樣的立體感時，變更為縮小所指定的基點視差即可。S卩，使用者即使不對剪切編輯區(qū)域的尺寸和剪切編輯區(qū)域的位置進行錯誤嘗試， 僅通過改變所指定的基點視差，也能夠生成具有使用者所希望的立體感的立體視覺圖像。另外，即使使用者改變了幾次基點視差，通過預(yù)先制作圖7所示的剪切編輯區(qū)域 補正候補表700，并參照該剪切編輯區(qū)域補正候補表700，也能夠有效地確定剪切編輯補正 區(qū)域。<第二實施方式>關(guān)于本實施方式所涉及的立體視覺圖像裝置的基本結(jié)構(gòu)及立體視覺圖像方法的 基本流程，與本發(fā)明的第一實施方式相同。關(guān)于使用者對剪切編輯區(qū)域的框本身所具有的 視差即基點視差進行指定的方法，本實施方式與本發(fā)明的第一實施方式不同。以下對與本發(fā)明的第一實施方式不同的點進行說明。圖9是表示本發(fā)明的第二實施方式所涉及的立體視覺圖像的編輯畫面410的結(jié)構(gòu) (最小基點視差的指定)的圖。使用者通過操作部103對顯示于顯示器111上的立體視覺 圖像10的左眼用圖像11和右眼用圖像12的剪切編輯區(qū)域的框指定剪切編輯區(qū)域的框本 身所具有的視差即基點視差。在圖3所示的基點視差指定步驟S303中，剪切編輯區(qū)域補正部105對在剪切編輯 區(qū)域指定步驟S302中指定的剪切編輯區(qū)域402L及402R指定基點視差。如圖5所示，本發(fā) 明的第一實施方式中，作為指定基點視差的方法是使用者在于0. Omm 10. Omm的范圍內(nèi) 移動的基點視差指定用欄上移動鼠標指針，對剪切編輯后的立體視覺圖像指定相對于顯示 畫面的深度。本實施方式中，指定立體視覺圖像中顯示的被拍攝物體(特征點)。具體而言，如 圖9所示，使用者移動鼠標指針，指定相對于顯示畫面位于最內(nèi)側(cè)的被拍攝物體“建筑物”。 此處，將與指定的“建筑物”具有的視差相同的視差作為剪切編輯區(qū)域的框本身所具有的視 差即基點視差。之后，在剪切編輯區(qū)域補正步驟S304中，剪切編輯區(qū)域補正部105將該被 指定的“建筑物”所具有的視差作為基點視差，并與本發(fā)明的第一實施方式同樣地，將剪切 編輯區(qū)域402L及402R(圖9中用虛線表示)補正為剪切編輯補正區(qū)域403L及403R(圖9 中用實線表示)。圖10是表示圖9所示的剪切編輯補正區(qū)域上的剪切編輯后的立體視覺圖像的圖。 圖10中，剪切編輯后的立體視覺圖像包括上述那樣由剪切編輯補正區(qū)域403L及403R進行 了剪切編輯的右眼用剪切編輯補正區(qū)域圖像14和左眼用剪切編輯補正區(qū)域圖像13。壓縮 擴展部102用MPEG格式對右眼用剪切編輯補正區(qū)域圖像14和左眼用剪切編輯補正區(qū)域圖 像13進行壓縮變換，進而，存儲部101對已經(jīng)壓縮變換的右眼用剪切編輯補正區(qū)域圖像14 和左眼用剪切編輯補正區(qū)域圖像13進行存儲。這樣，生成剪切編輯后的立體視覺圖像。圖11是表示本發(fā)明的第二實施方式所涉及的立體視覺圖像的編輯畫面411的結(jié) 構(gòu)(最大基點視差的指定)的圖。如圖11所示，使用者移動鼠標指針指定相對于顯示畫面 位于最面前的被拍攝物體“樹”。此處，將與指定的“樹”所具有的視差相同的視差作為剪切 編輯區(qū)域的框本身所具有的視差即基點視差。之后，在剪切編輯區(qū)域補正步驟S304中，剪 切編輯區(qū)域補正部105以該指定的“樹”所具有的視差為基點視差，并與本發(fā)明的第一實施 方式同樣地，將剪切編輯區(qū)域402L及402R(圖11中用虛線表示)補正為剪切編輯補正區(qū) 域403L及403R(圖11中用實線表示)。圖12是表示圖11所示的剪切編輯補正區(qū)域中的剪切編輯后的立體視覺圖像的 圖。圖12中，剪切編輯后的立體視覺圖像包括上述那樣由剪切編輯補正區(qū)域403L及403R 進行了剪切編輯的右眼用剪切編輯補正區(qū)域圖像14和左眼用剪切編輯補正區(qū)域圖像13。 壓縮擴展部102用MPEG格式對右眼用剪切編輯補正區(qū)域圖像14和左眼用剪切編輯補正區(qū) 域圖像13進行壓縮變換，而且，存儲部101存儲進行了壓縮變換的右眼用剪切編輯補正區(qū) 域圖像14和左眼用剪切編輯補正區(qū)域圖像13。這樣，生成剪切編輯后的立體視覺圖像。另外，立體視覺圖像10的壓縮格式并不限于MPEG格式，也可以采用例如AVI格式 及H. 264格式等其他壓縮格式。此外，立體視覺圖像10可以是靜態(tài)圖像，采用例如JPEG格 式等壓縮格式。
如上所述，根據(jù)本發(fā)明的第二實施方式所涉及的立體視覺圖像編輯裝置及立體視 覺圖像編輯方法，使用者通過對指定的剪切編輯區(qū)域的框指定該剪切編輯區(qū)域的框本身所 具有的視差即基點視差，能夠使立體視覺圖像的顯示區(qū)域具有所希望的深度，結(jié)果能夠獲 得具有使用者所希望的立體感的立體視覺圖像。此外，根據(jù)本發(fā)明的第二實施方式所涉及的立體視覺圖像的編輯畫面410及411 的結(jié)構(gòu)，內(nèi)容作者在指定基點視差時，由于能夠指定立體視覺圖像中顯示的被拍攝物體 (特征點)，所以能夠使立體視覺圖像的剪切編輯區(qū)域的框本身所具有的視差和想讓內(nèi)容 收視觀眾關(guān)注的被拍攝物體(特征點)的視差一致。因此，特別是利用畫中畫來顯示時，內(nèi) 容收視觀眾已經(jīng)將視點從母畫面移動到子畫面時，在子畫面上，能夠順暢地將視點誘導(dǎo)到 希望內(nèi)容收視觀眾關(guān)注的被拍攝物體上。另外，構(gòu)成本發(fā)明的第1及第2實施方式中所說明的立體視覺圖像編輯裝置的全 部或者一部分功能塊典型地以集成電路即LSI (根據(jù)集成度的不同，被稱為集成電路(IC Integrated Circuit)、系統(tǒng)LSI、超大LSI、以及甚大LSI等)來實現(xiàn)。他們既可以單獨地 分別形成一個芯片，也可以包含一部分或者全部地形成一個芯片。另外，形成集成電路的手段并不限于LSI，也可以通過專用電路或者通用處理 器來實現(xiàn)。此外，也可以采用在LSI制造之后可編程的現(xiàn)場可編程門陣列(FPGA =Field Programmable Gate Array)、或者LSI內(nèi)部的電路單元的連接及其設(shè)定是可再構(gòu)建的可重 構(gòu)處理器。而且，如果因半導(dǎo)體技術(shù)的進步或者派生出來的其他技術(shù)而出現(xiàn)了取代LSI的集 成電路化的技術(shù)，當然也可以采用該技術(shù)，將功能塊集成化。也可以應(yīng)用生物技術(shù)等。此外，本發(fā)明的第1及第2實施方式中所說明的立體視覺圖像編輯裝置的各功能 也可以通過利用CPU來解釋執(zhí)行規(guī)定的程序數(shù)據(jù)來實現(xiàn)，該規(guī)定的程序數(shù)據(jù)存儲在存儲裝 置(ROM、RAM、硬盤等)中并能夠執(zhí)行上述處理步驟。此時，程序數(shù)據(jù)既可以通過存儲介質(zhì) 導(dǎo)入到存儲裝置內(nèi)，也可以從存儲介質(zhì)上直接執(zhí)行。其中，所謂的存儲介質(zhì)是指ROM、RAM、 閃存等半導(dǎo)體存儲器、軟盤或者硬盤等磁盤存儲器、CD-ROM、DVD、BD等光盤、存儲卡等存儲 介質(zhì)。此外，存儲介質(zhì)是還包括電話線以及傳輸線路等通信介質(zhì)在內(nèi)的概念。工業(yè)實用性本發(fā)明應(yīng)用于對立體視覺圖像的一部分區(qū)域進行剪切編輯的情況等，該立體視覺 圖像包括左眼用圖像和右眼用圖像。例如，本發(fā)明能夠適用于將立體視覺圖像的一部分區(qū) 域進行擴大顯示或者以畫中畫形式重疊在母畫面上進行顯示的情況等。此外，本發(fā)明能夠 適用于將多個圖像及/或者多個立體視覺圖像以并排狀布局進行顯示的情況等。
權(quán)利要求
1.一種立體視覺圖像編輯裝置，其特征在于，是將顯示于顯示器上的、包括左眼用圖像 和右眼用圖像的立體視覺圖像編輯為具有使用者所希望的立體感的立體視覺圖像的立體 視覺圖像編輯裝置，包括存儲上述立體視覺圖像的存儲部；將存儲在上述存儲部中的上述立體視覺圖像變換為能夠在上述顯示器上顯示的格式 的壓縮擴展部；使上述使用者對顯示于上述顯示器上的立體視覺圖像的左眼用圖像和右眼用圖像指 定剪切編輯區(qū)域和該剪切編輯區(qū)域的框本身所具有的視差即基點視差的操作部；根據(jù)由上述使用者所指定的剪切編輯區(qū)域來對顯示于上述顯示器的立體視覺圖像的 左眼用圖像和右眼用圖像進行剪切編輯的剪切編輯部；根據(jù)由上述使用者指定的基點視差對上述已被剪切編輯的左眼用圖像和右眼用圖像 的上述剪切編輯區(qū)域進行補正的剪切編輯區(qū)域補正部。
2.如權(quán)利要求1所述的立體視覺圖像編輯裝置，其特征在于，上述操作部使上述使用 者直接指定上述基點視差。
3.如權(quán)利要求1所述的立體視覺圖像編輯裝置，其特征在于，上述操作部使上述使用 者對上述已被剪切編輯的左眼用圖像和右眼用圖像指定上述剪切編輯區(qū)域內(nèi)的特征點，將上述特征點所具有的視差作為上述基點視差。
4.如權(quán)利要求1所述的立體視覺圖像編輯裝置，其特征在于，上述剪切編輯區(qū)域補正 部從與由上述使用者指定的基點視差具有相同視差的上述剪切編輯區(qū)域內(nèi)的特征點中檢 測最左端的特征點和最右端的特征點，將上述剪切編輯區(qū)域的左端及右端補正為上述所檢測出的最左端的特征點的位置和 上述所檢測出的最右端的特征點的位置。
5.如權(quán)利要求1所述的立體視覺圖像編輯裝置，其特征在于，設(shè)定有至少一個以上的規(guī)定的視差，上述剪切編輯區(qū)域補正部從與每個該規(guī)定的視差 相對應(yīng)的各上述剪切編輯區(qū)域內(nèi)的特征點中檢測最左端的特征點和最右端的特征點，上述剪切編輯區(qū)域補正部生成將上述規(guī)定的視差和上述所檢測出的最左端的特征點 的位置及上述所檢測出的最右端的特征點的位置之間對應(yīng)起來的剪切編輯區(qū)域補正候補 表，上述剪切編輯區(qū)域補正部將上述剪切編輯區(qū)域的左端及右端補正為上述剪切編輯區(qū) 域補正候補表中的、與視差相對應(yīng)的最左端的特征點的位置及最右端的特征點的位置，其 中該視差與由上述使用者指定的基點視差相同。
6.一種立體視覺圖像編輯方法，其特征在于，是立體視覺圖像編輯裝置所執(zhí)行的立體 視覺圖像編輯方法，該立體視覺圖像編輯裝置將顯示于顯示器上的包括左眼用圖像和右眼 用圖像的立體視覺圖像編輯為具有使用者所希望的立體感的立體視覺圖像，該立體視覺圖 像編輯方法執(zhí)行下述步驟將作為編輯對象的立體視覺圖像轉(zhuǎn)換為能夠在上述顯示器上顯示的格式的壓縮擴展 步驟；對顯示于上述顯示器的立體視覺圖像的左眼用圖像和右眼用圖像指定剪切編輯區(qū)域 的剪切編輯區(qū)域指定步驟；根據(jù)上述指定的剪切編輯區(qū)域，將顯示于上述顯示器上的立體視覺圖像的左眼用圖像 和右眼用圖像進行剪切編輯的剪切編輯步驟；對上述已剪切編輯的左眼用圖像和右眼用圖像指定上述剪切編輯區(qū)域的框本身所具 有的視差即基點視差的基點視差指定步驟；根據(jù)上述被指定的基點視差對上述剪切編輯區(qū)域進行補正的剪切編輯區(qū)域補正步驟；將由上述已補正的剪切編輯區(qū)域進行了剪切編輯的左眼用圖像和右眼用圖像保存到 上述立體視覺圖像編輯裝置中的編輯圖像保存步驟。
7.如權(quán)利要求6所述的立體視覺圖像編輯方法，其特征在于，上述基點視差指定步驟 中，使上述使用者直接指定上述基點視差。
8.如權(quán)利要求6所述的立體視覺圖像編輯方法，其特征在于，上述基點視差指定步驟 中，使上述使用者對上述已被剪切編輯的左眼用圖像和右眼用圖像指定上述剪切編輯區(qū)域 內(nèi)的特征點，將上述特征點所具有的視差作為上述基點視差。
9.如權(quán)利要求6所述的立體視覺圖像編輯方法，其特征在于，在上述剪切編輯區(qū)域補正步驟中，從與上述指定的基點視差具有相同視差的上述剪切 編輯區(qū)域內(nèi)的特征點中檢測最左端的特征點和最右端的特征點，并且在上述剪切編輯區(qū)域補正步驟中，將上述剪切編輯區(qū)域的左端及右端補正為上述 所檢測出的最左端的特征點的位置及上述所檢測出的最右端的特征點的位置。
10.如權(quán)利要求6所述的立體視覺圖像編輯方法，其特征在于，設(shè)定有至少一個以上的規(guī)定的視差，在上述剪切編輯區(qū)域補正步驟中，從與每個該規(guī) 定的視差相對應(yīng)的各上述剪切編輯區(qū)域內(nèi)的特征點中檢測最左端的特征點和最右端的特 征點，生成將上述規(guī)定的視差與上述所檢測出的最左端的特征點的位置及上述所檢測出的 最右端的特征點的位置之間相對應(yīng)起來的剪切編輯區(qū)域補正候補表，將上述剪切編輯區(qū)域的左端及右端補正為上述剪切編輯區(qū)域補正候補表中的、與視差 相對應(yīng)的最左端的特征點的位置及最右端的特征點的位置，該視差是與上述被指定的基點 視差相同的視差。
11.一種立體視覺圖像編輯程序，其特征在于，是將立體視覺圖像編輯方法在計算機上執(zhí)行的立體視覺圖像編輯程序，該立體視覺圖 像編輯方法是將顯示于顯示器上的、包括左眼用圖像和右眼用圖像的立體視覺圖像編輯為 具有使用者所希望的立體感的立體視覺圖像的立體視覺圖像編輯方法，該程序執(zhí)行下述步 驟將作為編輯對象的上述立體視覺圖像轉(zhuǎn)換為能夠在上述顯示器上顯示的格式的壓縮 擴展步驟；對顯示于上述顯示器上的立體視覺圖像的左眼用圖像和右眼用圖像指定剪切編輯區(qū) 域的剪切編輯區(qū)域指定步驟；根據(jù)上述指定的剪切編輯區(qū)域?qū)︼@示于上述顯示器上的立體視覺圖像的左眼用圖像 和右眼用圖像進行剪切編輯的剪切編輯步驟；對上述所剪切編輯的左眼用圖像和右眼用圖像指定上述剪切編輯區(qū)域的框本身所具 有的視差即基點視差的基點視差指定步驟；根據(jù)上述指定的基點視差對上述剪切編輯區(qū)域進行補正的剪切編輯區(qū)域補正步驟； 將由上述補正的剪切編輯區(qū)域進行了剪切編輯的左眼用圖像和右眼用圖像保存到上 述立體視覺圖像編輯裝置中的編輯圖像保存步驟。
12. —種集成電路，其特征在于，是將顯示于顯示器的、包括左眼用圖像和右眼用圖像 的立體視覺圖像編輯成具有使用者所希望的立體感的立體視覺圖像的集成電路，具有下述 部分存儲上述立體視覺圖像的存儲部；將存儲于上述存儲部中的上述立體視覺圖像轉(zhuǎn)換為能夠在上述顯示器上顯示的格式 的壓縮擴展部；剪切編輯部，關(guān)于顯示于上述顯示器的立體視覺圖像的左眼用圖像和右眼用圖像，根 據(jù)由上述使用者指定的剪切編輯區(qū)域來剪切編輯該左眼用圖像和右眼用圖像；剪切編輯區(qū)域補正部，根據(jù)由上述使用者指定的上述剪切編輯區(qū)域的框本身所具有的 視差即基點視差，對上述已剪切編輯的左眼用圖像和右眼用圖像進行上述剪切編輯區(qū)域的 補正。
全文摘要
提供一種立體視覺圖像編輯裝置及立體視覺圖像編輯方法，該裝置和方法通過使用者對剪切編輯區(qū)域的框指定該剪切編輯區(qū)域的框本身所具有的視差即基點視差，能夠獲得具有使用者所希望的立體感的立體視覺圖像。本發(fā)明的立體視覺圖像編輯裝置包括存儲立體視覺圖像的存儲部；將立體視覺圖像轉(zhuǎn)換為能夠在顯示器上顯示的格式的壓縮擴展部；使使用者對立體視覺圖像的左眼用圖像和右眼用圖像指定剪切編輯區(qū)域及該剪切編輯區(qū)域的框本身所具有的視差即基點視差的操作部；根據(jù)由使用者所指定的剪切編輯區(qū)域剪切編輯立體視覺圖像的左眼用圖像和右眼用圖像的剪切編輯部；根據(jù)使用者所指定的基點視差對所剪切編輯的左眼用圖像和右眼用圖像進行剪切編輯區(qū)域的補正的剪切編輯區(qū)域補正部。
文檔編號H04N13/00GK102144396SQ201080002499
公開日2011年8月3日 申請日期2010年5月13日 優(yōu)先權(quán)日2009年8月25日
發(fā)明者松井典弘 申請人:松下電器產(chǎn)業(yè)株式會社