專利名稱：中間圖像生成方法、中間圖像文件、中間圖像生成裝置、立體圖像生成方法、立體圖像生成 ...的制作方法
技術(shù)領(lǐng)域：
本發(fā)明涉及對從多個視點(diǎn)拍攝的多個視點(diǎn)圖像進(jìn)行轉(zhuǎn)換從而生成中間圖像、立體圖像的方法和裝置，以及生成使用這些方法和裝置的立體圖像的系統(tǒng)、和顯示該立體圖像的裝置。
背景技術(shù)：
一直以來，將從多個視點(diǎn)拍攝的圖像以每個視點(diǎn)一單位像素或者一單位子像素的方式在斜方向上排列而構(gòu)成顯示畫面，并在其前面配置格柵來造成視差以對立體圖像進(jìn)行視覺判斷，這種技術(shù)得到了廣泛應(yīng)用(例如，專利文獻(xiàn)I)。另外，作為將圖像的像素配置轉(zhuǎn)換成與立體圖像顯示裝置相對應(yīng)的像素配置的已有技術(shù)，在專利文獻(xiàn)2的段落0088及圖I中公開了一種將圖像的像素配置轉(zhuǎn)換成與視差格柵方式的立體圖像顯示裝置相對應(yīng)的像素配置的技術(shù)。在該段落0088及圖I中，作為在裝置內(nèi)將圖像的像素配置轉(zhuǎn)換成立體顯示用的技術(shù)性解決方案，公開了一種具有圖像合成電路的立體圖像顯示裝置。另外，在非專利文獻(xiàn)I中，公開了一種在個人電腦上運(yùn)行的、用于將影像的像素配置轉(zhuǎn)換成立體顯示用的軟件。在這種立體圖像的生成過程中，一般情況下，大規(guī)模的立體圖像顯示系統(tǒng)，即，搭載有能夠高速運(yùn)行用于從攝像圖像生成立體圖像的復(fù)雜的演算處理的、特殊的高價顯卡的電腦等，成為必要要素。現(xiàn)有技術(shù)文獻(xiàn)專利文獻(xiàn)專利文獻(xiàn)I :日本特開2004-191570專利文獻(xiàn)2 日本特開2004-179806非專利文獻(xiàn)非專利文獻(xiàn)I :Visumotion GMBH 提供的軟件“Display Configurator” 及 “3DMovie Center” 的手冊

發(fā)明內(nèi)容
發(fā)明所要解決的課題但是，對于提供如上所述的立體圖像，需要高速CPU、大容量存儲器、高性能顯卡等資源消耗大且非常特殊的高價電腦等，在立體圖像顯示技術(shù)的普及上存在很大課題。另外，在已對能夠立體觀看的圖像文件進(jìn)行了壓縮的情況下，由于從各個視點(diǎn)拍攝的圖像由每個像素或每個子像素連續(xù)配置，所以會相互干擾，并且在進(jìn)行解壓縮播放時，存在已經(jīng)扭曲到無法立體觀看的程度的問題，立體圖像無法壓縮。因此，需要壓縮并發(fā)送每個視點(diǎn)的圖像，使其存儲至存儲媒體中，在生成立體圖像時解壓縮每個視點(diǎn)的圖像，并高速運(yùn)行復(fù)制的插值計(jì)算，從而生成立體圖像。進(jìn)一步地，將各視點(diǎn)的圖像呈磚瓦狀配置的圖像在多數(shù)情況下其分辨率或縱橫尺寸比與立體圖像即裸眼立體顯示器的分辨率不同。尤其是，為了使生成立體圖像時的畫質(zhì)盡可能地接近高品質(zhì)，則在各視點(diǎn)的圖像中需要高于規(guī)定的分辨率，因此，呈磚瓦狀配置的圖像與裸眼立體顯示器的分辨率相比變得非常大。由此，當(dāng)進(jìn)行壓縮并發(fā)送時，需要高速的傳輸網(wǎng)絡(luò)，還需要更大容量的存儲媒體。當(dāng)然，即使不將各視點(diǎn)的圖像呈磚瓦狀配置，而是獨(dú)立的圖像，總體上也存在完全相同的 問題。根據(jù)上述情況，最大的問題是，通過由藍(lán)光或STB等存儲影像并發(fā)送的情況下的標(biāo)準(zhǔn)格式，無法提供用于生成立體圖像的每個視點(diǎn)的圖像。因此，本發(fā)明為了解決上述課題，其技術(shù)課題是實(shí)現(xiàn)一種立體圖像生成系統(tǒng)，其中，通過預(yù)先生成具有與最終輸出圖像即立體圖像相同的分辨率且對每個視點(diǎn)的像素進(jìn)行了匯總的中間圖像，而無需使用高速的特殊電腦等，就能僅通過像素的配置轉(zhuǎn)換而實(shí)現(xiàn)立體圖像的生成，進(jìn)一步地，若使用將各視點(diǎn)的圖像呈磚瓦狀配置的中間圖像，則通過簡單廉價的立體圖像生成裝置(電腦)，將由藍(lán)光或STB等標(biāo)準(zhǔn)的圖像輸出裝置或圖像發(fā)布服務(wù)器以標(biāo)準(zhǔn)格式輸出或發(fā)送的該中間圖像生成為立體圖像。課題的解決方案為了解決上述課題，本發(fā)明中的中間圖像生成方法是用于生成立體圖像的多個中間圖像的生成方法，其中，該立體圖像是由在第I視點(diǎn)至第N視點(diǎn)的多個視點(diǎn)上拍攝及/或描畫的多個視點(diǎn)圖像轉(zhuǎn)換得到的；其特征在于，為了對RGB階梯配置像素塊進(jìn)行重復(fù)配置并生成該立體圖像，其中，該RGB階梯配置像素塊將沿斜方向在拐角處對子像素進(jìn)行連接且排列成三行的RGB階梯配置像素單元在水平方向上從該第I視點(diǎn)至第N視點(diǎn)進(jìn)行了連接排列，而將構(gòu)成該RGB階梯配置像素單元的每一個子像素的R值、G值、B值，根據(jù)構(gòu)成在與構(gòu)成該RGB階梯配置像素單元的子像素的配置位置相對應(yīng)的、該多個視點(diǎn)圖像上的對應(yīng)位置附近配置的至少一個以上像素單元的子像素的RGB值，進(jìn)行插值并求出，將對構(gòu)成該RGB階梯配置像素單元的子像素在水平方向上以R、G、B的順序進(jìn)行了并排排列的RGB并列配置像素單元，按照在該多個視點(diǎn)中的每一個上集中配置的配置規(guī)則而配置，并生成該多個視點(diǎn)中的每一個視點(diǎn)的該中間圖像，由此，該立體圖像的該RGB階梯配置像素單元與該多個中間圖像的該RGB并列配置像素單元的總數(shù)是相同數(shù)目，或者，分別構(gòu)成這兩者的子像素的總數(shù)是相同數(shù)目。根據(jù)上述特征，基于構(gòu)成每個視點(diǎn)的圖像的像素?cái)?shù)的合計(jì)與立體圖像的像素?cái)?shù)相同的情況下的最低要求的分辨率，能夠生成可壓縮的中間圖像，還能不使用高速的特殊電腦而僅通過構(gòu)成這種中間圖像的子像素的配置更改(映射)來生成能立體觀看的立體圖像。另外，優(yōu)選地，所述RGB階梯配置像素單元的各行的子像素為一列，且由具有R值、G值、B值的三個該子像素構(gòu)成；所述RGB并列配置像素單元中，在一行上，將該三個子像素以R、G、B的順序并排排列成了三列。由此，在子像素是以1:3的比率縱長的長方形的情況下，能夠生成可轉(zhuǎn)換成立體圖像的多個中間圖像，其中，該立體圖像具有的子像素的配置為，將能最恰當(dāng)?shù)亓Ⅲw觀看的三個子像素沿斜方向在拐角處進(jìn)行連接并排列成三行一列。
另外，權(quán)利要求I所述的中間圖像生成方法優(yōu)選為，所述RGB階梯配置像素單元的各行的子像素為兩列，且該兩列中的各列均由具有R值、G值、B值的三個該子像素構(gòu)成；所述RGB并列配置像素單元中，在一行上，將在該RGB階梯配置像素單元的第一列上呈三行排列的三個子像素以R、G、B的順序并排排列成了三列；與該排列在水平方向上連接，并將在該RGB階梯配置像素單元的第二列上呈三行排列的三個子像素以R、G、B的順序并排排列成了三列。另外，權(quán)利要求I所述的中間圖像生成方法優(yōu)選為，所述RGB階梯配置像素單元的各行的子像素為三列，且該三列中的各列均由具有R值、G值、B值的三個該子像素構(gòu)成；所述RGB并列配置像素單元中，在一行上，將在該RGB階梯配置像素單元的第一列上呈三行排列的三個子像素以R、G、B的順序并排排列；與該排列在水平方 向上連接，并將在該RGB階梯配置像素單元的第二列上呈三行排列的三個子像素以R、G、B的順序并排排列；與該排列進(jìn)一步連接，并將在該RGB階梯配置像素單元的第三列上排列的三個子像素以R、G、B的順序并排排列。另外，權(quán)利要求I所述的中間圖像生成方法優(yōu)選為，通過將所述多個中間圖像作為圖像幀配置成由至少在縱方向上分割成三層的第一行至第三行構(gòu)成的多個磚瓦狀，構(gòu)成所述RGB階梯配置像素單元的子像素與構(gòu)成所述RGB并列配置像素單元的子像素在配置有所述立體圖像和該多個中間圖像的該圖像幀上，在縱橫方向上均為相同數(shù)目。能夠以非常便宜的價格提供一種富有如下實(shí)用性的立體圖像顯示系統(tǒng)，通過將各視點(diǎn)的圖像呈磚瓦狀配置，中間圖像和裸眼立體顯示器(立體圖像)的分辨率/縱橫尺寸比成為相同的，能夠由立體圖像生成裝置(電腦)將通過藍(lán)光或STB等標(biāo)準(zhǔn)的圖像輸出裝置或圖像發(fā)布服務(wù)器以標(biāo)準(zhǔn)格式輸出或發(fā)送的中間圖像簡單地生成為立體圖像。另外，權(quán)利要求5所述的中間圖像生成方法優(yōu)選為，在所述多個視點(diǎn)為兩個視點(diǎn)的情況下，在所述第一行的磚瓦上配置第I視點(diǎn)的所述中間圖像的2/3 ;在于所述第二行的第I磚瓦上與第I視點(diǎn)的該中間圖像的1/3相連接的第2磚瓦上，配置第2視點(diǎn)的該中間圖像的1/3 ;在所述第三行的磚瓦上配置第2視點(diǎn)的該中間圖像的2/3，在所述多個視點(diǎn)為三個視點(diǎn)的情況下，在各行的磚瓦上配置各視點(diǎn)的中間圖像，在所述多個視點(diǎn)為4飛個視點(diǎn)的情況下，在各行的首塊磚瓦上配置第廣3視點(diǎn)的該中間圖像；在配置于與第f 3視點(diǎn)的該中間圖像相連接的第一行至第三行上的磚瓦上，配置剩余視點(diǎn)的該中間圖像，在所述多個視點(diǎn)為7、個視點(diǎn)的情況下，在各行的首塊的磚瓦上配置第廣3視點(diǎn)的該中間圖像；在與第Γ3視點(diǎn)的該中間圖像相連接的第一行至第三行的磚瓦上，配置第4飛視點(diǎn)的該中間圖像；在配置于與第4飛視點(diǎn)的該中間圖像相連接的第一行至第三行上的磚瓦上，配置剩余視點(diǎn)的中間圖像，在所述多個視點(diǎn)為10個視點(diǎn)以上的情況下，也是同樣地從第I視點(diǎn)開始，依次在各行的磚瓦上配置該中間圖像的一部分或全部。另外，權(quán)利要求I所述的中間圖像生成方法優(yōu)選為，代替所述配置規(guī)則，而是參照將構(gòu)成所述立體圖像的所述RGB階梯配置像素單元的子像素的位置與構(gòu)成該多個視點(diǎn)中的每一個視點(diǎn)的中間圖像的所述RGB并列配置像素單元的子像素的位置相關(guān)聯(lián)的、預(yù)先制作成的中間圖像生成表，對構(gòu)成該RGB階梯配置像素單元的子像素進(jìn)行排列，并生成該RGB并列配置像素單元。另外，權(quán)利要求I所述的中間圖像生成方法優(yōu)選為，在所述多個視點(diǎn)圖像中的每一個均與所述立體圖像為同一縱橫尺寸比的情況下，構(gòu)成所述RGB階梯配置像素塊的所述第I視點(diǎn)至第N視點(diǎn)的所述RGB階梯配置像素單元中，將構(gòu)成預(yù)先決定的基準(zhǔn)視點(diǎn)的該RGB階梯配置像素單元的每一個子像素的R值、G值、B值，根據(jù)構(gòu)成在與構(gòu)成該RGB階梯配置像素單元的子像素的配置位置相對應(yīng)的、該基準(zhǔn)視點(diǎn)的視點(diǎn)圖像上的對應(yīng)位置附近配置的像素單元的子像素的RGB值，進(jìn)行插值并求出，將構(gòu)成該基準(zhǔn)視點(diǎn)以外的視點(diǎn)的該RGB階梯配置像素單元的每一個子像素的R值、G值、B值，根據(jù)構(gòu)成在與構(gòu)成該基準(zhǔn)視點(diǎn)的該RGB階梯配置像素單元的子像素的配置位置相對應(yīng)的、該基準(zhǔn)視點(diǎn)以外的視點(diǎn)的視點(diǎn)圖像上的對應(yīng)位置附近配置的至少一個以上像素單元的子像素的該視點(diǎn)圖像的RGB值，進(jìn)行插值并求出。這樣，通過將構(gòu)成RGB階梯配置像素單元的任一子像素作為基準(zhǔn)來求出其他子像素的RGB值，能夠顯示基于現(xiàn)實(shí)的清晰的立體圖像。 另外，本發(fā)明中的中間圖像生成裝置是用于根據(jù)權(quán)利要求I所述的方法而生成多個中間圖像的中間圖像生成裝置，其特征在于，該中間圖像生成裝置至少包括中央處理裝置和存儲裝置，該中央處理裝置為了對RGB階梯配置像素塊進(jìn)行重復(fù)配置并生成該立體圖像，其中，該RGB階梯配置像素塊將沿斜方向在拐角處對子像素進(jìn)行連接且排列成三行的RGB階梯配置像素單元在水平方向上從該第I視點(diǎn)至第N視點(diǎn)進(jìn)行了連接排列，而將構(gòu)成該RGB階梯配置像素單元的每一個子像素的R值、G值、B值，根據(jù)構(gòu)成在與構(gòu)成該RGB階梯配置像素單元的子像素的配置位置相對應(yīng)的、存儲在該存儲裝置中的該多個視點(diǎn)圖像上的對應(yīng)位置附近配置的至少一個以上像素單元的子像素的RGB值，進(jìn)行插值并求出，將對構(gòu)成該RGB階梯配置像素單元的子像素在水平方向上以R、G、B的順序進(jìn)行了并排排列的RGB并列配置像素單元，按照在該多個視點(diǎn)中的每一個上集中配置的配置規(guī)則而配置，生成由該RGB并列配置像素單元構(gòu)成的該多個視點(diǎn)中的每一個視點(diǎn)的中間圖像，其中，該立體圖像的該RGB階梯配置像素單元與該多個中間圖像的該RGB并列配置像素單元的總數(shù)是相同數(shù)目，或者，分別構(gòu)成這兩者的子像素的總數(shù)是相同數(shù)目。另外，本發(fā)明中的立體圖像生成方法是從根據(jù)權(quán)利要求I所述的方法而生成的多個中間圖像生成立體圖像的方法，其特征在于，從所述多個視點(diǎn)中的每一個視點(diǎn)的中間圖像，按照所述配置規(guī)則，將構(gòu)成所述RGB并列配置像素單元的子像素作為所述RGB階梯配置像素單元而進(jìn)行配置并生成該立體圖像。另外，在權(quán)利要求10所述的立體圖像生成方法中優(yōu)選為，代替所述配置規(guī)則，而是參照將構(gòu)成所述多個視點(diǎn)中的每一個視點(diǎn)的中間圖像的所述RGB并列配置像素單元的子像素的位置與構(gòu)成所述立體圖像的所述RGB階梯配置像素單元的子像素的位置相關(guān)聯(lián)的、預(yù)先制作成的立體圖像生成表，將構(gòu)成該RGB并列配置像素單元的子像素作為該RGB階梯配置像素單元而進(jìn)行配置。另外，本發(fā)明中的立體圖像生成裝置是用于根據(jù)權(quán)利要求11所述的方法而從多個中間圖像生成立體圖像的立體圖像生成裝置，其特征在于，該立體圖像生成裝置至少包括中央處理裝置和存儲裝置，該中央處理裝置將所述多個視點(diǎn)中的每一個視點(diǎn)的中間圖像存儲至該存儲裝置中，從所述多個視點(diǎn)中的每一個視點(diǎn)的中間圖像，按照與所述配置規(guī)則相反的順序，將構(gòu)成所述RGB并列配置像素單元的子像素作為所述RGB階梯配置像素單元而進(jìn)行配置并生成該立體圖像。
另外，本發(fā)明中的立體圖像生成系統(tǒng)包括至少具備中央處理裝置、存儲裝置、壓縮裝置和發(fā)送裝置的生成用于生成立體圖像的多個中間圖像的第一信息處理裝置，其中，該立體圖像是由在第I視點(diǎn)至第N視點(diǎn)的多個視點(diǎn)上拍攝及/或描畫的多個視點(diǎn)圖像轉(zhuǎn)換得到的；和至少具備中央處理裝置、存儲裝置、解壓縮裝置和接收裝置的從多個中間圖像生成立體圖像的第二信息處理裝置，其特征在于，該第一信息處理裝置的該中央處理裝置為了對RGB階梯配置像素塊進(jìn)行重復(fù)配置并生成該立體圖像，其中，該RGB階梯配置像素塊將沿斜方向在拐角處對子像素進(jìn)行連接且排列成三行的RGB階梯配置像素單元在水平方向上從該第I視點(diǎn)至第N視點(diǎn)進(jìn)行了連接排列，而將構(gòu)成該RGB階梯配置像素單元的每一個子像素的R值、G值、B值，根據(jù)構(gòu)成在與構(gòu)成該RGB階梯配置像素單元的子像素的配置位置相對應(yīng)的、存儲在該第一信息處理裝置的存儲裝置中的該多個視點(diǎn)圖像上的對應(yīng)位置附近配置的至少一個以上像素單元的子像素的RGB值，進(jìn)行插值并求出，將對構(gòu)成該RGB階梯配置像素單元的子像素在水平方向上以R、G、B的順序進(jìn)行了并排排列的RGB并列配置像素單元，按照在該多個視點(diǎn)中的每一個上集中配置的配置規(guī)則而配置，生成由該RGB 并列配置像素單元構(gòu)成的該多個視點(diǎn)中的每一個視點(diǎn)的中間圖像，其中，該立體圖像的該RGB階梯配置像素單元與該多個中間圖像的該RGB并列配置像素單元的總數(shù)是相同數(shù)目，或者，分別構(gòu)成這兩者的子像素的總數(shù)是相同數(shù)目，并且，通過該壓縮裝置對該多個視點(diǎn)中的每一個視點(diǎn)的中間圖像進(jìn)行壓縮，再通過該發(fā)送裝置將其發(fā)送至第二信息處理裝置，該第二信息處理裝置的該中央處理裝置通過該接收裝置接收從該第一信息處理裝置發(fā)送來的該多個視點(diǎn)中的每一個視點(diǎn)的中間圖像，并通過解壓縮裝置對該多個中間圖像進(jìn)行解壓縮，從通過該解壓縮裝置解壓縮的該多個視點(diǎn)中的每一個視點(diǎn)的中間圖像按照與該配置規(guī)則相反的順序，將構(gòu)成該RGB并列配置像素單元的子像素作為該RGB階梯配置像素單元而進(jìn)行配置并生成該立體圖像。發(fā)明效果根據(jù)本發(fā)明，能夠以非常便宜的價格提供一種富有如下實(shí)用性的立體圖像顯示系統(tǒng)，即，基于構(gòu)成每個視點(diǎn)的圖像的像素?cái)?shù)的合計(jì)與立體圖像的像素?cái)?shù)相同的情況下的最低要求的分辨率，能夠生成可壓縮的中間圖像，還能不使用高速的特殊電腦而僅通過構(gòu)成這種中間圖像的子像素的配置更改(映射)來生成能立體觀看的立體圖像，進(jìn)一步地，通過根據(jù)本發(fā)明將各視點(diǎn)的圖像呈磚瓦狀配置，中間圖像和裸眼立體顯示器(立體圖像)的分辨率/縱橫尺寸比成為相同的，能夠由立體圖像生成裝置(電腦)將通過藍(lán)光或STB等標(biāo)準(zhǔn)的圖像輸出裝置或圖像發(fā)布服務(wù)器以標(biāo)準(zhǔn)格式輸出或發(fā)送的中間圖像簡單地生成為立體圖像。


圖I是大致表示中間圖像生成裝置、立體圖像生成裝置以及立體圖像生成系統(tǒng)的構(gòu)成的框圖。圖2表示通過中間圖像生成裝置、立體圖像生成系統(tǒng)來運(yùn)行的信息處理的流程圖。圖3是對中間圖像的生成方法的實(shí)施方式進(jìn)行說明的圖。圖4是對中間圖像的生成方法的實(shí)施方式進(jìn)行說明的圖。
圖5是對中間圖像的生成方法的實(shí)施方式進(jìn)行說明的圖。圖6是對中間圖像的生成方法的實(shí)施方式進(jìn)行說明的圖。圖7是對中間圖像生成表進(jìn)彳丁說明的圖。圖8是表示中間圖像的圖像幀的配置的示例的圖。圖9是對圖像幀的差異進(jìn)行說明的圖。圖10是表示由多個中間圖像構(gòu)成的圖像幀的示例的圖。圖11是表示RGB階梯配置像素單元的配置例的圖。圖12是表示立體圖像生成裝置的實(shí)施方式的一例的外形圖。圖13是表示立體圖像生成裝置的其他實(shí)施方式的一例的外形圖。圖14是表示多個視點(diǎn)的圖像的示例的圖。圖15是表示多個視點(diǎn)的動態(tài)圖像的示例的圖。圖16是表示多個視點(diǎn)的動態(tài)圖像的示例的圖。圖17是表示多個視點(diǎn)的中間圖像的第一實(shí)施例的圖。圖18是表示多個視點(diǎn)的中間圖像的第二實(shí)施例的圖。圖19是表示多個視點(diǎn)的中間圖像的第三實(shí)施例的圖。圖20是表示多個視點(diǎn)的中間圖像的第四實(shí)施例的圖。
圖21是對圖像信息實(shí)際上表示哪種信息進(jìn)行說明的圖。圖22是對圖像信息實(shí)際上表示哪種信息進(jìn)行說明的圖。圖23是表示對平面圖像與多個視點(diǎn)的中間圖像進(jìn)行辨別的方法的流程圖。圖24是對可視光透射部的橫寬Sh的合適值進(jìn)行說明的圖。圖25是對可視光透射部的橫寬Sh的合適值進(jìn)行說明的圖。圖26是對求出可視光透射部的高度Sv的示例進(jìn)行說明的圖。圖27是對求出可視光透射部的高度Sv的示例進(jìn)行說明的圖。圖28是對求出多個可視光透射部的間隔Hh的示例進(jìn)行說明的圖。圖29是對求出多個可視光透射部的間隔Hh的示例進(jìn)行說明的圖。圖30是表示求出多個可視光透射部的間隔Hh的示例的圖。圖31是表示求出多個可視光透射部的間隔Hh的示例的圖。圖32是對莫爾條紋進(jìn)行說明的圖。圖33是對L2、L2n、L2f的相對的關(guān)系進(jìn)行說明的圖。圖34是對求出可視光透射部的間隔Hv的值的方法進(jìn)行說明的圖。圖35是對可視光透射部與像素的關(guān)系進(jìn)行說明的圖。圖36是對注視點(diǎn)間距離K與L3的關(guān)系進(jìn)行說明的圖。圖37是對求出可視光透射部的間隔Hv的值的方法進(jìn)行說明的圖。圖38是對求出可視光透射部的間隔Hv的值的方法進(jìn)行說明的圖。圖39是對可視光透射部的個數(shù)進(jìn)行說明的圖。圖40是對[HvX (Mv-I)]與[(Jr-1/β ) XPv]的關(guān)系進(jìn)行說明的圖。圖41是表示求出L3n及L3f的值的示例的圖。圖42是表示求出L3n及L3f的值的示例的圖。圖43是表示求出L3n及L3f的值的示例的圖。
圖44是對視差格柵的狹縫的形狀的一例進(jìn)行說明的圖。圖45是對視差格柵的狹縫的形狀的一例進(jìn)行說明的圖。圖46是對視差格柵的狹縫的形狀的一例進(jìn)行說明的圖。圖47是對視差格柵的狹縫的形狀的一例進(jìn)行說明的圖。圖48是對視差格柵的狹縫的形狀的一例進(jìn)行說明的圖。圖49是對視差格柵的狹縫的形狀的一例進(jìn)行說明的圖。圖50是對莫爾條紋合適消除區(qū)域進(jìn)行說明的圖。 圖51是表示裸眼立體圖像顯示裝置上的子像素的形狀的示例的圖。
具體實(shí)施例方式以下，參照附圖對本發(fā)明的實(shí)施方式進(jìn)行詳述。圖I是大致表示本發(fā)明的中間圖像生成裝置的構(gòu)成、立體圖像生成裝置的構(gòu)成、以及立體圖像生成系統(tǒng)中使用的信息處理裝置的構(gòu)成的框圖。圖I (a)的中間圖像生成裝置31包括中央處理裝置33和存儲裝置35。存儲裝置35存儲有在第I視點(diǎn)至第N視點(diǎn)的多個視點(diǎn)上拍攝及/或描畫的多個視點(diǎn)圖像。對于視點(diǎn)圖像的生成，除了用多臺照相機(jī)從不同的視點(diǎn)拍攝對象物之外，還列舉了用計(jì)算機(jī)制圖技術(shù)進(jìn)行描畫。中央處理裝置33從存儲在存儲裝置35中的多個視點(diǎn)圖像進(jìn)行多個運(yùn)算處理而生成中間圖像。圖I (b)的立體圖像生成裝置61包括中央處理裝置33和存儲裝置35。中央處理裝置35使已輸入的多個中間圖像存儲至存儲裝置35 (幀緩沖存儲器)中，并進(jìn)行像素配置的轉(zhuǎn)換而生成立體圖像。圖I (C)的立體圖像生成系統(tǒng)由第一信息處理裝置41和第二信息處理裝置47構(gòu)成，第一信息處理裝置41包括中央處理裝置33、存儲裝置35、壓縮裝置43和發(fā)送裝置45，第二信息處理裝置47包括中央處理裝置33、存儲裝置35、解壓縮裝置49和接收裝置51。壓縮裝置43以預(yù)先確定的方式進(jìn)行多個中間圖像的不可逆壓縮。作為壓縮方式，在靜止圖像中通過JPEG的方式來進(jìn)行，而在動態(tài)圖像中通過MPEG-2、MPEG-4等代表性的方式來進(jìn)行。發(fā)送裝置45將由壓縮裝置43壓縮的多個中間圖像發(fā)送至第二信息處理裝置47。作為發(fā)送方式，除了經(jīng)由USB接口的有線方式發(fā)送之外，還提出了使用光通信、藍(lán)牙(BLUETOOTH、注冊商標(biāo))、無線LAN等無線方式發(fā)送。接收裝置51接收由發(fā)送裝置45發(fā)送的多個中間圖像。解壓縮裝置49對由壓縮裝置43壓縮的多個中間圖像進(jìn)行解壓縮。圖2 Ca)是通過圖I (a)的中間圖像生成裝置31來運(yùn)行的信息處理的流程圖。在圖2 (a)中，首先，中間圖像生成裝置31包括的中央處理裝置33將根據(jù)使用者的操作(從第I視點(diǎn)至第N視點(diǎn)的多個視點(diǎn)通過照相機(jī)拍攝對象物，或者從第I視點(diǎn)至第N視點(diǎn)的多個視點(diǎn)通過計(jì)算機(jī)制圖技術(shù)進(jìn)行描畫)而輸入的多個視點(diǎn)圖像存儲至中間圖像生成裝置31包括的存儲裝置35中(步驟S201)。其次，中央處理裝置33辨別有無控制信息輸入(步驟S202)?？刂菩畔⑹侵窷TSC和PAL的掃描方式、隔行掃描和逐行掃描的發(fā)送方式、視點(diǎn)數(shù)、分辨率、像素配置方法等?？刂菩畔⑤斎胧怯弥虚g圖像生成裝置31進(jìn)一步包括的鍵盤和鼠標(biāo)等通過使用者的操作來進(jìn)行的。由此,格式會確定下來。
若步驟S202的辨別結(jié)果是有控制信息輸入，則該中央處理裝置33進(jìn)行基于控制信息的立體圖像的生成(步驟S203)。在此，立體圖像可以是具有向使用者最終展示的能立體觀看的子像素配置的圖像，在使用視差格柵等的裸眼立體觀看的情況下，優(yōu)選為將RGB階梯配置像素塊重復(fù)配置并構(gòu)成立體圖像，其中，該RGB階梯配置像素塊將沿斜方向在拐角處對子像素進(jìn)行連接且排列成三行的RGB階梯配置像素單元在水平方向上從第I視點(diǎn)至第N視點(diǎn)進(jìn)行了連接排列。對于構(gòu)成RGB階梯配置像素單元的子像素的代表性配置，提出了例如圖11所示的示例。基于控制信息的立體圖像的生成是指，在例如預(yù)定了立體圖像顯示的顯示器的分辨率為1980X1080的情況下，能夠生 成具有適于輸出的分辨率的立體圖像，即具有1980X1080分辨率的立體圖像。此外，關(guān)于步驟S203中進(jìn)行的立體圖像的生成，詳見后述。接著，中央處理裝置33從已生成的立體圖像生成多個中間圖像(步驟S204)。中間圖像是指用于生成立體圖像的圖像，多個中間圖像分別在多個視點(diǎn)的每一個上，集中配置有對構(gòu)成RGB階梯配置像素單元的子像素在水平方向上以R、G、B的順序進(jìn)行并列排列的RGB并列配置像素單元。在本發(fā)明中，從在多個視點(diǎn)拍攝或描畫的多個視點(diǎn)圖像預(yù)先生成或假設(shè)立體圖像，然后根據(jù)該立體圖像進(jìn)行中間圖像的生成。關(guān)于步驟S204中進(jìn)行的中間圖像的生成，也和步驟S203 —樣詳見后述。接著，中央處理裝置33將在步驟S204中生成的中間圖像存儲至存儲裝置35 (步驟 S205)。在步驟S205中存儲了中間圖像之后，本處理結(jié)束。處理結(jié)束之后，也可以再次返回到步驟S203。例如，在根據(jù)同一控制信息而重復(fù)進(jìn)行立體圖像和中間圖像的生成的情況(視點(diǎn)圖像依次輸入到中間圖像生成裝置中的情況)下，無需每次都輸入控制信息，就能預(yù)期可用性的提高。這種情況下，為了使中間圖像生成裝置31對連續(xù)進(jìn)行立體圖像和中間圖像的生成的情況進(jìn)行識別，也可以通過鍵盤等的特定動作來進(jìn)行模式改變，與重復(fù)進(jìn)行立體圖像和中間圖像的生成的處理相關(guān)聯(lián)。此外，如圖2 (b)的圖示例所示，在步驟S204中，實(shí)際上不進(jìn)行立體圖像的生成也可以假設(shè)立體圖像來進(jìn)行以下處理。圖2 (c)是通過圖I (b)的立體圖像生成系統(tǒng)來運(yùn)行的信息處理的流程圖。圖2 (C)的構(gòu)成與圖2 (a)中的至步驟S204為止的處理基本相同，對于同一構(gòu)成要素則省略重復(fù)說明，僅對不同部分進(jìn)行以下說明。第一信息處理裝置41及第二信息處理裝置47是在圖2 (a)所用的中間圖像生成裝置31中進(jìn)一步分別具備了壓縮裝置43和發(fā)送裝置45、或者、解壓縮裝置49和接收裝置51的信息處理裝置。首先，第一信息處理裝置41的中央處理裝置33通過壓縮裝置43對由步驟S204生成的多個中間圖像進(jìn)行壓縮(步驟S205)。其次，將由步驟S205壓縮的多個中間圖像存儲至存儲裝置35 (步驟S206)。接著，該中央處理裝置33將所壓縮存儲的多個中間圖像從發(fā)送裝置45向第二信息處理裝置47進(jìn)行發(fā)送(步驟S207)。第二信息處理裝置47的中央處理裝置33通過接收裝置51接收由步驟S207從第一信息處理裝置41發(fā)送出的多個中間圖像(步驟S208)。
接著，該中央處理裝置33通過解壓縮裝置49對所接收的多個中間圖像進(jìn)行解壓縮(步驟S209)。接著，該中央處理裝置33從解壓縮后的多個中間圖像進(jìn)行最終向使用者輸出的立體圖像的生成(步驟S210)。步驟S210中的立體圖像與步驟S203中的立體圖像相同。關(guān)于由步驟S210進(jìn)行的中間圖像的生成，也和步驟S203、步驟S204 —樣詳見后述。在步驟S210生成立體圖像之后，本處理結(jié)束。在處理結(jié)束之后，也可以將所生成的中間圖像輸出至立體圖像顯示裝置65。另外，若從第一信息處理裝置41繼續(xù)發(fā)送中間圖像，則也可以連續(xù)進(jìn)行步驟S208至步驟S210的處理。根據(jù)本圖示例(c)中的系統(tǒng)，可以例如在任一地點(diǎn)設(shè)置多個照相機(jī)連續(xù)進(jìn)行拍攝，將中間圖像以現(xiàn)有格式在世界范圍內(nèi)發(fā)布，從而使很多使用者同時且實(shí)時地對立體圖像進(jìn)行視覺判斷，其中該中間圖像呈磚瓦狀配置有由第一信息處理裝置41依次生成的每個視點(diǎn)的圖像。 S卩，若在第一信息處理裝置41上為了實(shí)時進(jìn)行多個中間圖像的生成處理而搭載了高價的顯卡和高速的CPU等，并在使用者使用的多個第二信息處理裝置47上搭載了較低速的CPU的話，則僅通過像素的配置改變，就能以現(xiàn)有格式實(shí)現(xiàn)使可生成立體圖像的多個中間圖像的特性得到發(fā)揮的至今沒有的立體圖像視聽環(huán)境。也就是說，基于構(gòu)成每個視點(diǎn)的圖像的像素?cái)?shù)的合計(jì)與立體圖像的像素?cái)?shù)相同的情況下的最低要求的分辨率，能夠生成可壓縮的中間圖像，還能不使用高速的特殊電腦而僅通過構(gòu)成這種中間圖像的子像素的配置更改(映射)來生成能立體觀看的立體圖像。參照圖3 圖6，對本發(fā)明的多個中間圖像的生成方法的實(shí)施方式進(jìn)行說明。圖3示出了從多個不同視點(diǎn)用照相機(jī)3拍攝某對象物I從而生成每個視點(diǎn)的視點(diǎn)圖像5的示例。由于是用照相機(jī)3從六個視點(diǎn)對注視點(diǎn)2進(jìn)行拍攝，所以能夠得到六個視點(diǎn)圖像5。此外，這個時間的視點(diǎn)圖像的分辨率是任意的。另外，照相機(jī)3也可以水平排列，并以各個照相機(jī)3的光軸朝向注視點(diǎn)2的方式配置。圖4示出了從在圖3中所拍攝的多個視點(diǎn)圖像5生成用于最終輸出至顯示器上的具有子像素配置的立體圖像7的示例。在本圖示例中示出了，從構(gòu)成配置在對應(yīng)位置附近的至少一個以上像素單元的子像素的RGB值進(jìn)行插值，從而求出RGB階梯配置像素單元11的RGB值的示例。以下，參照圖5，對由圖2的步驟S203進(jìn)行的立體圖像生成進(jìn)行詳述。在生成立體圖像7時，前述的中央處理裝置33首先根據(jù)進(jìn)行由圖2的步驟S202輸入的最終輸出的顯示器的分辨率，決定立體圖像7的子像素配置。關(guān)于立體圖像的子像素配置，使用例如圖11所圖示的示例。本圖示例中，在子像素是以1:3的比率縱長的長方形的情況下，假設(shè)具有如下子像素的配置的立體圖像7，即，將能最恰當(dāng)?shù)亓Ⅲw觀看的三個子像素沿斜方向在拐角處進(jìn)行連接并排列成三行一列。接著，假設(shè)與圖5的圖示例(a)所示的視點(diǎn)數(shù)相對應(yīng)的RGB階梯配置像素塊。RGB階梯配置像素塊是指將RGB階梯配置像素單元在水平方向上從第I視點(diǎn)至第N視點(diǎn)進(jìn)行了連接排列的RGB階梯配置像素塊，其中，該RGB階梯配置像素單元將子像素沿斜方向在拐角處進(jìn)行連接并排列成三行。由于圖3中是從六個視點(diǎn)拍攝對象物1，所以在圖5的圖示例Ca)中將由18個子像素構(gòu)成的像素的集合作為RGB階梯配置像素塊。
接著，將RGB階梯配置像素塊重復(fù)配置而構(gòu)成立體圖像7，從而取得構(gòu)成RGB階梯配置像素單元的子像素的各個RGB值。RGB值的取得優(yōu)選為以RGB階梯配置像素塊內(nèi)的任一 RGB階梯配置像素單元為基準(zhǔn)來進(jìn)行，從與構(gòu)成RGB階梯配置像素單元的子像素的立體圖像7上的坐標(biāo)值相對應(yīng)的視點(diǎn)圖像上的坐標(biāo)值上所配置的子像素的RGB值取得。如圖5Ca)所圖示，關(guān)于立體圖像7上的坐標(biāo)值，作為子像素坐標(biāo)系以立體圖像7上的橫軸為U、縱軸為V，本實(shí)施例中在作為基準(zhǔn)的第一視點(diǎn)的最上段配置的子像素如圖所示能夠表示為(U1V)0接著，算出從第I視點(diǎn)拍攝的視點(diǎn)圖像所對應(yīng)的坐標(biāo)值。關(guān)于視點(diǎn)圖像上的坐標(biāo)值，作為像素坐標(biāo)系以橫軸為X、縱 軸為y，本實(shí)施例中作為基準(zhǔn)的第一視點(diǎn)的視點(diǎn)圖像上的像素的坐標(biāo)值如圖所示能夠表示為(X，y)。通常，在立體圖像與多個視點(diǎn)圖像中，分別構(gòu)成立體圖像與視點(diǎn)圖像的子像素?cái)?shù)不同，另外，由于在立體圖像上使用子像素坐標(biāo)系，而在視點(diǎn)圖像上使用像素坐標(biāo)系，所以需要預(yù)先確定的轉(zhuǎn)換式。因此，在以構(gòu)成立體圖像的子像素在水平方向上的總數(shù)為W、在垂直方向上的總數(shù)為H，并且以構(gòu)成第一視點(diǎn)上的視點(diǎn)圖像的像素在水平方向上的總數(shù)為a、在垂直方向上的總數(shù)為b的情況下，從子像素坐標(biāo)系向像素坐標(biāo)系的轉(zhuǎn)換能夠通過[式I]求出。[式I]
—UV ~X =——XtZf V =——XD
IWH _通過用子像素坐標(biāo)系表示立體圖像上的坐標(biāo)值，能夠以一個一個的子像素單位來求出RGB值，與以像素單位求出RGB值相比，能夠生成更高精細(xì)的立體圖像。這時，優(yōu)選為以W:H=a:b的方式設(shè)定a及b。當(dāng)然，即使變形也想最大限度地表示視點(diǎn)圖像的情況例外。但是，如圖5 (C)所示，因?yàn)樵谙袼刈鴺?biāo)系中僅定義了各個像素的中心點(diǎn)，所以，在例如(x，y)位于圖示位置的情況下，就不能直接求出立體圖像上的子像素的RGB值。因此，從在該(X，y)所屬的像素附近配置的像素單元進(jìn)行插值求出。首先，α=χ-χ1，β =χ2-χ, Y =y-yl, δ =y3_y,將視點(diǎn)圖像的像素的中心點(diǎn)即Pl 4的RGB值分別作為Cf 4，則P的RGB值通過線性插值可以用下式表示。[式2]
(βΟΙ + aC2') + I fiC3 + aC4^J+ [ α+β J
f+ δ在此，求出作為計(jì)算對象的立體圖像的子像素所表示的R、G、B中的任意一個的RGB值即可。此外，若α+β = Υ + δ=1，則變成[式3]C= Y (β Cl+α C2)+ δ ( β C3+a C4)其次，構(gòu)成同一 RGB階梯配置像素單元的其他子像素的RGB值也同樣從附近的像素單元進(jìn)行插值求出。此外，插值方法有很多，只要是恰當(dāng)?shù)牟逯捣椒?，則使用哪種都可以。接著，算出構(gòu)成除了作為基準(zhǔn)的第一視點(diǎn)的RGB階梯配置像素單元以外的RGB階梯配置像素單元的子像素的RGB值。這種情況下，優(yōu)選為將構(gòu)成作為基準(zhǔn)的RGB階梯配置像素單元的子像素的坐標(biāo)值作為基準(zhǔn)算出。即，例如，在生成由使用了視差格柵的六個視點(diǎn)構(gòu)成的立體圖像時，由圖像展示對象者從同一狹縫或孔中看到的多個視點(diǎn)的圖像需要分別對應(yīng)，因此，從位于與視點(diǎn)圖像上的坐標(biāo)值相同的位置上的其他視點(diǎn)圖像的像素中算出RGB值，其中，該視點(diǎn)圖像上的坐標(biāo)值是與構(gòu)成作為基準(zhǔn)的RGB階梯配置像素單元的子像素的坐標(biāo)值相對應(yīng)的。多個視點(diǎn)圖像與立體圖像的對應(yīng)關(guān)系變成了例如圖4的圖示例所示的關(guān)系O如上所述通過插值計(jì)算而取得構(gòu)成立體圖像的子像素的RGB值，從而生成或假設(shè)立體圖像。在假設(shè)立體圖像的情況下，從多個視點(diǎn)圖像不生成立體圖像而直接進(jìn)行中間圖像的生成(步驟S204)，因此，需要對用于取得RGB值的插值計(jì)算、或構(gòu)成通過該插值計(jì)算得到的立體圖像的RGB階梯配置像素單元的子像素進(jìn)行排序整理，從而求出多個中間圖像的 RGB并列配置像素單元。這樣，通過將構(gòu)成RGB階梯配置像素單元的任一子像素作為基準(zhǔn)來求出其他子像素的RGB值，能夠顯示基于現(xiàn)實(shí)的清晰的立體圖像。另外，在不決定代表點(diǎn)而分別求出了所有子像素的RGB值的情況下，能夠得到視點(diǎn)過渡流暢的立體圖像。這些優(yōu)選為與展示立體圖像的狀況、目的相配合著來適當(dāng)改變。接著，對由步驟S204進(jìn)行的中間圖像的生成進(jìn)行詳述。圖6是表示從立體圖像生成多個中間圖像的示例的圖。本圖示例中，在多個視點(diǎn)的每一個上，集中配置了將構(gòu)成圖4中生成的立體圖像的RGB階梯配置像素單元11的子像素在水平方向上按照R、G、B的順序并列排列的RGB并列配置像素單元17，從而生成了六個中間圖像15。RGB并列配置像素單元17對從如圖所示排列成階梯狀的狹縫或排列成階梯狀的孔中看到的子像素進(jìn)行集中排列。對于所有的RGB階梯配置像素單元11進(jìn)行此排列。此夕卜，從立體圖像7進(jìn)行多個中間圖像15的生成優(yōu)選為使用中間圖像生成表來進(jìn)行。圖7是對中間圖像生成表進(jìn)行說明的圖。圖7 Ca)的圖表表示,立體圖像上的子像素表示哪個視點(diǎn)圖像或者表示R、G、B中的哪個，以及立體圖像上的子像素坐標(biāo)系中的坐標(biāo)值，例如因?yàn)樽钭笊辖堑淖酉袼匚挥趶淖笊隙藬?shù)第一行的第一列，所以為(I I I)。圖7 (b)示出了在立體圖像上的子像素坐標(biāo)系中，構(gòu)成中間圖像的子像素與配置在哪個地點(diǎn)的子像素相對應(yīng)。例如，第一視點(diǎn)的最左上角的子像素與位于立體圖像的最左上角的1、(1 I 1)、R的子像素相對應(yīng)，且該子像素變成配置在中間圖像上。同樣地，第二視點(diǎn)的中間圖像的最左上角的子像素與位于立體圖像上的(2C1)位置的子像素相對應(yīng)，且配置在立體圖像上的第二行的第一列的子像素變成配置在中間圖像上。此外，由于在具有該子像素的RGB階梯配置像素單元中不存在具有B值的子像素，所以，在構(gòu)成配置于第二視點(diǎn)的最左上角的中間圖像的RGB并列配置像素單元中，同樣也未配置具有B值的子像素。這樣，將從第一視點(diǎn)到第六視點(diǎn)的RGB階梯配置像素單元在水平方向上排序整理從而構(gòu)成RGB并列配置像素單元，在位于最左上角的RGB階梯配置像素塊的配置改變結(jié)束之后，構(gòu)成相鄰的RGB階梯配置像素塊的子像素的配置也繼續(xù)如圖所示進(jìn)行改變。這樣，若預(yù)先制作好將構(gòu)成立體圖像的RGB階梯配置像素單元的子像素的位置與構(gòu)成每個視點(diǎn)的中間圖像的RGB并列配置像素單元的子像素的位置進(jìn)行相關(guān)聯(lián)的中間圖像生成表，則通過只進(jìn)行構(gòu)成立體圖像的子像素的配置改變而無需用于復(fù)雜的插值的運(yùn)算處理，就能生成每個視點(diǎn)的中間圖像。此外，該中間圖像生成表優(yōu)選為存儲在中間圖像生成裝置的存儲裝置中。由此，在使用中間圖像生成裝置來進(jìn)行立體圖像的生成的情況下，無需再次制作表，就能將該表作為立體圖像生成表來使用。圖8是表示在本發(fā)明的實(shí)施例中尤其優(yōu)選的中間圖像的圖像幀的配置的示例的圖。在該圖像幀19中，每個視點(diǎn)的中間圖像15呈磚瓦狀配置，例如，在第一行的第一列配
置第一視點(diǎn)的圖像，在第二行的第一列配置第二視點(diǎn)的圖像，在第三行的第一列配置第三視點(diǎn)的圖像，在第一行的第二列配置第四視點(diǎn)的圖像，在第二行的第二列配置第五視點(diǎn)的圖像，在第三行的第二列配置第六視點(diǎn)的圖像。由此，構(gòu)成立體圖像的子像素的總數(shù)與位于呈磚瓦狀配置有中間圖像的圖像幀上的子像素的總數(shù)在縱橫方向上都是相同的，不存在多余的像素，而且將每個視點(diǎn)的像素集中配置，因此，沒有不同視點(diǎn)間的干擾，能夠使用不可逆性壓縮。像這樣呈磚瓦狀配置有中間圖像的圖像幀與裸眼立體顯示器(立體圖像)的分辨率/縱橫尺寸比是相同的，從這一點(diǎn)來看，能夠以非常便宜的價格提供一種富有如下實(shí)用性的立體圖像顯示系統(tǒng)，即，能夠由立體圖像生成裝置(轉(zhuǎn)換器)將通過藍(lán)光或STB等標(biāo)準(zhǔn)的影像播放裝置或影像發(fā)布服務(wù)器以標(biāo)準(zhǔn)的格式輸出或發(fā)送的中間圖像簡單地生成為立體圖像。圖9是表示將多個視點(diǎn)圖像保持原樣地配置成磚瓦狀的圖像幀的示例，是與前述的中間圖像的圖像幀進(jìn)行對比的圖。若最終進(jìn)行輸出的顯示器的分辨率為16:9，則圖9 Ca)上的一個視點(diǎn)單位的視點(diǎn)圖像的縱橫比也就變成了 16:9，在圖像幀整體上則為32:27。另一方面，在將多個中間圖像配置成磚瓦狀的圖像幀的情況下(圖9 (b))，在立體圖像中，將構(gòu)成RGB階梯配置像素單元的三行子像素在水平方向上排列從而構(gòu)成RGB并列配置像素單元，因此，垂直方向上的總像素?cái)?shù)為1/3。進(jìn)一步地，若視點(diǎn)數(shù)為例如6的話,則水平方向上的總像素?cái)?shù)為[式4]
W^W-Xj =-
6 2
O以立體圖像的縱橫分別為H、W，若與圖8的圖示例相同地將中間圖像配置成具有3行X2列的磚瓦的圖像巾貞，則在縱方向上為[式5]-H + -H + -H = H 3 3 ^
，在橫方向上為[式6]
能夠生成具有與立體圖像在縱橫方向上均相同的分辨率的圖像幀。如果像以往一樣，將多個視點(diǎn)圖像保持原樣地在磚瓦狀的圖像幀上以使立體圖像的縱橫尺寸比及分辨率相同的方式配置，則在每個視點(diǎn)的圖像的兩側(cè)添加搭接寬度，以使縱橫尺寸比相同，進(jìn)一步地，在降低各視點(diǎn)的圖像的分辨率并配置成磚瓦狀時，需要使分辨率相同。其結(jié)果就是，用于生成立體圖像的視點(diǎn)圖像成為低分辨率，且立體圖像的畫質(zhì)明顯降低。而另一方面，在本發(fā)明中，由于是從高畫質(zhì)的各視點(diǎn)圖像生成中間圖像，所以在立·體圖像生成上能夠完全保證必要的不可欠缺的分辨率。圖10是表示由多個中間圖像構(gòu)成的圖像幀的示例的圖，示出了分別由2個視點(diǎn)飛個視點(diǎn)、7個視點(diǎn) 11個視點(diǎn)生成立體圖像的情況下的圖像幀，若在該幀上將各視點(diǎn)的像素配置成磚瓦狀，則能夠制作出縱橫尺寸比與立體圖像相同的圖像文件。S卩，在立體圖像由2個視點(diǎn)構(gòu)成的情況下，在第一行的磚瓦上配置第I視點(diǎn)的中間圖像的2/3 ;在與第I視點(diǎn)的中間圖像的1/3于第二行的第I磚瓦上相連接的第2磚瓦上，配置第2視點(diǎn)的中間圖像的1/3 ;在第三行的磚瓦上配置第2視點(diǎn)的該中間圖像的2/3。另夕卜，在立體圖像由3個視點(diǎn)構(gòu)成的情況下，在各行的磚瓦上配置各視點(diǎn)的中間圖像。另外，在立體圖像由4飛個視點(diǎn)構(gòu)成的情況下，在各行的首塊磚瓦上配置第f 3視點(diǎn)的中間圖像；在配置在與第廣3視點(diǎn)的中間圖像相連接的第一行至第三行上的磚瓦上，配置剩余視點(diǎn)的中間圖像。在立體圖像由廣9個視點(diǎn)構(gòu)成的情況下，在各行的首塊的磚瓦上配置第廣3視點(diǎn)的中間圖像；在與第廣3視點(diǎn)的中間圖像相連接的第一行至第三行的磚瓦上，配置第4飛視點(diǎn)的中間圖像；在配置在與第4飛視點(diǎn)的中間圖像相連接的第一行至第三行上的磚瓦上，配置剩余視點(diǎn)的中間圖像。同樣地，在立體圖像由10個視點(diǎn)以上構(gòu)成的情況下，也是從第I視點(diǎn)開始，依次在各行的磚瓦上配置中間圖像的一部分或全部。由此，能夠生成具有與立體圖像在縱橫方向上均相同的分辨率的圖像幀。圖11是表示RGB階梯配置像素單元的配置示例的圖。圖11 (a)表示沿斜方向在拐角處將構(gòu)成第I視點(diǎn)至第6視點(diǎn)的視點(diǎn)圖像的像素單元的子像素進(jìn)行連接，并將其排列成階梯狀的RGB階梯配置像素單元的示例，在三行一列上由三個子像素構(gòu)成。若將具有該RGB階梯配置像素單元的立體圖像轉(zhuǎn)換成中間圖像，則將構(gòu)成RGB階梯配置像素單元的子像素在水平方向上進(jìn)行排列而構(gòu)成RGB并列配置像素單元。然后，對于在拐角處與該RGB階梯配置像素單元相連接并排列成階梯狀的同一視點(diǎn)的RGB階梯配置像素單元，如圖所示，也是在水平方向上進(jìn)行排列而構(gòu)成RGB并列配置像素單元，并將該RGB并列配置像素單元沿斜方向在拐角處進(jìn)行連接并排列成階梯狀，從而構(gòu)成中間圖像。圖11 (b)是表示在三行兩列上由六個子像素構(gòu)成的RGB階梯配置像素單元的示例的圖。若將具有該RGB階梯配置像素單元的立體圖像轉(zhuǎn)換成中間圖像，則首先將構(gòu)成RGB階梯配置像素單元的第I列的子像素的集合在水平方向上進(jìn)行排列而構(gòu)成RGB并列配置像素單元，再以與該RGB并列配置像素單元進(jìn)一步在水平方向上連接的方式，排列第2列的子像素的集合。然后，對于在拐角處與該RGB階梯配置像素單元相連接并排列成階梯狀的同一視點(diǎn)的RGB階梯配置像素單元，如圖所示，也是首先將第I列的子像素的集合在水平方向上進(jìn)行排列以構(gòu)成RGB并列配置像素單元，再以與該RGB并列配置像素單元進(jìn)一步在水平方向上連接的方式，排列第2列的子像素的集合。圖11 (c)是表示在三行三列上由九個子像素構(gòu)成的RGB階梯配置像素單元的示例的圖。對于將具有該RGB階梯配置像素單元的立體圖像轉(zhuǎn)換成中間圖像的情況，同樣地，也是首先將構(gòu)成RGB階梯配置像素單元的第I列的子像素的集合在水平方向上進(jìn)行排列而構(gòu)成RGB并列配置像素單元，再以與該RGB并列配置像素單元在水平方向上連接的方式，排列第2列構(gòu)成RGB階梯配置像素單元的子像素的集合，再以進(jìn)一步與第2列RGB并列配置像素單元在水平方向上連接的方式，排列第3列構(gòu)成RGB階梯配置像素單元的子像素的集
八
口 ο 在圖11所示的RGB階梯配置像素單元的排列例中，如圖5所示，優(yōu)選為在各個子像素上從多個視點(diǎn)圖像取得RGB值。由此，能夠防止由于以像素單位計(jì)算并取得RGB值而造成的分辨率降低(例如，在圖11 (b)中，相對于圖11 (a)其水平分辨率為1/2)，還能向使用者提供清晰的立體圖像。子像素通常在多數(shù)情況下是以1:3的比率縱長的長方形，但是子像素的形狀還包括圓形、< 字形、V字形、使W旋轉(zhuǎn)90度后的形狀(參照圖51的圖示例)等各種形狀，根據(jù)其形狀，有時通過三個子像素排成一列的RGB階梯配置像素單元難以看到立體。那種情況下優(yōu)選為，制作將用于觀看立體圖像的視差格柵的狹縫或孔的寬度及其配置間隔擴(kuò)大了的掩膜，隨之生成將三個子像素如(b)所示排列成兩列或者如(c)所示排列成三列的RGB階梯配置像素單元，以能夠恰當(dāng)?shù)貙?shí)現(xiàn)立體顯示。接下來，關(guān)于由圖2的步驟S210從每個視點(diǎn)的中間圖像進(jìn)行的最終輸出的立體圖像的生成，進(jìn)行詳述。立體圖像的生成是通過將構(gòu)成中間圖像的RGB并列配置像素單元的子像素的配置改變成用于立體觀看的配置來進(jìn)行的，其中，該中間圖像是從BLU-RAY DISC (注冊商標(biāo))等光盤、服務(wù)器或前述的第一信息處理裝置發(fā)送來的。即，是通過將構(gòu)成RGB并列配置像素單元的子像素再次排序整理成階梯狀以構(gòu)成RGB階梯配置像素單元來進(jìn)行的，但是這種情況下，優(yōu)選為使用與那些子像素的位置相關(guān)聯(lián)的立體圖像生成表。圖7所示的中間圖像生成表由于將構(gòu)成RGB并列配置像素單元的子像素的位置與構(gòu)成RGB階梯配置像素單元的子像素的位置相關(guān)聯(lián)，所以可以作為立體圖像生成表來使用。按照與中間圖像生成表所示的配置規(guī)則相反的順序，再次生成RGB階梯配置像素單元,從而生成立體圖像。圖12是表示本發(fā)明的立體圖像生成裝置61的實(shí)施方式的一例的外形圖。如同圖所示，該實(shí)施方式中的立體圖像生成裝置61與一般的圖像輸出裝置63、一般的立體圖像顯示裝置65 (顯示器)之間通過影像數(shù)據(jù)線67電連接來使用，接收從圖像輸出裝置63作為圖像信號(圖像輸入信號)發(fā)送的多個視點(diǎn)的圖像，然后根據(jù)預(yù)先設(shè)定的控制信息(掃描方式、視點(diǎn)數(shù)、分辨率、像素配置法等信息)將其轉(zhuǎn)換成立體圖像顯示用的像素配置，再將像素配置轉(zhuǎn)換后的圖像作為圖像信號(圖像輸出信號)發(fā)送至立體圖像顯示裝置65。在此，將立體圖像生成裝置61、圖像輸出裝置63、立體圖像顯示裝置65電連接的影像數(shù)據(jù)線67具體來說，能夠使用一直以來推廣的作為VDI、HMVI等標(biāo)準(zhǔn)的將圖像輸出裝置63與立體圖像顯示裝置65電連接并發(fā)送圖像信號的數(shù)據(jù)線。圖13是表示本發(fā)明的立體圖像生成裝置61的其他實(shí)施方式的一例的外形圖。如同圖所示，立體圖像生成裝置61也可以通過與圖像輸出裝置63和立體圖像顯示裝置65中的任一方或兩方由控制數(shù)據(jù)線69進(jìn)一步電連接，來接收控制信號?？刂菩盘柺侵?，相對于立體圖像生成裝置61，提供掃描方式、分辨率、視點(diǎn)數(shù)、像素配置方法等除圖像以外的控制信息的信號。
在此，控制數(shù)據(jù)線69具體來說，能夠使用一直以來推廣的作為i · LINK、串行等標(biāo)準(zhǔn)的將圖像輸出裝置63與立體圖像顯示裝置65電連接的控制數(shù)據(jù)線69。但是，為了便于說明，在同圖中，將影像數(shù)據(jù)線67與控制數(shù)據(jù)線69分別作為單獨(dú)的數(shù)據(jù)線進(jìn)行了說明，但也可以將這些數(shù)據(jù)線束成一根數(shù)據(jù)線。此外，中間圖像(圖像信號)的發(fā)送以及控制信號的發(fā)送也可以代替上述數(shù)據(jù)線而使用一直以來推廣的無線LAN、藍(lán)牙(Bluetooth、注冊商標(biāo))、UWB等標(biāo)準(zhǔn)的無線通信裝置。此外，按照本發(fā)明的宗旨，圖像輸出裝置63優(yōu)選為直接沿用現(xiàn)有的圖像輸出技術(shù)。即，圖像輸出裝置63優(yōu)選為現(xiàn)有的通過地面波、衛(wèi)星廣播、來自互聯(lián)網(wǎng)上的流式傳輸或下載而取得動態(tài)圖像的機(jī)頂盒，或者獨(dú)立的DVD播放機(jī)、藍(lán)光(Blu-ray、注冊商標(biāo))播放機(jī)等播放器(也包含具有錄像功能的)。另外，按照本發(fā)明的宗旨，立體圖像顯示裝置65 (顯示器)無需對現(xiàn)有的立體圖像顯示裝置施加任何改良，而優(yōu)選為直接沿用。即，立體圖像顯示裝置65優(yōu)選為，現(xiàn)有的采用視差格柵方式、光柵方式等的液晶顯示器、等離子顯示器、有機(jī)EL顯示器等裸眼立體圖像顯示裝置，或者，高速地交替顯示兩個視點(diǎn)圖像，并通過光閘方式的眼鏡對其進(jìn)行視覺判斷的裝置等。但是，除了上述立體圖像顯示裝置以外，當(dāng)然也能使用本發(fā)明中的；立體圖像生成裝置61。圖14表示被本發(fā)明的立體圖像生成裝置61作為圖像信號而接收的多個視點(diǎn)的圖像的實(shí)施例。作為本發(fā)明中推薦的多個視點(diǎn)的圖像的標(biāo)準(zhǔn)化磚瓦格式，僅配置有為了轉(zhuǎn)換成立體圖像顯示用的像素配置而從多個視點(diǎn)的圖像中讀出的像素。通常，配置成磚瓦格式之后再生成預(yù)先確定的壓縮文件。分辨率是任意的，通常在多數(shù)情況下使用不可逆性壓縮即壓縮標(biāo)準(zhǔn)MPG2。雖未圖示，但也可以根據(jù)本發(fā)明，以與任意視點(diǎn)數(shù)相對應(yīng)的磚瓦格式而生成中間圖像來作為多個視點(diǎn)的圖像。尤其是，優(yōu)選為通過將構(gòu)成一個像素的RGB的三個子像素沿斜方向配置在三行三列上的像素配置方法，將縱橫尺寸比為16:9且任意分辨率的圖像以水平960像素、垂直360像素的方式制作成各視點(diǎn)的中間圖像，并轉(zhuǎn)換成立體圖像顯示用的像素配置。由此，六個視點(diǎn)的磚瓦圖像的分辨率為1920X1080，接收磚瓦影像來作為高清圖像，能夠轉(zhuǎn)換成畫質(zhì)最無缺損的立體圖像。圖15表示被本發(fā)明的立體圖像生成裝置61作為動態(tài)圖像信號而接收的多個視點(diǎn)的動態(tài)圖像的實(shí)施例。該動態(tài)圖像是眾所周知的，可以通過壓縮標(biāo)準(zhǔn)MPG4的多流式傳輸來制作。在一個文件中能夠記錄已取得同步的多個動態(tài)圖像。將所接收的第I視點(diǎn)至第N視點(diǎn)的中間圖像以預(yù)先確定的配置存儲至存儲裝置中，并轉(zhuǎn)換成立體圖像顯示用的像素配置。圖16表示被本發(fā)明的立體圖像生成裝置61作為動態(tài)圖像信號而接收的多個視點(diǎn)的動態(tài)圖像的實(shí)施例。多個視點(diǎn)的動態(tài)圖像分配在對各視點(diǎn)的動態(tài)圖像進(jìn)行連接的各幀上，并沿時間方向重復(fù)形成。將所接收的第I視點(diǎn)至第N視點(diǎn)的中間圖像依次存儲至存儲裝置中，并轉(zhuǎn)換成立體圖像顯示用的像素配置。圖17表示被本發(fā)明的立體圖像生成裝置61作為圖像信號而接收的、嵌入有像素信息71的多個視點(diǎn)的中間圖像的第一實(shí)施例。像素信息是指預(yù)先確定的密碼，定義有2D圖像的區(qū)別、分辨率、視點(diǎn)數(shù)等信息，是為了向立體圖像生成裝置或轉(zhuǎn)換器(立體圖像生成裝置)通知是立體圖像還是普通圖像而嵌入的。同圖(a)是表示圖像上的像素信息71的嵌入位置的圖。根據(jù)同圖(a)，像素信息71嵌入在圖像的左上端部。但是，像 素信息71的嵌入位置是基于預(yù)先定義的配置模式的，因此，雖然通常無需是左上端部，但由于圖像的端部是與立體圖像生成裝置61所連接的圖像輸出裝置63的顯示屏框重疊的部分，使用者看不到，所以，具有即使嵌入像素信息71也不會對相對于使用者的立體圖像的顯示造成影響的優(yōu)點(diǎn)。同圖(b)是表示所嵌入的像素信息71的放大圖。根據(jù)同圖(b)，像素信息71無間隙地嵌入在橫一列中。但是，雖未圖示，但也可以以隔開預(yù)先確定的間隔的方式嵌入。圖18表示被本發(fā)明的立體圖像生成裝置61作為圖像信號而接收的、嵌入有像素信息71的多個視點(diǎn)的中間圖像的第二實(shí)施例。同圖(a)是表示圖像上的像素信息71的嵌入位置的圖。同圖(b)是嵌入有像素信息71的部分的放大圖。在第二實(shí)施例中，嵌入有使作為同一圖像信息而定義的像素信息71在XY方向上連續(xù)并多個配置的像素矩陣73。同圖(C)是表示同圖(b)的像素矩陣73之一的放大圖。中央的由粗線框包圍的3X3的矩陣為像素矩陣73，配置有九個定義了同一圖像信息的像素信息Cm · η。在本發(fā)明的立體圖像生成裝置61中，從用圓印表示的像素矩陣73中央的像素信息71中解析圖像信息。此外，對于該像素矩陣73中央的像素信息71的位置，適合根據(jù)預(yù)先定義的配置模式，通過對像素信息71的XY坐標(biāo)進(jìn)行特定來特定位置。但是，也可以從像素矩陣73中的多個像素信息71的平均值來求出圖像信息。圖19表示被本發(fā)明的立體圖像生成裝置61作為圖像信號而接收的、嵌入有像素信息71的多個視點(diǎn)的中間圖像的第三實(shí)施例。同圖(a)是表示圖像上的像素信息71的嵌入位置的圖。同圖(b)是嵌入有像素信息71的部分的放大圖。同圖(C)是表示同圖(b)的像素矩陣73之一的放大圖。在第三實(shí)施例中，作為圖像信息而定義的像素信息71配置在像素矩陣73中央，在像素矩陣73的外周部分上，嵌入有鄰接像素矩陣73的像素與像素信息71之間的中間值的像素信息71。圖20表示被本發(fā)明的立體圖像生成裝置61作為圖像信號而接收的、嵌入有像素信息71的多個視點(diǎn)的中間圖像的第四實(shí)施例。同圖(a)是表示圖像上的像素信息71的嵌入位置的圖。同圖(b)是嵌入有像素信息71的部分的放大圖。在第四實(shí)施例中，像素矩陣73以2X3的方式構(gòu)成，與第三實(shí)施例的像素矩陣73相比除去了上面一行的像素信息71，并配置在圖像的上端部。若像素矩陣73所占的面積變小，則對圖像造成的影響也變小，因此，該實(shí)施例為優(yōu)選。同圖(C)是表示同圖(b)的像素矩陣73之一的放大圖。定義有圖像信息的像素信息71配置在像素矩陣73的上面一行的中央部分，在像素矩陣73的外周部分上配置有，鄰接像素矩陣73的像素與像素信息71之間的中間值的像素、或者對兩個像素進(jìn)行預(yù)先確定的加權(quán)并插值的像素。在此，加權(quán)是指，為了更準(zhǔn)確地解析像素信息71所定義的圖像信息，而在求出中間值時將像素信息71的值增大到預(yù)先確定的數(shù)倍。根據(jù)同圖(C)，加權(quán)是將像素信息71的值增大到了二倍，但是如有必要，也可以是三倍、四倍。此外，在第三實(shí)施例中也補(bǔ)充了可以進(jìn)行加權(quán)的這一點(diǎn)。圖21、圖22是說明在上述實(shí)施例中圖像信息實(shí)際上表示哪種信息的圖。根據(jù)圖21，代碼Ctl至C23作為判定代碼(表頭)使用。該判定代碼的RGB值的組合通過作為自然界中不太可能有的組合，使中央處理裝置33能夠識別出，像素信息是作為定義圖像信息的信息而被嵌入的。 代碼C24至C29用于圖21所示的奇偶校驗(yàn)。代碼C3tl至C89具體如圖22所示,表示控制信息。如圖22所示，代碼C9tl至C95用于奇偶校驗(yàn)。如上所述，通過使用像素71，可以對作為影像信號接收的圖像是通常的平面圖像還是多個中間圖像進(jìn)行辨別。這是因?yàn)椋粝蛄Ⅲw圖像生成裝置61輸入的圖像是通常的平面圖像，則需要不進(jìn)行像素配置的轉(zhuǎn)換等處理而直接向立體圖像顯示裝置65輸出。此夕卜，像素信息71的RGB值如前述那樣通過不可逆性壓縮而變化，因此，優(yōu)選為僅參照預(yù)先確定的位數(shù)的上位比特來解析圖像信息。中央處理裝置33根據(jù)預(yù)先確定的配置模式來對像素信息71的嵌入位置進(jìn)行特定，并辨別有無核對圖像信息的表頭，在有表頭時解析圖像信肩、O圖23是表示通過在多個視點(diǎn)的中間圖像中嵌入通常作為圖像信息而定義的像素信息71，對通常的平面圖像與多個視點(diǎn)的中間圖像進(jìn)行辨別的方法的流程圖。但是，為了防止由不可逆性壓縮造成的來自時間方向的影響，也可以在多個視點(diǎn)的中間圖像開始瞬間的幀的前后幀以及多個視點(diǎn)的中間圖像結(jié)束瞬間的幀的前后幀上，分別嵌入作為同一圖像信息而定義的像素信息71。根據(jù)同圖，中央處理裝置33在接收圖像之后，根據(jù)預(yù)先定義的預(yù)先確定的像素配置模式，一幀一幀地解析預(yù)先確定的位置上有無表頭。(I)有表頭時，該幀為多個視點(diǎn)的中間圖像幀，因?yàn)樵搸隙x有圖像信息，所以中央處理裝置33解析圖像信息。(2)無表頭時，該幀為通常的平面圖像幀，因?yàn)樵搸衔炊x圖像信息，所以中央處理裝置33不解析圖像信息。上述解析結(jié)束之后，中央處理裝置33轉(zhuǎn)向下一個幀的解析。接下來，參照圖24 圖50，對將根據(jù)本發(fā)明的立體圖像生成方法而生成的立體圖像輸出的、具有視差格柵的裸眼立體圖像顯示裝置進(jìn)行說明。一直以來使用的采用視差格柵方式的裸眼立體圖像顯示裝置存在如下問題，SP，圖像展示對象從可視光透射部能進(jìn)行視覺判斷的范圍不同；從各可視光透射部中通過并向圖像展示對象一側(cè)行進(jìn)的光的強(qiáng)度方面出現(xiàn)差異；光相互干擾且圖像展示對象會看到線條狀的干擾條紋(莫爾條紋)；顯示圖像的畫質(zhì)降低。但是，根據(jù)本實(shí)施方式中的立體圖像顯示裝置的構(gòu)成，例如，在人最能集中的位置上設(shè)定預(yù)先確定的最佳立體可視位置以及預(yù)先確定的斜方向莫爾條紋消除位置，因?yàn)閺倪@些值進(jìn)行倒算，能夠決定從顯示器的圖像顯示面到視差格柵的距離以及一個或多個可視光透射部在水平方向上的相鄰間隔，所以，在預(yù)先確定的斜方向莫爾條紋消除位置上，圖像展示對象能夠透過視差格柵的可視光透射部，對通常顯示預(yù)先確定視點(diǎn)的圖像的像素的預(yù)先確定位置進(jìn)行視覺判斷，在該預(yù)先確定的莫爾條紋消除位置上，莫爾條紋完全消除。在此，“可視光透射部”是指在構(gòu)成視差格柵的不透射可視光的面上設(shè)置的透射可視光的部分。即，本發(fā)明中所說的“可視光透射部”的狹縫的邊緣形狀也可以是直線狀、階梯狀、鋸齒形狀、或者由一定形狀的圓弧或橢圓弧連續(xù)而成的形狀(丸子狀)。另外，狹縫的配置形狀也可以是正弦弧。進(jìn)一步地，該可視光透射部也可以是在視差格柵上獨(dú)立配置的孔型。此外，不透射可視光是指(I)吸收可視光、(2 )漫反射可視光、(3 )鏡面反射可視光這三種中的任一光學(xué)特性。另外，“最佳立體可視位置”是指圖像展示對象能夠特別有效地獲得立體效果的位 置。即，在最佳立體可視位置上，圖像展示對象的兩眼分別透過視差格柵的可視光透射部，對應(yīng)該視覺判斷的視點(diǎn)單位的立體顯示用像素的中心進(jìn)行視覺判斷。另外，“莫爾條紋消除位置”是指，相對于圖像展示對象，以完全減少莫爾條紋的形式，能夠使立體圖像有效地得到視覺判斷的位置。在預(yù)先確定的莫爾條紋消除位置上，圖像展示對象能夠通過左右任一眼，透過視差格柵的可視光透射部，對通常顯示預(yù)先確定視點(diǎn)的圖像的立體顯示用像素的預(yù)先確定的位置進(jìn)行視覺判斷。在莫爾條紋消除位置上，圖像展示對象即使相對于裸眼立體顯示器平行地左右或上下移動，莫爾條紋消除的效果也不會發(fā)生變化。此外，在所謂莫爾條紋消除位置的概念中，包含后述的斜方向莫爾條紋消除位置和水平方向莫爾條紋消除位置。但是，相對于能夠特別有效地對立體感進(jìn)行視覺判斷的位置(最佳立體可視位置)，能夠消除斜方向莫爾條紋的位置(斜方向莫爾條紋消除位置)和能夠消除水平方向莫爾條紋的位置(水平方向莫爾條紋消除位置)是不同的概念，從這些位置到視差格柵的距離也可以不相同。但是，若將這些預(yù)先確定的莫爾條紋消除位置設(shè)定在與最佳立體可視位置相同的距離上，則能夠在整個顯示器上對立體感最有效地進(jìn)行視覺判斷。這樣，還提出了將莫爾條紋消除位置與最佳立體可視位置設(shè)定為不同的距離，例如將莫爾條紋消除位置設(shè)定在與最佳立體可視位置相比離視差格柵較遠(yuǎn)的距離上，由此，首先使距離遠(yuǎn)的圖像展示對象在感覺不到莫爾條紋的壓力的情況下，對尤其是莫爾條紋正在消除的立體圖像進(jìn)行視覺判斷，從而引起圖像展示對象的注意，使其向最佳立體可視位置靠近，尤其是使其對立體效果高的立體圖像進(jìn)行視覺判斷。首先，參照圖24、圖25，對可視光透射部的橫寬Sh的合適值進(jìn)行說明。Vh表示透過寬為Sh的可視光透射部由一只眼進(jìn)行視覺判斷的有效可視區(qū)域的寬度；a Ph表示顯示相鄰視點(diǎn)的圖像的立體顯示用像素的中心間距；Ζ表示從顯示器的圖像顯示面到所述視差格柵的距離山1表示從最佳立體可視位置上的圖像展示對象到視差格柵的距離；W表示圖像展示對象的左右兩眼的瞳孔間距；K表示圖像展示對象兩眼的注視點(diǎn)間距。另外，從圖像展示對象的一只眼向顯示器延伸的一點(diǎn)劃線表示圖像展示對象的注視線。例如，考慮到立體圖像顯示裝置的用途、設(shè)置場所等，最佳立體可視位置可以設(shè)為想使圖像展示對象尤其有效地對裸眼立體影像進(jìn)行視覺判斷的位置。即，從最佳可視位置到視差格柵的距離LI能夠取任意值。另外，立體圖像的主要對象若是歐美人的話，則圖像展示對象的左右兩眼的瞳孔間距W可以設(shè)定并計(jì)算為6(T65mm ;若是亞洲人的話，則可以是65 70mm ;若是小孩的話，則可以是5(T60mm左右。另外，顯示相鄰視點(diǎn)的圖像的立體顯示用像素的中心間距a Ph是，如圖25的示例所示，例如，在由三個子像素構(gòu)成一個立體顯示用像素，并將子像素呈階梯狀在斜方向上連結(jié)配置的情況下，a Ph的值為IPh。其次，決定透過視差格柵的可視光透射部由圖像展示對象的一只眼進(jìn)行視覺判斷的有效可視區(qū)域的寬度Vh的值。有效可視區(qū)域是指，在最佳立體可視位置上，圖像展示對象能夠透過視差格柵的 可視光透射部進(jìn)行視覺判斷的圖像顯示面上的區(qū)域。即，在最佳立體可視位置上，相對于圖像展示對象謀求進(jìn)行視覺判斷的顯示器的范圍。在人移動之后，為了減少向其他視點(diǎn)的圖像的視覺判斷過渡時的圖像紊亂、和在左右兩眼對左右相反的視點(diǎn)的圖像進(jìn)行視覺判斷時產(chǎn)生的對象物位置前后逆轉(zhuǎn)的跳點(diǎn)，而將顯示原本兩眼應(yīng)進(jìn)行視覺判斷的相鄰視點(diǎn)的圖像的立體顯示用像素作為中心，對其左右的立體顯示用像素的一部分進(jìn)行視覺判斷從而使適度的視野混合產(chǎn)生，為此所必需的、圖像顯示面上的由一只眼進(jìn)行視覺判斷的水平方向上的寬度就是有效可視區(qū)域的寬度Vh。因此，若Vh大，則視點(diǎn)的過渡和跳點(diǎn)減少，但也只是那樣，因?yàn)閷εc顯示原本兩眼應(yīng)視覺判斷的相鄰視點(diǎn)的圖像的立體顯示用像素不同的立體顯示用像素(尤其是兩眼重復(fù)對同一圖像進(jìn)行視覺判斷)進(jìn)行視覺判斷，所以變得欠缺立體感。另一方面，若Vh的值小，則圖像的立體感得到強(qiáng)調(diào)，立體圖像清晰地顯現(xiàn)，但是跳點(diǎn)會變大。但是，以上的效果根據(jù)狹縫或可視光透射部的形狀與配置而有很大不同。這樣，通過將有效可視區(qū)域的寬度的大小按照立體圖像的用途等設(shè)為適宜的寬窄，而使其與圖像展示對象的需要和情況相對應(yīng)，能夠更有效地提供立體圖像。此外，由圖24也可知，在最佳立體可視位置上，圖像展示對象的注視線(圖24中的一點(diǎn)劃線)是對各立體顯示用像素的中心進(jìn)行視覺判斷的，因此，左右兩眼的注視點(diǎn)間距K與a Ph為相同的值。接下來，根據(jù)所決定的有效可視區(qū)域的寬度Vh的值，求出從顯示器的圖像顯示面到視差格柵的距離Z的值。Z能夠根據(jù)下式計(jì)算得出。此外，即使是在立體圖像顯示裝置的顯示器面上進(jìn)行了眩光防止等加工處理、或者粘貼了眩光防止等透明薄片的情況下，Z也是從顯示器面到視差格柵的距離。由圖24可知，Z:LI與a Ph:W之間存在由下述算式表示的關(guān)系。[式7]
Z _L I.........................=T..............=—
CtPh W ....... . <ι>因此，所述距離Z能夠由下述算式表示。[式8]「 α P hxL IZ =-
W接下來，根據(jù)所決定的所述距離Z的值，求出可視光透射部的橫寬Sh的值。根據(jù)所述〈1>的算式，LI能夠由下述算式表示。[式9]
T , ZxW L I =^—-
Od P h ....... . <2>另外，由圖24可知，S:Vh與LI: (Ll+Ζ)之間存在由下述算式表示的關(guān)系。[式10]
Sh V h——=-
L I L I + Z因此，可視光透射部的高度Sh能夠由下述算式表示。[式11]
^ , —L IxVhSh= ■ -■;7
丄十 ·Μ··Μβ1Ι· <3、>因此，在〈3>的算式中代入〈2>的算式則Sh能夠由下述算式表示。[式12]
「_ s h-ZX^PhxVh- ZxWxVh
L 」ZxW/ +Z (ZxW) + (ZxahP)
/a P h
^ , Wx￥ hSh=-
W+a h P這樣，就能夠根據(jù)W、a Ph及Vh的值求出Sh的值。接下來，參照圖26，構(gòu)成視差格柵的可視光透射部即狹縫的邊緣形狀為階梯狀或由圓弧、橢圓弧、多邊形連續(xù)而成的形狀，或者，構(gòu)成所述視差格柵的可視光透射部的形狀為多個獨(dú)立形成的孔狀，求出這種情況下的上述連續(xù)的所述形狀的可視光透射部或所述多個孔狀的可視光透射部的高度Sv。在此，視差格柵的有效可視區(qū)域的高度Vv是在最佳立體可視位置上透過高度為Sv的可視光透射部而進(jìn)行視覺判斷的顯示器的范圍，其值能夠根據(jù)設(shè)置裸眼立體顯示器的場所等條件而設(shè)為預(yù)先確定的值。例如，當(dāng)想控制視差格柵的開口率并降低顯示器的照度時，將有效可視區(qū)域的值減小即可。另外，作為調(diào)整視差格柵的開口率的其他方法，也可以相對于一個子像素，使用多個連續(xù)的狹縫的邊緣的一個單位或者可視光透射部；還可以相對于兩個以上的子像素，使用一個上述連續(xù)的所述形狀的可視光透射部或者所述多個孔狀的可視光透射部。這樣，即使是在相對于一個子像素的可視光透射部的個數(shù)的比率不為1:1的情況下，所述有效可視區(qū)域的高度Vv也是透過可視光透射部的高度而進(jìn)行視覺判斷的顯示器的范圍。由圖26可知，Sv:Vv與LI: (Ll+Ζ)之間存在由下述算式表示的關(guān)系。[式13]S V Vv——=-
L I L+ Z因此，可視光透射部的高度Sv能夠由下述算式表示。[式14]
「 c L IxVVSv=-
L + Z
這樣，可視光透射部的高度Sv的值也能通過首先決定該有效可視區(qū)域的高度Vv的值來進(jìn)行倒算得出。另外，根據(jù)所述可視光透射部的間隔Hv，也能由下述算式求出可視光透射部的高度Sv。[式I5]Sv = λ XHvS卩，如圖27所示，首先，根據(jù)上述算式求得可視光透射部的間隔Hv后，決定λ的值(附圖中為1/2)，然后通過代入上述算式，能夠求出所述可視光透射部的高度。接下來，參照圖28，根據(jù)從預(yù)先確定的斜方向莫爾條紋消除位置到視差格柵的距離L2，求出在水平方向上鄰接的構(gòu)成視差格柵的多個可視光透射部的間隔Hh。在圖28中，圖像展示對象在預(yù)先確定的斜方向莫爾條紋消除位置上，用一只眼(左眼)透過視差格柵的可視光透射部，對構(gòu)成顯示器左端的RGB階梯配置像素塊13的立體顯示用像素、和構(gòu)成顯示器右端的RGB階梯配置像素塊13的立體顯示用像素進(jìn)行了視覺判斷，圖像展示對象所視覺判斷的立體顯示用像素表示同一視點(diǎn)的圖像。這樣，若透過視差格柵的可視光透射部而視覺判斷的子像素通常顯示同一視點(diǎn)的圖像，則圖像展示對象不對畫面上的莫爾條紋進(jìn)行視覺判斷。在此，首先，在預(yù)先確定的斜方向莫爾條紋消除位置上的、從與顯示器左端的RGB階梯配置像素塊13相對的所述視差格柵的可視光透射部到與顯示器右端的RGB階梯配置像素塊13相對的所述視差格柵的可視光透射部之間的、水平方向上的可視光透射部的個數(shù)Mh，能夠通過使用了用于顯示立體圖像的視點(diǎn)數(shù)N和水平分辨率Ir的下述算式來表示。[式I6]
廣 I r - I、Mh = ur I ^~- +1
、丄"MjS卩，水平分辨率Ir與3 (R · G · B)相乘后的3Ir是水平方向上的子像素的個數(shù)。從此處減去I是因?yàn)椋?，如圖29所示，假設(shè)視點(diǎn)數(shù)為7，則顯示器右端的子像素不顯示該視點(diǎn)的最后視點(diǎn)即第7視點(diǎn)的圖像而是顯示第I視點(diǎn)的圖像，這種情況下，需要將多出來的顯示第I視點(diǎn)的圖像的子像素的個數(shù)減去再計(jì)算。另外，在最后加上I是因?yàn)?，除了顯示所述第I視點(diǎn)的圖像的子像素在顯示器右端多出來的情況之外，在其他情況下也是因?yàn)閺淖酉袼乜倲?shù)中減去I后進(jìn)行了整數(shù)化，所以因變得不足I而從實(shí)際的Mh值將其補(bǔ)足。另外，從與構(gòu)成顯示器左端的RGB階梯配置像素塊13的立體顯示用像素相對的可視光透射部的中心，到與顯示同一視點(diǎn)的圖像的立體顯示用像素即構(gòu)成顯示器右端的RGB階梯配置像素塊13的立體顯示用像素相對的可視光透射部的中心的距離為，Hh (水平方向上的可視光透射部的間隔)與(Mh-I)相乘所得的值。
[式17]HhX (Mh-I)進(jìn)一步地，在水平方向上，從圖像展示對象透過視差格柵的可視光透射部而視覺判斷的、構(gòu)成顯示器左端的RGB階梯配置像素塊13的立體顯示用像素的中心、到顯示同一視點(diǎn)的圖像的立體顯示用像素即構(gòu)成顯示器右端的RGB階梯配置像素塊13的立體顯示用像素的中心的距離，能夠通過使用了用于生成裸眼立體圖像的圖像的視點(diǎn)數(shù)N和顯示相鄰視點(diǎn)的圖像的立體顯示用像素的中心間距aPh的下述算式來表示。[式I8]Nx(Mh-I)XaPh 由圖28 可知，[HhX (Mh-I)]: [Nx (Mh-I) X a Ph]與 L2: (Z+L2)之間存在能夠由下述算式表示的關(guān)系。[式19]
「 HhxfMh- I) NxCMh - 1)χαΡ h----=----
L 2Z + L 2因此，Hh的值能夠由下述算式求出。[式2O]
「 π TT . N xa P h xL ￡Hh=-
Z + L '2這樣，根據(jù)從預(yù)先確定的斜方向莫爾條紋消除位置到視差格柵的距離L2，能夠求出在水平方向上鄰接的構(gòu)成視差格柵的多個可視光透射部的間隔Hh的值。接著，參照圖30及圖31，根據(jù)從視差格柵到一條斜方向莫爾條紋的產(chǎn)生地點(diǎn)的距離，求出所述在水平方向上鄰接的構(gòu)成視差格柵的多個可視光透射部的間隔Hh。圖30所示的在從一條斜方向莫爾條紋的產(chǎn)生位置到視差格柵6的距離上，即，在從遠(yuǎn)近兩種該位置中的距離該視差格柵6較近的位置到該視差格柵6的預(yù)先確定的距離L2n上，如圖32所示，圖像展示對象透過視差格柵的可視光透射部，與預(yù)先確定的斜方向莫爾條紋消除位置(L2)相同地，對構(gòu)成顯示器左端的RGB階梯配置像素塊13的立體顯示用像素中的顯示第一視點(diǎn)用圖像的立體顯示用像素進(jìn)行視覺判斷。但是，隨著視點(diǎn)向右偏移，透過該可視光透射部，不是對第一視點(diǎn)用立體顯示用像素，而是變成了對其他視點(diǎn)用立體顯示用像素進(jìn)行視覺判斷。而且最終，當(dāng)在L2的地點(diǎn)上對顯示器右端的RGB階梯配置像素塊13中的第一視點(diǎn)用立體顯示用像素進(jìn)行視覺判斷時，透過透射可視光的可視光透射部，在顯示器右端的右側(cè)相鄰處假設(shè)出虛擬像素14，這種情況下，就變成了再次對第一視點(diǎn)用立體顯示用像素(虛擬)進(jìn)行視覺判斷。發(fā)明人提出，因?yàn)榘l(fā)生了一次這樣的循環(huán)，所以在L2n上產(chǎn)生一次莫爾條紋。在這種將L2n的值設(shè)為預(yù)先確定的值的情況下，根據(jù)該值，求出所述在水平方向上鄰接的構(gòu)成視差格柵的多個可視光透射部的間隔Hh。SP，由圖 30 可知，[HhX (M-I)] : [NXMX aPh]與 L2n: (Z+L2n)之間存在由下述算式表示的關(guān)系。[式21]
權(quán)利要求
1.一種中間圖像生成方法，其是用于生成立體圖像的多個中間圖像的生成方法，其中，該立體圖像是由在第I視點(diǎn)至第N視點(diǎn)的多個視點(diǎn)上拍攝及/或描畫的多個視點(diǎn)圖像轉(zhuǎn)換得到的， 其特征在于，為了對RGB階梯配置像素塊進(jìn)行重復(fù)配置并生成該立體圖像，其中，該RGB階梯配置像素塊將沿斜方向在拐角處對子像素進(jìn)行連接且排列成三行的RGB階梯配置像素單元在水平方向上從該第I視點(diǎn)至第N視點(diǎn)進(jìn)行了連接排列， 而將構(gòu)成該RGB階梯配置像素單元的每一個子像素的R值、G值、B值，根據(jù)構(gòu)成在與構(gòu)成該RGB階梯配置像素單元的子像素的配置位置相對應(yīng)的、該多個視點(diǎn)圖像上的對應(yīng)位置附近配置的至少一個以上像素單元的子像素的RGB值，進(jìn)行插值并求出， 將對構(gòu)成該RGB階梯配置像素單元的子像素在水平方向上以R、G、B的順序進(jìn)行了并排排列的RGB并列配置像素單元，按照在該多個視點(diǎn)中的每一個上集中配置的配置規(guī)則而配置，并生成該多個視點(diǎn)中的每一個視點(diǎn)的該中間圖像， 由此，該立體圖像的該RGB階梯配置像素單元與該多個中間圖像的該RGB并列配置像素單元的總數(shù)是相同數(shù)目，或者，分別構(gòu)成這兩者的子像素的總數(shù)是相同數(shù)目。
2.根據(jù)權(quán)利要求I所述的中間圖像生成方法，其特征在于， 所述RGB階梯配置像素單元的各行的子像素為一列，且由具有R值、G值、B值的三個該子像素構(gòu)成， 所述RGB并列配置像素單元中，在一行上，將該三個子像素以R、G、B的順序并排排列成了三列。
3.根據(jù)權(quán)利要求I所述的中間圖像生成方法，其特征在于， 所述RGB階梯配置像素單元的各行的子像素為兩列，且該兩列中的各列均由具有R值、G值、B值的三個該子像素構(gòu)成， 所述RGB并列配置像素單元中，在一行上，將在該RGB階梯配置像素單元的第一列上呈三行排列的三個子像素以R、G、B的順序并排排列成了三列；與該排列在水平方向上連接，并將在該RGB階梯配置像素單元的第二列上呈三行排列的三個子像素以R、G、B的順序并排排列成了三列。
4.根據(jù)權(quán)利要求I所述的中間圖像生成方法，其特征在于， 所述RGB階梯配置像素單元的各行的子像素為三列，且該三列中的各列均由具有R值、G值、B值的三個該子像素構(gòu)成， 所述RGB并列配置像素單元中，在一行上，將在該RGB階梯配置像素單元的第一列上呈三行排列的三個子像素以R、G、B的順序并排排列；與該排列在水平方向上連接，并將在該RGB階梯配置像素單元的第二列上呈三行排列的三個子像素以R、G、B的順序并排排列；與該排列進(jìn)一步連接，并將在該RGB階梯配置像素單元的第三列上排列的三個子像素以R、G、B的順序并排排列。
5.根據(jù)權(quán)利要求I所述的中間圖像生成方法，其特征在于，通過將所述多個中間圖像作為圖像幀配置成由至少在縱方向上分割成三層的第一行至第三行構(gòu)成的多個磚瓦狀， 構(gòu)成所述RGB階梯配置像素單元的子像素與構(gòu)成所述RGB并列配置像素單元的子像素在配置有所述立體圖像和該多個中間圖像的該圖像幀上，在縱橫方向上均為相同數(shù)目。
6.根據(jù)權(quán)利要求5所述的中間圖像生成方法，其特征在于，在所述多個視點(diǎn)為兩個視點(diǎn)的情況下，在所述第一行的磚瓦上配置第I視點(diǎn)的所述中間圖像的2/3 ;在于所述第二行的第I磚瓦上與第I視點(diǎn)的該中間圖像的1/3相連接的第2磚瓦上，配置第2視點(diǎn)的該中間圖像的1/3 ;在所述第三行的磚瓦上配置第2視點(diǎn)的該中間圖像的2/3， 在所述多個視點(diǎn)為三個視點(diǎn)的情況下，在各行的磚瓦上配置各視點(diǎn)的中間圖像， 在所述多個視點(diǎn)為4飛個視點(diǎn)的情況下，在各行的首塊磚瓦上配置第f 3視點(diǎn)的該中間圖像；在配置于與第廣3視點(diǎn)的該中間圖像相連接的第一行至第三行上的磚瓦上，配置剩余視點(diǎn)的該中間圖像， 在所述多個視點(diǎn)為7、個視點(diǎn)的情況下，在各行的首塊的磚瓦上配置第f 3視點(diǎn)的該中間圖像；在與第廣3視點(diǎn)的該中間圖像相連接的第一行至第三行的磚瓦上，配置第4飛視點(diǎn)的該中間圖像；在配置于與第4飛視點(diǎn)的該中間圖像相連接的第一行至第三行上的磚瓦上，配置剩余視點(diǎn)的中間圖像， 在所述多個視點(diǎn)為10個視點(diǎn)以上的情況下，也是同樣地從第I視點(diǎn)開始，依次在各行的磚瓦上配置該中間圖像的一部分或全部。
7.根據(jù)權(quán)利要求I所述的中間圖像生成方法，其特征在于， 代替所述配置規(guī)則，而是參照將構(gòu)成所述立體圖像的所述RGB階梯配置像素單元的子像素的位置與構(gòu)成該多個視點(diǎn)中的每一個視點(diǎn)的中間圖像的所述RGB并列配置像素單元的子像素的位置相關(guān)聯(lián)的、預(yù)先制作成的中間圖像生成表，對構(gòu)成該RGB階梯配置像素單元的子像素進(jìn)行排列，并生成該RGB并列配置像素單元。
8.根據(jù)權(quán)利要求I所述的中間圖像生成方法，其特征在于，在所述多個視點(diǎn)圖像中的每一個均與所述立體圖像為同一縱橫尺寸比的情況下， 構(gòu)成所述RGB階梯配置像素塊的所述第I視點(diǎn)至第N視點(diǎn)的所述RGB階梯配置像素單元中， 將構(gòu)成預(yù)先決定的基準(zhǔn)視點(diǎn)的該RGB階梯配置像素單元的每一個子像素的R值、G值、B值，根據(jù)構(gòu)成在與構(gòu)成該RGB階梯配置像素單元的子像素的配置位置相對應(yīng)的、該基準(zhǔn)視點(diǎn)的視點(diǎn)圖像上的對應(yīng)位置附近配置的像素單元的子像素的RGB值，進(jìn)行插值并求出， 將構(gòu)成該基準(zhǔn)視點(diǎn)以外的視點(diǎn)的該RGB階梯配置像素單元的每一個子像素的R值、G值、B值，根據(jù)構(gòu)成在與構(gòu)成該基準(zhǔn)視點(diǎn)的該RGB階梯配置像素單元的子像素的配置位置相對應(yīng)的、該基準(zhǔn)視點(diǎn)以外的視點(diǎn)的視點(diǎn)圖像上的對應(yīng)位置附近配置的至少一個以上像素單元的子像素的該視點(diǎn)圖像的RGB值，進(jìn)行插值并求出。
9.一種中間圖像生成裝置，其是用于根據(jù)權(quán)利要求I所述的方法而生成多個中間圖像的中間圖像生成裝置， 其特征在于，該中間圖像生成裝置至少包括中央處理裝置和存儲裝置， 該中央處理裝置為了對RGB階梯配置像素塊進(jìn)行重復(fù)配置并生成該立體圖像，其中，該RGB階梯配置像素塊將沿斜方向在拐角處對子像素進(jìn)行連接且排列成三行的RGB階梯配置像素單元在水平方向上從該第I視點(diǎn)至第N視點(diǎn)進(jìn)行了連接排列，而將構(gòu)成該RGB階梯配置像素單元的每一個子像素的R值、G值、B值，根據(jù)構(gòu)成在與構(gòu)成該RGB階梯配置像素單元的子像素的配置位置相對應(yīng)的、存儲在該存儲裝置中的該多個視點(diǎn)圖像上的對應(yīng)位置附近配置的至少一個以上像素單元的子像素的RGB值，進(jìn)行插值并求出，將對構(gòu)成該RGB階梯配置像素單元的子像素在水平方向上以R、G、B的順序進(jìn)行了并排排列的RGB并列配置像素單元，按照在該多個視點(diǎn)中的每一個上集中配置的配置規(guī)則而配置， 生成由該RGB并列配置像素單元構(gòu)成的該多個視點(diǎn)中的每一個視點(diǎn)的中間圖像，其中，該立體圖像的該RGB階梯配置像素單元與該多個中間圖像的該RGB并列配置像素單元的總數(shù)是相同數(shù)目，或者，分別構(gòu)成這兩者的子像素的總數(shù)是相同數(shù)目。
10.一種立體圖像生成方法，其是從根據(jù)權(quán)利要求I所述的方法而生成的多個中間圖像生成立體圖像的方法， 其特征在于，從所述多個視點(diǎn)中的每一個視點(diǎn)的中間圖像，按照所述配置規(guī)則，將構(gòu)成所述RGB并列配置像素單元的子像素作為所述RGB階梯配置像素單元而進(jìn)行配置并生成該立體圖像。
11.一種立體圖像生成方法，其特征在于，在權(quán)利要求10所述的立體圖像生成方法中， 代替所述配置規(guī)則，而是參照將構(gòu)成所述多個視點(diǎn)中的每一個視點(diǎn)的中間圖像的所述RGB并列配置像素單元的子像素的位置與構(gòu)成所述立體圖像的所述RGB階梯配置像素單元的子像素的位置相關(guān)聯(lián)的、預(yù)先制作成的立體圖像生成表， 將構(gòu)成該RGB并列配置像素單元的子像素作為該RGB階梯配置像素單元而進(jìn)行配置。
12.—種立體圖像生成裝置，其是用于根據(jù)權(quán)利要求10所述的方法而從多個中間圖像生成立體圖像的立體圖像生成裝置， 其特征在于，該立體圖像生成裝置至少包括中央處理裝置和存儲裝置， 該中央處理裝置將所述多個視點(diǎn)中的每一個視點(diǎn)的中間圖像存儲至該存儲裝置中， 從所述多個視點(diǎn)中的每一個視點(diǎn)的中間圖像，按照與所述配置規(guī)則相反的順序，將構(gòu)成所述RGB并列配置像素單元的子像素作為所述RGB階梯配置像素單元而進(jìn)行配置并生成該立體圖像。
13.—種立體圖像生成系統(tǒng)，其包括至少具備中央處理裝置、存儲裝置、壓縮裝置和發(fā)送裝置的生成用于生成立體圖像的多個中間圖像的第一信息處理裝置，其中，該立體圖像是由在第I視點(diǎn)至第N視點(diǎn)的多個視點(diǎn)上拍攝及/或描畫的多個視點(diǎn)圖像轉(zhuǎn)換得到的；和至少具備中央處理裝置、存儲裝置、解壓縮裝置和接收裝置的從多個中間圖像生成立體圖像的第二信息處理裝置， 其特征在于，該第一信息處理裝置的該中央處理裝置為了對RGB階梯配置像素塊進(jìn)行重復(fù)配置并生成該立體圖像，其中，該RGB階梯配置像素塊將沿斜方向在拐角處對子像素進(jìn)行連接且排列成三行的RGB階梯配置像素單元在水平方向上從該第I視點(diǎn)至第N視點(diǎn)進(jìn)行了連接排列， 而將構(gòu)成該RGB階梯配置像素單元的每一個子像素的R值、G值、B值，根據(jù)構(gòu)成在與構(gòu)成該RGB階梯配置像素單元的子像素的配置位置相對應(yīng)的、存儲在該第一信息處理裝置的存儲裝置中的該多個視點(diǎn)圖像上的對應(yīng)位置附近配置的至少一個以上像素單元的子像素的RGB值，進(jìn)行插值并求出，將對構(gòu)成該RGB階梯配置像素單元的子像素在水平方向上以R、G、B的順序進(jìn)行了并排排列的RGB并列配置像素單元，按照在該多個視點(diǎn)中的每一個上集中配置的配置規(guī)則而配置， 生成由該RGB并列配置像素單元構(gòu)成的該多個視點(diǎn)中的每一個視點(diǎn)的中間圖像，其中，該立體圖像的該RGB階梯配置像素單元與該多個中間圖像的該RGB并列配置像素單元的總數(shù)是相同數(shù)目，或者，分別構(gòu)成這兩者的子像素的總數(shù)是相同數(shù)目，并且，通過該壓縮裝置對該多個視點(diǎn)中的每一個視點(diǎn)的中間圖像進(jìn)行壓縮，再通過該發(fā)送裝置將其發(fā)送至第二信息處理裝置， 該第二 信息處理裝置的該中央處理裝置通過該接收裝置接收從該第一信息處理裝置發(fā)送來的該多個視點(diǎn)中的每一個視點(diǎn)的中間圖像，并通過解壓縮裝置對該多個中間圖像進(jìn)行解壓縮，從通過該解壓縮裝置解壓縮的該多個視點(diǎn)中的每一個視點(diǎn)的中間圖像按照與該配置規(guī)則相反的順序，將構(gòu)成該RGB并列配置像素單元的子像素作為該RGB階梯配置像素單元而進(jìn)行配置并生成該立體圖像。
全文摘要
在以往的由多個視點(diǎn)實(shí)現(xiàn)的立體影像生成系統(tǒng)中，需要從多個視點(diǎn)的原圖像實(shí)時地進(jìn)行復(fù)雜的插值計(jì)算，并生成立體圖像，還需要資源消耗大且非常特殊的高價電腦等，甚至無法將多個視點(diǎn)的原圖像以標(biāo)準(zhǔn)格式輸出或發(fā)送，因此，在立體圖像顯示技術(shù)的普及上形成了很大的課題。本發(fā)明能夠?qū)崿F(xiàn)一種全新的立體圖像生成系統(tǒng)，通過預(yù)先生成具有與最終輸出圖像即立體圖像相同的分辨率且對每個視點(diǎn)的像素進(jìn)行了匯總的中間圖像，而無需使用高速的特殊電腦等，就能僅通過像素的配置轉(zhuǎn)換而實(shí)現(xiàn)立體圖像的生成，進(jìn)一步地，若使用將各視點(diǎn)的圖像呈磚瓦狀配置的中間圖像，則通過簡單廉價的立體圖像生成裝置，將由藍(lán)光或STB等標(biāo)準(zhǔn)的圖像輸出裝置或圖像發(fā)布服務(wù)器以標(biāo)準(zhǔn)格式輸出或發(fā)送的該中間圖像生成為立體圖像。
文檔編號H04N13/00GK102792701SQ201180012570
公開日2012年11月21日 申請日期2011年3月7日 優(yōu)先權(quán)日2010年3月5日
發(fā)明者吉田健治 申請人:吉田健治