1.一種圖像編碼方法,其包括:
根據(jù)由圖像視點(diǎn)數(shù)據(jù)限定的視點(diǎn)生成圖像內(nèi)容;
生成連續(xù)輸出圖像,使得每個(gè)輸出圖像包括根據(jù)一個(gè)或多個(gè)視點(diǎn)生成的圖像內(nèi)容;以及
編碼與每個(gè)輸出圖像相關(guān)聯(lián)的元數(shù)據(jù),其指示與包含在該輸出圖像中的圖像內(nèi)容相關(guān)的每個(gè)視點(diǎn),并且限定該輸出圖像的哪些部分根據(jù)那些視點(diǎn)的每一個(gè)生成。
2.根據(jù)權(quán)利要求1所述的方法,其中與預(yù)定圖像輸出時(shí)段同步地周期性地執(zhí)行生成連續(xù)輸出圖像的步驟。
3.根據(jù)權(quán)利要求2所述的方法,其中相對(duì)于生成連續(xù)輸出圖像的步驟異步地執(zhí)行生成圖像內(nèi)容的步驟。
4.根據(jù)前述權(quán)利要求中任一項(xiàng)所述的方法,其中編碼步驟包括將所述元數(shù)據(jù)的至少一部分編碼為相應(yīng)輸出圖像內(nèi)的像素?cái)?shù)據(jù)。
5.根據(jù)權(quán)利要求4所述的方法,其中編碼步驟包括將指示輸出圖像的哪些部分根據(jù)每個(gè)視點(diǎn)生成的元數(shù)據(jù)編碼為該輸出圖像中的像素行的至少一個(gè)子集的每一個(gè)的一個(gè)邊緣處的像素?cái)?shù)據(jù)。
6.根據(jù)權(quán)利要求5所述的方法,其中指示輸出圖像的哪些部分根據(jù)每個(gè)視點(diǎn)生成的元數(shù)據(jù)作為該輸出圖像中的每個(gè)像素行的一個(gè)邊緣處的像素?cái)?shù)據(jù)被提供,從而指示與該像素行相關(guān)的視點(diǎn)。
7.根據(jù)前述權(quán)利要求中任一項(xiàng)所述的方法,其中編碼步驟包括將指示與包含在該輸出圖像中的圖像內(nèi)容相關(guān)的每個(gè)視點(diǎn)的元數(shù)據(jù)編碼為相應(yīng)輸出圖像內(nèi)的像素?cái)?shù)據(jù)。
8.根據(jù)權(quán)利要求7所述的方法,其中指示與包含在該輸出圖像中的圖像內(nèi)容相關(guān)的每個(gè)視點(diǎn)的元數(shù)據(jù)在輸出圖像的頂部和/底部邊緣處被編碼為相應(yīng)輸出圖像內(nèi)的像素?cái)?shù)據(jù)的一個(gè)或多個(gè)行中的像素?cái)?shù)據(jù)。
9.根據(jù)權(quán)利要求8所述的方法,其中:
根據(jù)不同的相應(yīng)視點(diǎn)生成的輸出圖像的部分是上部圖像部分和下部圖像部分;
編碼步驟包括將指示可應(yīng)用于所述上部圖像部分的視點(diǎn)的元數(shù)據(jù)編碼為輸出圖像的像素的一個(gè)或多個(gè)最頂行中的像素?cái)?shù)據(jù),以及將指示可應(yīng)用于所述下部圖像部分的視點(diǎn)的元數(shù)據(jù)編碼為輸出圖像的像素的一個(gè)或多個(gè)最底行中的像素?cái)?shù)據(jù)。
10.一種圖像顯示方法,用于從連續(xù)輸入圖像生成連續(xù)顯示圖像,每個(gè)連續(xù)輸入圖像包括根據(jù)一個(gè)或多個(gè)視點(diǎn)生成的圖像內(nèi)容,每個(gè)輸入圖像具有關(guān)聯(lián)元數(shù)據(jù),其指示與包含在該輸入圖像中的圖像內(nèi)容相關(guān)的每個(gè)視點(diǎn),并且限定該輸入圖像的哪些部分根據(jù)那些視點(diǎn)的每一個(gè)生成,所述方法包括:
根據(jù)期望的顯示視點(diǎn)和由與輸入圖像相關(guān)聯(lián)的元數(shù)據(jù)針對(duì)該部分限定的視點(diǎn)之間的任何差異,重投影每個(gè)輸入圖像的部分以形成相應(yīng)的顯示圖像。
11.根據(jù)權(quán)利要求10所述的方法,其包括:
檢測(cè)觀看者頭部的當(dāng)前位置和/或取向;以及
根據(jù)檢測(cè)到的用戶頭部的當(dāng)前位置和/或取向?qū)С鲲@示視點(diǎn)。
12.根據(jù)權(quán)利要求10或11所述的方法,其包括:
檢測(cè)觀看者頭部的初始位置和/或取向;
將檢測(cè)到的初始位置和/或取向提供給圖像生成器以根據(jù)作為視點(diǎn)的該初始位置和/或取向生成圖像內(nèi)容。
13.根據(jù)權(quán)利要求10至12中任一項(xiàng)所述的方法,其包括使用顯示器顯示重投影圖像。
14.根據(jù)權(quán)利要求13所述的方法,其中所述顯示器是頭戴式顯示器,并且通過(guò)檢測(cè)所述頭戴式顯示器的位置和/或取向檢測(cè)所述觀看者頭部的位置和/或取向。
15.根據(jù)權(quán)利要求10至14中任一項(xiàng)所述的方法,其中重投影的步驟包括檢測(cè)生成的圖像和所需的重投影圖像之間的重疊部分,以及作為重投影圖像的一部分再現(xiàn)所述重疊部分。
16.根據(jù)權(quán)利要求15所述的方法,其包括用來(lái)自另一圖像源的圖像內(nèi)容填充重投影圖像的除了所述重疊部分之外的部分。
17.根據(jù)前述權(quán)利要求中任一項(xiàng)所述的方法,其中所述輸入圖像具有指示一個(gè)或多個(gè)圖像特征的圖像深度的關(guān)聯(lián)深度數(shù)據(jù),并且重投影的步驟包括根據(jù)所述深度數(shù)據(jù)重定位重投影圖像內(nèi)的一個(gè)或多個(gè)圖像特征。
18.根據(jù)權(quán)利要求10至17中任一項(xiàng)所述的方法,其中所述元數(shù)據(jù)被提供作為所述輸入圖像內(nèi)的像素?cái)?shù)據(jù),所述方法包括:
從所述顯示圖像省略該像素?cái)?shù)據(jù)。
19.一種圖像編碼和顯示方法,其包括:
使用權(quán)利要求1至9中任一項(xiàng)所述的方法編碼連續(xù)圖像;以及
使用權(quán)利要求10至18中任一項(xiàng)所述的方法生成連續(xù)顯示圖像。
20.一種用于執(zhí)行根據(jù)前述權(quán)利要求中任一項(xiàng)所述的方法的計(jì)算機(jī)軟件。
21.一種存儲(chǔ)介質(zhì),通過(guò)所述存儲(chǔ)介質(zhì)存儲(chǔ)根據(jù)權(quán)利要求20所述的計(jì)算機(jī)軟件。
22.一種視頻游戲機(jī),其配置成執(zhí)行根據(jù)權(quán)利要求1至9中任一項(xiàng)所述的方法。
23.一種頭戴式顯示系統(tǒng),其配置成執(zhí)行根據(jù)權(quán)利要求10至18中任一項(xiàng)所述的方法。
24.一種圖像信號(hào),其包括連續(xù)輸出圖像,使得每個(gè)輸出圖像包括根據(jù)一個(gè)或多個(gè)視點(diǎn)生成的圖像內(nèi)容和與每個(gè)輸出圖像相關(guān)聯(lián)的元數(shù)據(jù),其指示與包含在該輸出圖像中的圖像內(nèi)容相關(guān)的每個(gè)視點(diǎn),并且限定該輸出圖像的哪些部分根據(jù)那些視點(diǎn)的每一個(gè)生成。
25.一種存儲(chǔ)介質(zhì),通過(guò)所述存儲(chǔ)介質(zhì)存儲(chǔ)根據(jù)權(quán)利要求24所述的圖像信號(hào)。
26.一種圖像編碼裝置,其包括:
圖像內(nèi)容生成器,其配置成根據(jù)由圖像視點(diǎn)數(shù)據(jù)限定的視點(diǎn)生成圖像內(nèi)容;
輸出圖像生成器,其配置成生成連續(xù)輸出圖像,使得每個(gè)輸出圖像包括根據(jù)一個(gè)或多個(gè)視點(diǎn)生成的圖像內(nèi)容;以及
元數(shù)據(jù)編碼器,其配置成編碼與每個(gè)輸出圖像相關(guān)聯(lián)的元數(shù)據(jù),所述元數(shù)據(jù)指示與包含在該輸出圖像中的圖像內(nèi)容相關(guān)的每個(gè)視點(diǎn),并且限定該輸出圖像的哪些部分根據(jù)那些視點(diǎn)的每一個(gè)生成。
27.一種視頻游戲機(jī),其包括根據(jù)權(quán)利要求26所述的裝置。
28.一種圖像顯示系統(tǒng),其可操作以從連續(xù)輸入圖像生成連續(xù)顯示圖像,每個(gè)連續(xù)輸入圖像包括根據(jù)一個(gè)或多個(gè)視點(diǎn)生成的圖像內(nèi)容,每個(gè)輸入圖像具有關(guān)聯(lián)元數(shù)據(jù),其指示與包含在該輸入圖像中的圖像內(nèi)容相關(guān)的每個(gè)視點(diǎn),并且限定所述輸入圖像的哪些部分根據(jù)那些視點(diǎn)的每一個(gè)生成,所述系統(tǒng)包括:
可由觀看者觀看的顯示元件;
圖像重投影儀,其配置成根據(jù)期望的顯示視點(diǎn)和由與輸入圖像相關(guān)聯(lián)的元數(shù)據(jù)針對(duì)該部分限定的視點(diǎn)之間的任何差異,重投影每個(gè)輸入圖像的部分以形成相應(yīng)的顯示圖像。
29.根據(jù)權(quán)利要求28所述的系統(tǒng),所述系統(tǒng)是頭戴式顯示系統(tǒng)。