專利名稱:發(fā)送和接收立體圖像數(shù)據(jù)的設(shè)備和方法
技術(shù)領(lǐng)域:
本發(fā)明涉及一種發(fā)送立體圖像數(shù)據(jù)的設(shè)備和方法以及接收立體圖像數(shù)據(jù)的設(shè)備和方法。更具體地,本發(fā)明涉及一種能夠改善由3D視頻內(nèi)容供應(yīng)商發(fā)送視差(disparity) 數(shù)據(jù)的靈活性的發(fā)送立體圖像數(shù)據(jù)的設(shè)備和方法以及接收立體圖像數(shù)據(jù)的設(shè)備和方法。
背景技術(shù):
例如,日本未審查專利申請公布第2005-6114號公開了一種使用電視廣播來發(fā)送立體圖像數(shù)據(jù)的方法。在此發(fā)送方法中,向使用雙目視差來顯示立體圖像的電視接收機發(fā)送包括左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)的立體圖像數(shù)據(jù)。圖30圖示了在使用雙目視差來顯示立體圖像(三維(3D)圖像)時、在其中在屏幕上顯示對象的左圖像和右圖像的位置與其中再現(xiàn)所述立體圖像的位置之間的關(guān)系的示例。 例如,在對象A (在屏幕上向右偏移該對象A的左圖像La,并且在屏幕上向左偏移該對象A 的右圖像Ra)的情況下,在比屏幕更近的位置處顯示對象A的立體圖像,這是因為在比屏幕更近的位置處左視線與右視線相交。Dpa表示與對象A有關(guān)的水平視差向量。在對象B (在相同位置處顯示該對象B的左圖像Lb和右圖像Rb)的情況下,在屏幕上的位置處顯示對象B的立體圖像,這是因為在屏幕上左視線與右視線相交。在對象C (在屏幕上向左偏移該對象A的左圖像Lc,并且在屏幕上向右偏移該對象C的右圖像Re)的情況下,在比屏幕更遠的位置處顯示對象C的立體圖像,這是因為在比屏幕更遠的位置處左視線與右視線相交。Dpc表示與對象C有關(guān)的水平視差向量。
發(fā)明內(nèi)容
在按照以上方式將包括了字幕(caption)、數(shù)據(jù)廣播顯示、和專用于終端應(yīng)用的顯示的疊加信息疊加于在電視接收機中顯示的立體圖像(3D圖像)上時,期望對于立體圖像設(shè)置觀眾可以容易地觀看該立體圖像的適當(dāng)深度。一般將該適當(dāng)深度認(rèn)為是比立體圖像的深度更近的深度。圖31圖示了圖像和字幕(subtitle)(字幕)之間的位置關(guān)系的示例。在此示例中,在比圖像的最近位置更近的位置處識別出字幕。由于在典型的現(xiàn)有3D電視系統(tǒng)中使用了根據(jù)左眼和右眼視圖而生成的兩個圖像,所以通過其中顯示所述圖像的目標(biāo)上的左圖像和右圖像之間的水平偏移的像素數(shù)目來表示該深度。相應(yīng)地,同樣地關(guān)于諸如在圖像上疊加的字幕之類的疊加信息,考慮到對于每條疊加信息、基于左圖像和右圖像之間的水平偏移的像素數(shù)目來定義適當(dāng)深度。將關(guān)于偏移的像素數(shù)目的信息稱為視差數(shù)據(jù)。在3D電影中,在圖像上疊加的字幕的深度經(jīng)常響應(yīng)于圖像(視頻)隨著時間的變化而隨著時間變化。為了同樣在3D電視系統(tǒng)中提供相似的顯示,考慮到對于每個字幕來理想地不斷變化所述深度。然而,花費了許多努力來生成對于每個字幕不斷變化的視差數(shù)據(jù), 因而增加了制作成本。另外,必須在用于生成期望視差數(shù)據(jù)以分布該視差數(shù)據(jù)的裝置中進行新的投資。
將產(chǎn)生各種3D內(nèi)容項目,以通過使用廣播或因特網(wǎng)協(xié)議電視(IPTV)來分布該3D 內(nèi)容項目。然而,內(nèi)容供應(yīng)商可以不必考慮應(yīng)該供應(yīng)上述的期望視差數(shù)據(jù),以實現(xiàn)被認(rèn)為沒有圖像那么重要的字幕的容易觀看。在這樣的情況下,在分布某一 3D視頻內(nèi)容項目時,內(nèi)容供應(yīng)商可以在其中顯示疊加信息的時段期間、以固定的深度來顯示諸如字幕之類的特定疊加信息。在分布另一 3D視頻內(nèi)容項目時,內(nèi)容供應(yīng)商可以以固定的深度來顯示整個節(jié)目(內(nèi)容)。在分布另一 3D視頻內(nèi)容項目時,內(nèi)容供應(yīng)商可以不將疊加信息的顯示認(rèn)為是3D 視頻,盡管內(nèi)容供應(yīng)商按照與二維(2D)視頻內(nèi)容項目中的方式相似的方式來發(fā)送諸如字幕之類的疊加信息。在此情況下,不供應(yīng)視差數(shù)據(jù)。在分布另一 3D視頻內(nèi)容項目時,內(nèi)容供應(yīng)商可以不斷地將期望視差數(shù)據(jù)添加到3D視頻內(nèi)容項目。在現(xiàn)有技術(shù)中,不存在對于來自內(nèi)容供應(yīng)商的、與考慮到3D視頻內(nèi)容項目的廣播或IPTV中諸如字幕之類的疊加信息有關(guān)的各種需求的解決方案。期望改善由3D視頻內(nèi)容供應(yīng)商發(fā)送視差數(shù)據(jù)的靈活性。根據(jù)本發(fā)明的實施例,一種發(fā)送立體圖像數(shù)據(jù)的設(shè)備,包括圖像數(shù)據(jù)輸出單元, 被配置為輸出關(guān)于某一節(jié)目的、包括了左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)的立體圖像數(shù)據(jù);以及圖像數(shù)據(jù)發(fā)送單元,被配置為發(fā)送包括了從該圖像數(shù)據(jù)輸出單元輸出的關(guān)于某一節(jié)目的立體圖像數(shù)據(jù)的傳送流。該圖像數(shù)據(jù)發(fā)送單元在該傳送流中合并指示出是否發(fā)送了視差數(shù)據(jù)的標(biāo)識信息。該視差數(shù)據(jù)用于將視差添加到要在根據(jù)該左眼圖像數(shù)據(jù)和該右眼圖像數(shù)據(jù)生成的圖像上疊加的疊加信息。在以上實施例中,該圖像數(shù)據(jù)輸出單元輸出關(guān)于某一節(jié)目的、包括了左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)的立體圖像數(shù)據(jù)。該圖像數(shù)據(jù)發(fā)送單元發(fā)送包括了從該圖像數(shù)據(jù)輸出單元輸出的關(guān)于某一節(jié)目的立體圖像數(shù)據(jù)的傳送流。該圖像數(shù)據(jù)發(fā)送單元在該傳送流中合并指示出是否發(fā)送了視差數(shù)據(jù)的標(biāo)識信息。該視差數(shù)據(jù)用于將視差添加到要在根據(jù)該左眼圖像數(shù)據(jù)和該右眼圖像數(shù)據(jù)生成的圖像上疊加的疊加信息。該疊加信息意味著要在圖像上疊加的信息,諸如用于顯示字幕的字幕信息、隱藏字幕(closed caption)信息、用于顯示圖形的圖形信息(諸如,商標(biāo)(logo))、電子節(jié)目指南(EPG)、用于顯示電視文字廣播等內(nèi)容的文本信息、和專用于電視接收機的屏上顯示。例如,該標(biāo)識信息可以指示出是否發(fā)送了用于每個節(jié)目的視差數(shù)據(jù)。當(dāng)該標(biāo)識信息指示出發(fā)送了用于每個節(jié)目的視差數(shù)據(jù)時,該圖像數(shù)據(jù)發(fā)送單元優(yōu)選地還在該傳送流中合并用于每個節(jié)目的視差數(shù)據(jù)。在此情況下,該圖像數(shù)據(jù)發(fā)送單元優(yōu)選地在該傳送流中合并該標(biāo)識信息和該視差數(shù)據(jù),作為用于每個節(jié)目的元數(shù)據(jù)。例如,該傳送流優(yōu)選地包括用作用于以節(jié)目為單位進行管理的服務(wù)信息的事件信息表,并且該圖像數(shù)據(jù)發(fā)送單元優(yōu)選地在該事件信息表中合并該標(biāo)識信息和該視差數(shù)據(jù)。例如,該標(biāo)識信息可以指示出是否發(fā)送了通用視差數(shù)據(jù)。當(dāng)該標(biāo)識信息指示出發(fā)送了通用視差數(shù)據(jù)時,該圖像數(shù)據(jù)發(fā)送單元還優(yōu)選地在該傳送流中合并包括了通用視差數(shù)據(jù)的視差基本流,并且優(yōu)選地與指示出發(fā)送了通用視差數(shù)據(jù)的標(biāo)識信息相關(guān)聯(lián)地,在該傳送流中合并用于標(biāo)識該視差基本流的標(biāo)識信息。例如,該標(biāo)識信息可以指示出是否發(fā)送了用于特定疊加信息的視差數(shù)據(jù)。當(dāng)該標(biāo)識信息指示出發(fā)送了用于特定疊加信息的視差數(shù)據(jù)時,該圖像數(shù)據(jù)發(fā)送單元優(yōu)選地還在該傳送流中合并固定-變化信息。該固定_變化信息指示出發(fā)送在其中顯示出特定疊加信息的包括了某一數(shù)目的幀的幀時段中共同使用的視差數(shù)據(jù)和發(fā)送在包括了某一數(shù)目的幀的幀時段中依次更新的視差數(shù)據(jù)中的任一項或者其兩者。在此情況下,例如該圖像數(shù)據(jù)發(fā)送單元優(yōu)選地在該傳送流中合并包括了關(guān)于特定疊加信息的數(shù)據(jù)的疊加信息基本流,并且對于每條疊加信息來優(yōu)選地在疊加信息基本流中合并該固定_變化信息。當(dāng)該固定-變化信息指示出發(fā)送在包括了某一數(shù)目的幀的幀時段中共同使用的視差數(shù)據(jù)時,該圖像數(shù)據(jù)發(fā)送單元與該固定-變化信息相關(guān)聯(lián)地對于每條疊加信息來優(yōu)選地在疊加信息基本流中合并在包括了某一數(shù)目的幀的幀時段中共同使用的視差數(shù)據(jù)。當(dāng)該固定-變化信息指示出發(fā)送在其中顯示出特定疊加信息的包括了某一數(shù)目的幀的幀時段中依次更新的視差數(shù)據(jù)時,該圖像數(shù)據(jù)發(fā)送單元優(yōu)選地在該傳送流中合并其中利用標(biāo)識信息來區(qū)分用于每條疊加信息的視差序列的疊加信息基本流,并且與該固定_變化信息相關(guān)聯(lián)地對于每條疊加信息來優(yōu)選地在疊加信息基本流中合并用于指定視差基本流中的對應(yīng)視差序列的標(biāo)識信息。如上所述,根據(jù)本發(fā)明的以上實施例,在包括了關(guān)于某一節(jié)目的立體圖像數(shù)據(jù)的傳送流中合并指示出是否發(fā)送了視差數(shù)據(jù)的標(biāo)識信息。相應(yīng)地,可能改善由3D視頻內(nèi)容供應(yīng)商發(fā)送視差數(shù)據(jù)的靈活性。換言之,可能選擇性地發(fā)送用于每個節(jié)目的視差數(shù)據(jù)、通用視差數(shù)據(jù)、用于特定疊加信息的視差數(shù)據(jù)等等,作為視差數(shù)據(jù)。另外,也可以選擇不發(fā)送視差數(shù)據(jù)。根據(jù)本發(fā)明的另一實施例,一種接收立體圖像數(shù)據(jù)的設(shè)備,包括圖像數(shù)據(jù)接收單元,被配置為接收傳送流,在該傳送流中包括了關(guān)于某一節(jié)目的、包含左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)的立體圖像數(shù)據(jù),并且在該傳送流中合并了指示出是否發(fā)送了視差數(shù)據(jù)的標(biāo)識信息,該視差數(shù)據(jù)用于將視差添加到要在根據(jù)該左眼圖像數(shù)據(jù)和該右眼圖像數(shù)據(jù)生成的圖像上疊加的疊加信息;圖像數(shù)據(jù)獲取單元,被配置為從由該圖像數(shù)據(jù)接收單元接收到的傳送流中獲取立體圖像數(shù)據(jù);標(biāo)識信息獲取單元,被配置為從由該圖像數(shù)據(jù)接收單元接收到的傳送流中獲取標(biāo)識信息;以及圖像數(shù)據(jù)處理單元,被配置為基于由圖像數(shù)據(jù)獲取單元獲取的立體圖像數(shù)據(jù)和由標(biāo)識信息獲取單元獲取的標(biāo)識信息來將基于某一視差數(shù)據(jù)的視差添加到要在左眼圖像和右眼圖像上疊加的同一疊加信息,以獲取其上疊加有疊加信息的左眼圖像數(shù)據(jù)和其上疊加有疊加信息的右眼圖像數(shù)據(jù)。在以上實施例中,該圖像數(shù)據(jù)接收單元接收傳送流。在該傳送流中包括了關(guān)于某一節(jié)目的、包含左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)的立體圖像數(shù)據(jù)。在傳送流中合并了指示出是否發(fā)送了視差數(shù)據(jù)的標(biāo)識信息。該視差數(shù)據(jù)用于將視差添加到要在根據(jù)該左眼圖像數(shù)據(jù)和該右眼圖像數(shù)據(jù)生成的圖像上疊加的疊加信息。該標(biāo)識信息可以指示出是否發(fā)送了用于每個節(jié)目的視差數(shù)據(jù)、是否發(fā)送了通用視差數(shù)據(jù)、是否發(fā)送了用于特定疊加信息的視差數(shù)據(jù)。該圖像數(shù)據(jù)獲取單元從由該圖像數(shù)據(jù)接收單元接收到的傳送流中獲取立體圖像數(shù)據(jù)。該標(biāo)識信息獲取單元從由該圖像數(shù)據(jù)接收單元接收到的傳送流中獲取標(biāo)識信息。該圖像數(shù)據(jù)處理單元基于該立體圖像數(shù)據(jù)和該標(biāo)識信息來獲取其上疊加有疊加信息的左眼圖像數(shù)據(jù)和其上疊加有疊加信息的右眼圖像數(shù)據(jù)。在此情況下,將基于某一視差數(shù)據(jù)的視差添加到要在左眼圖像和右眼圖像上疊加的同一疊加信息。當(dāng)該標(biāo)識信息指示出發(fā)送了視差數(shù)據(jù)時,優(yōu)選地使用從傳送流中獲取的視差數(shù)據(jù),作為該某一視差數(shù)據(jù)。當(dāng)該標(biāo)識信息指示出沒有發(fā)送視差數(shù)據(jù)時,優(yōu)選地使用事先準(zhǔn)備的視差數(shù)據(jù),作為該某一視差數(shù)據(jù)。如上所述,根據(jù)本發(fā)明的以上實施例,獲取了在傳送流中合并的標(biāo)識信息?;谠摌?biāo)識信息來將基于某一視差數(shù)據(jù)的視差添加到要在左眼圖像和右眼圖像上疊加的同一疊加信息。相應(yīng)地,可能以3D視頻內(nèi)容供應(yīng)商所意欲的深度來在立體圖像上顯示諸如字幕之類的疊加信息。根據(jù)本發(fā)明,在包括了關(guān)于某一節(jié)目的立體圖像數(shù)據(jù)的傳送流中合并指示出是否發(fā)送了視差數(shù)據(jù)的標(biāo)識信息。相應(yīng)地,可能改善由3D視頻內(nèi)容供應(yīng)商發(fā)送視差數(shù)據(jù)的靈活性。另外,可能以3D視頻內(nèi)容供應(yīng)商所意欲的深度來在立體圖像上顯示諸如字幕之類的疊加信息。
圖1圖示了根據(jù)本發(fā)明實施例的立體圖像發(fā)送-接收系統(tǒng)的配置的示例;圖2是示出了廣播站中的發(fā)送數(shù)據(jù)生成單元的配置的示例的框圖;圖3示出了包括視頻PES分組、音頻PES分組、字幕PES分組、視差PES分組、和表格(諸如,事件信息表(EIT)和節(jié)目映射表(PMT))的傳送流的結(jié)構(gòu)的示例;圖4示出了包括視頻基本流、字幕基本流、音頻基本流、和視差基本流的一般傳送流的結(jié)構(gòu)的示例;圖5示出了立體描述符(stereoscopic_descriptor (立體描述符))的語法的示例;圖 6 示出了立體描述符(stereoscopic_descriptor)的語義;圖7示出了視差鏈路描述符(diSparity_link_deSCript0r (視差鏈路描述符)) 的語法的示例;圖8示出了視差鏈路描述符(diSparity_link_deSCript0r)的語義;圖9A示出了字幕的2D顯示的示例,而圖9B示出了字幕的3D顯示的示例;圖10示出了當(dāng)設(shè)置在包括了用于構(gòu)成顯示集的某一數(shù)目的幀的幀時段中共同使用的一條視差數(shù)據(jù)時、該顯示集的每幀中字幕的深度的示例;圖11示出了當(dāng)設(shè)置在包括了用于構(gòu)成顯示集的某一數(shù)目的幀的幀時段中依次更新的多條視差數(shù)據(jù)時、該顯示集的每幀中字幕的深度的示例;圖12示出了字幕數(shù)據(jù)的結(jié)構(gòu)的示例;圖 13 示出了字幕流(PES) ( BP, Digital Video Broadcasting (DVB) _ Subtitling(數(shù)字視頻廣播添加字幕))的語法;圖14示出了片段“Segment_type (片段類型),,的每個值與片段類型之間的對應(yīng)關(guān)系;圖15示出了 3D片段(3DS)的語法的示例;圖16示出了 3DS的語義;圖17示出了視差流的語法的示例,即示出了包括視差數(shù)據(jù)的“PES_data_
8field (PES數(shù)據(jù)字段),,的語法的示例;圖18示出了 “diSparity_data_Set (視差數(shù)據(jù)集)”的語法的示例;圖 19 示出了 "disparity_data_set,,的主要語義;圖20是示出了立體圖像發(fā)送-接收系統(tǒng)中的接收機設(shè)備的配置的示例的框圖;圖21是示出了當(dāng)疊加信息是屏上顯示(OSD)圖像時、由視差數(shù)據(jù)輸出單元執(zhí)行的處理的示例的流程圖;圖22是示出了當(dāng)疊加信息是字幕時、由視差數(shù)據(jù)輸出單元執(zhí)行的處理的示例的流程圖;圖23是示出了接收機設(shè)備中的疊加器單元的配置的示例的框圖;圖24示出了當(dāng)基于用于每個區(qū)段/顯示集的視差序列來將視差添加到要在左眼圖像和右眼圖像上疊加的字幕時、如何三維地顯示字幕的示例;圖25示出了當(dāng)基于用于每個區(qū)段/顯示集的固定視差數(shù)據(jù)來將視差添加到要在左眼圖像和右眼圖像上疊加的字幕時、如何三維地顯示字幕的示例;圖26示出了當(dāng)基于用于每個區(qū)段/顯示集的視差序列來將視差添加到要在左眼圖像和右眼圖像上疊加的字幕時、如何三維地顯示字幕的另一示例;圖27示出了當(dāng)基于用于每個區(qū)段/顯示集的固定視差數(shù)據(jù)來將視差添加到要在左眼圖像和右眼圖像上疊加的字幕時、如何三維地顯示字幕的另一示例;圖28示出了當(dāng)基于用于每個節(jié)目的視差數(shù)據(jù)來將視差添加到要在左眼圖像和右眼圖像上疊加的字幕時、如何三維地顯示字幕的示例;圖29示出了當(dāng)基于在接收機設(shè)備中事先準(zhǔn)備的視差數(shù)據(jù)來將視差添加到要在左眼圖像和右眼圖像上疊加的字幕時、如何三維地顯示字幕的示例;圖30圖示了在使用雙目視差來顯示對象的立體圖像(三維(3D)圖像)時、在其中在屏幕上顯示所述對象的左圖像和右圖像的位置與其中再現(xiàn)所述立體圖像的位置之間的關(guān)系的示例;以及圖31圖示了當(dāng)在比圖像的最近位置更近的位置處識別出字幕時、在圖像與該字幕之間的位置關(guān)系的示例。
具體實施例方式在這里,將參考附圖來對本發(fā)明的實施例進行描述。<1.實施例 >圖像發(fā)送-接收系統(tǒng)的配置的示例圖1圖示了根據(jù)本發(fā)明實施例的立體圖像發(fā)送-接收系統(tǒng)10的配置的示例。立體圖像發(fā)送-接收系統(tǒng)10包括廣播站100和接收機設(shè)備200。廣播站100在廣播上發(fā)送傳送流。傳送流包括關(guān)于某一節(jié)目的立體圖像數(shù)據(jù),該立體圖像數(shù)據(jù)包括左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)。另外,在傳送流中合并指示出是否發(fā)送了視差數(shù)據(jù)的標(biāo)識信息。視差數(shù)據(jù)用于對要在根據(jù)左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)而生成的圖像上疊加的疊加信息(諸如,字幕)進行偏移,以添加視差。視差數(shù)據(jù)例如是視差向量或深度數(shù)據(jù)??梢酝ㄟ^某種轉(zhuǎn)換將深度數(shù)據(jù)處理為視差向量。
接收機設(shè)備200在廣播上接收從廣播站100發(fā)送的傳送流。接收機設(shè)備200從傳送流中獲取立體圖像數(shù)據(jù),并還從傳送流中獲取標(biāo)識信息。接收機設(shè)備200基于該立體圖像數(shù)據(jù)和該標(biāo)識信息來獲取左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù),在該左眼圖像數(shù)據(jù)上疊加了疊加信息(諸如,字幕),并且在該右眼圖像數(shù)據(jù)上疊加了疊加信息。廣播站的描述現(xiàn)在,將詳細(xì)地描述廣播站100。廣播站100在廣播上發(fā)送傳送流,在該傳送流中包括了立體圖像數(shù)據(jù),并且在該傳送流中合并了指示出是否發(fā)送了視差數(shù)據(jù)的標(biāo)識信息, 如上所述。在本實施例中,除了立體圖像數(shù)據(jù)之外,傳送流例如還包括音頻數(shù)據(jù)、字幕數(shù)據(jù)、 和視差數(shù)據(jù)。只有當(dāng)標(biāo)識信息指示出發(fā)送了視差數(shù)據(jù)時,才在傳送流中包括視差數(shù)據(jù)。發(fā)送數(shù)據(jù)生成單元的配置的示例圖2是示出了廣播站100中的用于生成傳送流的發(fā)送數(shù)據(jù)生成單元110的配置的示例的框圖。發(fā)送數(shù)據(jù)生成單元110包括數(shù)據(jù)提取器(歸檔器(archive)) 111、視頻編碼器112、視差數(shù)據(jù)編碼器113、和音頻編碼器114。發(fā)送數(shù)據(jù)生成單元110還包括字幕發(fā)生器 115、字幕編碼器116、和多路復(fù)用器117。例如在數(shù)據(jù)提取器111中可折卸地加載數(shù)據(jù)記錄介質(zhì)111a。在數(shù)據(jù)記錄介質(zhì)Illa 上記錄關(guān)于在傳送流上發(fā)送的某一節(jié)目的立體圖像數(shù)據(jù)和與該立體圖像數(shù)據(jù)對應(yīng)的音頻數(shù)據(jù)。立體圖像數(shù)據(jù)包括左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)。與關(guān)于某一節(jié)目的立體圖像數(shù)據(jù)相關(guān)聯(lián)地在數(shù)據(jù)記錄介質(zhì)Illa上記錄視差數(shù)據(jù)。當(dāng)在數(shù)據(jù)記錄介質(zhì)Illa上記錄視差數(shù)據(jù)時,可以在傳送流中合并該視差數(shù)據(jù),以與關(guān)于某一節(jié)目的立體圖像數(shù)據(jù)相關(guān)聯(lián)地發(fā)送該視差數(shù)據(jù)。在數(shù)據(jù)記錄介質(zhì)Illa上記錄的視差數(shù)據(jù)例如是用于每個節(jié)目的視差數(shù)據(jù)、通用視差數(shù)據(jù)、和專用視差數(shù)據(jù)(用于特定疊加信息的視差數(shù)據(jù))。專用視差數(shù)據(jù)例如包括字幕視差數(shù)據(jù)和隱藏字幕視差數(shù)據(jù)。在本實施例中使用字幕視差數(shù)據(jù)。在用于每個節(jié)目的視差數(shù)據(jù)的情況下,與關(guān)于某一節(jié)目的立體圖像數(shù)據(jù)相關(guān)聯(lián)地在數(shù)據(jù)記錄介質(zhì)Illa上記錄一條視差數(shù)據(jù)。在通用視差數(shù)據(jù)的情況下,例如,與關(guān)于某一節(jié)目的立體圖像數(shù)據(jù)相關(guān)聯(lián)地在數(shù)據(jù)記錄介質(zhì)Illa上記錄屬于源自于將屏幕劃分為某一數(shù)目區(qū)域的每個劃分區(qū)域的視差數(shù)據(jù)。在此情況下,例如,用于每個節(jié)目的一條視差數(shù)據(jù)屬于每個劃分區(qū)域,或者用于每個某一數(shù)目的幀的多條視差數(shù)據(jù)屬于每個劃分區(qū)域。在專用視差數(shù)據(jù)的情況下,與關(guān)于某一節(jié)目的立體圖像數(shù)據(jù)相關(guān)聯(lián)地、以顯示集為單位而在數(shù)據(jù)記錄介質(zhì)Illa上記錄關(guān)于每頁中的每個區(qū)段的視差數(shù)據(jù)。在此情況下,例如,對于每個區(qū)段來記錄在包括了用于構(gòu)成顯示集的某一數(shù)目的幀的幀時段中共同使用的一條視差數(shù)據(jù),或者對于每個區(qū)段來記錄在包括了某一數(shù)目的幀的幀時段中依次更新的多條視差數(shù)據(jù)。數(shù)據(jù)提取器111中的數(shù)據(jù)記錄介質(zhì)Illa例如是盤記錄介質(zhì)或半導(dǎo)體儲存器。數(shù)據(jù)提取器111從數(shù)據(jù)記錄介質(zhì)Illa中提取關(guān)于某一節(jié)目的立體圖像數(shù)據(jù),并還提取與該立體圖像數(shù)據(jù)相關(guān)聯(lián)記錄的音頻數(shù)據(jù)和視差時間,以輸出該立體圖像數(shù)據(jù)、音頻數(shù)據(jù)和視差數(shù)據(jù)。視頻編碼器112對從數(shù)據(jù)提取器111供應(yīng)的圖像數(shù)據(jù)執(zhí)行諸如MPEG4-AVC或MPEG2之類的編碼,以獲取編碼后的視頻數(shù)據(jù)。另外,視頻編碼器112利用下游流格式化器 (未示出)來生成包括了該立體圖像數(shù)據(jù)的視頻基本流。視頻數(shù)據(jù)編碼器113生成包括了從數(shù)據(jù)提取器111供應(yīng)的視差數(shù)據(jù)的視差基本流。當(dāng)該視差數(shù)據(jù)是通用視差數(shù)據(jù)時,視差數(shù)據(jù)編碼器113生成視差基本流。當(dāng)該視差數(shù)據(jù)是專用視差數(shù)據(jù)并且對于每個區(qū)段來記錄在包括了某一數(shù)目的幀時段中依次更新的多條視差數(shù)據(jù)時,視差數(shù)據(jù)編碼器113生成視差基本流。換言之,當(dāng)該視差數(shù)據(jù)是用于每個節(jié)目的視差數(shù)據(jù)時,視差數(shù)據(jù)編碼器113不生成視差基本流。在合并到多路復(fù)用器117中的事件信息表(EIT)中的立體描述符 (stereoscopic_descriptor)中描述用于每個節(jié)目的視差數(shù)據(jù),如下面所詳細(xì)描述的。當(dāng)該視差數(shù)據(jù)是專用視差數(shù)據(jù)并且對于每個區(qū)段來記錄在包括了某一數(shù)目的幀的幀時段中共同使用的一條視差數(shù)據(jù)時,視差數(shù)據(jù)編碼器113不生成視差基本流。與關(guān)于每個區(qū)段的字幕數(shù)據(jù)相關(guān)聯(lián)地,將用于每個區(qū)段的視差數(shù)據(jù)合并于在字幕編碼器116中生成的字幕基本流中,如下面所詳細(xì)描述的。音頻編碼器114對從數(shù)據(jù)提取器111供應(yīng)的音頻數(shù)據(jù)執(zhí)行諸如MPEG-2音頻 (Audio)AAC之類的編碼,以生成音頻基本流。字幕發(fā)生器115生成要在圖像上疊加的關(guān)于字幕的數(shù)據(jù)(字幕數(shù)據(jù))。該字幕(subtitle)例如是字幕(caption)。字幕編碼器116生成包括了在字幕發(fā)生器115中生成的字幕數(shù)據(jù)的字幕基本流。多路復(fù)用器117對于在視頻編碼器112、視差數(shù)據(jù)編碼器113、音頻編碼器114、和字幕編碼器116中生成的基本流進行分組化,以進行多路復(fù)用,從而生成傳送流TS。圖3示出了傳送流TS的結(jié)構(gòu)的示例。傳送流TS包括時間劃分中的源自于每個基本流的分組化的分組(所分組化的基本流(PES)分組)。傳送流TS包括間歇事件信息表(EIT),該間歇事件信息表(EIT)用作用于以事件為單位進行管理的服務(wù)信息(Si)。傳送流TS還包括間歇節(jié)目映射表(PMT),該間歇節(jié)目映射表(PMT)用作節(jié)目特定信息(PSI)。PSI指示出在傳送流中包括的每個基本流屬于哪一節(jié)目。標(biāo)識信息的合并多路復(fù)用器117合并指示出是否在傳送流TS中發(fā)送視差數(shù)據(jù)的標(biāo)識信息。在本實施例中,重新定義立體描述符(stereoscopic^descriptor)和視差鏈路描述符 (disparity_link_descriptor),以合并標(biāo)識信息。立體描述符包括指示出是否發(fā)送了用于每個節(jié)目的視差數(shù)據(jù)的標(biāo)識信息。多路復(fù)用器117在傳送流TS中合并立體描述符,作為用于每個節(jié)目的元數(shù)據(jù)。在本實施例中,多路復(fù)用器117在上述EIT中合并立體描述符。立體鏈路描述符包括指示出是否發(fā)送了通用視差數(shù)據(jù)的標(biāo)識信息。立體鏈路描述符還包括指示出是否發(fā)送了專用視差數(shù)據(jù)的標(biāo)識信息。當(dāng)必要時,多路復(fù)用器117在傳送流TS中合并視差鏈路描述符。在本實施例中,多路復(fù)用器117在該EIT中合并視差鏈路描述符。圖4示出了包括視頻基本流、字幕基本流、音頻基本流、和視差基本流的一般傳送流TS的結(jié)構(gòu)的示例。傳送流TS包括源自于每個基本流的分組化的PES分組,如上所述。在圖4的示例中,在傳送流TS中包括用于視頻基本流的PES分組“視頻PES (Video PES) ”。在圖4的示例中,在傳送流TS中還包括用于字幕基本流的PES分組“字幕PES (Subtitle PES)”和用于音頻基本流的PES分組“音頻PES (Audio PES)”。另外,在圖4 的示例中,在傳送流TS中包括用于視差基本流的PES分組“視差數(shù)據(jù)PES (Disparity Data PES) ”。傳送流TS還包括節(jié)目映射表(PMT),該節(jié)目映射表(PMT)用作節(jié)目特定信息 (PSI)。PSI指示出在傳送流TS中包括的每個基本流屬于哪一節(jié)目。傳送流TS還包括事件信息表(EIT),該事件信息表(EIT)用作用于以事件為單位進行管理的服務(wù)信息(Si)。在 EIT中描述了用于每個節(jié)目的元數(shù)據(jù)。在PMT中存在用于描述與整個節(jié)目有關(guān)的信息的節(jié)目描述符。在PMT中存在具有與相應(yīng)基本流有關(guān)的信息的基本環(huán)(loop)。在圖4的示例中存在視頻基本環(huán)、字幕基本環(huán)、 音頻基本環(huán)、和私有基本環(huán)。在用于每個流的每個基本環(huán)中安排諸如分組標(biāo)識符(PID)之類的信息,并且還在基本環(huán)中安排用于描述與每個基本環(huán)有關(guān)的信息的描述符,盡管它在圖4中未示出。用于描述與每個基本環(huán)有關(guān)的信息的描述符例如是流標(biāo)識符描述符(stream_ identifier_descriptor)。盡管在圖4的示例中僅僅在字幕基本環(huán)中示出了流標(biāo)識符描述符,但是流標(biāo)識符描述符也類似地安排在其他基本環(huán)中。流標(biāo)識符描述符是指示出基本流的類型和定位的標(biāo)識符(ID) (C0mp0nent_tag(組件標(biāo)簽))。每個基本環(huán)中的流標(biāo)識符描述符的安排允許了與偏好于被獲取的ID(C0mp0nent_tag)對應(yīng)的分組標(biāo)識符(PID)。在本實施例中,在EIT中合并立體描述符(stereoscopic_descriptor),如圖4所示。當(dāng)必要時,在EIT中安排視差鏈路描述符(disparity_link_descript0r)。立體描述符的描述圖5示出了立體描述符(stereoscopic_descriptor)的語法的示例。圖6示出了立體描述符的語義。參考圖5,“deSCript0r_tag(描述符標(biāo)簽)”是指示出描述符類型的八比特數(shù)據(jù),并且指示出圖5的示例中的立體描述符?!癉escriptorjength (描述符長度)” 是指示出描述符長度(大小)的八比特數(shù)據(jù)。此數(shù)據(jù)指示出在“descriptorjength”之后的字節(jié)數(shù)目,作為描述符的長度。"3D_format_type(3D格式類型),,是指示出3D格式類型的四比特數(shù)據(jù)。例如, “3”指示出3D格式類型是并排(Side by side),“4”指示出3D格式類型是上下(Top and bottom),而“7”指示出3D格式類型是全分辨率立體(Full resolution stereo)。在全分辨率立體格式中,將左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)之一作為基本視圖(base view)圖像數(shù)據(jù)而進行發(fā)送,而將剩余部分作為非基本視像數(shù)據(jù)而進行發(fā)送。"2D_display_view(2D顯示視圖)”是指示出要在2D顯示模式中顯示的視圖(圖像)的一比特數(shù)據(jù)。例如,“0”指示出要顯示的視圖是左眼圖像,而“1”指示出要顯示的視圖是右眼圖像。當(dāng)3D格式是全分辨率立體時,要在2D顯示模式中顯示的視圖(圖像)例如是基本視圖?!癝imulcastcondition(聯(lián)播條件)”是兩比特數(shù)據(jù)。此數(shù)據(jù)指示出當(dāng)3D模式是并排或上下時,該設(shè)備是否處于與對應(yīng)的3D格式中的立體(3D)圖像數(shù)據(jù)同時地發(fā)送2D圖像數(shù)據(jù)的狀態(tài)中。此數(shù)據(jù)基于2D圖像數(shù)據(jù),并且指示出3D圖像數(shù)據(jù)的發(fā)送模式??紤]到當(dāng)在并排格式或上下格式中發(fā)送立體圖像數(shù)據(jù)時、在不支持3D圖像顯示的現(xiàn)有技術(shù)中的 2D接收機中顯示在屏幕上水平或垂直安排的左眼圖像和右眼圖像的圖像的事實,來定義此數(shù)據(jù)。例如,“0”指示出該設(shè)備不處于與3D圖像數(shù)據(jù)同時地發(fā)送2D圖像數(shù)據(jù)的狀態(tài)中。 “1”到“3”指示出該設(shè)備處于與3D圖像數(shù)據(jù)同時地發(fā)送2D圖像數(shù)據(jù)的狀態(tài)中。具體地, “1”指示出該設(shè)備基于2D圖像數(shù)據(jù)并且將與該2D圖像數(shù)據(jù)對應(yīng)的3D圖像數(shù)據(jù)作為相同信道上的另一流而進行發(fā)送。在此情況下,盡管在這里省略了詳細(xì)描述,但是可以例如從組件描述符(C0mp0nent_desCript0r)參考諸如分組標(biāo)識符(PID)之類的詳細(xì)信息?!?”指示出該設(shè)備基于2D圖像數(shù)據(jù)并且將與該2D圖像數(shù)據(jù)對應(yīng)的3D圖像數(shù)據(jù)作為另一信道上的另一節(jié)目(服務(wù))而進行發(fā)送。在此情況下,盡管在這里省略了詳細(xì)描述,但是可以例如從鏈接描述符(linkag^descriptor)參考諸如該另一信道之類的詳細(xì)信息?!?”指示出該設(shè)備基于2D圖像數(shù)據(jù)并且通過諸如網(wǎng)絡(luò)通信之類的其他方法代替廣播來發(fā)送與該2D圖像數(shù)據(jù)對應(yīng)的3D圖像數(shù)據(jù)。在此情況下,盡管在這里省略了詳細(xì)描述,但是可以例如從另一新描述符參考諸如統(tǒng)一資源定位符(URL)之類的詳細(xì)信息?!癉etailecLdisparityjupply (詳細(xì)視差供應(yīng))”是指示出是否供應(yīng)了在視差鏈路描述符(disparityjinldescriptor)中描述的詳細(xì)視差數(shù)據(jù)的一比特數(shù)據(jù)。例如,“1” 指示出供應(yīng)了詳細(xì)視差數(shù)據(jù)。在此情況下,連同立體描述符(stere0sc0pic_descript0r) 一起,在EIT中合并視差鏈路描述符(disparityjinldescriptor)?!?”指示出沒有供應(yīng)詳細(xì)視差數(shù)據(jù)。此數(shù)據(jù)構(gòu)成用于指示出發(fā)送了通用視差數(shù)據(jù)還是專用視差數(shù)據(jù)的標(biāo)識信肩、ο“EVent_diSparity_Supply(事件視差供應(yīng)),,是指示出是否供應(yīng)了用于此節(jié)目 (事件)的一條固定視差數(shù)據(jù)的一比特數(shù)據(jù)。例如,“1”指示出供應(yīng)了用于此節(jié)目(事件) 的一條固定視差數(shù)據(jù),而“0”指示出沒有供應(yīng)用于此節(jié)目(事件)的一條固定視差數(shù)據(jù)。此數(shù)據(jù)構(gòu)成用于指示出是否發(fā)送了用于每個節(jié)目的視差數(shù)據(jù)的標(biāo)識信息。"Select_view_shift (選擇視圖偏移),,是只有當(dāng) “event_disparity_supply,,= 1時才有效并且構(gòu)成了用于指定要偏移的目標(biāo)視圖的信息的兩比特數(shù)據(jù)。此數(shù)據(jù)在要在左眼圖像上疊加的疊加信息(例如,字幕和/或屏上顯示(OSD)圖像)和要在右眼圖像上疊加的疊加信息之中指定了要基于視差數(shù)據(jù)而偏移的疊加信息。下面,將在描述視差流時詳細(xì)地描述此數(shù)據(jù)?!癉isparity_value(視差值),,是只有當(dāng) “event_disparity_supply,,= 1 時才有效并且指示出視差數(shù)據(jù)的值的八比特數(shù)據(jù)。此數(shù)據(jù)取值-128到+127。下面,將在描述視差流時詳細(xì)地描述此數(shù)據(jù)。視差鏈路描述符的描述圖7示出了視差鏈路描述符(disparityjinldescriptor)的語法的示例。圖8 示出了視差鏈路描述符的語義。參考圖7,“deSCript0r_tag”是指示出描述符類型的八比特數(shù)據(jù),并且指示出圖7的示例中的視差鏈路描述符?!癉escriptorjength”是指示出描述符長度(大小)的八比特數(shù)據(jù)。此數(shù)據(jù)指示出在“descriptorjength”之后的字節(jié)數(shù)目, 作為描述符的長度?!癉iSparity_C0mp0nent (視差組件)”指示出用于指示包括了視差數(shù)據(jù)的視差流的組件標(biāo)簽(componenttag)的值。如上所述,可以基于組件標(biāo)簽的值來獲取視差流的分組標(biāo)識(PID)。
“SUbtitle_diSparity_flag(字幕視差標(biāo)志)”是指示出是否設(shè)置了字幕視差數(shù)據(jù)的一比特標(biāo)志數(shù)據(jù)。此標(biāo)志數(shù)據(jù)連同立體描述符中的“detailecLdisparityjupply”中的數(shù)據(jù)一起,構(gòu)成指示出是否發(fā)送了專用視差數(shù)據(jù)的標(biāo)識信息。例如,“1”指示出設(shè)置字幕視差數(shù)據(jù),而“ 0 ”指示出沒有設(shè)置字幕視差數(shù)據(jù)。“General_uSe_diSparity_flag(—般用途視差標(biāo)志)”是指示出通用視差數(shù)據(jù)是否存在的一比特標(biāo)志數(shù)據(jù)。此標(biāo)志數(shù)據(jù)連同立體描述符中的“detailed_diSparity_ supply”中的數(shù)據(jù)一起,構(gòu)成指示出是否發(fā)送了通用視差數(shù)據(jù)的標(biāo)識信息。例如,“1”指示出通用視差數(shù)據(jù)存在,而“0”指示出通用視差數(shù)據(jù)不存在?!癛eserved_f0r_future_use(為了將來使用而保留)”指示出保留區(qū)域。此數(shù)據(jù)將用作指示出如果視差數(shù)據(jù)所用于的廣播數(shù)據(jù)(例如,數(shù)據(jù)廣播)出現(xiàn)、則是否設(shè)置用于對應(yīng)應(yīng)用的視差數(shù)據(jù)的標(biāo)志數(shù)據(jù)區(qū)域。字幕流的描述圖9A示出了字幕的2D顯示的示例,而圖9B示出了字幕的3D顯示的示例。圖9A 示出了如何二維地疊加字幕的示例。在此示例中,將由圓圈環(huán)繞的用于表現(xiàn)數(shù)字“7”的字幕疊加在區(qū)段1上,并且將用于表現(xiàn)字符串“我們可以嗎(Shall we) ? ”的字幕疊加在區(qū)段 2上。在圖9A的示例中,在屏幕上識別出每個字幕。圖9B示出了如何三維地疊加字幕的示例。同樣,在此示例中,將由圓圈環(huán)繞的用于表現(xiàn)數(shù)字“7”的字幕疊加在區(qū)段1上,并且將用于表現(xiàn)字符串“我們可以嗎?,,的字幕疊加在區(qū)段2上。在圖9B的示例中,通過使用視差數(shù)據(jù),能夠在比該圖像的最近位置更近的位置處識別出每個字幕?,F(xiàn)在,將描述以下情況,其中將視差鏈路描述符中的“Subtitle_diSparity_flag” 中的一比特數(shù)據(jù)設(shè)置為指示出設(shè)置了字幕視差數(shù)據(jù)的“1”。在此情況下,以顯示集為單位來設(shè)置關(guān)于每個頁面中的每個區(qū)段的視差數(shù)據(jù)。具體地,例如,對于每個區(qū)段來設(shè)置在包括了用于構(gòu)成顯示集的某一數(shù)目的幀的幀時段中共同使用的一條視差數(shù)據(jù),或者對于每個區(qū)段來設(shè)置在包括了某一數(shù)目的幀的幀時段中依次更新的多條視差數(shù)據(jù)。當(dāng)對于每個區(qū)段來設(shè)置在包括了用于構(gòu)成顯示集的某一數(shù)目的幀的幀時段中共同使用的一條視差數(shù)據(jù)時,在對應(yīng)顯示集期間字幕的深度恒定。圖10示出了在以上情況下顯示集中的每幀中的字幕“字幕(Subtitle)”的深度的示例。當(dāng)對于每個區(qū)段來設(shè)置在包括了用于構(gòu)成顯示集的某一數(shù)目的幀的幀時段中依次更新的多條視差數(shù)據(jù)時,在對應(yīng)顯示集中字幕的深度可以隨著立體圖像中對象的位置的變化而變化。圖11示出了在以上情況下顯示集中的每幀中的字幕“字幕”的深度的示例。圖12示出了字幕數(shù)據(jù)的結(jié)構(gòu)的示例。字幕數(shù)據(jù)包括PES報頭和在PES報頭之后的關(guān)于每個顯示集的數(shù)據(jù)。除了“DDS”、“PCS”、“CDS”、“RCS”、“ODS”和“EDS”之外,關(guān)于每個顯示集的數(shù)據(jù)還包括新近定義的“3DS”。“DDS”是顯示定義片段(Display_Definition_Segment),并且定義了顯示字幕 (字幕)的區(qū)域?!癙CS”是頁面合成片段(Page_C0mp0Siti0n_Segment),并且指示出整個頁面的狀態(tài)、用于構(gòu)成頁面的每個區(qū)段、和關(guān)于每個區(qū)段的位置信息?!癛CS”是區(qū)段合成片段 (Region_Composition_Segment),并且指示出在區(qū)段中安排的每個對象和關(guān)于每個對象的
位置信息。
“CDS”是 CLUT 定義片段(CLUT_Definition_kgment),并且是關(guān)于由“RCS”指定的每個色彩查找表(CLUT)的數(shù)據(jù)?!?DS”是對象數(shù)據(jù)片段(ObjedDataJiegment),并且是關(guān)于每個對象的數(shù)據(jù)。取決于對象的類型來在“0DS”中描述位圖數(shù)據(jù)或文本數(shù)據(jù)?!癊DS” 是顯示集結(jié)束片段,并且指示出顯示集的發(fā)送結(jié)束?!?DS”是3D片段,并且包括與字幕視差數(shù)據(jù)有關(guān)的各種信息。當(dāng)在包括了用于構(gòu)成顯示集的某一數(shù)目的幀的幀時段中共同使用的一條視差數(shù)據(jù)作為視差數(shù)據(jù)而存在時,在 “3DS”中包括視差數(shù)據(jù)。當(dāng)將在包括了用于構(gòu)成顯示集的某一數(shù)目的幀的幀時段中依次更新的多條視差數(shù)據(jù)(視差序列)設(shè)置為視差數(shù)據(jù)時,在“3DS”中包括用于在視差流中標(biāo)識視差序列的標(biāo)識信息。下面,將描述“3DS”的詳細(xì)結(jié)構(gòu)的示例。圖13示出了字幕流(PES) (S卩,數(shù)字視頻廣播(DVB) _Subtitling)的語法。根據(jù)歐洲電信標(biāo)準(zhǔn)協(xié)會(ETSI) (ETSI EN 300 743)來對此語法進行標(biāo)準(zhǔn)化。從PES層來看圖13所示的語法?!癙ES_data_f ield (PES數(shù)據(jù)字段)”包括指示出由“datajdentifer (數(shù)據(jù)標(biāo)識符)”所指示的字幕數(shù)據(jù)的八比特信息?!癙ES_data_field”還包括用于標(biāo)識由“subtitle_ stream_id(字幕流id) ”所指示的字幕流的八比特信息。"PES_data_field"還包括 ‘‘Subtitling_segment (添加字幕片段),,。 “Subtitling_segment,,包括 “sync_byte (同步字節(jié)),,、“segment_type (片段類型),,、 “page_id (頁面 id) ”、“segment_length (片段長度)”和“ segment_data_field (片段數(shù)據(jù)字段)”。"Page_id"是用于標(biāo)識每個頁面的標(biāo)識信息?!gment_type”是指示出片段類型的八比特信息。圖14示出了“segmentjype” 的每個值與片段類型之間的對應(yīng)關(guān)系。例如,“0X10”指示出頁面合成片段(PCS)?!?X11” 指示出區(qū)段合成片段(RCS)。盡管在現(xiàn)有技術(shù)中保留了 “0X40”,但是在本實施例中將它重新定義為指示出3D 片段(3DS)的信息。因為保留了 “0X40”,所以不支持3D顯示的現(xiàn)有技術(shù)中的字幕解碼器會跳過此片段。相反地,由于支持3D顯示的解碼器將“0X40”識別為3DS,所以該解碼器能夠從此片段中讀出與字幕視差數(shù)據(jù)有關(guān)的各種信息。3D片段的描述圖15示出了 3DS (3D_segment (3D片段))的語法的示例。圖16示出了 3DS的語義?!?3D_segment ” 包括 “ sync_byte,,、“ segment_type,,、"page_id” 禾口 “ segment_length,,。 “I^gejd”是用于標(biāo)識每個頁面的標(biāo)識信息?!発gment_type”是指示出片段類型的八比特數(shù)據(jù),并且在此示例中被設(shè)置為指示出305的“0\40”?!癪^1^壯_16叫讓”是指示出片段長度的八比特數(shù)據(jù)。此數(shù)據(jù)指示出在“segmentjength”之后的字節(jié)數(shù)目,作為片段的長度。“3D_segment” 還包括“disparity_static_supply(視差靜態(tài)供應(yīng))”和 "disparity_sequence_supply (視差序列供應(yīng)),,。"disparity_static_supply,,是指示出是否以區(qū)段/顯示集為單位來供應(yīng)固定視差數(shù)據(jù)的值的一比特數(shù)據(jù)。例如,“1”指示出以區(qū)段/顯示集為單位來供應(yīng)固定視差數(shù)據(jù)的值,而“0”指示出不供應(yīng)固定視差數(shù)據(jù)的值。換言之,“diSparity_StatiC_Supply = 1”指示出對于每個區(qū)段存在在包括了用于構(gòu)成顯示集的某一數(shù)目的幀的幀時段中共同使用的一條視差數(shù)據(jù)?!癉iSparity_SeqUenCe_SUpply”是指示出是否以區(qū)段/顯示集為單位來供應(yīng)用于指示視差數(shù)據(jù)的值隨時間的變化的視差序列的一比特數(shù)據(jù)。例如,“1”指示出以區(qū)段/顯示集為單位來供應(yīng)用于指示視差數(shù)據(jù)的值隨時間的變化的視差序列,而“0”指示出不供應(yīng)用于指示視差數(shù)據(jù)的值隨時間的變化的視差序列。換言之,“diSparity_SeqUenC_SUpply =1”指示出對于每個區(qū)段存在在包括了用于構(gòu)成顯示集的某一數(shù)目的幀的幀時段中依次更新的多條視差數(shù)據(jù)(視差序列)。"3D_segment” 還包括"select_view_shift” 禾口 "number_of_regions (區(qū)段數(shù)目)”。“kleCt_View_shift”是用于構(gòu)成指定了要偏移的目標(biāo)視圖的信息的兩比特數(shù)據(jù)。 此數(shù)據(jù)在要在左眼圖像和右眼圖像上疊加的字幕之中指定了要基于視差數(shù)據(jù)而偏移的字
幕。下面,將在描述視差流時詳細(xì)地描述此數(shù)據(jù)。“NUmber_of_regions”指示出區(qū)段的數(shù)目?!?D_segment” 還包括區(qū)段數(shù)目的 “disparity—value” 禾口 “disparity—sequence— id(視差序列id),,中的任一個,或者區(qū)段數(shù)目的“disparityjalue” ^P "disparity, sequencejd”兩者。如果將“diSparity_StatiC_Supply”設(shè)置為指示出供應(yīng)了固定視差數(shù)據(jù)的值的一個值,則包括“Disparityjalue”?!癉isparityjalue”是指示出用于每個區(qū)段 /顯示集的視差數(shù)據(jù)的值的八比特數(shù)據(jù)。下面,將在描述視差流時詳細(xì)地描述此數(shù)據(jù)。如果將“diSparity_Sequence_Supply”設(shè)置為指示出供應(yīng)了視差序列的一個值, 則包括“Disparity_sequence_id”?!癉isparity_sequence_id” 是用于指定視差流上的特定視差序列的標(biāo)識符,該特定視差序列指示出用于每個區(qū)段/顯示集的視差數(shù)據(jù)的值隨時間的變化。視差流的描述現(xiàn)在,將描述視差數(shù)據(jù)在視差流中的嵌入。圖17示出了視差流的語法的示例, 即示出了包括視差數(shù)據(jù)的“PES_data_field”的語法的示例。此語法例如包括“data_ identifier (數(shù)據(jù)標(biāo)識符),,、"disparity_stream_id(視差流 id),,、"disparity_data_ set (視差數(shù)據(jù)集)”、和 “end_of_PES_data_f ield_marker (PES 數(shù)據(jù)字段結(jié)束標(biāo)記)”。圖 18 示出了 "disparity_data_set,,的語法的示例。圖 19 示出了 "disparity_ data_set” 的主要語義。該語法例如包括 “sync_byte”、“disparity_sequence_id”、 "select_view_shift “、” frame_count (中貞計數(shù))”、禾口 "disparity_value,,。"Disparity— sequencejd”指示出視差序列的標(biāo)識符?!?。elect_VieW_Shift”是指定了要偏移的目標(biāo)視圖的兩比特信息?!leCt_VieW_ shift ”在要在左眼圖像上疊加的服務(wù)組件和要在右眼圖像上疊加的服務(wù)組件之中指定了要基于視差數(shù)據(jù)而偏移的服務(wù)組件。例如,保留了 “SeleCt_View_Shift = 00”。服務(wù)組件例如是字幕信息或者添加隱藏字幕(closed-captioning)信息。"Select_view_shift = 01”指示出僅僅將要在左眼圖像上疊加的服務(wù)組件(例如,字幕)水平地偏移由視差數(shù)據(jù)給出的數(shù)量。當(dāng)視差數(shù)據(jù)具有正值時,向右偏移要在左眼圖像上疊加的服務(wù)組件。當(dāng)視差數(shù)據(jù)具有負(fù)值時,向左偏移要在左眼圖像上疊加的服務(wù)組件。"Select_view_shift = 10”指示出僅僅將要在右眼圖像上疊加的服務(wù)組件(例如,字幕)水平地偏移由視差數(shù)據(jù)給出的數(shù)量。當(dāng)視差數(shù)據(jù)具有正值時,向右偏移要在右眼圖像上疊加的服務(wù)組件。當(dāng)視差數(shù)據(jù)具有負(fù)值時,向左偏移要在右眼圖像上疊加的服務(wù)組件。
"Select_view_shift = 11”指示出在相反方向中水平地偏移要在左眼圖像上疊加的服務(wù)組件和要在右眼圖像上疊加的服務(wù)組件。當(dāng)視差數(shù)據(jù)具有正偶數(shù)值時,將要在左眼圖像上疊加的服務(wù)組件向右偏移由視差數(shù)據(jù)/2給出的數(shù)量,而當(dāng)視差數(shù)據(jù)具有負(fù)偶數(shù)值時,將要在左眼圖像上疊加的服務(wù)組件向左偏移由視差數(shù)據(jù)/2給出的數(shù)量。當(dāng)視差數(shù)據(jù)具有正偶數(shù)值時,將要在右眼圖像上疊加的服務(wù)組件向左偏移由視差數(shù)據(jù)/2給出的數(shù)量, 而當(dāng)視差數(shù)據(jù)具有負(fù)偶數(shù)值時,將要在右眼圖像上疊加的服務(wù)組件向右偏移由視差數(shù)據(jù)/2 給出的數(shù)量。當(dāng)視差數(shù)據(jù)具有正奇數(shù)值時,將要在左眼圖像上疊加的服務(wù)組件向右偏移由視差數(shù)據(jù)+1/2給出的數(shù)量,而當(dāng)視差數(shù)據(jù)具有負(fù)奇數(shù)值時,將要在左眼圖像上疊加的服務(wù)組件向左偏移由視差數(shù)據(jù)+1/2給出的數(shù)量。當(dāng)視差數(shù)據(jù)具有正奇數(shù)值時,將要在右眼圖像上疊加的服務(wù)組件向左偏移由視差數(shù)據(jù)-1/2給出的數(shù)量,而當(dāng)視差數(shù)據(jù)具有負(fù)奇數(shù)值時,將要在右眼圖像上疊加的服務(wù)組件向右偏移由視差數(shù)據(jù)-1/2給出的數(shù)量?!癋ramejount”指示出在顯示集中包括的幀的數(shù)目?!癉isparityjalue”是指示出視差數(shù)據(jù)的值的八比特數(shù)據(jù),并且取值到+127。當(dāng)此數(shù)據(jù)具有正值時,3D顯示的深度比屏幕更遠。當(dāng)此數(shù)據(jù)具有負(fù)值時,3D顯示的深度比屏幕更近。在由“disparity_sequence_id,,標(biāo)識的“disparity_data_set,,中包括由“frame— count,,指示的中貞數(shù)目的"disparity_value"的值。換言之,由"disparity_sequence_id" 指示的視差序列是由“framejount”所指示的幀數(shù)目的“disparityjalue”的值構(gòu)成的視
差序列。發(fā)送數(shù)據(jù)生成單元的操作現(xiàn)在,將簡要地描述圖2所示的發(fā)送數(shù)據(jù)生成單元110的操作。向視頻編碼器112 供應(yīng)從數(shù)據(jù)提取器111輸出的關(guān)于某一節(jié)目的立體(3D)圖像數(shù)據(jù)。視頻編碼器112對該圖像數(shù)據(jù)執(zhí)行諸如MPEG4-AVC或MPEG2之類的編碼,以生成包括了編碼后的視頻數(shù)據(jù)的視頻基本流。向多路復(fù)用器117供應(yīng)該視頻基本流。當(dāng)按照以上方式而從數(shù)據(jù)提取器111輸出關(guān)于某一節(jié)目的立體圖像數(shù)據(jù)并且在數(shù)據(jù)記錄介質(zhì)Illa上記錄與該立體圖像數(shù)據(jù)對應(yīng)的視差數(shù)據(jù)時,還從數(shù)據(jù)提取器111輸出該視差數(shù)據(jù)。例如,該視差數(shù)據(jù)是用于每個節(jié)目的視差數(shù)據(jù)、通用視差數(shù)據(jù)、或?qū)S靡暡顢?shù)據(jù)(本實施例中的字幕視差數(shù)據(jù)),如上所述。關(guān)于每個頁面中的每個區(qū)段的視差數(shù)據(jù)與關(guān)于某一節(jié)目的立體圖像數(shù)據(jù)相關(guān)聯(lián)地、以顯示集為單位而存在于專用視差數(shù)據(jù)中。對于每個區(qū)段來設(shè)置在包括了用于構(gòu)成顯示集的某一數(shù)目的幀的幀時段中共同使用的一條視差數(shù)據(jù),或者對于每個區(qū)段來設(shè)置在包括了某一數(shù)目的幀的幀時段中依次更新的多條視差數(shù)據(jù)。每個視差數(shù)據(jù)可以單獨存在或者可以被復(fù)制。當(dāng)從數(shù)據(jù)提取器111輸出的視差數(shù)據(jù)是用于每個節(jié)目的視差數(shù)據(jù)時,向多路復(fù)用器117供應(yīng)該視差數(shù)據(jù)。當(dāng)從數(shù)據(jù)提取器111輸出的視差數(shù)據(jù)是通用視差數(shù)據(jù)時,向視差數(shù)據(jù)編碼器113供應(yīng)該視差數(shù)據(jù)。當(dāng)從數(shù)據(jù)提取器111輸出的視差數(shù)據(jù)是專用視差數(shù)據(jù)并且對于每個區(qū)段來設(shè)置在包括了某一數(shù)目的幀的幀時段中共同使用的一條視差數(shù)據(jù)時,向字幕編碼器116供應(yīng)該視差數(shù)據(jù)。當(dāng)從數(shù)據(jù)提取器111輸出的視差數(shù)據(jù)是專用視差數(shù)據(jù)并且對于每個區(qū)段來設(shè)置在包括了某一數(shù)目的幀的幀時段中依次更新的多條視差數(shù)據(jù)時,向視差數(shù)據(jù)編碼器113供應(yīng)該視差數(shù)據(jù)。視差數(shù)據(jù)編碼器113對該視差數(shù)據(jù)執(zhí)行某一編碼,以生成包括了編碼后的數(shù)據(jù)的視差基本流(參考圖17到19)。向多路復(fù)用器117供應(yīng)該視差基本流。當(dāng)通用視差數(shù)據(jù)和專用視差數(shù)據(jù)(在包括了某一數(shù)目的幀的幀時段中依次更新的多條視差數(shù)據(jù))兩者都存在時,例如可以基于“disparityjequencejd”來區(qū)分各條視差數(shù)據(jù)。當(dāng)從數(shù)據(jù)提取器111輸出關(guān)于某一節(jié)目的立體圖像數(shù)據(jù)時,還從數(shù)據(jù)提取器111 輸出與該圖像數(shù)據(jù)對應(yīng)的音頻數(shù)據(jù)。向音頻編碼器114供應(yīng)該音頻數(shù)據(jù)。音頻編碼器114 對該音頻數(shù)據(jù)執(zhí)行諸如MPEG-2音頻AAC之類的編碼,以生成包括了編碼后的音頻數(shù)據(jù)的音頻基本流。向多路復(fù)用器117供應(yīng)該音頻基本流。字幕發(fā)生器115對于從數(shù)據(jù)提取器111輸出的圖像數(shù)據(jù)來生成要在圖像(視圖) 上疊加的字幕數(shù)據(jù)。向字幕編碼器116供應(yīng)該字幕數(shù)據(jù)。字幕編碼器116對該字幕數(shù)據(jù)執(zhí)行某一編碼,以生成包括了編碼后的數(shù)據(jù)的字幕基本流。向多路復(fù)用器117供應(yīng)該字幕基本流。在字幕數(shù)據(jù)中包括具有與字幕視差數(shù)據(jù)有關(guān)的各種信息的3D片段(3此)(參考圖15和16),作為關(guān)于每個顯示集的數(shù)據(jù)。字幕編碼器116在3D片段中合并字幕視差數(shù)據(jù)(每個區(qū)段中的在包括了某一數(shù)目的幀的幀時段中共同使用的一條視差數(shù)據(jù)),作為 “disparityjalue”中的信息。在此情況下,例如將“diSparity_StatiC_Supply”的值設(shè)置為指示出供應(yīng)了用于每個區(qū)段/顯示集的固定視差數(shù)據(jù)的一個值。當(dāng)按照以上方式而從數(shù)據(jù)提取器111輸出專用視差數(shù)據(jù)(在包括了某一數(shù)目的幀的幀時段中依次更新的多條視差數(shù)據(jù))時,例如將“diSparity_Sequence_Supply”的值設(shè)置為指示出以區(qū)段/顯示集為單位來供應(yīng)用于指示視差數(shù)據(jù)的值隨時間的變化的視差序列的一個值。“Disparityjequencejd”是用于指定視差流上的特定視差序列的標(biāo)識符,該特定視差序列指示出每個區(qū)段/顯示集的視差數(shù)據(jù)的值隨時間的變化。多路復(fù)用器117對從相應(yīng)編碼器供應(yīng)的基本流進行分組化,以用于多路復(fù)用,從而生成傳送流TS。在該傳送流TS中合并立體描述符(stereoscopitdescriptor)(參考圖 5和6)。當(dāng)必要時,還在該傳送流TS中合并視差鏈路描述符(disparity_link_descript0r) (參考圖7和8)。在EIT中合并這些描述符(參考圖4)。當(dāng)從數(shù)據(jù)提取器111輸出用于每個節(jié)目的視差數(shù)據(jù)時,例如將立體描述符中的 "event_disparity_supply"的值設(shè)置為指示出供應(yīng)了用于每個節(jié)目的視差數(shù)據(jù)的一個值。 在立體描述符中合并用于每個節(jié)目的視差數(shù)據(jù),作為“disparity—value”中的信息。當(dāng)從數(shù)據(jù)提取器111輸出通用視差數(shù)據(jù)和字幕視差數(shù)據(jù)中的至少一個時,例如將立體描述符中的“detailecLdisparityjupply”的值設(shè)置為一。在此情況下,在傳送流TS中合并視差鏈路描述符(disparity_link_descriptor)。當(dāng)從數(shù)據(jù)提取器111輸出通用視差數(shù)據(jù)時,例如將視差鏈路描述符中的 “general_USe_diSparity_flag”中的標(biāo)志數(shù)據(jù)設(shè)置為指示出供應(yīng)了通用視差數(shù)據(jù)的一個值。當(dāng)從數(shù)據(jù)提取器111輸出字幕視差數(shù)據(jù)時,例如將視差鏈路描述符中的“subtitle_ disparity_flag”中的標(biāo)志數(shù)據(jù)設(shè)置為指示出供應(yīng)了字幕視差數(shù)據(jù)的一個值。接收機設(shè)備的示例配置
18
圖20是示出了接收機設(shè)備200的配置的示例的框圖。參考圖20,接收機設(shè)備200 包括天線端子201、數(shù)字調(diào)諧器202、解多路復(fù)用器203、視頻解碼器204、3D信號處理器 205。接收機設(shè)備200還包括字幕解碼器206、字幕發(fā)生器207、視差數(shù)據(jù)解碼器208、元數(shù)據(jù)處理器209、視差數(shù)據(jù)輸出單元210、和OSD數(shù)據(jù)發(fā)生器211。接收機設(shè)備200還包括疊加器單元212、顯示單元213、音頻解碼器214、音頻處理器電路215、音頻放大器電路216、和揚聲器 217。天線端子201是通過其來將利用接收天線(未示出)接收到的電視廣播信號輸入到接收機設(shè)備200中的端子。數(shù)字調(diào)諧器202處理通過天線端子201輸入的電視廣播信號, 以輸出與由用戶選擇的頻道對應(yīng)的某一傳送流(比特流數(shù)據(jù))TS(參考圖幻。解多路復(fù)用器203從由數(shù)字調(diào)諧器202供應(yīng)的傳送流TS中提取視頻基本流、音頻基本流、字幕基本流、 和視差基本流。解多路復(fù)用器203還從該傳送流TS中提取包括了 EIT和PMT的表格。視頻解碼器204執(zhí)行與如上所述的、發(fā)送數(shù)據(jù)生成單元110中的視頻編碼器112 中的處理相反的處理。具體地,視頻解碼器204對在由解多路復(fù)用器203提取的視頻基本流中包括的編碼圖像數(shù)據(jù)執(zhí)行解碼,以獲取解碼后的立體圖像數(shù)據(jù)。3D信號處理器205對在視頻解碼器204中獲取的立體圖像數(shù)據(jù)執(zhí)行與3D格式對應(yīng)的處理,以生成左眼圖像數(shù)據(jù) SL和右眼圖像數(shù)據(jù)SR。字幕解碼器206執(zhí)行與如上所述的、發(fā)送數(shù)據(jù)生成單元110中的字幕編碼器116 中的處理相反的處理。具體地,字幕解碼器206對在由解多路復(fù)用器203提取的字幕基本流中包括的編碼字幕數(shù)據(jù)執(zhí)行解碼,以獲取解碼后的字幕數(shù)據(jù)。字幕解碼器206獲取與在3D片段(3此)中包括的字幕視差數(shù)據(jù)有關(guān)的各種信息。 例如,字幕解碼器206從3D片段中獲取指示出是否供應(yīng)了用于每個區(qū)段/顯示集的固定視差數(shù)據(jù)的“diSparity_StatiC_Supply”中的信息。例如,字幕解碼器206從3D片段中獲取指示出是否供應(yīng)了用于每個區(qū)段/顯示集的視差序列的“diSparity_SeqUenCe_SUpply”中的信息。當(dāng)發(fā)送專用視差數(shù)據(jù)(用于每個區(qū)段的在包括了某一數(shù)目的幀的幀時段中共同使用的一條視差數(shù)據(jù))時,字幕解碼器206還獲取專用視差數(shù)據(jù),這是因為在3D片段中包括專用視差數(shù)據(jù)。字幕發(fā)生器207基于由字幕解碼器206獲取的字幕數(shù)據(jù)來生成要在圖像上疊加的字幕顯示數(shù)據(jù)。視差數(shù)據(jù)解碼器208執(zhí)行與如上所述的、發(fā)送數(shù)據(jù)生成單元110中的視差數(shù)據(jù)編碼器113中的處理相反的處理。具體地,視差數(shù)據(jù)解碼器208對在由解多路復(fù)用器203提取的視差基本流中包括的編碼視差數(shù)據(jù)執(zhí)行解碼,以獲取解碼后的視差數(shù)據(jù)。只有當(dāng)發(fā)送了通用視差數(shù)據(jù)和專用視差數(shù)據(jù)(在包括了某一數(shù)目的幀的幀時段中依次更新的多條視差數(shù)據(jù))中的任一個、或者其兩者時,視差數(shù)據(jù)解碼器208才獲取視差數(shù)據(jù)。元數(shù)據(jù)處理器209處理在從解多路復(fù)用器203供應(yīng)的EIT中合并的立體描述符 (參考圖5和6)和視差鏈路描述符(參考圖7和8),以獲取與視差數(shù)據(jù)有關(guān)的各種信息。 例如,元數(shù)據(jù)處理器209從立體描述符中獲取指示出是否發(fā)送了用于每個節(jié)目的視差數(shù)據(jù)的“event_diSparity_SUpply”中的信息。元數(shù)據(jù)處理器209從立體描述符中獲取指示出發(fā)送了詳細(xì)視差數(shù)據(jù)的“detailecLdisparityjupply”中的信息。當(dāng)發(fā)送了用于每個節(jié)目的標(biāo)識信息時,元數(shù)據(jù)處理器209還獲取用于每個節(jié)目的標(biāo)識信息,這是因為在立體描述符中包括用于每個節(jié)目的標(biāo)識信息。另外,例如,元數(shù)據(jù)處理器209從視差鏈路描述符中獲取指示出是否發(fā)送了通用視差數(shù)據(jù)的“general_Use_disparity_flag”中的信息。元數(shù)據(jù)處理器209從視差鏈路描述符中獲取指示出是否發(fā)送了字幕視差數(shù)據(jù)的“sUbtitle_diSparity_flag”中的信息。元數(shù)據(jù)處理器209從視差鏈路描述符中獲取“diSparity_C0mp0nent”中的信息。“disparity_ component”中的信息指示出用于指示包括了視差數(shù)據(jù)的視差流的組件標(biāo)簽(component tag)的值??梢曰诮M件標(biāo)簽的值來獲取視差流的分組標(biāo)識(PID)。視差數(shù)據(jù)輸出單元210基于來自視差數(shù)據(jù)解碼器208的視差數(shù)據(jù)、來自字幕解碼器206的與視差數(shù)據(jù)有關(guān)的各種信息、和來自元數(shù)據(jù)處理器209的與視差數(shù)據(jù)有關(guān)的各種信息來確定要使用的視差數(shù)據(jù),以輸出所確定的視差數(shù)據(jù)。圖21是示出了當(dāng)疊加信息是OSD圖像時、由視差數(shù)據(jù)輸出單元210執(zhí)行的處理的示例的流程圖。參考圖21,在步驟STl中,視差數(shù)據(jù)輸出單元210開始該處理。在步驟ST2 中,視差數(shù)據(jù)輸出單元210參考立體描述符中“detailecLdisparityjupply”中的信息,以確定是否發(fā)送了詳細(xì)視差數(shù)據(jù)。如果“detailecLdisparityjupply = 1”并且視差數(shù)據(jù)輸出單元210確定出發(fā)送了詳細(xì)視差數(shù)據(jù),則該處理轉(zhuǎn)到步驟ST3。在步驟ST3中,視差數(shù)據(jù)輸出單元210參考視差鏈路描述符中“general_Use_disparity_flag”中的信息,以確定是否發(fā)送了通用視差數(shù)據(jù)。如果“general_uSe_diSparity_flag = 1”并且視差數(shù)據(jù)輸出單元210確定出發(fā)送了通用視差數(shù)據(jù),則該處理轉(zhuǎn)到步驟ST4。在步驟ST4中,視差數(shù)據(jù)輸出單元210將在視差數(shù)據(jù)解碼器208中從視差流中獲取的通用視差數(shù)據(jù)確定為要使用的視差數(shù)據(jù),并且輸出所確定的視差數(shù)據(jù)。如果在步驟ST2中“detailecLdisparityjupply = 0”并且視差數(shù)據(jù)輸出單元 210確定出沒有發(fā)送詳細(xì)視差數(shù)據(jù),則該處理轉(zhuǎn)到步驟ST5。如果在步驟ST3中“general use_disparity_flag = 0”并且視差數(shù)據(jù)輸出單元210確定出沒有發(fā)送通用視差數(shù)據(jù),則該處理轉(zhuǎn)到步驟ST5。在步驟ST5中,視差數(shù)據(jù)輸出單元210參考立體描述符中“event_ disparity—supply”中的信息,以確定是否發(fā)送了用于每個節(jié)目的視差數(shù)據(jù)。如果“event_diSparity_Supply = 1”并且視差數(shù)據(jù)輸出單元210確定出發(fā)送了用于每個節(jié)目的視差數(shù)據(jù),則該處理轉(zhuǎn)到步驟ST6。在步驟ST6中,視差數(shù)據(jù)輸出單元210 將在元數(shù)據(jù)處理器209中從立體描述符中獲取的用于每個節(jié)目的視差數(shù)據(jù)(disparity, value)確定為要使用的視差數(shù)據(jù),并且輸出所確定的視差數(shù)據(jù)。如果“eVent_disparity_ supply = 0”并且視差數(shù)據(jù)輸出單元210確定出沒有發(fā)送用于每個節(jié)目的視差數(shù)據(jù),則該處理轉(zhuǎn)到步驟ST7。在步驟ST7中,視差數(shù)據(jù)輸出單元210將在接收機設(shè)備200中事先準(zhǔn)備的視差數(shù)據(jù)確定為要使用的視差數(shù)據(jù),并且輸出所確定的視差數(shù)據(jù)。圖22是示出了當(dāng)疊加信息是字幕時、由視差數(shù)據(jù)輸出單元210執(zhí)行的處理的示例的流程圖。參考圖22,在步驟STll中,視差數(shù)據(jù)輸出單元210開始該處理。在步驟ST12 中,視差數(shù)據(jù)輸出單元210參考立體描述符中“detailecLdisparityjupply”中的信息,以確定是否發(fā)送了詳細(xì)視差數(shù)據(jù)。如果“detailecLdisparityjupply = 1”并且視差數(shù)據(jù)輸出單元210確定出發(fā)送了詳細(xì)視差數(shù)據(jù),則該處理轉(zhuǎn)到步驟ST13。在步驟ST13中,視差數(shù)據(jù)輸出單元210參考視差鏈路描述符中“sUbtitle_diSparity_flag”中的信息,以確定是否發(fā)送了字幕視差數(shù)據(jù)。 如果“SUbtitle_diSparity_flag = 1”并且視差數(shù)據(jù)輸出單元210確定出發(fā)送了字幕視差數(shù)據(jù),則該處理轉(zhuǎn)到步驟ST14。在步驟ST14中,視差數(shù)據(jù)輸出單元210參考從3D片段(3此)中獲取的 "disparity_static_supply,,禾口"disparity_sequence_supply,,中的信息,以進行石角定。如果“disparityjequencejupply = 1 ”并且視差數(shù)據(jù)輸出單元210確定出供應(yīng)了用于每個區(qū)段/顯示集的視差序列,則該處理轉(zhuǎn)到步驟ST15。在步驟ST15中,視差數(shù)據(jù)輸出單元210 將在視差數(shù)據(jù)解碼器208中從視差流中獲取的用于每個區(qū)段/顯示集的視差序列確定為要使用的視差數(shù)據(jù),并且輸出所確定的視差數(shù)據(jù)。如果“disparity_static_supply = 1,,且“disparity_sequence_supply = 0” 并且視差數(shù)據(jù)輸出單元210確定出僅僅供應(yīng)了用于每個區(qū)段/顯示集的固定視差數(shù)據(jù),則該處理轉(zhuǎn)到步驟ST16。在步驟ST16中,視差數(shù)據(jù)輸出單元210將在字幕解碼器206中獲取的用于每個區(qū)段/顯示集的固定視差數(shù)據(jù)確定為要使用的視差數(shù)據(jù),并且輸出所確定的視差數(shù)據(jù)。如果在步驟ST12中“detailed_disparity_supply = 0”并且視差數(shù)據(jù)輸出單元210確定出沒有發(fā)送詳細(xì)視差數(shù)據(jù),則該處理轉(zhuǎn)到步驟ST17。如果在步驟ST13中 "subtitle_disparity_flag = 0”并且視差數(shù)據(jù)輸出單元210確定出沒有發(fā)送字幕視差數(shù)據(jù),則該處理轉(zhuǎn)到步驟ST17。如果在步驟ST14中"disparity_static_supply = O”且 "disparity_sequence_supply = 0”并且視差數(shù)據(jù)輸出單元210確定出既沒有發(fā)送用于每個區(qū)段/顯示集的固定視差數(shù)據(jù)、也沒有發(fā)送用于每個區(qū)段/顯示集的視差序列,則該處理轉(zhuǎn)到步驟ST17。在步驟ST17中,視差數(shù)據(jù)輸出單元210參考立體描述符中“event_diSparity_ supply”中的信息,以確定是否發(fā)送了用于每個節(jié)目的視差數(shù)據(jù)。如果“eVent_disparity_ supply = 1”并且視差數(shù)據(jù)輸出單元210確定出發(fā)送了用于每個節(jié)目的視差數(shù)據(jù),則該處理轉(zhuǎn)到步驟ST18。在步驟ST18中,視差數(shù)據(jù)輸出單元210將在元數(shù)據(jù)處理器209中從立體描述符中獲取的用于每個節(jié)目的視差數(shù)據(jù)(disparity—value)確定為要使用的視差數(shù)據(jù),并且輸出所確定的視差數(shù)據(jù)。如果在步驟ST17中“event_diSparity_SUpply = 0”并且視差數(shù)據(jù)輸出單元210確定出沒有供應(yīng)用于每個節(jié)目的視差數(shù)據(jù),則該處理轉(zhuǎn)到步驟ST19。在步驟ST19中,視差數(shù)據(jù)輸出單元210將在接收機設(shè)備200中事先準(zhǔn)備的視差數(shù)據(jù)確定為要使用的視差數(shù)據(jù),并且輸出所確定的視差數(shù)據(jù)。返回參考圖20,疊加器單元212將字幕顯示數(shù)據(jù)和OSD數(shù)據(jù)疊加于在3D信號處理器205中獲取的左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)上。在此情況下,疊加器單元212基于從視差數(shù)據(jù)輸出單元210供應(yīng)的視差數(shù)據(jù)來對在左眼圖像和右眼圖像上顯示的疊加信息(字幕和/或OSD圖像)執(zhí)行偏移處理,以添加視差。圖23示出了疊加器單元212的配置的示例。參考圖23,疊加器單元212包括L視頻平面301、R視頻平面302、切換單元303、字幕平面304、OSD平面305、偏移單元306、偏移單元307和疊加器308。L視頻平面301臨時地存儲從3D信號處理器205供應(yīng)的左眼圖像數(shù)據(jù)。R視頻平面302臨時地存儲從3D信號處理器205供應(yīng)的右眼圖像數(shù)據(jù)。切換單元303交替地從L視頻平面301中提取圖像數(shù)據(jù)和從R視頻平面302中提取圖像數(shù)據(jù),并且輸出所提取的圖像數(shù)據(jù)。換言之,切換單元303交替地輸出左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)。字幕平面304臨時地存儲在字幕發(fā)生器207中生成的字幕顯示數(shù)據(jù)。偏移單元 306從字幕平面304中提取字幕顯示數(shù)據(jù),并且基于從視差數(shù)據(jù)輸出單元210供應(yīng)的視差數(shù)據(jù)來對字幕顯示數(shù)據(jù)執(zhí)行偏移處理。此處理對要在左眼圖像和右眼圖像上疊加的字幕給出了水平偏移,以添加視差。偏移單元306與來自切換單元303的左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)的輸出同步地輸出要在左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)上疊加的字幕顯示數(shù)據(jù)。在此情況下,當(dāng)從視差數(shù)據(jù)輸出單元210供應(yīng)的視差數(shù)據(jù)是用于每個顯示集的視差序列時,將對于用于每個顯示集的每個幀依次變化的視差添加到每個區(qū)段。當(dāng)從視差數(shù)據(jù)輸出單元210供應(yīng)的視差數(shù)據(jù)是用于每個顯示集的固定視差數(shù)據(jù)時,將對于每個顯示集固定的視差添加到每個區(qū)段。當(dāng)從視差數(shù)據(jù)輸出單元210供應(yīng)的視差數(shù)據(jù)是用于每個節(jié)目的視差數(shù)據(jù)時,將對于每個節(jié)目固定的視差添加到每個區(qū)段。當(dāng)從視差數(shù)據(jù)輸出單元210供應(yīng)的視差數(shù)據(jù)是在接收機設(shè)備200中事先準(zhǔn)備的視差數(shù)據(jù)時,添加根據(jù)該視差數(shù)據(jù)產(chǎn)生的視差。OSD平面305臨時地存儲在OSD數(shù)據(jù)發(fā)生器211中生成的OSD數(shù)據(jù)。偏移單元307 從OSD平面305中提取OSD數(shù)據(jù),并且基于從視差數(shù)據(jù)輸出單元210供應(yīng)的視差數(shù)據(jù)來對 OSD數(shù)據(jù)執(zhí)行偏移處理。此處理對要在左眼圖像和右眼圖像上疊加的OSD圖像給出了水平偏移,以添加視差。偏移單元307與來自切換單元303的左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)的輸出同步地輸出要在左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)上疊加的OSD數(shù)據(jù)。例如,當(dāng)從視差數(shù)據(jù)輸出單元210供應(yīng)的視差數(shù)據(jù)是通用視差數(shù)據(jù)時,基于該視差數(shù)據(jù)來添加與顯示每個OSD圖像的位置對應(yīng)的視差。當(dāng)從視差數(shù)據(jù)輸出單元210供應(yīng)的視差數(shù)據(jù)是用于每個節(jié)目的視差數(shù)據(jù)時,將對于每個節(jié)目固定的視差添加到每個OSD圖像。當(dāng)從視差數(shù)據(jù)輸出單元210供應(yīng)的視差數(shù)據(jù)是在接收機設(shè)備200中事先準(zhǔn)備的視差數(shù)據(jù)時,將根據(jù)該視差數(shù)據(jù)產(chǎn)生的視差添加到每個OSD圖像。疊加器308將從偏移單元306供應(yīng)的字幕顯示數(shù)據(jù)和從偏移單元307供應(yīng)的OSD 數(shù)據(jù)疊加在從切換單元303供應(yīng)的左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)上。疊加器308交替地輸出其上疊加有字幕和/或OSD圖像的左眼圖像數(shù)據(jù)SL'和其上疊加有字幕和/或OSD圖像的右眼圖像數(shù)據(jù)SR'。返回參考圖20,顯示單元213例如是液晶顯示面板或等離子顯示器。顯示單元213 交替地顯示從疊加器單元212供應(yīng)的、根據(jù)左眼圖像數(shù)據(jù)SL'生成的圖像和根據(jù)右眼圖像數(shù)據(jù)SR'生成的圖像。例如,由他/她左眼和右眼上佩戴有快門眼鏡(未示出)的觀眾來感知在顯示單元213中這樣顯示的左眼圖像和右眼圖像,以呈現(xiàn)立體圖像。音頻解碼器214執(zhí)行與如上所述的、發(fā)送數(shù)據(jù)生成單元110中的音頻編碼器114 中的處理相反的處理。具體地,音頻解碼器214對在于解多路復(fù)用器203中提取的音頻基本流中包括的編碼音頻數(shù)據(jù)執(zhí)行解碼,以獲取解碼后的音頻數(shù)據(jù)。音頻處理器電路215對由音頻解碼器214獲取的音頻數(shù)據(jù)執(zhí)行諸如數(shù)模(D/A)轉(zhuǎn)換之類的必要處理。音頻放大器電路216對從音頻處理器電路215供應(yīng)的音頻信號進行放大,并向揚聲器217供應(yīng)放大后的音頻信號。接收機設(shè)備的操作
現(xiàn)在,將簡要地描述圖20所示的接收機設(shè)備200的操作。向數(shù)字調(diào)諧器202供應(yīng)通過天線端子201輸入的電視廣播信號。數(shù)字調(diào)諧器202處理該電視廣播信號,以輸出與由用戶選擇的頻道對應(yīng)的傳送流TS。向解多路復(fù)用器203供應(yīng)該傳送流TS。解多路復(fù)用器203從該傳送流TS中提取視頻基本流、字幕基本流、視差基本流、和音頻基本流。解多路復(fù)用器203還從該傳送流TS中提取包括了 EIT和PIT的表格。向視頻解碼器204供應(yīng)在解多路復(fù)用器203中提取的視頻基本流。視頻解碼器204 對在該視頻基本流中包括的編碼圖像數(shù)據(jù)執(zhí)行解碼,以獲取解碼后的立體圖像數(shù)據(jù)。向3D 信號處理器205供應(yīng)該立體圖像數(shù)據(jù)。3D信號處理器205對該立體圖像數(shù)據(jù)執(zhí)行與3D格式對應(yīng)的處理,以生成左眼圖像數(shù)據(jù)SL和右眼圖像數(shù)據(jù)SR。向疊加器單元212供應(yīng)該左眼圖像數(shù)據(jù)SL和該右眼圖像數(shù)據(jù)SR。向字幕解碼器206供應(yīng)在解多路復(fù)用器203中提取的字幕基本流。字幕解碼器 206對在該字幕基本流中包括的編碼字幕數(shù)據(jù)執(zhí)行解碼,以獲取解碼后的字幕數(shù)據(jù)。向字幕發(fā)生器207供應(yīng)該字幕數(shù)據(jù)。字幕發(fā)生器207基于該字幕數(shù)據(jù)來生成要在圖像上疊加的字幕顯示數(shù)據(jù)。向疊加器單元212供應(yīng)該字幕顯示數(shù)據(jù)。另外,字幕解碼器206獲取與在3D片段(3此)中包括的字幕視差數(shù)據(jù)有關(guān)的各種信息。向視差數(shù)據(jù)輸出單元210供應(yīng)此信息。例如,字幕解碼器206從3D片段中獲取指示出是否供應(yīng)了用于每個區(qū)段/顯示集的固定視差數(shù)據(jù)的“diSparity_StatiC_SUpply”中的信息。字幕解碼器206從3D片段中獲取“disparityjequencejupply”中的信息。此信息指示出是否供應(yīng)了用于每個區(qū)段/顯示集的視差序列,如上所述。向視差數(shù)據(jù)解碼器208供應(yīng)在解多路復(fù)用器203中提取的視差基本流。視差數(shù)據(jù)解碼器208對在該視差基本流中包括的編碼視差數(shù)據(jù)執(zhí)行解碼,以獲取解碼后的視差數(shù)據(jù)。只有當(dāng)發(fā)送了通用視差數(shù)據(jù)和專用視差數(shù)據(jù)(在包括了某一數(shù)目的幀的幀時段中依次更新的多條視差數(shù)據(jù))中的任一個、或者其兩者時,視差數(shù)據(jù)解碼器208才獲取視差數(shù)據(jù)。 向視差數(shù)據(jù)輸出單元210供應(yīng)該視差數(shù)據(jù)。元數(shù)據(jù)處理器209處理在從解多路復(fù)用器203供應(yīng)的EIT中合并的立體描述符 (參考圖5和6)和視差鏈路描述符(參考圖7和8),以獲取與視差數(shù)據(jù)有關(guān)的各種信息。 例如,元數(shù)據(jù)處理器209從立體描述符中獲取指示出是否發(fā)送了用于每個節(jié)目的視差數(shù)據(jù)的“event_diSparity_SUpply”中的信息。元數(shù)據(jù)處理器209從立體描述符中獲取指示出發(fā)送了詳細(xì)視差數(shù)據(jù)的“detailecLdisparityjupply”中的信息。當(dāng)發(fā)送了用于每個節(jié)目的標(biāo)識信息時,元數(shù)據(jù)處理器209還獲取用于每個節(jié)目的標(biāo)識信息,這是因為在立體描述符中包括用于每個節(jié)目的標(biāo)識信息。另外,例如,元數(shù)據(jù)處理器209從視差鏈路描述符中獲取指示出是否發(fā)送了通用視差數(shù)據(jù)的“general_Use_disparity_flag”中的信息。元數(shù)據(jù)處理器209從視差鏈路描述符中獲取指示出是否發(fā)送了字幕視差數(shù)據(jù)的“sUbtitle_diSparity_flag”中的信息。元數(shù)據(jù)處理器209從視差鏈路描述符中獲取“diSparity_C0mp0nent”中的信息?!癲isparity_ component”中的信息指示出用于指示包括了視差數(shù)據(jù)的視差流的組件標(biāo)簽(component tag)的值。可以基于組件標(biāo)簽的值來獲取視差流的分組標(biāo)識(PID)。向視差數(shù)據(jù)輸出單元 210供應(yīng)在元數(shù)據(jù)處理器209中獲取的各種信息。視差數(shù)據(jù)輸出單元210基于來自視差數(shù)據(jù)解碼器208的視差數(shù)據(jù)、來自字幕解碼器206的與視差數(shù)據(jù)有關(guān)的各種信息、和來自元數(shù)據(jù)處理器209的與視差數(shù)據(jù)有關(guān)的各種信息來確定要使用的視差數(shù)據(jù),以輸出所確定的視差數(shù)據(jù)。例如,當(dāng)疊加信息是OSD圖像時,輸出以下視差數(shù)據(jù)。具體地,當(dāng)發(fā)送了通用視差數(shù)據(jù)時,將該通用視差數(shù)據(jù)確定為要使用的視差數(shù)據(jù),并且進行輸出。當(dāng)不是發(fā)送通用視差數(shù)據(jù)、而是發(fā)送用于每個節(jié)目的視差數(shù)據(jù)時,將該用于每個節(jié)目的視差數(shù)據(jù)確定為要使用的視差數(shù)據(jù),并且進行輸出。當(dāng)既沒有發(fā)送通用視差數(shù)據(jù)、也沒有發(fā)送用于每個節(jié)目的視差數(shù)據(jù)時,將在接收機設(shè)備200中事先準(zhǔn)備的視差數(shù)據(jù)確定為要使用的視差數(shù)據(jù),并且進行輸出。例如,當(dāng)疊加信息是字幕時,輸出以下視差數(shù)據(jù)。具體地,當(dāng)發(fā)送了用于每個區(qū)段 /顯示集的視差序列時,將該用于每個區(qū)段/顯示集的視差序列確定為要使用的視差數(shù)據(jù), 并且進行輸出。當(dāng)不是發(fā)送該視差序列、而是發(fā)送用于每個區(qū)段/顯示集的固定視差數(shù)據(jù)時,將該固定視差數(shù)據(jù)確定為要使用的視差數(shù)據(jù),并且進行輸出。當(dāng)不是發(fā)送用于每個區(qū)段/顯示集的視差數(shù)據(jù)、而是發(fā)送用于每個節(jié)目的視差數(shù)據(jù)時,將該用于每個節(jié)目的視差數(shù)據(jù)確定為要使用的視差數(shù)據(jù),并且進行輸出。當(dāng)既沒有發(fā)送用于每個區(qū)段/顯示集的視差數(shù)據(jù)、也沒有發(fā)送用于每個節(jié)目的視差數(shù)據(jù)時,將在接收機設(shè)備200中事先準(zhǔn)備的視差數(shù)據(jù)確定為要使用的視差數(shù)據(jù),并且進行輸出。向疊加器單元212供應(yīng)在視差數(shù)據(jù)輸出單元210中這樣確定的且從視差數(shù)據(jù)輸出單元210輸出的視差數(shù)據(jù)。疊加器單元212將在字幕發(fā)生器207中生成的字幕顯示數(shù)據(jù)和 /或在OSD數(shù)據(jù)發(fā)生器211中生成的OSD數(shù)據(jù)疊加在于信號處理器205中獲取的左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)上。在此情況下,疊加器單元212基于從視差數(shù)據(jù)輸出單元210供應(yīng)的視差數(shù)據(jù)來對在左眼圖像和左右圖像上顯示的疊加信息(字幕和/或OSD圖像)執(zhí)行偏移處理,以添加視差。從疊加器單元212交替地輸出其上疊加有字幕和/或OSD圖像的左眼圖像數(shù)據(jù) SL'和其上疊加有字幕和/或OSD圖像的右眼圖像數(shù)據(jù)SR'。向顯示單元213供應(yīng)該左眼圖像數(shù)據(jù)SL'和該右眼圖像數(shù)據(jù)SR'。顯示單元213交替地顯示根據(jù)該左眼圖像數(shù)據(jù) SL'生成的圖像和根據(jù)該右眼圖像數(shù)據(jù)SR'生成的圖像。由他/她左眼和右眼上佩戴有快門眼鏡(未示出)的觀眾來感知在顯示單元213中這樣顯示的左眼圖像和右眼圖像,并且該觀眾識別出立體圖像。在此情況下,基于視差數(shù)據(jù)來將視差添加到要在左眼圖像和右眼圖像上疊加的疊加信息(字幕和/或OSD圖像),如上所述。相應(yīng)地,位于比圖像的最近位置更近位置處的觀眾識別出疊加信息。疊加信息的深度由所使用的視差數(shù)據(jù)來確定。圖M示出了如何三維地顯示字幕的示例。在此示例中,發(fā)送了用于每個區(qū)段/顯示集的視差序列,并且基于該視差序列來將視差添加到要在左眼圖像和右眼圖像上疊加的字幕。在圖M的示例中,在某一頁面(頁面(Page)ID = Pl)中,在區(qū)段(區(qū)段(Region) ID = Rl)中顯示字幕“字幕(Subtitle) 1”,并且在區(qū)段(區(qū)段ID = R2)中顯示字幕“字幕 2”。該區(qū)段(區(qū)段ID = Rl)顯示在顯示集Tl到T2中的位置(XI,Yl, X2,Y2)處,并且具有顯示文本“字幕1”。該區(qū)段(區(qū)段ID = R2)顯示在顯示集Tl到T2中的位置(X3,Y3, X4,Y4)處,并且具有顯示文本“字幕2”。
在圖M的示例中,參考在視差流中包括的“disparity_sequence_id = DS1”中的視差序列,以便將視差添加到字幕“字幕1”。此視差序列包括與顯示集中的時間T10、T11、 Τ12、· · ·、Τ1η 對應(yīng)的各條視差數(shù)據(jù) D10、D11、D12、. . ·、Dln。在圖M的示例中,參考在視差流中包括的“disparity_sequence_id = S2”中的視差序列,以便將視差添加到字幕“字幕2”。此視差序列包括與顯示集中的時間T10、T11、 Τ12、· · ·、Tin 對應(yīng)的各條視差數(shù)據(jù) D20、D21、D22、· · ·、D2n。在圖24 的示例中,基于 “disparity_sequence_id = Si” 和 “disparity_ sequence_id = DS2”中的視差序列來將視差添加到要在左眼圖像和右眼圖像上疊加的字幕“字幕1”和“字幕2”。在此情況下,將隨著顯示集中圖像內(nèi)容的變化而不斷變化的視差添加到字幕“字幕1”和“字幕2”。相應(yīng)地,由觀眾識別出的字幕“字幕1”和“字幕2”中每一個的深度隨著顯示集中圖像內(nèi)容的變化而不斷變化。圖25示出了如何三維地顯示字幕的另一示例。在此示例中,發(fā)送了用于每個區(qū)段 /顯示集的固定視差數(shù)據(jù),并且基于該固定視差數(shù)據(jù)來將視差添加到要在左眼圖像和右眼圖像上疊加的字幕。在圖25的示例中,在某一頁面(頁面ID = Pl)中,在區(qū)段(區(qū)段ID = Rl)中顯示字幕“字幕1”,并且在區(qū)段(區(qū)段ID = R2)中顯示字幕“字幕2”。該區(qū)段(區(qū)段ID = Rl)顯示在顯示集Tl到T2中的位置(XI,Yl, X2,Y2)處,并且具有顯示文本“字幕1”。該區(qū)段(區(qū)段ID = R2)顯示在顯示集Tl到T2中的位置(X3,Y3,X4,Y4)處,并且具有顯示文本“字幕2”。在圖25的示例中,使用在字幕流中包括的固定視差數(shù)據(jù)(fixecLdisparity = Dl),以便將視差添加到字幕“字幕1”。在圖25的示例中,使用在字幕流中包括的固定視差數(shù)據(jù)(fixecLdisparity = D2),以便將視差添加到字幕“字幕2”。在圖25的示例中,基于固定視差數(shù)據(jù)(fixecLdisparity = D1,D2)來將固定視差添加到顯示集中的要在左眼圖像和右眼圖像上疊加的字幕“字幕1”和“字幕2”。相應(yīng)地, 由觀眾識別出的字幕“字幕1”和“字幕2”中每一個的深度在顯示集中是恒定的。圖沈示出了如何三維地顯示字幕的另一示例。在此示例中,發(fā)送了用于每個區(qū)段 /顯示集的視差序列,并且基于該視差序列來將視差添加到要在左眼圖像和右眼圖像上疊加的字幕。在圖沈的示例中,在第一顯示集的第一區(qū)段中顯示字幕“字幕1”,并且在第二顯示集的第二區(qū)段中顯示字幕“字幕2”。參考在視差流中包括的、用于將視差添加到字幕“字幕1”的視差,以便將視差添加到字幕“字幕1”。參考在視差流中包括的、用于將視差添加到字幕“字幕2”的視差,以便將視差添加到字幕“字幕2”。在圖沈的示例中,基于所述視差序列來將隨著相應(yīng)顯示集中圖像內(nèi)容的變化而不斷變化的視差添加到第一顯示集和第二顯示集中的要在左眼圖像和右眼圖像上疊加的字幕“字幕1”和“字幕2”。相應(yīng)地,由觀眾識別出的字幕“字幕1”和“字幕2”中每一個的深度隨著對應(yīng)顯示集中圖像內(nèi)容的變化而不斷變化。圖27示出了如何三維地顯示字幕的另一示例。在此示例中,發(fā)送了用于每個區(qū)段 /顯示集的固定視差數(shù)據(jù),并且基于該固定視差數(shù)據(jù)來將視差添加到要在左眼圖像和右眼圖像上疊加的字幕。
在圖27的示例中,在第一顯示集的第一區(qū)段中顯示字幕“字幕1”,并且在第二顯示集的第二區(qū)段中顯示字幕“字幕2”。使用在字幕流中包括的、用于將視差添加到字幕“字幕1”的固定視差數(shù)據(jù),以便將視差添加到字幕“字幕1”。使用在字幕流中包括的、用于將視差添加到字幕“字幕2”的固定視差數(shù)據(jù),以便將視差添加到字幕“字幕2”。在圖27的示例中,基于相應(yīng)的各條固定視差數(shù)據(jù)來將固定視差添加到第一顯示集和第二顯示集中的要在左眼圖像和右眼圖像上疊加的字幕“字幕1”和“字幕2”。相應(yīng)地,由觀眾識別出的字幕“字幕1”和“字幕2”中每一個的深度在對應(yīng)顯示集中是恒定的。圖觀示出了如何三維地顯示字幕的另一示例。在此示例中,發(fā)送了用于每個節(jié)目的視差數(shù)據(jù),并且基于該用于每個節(jié)目的視差數(shù)據(jù)來將視差添加到要在左眼圖像和右眼圖像上疊加的字幕。在圖觀的示例中,在節(jié)目中的第一顯示集的第一區(qū)段中顯示字幕“字幕1”,并且在該節(jié)目中的第二顯示集的第二區(qū)段中顯示字幕“字幕2”。使用在EIT的立體描述符 (stereoscopic_descriptor)中包括的用于每個節(jié)目的視差數(shù)據(jù)(Dl),以便將視差添加到字幕“字幕1”和“字幕2”。在圖觀的示例中,基于用于每個節(jié)目的視差數(shù)據(jù)(Dl)來將固定視差添加到節(jié)目中的要在左眼圖像和右眼圖像上疊加的字幕“字幕1”和“字幕2”。相應(yīng)地,由觀眾識別出的字幕“字幕1”和“字幕2”中每一個的深度在節(jié)目中是恒定的。圖四示出了如何三維地顯示字幕的另一示例。在此示例中,沒有發(fā)送視差數(shù)據(jù), 并且基于在接收機設(shè)備200中事先準(zhǔn)備的視差數(shù)據(jù)來將視差添加到要在左眼圖像和右眼圖像上疊加的字幕。在圖四的示例中,在節(jié)目中的第一顯示集的第一區(qū)段中顯示字幕“字幕1”,并且在該節(jié)目中的第二顯示集的第二區(qū)段中顯示字幕“字幕2”。使用在接收機設(shè)備200中事先準(zhǔn)備的視差數(shù)據(jù),以便將視差添加到字幕“字幕1”和“字幕2”。例如,在圖四的示例中,基于在接收機設(shè)備200中事先準(zhǔn)備的視差數(shù)據(jù)來將固定視差添加到節(jié)目中的要在左眼圖像和右眼圖像上疊加的字幕“字幕1”和“字幕2”。相應(yīng)地,由觀眾識別出的字幕“字幕1”和“字幕2”中每一個的深度在節(jié)目中是恒定的。返回參考圖20,向音頻解碼器214供應(yīng)在解多路復(fù)用器203中提取的音頻基本流。 音頻解碼器214對在該音頻基本流中包括的編碼音頻數(shù)據(jù)執(zhí)行解碼,以獲取解碼后的音頻數(shù)據(jù)。向音頻處理器電路215供應(yīng)該音頻數(shù)據(jù)。音頻處理器電路215對該音頻數(shù)據(jù)執(zhí)行諸如D/A轉(zhuǎn)換之類的必要處理。在音頻放大器電路216對經(jīng)受了該處理的音頻數(shù)據(jù)進行放大, 并且向揚聲器217供應(yīng)放大后的音頻數(shù)據(jù)。揚聲器217輸出與在顯示單元213中顯示的圖像對應(yīng)的音頻。如上所述,在圖1所示的立體圖像發(fā)送-接收系統(tǒng)10中,廣播站100中的發(fā)送數(shù)據(jù)生成單元110(參考圖i)在包括了關(guān)于某一節(jié)目的立體圖像數(shù)據(jù)的傳送流TS中合并了指示出是否發(fā)送了視差數(shù)據(jù)的標(biāo)識信息。相應(yīng)地,可能改善由3D視頻內(nèi)容供應(yīng)商發(fā)送視差數(shù)據(jù)的靈活性。換言之,可能選擇性地發(fā)送用于每個節(jié)目的視差數(shù)據(jù)、通用視差數(shù)據(jù)、字幕視差數(shù)據(jù)等等,作為視差數(shù)據(jù)。另外,也可以選擇不發(fā)送視差數(shù)據(jù)。在圖1所示的立體圖像發(fā)送-接收系統(tǒng)10中,接收機設(shè)備200(參考圖20)獲取在傳送流TS中合并的、指示出是否發(fā)送了視差數(shù)據(jù)的標(biāo)識信息。基于該標(biāo)識信息來將基于某一視差數(shù)據(jù)(諸如,用于每個節(jié)目的視差數(shù)據(jù)、通用視差數(shù)據(jù)、和字幕視差數(shù)據(jù))的視差添加到要在左眼圖像和右眼圖像上疊加的同一疊加信息(字幕和/或OSD圖像)。相應(yīng)地, 可能以3D視頻內(nèi)容供應(yīng)商所意欲的深度來在立體圖像上顯示諸如字幕和/或OSD圖像之類的疊加信息。<修改例>在以上實施例中,在EIT中合并了立體描述符(stereoscopic_descriptor)和視差鏈路描述符(disparity_link_descript0r)。然而,合并這些描述符的位置不限于EIT。 例如,可以將立體描述符合并在EIT中,并且可以將視差鏈路描述符合并在PMT中。也可以立體描述符和視差鏈路描述符兩者都合并在PMT中。交替地,也可以將這些描述符合并在
另一位置中。在以上實施例中,如參考圖21和22中的流程圖所描述的,接收機設(shè)備200基于所發(fā)送的視差數(shù)據(jù)的類型來自動地確定要使用的視差數(shù)據(jù)。然而,可以響應(yīng)于用戶的操作來任意地確定要使用的視差數(shù)據(jù)。盡管在以上實施例中將字幕用作特定疊加信息,但是可以按照相同的方式來使用諸如隱藏字幕之類的另一疊加信息。在以上實施例中從廣播站100廣播包括了立體圖像數(shù)據(jù)的傳送流TS。然而,本發(fā)明可應(yīng)用于其中在諸如因特網(wǎng)之類的網(wǎng)絡(luò)上向接收終端發(fā)送傳送流TS的系統(tǒng)。本申請包含與在2010年5月10日向日本專利局提交的日本優(yōu)先權(quán)專利申請JP 2010-108817中公開的主題相關(guān)的主題,由此通過引用而并入其全部內(nèi)容。本領(lǐng)域技術(shù)人員應(yīng)該理解,只要各種修改、組合、子組合和替換處于所附權(quán)利要求或其等效物的范圍內(nèi),它們就可以取決于設(shè)計要求和其他因素而發(fā)生。
2權(quán)利要求
1.一種發(fā)送立體圖像數(shù)據(jù)的設(shè)備,包括圖像數(shù)據(jù)輸出單元,被配置為輸出關(guān)于某一節(jié)目的、包括了左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)的立體圖像數(shù)據(jù);以及圖像數(shù)據(jù)發(fā)送單元,被配置為發(fā)送包括了從該圖像數(shù)據(jù)輸出單元輸出的關(guān)于某一節(jié)目的立體圖像數(shù)據(jù)的傳送流,其中,該圖像數(shù)據(jù)發(fā)送單元在該傳送流中合并指示出是否發(fā)送了視差數(shù)據(jù)的標(biāo)識信息,該視差數(shù)據(jù)用于將視差添加到要在根據(jù)該左眼圖像數(shù)據(jù)和該右眼圖像數(shù)據(jù)生成的圖像上疊加的疊加信息。
2.根據(jù)權(quán)利要求1的發(fā)送立體圖像數(shù)據(jù)的設(shè)備,其中該標(biāo)識信息指示出是否發(fā)送了用于每個節(jié)目的視差數(shù)據(jù)。
3.根據(jù)權(quán)利要求2的發(fā)送立體圖像數(shù)據(jù)的設(shè)備,其中,當(dāng)該標(biāo)識信息指示出發(fā)送了用于每個節(jié)目的視差數(shù)據(jù)時,該圖像數(shù)據(jù)發(fā)送單元還在該傳送流中合并用于每個節(jié)目的視差數(shù)據(jù)。
4.根據(jù)權(quán)利要求3的發(fā)送立體圖像數(shù)據(jù)的設(shè)備,其中該圖像數(shù)據(jù)發(fā)送單元在該傳送流中合并該標(biāo)識信息和該視差數(shù)據(jù),作為用于每個節(jié)目的元數(shù)據(jù)。
5.根據(jù)權(quán)利要求4的發(fā)送立體圖像數(shù)據(jù)的設(shè)備,其中該傳送流包括用作用于以節(jié)目為單位進行管理的服務(wù)信息的事件信息表,并且其中該圖像數(shù)據(jù)發(fā)送單元在該事件信息表中合并該標(biāo)識信息和該視差數(shù)據(jù)。
6.根據(jù)權(quán)利要求1的發(fā)送立體圖像數(shù)據(jù)的設(shè)備,其中該標(biāo)識信息指示出是否發(fā)送了通用視差數(shù)據(jù)。
7.根據(jù)權(quán)利要求6的發(fā)送立體圖像數(shù)據(jù)的設(shè)備,其中,當(dāng)該標(biāo)識信息指示出發(fā)送了通用視差數(shù)據(jù)時,該圖像數(shù)據(jù)發(fā)送單元還在該傳送流中合并包括了通用視差數(shù)據(jù)的視差基本流,并且與指示出發(fā)送了通用視差數(shù)據(jù)的標(biāo)識信息相關(guān)聯(lián)地,在該傳送流中合并用于標(biāo)識該視差基本流的標(biāo)識信息。
8.根據(jù)權(quán)利要求1的發(fā)送立體圖像數(shù)據(jù)的設(shè)備,其中該標(biāo)識信息指示出是否發(fā)送了用于特定疊加信息的視差數(shù)據(jù)。
9.根據(jù)權(quán)利要求8的發(fā)送立體圖像數(shù)據(jù)的設(shè)備,其中,當(dāng)該標(biāo)識信息指示出發(fā)送了用于特定疊加信息的視差數(shù)據(jù)時,該圖像數(shù)據(jù)發(fā)送單元還在該傳送流中合并固定-變化信息,該固定-變化信息指示出發(fā)送在其中顯示出特定疊加信息的包括了某一數(shù)目的幀的幀時段中共同使用的視差數(shù)據(jù)、和發(fā)送在包括了某一數(shù)目的幀的幀時段中依次更新的視差數(shù)據(jù)中的任一項或者其兩者。
10.根據(jù)權(quán)利要求9的發(fā)送立體圖像數(shù)據(jù)的設(shè)備,其中該圖像數(shù)據(jù)發(fā)送單元在該傳送流中合并包括了關(guān)于特定疊加信息的數(shù)據(jù)的疊加信息基本流,并且其中對于每條疊加信息在疊加信息基本流中合并該固定_變化信息。
11.根據(jù)權(quán)利要求10的發(fā)送立體圖像數(shù)據(jù)的設(shè)備,其中,當(dāng)該固定-變化信息指示出發(fā)送在包括了某一數(shù)目的幀的幀時段中共同使用的視差數(shù)據(jù)時,該圖像數(shù)據(jù)發(fā)送單元與該固定-變化信息相關(guān)聯(lián)地,對于每條疊加信息來在疊加信息基本流中合并在包括了某一數(shù)目的幀的幀時段中共同使用的視差數(shù)據(jù)。
12.根據(jù)權(quán)利要求10的發(fā)送立體圖像數(shù)據(jù)的設(shè)備, 其中,該固定_變化信息指示出發(fā)送在其中顯示出特定疊加信息的包括了某一數(shù)目的幀的幀時段中依次更新的視差數(shù)據(jù)時,該圖像數(shù)據(jù)發(fā)送單元在該傳送流中合并其中利用標(biāo)識信息來區(qū)分用于每條疊加信息的視差序列的疊加信息基本流,并且根據(jù)該固定_變化信息對于每條疊加信息來在疊加信息基本流中合并用于指定視差基本流中的對應(yīng)視差序列的標(biāo)識信息。
13.—種發(fā)送立體圖像數(shù)據(jù)的方法,包括以下步驟依次地輸出關(guān)于每個節(jié)目的立體圖像數(shù)據(jù),該立體圖像數(shù)據(jù)包括左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù);以及發(fā)送傳送流,該傳送流包括在該圖像數(shù)據(jù)輸出步驟中依次輸出的關(guān)于每個節(jié)目的立體圖像數(shù)據(jù),其中,該圖像數(shù)據(jù)發(fā)送步驟在該傳送流中合并指示出是否發(fā)送了視差數(shù)據(jù)的標(biāo)識信息,該視差數(shù)據(jù)用于將視差添加到要在從該左眼圖像數(shù)據(jù)和該右眼圖像數(shù)據(jù)生成的圖像上疊加的疊加信息。
14.一種接收立體圖像數(shù)據(jù)的設(shè)備,包括圖像數(shù)據(jù)接收單元,被配置為接收傳送流,在該傳送流中包括了關(guān)于某一節(jié)目的、包括左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)的立體圖像數(shù)據(jù),并且在該傳送流中合并了指示出是否發(fā)送了視差數(shù)據(jù)的標(biāo)識信息,該視差數(shù)據(jù)用于將視差添加到要在從該左眼圖像數(shù)據(jù)和該右眼圖像數(shù)據(jù)生成的圖像上疊加的疊加信息;圖像數(shù)據(jù)獲取單元,被配置為從由該圖像數(shù)據(jù)接收單元接收到的傳送流中獲取立體圖像數(shù)據(jù);標(biāo)識信息獲取單元,被配置為從由該圖像數(shù)據(jù)接收單元接收到的傳送流中獲取標(biāo)識信息;以及圖像數(shù)據(jù)處理單元,被配置為基于由圖像數(shù)據(jù)獲取單元獲取的立體圖像數(shù)據(jù)和由標(biāo)識信息獲取單元獲取的標(biāo)識信息,將基于某一視差數(shù)據(jù)的視差添加到要在左眼圖像和右眼圖像上疊加的同一疊加信息,以獲取其上疊加有疊加信息的左眼圖像數(shù)據(jù)和其上疊加有疊加信息的右眼圖像數(shù)據(jù)。
15.根據(jù)權(quán)利要求14的接收立體圖像數(shù)據(jù)的設(shè)備,其中該標(biāo)識信息指示出是否發(fā)送了用于每個節(jié)目的視差數(shù)據(jù)。
16.根據(jù)權(quán)利要求14的接收立體圖像數(shù)據(jù)的設(shè)備,其中該標(biāo)識信息指示出是否發(fā)送了通用視差數(shù)據(jù)。
17.根據(jù)權(quán)利要求14的接收立體圖像數(shù)據(jù)的設(shè)備,其中該標(biāo)識信息指示出是否發(fā)送了用于特定疊加信息的視差數(shù)據(jù)。
18.根據(jù)權(quán)利要求14的接收立體圖像數(shù)據(jù)的設(shè)備,其中,當(dāng)該標(biāo)識信息指示出發(fā)送了視差數(shù)據(jù)時,該圖像數(shù)據(jù)處理單元使用從傳送流中獲取的視差數(shù)據(jù),作為該某一視差數(shù)據(jù)。
19.根據(jù)權(quán)利要求14的接收立體圖像數(shù)據(jù)的設(shè)備,其中,當(dāng)該標(biāo)識信息指示出沒有發(fā)送視差數(shù)據(jù)時,該圖像數(shù)據(jù)處理單元使用事先準(zhǔn)備的視差數(shù)據(jù),作為該某一視差數(shù)據(jù)。
20. 一種接收立體圖像數(shù)據(jù)的方法,包括以下步驟接收傳送流,在該傳送流中包括了關(guān)于某一節(jié)目的、包括左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)的立體圖像數(shù)據(jù),并且在該傳送流中合并了指示出是否發(fā)送了視差數(shù)據(jù)的標(biāo)識信息,該視差數(shù)據(jù)用于將視差添加到要在從該左眼圖像數(shù)據(jù)和該右眼圖像數(shù)據(jù)生成的圖像上疊加的疊加信息;從在該圖像數(shù)據(jù)接收步驟中接收到的傳送流中獲取立體圖像數(shù)據(jù); 從在該圖像數(shù)據(jù)接收步驟中接收到的傳送流中獲取標(biāo)識信息;以及基于在圖像數(shù)據(jù)獲取步驟中獲取的立體圖像數(shù)據(jù)和在標(biāo)識信息獲取步驟中獲取的標(biāo)識信息,將基于某一視差數(shù)據(jù)的視差添加到要在左眼圖像和右眼圖像上疊加的同一疊加信息,以獲取其上疊加有疊加信息的左眼圖像數(shù)據(jù)和其上疊加有疊加信息的右眼圖像數(shù)據(jù)。
全文摘要
一種發(fā)送立體圖像數(shù)據(jù)的設(shè)備,包括圖像數(shù)據(jù)輸出單元,被配置為輸出關(guān)于某一節(jié)目的、包括了左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)的立體圖像數(shù)據(jù);以及圖像數(shù)據(jù)發(fā)送單元,被配置為發(fā)送包括了從該圖像數(shù)據(jù)輸出單元輸出的關(guān)于某一節(jié)目的立體圖像數(shù)據(jù)的傳送流。該圖像數(shù)據(jù)發(fā)送單元在該傳送流中合并指示出是否發(fā)送了視差數(shù)據(jù)的標(biāo)識信息。該視差數(shù)據(jù)用于將視差添加到要在根據(jù)該左眼圖像數(shù)據(jù)和該右眼圖像數(shù)據(jù)生成的圖像上疊加的疊加信息。
文檔編號H04N13/00GK102244795SQ20111011188
公開日2011年11月16日 申請日期2011年5月3日 優(yōu)先權(quán)日2010年5月10日
發(fā)明者北里直久, 塚越郁夫 申請人:索尼公司