專利名稱：立體圖像數(shù)據(jù)發(fā)送設備、立體圖像數(shù)據(jù)發(fā)送方法、立體圖像數(shù)據(jù)接收設備和立體圖像數(shù)據(jù) ...的制作方法
技術(shù)領(lǐng)域：
本發(fā)明涉及立體圖像數(shù)據(jù)發(fā)送設備、立體圖像數(shù)據(jù)發(fā)送方法、立體圖像數(shù)據(jù)接收設備和立體圖像數(shù)據(jù)接收方法，更具體地，涉及與立體圖像數(shù)據(jù)一起發(fā)送疊加信息的數(shù)據(jù)(如字幕)的立體圖像數(shù)據(jù)發(fā)送設備。
背景技術(shù)：
例如，在專利文獻I中，已經(jīng)提出使用電視廣播波的立體圖像數(shù)據(jù)的發(fā)送系統(tǒng)。在該發(fā)送系統(tǒng)中，發(fā)送包括左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)的立體圖像數(shù)據(jù)，并且執(zhí)行使用雙眼視差的立體圖像顯示。圖64圖示使用雙眼視差的立體圖像顯示器中屏幕上的對象(身體)的水平顯示位置及其立體圖像的再現(xiàn)位置之間的關(guān)系。例如，如圖中的屏幕上所示，對于其左圖像La顯示為要向右側(cè)移位并且右圖像Ra顯示為要向左側(cè)移位的對象A，左和右視線在屏幕臉部的更前側(cè)相互交叉，因此立體圖像的再現(xiàn)位置位于比屏幕臉部的更前側(cè)。DPa表示與對象A有關(guān)的水平方向上的視差矢量。此外，例如，如圖中屏幕上所示，對于其左圖像Lb和右圖像Rb顯示在相同位置的對象B，左和右實現(xiàn)在屏幕臉部上相互交叉，因此立體圖像的再現(xiàn)位置在屏幕臉部上。此外，例如，如圖中的屏幕上所示，對于其左圖像Lc顯示為要向左側(cè)移位并且右圖像Re顯示為要向右側(cè)移位的對象C，左和右視線在屏幕臉部的更后側(cè)相互交叉，因此立體圖像的再現(xiàn)位置位于比屏幕臉部的更后側(cè)。DPc表示與對象c有關(guān)的水平方向上的視差矢量。在過去，并排格式和上下格式已知為立體圖像數(shù)據(jù)的發(fā)送格式。例如，當接收側(cè)是機頂盒時，接收的立體圖像數(shù)據(jù)可以經(jīng)由諸如高清晰度多媒體接口(HDMI)發(fā)送到諸如電視接收機的監(jiān)視器設備，而不需要轉(zhuǎn)換發(fā)送格式。例如，HDMI標準的細節(jié)在非專利文獻I中描述。此外，在過去，已知的是與二維(2D)圖像數(shù)據(jù)一起從發(fā)送側(cè)發(fā)送諸如字幕的疊加信息的數(shù)據(jù)。在該情況下，接收側(cè)處理疊加信息的數(shù)據(jù)，并且生成用于顯示疊加信息的顯示數(shù)據(jù)。接收側(cè)通過使得顯示數(shù)據(jù)疊加2D圖像數(shù)據(jù)，獲得以疊加方式顯示疊加信息的2D圖像。引用列表專利文獻專利文獻I :日本專利申請公開No. 2005-6114非專利文獻非專利文獻I :高清晰度多媒體接口規(guī)范版本I. 4,2009年6月5日

發(fā)明內(nèi)容
本發(fā)明要解決的問題
如上所述，即使在發(fā)送立體圖像數(shù)據(jù)時，也可以發(fā)送諸如字幕的疊加信息的數(shù)據(jù)。當疊加信息的數(shù)據(jù)用于2D圖像時，例如要求上述機頂盒基于用于2D圖像的疊加信息的數(shù)據(jù)，根據(jù)立體圖像數(shù)據(jù)的發(fā)送格式，執(zhí)行生成要疊加立體圖像數(shù)據(jù)的顯示數(shù)據(jù)的處理。為此，接收立體圖像數(shù)據(jù)的機頂盒需要先進的處理功能，因此價格高。本發(fā)明的目的是當與立體圖像數(shù)據(jù)一起發(fā)送諸如字幕的疊加信息的數(shù)據(jù)時，便利接收側(cè)的處理。問題的解決方案本發(fā)明的構(gòu)思在于一種立體圖像數(shù)據(jù)發(fā)送設備，包括立體圖像數(shù)據(jù)輸出單元，其輸出包括左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)的預定發(fā)送格式的立體圖像數(shù)據(jù)；疊加信息數(shù)據(jù)輸出單元，其輸出疊加信息的數(shù)據(jù)以疊加左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)的圖像；疊加信息數(shù)據(jù)處理單元，其將從疊加信息數(shù)據(jù)輸出單元輸出的疊加信息的數(shù)據(jù)轉(zhuǎn)換為發(fā)送疊加信息數(shù)據(jù)，其包括對應于預定發(fā)送格式的立體圖像數(shù)據(jù)中包括的左眼圖像數(shù)據(jù)的左眼疊加信息的數(shù)據(jù)和對應于右眼圖像數(shù)據(jù)的右眼疊加信息的數(shù)據(jù)；以及數(shù)據(jù)發(fā)送單元，其發(fā)送包括第一數(shù)據(jù)流和第二數(shù)據(jù)流的復用數(shù)據(jù)流，該第一數(shù)據(jù)流包括從立體圖像數(shù)據(jù)輸出單元輸出的立體圖像數(shù)據(jù)，該第二數(shù)據(jù)流包括從疊加信息數(shù)據(jù)處理單元輸出的發(fā)送疊加信息數(shù)據(jù)。在本發(fā)明中，立體圖像數(shù)據(jù)輸出單元輸出包括左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)的預定發(fā)送格式的立體圖像數(shù)據(jù)。立體圖像數(shù)據(jù)的發(fā)送格式的示例包括并排格式、上下格式、全中貞格式(full frame format)和向后兼容格式。疊加信息數(shù)據(jù)輸出單元輸出疊加信息的數(shù)據(jù)以疊加左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)的圖像。這里，疊加信息的示例包括要疊加圖像的字幕、圖形和文本。疊加信息數(shù)據(jù)處理單元將疊加信息的數(shù)據(jù)轉(zhuǎn)換為包括左眼疊加信息的數(shù)據(jù)和右眼疊加信息的數(shù)據(jù)的發(fā)送疊加信息數(shù)據(jù)。這里，左眼疊加信息的數(shù)據(jù)是對應于預定發(fā)送格式的立體圖像數(shù)據(jù)中包括的左眼圖像數(shù)據(jù)的數(shù)據(jù)，以及用于生成左眼疊加信息的顯示數(shù)據(jù)以疊加接收側(cè)的立體圖像數(shù)據(jù)中包括的左眼圖像數(shù)據(jù)的數(shù)據(jù)。此外，右眼疊加信息的數(shù)據(jù)是對應于預定發(fā)送格式的立體圖像數(shù)據(jù)中包括的右眼圖像數(shù)據(jù)的數(shù)據(jù)，以及用于生成右眼疊加信息的顯示數(shù)據(jù)以疊加接收側(cè)的立體圖像數(shù)據(jù)中包括的右眼圖像數(shù)據(jù)的數(shù)據(jù)。例如，疊加信息的數(shù)據(jù)是字幕數(shù)據(jù)(DVB的字幕數(shù)據(jù))，并且疊加信息數(shù)據(jù)處理單元生成左眼疊加信息的數(shù)據(jù)和右眼疊加信息的數(shù)據(jù)，作為相同區(qū)域的不同對象的數(shù)據(jù)。此外，例如，疊加信息的數(shù)據(jù)是字幕數(shù)據(jù)，并且疊加信息數(shù)據(jù)處理單元生成左眼疊加信息的數(shù)據(jù)和右眼疊加信息的數(shù)據(jù)，作為相同頁(page)的不同區(qū)域的數(shù)據(jù)。此外，例如，疊加信息的數(shù)據(jù)是字幕數(shù)據(jù)，并且疊加信息數(shù)據(jù)處理單元生成左眼疊加信息的數(shù)據(jù)和右眼疊加信息的數(shù)據(jù)，作為不同頁的區(qū)域的數(shù)據(jù)。此外，例如，疊加信息的 數(shù)據(jù)是字幕數(shù)據(jù)，并且疊加信息數(shù)據(jù)處理單元生成左眼疊加信息的數(shù)據(jù)和右眼疊加信息的數(shù)據(jù)之一作為預定頁的區(qū)域的數(shù)據(jù)，并且另一個作為從該預定頁的區(qū)域復制的復制區(qū)域的數(shù)據(jù)。
此外，例如，疊加信息的數(shù)據(jù)是字幕數(shù)據(jù)，并且當立體圖像數(shù)據(jù)的發(fā)送格式是并排格式時，疊加信息數(shù)據(jù)處理單元生成左眼疊加信息的數(shù)據(jù)和右眼疊加信息的數(shù)據(jù)，作為相同區(qū)域的不同對象的數(shù)據(jù)。此外，例如，疊加信息的數(shù)據(jù)是字幕數(shù)據(jù)，并且當立體圖像數(shù)據(jù)的發(fā)送格式是上下格式時，疊加信息數(shù)據(jù)處理單元生成左眼疊加信息的數(shù)據(jù)和右眼疊加信息的數(shù)據(jù)，作為相同頁的不同區(qū)域的數(shù)據(jù)。數(shù)據(jù)發(fā)送單元發(fā)送包括第一數(shù)據(jù)流和第二數(shù)據(jù)流的復用數(shù)據(jù)流。該第一數(shù)據(jù)流包括從立體圖像數(shù)據(jù)輸出單元輸出的立體圖像數(shù)據(jù)。該第二數(shù)據(jù)流包括從疊加信息數(shù)據(jù)處理單元輸出的發(fā)送疊加信息數(shù)據(jù)。如上所述，在本發(fā)明中，與立體圖像數(shù)據(jù)一起發(fā)送對應于發(fā)送格式的包括左眼疊加信息的數(shù)據(jù)和右眼疊加信息的數(shù)據(jù)的發(fā)送疊加信息數(shù)據(jù)。因此，接收側(cè)能夠基于發(fā)送疊加信息數(shù)據(jù)，容易地生成要疊加立體圖像數(shù)據(jù)中包括的左眼圖像數(shù)據(jù)的左眼疊加信息的顯示數(shù)據(jù)和要疊加立體圖像數(shù)據(jù)中包括的右眼圖像數(shù)據(jù)的右眼疊加信息的顯示數(shù)據(jù)。此外，在本發(fā)明中，例如所述立體圖像數(shù)據(jù)發(fā)送設備還可以包括視差信息輸出單 元，其輸出左眼圖像數(shù)據(jù)的左眼圖像和右眼圖像數(shù)據(jù)的右眼圖像之間的視差信息，并且疊加信息數(shù)據(jù)處理單元可以通過基于從視差信息輸出單元輸出的視差信息至少移位左眼疊加信息或右眼疊加信息，使得左眼疊加信息和右眼疊加信息之間出現(xiàn)視差。在該情況下，在接收側(cè)，即使沒有執(zhí)行使得左眼疊加信息和右眼疊加信息之間出現(xiàn)視差的處理，在疊加信息(如字幕)的顯示時與圖像中的每個對象的透視感的一致性也可以保持在優(yōu)化狀態(tài)。此外，在本發(fā)明中，例如所述立體圖像數(shù)據(jù)發(fā)送設備還可以包括視差信息生成單元，其基于從視差信息輸出單元輸出的視差信息，生成其中顯示疊加信息的預定數(shù)量的幀時段的每幀中使得左眼疊加信息和右眼疊加信息之間出現(xiàn)的視差的信息，并且數(shù)據(jù)發(fā)送單元在預定數(shù)量的幀時段的每幀中，使用識別信息從發(fā)送疊加信息的數(shù)據(jù)中區(qū)分由視差信息生成單元生成的視差的信息，將該視差的信息包括在第二數(shù)據(jù)流中，并且發(fā)送包括該視差的信息的第二數(shù)據(jù)流。在該情況下，在接收側(cè)，可能基于預定數(shù)量的幀時段的每幀中的視差的信息，使得左眼疊加信息和右眼疊加信息之間出現(xiàn)預定視差。例如，可能使得左眼疊加信息和右眼疊加信息之間出現(xiàn)基于預定數(shù)量的幀時段和代表值(如其最大值或其平均值)的視差。此外，例如可能順序地更新預定數(shù)量的幀時段中的左眼疊加信息和右眼疊加信息之間的視差。此外，在本發(fā)明中，例如在預定數(shù)量的幀時段的每幀中，視差信息生成單元生成的視差的信息可以是關(guān)于前一幀的視差的信息的偏移信息。在該情況下，可以抑制視差信息的數(shù)據(jù)量。此外，在本發(fā)明中，例如數(shù)據(jù)發(fā)送單元可以將識別信息插入復用數(shù)據(jù)流中，該識別信息識別對應于立體圖像數(shù)據(jù)的發(fā)送格式的發(fā)送疊加信息數(shù)據(jù)包括在第二數(shù)據(jù)流中。在該情況下，在接收側(cè)，可能基于識別信息，識別對應于立體圖像數(shù)據(jù)的發(fā)送格式的發(fā)送疊加信息數(shù)據(jù)(用于立體圖像的疊加信息數(shù)據(jù))是否包括在第二數(shù)據(jù)流中。此外，本發(fā)明的另一構(gòu)造在于一種立體圖像數(shù)據(jù)接收設備，包括數(shù)據(jù)接收單元，其接收包括第一數(shù)據(jù)流和第二數(shù)據(jù)流的復用數(shù)據(jù)流，該第一數(shù)據(jù)流包括預定發(fā)送格式的立體圖像數(shù)據(jù)，其包括左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)，以及該第二數(shù)據(jù)流包括發(fā)送疊加信息數(shù)據(jù)，其包括對應于預定發(fā)送格式的立體圖像數(shù)據(jù)中包括的左眼圖像數(shù)據(jù)的左眼疊加信息的數(shù)據(jù)和對應于右眼圖像數(shù)據(jù)的右眼疊加信息的數(shù)據(jù)，圖像數(shù)據(jù)獲取單元，其從數(shù)據(jù)接收單元接收的復用數(shù)據(jù)流中包括的第一數(shù)據(jù)流獲取立體圖像數(shù)據(jù)；疊加信息數(shù)據(jù)獲取單元，其從數(shù)據(jù)接收單元接收的復用數(shù)據(jù)流中包括的第二數(shù)據(jù)流獲取發(fā)送疊加信息數(shù)據(jù)；顯示數(shù)據(jù)生成單元，其基于疊加信息數(shù)據(jù)獲取單元獲取的發(fā)送疊加信息數(shù)據(jù)，生成用于以疊加方式在左眼圖像和右眼圖像上顯示疊加信息的顯示數(shù)據(jù)；以及數(shù)據(jù)合成單元，其通過將顯示數(shù)據(jù)生成單元生成的顯示數(shù)據(jù)疊加在圖像數(shù)據(jù)獲取 單元獲取的立體圖像數(shù)據(jù)上，獲得輸出立體圖像數(shù)據(jù)。在本發(fā)明中，數(shù)據(jù)接收單元接收包括第一數(shù)據(jù)流和第二數(shù)據(jù)流的復用數(shù)據(jù)流。該第一數(shù)據(jù)流包括預定發(fā)送格式的立體圖像數(shù)據(jù)，其包括左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)。該第二數(shù)據(jù)流包括發(fā)送疊加信息數(shù)據(jù)(用于立體圖像的疊加信息數(shù)據(jù))，其包括左眼疊加信息的數(shù)據(jù)和右眼疊加信息的數(shù)據(jù)。這里，左眼疊加信息的數(shù)據(jù)是對應于預定發(fā)送格式的立體圖像數(shù)據(jù)中包括的左眼圖像數(shù)據(jù)的數(shù)據(jù)，以及用于生成左眼疊加信息的顯示數(shù)據(jù)以疊加接收側(cè)的立體圖像數(shù)據(jù)中包括的左眼圖像數(shù)據(jù)的數(shù)據(jù)。此外，右眼疊加信息的數(shù)據(jù)是對應于預定發(fā)送格式的立體圖像數(shù)據(jù)中包括的右眼圖像數(shù)據(jù)的數(shù)據(jù)，以及用于生成右眼疊加信息的顯示數(shù)據(jù)以疊加接收側(cè)的立體圖像數(shù)據(jù)中包括的右眼圖像數(shù)據(jù)的數(shù)據(jù)。圖像數(shù)據(jù)獲取單元從數(shù)據(jù)接收單元接收的復用數(shù)據(jù)流中包括的第一數(shù)據(jù)流獲取立體圖像數(shù)據(jù)。此外，疊加信息數(shù)據(jù)獲取單元從數(shù)據(jù)接收單元接收的復用數(shù)據(jù)流中包括的第二數(shù)據(jù)流獲取發(fā)送疊加信息數(shù)據(jù)。顯示數(shù)據(jù)生成單元基于疊加信息數(shù)據(jù)獲取單元獲取的發(fā)送疊加信息數(shù)據(jù)，生成用于以疊加方式在左眼圖像和右眼圖像上顯示疊加信息的顯示數(shù)據(jù)。數(shù)據(jù)合成單元使得顯示數(shù)據(jù)生成單元生成的顯示數(shù)據(jù)疊加在圖像數(shù)據(jù)獲取單元獲取的立體圖像數(shù)據(jù)上，從而獲得輸出立體圖像數(shù)據(jù)。例如，輸出立體圖像數(shù)據(jù)通過諸如HDMI的數(shù)字接口單元發(fā)送到外部設備。如上所述，在本發(fā)明中，與立體圖像數(shù)據(jù)一起接收包括左眼疊加信息的數(shù)據(jù)和右眼疊加信息的數(shù)據(jù)的發(fā)送疊加信息數(shù)據(jù)。因此，顯示數(shù)據(jù)生成單元能夠基于發(fā)送疊加信息數(shù)據(jù)，容易地生成疊加在立體圖像數(shù)據(jù)中包括的左眼圖像數(shù)據(jù)上的左眼疊加信息的顯示數(shù)據(jù)和疊加在立體圖像數(shù)據(jù)中包括的右眼圖像數(shù)據(jù)上的右眼疊加信息的顯示數(shù)據(jù)。此外，在本發(fā)明中，數(shù)據(jù)接收單元接收的復用數(shù)據(jù)流中包括的第二數(shù)據(jù)流進一步可以包括視差的信息，其使得其中顯示疊加信息的預定數(shù)量的幀時段的每幀中的左眼疊加信息和右眼疊加信息之間出現(xiàn)視差，該立體圖像數(shù)據(jù)接收設備進一步可以包括視差信息獲取單元，其從數(shù)據(jù)接收單元接收的復用數(shù)據(jù)流中包括的第二數(shù)據(jù)流獲取預定數(shù)量的幀時段的每幀中的視差的信息，以及顯示數(shù)據(jù)生成單元可以在預定數(shù)量的幀時段的每幀中，基于視差信息獲取單元獲取的視差的信息，使得左眼疊加信息和右眼疊加信息之間出現(xiàn)預定視差。在該情況下，例如可能使得左眼疊加信息和右眼疊加信息之間出現(xiàn)基于預定數(shù)量的幀時段和代表值(如其最大值或其平均值)的視差。此外，例如可能順序地更新預定數(shù)量的幀時段中的左眼疊加信息和右眼疊加信息之間的視差。本發(fā)明的效果根據(jù)本發(fā)明，與立體圖像數(shù)據(jù)一起，從發(fā)送側(cè)到接收側(cè)發(fā)送根據(jù)發(fā)送格式的、包括左眼疊加信息的數(shù)據(jù)和右眼疊加信息的數(shù)據(jù)的發(fā)送疊加信息數(shù)據(jù)。因此，接收側(cè)能夠基于發(fā)送疊加信息數(shù)據(jù)，容易地生成要疊加立體圖像數(shù)據(jù)中包括的左眼圖像數(shù)據(jù)的左眼疊加信息的顯示數(shù)據(jù)和要疊加立體圖像數(shù)據(jù)中包括的右眼圖像數(shù)據(jù)的右眼疊加信息的顯示數(shù)據(jù)。因此，接收側(cè)能夠容易地執(zhí)行將接收的立體圖像數(shù)據(jù)經(jīng)由諸如HDMI的數(shù)字接口發(fā)送到諸如電視接收機的監(jiān)視器設備，而不需要轉(zhuǎn)換發(fā)送格式。


圖I是圖示根據(jù)本發(fā)明實施例的圖像收發(fā)系統(tǒng)的配置示例的方塊圖。圖2是圖示廣播站中的發(fā)送數(shù)據(jù)生成單元的配置示例的方塊圖。圖3是圖示1920X1080p的像素格式的圖像數(shù)據(jù)的圖。圖4是描述作為立體圖像數(shù)據(jù)(3D圖像數(shù)據(jù))的發(fā)送格式的“上下”格式、“并排”格式、“全幀”格式、“幀順序”格式或向后兼容格式的圖。圖5是描述檢測右眼圖像到左眼圖像的視差矢量的示例的圖。圖6是描述通過塊匹配方法獲得的視差矢量的圖。圖7是描述發(fā)送數(shù)據(jù)生成單元的視差信息生成單元執(zhí)行的下轉(zhuǎn)換處理的圖。圖8是圖示包括視頻基本流、字幕基本流和音頻基本流的傳送流(位流數(shù)據(jù))的配置示例的圖。圖9是圖示配置字幕數(shù)據(jù)的PCS (page_compostion_segment)的結(jié)構(gòu)的圖。圖10是圖示“segment_type”的每個值和片段類型之間的對應關(guān)系的圖。圖11是描述表示新定義的3D字幕的格式的信息(component_type=0xl5, 0x25)的圖。圖12是描述字幕處理單元生成的用于立體圖像(包括視差信息組)的字幕數(shù)據(jù)的配置示例(情況A到E)的圖。圖13是概念上圖示“情況A”的生成用于立體圖像的字幕數(shù)據(jù)的方法的圖。圖14是圖示“情況A”中生成的用于立體圖像的字幕數(shù)據(jù)的區(qū)域和對象的示例的圖。圖15是圖示“情況A”中每個片段的生成示例(示例I)的圖。圖16是圖示“情況A”中每個片段的生成示例(示例2)的圖。圖17 是圖不其中設置“segment_type=0x48，，的 OTS(offset_temporal_sequence_segment)的語法的示例的圖。圖18 是圖不 OTS (offset_temporal_sequence_segment)的數(shù)據(jù)語義的圖。圖19是圖示以巾貞為單元更新對象開始位置“object_horizontal_position”的示例的圖。
圖20是圖不其中對象開始位置“object_horizontal_position”最初設置為最大值“Max(offset_sequence (η))”、然后保持該位置的示例的圖。圖21是概念上圖示“情況B”的生成用于立體圖像的字幕數(shù)據(jù)的方法的圖。圖22是圖示“情況B”中生成的用于立體圖像的字幕數(shù)據(jù)的區(qū)域和對象的示例的圖。圖23是圖示“情況B”中每個片段的生成示例(示例I)的圖。圖24是圖示“情況B”中每個片段的生成示例(示例2)的圖。圖25是圖示“情況B”中每個片段的生成示例(示例3)的圖。圖26 是圖不其中設置“segment_type=0x45，，的 SFI( stereo_format_indication_segment)的語法的示例的圖。 圖27 是圖不 SFI (stereo_format_indication_segment)的數(shù)據(jù)語義的圖。圖28是概念上圖示“情況C”的生成用于立體圖像的字幕數(shù)據(jù)的方法的圖。圖29是圖示“情況C”中生成的用于立體圖像的字幕數(shù)據(jù)的區(qū)域和對象的示例的圖。圖30是圖示“情況C”中每個片段的生成示例(示例I)的圖。圖31是圖示“情況C”中每個片段的生成示例(示例2)的圖。圖32是圖示“情況C”中每個片段的生成示例(示例3)的圖。圖33是圖示“情況C”中每個片段的生成示例(示例4)的圖。圖34是概念上圖示“情況D”的生成用于立體圖像的字幕數(shù)據(jù)的方法的圖。圖35是圖示“情況D”中生成的用于立體圖像的字幕數(shù)據(jù)的區(qū)域和對象的示例的圖。圖36 是圖不其中設置 “segment_type=0x47，，的 RCP (region_copy_segment)的語法的示例的圖。圖37是圖示RCP (region_copy_segment)的數(shù)據(jù)語義的圖。圖38是圖示“情況D”中每個片段的生成示例(示例I)的圖。圖39是圖示“情況D”中每個片段的生成示例(示例2)的圖。圖40 是圖不其中設置“segment_type=0x44，，的 OSS (offset_sequence_segment)的語法的示例的圖。圖41 是圖不 OSS (offset_sequence_segment)的數(shù)據(jù)語義的圖。圖42是概念上圖示“情況E(并排)”的生成用于立體圖像的字幕數(shù)據(jù)的方法的圖。圖43是圖示“情況E (并排)”中生成的用于立體圖像的字幕數(shù)據(jù)的區(qū)域和對象的示例的圖。圖44是圖示“情況E (并排)”中每個片段的生成示例的圖。圖45是圖示“情況E (并排)”中每個片段的另一生成示例的圖。圖46是圖示以巾貞為單元更新對象開始位置“object_horizontal_position”的示例的圖。圖47是圖不其中對象開始位置“object_horizontal_position”最初設置為最大值“Max(offset_sequence (η))”、然后保持該位置的示例的圖。圖48是概念上圖示“情況E(上下)”的生成用于立體圖像的字幕數(shù)據(jù)的方法的圖。
圖49是圖示“情況E (上下)”中生成的用于立體圖像的字幕數(shù)據(jù)的區(qū)域和對象的示例的圖。圖50是圖示“情況E (上下)”中每個片段的生成示例的圖。圖51是圖示以巾貞為單元更新對象開始位置“object_horizontal_position”的示例的圖。圖52是圖示“情況E (全幀或向后兼容)”中生成的用于立體圖像的字幕數(shù)據(jù)的區(qū)域和對象的示例的圖。圖53是圖示“情況E (全幀或向后兼容)”中每個片段的生成示例的圖。圖54是圖示以巾貞為單元更新對象開始位置“object_horizontal_position”的示例的圖。
圖55是概念上圖示“情況E (并排)”中OSS設置和立體圖像數(shù)據(jù)和字幕數(shù)據(jù)的流程的圖。圖56是概念上圖示“情況E (上下)”中OSS設置和立體圖像數(shù)據(jù)和字幕數(shù)據(jù)的流程的圖。圖57是概念上圖示“情況E (全幀或向后兼容)”中OSS設置和立體圖像數(shù)據(jù)和字幕數(shù)據(jù)的流程的圖。圖58是圖示圖像上的字幕以及背景、前景對象、字幕的透視感的顯示示例的圖。圖59是圖示圖像上的字幕以及用于顯示字幕的左眼字幕LGI和右眼字幕RGI的顯示示例的圖。圖60是圖示配置圖像收發(fā)系統(tǒng)的機頂盒的配置示例的方塊圖。圖61是圖示配置機頂盒的位流處理單元的配置示例的方塊圖。圖62是圖示配置圖像收發(fā)系統(tǒng)的電視接收機的配置示例的方塊圖。圖63是圖示圖像收發(fā)系統(tǒng)的另一配置示例的方塊圖。圖64是描述屏幕上的對象的左和右圖像的顯示位置以及當使用雙眼視差顯示立體圖像時立體圖像的再現(xiàn)位置之間的關(guān)系的圖。
具體實施例方式以下，將描述用于執(zhí)行本發(fā)明的模式(以下稱為“實施例”)。將按照以下順序呈現(xiàn)描述。I.實施例2.修改示例〈I.實施例〉[圖像收發(fā)系統(tǒng)的配置示例]圖I圖示根據(jù)實施例的圖像收發(fā)系統(tǒng)10的配置示例。圖像收發(fā)系統(tǒng)10包括廣播站100、機頂盒(STB) 200和電視接收機(TV) 300。機頂盒200通過HDMI (高清晰度多媒體接口)的數(shù)字接口與電視接收機300連接。機頂盒200使用HDMI電纜400與電視接收機300連接。HDMI端子202布置在機頂盒200中。HDMI端子302布置在電視接收機300中。HDMI電纜400的一端連接到機頂盒200的HDMI端子202，并且HDMI電纜400的另一端連接電視接收機300的HDMI端子302。
[廣播站的描述]廣播站100通過廣播波發(fā)送位流數(shù)據(jù)BSD。廣播站100包括發(fā)送數(shù)據(jù)生成單元110，其生成位流數(shù)據(jù)BSD。位流數(shù)據(jù)BSD包括立體圖像數(shù)據(jù)、音頻數(shù)據(jù)、疊加信息的數(shù)據(jù)等。立體圖像數(shù)據(jù)具有預定發(fā)送格式，并且包括用于顯示立體圖像的左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)。疊加信息通常指字幕、圖形信息、文本信息等，但是在本實施例中指字幕?！鞍l(fā)送數(shù)據(jù)生成單元的配置示例”圖2圖示廣播站100中的發(fā)送數(shù)據(jù)生成單元110的配置示例。發(fā)送數(shù)據(jù)生成單元110包括數(shù)據(jù)提取單元(歸檔單元)130、視差信息生成單元131、視頻編碼器113、音頻編碼器117、字幕生成單元132、字幕處理單元133、字幕編碼器134和復用器122。例如，數(shù)據(jù)記錄介質(zhì)130a可拆卸地安裝到數(shù)據(jù)提取單元130。在數(shù)據(jù)記錄介質(zhì)130a中，包括左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)的立體圖像數(shù)據(jù)保持記錄，并且音頻數(shù)據(jù)和視 差信息與立體圖像數(shù)據(jù)相關(guān)聯(lián)地保持記錄。數(shù)據(jù)提取單元130從數(shù)據(jù)記錄介質(zhì)130a提取立體圖像數(shù)據(jù)、音頻數(shù)據(jù)和視差信息，并且輸出立體圖像數(shù)據(jù)、音頻數(shù)據(jù)和視差信息。數(shù)據(jù)記錄介質(zhì)130a的示例包括盤形記錄介質(zhì)和半導體存儲器。記錄介質(zhì)130a中記錄的立體圖像數(shù)據(jù)是預定發(fā)送格式的立體圖像數(shù)據(jù)。將描述立體圖像數(shù)據(jù)(3D圖像數(shù)據(jù))的發(fā)送格式的示例。這里，描述第一到第三發(fā)送格式，但是可以使用任何其他發(fā)送格式。這里，將描述這樣的情況作為示例，其中左眼(L)圖像數(shù)據(jù)和右眼(R)圖像數(shù)據(jù)的每個是具有預定分辨率(例如，如圖3所示的1920X1080p)的像素格式的圖像數(shù)據(jù)。第一發(fā)送格式是上下格式，并且是在垂直方向的第一半中發(fā)送左眼圖像數(shù)據(jù)的每行的數(shù)據(jù)，并且在垂直方向的第二半中發(fā)送右眼圖像數(shù)據(jù)的每行的數(shù)據(jù)，如圖4 (a)所示。在這樣的情況下，因為左眼圖像數(shù)據(jù)的各行和右眼圖像數(shù)據(jù)的各行被稀疏為1/2，所以垂直分辨率變?yōu)樵夹盘柕囊话搿５诙l(fā)送格式是并排格式，并且是在水平方向的第一半中發(fā)送左眼圖像數(shù)據(jù)的像素數(shù)據(jù)，并且在水平方向的第二半中發(fā)送右眼圖像數(shù)據(jù)的像素數(shù)據(jù)，如圖4 (b)所示。在這樣的情況下，左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)的每個的像素數(shù)據(jù)被稀疏為1/2。水平分辨率變?yōu)樵夹盘柕囊话?。第三發(fā)送格式是全幀格式、幀順序格式或向后兼容格式，并且是以幀為單元順序地切換并發(fā)送左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)的格式，如圖4 (c)所示。例如，數(shù)據(jù)記錄介質(zhì)130a中記錄的視差信息指配置圖像的每個像素的視差矢量。將描述檢測視差矢量的示例。這里，將描述檢測右眼圖像關(guān)于左眼圖像的視差矢量的示例。如圖5所示，將左眼圖像設為檢測圖像，并且右眼圖像設為參考圖像。在該示例中，檢測在位置(xi, yi)和(xj, yj)處的視差矢量。將描述檢測在位置(xi，yi)處的視差矢量的情況作為示例。在該情況下，在左眼圖像中，位于位置(xi，yi)處的像素設為左上側(cè)，并且例如設置4X4、8X8或16X16的像素塊(視差檢測塊)Bi。然后，在右眼圖像中，搜索匹配像素塊Bi的像素塊。在這樣的情況下，在右眼圖像中，設置以(xi，yi)位置作為其中心的搜索范圍，并且該搜索范圍內(nèi)的各個像素順序地設為感興趣的像素，并且順序地設置與上述像素塊Bi像素的例如4X4、8X8或16X16的比較塊。
計算順序設置的像素塊Bi和比較塊的對應的各個像素之間的差的絕對值的和。這里，如圖6所示，當像素塊Bi的像素值是L (x，y)并且比較塊的像素值是R (x，y)時，像素塊Bi和特定比較塊之間的差的絕對值的和表示為Σ L(x, y)-R(x, y) |。當在右眼圖像中設置的搜索范圍中包括η個像素時，最終獲取η個和SI到Sn，并且從它們中選擇最小和Smin。然后，可以從獲得和Smin的比較塊中獲取位于左上側(cè)的像素的位置(xi’，yi’)。相應地，檢測位置(xi，yi)處的視差矢量作為(xi’-xi，yi’-yi)。盡管沒有呈現(xiàn)詳細描述，但是同樣對于位置(xj，yj)處的視差矢量，在左眼圖像中，位于位置(xj, yj)處的像素設為左上側(cè)，并且例如設置4X4、8X8或16X 16的像素塊Bj，使得可以以類似處理檢測視差矢量。返回圖2，視頻編碼器112使用MPEG4-AVC、MPEG2、VC-I等編碼從數(shù)據(jù)提取單元130提取的立體圖像數(shù)據(jù)，并且生成視頻數(shù)據(jù)流(視頻基本流)。音頻編碼器113使用AC3、AAC等編碼從數(shù)據(jù)提取單元111提取的音頻數(shù)據(jù)，并且生成音頻數(shù)據(jù)流(音頻基本流)。字幕生成單元132生成作為DVB (數(shù)字視頻廣播)的字幕數(shù)據(jù)的字幕數(shù)據(jù)。字幕 數(shù)據(jù)是2D圖像字幕數(shù)據(jù)。字幕生成單元132配置疊加信息數(shù)據(jù)輸出單元。視差信息生成單元131對從數(shù)據(jù)提取單元130輸出的視差信息(B卩，每個像素的視差矢量(水平方向上的視差矢量))執(zhí)行下轉(zhuǎn)換處理，并且生成對應于字幕數(shù)據(jù)的每頁的每個區(qū)域的視差矢量。視差信息生成單元131配置視差信息輸出單元。應用于字幕的視差信息可以以頁為單位、以區(qū)域為單位或以對象為單位附接。視差信息不一定需要由視差信息生成單元131生成，并且可以從外部分開地提供。圖7圖示視差信息生成單元131執(zhí)行的下轉(zhuǎn)換處理的示例。首先，視差信息生成單元134使用每個像素的視差矢量獲得每個塊的視差矢量，如圖7 (a)所示。如上所述，塊對應于位于最低層的像素的上層，并且通過在水平方向和垂直方向上將圖像(畫面)區(qū)域劃分為預定尺寸來配置。然后，選擇塊中存在的所有像素的視差矢量中具有最大值的視差矢量作為每個塊的視差矢量。接著，視差信息生成單元131使用每個塊的視差矢量獲得每個組(塊的組)的視差矢量，如圖7 (b)所示。組對應于塊的上層，并且通過將多個相鄰塊一起分組而獲得。在圖7(b)的示例中，每個組配置有以虛線框為邊界的4個塊。然后，例如，選擇在對應的組中的所有塊的視差矢量中具有最大值的視差矢量作為每個組的視差矢量。接著，視差信息生成單元131使用每個組的視差矢量獲得每個分區(qū)的視差矢量，如圖7 (c)所示。分區(qū)對應于組的上層，并且通過將多個相鄰組一起分組而獲得。在圖7(c)的示例中，每個分區(qū)配置有以虛線框為邊界的2個組。然后，例如，選擇在對應的分區(qū)中的所有組的視差矢量中具有最大值的視差矢量作為每個分區(qū)的視差矢量。接著，視差信息生成單元131使用每個分區(qū)的視差矢量獲得位于最高層的整個畫面(整個圖像)的視差矢量，如圖7 (d)所示。在圖7 (c)的示例中，在整個畫面中包括以虛線框為邊界的4個分區(qū)。然后，例如，選擇在整個畫面中包括的所有分區(qū)的視差矢量中具有最大值的視差矢量作為整個畫面的視差矢量。以上述方式，視差信息生成單元131可以通過對位于最低層的每個像素的視差矢量執(zhí)行下轉(zhuǎn)換處理，獲得包括塊、組、分區(qū)和整個畫面的每個層的每個區(qū)域的視差矢量。在圖7所示的下轉(zhuǎn)換處理的示例中，除了像素的層以外，最終獲得塊、組、分區(qū)和整個畫面的四層的視差矢量。然而，層數(shù)、每層的區(qū)域劃分方法、和區(qū)域數(shù)不限于上述示例。返回圖2，字幕處理單元133將字幕生成單元132生成的字幕數(shù)據(jù)，轉(zhuǎn)換為用于對應于數(shù)據(jù)提取單元130提取的立體圖像數(shù)據(jù)的發(fā)送格式的立體圖像(3D圖像)的字幕數(shù)據(jù)。字幕處理單元133配置重疊信息數(shù)據(jù)處理單元133，并且用于立體圖像數(shù)據(jù)的轉(zhuǎn)換后的字幕數(shù)據(jù)配置發(fā)送重疊信息數(shù)據(jù)。用于立體圖像的字幕數(shù)據(jù)包括左眼字幕數(shù)據(jù)和右眼字幕數(shù)據(jù)。這里，左眼字幕數(shù)據(jù)對應于立體圖像數(shù)據(jù)中包括的左眼圖像數(shù)據(jù)，并且用于接收側(cè)來生成疊加立體圖像數(shù)據(jù)中包括的左眼圖像數(shù)據(jù)的左眼字幕。此外，右眼字幕數(shù)據(jù)對應于立體圖像數(shù)據(jù)中包括的右眼圖像數(shù)據(jù)，并且用于接收側(cè)來生成疊加立體圖像數(shù)據(jù)中包括的右眼圖像數(shù)據(jù)的右眼字眷。字幕處理單元133基于來自視差信息生成單元131的對應于每頁的每個區(qū)域的視差矢量，通過至少偏移左眼字幕或右眼字幕，使得左眼字幕和右眼字幕之間出現(xiàn)視差。通過 如上所述使得左眼字幕和右眼字幕之間出現(xiàn)視差，并且在接收側(cè)，即使不執(zhí)行使得左眼字幕和右眼字幕之間出現(xiàn)視差的處理，在字幕顯示時與圖像中的每個對象的透視感的一致性也可以保持優(yōu)化狀態(tài)。此外，字幕處理單元133基于來自視差信息生成單元131的對應于每頁的每個區(qū)域的視差矢量，在顯示字幕的預定數(shù)量的幀時段的每個幀中生成被使得在左眼字幕和右眼字幕之間出現(xiàn)的視差的信息。以下，為了描述簡單，預定數(shù)量的幀時段的各幀中的視差的信息適當?shù)胤Q為“視差信息組”。在該實施例中，關(guān)于前一幀的視差的信息的偏移信息用作配置視差信息組的每個幀的視差的信息，并且因此抑制了數(shù)據(jù)量。字幕數(shù)據(jù)配置有諸如PCS (頁構(gòu)成段)、RCS (區(qū)域構(gòu)成段)和ODS (對象數(shù)據(jù)段)的段。PCS指定頁中的區(qū)域位置。RCS指定區(qū)域的大小或?qū)ο蟮木幋a模式，并且指定對象的開始位置。ODS包括編碼的像素數(shù)據(jù)。在該實施例中，定義新的段，并且視差信息組包括在該段中。因此，視差信息組通過字幕數(shù)據(jù)和段類型區(qū)分。稍后將進一步描述字幕處理單元133的處理細節(jié)。字幕編碼器134生成包括用于立體圖像的字幕數(shù)據(jù)和從字幕處理單元133輸出的視差信息組的字幕數(shù)據(jù)流(字幕基本流)。復用器122通過復用從視頻編碼器113、音頻編碼器117和字幕編碼器134輸出的流，獲得用作位流數(shù)據(jù)的復用數(shù)據(jù)流(傳送流)。在該實施例中，復用器122將用于識別用于立體圖像的字幕數(shù)據(jù)的包含的識別數(shù)據(jù)插入字幕數(shù)據(jù)流中。具體地，在EIT (時間信息表)中包括的“Component_Descriptor (組成描述符)”中描述 Stream_content (流內(nèi)容)(‘0x03’=DVB 字幕)&Component_type (組成類型)。新定義Component_type (用于3D目標)以表示用于立體圖像的字幕數(shù)據(jù)。將簡要描述圖2所示的發(fā)送數(shù)據(jù)生成單元110的操作。從數(shù)據(jù)提取單元130輸出的立體圖像數(shù)據(jù)提供到視頻編碼器113。視頻編碼器113使用MPEG4-AVC、MPEG2、VC-I等編碼立體圖像數(shù)據(jù)，并且生成包括編碼的視頻數(shù)據(jù)的視頻數(shù)據(jù)流。視頻數(shù)據(jù)流提供到復用器 122。從數(shù)據(jù)提取單元130輸出的音頻數(shù)據(jù)提供到音頻編碼器117。音頻編碼器117使用MPEG-2音頻AAC、MPEG-4AAC等編碼音頻數(shù)據(jù)，并且使用包括編碼的音頻數(shù)據(jù)的音頻數(shù)據(jù)流。音頻數(shù)據(jù)流提供到復用器122。
字幕生成單元132生成作為DVB的字幕數(shù)據(jù)的字幕數(shù)據(jù)(用于2D圖像)。字幕數(shù)據(jù)提供到視差信息生成單元131和字幕處理單元133。從數(shù)據(jù)提取單元130輸出的視差信息(即，每個像素的視差矢量)提供到視差信息生成單元131。視差信息生成單元131對每個像素的視差矢量執(zhí)行下轉(zhuǎn)換處理，并且生成對應于字幕數(shù)據(jù)的每頁的每個區(qū)域的視差矢量。對應于每個區(qū)域的視差矢量提供到字幕處理單元133。字幕處理單元133將字幕生成單元132生成的2D圖像字幕數(shù)據(jù)轉(zhuǎn)換為用于對應于從數(shù)據(jù)提取單元130提取的立體圖像數(shù)據(jù)的發(fā)送格式的立體圖像的字幕數(shù)據(jù)。用于立體圖像的字幕數(shù)據(jù)包括左眼字幕數(shù)據(jù)和右眼字幕數(shù)據(jù)。在該情況下，字幕處理單元133基于來自視差信息生成單元131的對應于每頁的每個區(qū)域的視差矢量，通過至少偏移左眼字幕或右眼字幕，使得左眼字幕和右眼字幕之間出現(xiàn)視差?？商娲兀蛇@樣的數(shù)據(jù)，其中包括一只眼的字幕并將視差信息增加到另一只眼的字幕并且發(fā)送，使得另一只眼的字幕顯示在對應于視差信息的偏移位置處。
字幕處理單元133基于來自視差信息生成單元131的對應于每頁的每個區(qū)域的視差矢量，生成視差信息組(在顯示字幕的預定數(shù)量的幀時段的各幀中使得在左眼字幕和右眼字幕之間出現(xiàn)的視差的信息)。在該情況下，關(guān)于前一幀的視差的信息的偏移信息用作配置視差信息組的每幀的視差的信息，以便抑制數(shù)據(jù)量。用于立體圖像的字幕數(shù)據(jù)和字幕處理單元133獲得的視差信息組提供給字幕編碼器134。字幕編碼器134生成包括用于立體圖像的字幕數(shù)據(jù)和視差信息組的字幕數(shù)據(jù)流。該字幕數(shù)據(jù)流包括具有視差信息組的新定義的片段以及其中包括用于立體圖像的字幕數(shù)據(jù)的片段(如PCS、RCS和0DS)。來自視頻編碼器113、音頻編碼器117和字幕編碼器134的數(shù)據(jù)流提供給復用器122，如上所述。然后，復用器122獲得復用數(shù)據(jù)流，其中各數(shù)據(jù)流以分組的形式復用為位流數(shù)據(jù)(傳送流)BSD。圖8圖示傳送流(位流數(shù)據(jù))的配置示例。該傳送流包括通過分組化基本流獲得的PES分組。在該配置示例中，包括視頻基本流的PES分組“VideoPES”、音頻基本流的PES分組“Audio PES”和字幕基本流的PES分組“SubtitlePES”。在該實施例中，字幕基本流(字幕數(shù)據(jù)流)包括用于立體圖像的字幕數(shù)據(jù)。字幕基本流包括傳統(tǒng)上眾所周知的諸如PCS (頁組成片段)、RCS (區(qū)域組成片段)和ODS (對象數(shù)據(jù)片段)的片段。圖9圖不PCS (page_composition_segment)的結(jié)構(gòu)。PCS的片段類型是如圖10所不的 “0x10”?！皉egion_horizontal_address (區(qū)域水平地址)”和 “region_vertical_address (區(qū)域垂直地址)”表示區(qū)域的開始位置。諸如RSC和ODS的其他片段的結(jié)構(gòu)在圖中未示出。例如，RCS的片段類型是如圖10所示的“0x11”。此外，例如，ODS的片段類型是如圖10所示的“0x13”。此外，根據(jù)需要，諸如SFI (stereo_format_indication_segment (立體格式指示片段))、RCP (region_copy_segment (區(qū)域復制片段))、0TS (offset_temporal_sequence_segment (偏移時間序列片段))和OSS (offset_sequence_segment (偏移序列片段))的片段包括在字幕數(shù)據(jù)中。SDI指定3D擴展定義。RCP定義區(qū)域的復制目的地的位置。OTS控制時間軸上的動態(tài)區(qū)域位置。OSS指定視差偏移的控制和3D擴展的設置信息。例如，如圖10所示，OSS的片段類型是“0x44”，SFI的片段類型是“0x45”，RCP的片段類型是“0x47”，并且OTS的片段類型是“0x48”。稍后將描述SFI、RCP、0TS和OSS片段的詳細結(jié)構(gòu)。SFI、RCP、0TS和OSS的每個可以獨立定義。例如，只有SFI，SFI和0TS、或只有OSS存在，并且對應于每種情況，它們增加到現(xiàn)有的片段。傳送流包括PMT (節(jié)目地圖表)作為PSI (節(jié)目特定信息)。PSI是表示傳送流中包括的每個基本流所屬的節(jié)目的信息。傳送流進一步包括EIT (事件信息表)作為SI (服務信息)以執(zhí)行事件單元的管理。節(jié)目單元的元數(shù)據(jù)在EIT中描述。描述與整個節(jié)目有關(guān)的信息的節(jié)目描述符在PMT中存在。此外，具有與每個基本流有關(guān)的 目息的基本環(huán)路在PMT中存在。在該配置不例中，存在視頻基本環(huán)路、首頻基本環(huán)路和字幕基本環(huán)路。在每個基本環(huán)路中，為每個流安排諸如分組標識符(PID)的信息，并且 即使沒有在圖中示出，也安排描述與基本流有關(guān)的信息的描述符。在EIT中插入“Component_Descriptor (組成描述符)”。在該實施例中，可能識別Stream_content (‘0x03’=DVD 字幕)&Component_type (用于 3D 目標)在組成描述符中描述，并且用于立體圖像的字幕數(shù)據(jù)包括在字幕數(shù)據(jù)流中。在該實施例中，如圖11所示，當表示流內(nèi)容的‘component_descriptor’的‘stream_content’表示字幕時，新定義表示3D字幕的格式的信息(Component_type=0xl5, 0x25)。[字幕處理單元的處理]將描述圖2所示的發(fā)送數(shù)據(jù)生成單元110的字幕處理單元133的處理的細節(jié)。如上所述，字幕處理單元133將2D圖像字幕數(shù)據(jù)轉(zhuǎn)換為用于立體圖像的字幕數(shù)據(jù)，并且生成在顯示字幕的預定數(shù)量的幀時段的每幀中使得左眼字幕和右眼字幕之間出現(xiàn)的視差的信
肩、O例如，字幕處理單元133的字幕數(shù)據(jù)(包括視差信息組)具有圖12所示的情況A到E的任何一個的配置。在“情況A”中，生成左眼字幕數(shù)據(jù)和右眼字幕數(shù)據(jù)作為相同區(qū)域的不同對象的數(shù)據(jù)。在“情況A”中，如圖12 (a)所示，與傳統(tǒng)上眾所周知的片段(如PCS、RCS和0DS) —起，OTS用作新定義的片段。圖12只圖示PCS、RCS和ODS作為傳統(tǒng)上眾所周知的片段，并且其他片段沒有示出。在“情況B”中，生成左眼字幕數(shù)據(jù)和右眼字幕數(shù)據(jù)作為相同頁的不同區(qū)域的數(shù)據(jù)。在該情況下，例如，生成左眼字幕數(shù)據(jù)作為其區(qū)域ID (Region_id)為偶數(shù)的區(qū)域的數(shù)據(jù)，并且生成右眼字幕數(shù)據(jù)作為其區(qū)域ID (Regionjd)為奇數(shù)的區(qū)域的數(shù)據(jù)。在“情況B”中，如圖12 (b)所示，與傳統(tǒng)上眾所周知的片段(如PCS、RCS和0DS) —起，SFI和OTS用作新定義的片段。在“情況C”中。生成左眼字幕數(shù)據(jù)和右眼字幕數(shù)據(jù)作為不同頁的區(qū)域的數(shù)據(jù)。在該情況下，例如，生成左眼字幕數(shù)據(jù)作為其頁ID (Pagejd)為偶數(shù)的區(qū)域的數(shù)據(jù)。此外，生成右眼字幕數(shù)據(jù)作為其頁ID (Pagejd)為奇數(shù)的區(qū)域的數(shù)據(jù)。在“情況C”中，如圖12 (c)所示，與傳統(tǒng)上眾所周知的片段(如PCS、RCS和0DS) —起，SFI和OTS用作新定義的片段。在“情況D”中，生成左眼字幕數(shù)據(jù)和右眼字幕數(shù)據(jù)之一作為預定頁的區(qū)域的數(shù)據(jù)。此外，生成左眼字幕數(shù)據(jù)和右眼字幕數(shù)據(jù)的另一作為從該區(qū)域的數(shù)據(jù)復制的復制區(qū)域(copied_region)的數(shù)據(jù)。在“情況D”中，如圖12 (d)所示，與傳統(tǒng)上眾所周知的片段(如PCS、RCS和ODS) —起，RCP和OTS用作新定義的片段。在“情況E”中，根據(jù)立體圖像數(shù)據(jù)的傳輸格式生成左眼字幕數(shù)據(jù)和右眼字幕數(shù)據(jù)。例如，當傳輸格式為并排格式時，生成左眼字幕數(shù)據(jù)和右眼字幕數(shù)據(jù)作為相同頁的相同區(qū)域的數(shù)據(jù)。此時，進行設置，使得對象可以安排在對應于左眼字幕和右眼字幕的區(qū)域中的預定位置。此外，例如當傳輸格式為上下格式時，生成左眼字幕數(shù)據(jù)和右眼字幕數(shù)據(jù)作為相同頁的不同區(qū)域的數(shù)據(jù)。在“情況E”中，如圖12 (e)所示，與傳統(tǒng)上眾所周知的片段(如PCS、RCS和0DS) —起，OSSS用作新定義的片段。[關(guān)于情況A]圖13概念上圖示為“情況A”的立體圖像生成字幕數(shù)據(jù)的方法。這里，將結(jié)合立體圖像數(shù)據(jù)的傳輸格式為并排格式的示例進行描述。圖13 (a)圖示2D圖像字幕數(shù)據(jù)的區(qū)域。首先，字幕處理單元133將2D圖像字幕數(shù)據(jù)的區(qū)域的大小轉(zhuǎn)換為適于并排格式的 大小，如圖13 (b)所示，然后生成轉(zhuǎn)換后大小的位圖數(shù)據(jù)。接著，字幕處理單元133設置具有轉(zhuǎn)換后大小的位圖數(shù)據(jù)作為用于立體圖像的字幕數(shù)據(jù)的區(qū)域的分量，如圖13 (c)所示。此時,每個對象的開始位置(region_horizontal_address)設為偏移對應于左眼圖像(左視圖)和右眼圖像(右視圖)之間的視差的距離(A-B=視差/2)的位置。字幕處理單元133如上所述將2D圖像字幕數(shù)據(jù)轉(zhuǎn)換為用于立體圖像的字幕數(shù)據(jù)，并且生成對應于用于立體圖像的字幕數(shù)據(jù)的片段(如PCS、RCS和0DS)。圖14圖示“情況A”中生成的用于立體圖像的字幕數(shù)據(jù)的區(qū)域和對象的示例。這里，區(qū)域的開始位置為“Region_horizontal_address”。對于左眼圖像(左視圖)側(cè)的對象，開始位置為“object_horizontal_positionl”，以及“Ob ject_id=l ”。對于右眼圖像(右視圖)側(cè)的對象，開始位置為 “object_horizontal_position2”，以及 “Object_id=2”。圖15圖示“情況A”中每個片段的生成示例(示例I)。在該生成示例中，區(qū)域(Region_id=0A)的開始位置(region_horizontal_address)保持在 PCS(頁組成片段)指定。此外，在“Region_id=0A”的RCS(區(qū)域組成片段)中，參考“Object_id=l”的0DS，并且對象的開始位置 “object_horizontal_positionl” 保持指定。此外，在 “Region_id=0A” 的 RCS(區(qū)域組成片段)中，參考“0bject_id=2”的0DS,并且對象的開始位置“ob ject_horizontal_position2”保持指定。在該生成示例(示例I)中，沒有生成0TS。圖16圖示“情況A”中的每個片段的生成示例(示例2)。在該生成示例中，類似于圖15所示的生成示例(示例1)，不僅生成PCS、RCS和0DS,還生成OTS (offset_temporal_sequence_segment)。視差信息組包括在OTS的片段中。如上所述，視差信息組指在顯示字幕的預定數(shù)量的幀時段的各幀中使得在左眼字幕和右眼字幕之間出現(xiàn)的視差的信息。這里，關(guān)于前一幀的視差的信息的偏移信息用作配置視差信息組的每幀的視差的信息，以便抑制數(shù)據(jù)量。圖17 圖不 OTS (offset_temporal_sequence_segment)的語法不例。圖 18 圖示OTS的主要數(shù)據(jù)語義。在該語法中，包括“Sync_byte”、“segment_type”、“page_id”和“segment_length”的信息?！皊egment_type”是表示片段類型的8位數(shù)據(jù)，并且在此使用表示OTS的“0x48”?！皊egment_length”是表示片段的長度(大小)的8位數(shù)據(jù)。該數(shù)據(jù)表示作為片段的長度的在“ segment_l ength ”之后的字節(jié)數(shù)量?！皉egion_count”表示頁中的區(qū)域數(shù)量。在OTS中，包括用“region_id”識別的區(qū)域的視差信息組，其在數(shù)量上等于區(qū)域的數(shù)量?！癴rame_COunt”表示其中在顯示幀時段期間提供offset_sequence的巾貞的數(shù)量。“ of f set_sequence ”是用作關(guān)于前一幀的視差信息的偏移信息的2位信息?！皁ffset_sequence=01 ” 表不偏移值為 “+I ”。“offset_sequence=10” 表不偏移值為 “-I ”。此外，“offset_sequence=ll”表示偏移值從前一巾貞不改變?！皁ffset_precision”是表示用“0ffset_sequence”表示的偏移值中的“I”的精度的I位信息，即，“I”的像素數(shù)量?！皁ffset_precision=0” 表示偏移值中的 “I” 為 I 個像素?！皁ffset_precision=l” 表示偏移值中的“I”為兩個像素。如上所述，當OTS包括在字幕數(shù)據(jù)流中時，接收側(cè)可以基于預定數(shù)量的幀時段的每幀中的偏移值“offSet_SeqUenCe”，使得左眼字幕和右眼字幕之間出現(xiàn)預定視差。例如，接收側(cè)可以順序地更新左眼字幕和右眼字幕之間的視差。 在該情況下，接收側(cè)通過OTS保持向后兼容性，并且可以以幀為單位簡單地更新對象開始位置“object_horizontal_position”。換句話說，以“0bject_id”為單位更新“ob ject_ horizontal_position”,使得由“offset_sequence (T)”指定的差異量增加到每幀中的幀TO (初始幀)的初始位置。結(jié)果，在顯示字幕的預定數(shù)量的幀時段中，順序地更新左眼字幕和右眼字幕之間的視差。圖19圖示以巾貞為單位更新對象開始位置“object_horizontal_position”的示例。假設在巾貞TO (初始巾貞)中，“Object_id=l”的對象開始位置為“object_horizontal_posit ion I (TO)”,并且“Ob ject_id=2”的對象開始位置為 “ob ject_horizontal_position2(TO)”。作為下一幀的幀Tl的對象開始位置如下所示更新。這里，幀Tl的偏移值假設為offset_sequence(Tl )o 換句話說，“0bject_id=l ”的對象開始位置為“object_horizontal_positionl (Tl)，，為 “object_horizontal_positionl (TO) +offset_sequence (Tl)，，。此夕卜，“0b ject_id=2” 的對象開始位置為“ob ject_horizontal_position2 (Tl)” 為“ob ject_horizontal_position2 (TO) -offset_sequence (Tl)，，。此外，作為下一幀的幀T2的對象開始位置如下所示更新。這里，幀T2的偏移值假設為offset_sequence (T2)。換句話說，“0bject_id=l”的對象開始位置為“object_horizontal_position I (T2)，，為“object_horizontal_positionl (Tl)+offset_sequence(T2)”。此外，“0bject_id=2” 的對象開始位置為 “object_horizontal_position2 (T2)”為 “object_horizontal_position2 (Tl) -offset_sequence (T2)，，。在下面，每巾貞的對象開始位置以相同方式獲得并且以“0bject_id”為單位更新。此外，例如，在接收側(cè)，可能使得左眼字幕和右眼字幕之間出現(xiàn)視差，該視差基于預定數(shù)量的幀時段的代表性值(如其最大值或其平均值)。在該情況下，在接收側(cè)，基于每幀的偏移值“ofTSet_SeqUenCe (T)”，預先計算直到對應幀的偏移值的累積值。然后，在接收側(cè)，各巾貞的累計值、最大值“Max (offset_sequence (η))”或平均值“Ave (offset_sequence(η))”加到幀TO (初始幀)的初始位置。結(jié)果，在顯示字幕的預定數(shù)量的幀時段中，時段基于預定數(shù)量的幀時段的最大值或平均值的視差出現(xiàn)在左眼字幕和右眼字幕之間。
圖20圖示這樣的示例,其中對象開始位置“object_horizontal_position”最初設為最大值“Max (offset_sequence (η))”,然后保持位置。假設“Object_id=l”的對象開始位置的初始位置為“object_horizontal_positionl”,并且“Object_id=2”的對象開始位置的初始位置為 “object_horizontal_position2”。在幀TO (初始幀)中，對象開始位置設置如下。換句話說，“Object_id=l”的對象開始位置的初始位置 “object_horizontal_positionl (TO)” 設為 “ob ject_horizontal_positionl+Max (offset_sequence (n))”。此外，“Object_id=2” 的對象開始位置的初始位置“object_horizontal_position2 (TO)，，設為“object_horizontal_position2_Max(offset_sequence (n))”。然后，在隨后巾貞中，保持“Object_id=l ” 和“Object_id=2” 的對象開始位置。[關(guān)于情況B]圖21概念上圖示為“情況B”的立體圖像生成字幕數(shù)據(jù)的方法。這里，將結(jié)合立體圖像數(shù)據(jù)的傳輸格式為并排格式的示例進行描述。圖21 (a)圖示2D圖像字幕數(shù)據(jù)的區(qū)域。首先，字幕處理單元133將2D圖像字幕數(shù)據(jù)的區(qū)域的大小轉(zhuǎn)換為適于并排格式的大小，如圖21 (b)所示，然后生成轉(zhuǎn)換后大小的位圖數(shù)據(jù)。接著，字幕處理單元133設置具有轉(zhuǎn)換后大小的位圖數(shù)據(jù)作為用于立體圖像的字幕數(shù)據(jù)的區(qū)域的分量，如圖21 (C)所示。此時，每個區(qū)域的對象的開始位置(object_horizontal_address)設為偏移對應于左眼圖像(左視圖)和右眼圖像(右視圖)之間的視差的距離(A-B=視差/2)的位置。字幕處理單元133如上所述將2D圖像字幕數(shù)據(jù)轉(zhuǎn)換為用于立體圖像的字幕數(shù)據(jù)，并且生成對應于用于立體圖像的字幕數(shù)據(jù)的片段(如PCS、RCS和0DS)。圖22圖示“情況B”中生成的用于立體圖像的字幕數(shù)據(jù)的區(qū)域和對象的示例。這里，左眼圖像(左視圖)的區(qū)域的開始位置為“Region_horizontal_addressl”,對象的開始位置為 “object_horizontal_positionl”，以及“0bject_id=l”。這里，右眼圖像(右視圖)的區(qū)域的開始位置為“Region_horizontal_address2”,對象的開始位置為“object_horizontal_position2”,以及“0b ject_id=2”。在該示例中，共同的位圖數(shù)據(jù)用作左眼字幕和右眼字幕的位圖數(shù)據(jù)。圖23圖示“情況B”中每個片段的生成示例(示例I)。在該生成示例中，左眼圖像(左視圖)側(cè)的區(qū)域(Region_id=0A)和右眼圖像(右視圖)側(cè)的區(qū)域(Region_id=0B)的開始位置(region_horizontal_address)保持在PCS (頁組成片段)指定。此外，在“Region_id=0A”的RCS (區(qū)域組成片段)中，參考“0bjeCt_id=l”的0DS，并且對象的開始位置“object_horizontal_positionl”保持指定。此外，在“Region_id=0B”的 RCS (區(qū)域組成片段)中，參考“0bject_id=l” 的 0DS,并且對象的開始位置“ob ject_horizontal_position2”保持指定。
圖24圖示“情況B”中的每個片段的生成示例(示例2)。在該生成示例中，不同的位圖數(shù)據(jù)可以用作左眼字幕和右眼字幕的位圖數(shù)據(jù)。在該生成示例中，左眼圖像(左視圖)側(cè)的區(qū)域(Region_id=0A)和右眼圖像(右視圖)側(cè)的區(qū)域(Region_id=0B)的開始位置(region_horizontal_address)保持在 PCS (頁組成片段)指定。
此外，在“Region_id=0A”的RCS (區(qū)域組成片段)中，參考“Object_id=l”的0DS，并且對象的開始位置“object_horizontal_positionl”保持指定。此外，在“Region_id=0B”的RCS (區(qū)域組成片段)中，參考“0bject_id=2”的0DS，并且對象的開始位置“object_horizontal_position2” 保持指定。圖25圖示“情況B”中的每個片段的生成示例(示例3)。在該生成示例中，類似于圖23所示的生成示例(示例1)，不僅生成PCS、RCS和ODS，還生成OTS (offset_temporal_sequence_segment)。視差信息組包括在OTS中。如上所述，視差信息組是在顯示字幕的預定數(shù)量的幀時段的各幀中使得在左眼字幕和右眼字幕之間出現(xiàn)的視差的信息。這里，關(guān)于 前一幀的視差的信息的偏移信息用作配置視差信息組的每幀的視差的信息，以便抑制數(shù)據(jù)量。ODS的結(jié)構(gòu)及其效果與“情況A”中描述的相同，因此將不重復其冗余描述。此外，在“情況B” 中，還生成新定義的 SFI (stero_format_indication_segment(立體格式指示片段))。SFI指定如上所述的3D擴展定義。圖26圖示SFI的語法的示例。圖27圖示SFI的主要數(shù)據(jù)語義。在該語義中，包括“Sync_byte”、“segment_type”、“page_id”和“segment_lenth”的信息。“segment_type”是表示片段類型的8位數(shù)據(jù)，并且在此使用表示SFI的“0x45”(見圖10)?！皊egment_length”是表示片段的長度(大小)的8位數(shù)據(jù)。該數(shù)據(jù)表示作為片段的長度的在“segmentjength”之后的字節(jié)數(shù)量?！皃age_composition_view_allocated” 是表不頁 ID “page_id” 的數(shù)值(偶數(shù)或奇數(shù))是否保持分配給左眼圖像和右眼圖像的I位數(shù)據(jù)。“page_composition_view_all0Cated=l”表示偶數(shù)值的“page_id”保持分配給左眼圖像(左視圖)，以及奇數(shù)值的“page_id”保持分配給右眼圖像(右視圖)。同時，“page_composition_view_alIocated=O”表示對頁ID “page_id”沒有特別規(guī)則。此外，“Shared_region_flag”是表示對象是否被左眼圖像和右眼圖像的區(qū)域共享的I位數(shù)據(jù)?！皊hared_region_flag=l”表示對象被左眼圖像和右眼圖像的區(qū)域共享。此夕卜，在“情況C”中，頁ID “page_id”的數(shù)值具有偶數(shù)以便表示左眼圖像(左視圖)，并且具有奇數(shù)以便表示右眼圖像(右視圖)。共同參考的ODS中的頁ID “page_id”通過表示左眼圖像(左視圖)和右眼圖像(右視圖)的一對頁ID “page_id”中較小的一個的數(shù)值指定。同時，“shared_region_flag = O ”表示對象不被左眼圖像和右眼圖像的區(qū)域共享。此外，“region_composition_view_allocated”是表不區(qū)域 ID “region_id” 的數(shù)值(偶數(shù)或奇數(shù))是否保持分配給左眼圖像和右眼圖像的I位數(shù)據(jù)?！皉egion_composition_view_allocated=l”表示偶數(shù)值的“region_id”保持分配給左眼圖像(左視圖)，以及奇數(shù)值的“region_id”保持分配給右眼圖像(右視圖)。同時,“region_composition_view_allocated=?！北硎緦^(qū)域ID “region_id”沒有特別規(guī)則。此外，“target_stereo_format”是表示作為字幕數(shù)據(jù)的目標的圖像數(shù)據(jù)的3位數(shù)據(jù)?！?00”表示全幀格式或向后兼容格式的立體圖像數(shù)據(jù)?！?01”表示并排格式的立體圖像數(shù)據(jù)?！?10”表示上下格式的立體圖像數(shù)據(jù)?！?11”表示除了立體圖像數(shù)據(jù)以外的2D圖像數(shù)據(jù)。在圖26 的 SFI 的語義中，“region_composition_view_allocated，，、“shared_region_flag，，和 “target_stereo_format” 與“情況 B，，有關(guān)。然而，“page_composition_view_allocated”、“shared_region_flag” 和 “target_stereo_format” 與“情況 C” 有關(guān)。此外，在“情況 C，，中，設置 “region_composition_view_alIocated=O”[關(guān)于情況C]圖28概念上圖示為“情況C”的立體圖像生成字幕數(shù)據(jù)的方法。這里，將結(jié)合立體圖像數(shù)據(jù)的傳輸格式為并排格式的示例進行描述。圖28 (a)圖示2D圖像字幕數(shù)據(jù)的區(qū)域。首先，字幕處理單元133將2D圖像字幕數(shù)據(jù)的區(qū)域的大小轉(zhuǎn)換為適于并排格式的大小，如圖28 (b)所示，然后生成轉(zhuǎn)換后大小的位圖數(shù)據(jù)。接著，字幕處理單元133設置具有轉(zhuǎn)換后大小的位圖數(shù)據(jù)作為用于立體圖像的字幕數(shù)據(jù)的每頁的區(qū)域的分量，如圖28 (c)和28 (d)所示。此時，每個對象的開始位置(region_horizontal_address)設為偏移對應于左眼圖像(左視圖)和右眼圖像(右視圖)之 間的視差的距離(A-B=視差/2)的位置。 字幕處理單元133如上所述將2D圖像字幕數(shù)據(jù)轉(zhuǎn)換為用于立體圖像的字幕數(shù)據(jù)，并且生成對應于用于立體圖像的字幕數(shù)據(jù)的片段(如PCS、RCS和0DS)。圖29圖示“情況C”中生成的用于立體圖像的字幕數(shù)據(jù)的區(qū)域和對象的示例。這里，左眼圖像(左視圖)的頁(Page_id=偶數(shù))的區(qū)域的開始位置為“Region_horizontal_address I ”。對象的開始位置為 “ob ject_horizontal_positionl，，，以及 “Ob ject_id=l ”。此外，右眼圖像(右視圖)的頁(Page_id=奇數(shù))的區(qū)域的開始位置為“object_horizontal_position2”。對象的開始位置為 “object_horizontal_position2”，以及 “0bject_id=2”。在該示例中，共同的位圖數(shù)據(jù)用作左眼字幕和右眼字幕的位圖數(shù)據(jù)。圖30圖示“情況C”中每個片段的生成示例(示例I)。在該生成示例中，在左眼圖像(左視圖)側(cè)的PCS (頁組成片段)中，區(qū)域(Region_id=0A)的開始位置(region_horizontal_addressl)保持指定。此外,在“Region_id=0A”的RCS (區(qū)域組成片段)中，參考“0bject_id=l”的0DS,并且對象的開始位置“object_horizontal_positionl”保持指定。此外，在該生成示例中，在右眼圖像(右視圖)的PCS (頁組成片段)中，區(qū)域(Region_id=0B)的開始位置(region_horizontal_address2)保持指定。此外，在“Region_id=0B”的RCS (區(qū)域組成片段)中，參考“0bjeCt_id=l”的0DS，并且對象的開始位置“ob ject_horizontal_position2，，保持指定。圖31圖示“情況C”中的每個片段的生成示例(示例2)。在該生成示例中，不同的位圖數(shù)據(jù)可以用作左眼字幕和右眼字幕的位圖數(shù)據(jù)。在該生成示例中，在左眼圖像(左視圖)側(cè)的PCS (頁組成片段)中，區(qū)域(Region_id=0A)的開始位置(region_horizontal_addressl)保持指定。此外,在“Region_id=0A”的RCS (區(qū)域組成片段)中，參考“0bject_id=l”的0DS,并且對象的開始位置“object_horizontal_positionl”保持指定。此外，在該生成示例中，在右眼圖像(右視圖)的PCS (頁組成片段)中，區(qū)域(Region_id=0B)的開始位置(region_horizontal_address2)保持指定。此外，在“Region_id=0B”的RCS (區(qū)域組成片段)中，參考“0bject_id=2”的0DS，并且對象的開始位置“ob ject_horizontal_position2，，保持指定。圖32圖示“情況C”中的每個片段的生成示例(示例3)。在該生成示例中，在左眼圖像(左視圖)側(cè)和右眼圖像(右視圖)的PCS中參考共同的RCS。在該生成示例中，在左眼圖像(左視圖)側(cè)的PCS (頁組成片段)中，參考區(qū)域(Region_id=0A)的RCS，并且開始位置 (region_horizontal_addressl)保持指定。此外，在右眼圖像(右視圖)側(cè)的PCS (頁組成片 段)中，參考區(qū)域(Region_id=0A)的 RCS,并且開始位置(region_horizontal_address2)保 持指定。此外，在“Region_id=0A”的RCS (區(qū)域組成片段)中，參考“Object_id=l”的0DS， 并且對象的開始位置“object_horizontal_positionl”保持指定。圖33圖示“情況C”中的每個片段的生成示例(示例4)。在該生成示例中，類似于 圖30所示的生成示例(示例1)，不僅生成PCS、RCS和0DS,還生成OTS (offset_temporal_ sequence_segment)。視差信息組包括在0TS中。如上所述，視差信息組指在顯示字幕的預定數(shù)量的幀 時段的各幀中使得在左眼字幕和右眼字幕之間出現(xiàn)的視差的信息。這里，關(guān)于前一幀的視 差的信息的偏移信息用作配置視差信息組的每幀的視差的信息，以便抑制數(shù)據(jù)量。0DS的結(jié) 構(gòu)及其效果與“情況A”中描述的相同，因此將不重復其冗余描述。此外，在“情況C” 中，還生成新定義的 SFI (stero_format_indication_segment (立體格式指示片段))。SFI指定如上所述的3D擴展定義，如“page_composition_view_ allocated，，、“region_composition_view_allocated，，、“shared_region_flag”和 “target_ Stere0_f0rmat”。SFI的結(jié)構(gòu)與“情況B”中描述的相同，因此將不重復其冗余描述。如上所 述，因為“region_composition_view_allocated”只涉及“情況 B”,所以這里當作“region_ composition_view_allocated=0，，。[關(guān)于情況D]圖34概念上圖示為“情況D”的立體圖像生成字幕數(shù)據(jù)的方法。這里，將結(jié)合立 體圖像數(shù)據(jù)的傳輸格式為并排格式的示例進行描述。圖34 (a)圖示2D圖像字幕數(shù)據(jù)的區(qū) 域。首先，字幕處理單元133將2D圖像字幕數(shù)據(jù)的區(qū)域的大小轉(zhuǎn)換為適于并排格式的 大小，如圖34 (b)所示，然后生成轉(zhuǎn)換后大小的位圖數(shù)據(jù)。接著，字幕處理單元133設置具有轉(zhuǎn)換后大小的位圖數(shù)據(jù)作為用于立體圖像的字 幕數(shù)據(jù)的區(qū)域的分量，如圖34 (c)所示。此時,每個對象的開始位置(region_horizontal_ address)設為偏移對應于左眼圖像(左視圖)和右眼圖像(右視圖)之間的視差的距離(A_B= 視差/2)的位置。字幕處理單元133如上所述將2D圖像字幕數(shù)據(jù)轉(zhuǎn)換為用于立體圖像的字幕數(shù)據(jù)， 并且生成對應于用于立體圖像的字幕數(shù)據(jù)的片段(如PCS、RCS和0DS)。圖35圖示“情況D”中生成的用于立體圖像的字幕數(shù)據(jù)的區(qū)域和對象的示例。這 里，左眼圖像(左視圖)側(cè)的區(qū)域的開始位置為“Region_horizontal_address”,對象的開始 位置為 “object_horizontal_position”，以及 “Object_id=l”。這里，右眼圖像(右視圖) 側(cè)的復制區(qū)域(copyied_region)的開始位置從左眼圖像(左視圖)側(cè)的對象的開始位置偏 移(A_B=視差/2)。為此，在稍后將描述的RCP (region_copy_segment)中，設置“0ffset_ distance_horizonal=(A-B)”。在“情況D”中，如圖12所示，不僅生成PCS、RCS和0DS，還生成RCP(region_copy_ segment)和 OTS (offset_temporal_sequence_segment)。0TS 的結(jié)構(gòu)及其效果與“情況 A” 中描述的相同，因此將不重復其冗余描述。
RCP (region_copy_segment)如上所述指定區(qū)域的復制目的地的位置。圖36圖示RCP (region_copy_segment)的語法。圖37圖示RCP的主要數(shù)據(jù)語義。在該語法中，包括 “sync_byte，，、“segment_type，，、“page_id，，和 “segment_length” 的信息?！皊egment_type”是表示片段類型的8位數(shù)據(jù)，并且在此使用表示RCP的“0x47”(見圖10)。"segment,length”是表示片段的長度(大小)的8位數(shù)據(jù)。該數(shù)據(jù)表示作為片段的長度的在“Segment_length”之后的字節(jié)數(shù)量?！皉egion_count”是表示頁中的區(qū)域數(shù)量的8位數(shù)據(jù)。“copied_region_id”是表示通過復制區(qū)域生成的復制區(qū)域(copied_region)的ID。“offset_precision，，是表不用 “offset_distance_horizontal ” 表不的偏移值中的“I”的精度的I位信息，即，“I”的像素數(shù)量?！癘ffSet_preciSiOn=0”表示偏移值中的“I”為I個像素。“offset_precision=l”表示偏移值中的“I”為兩個像素。“offset_distance_horizontal”是表示出現(xiàn)在左眼圖像(左視圖)側(cè)的對象和右眼圖像(右視圖)側(cè)的復制對象之間的視差(A-B)。“offset_distance_horizontal”具有在-128到127的范圍內(nèi)的值。
圖38圖示“情況D”中每個片段的生成示例(示例I)。在該生成示例中，在PCS(頁組成片段)中，左眼圖像(左視圖)側(cè)的區(qū)域(Region_id=0A)的開始位置(region_horizontal_address)保持指定。此外,在“Region_id=0A”的RCS (區(qū)域組成片段)中，參考“0bject_id=l”的0DS,并且對象的開始位置“object_horizontal_position”保持指定。此外，在RCP (region_copy_segment)中，參考(Region_id=0A)的區(qū)域，并且其表示該區(qū)域被復制。此外，在RCP中，定義“copied_region_id”,并且包括“offset_distance_horizontal，，的信息。圖39圖示“情況D”中的每個片段的生成示例(示例2)。在該生成示例中，類似于圖38所示的生成示例(示例I )，不僅生成PCS、RCS、ODS和RCP，還生成OTS(offset_temporal_sequence_segment)。ODS的結(jié)構(gòu)及其效果與“情況A”中描述的相同，因此將不重復其冗余描述。[關(guān)于情況E]在“情況E”中，如圖12所示，不僅生成PCS、RCS和0DS，還生成OSS (offset_sequence_segment)。如上所述,OSS (offset_sequence_segment)指定3D擴展的設置信息和視差偏移的可控制。圖40圖示OSS的語法的示例。圖41圖示OSS的主要數(shù)據(jù)語義。在該語法中，包括 “sync_byte，，、“segment_type，，、“page_id，，和 “segment_length，，的信息?！?segment_type”是表示片段類型的8位數(shù)據(jù)，并且在此使用表示RCP的“0x44”(見圖10)。"segment,length”是表示片段的長度(大小)的8位數(shù)據(jù)。該數(shù)據(jù)表示作為片段的長度的在“Segment_length”之后的字節(jié)數(shù)量?！皉egion_position_offset_allocated”是表示視差偏移值是否已經(jīng)反映在“region_position”中的 I 位數(shù)據(jù)?！皉egion_position_offset_allocated=l”表不視差偏移值已經(jīng)反映在“regioruposition”中。在該情況下，視差偏移值已經(jīng)以像素為單位反映在兩個區(qū)域的“region_horizontal_address”中，作為右眼圖像(右視圖)的區(qū)域?qū)τ谧笱蹐D像(左視圖)的區(qū)域的偏移。例如，左眼圖像(左視圖)的區(qū)域的“region_id”具有偶數(shù)，并且右眼圖像(右視圖)的區(qū)域的“region_id”具有奇數(shù)。然而，“region_position_offset_alIocated=O^表示視差偏移值沒有反映在“region_position”中。“object_position_allocated”是表示視差偏移值是否已經(jīng)反映在“object_horizontal_position”中的 I 位數(shù)據(jù)。“object_position_allocated=l”表不視差偏移值已經(jīng)反映在“object_horizontal_position”中。在該情況下,視差偏移值已經(jīng)以像素為單位反映在兩個對象的“013」6(31_1101^201^31_口08；[1；
圖43圖示“情況6 (并排)”中生成的用于立體圖像的字幕數(shù)據(jù)的區(qū)域和對象的示 例。這里，區(qū)域的開始位置為"Region_horizontal_address:對于左眼圖像(左視圖)側(cè) 的對象，開始位置為“0り6は_^^丨201^11_ 08れ1( 1”，Wl“Object_id=l”。此外，對于右 眼圖像(右視圖)側(cè)的對象，開始位置為“0ヒ知は_^^じ01^11_ 08れ10ぬ”，以及“0ヒ拍は_ id=2”。此外，“0ヒ拍は_14=2”可以變?yōu)椤?ヒ拍は_1ゴ=1”，并且相同對象數(shù)據(jù)可以在左眼圖 像和右眼圖像之間共享，使得左眼圖像和右眼圖像可以只在油拍は_^^じ01^11_ 08れ土011 上相互不同。圖44圖示“情況￡ (并排)”中每個片段的生成示例。在該生成示例中，在055中， ' region_position_offset_allocated=0'\"object_position_allocatea=l，，禾ロ "target_ 計6儀0_デ0^站=001”保持設置。在該生成示例中，在？〔3 (頁組成片段)中，區(qū)域び6§1( _ id=0A)的開始位置(儀8丨(》_^^120肽31_3ゴ辦688)保持指定。l*，*“Region_id=OA”
■RCS (區(qū)域組成片段)中，參考“0ヒ拍は_1ゴ=1”的005，并且對象的開始位置“必知は_ ^^丨201^11_ 08れ1( 1”保持指定。l*，*“Region_id=OA”_RCS (區(qū)域組成片段)中， 參考“0り6は_1ゴ=2”的005，并且對象的開始位置“0り6は_^^^01^11_ 08れ101^”保持指 定。此外，在該生成示例中，在053 (offset_sequence_segment)中，“868丨(》_1ゴ=0ム”保持 設置。圖45也圖示“情況6(并排)”中每個片段的生成示例。在該生成示例中，在055中， ' region_position_offset_allocated=0'\"object_position_allocatea=l，，禾ロ "target_ 計6儀0_デ0^站=001”保持設置。在該生成示例中，在？〔3 (頁組成片段)中，區(qū)域び6§1( _ id=0A)的開始位置(儀8丨(》_^^120肽31_3ゴ辦688)保持指定。l*，*“Region_id=OA”
■RCS (區(qū)域組成片段)中，參考“0ヒ拍は_1ゴ=1”的005，并且對象的開始位置“必知は_ ^^丨201^11_ 08れ1( 1”保持指定。l*，*“Region_id=OA”_RCS (區(qū)域組成片段)中， 參考“0り6は_1ゴ=1”的005，并且對象的開始位置“0り6は_^^1201^11_ 08れ101^”保持指 定。此外，在該生成示例中，在053 (offset_sequence_segment)中，“Region_id=OA”保持 設置。如上所述，視差信息組(偏移值“ばむ討_8叫仙1 ^”)包括在OSS中。如上所述， 視差信息組是在顯示字幕的預定數(shù)量的幀時段的各幀中使得在左眼字幕和右眼字幕之間 出現(xiàn)的視差的信息。在接收側(cè)，可能基于預定數(shù)量的幀時段的每幀中的偏移值“0ぞむ討_ sequence ”，使得左眼字幕和右眼字幕之間出現(xiàn)預定視差。例如，在接收側(cè)，可能順序地更新 左眼字幕和右眼字幕之間的視差。在該情況下，接收側(cè)保持向后兼容性，并且能夠以幀為單位簡單地更新對象開始 位置“0い.6は_^^1201^11_ 08れ10ビ，。換句話說，L^"0bject_id"為單位更新“0り6は_ horizontal_position",使得在每幀中由"offset_sequence(T) ”指定的差值量增加到幀 TO (初始幀)的初始位置。結(jié)果，在顯示字幕的預定數(shù)量的幀時段中順序地更新左眼字幕和 右眼字幕之間的視差。圖46圖示以幀為單位更新對象開始位置“0^6は_^^丨201^11_ 08れ10ビ，的示 例。假設在幀 (初始幀)中，“0ヒ拍は_1(^1”的對象開始位置為“油拍は_^^じ01^11_ positionlけ0)”，并且“0り6は_1ゴ=2”的對象開始位置為“0り6は_^^120壯31_り08れ10打2 (T0)”。
如下更新作為下一幀的幀Tl的對象開始位置。這里，幀Tl的偏移值假設為“offset_sequence (Tl) ”。換句話說，“0b ject_id=l ”的對象開始位置“ob ject_horizontal_positionl (Tl )，，為 “object_horizontal_positionl (TO)+offset_sequence (Tl)，，。此夕卜，“Object_id=2” 的對象開始位置“object_horizontal_position2 (Tl)” 為 “object_horizontal_position2 (TO) -offset_sequence (Tl)，，。此外，如下更新作為下一幀的幀T2的對象開始位置。這里，幀T2的偏移值假設為“offset_sequence (T2) ”。換句話說，“0b ject_id=l ”的對象開始位置“ob ject_horizontal_positionl (T2)” 為“object_horizontal_positionl (Tl)+offset_sequence(T2)”。此夕卜，“Object_id=2” 的對象開始位置 “object_horizontal_position2 (T2)，，為 “object_horizontal_position2 (Tl) -offset_sequence (T2)，，。此外，例如，在接收側(cè)，可能使得左眼字幕和右眼字幕之間出現(xiàn)視差，該視差基于預定數(shù)量的幀時段的代表性值，如其最大值或其平均值。在該情況下，在接收側(cè)，基于每幀的偏移值“ofTset_SequenCe(T)”，預先計算直到對應幀的偏移值的累積值。然后，在接收偵1J,在各巾貞的累積值中，將最大值“Max (offset_sequence (η))”或平均值“Ave (offset_ sequence (η))”增加到幀TO (初始幀)的初始位置。結(jié)果，在顯示字幕的預定數(shù)量的幀時段中，使得左眼字幕和右眼字幕之間出現(xiàn)基于預定數(shù)量的幀時段的最大值或平均值的視差。圖47圖示對象開始位置“object_horizontal_position”初始設為最大值“Max(offset_sequence (η))”、然后保持該位置的示例。假設“0bject_id=l”的對象開始位置為“object_horizontal_positionl (TO)”,并且“0bject_id=2” 的對象開始位置為 “object_horizontal_position2 (T0)，，。在幀TO (初始幀)中，對象開始位置設置如下。換句話說，“0bjeCt_id=l”的對象開始位置“object_horizontal_positionl (Tl)，，設為“object_horizontal_positionl (TO)+MaxCoffset_sequence (n))”。此外，“0b ject_id=2”的對象開始位置“ob ject_horizontal_position2 (Tl )，，為“object_horizontal_position2 (TO)-Max (offset_sequence (n))，，。此外，在隨后幀中，保持“0bjeCt_id=l”和“0bject_id=2”的對象開始位置。圖48概念上圖示為“情況E (上下)”的立體圖像生成字幕數(shù)據(jù)的方法。在該情況下，生成左眼字幕數(shù)據(jù)和右眼字幕數(shù)據(jù)作為相同區(qū)域的不同對象的數(shù)據(jù)。圖48 (a)圖示2D圖像字幕數(shù)據(jù)的區(qū)域。首先，字幕處理單元133將2D圖像字幕數(shù)據(jù)的區(qū)域的大小轉(zhuǎn)換為適于上下格式的大小，如圖48 (b)所示，然后生成轉(zhuǎn)換后大小的位圖數(shù)據(jù)。接著，字幕處理單元133設置具有轉(zhuǎn)換后大小的位圖數(shù)據(jù)作為用于立體圖像的字幕數(shù)據(jù)的區(qū)域的分量，如圖48 (C)所示。此時,每個對象的開始位置(object_horizontal_address)設為偏移對應于左眼圖像(左視圖)和右眼圖像(右視圖)之間的視差的距離(A-B=視差)的位置。字幕處理單元133如上所述將2D圖像字幕數(shù)據(jù)轉(zhuǎn)換為用于立體圖像的字幕數(shù)據(jù)，并且生成對應于用于立體圖像的字幕數(shù)據(jù)的片段(如PCS、RCS和0DS)。圖49圖示“情況E (上下)”中生成的用于立體圖像的字幕數(shù)據(jù)的區(qū)域和對象的示例。這里，左眼圖像(左視圖)側(cè)的區(qū)域的開始位置為“Region_horizontal_addressl”,并且右眼圖像(右視圖)側(cè)的區(qū)域的開始位置為“Region_horizontal_address2”。在該示例中，共同的位圖數(shù)據(jù)用作左眼字幕和右眼字幕的位圖數(shù)據(jù)。圖50圖示“情況E(上下)”中每個片段的生成示例。在該生成示例中，在OSS中，“region_position_offset_alIocated=I，，、“object_position_alIocated=O，，和 “target_stereo_f ormat=010” 保持設置。在該生成示例中，在PCS (頁組成片段)中，左眼圖像(左視圖)側(cè)的區(qū)域(Region_id=0A)和右眼圖像(右視圖)側(cè)的區(qū)域(Region_id=OA)的開始位置(region_horizontal_address)保持指定。此外，在“Region_id=OA”的RCS (區(qū)域組成片段)中，參考“0bject_id=l”的0DS,并且對象的開始位置“object_horizontal_positionl”保持指定。此外，在該生成不例中，在 OSS (offset_sequence_segment)中，“Region_id=OA” 保持設置。如上所述，視差信息組(偏移值“offselsequence”)包括在OSS中。在接收側(cè)，可能基于預定數(shù)量的幀時段的每幀中的偏移值“offSet_SeqUenCe”，使得左眼字幕和右眼字幕之間出現(xiàn)預定視差。例如，在接收側(cè)，可能順序地更新左眼字幕和右眼字幕之間的視差。
在該情況下，接收側(cè)保持向后兼容性，并且能夠以幀為單位簡單地更新區(qū)域開始位置 “Region_horizontal_address”。換句話說，以 “Region_id” 為單位更新 “region_horizontal_address”,使得在每巾貞中由“offset_sequence (T) ”指定的差值量增加到巾貞TO(初始幀)的初始位置。結(jié)果，在顯示字幕的預定數(shù)量的幀時段中順序地更新左眼字幕和右眼字幕之間的視差。圖51圖不以巾貞為單位更新區(qū)域開始位置“Region_horizontal_address”的不例。在幀TO (初始幀)中，左眼圖像(左視圖)側(cè)的區(qū)域開始位置為“region_horizontal_addressl (TO)”,并且右眼圖像(右視圖)側(cè)的區(qū)域開始位置為“region_horizontal_address2 (TO)”。如下更新作為下一幀的幀Tl的區(qū)域開始位置。這里，幀Tl的偏移值假設為“offset_sequence (Tl) ”。換句話說，左眼圖像(左視圖)側(cè)的區(qū)域開始位置“region_horizontal_addressl (Tl)” 為 “region_horizontal_addressl (TO)+offset_sequence (Tl) ”。此外，右眼圖像(右視圖)側(cè)的區(qū)域開始位置“region_horizontal_address2 (T I)，，為 “region_horizontal_address2 (TO)-offset_sequence (Tl)，，。此外，如下更新作為下一幀的幀T2的區(qū)域開始位置。這里，幀T2的偏移值假設為“offset_sequence (T2) ”。換句話說，左眼圖像(左視圖)側(cè)的區(qū)域開始位置“region_horizontal_addressl (T2)，，為“region_horizontal_addressl (Tl) +offset_sequence (T2) ”。此外，右眼圖像(右視圖)側(cè)的區(qū)域開始位置“region_horizontal_address2 (T2)，，為 “region_horizontal_address2 (T I)-offset_sequence (Τ2) ”。在以下，以相同方式獲得并更新每幀的區(qū)域開始位置。圖52圖示用于“情況E (全幀、幀順序、或向后兼容)”中生成的立體圖像的字幕數(shù)據(jù)的區(qū)域的示例。這里，區(qū)域的開始位置為“Region_horizontal_address”。在該格式中，使得在左眼字幕和右眼字幕之間出現(xiàn)的視差不反映在左眼圖像(左視圖)和右眼圖像(右視圖)的區(qū)域的開始位置中，并且視差通過OSS作為“Disparityjffset”分開地傳輸。圖53圖示用于“情況E (全幀、幀順序、或向后兼容)”中每個片段的生成示例。在該情況下，在 OSS 中，“region_position_offset_allocated=0”、“object_position_allocated=0”和“target_stereo_format=000”保持設置。在該生成示例中，在PCS (頁組成片段)中，區(qū)域(Region_id=OA)的開始位置(region_horizontal_address)保持設置。此外，在“Region_id=0A”的(區(qū)域組成片段)中，參考“ObjeCt_id=l”的0DS，并且對象的開始位置“object_horizontal_positionl”保持指定。此外，在該生成示例中，在OSS (offset_sequence_segment)中，“Region_id=0A，，保持設置。如上所述，視差信息組(偏移值“offset_sequence”)包括在OSS中。如上所述，視差信息組是在顯示字幕的預定數(shù)量的幀時段的各幀中使得在左眼字幕和右眼字幕之間出現(xiàn)的視差的信息。在接收側(cè)，可能基于預定數(shù)量的幀時段的每幀中的偏移值“offset_sequence ”，使得左眼字幕和右眼字幕之間出現(xiàn)預定視差。例如，在接收側(cè)，可能順序地更新左眼字幕和右眼字幕之間的視差。在該情況下，接收側(cè)保持向后兼容性，并且能夠以幀為單位簡單地更新區(qū)域開始位置 “region_horizontal_address”。換句話說，以 “region_id” 為單位更新 “region_horizontal_address”,使得在每巾貞中由“offset_sequence (T) ”指定的差值量增加到巾貞TO(初始幀)的初始位置。結(jié)果，在顯示字幕的預定數(shù)量的幀時段中順序地更新左眼字幕和右 眼字幕之間的視差。圖55圖示以巾貞為單位更新區(qū)域開始位置“region_horizontal_address”的示例。假設在幀TO (初始幀)中，左眼圖像(左視圖)側(cè)的區(qū)域開始位置為“region_horizontal_address (TO)+disparity_offset”。在右眼圖像(右視圖)側(cè)，“c0”設為開始位置，并且左眼圖像(左視圖)的區(qū)域的位圖數(shù)據(jù)復制到“c0”,在該情況下，當作“cO=region_horizontal_address_disparity_ofTset，，。如下更新作為下一幀的幀Tl的左眼圖像(左視圖)側(cè)的區(qū)域開始位置region_horizontal_address (Tl)和右眼圖像(右視圖)側(cè)的復制位圖數(shù)據(jù)的開始位置“cl”。假設幀Tl的偏移值為“0ffset_seqUenCe(Tl)”。換句話說，左眼圖像(左視圖)側(cè)的區(qū)域開始位置“region_horizontal_addressl (Tl)，，為“region_horizontal_addressl (TO)+offset_sequence(Tl) ”。此外，右眼圖像(右視圖)側(cè)的復制位圖數(shù)據(jù)的開始位置“cl”為“cO_ofTset_sequence(Tl) ”。如下更新作為下一幀的幀T2的左眼圖像(左視圖)側(cè)的區(qū)域開始位置region_horizontal_address (T2)和右眼圖像(右視圖)側(cè)的復制位圖數(shù)據(jù)的開始位置“c2”。假設幀T2的偏移值為“0ffset_seqUenCe(T2) ”。換句話說，左眼圖像(左視圖)側(cè)的區(qū)域開始位置“region_horizontal_addressl (T2)，，為“region_horizontal_addressl (Tl)+0ffSet_seqUenCe(T2)”。此外，右眼圖像(右視圖)側(cè)的復制位圖數(shù)據(jù)的開始位置“c2”為“Cl-0ffSet_seqUenCe(T2) ”。在下面，以相同方式，以區(qū)域為單位獲得并更新每幀的區(qū)域開始位置。圖55示意性圖示“情況E (并排)”中OSS設置以及經(jīng)由機頂盒200從廣播站100到電視接收機300的立體圖像數(shù)據(jù)和字幕數(shù)據(jù)的流。在該情況下，廣播站100生成用于根據(jù)并排格式的立體圖像的字幕數(shù)據(jù)。然后，立體圖像數(shù)據(jù)包括在視頻數(shù)據(jù)流中，然后傳輸，并且字幕數(shù)據(jù)包括在字幕數(shù)據(jù)流中，然后傳輸。機頂盒200基于字幕數(shù)據(jù)生成用于顯示左眼字幕和右眼字幕的顯示數(shù)據(jù)，并且使得顯示數(shù)據(jù)疊加立體圖像數(shù)據(jù)。然后，疊加字幕的顯示數(shù)據(jù)的立體圖像數(shù)據(jù)通過HDMI的數(shù)字接口傳輸?shù)诫娨暯邮諜C300。在該情況下，從機頂盒200到電視接收機300的立體圖像數(shù)據(jù)的傳輸格式為并排格式。電視接收機300對從機頂盒200傳輸?shù)牧Ⅲw圖像數(shù)據(jù)執(zhí)行解碼處理。然后，生成疊加字幕的左眼圖像和右眼圖像的數(shù)據(jù)，并且用于使得用戶識別立體圖像的雙眼視差圖像(左眼圖像和右眼圖像)顯示在顯示面板(如液晶顯示器(IXD))上。此外，如圖55所示，可以使用從廣播站100到電視接收機300的直接路徑。在該情況下，例如，電視接收機300具有與機頂盒200相同的處理功能單元。圖56示意性圖示“情況E (上下)”中OSS設置以及經(jīng)由機頂盒200從廣播站100到電視接收機300的立體圖像數(shù)據(jù)和字幕數(shù)據(jù)的流。在該情況下，廣播站100生成用于根據(jù)上下格式的立體圖像的字幕數(shù)據(jù)。然后，廣播站100包括在視頻數(shù)據(jù)流中的立體圖像數(shù)據(jù)，然后傳輸?shù)玫降臄?shù)據(jù)，并且包括在字幕數(shù)據(jù)流中的字幕數(shù)據(jù)，然后傳輸?shù)玫降臄?shù)據(jù)。機頂盒200基于字幕數(shù)據(jù)生成用于顯示左眼字幕和右眼字幕的顯示數(shù)據(jù)，并且使得顯示數(shù)據(jù)疊加立體圖像數(shù)據(jù)。然后，疊加字幕的顯示數(shù)據(jù)的立體圖像數(shù)據(jù)通過HDMI的數(shù)字接口傳輸?shù)诫娨暯邮諜C300。在該情況下，從機頂盒200到電視接收機300的立體圖像數(shù) 據(jù)的傳輸格式為上下格式。電視接收機300對從機頂盒200傳輸?shù)牧Ⅲw圖像數(shù)據(jù)執(zhí)行解碼處理。然后，生成疊加字幕的左眼圖像和右眼圖像的數(shù)據(jù)，并且用于使得用戶識別立體圖像的雙眼視差圖像(左眼圖像和右眼圖像)顯示在顯示面板(如IXD)上。此外，類似于上述情況E (并排)，如圖56所示，可以使用從廣播站100到電視接收機300的直接路徑。在該情況下，例如，電視接收機300具有與機頂盒200相同的處理功能單元。圖57示意性圖示“情況E (全幀、幀順序或向后兼容)”中OSS設置以及經(jīng)由機頂盒200從廣播站100到電視接收機300的立體圖像數(shù)據(jù)和字幕數(shù)據(jù)的流。在該情況下，廣播站100生成用于根據(jù)全幀格式或向后兼容格式的立體圖像的字幕數(shù)據(jù)。然后，廣播站100包括在視頻數(shù)據(jù)流中的立體圖像數(shù)據(jù)，然后傳輸?shù)玫降臄?shù)據(jù)，并且包括在字幕數(shù)據(jù)流中的字幕數(shù)據(jù)，然后傳輸?shù)玫降臄?shù)據(jù)。機頂盒200基于字幕數(shù)據(jù)生成用于顯示左眼字幕和右眼字幕的顯示數(shù)據(jù)，并且使得顯示數(shù)據(jù)疊加立體圖像數(shù)據(jù)。然后，疊加字幕的顯示數(shù)據(jù)的立體圖像數(shù)據(jù)通過HDMI的數(shù)字接口傳輸?shù)诫娨暯邮諜C300。在該情況下，從機頂盒200到電視接收機300的立體圖像數(shù)據(jù)的傳輸格式為幀封裝格式或并排全視頻格式。電視接收機300對從機頂盒200傳輸?shù)牧Ⅲw圖像數(shù)據(jù)執(zhí)行解碼處理。然后，生成疊加字幕的左眼圖像和右眼圖像的數(shù)據(jù)，并且用于使得用戶識別立體圖像的雙眼視差圖像(左眼圖像和右眼圖像)顯示在顯示面板(如IXD)上。此外，即使在該情況下，類似于上述情況E (并排)，如圖57所示，可以使用從廣播站100到電視接收機300的直接路徑。在該情況下，例如，電視接收機300具有與機頂盒200相同的處理功能單元。在圖2所示的傳輸數(shù)據(jù)生成單元110中，從復用器122輸出的位流數(shù)據(jù)BSD是包括視頻數(shù)據(jù)流和字幕數(shù)據(jù)流的復用數(shù)據(jù)流。視頻數(shù)據(jù)流包括立體圖像數(shù)據(jù)。字幕數(shù)據(jù)流包括用于對應于立體圖像數(shù)據(jù)的傳輸格式的用于立體圖像(用于3D圖像)的字幕數(shù)據(jù)。用于立體圖像的字幕數(shù)據(jù)包括左眼字幕數(shù)據(jù)和右眼字幕數(shù)據(jù)。因此，接收側(cè)可以基于用于立體圖像的字幕數(shù)據(jù)，容易地生成用于疊加立體圖像數(shù)據(jù)中包括的左眼圖像數(shù)據(jù)的左眼字幕的顯示數(shù)據(jù)和用于疊加立體圖像數(shù)據(jù)中包括的右眼圖像數(shù)據(jù)的右眼字幕的顯示數(shù)據(jù)，因此，能夠便利處理。[機頂盒的描述]回來參考圖1，機頂盒200通過廣播波接收從廣播站100傳輸?shù)奈涣鲾?shù)據(jù)(傳送流)BSD。位流數(shù)據(jù)BSD包括具有左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)的立體圖像數(shù)據(jù)以及音頻數(shù)據(jù)。位流數(shù)據(jù)BSD還包括用于顯示字幕的用于立體圖像的字幕數(shù)據(jù)。機頂盒200包括位流處理單元201。位流處理單元201從位流數(shù)據(jù)BSD提取立體圖像數(shù)據(jù)、音頻數(shù)據(jù)和字幕數(shù)據(jù)。然后，位流處理單元201使用立體圖像數(shù)據(jù)、字幕數(shù)據(jù)等生成疊加字幕的立體圖像數(shù)據(jù)。在該情況下，考慮使得在用于疊加左眼圖像的左眼字幕和用于疊加右眼圖像的右眼字幕之間出現(xiàn)視差。例如，如上所述，生成用于從廣播站100接收的立體圖像的字幕數(shù)據(jù)，使得可以使得在左眼字幕和右眼字幕之間出現(xiàn)視差。如上所述，通過使得在左眼字幕和右眼字幕之間出現(xiàn)視差，用戶可以識別缺少圖像的字幕。 圖58 (a)圖示圖像上的標題單元(字幕)的顯示示例。在該顯示示例中，字幕疊加包括背景以及圖像上的前景對象的圖像。圖58 (b)圖示背景、前景對象和字幕的透視感，并且字幕在非常前面識別。圖59 Ca)圖示與圖58 Ca)相同的圖像上的標題單元(字幕)的顯示示例。圖59(b)圖示用于疊加左眼圖像的左眼字幕LGI和用于疊加右眼圖像的右眼字幕RGI。圖59(c)圖示使得左眼字幕LGI和右眼字幕RGI之間出現(xiàn)視差，使得字幕能夠在非常前面識別。[機頂盒的配置示例]將描述機頂盒200的配置示例。圖60圖示機頂盒200的配置示例。機頂盒200包括位流處理單元201、HDMI端子202、天線端子203、數(shù)字調(diào)諧器204、視頻信號處理電路205、HDMI傳輸單元206、以及音頻信號處理電路207。機頂盒200還包括CPU 211、閃速ROM212、DRAM 213、內(nèi)部總線214、遙控接收單元215和遙控發(fā)送器216。天線端子203是對其輸入由接收天線(未示出)接收的電視廣播信號的端子。數(shù)字調(diào)諧器204處理輸入到天線端子203的電視廣播信號，然后輸出對應于用戶選擇的頻道的預定位流數(shù)據(jù)(傳送流)BSD。位流處理單元201從上述位流數(shù)據(jù)BSD提取立體圖像數(shù)據(jù)、音頻數(shù)據(jù)和用于立體圖像的字幕數(shù)據(jù)(包括視差信息組)。位流處理單元201將左眼字幕和右眼字幕的顯示數(shù)據(jù)與立體圖像數(shù)據(jù)合成，并且獲取疊加字幕的顯示立體圖像數(shù)據(jù)。位流處理單元201輸出音頻數(shù)據(jù)。稍后將描述位流處理單元201的詳細配置。視頻信號處理電路205根據(jù)需要對由位流處理單元201獲取的顯示立體圖像數(shù)據(jù)執(zhí)行圖像質(zhì)量調(diào)節(jié)處理，然后將處理后的顯示立體圖像數(shù)據(jù)提供給HDMI傳輸單元206。音頻信號處理電路207根據(jù)需要對從位流處理單元201輸出的音頻數(shù)據(jù)執(zhí)行聲音質(zhì)量調(diào)節(jié)處理，然后將處理后的音頻數(shù)據(jù)提供給HDMI傳輸單元206。HDMI傳輸單元206例如通過符合HDMI的通信，通過HDMI端子傳輸沒有壓縮的圖像數(shù)據(jù)和音頻數(shù)據(jù)。在該情況下，因為圖像數(shù)據(jù)和音頻數(shù)據(jù)通過HDMI的TMDS信道傳輸，所以圖像數(shù)據(jù)和音頻數(shù)據(jù)被封裝，然后從HDMI傳輸單元206輸出到HDMI端子202。例如，當來自廣播站100的立體圖像數(shù)據(jù)的傳輸格式為并排格式時，并排格式用作TMDS傳輸格式(見圖55)。此外，例如，當來自廣播站100的立體圖像數(shù)據(jù)的傳輸格式為上下格式時，上下格式用作TMDS傳輸格式(見圖56 )。此外，例如，當來自廣播站100的立體圖像數(shù)據(jù)的傳輸格式為全幀格式、幀順序格式或向后兼容格式時，幀封裝格式或并排(全視頻)格式用作TMDS傳輸格式(見圖57)。CPU 211控制機頂盒200的每個組件的操作。閃速ROM 212存儲控制軟件和數(shù)據(jù)。DRAM 213提供CPU 211的工作區(qū)域。CPU 211將從閃速ROM 212讀取的軟件或數(shù)據(jù)展開到DRAM 213，激活軟件，并且控制機頂盒200的每個組件。遙控接收單元215接收從遙控發(fā)送器216發(fā)送的遙控信號(遙控代碼)，并且將遙控信號提供給CPU 211。CPU 211基于遙控代碼控制機頂盒200的每個組件。CPU 211、閃速ROM 212和DRAM 213連接到內(nèi)部總線214。將簡要描述機頂盒200的操作。輸入天線端子203的電視廣播信號提供給數(shù)字調(diào)諧器204。數(shù)字調(diào)諧器204處理電視廣播信號，并且輸出對應于用戶選擇的頻道的預定位流數(shù)據(jù)(傳送流)BSD。 從數(shù)字調(diào)諧器204輸出的位流數(shù)據(jù)BSD提供給位流處理單元201。位流處理單元201從位流數(shù)據(jù)BSD提取立體圖像數(shù)據(jù)、音頻數(shù)據(jù)、用于立體圖像的字幕數(shù)據(jù)(包括視差信息組)等。位流處理單元201將左眼字幕和右眼字幕的顯示數(shù)據(jù)(位圖數(shù)據(jù))與立體圖像數(shù)據(jù)合成，并且獲取疊加字幕的顯示立體圖像數(shù)據(jù)。位流處理單元201獲取的顯示立體圖像數(shù)據(jù)提供給視頻信號處理電路205。視頻信號處理電路205根據(jù)需要對顯示立體圖像數(shù)據(jù)執(zhí)行圖像質(zhì)量調(diào)節(jié)處理。從視頻信號處理電路205輸出的處理后的顯示立體圖像數(shù)據(jù)提供給HDMI傳輸單元206。位流處理單元201獲取的音頻數(shù)據(jù)提供給音頻信號處理電路207。音頻信號處理電路207根據(jù)需要對音頻數(shù)據(jù)執(zhí)行聲音質(zhì)量調(diào)節(jié)處理。從音頻信號處理電路207輸出的處理后的音頻數(shù)據(jù)提供給HDMI傳輸單元206。然后，提供給HDMI傳輸單元206的立體圖像數(shù)據(jù)和音頻數(shù)據(jù)通過HDMI的TMDS信道，從HDMI端子202傳輸給HDMI電纜400。[位流處理單元的配置示例]圖61圖示位流處理單元201的配置示例。位流處理單元201具有對應于圖2所示的傳輸數(shù)據(jù)生成單元110的配置。位流處理單元201包括解復用器221、視頻解碼器222、字幕解碼器223、立體圖像字幕生成單元224、視頻疊加單元226和音頻解碼器227。解復用器221從位流數(shù)據(jù)BSD提取視頻分組、音頻分組和字幕分組，并且將各分組分別傳輸?shù)綄慕獯a器。解復用器221提取位流數(shù)據(jù)BSD中包括的諸如PMT和EIT的信息，然后將提取的信息傳輸給CPU 211。如上所述,可能識別Stream_content (‘0x03’=DVB字幕)&Component_type (用于3D目標)在EIT中包括的組成描述符中描述,并且用于立體圖像的字幕數(shù)據(jù)包括在字幕數(shù)據(jù)流中。因此，CPU 211能夠通過描述識別用于立體圖像的字幕數(shù)據(jù)包括在字幕數(shù)據(jù)流中。視頻解碼器222執(zhí)行與傳輸數(shù)據(jù)生成單元110的視頻編碼器113相反的處理。換句話說，視頻解碼器222從解復用器221提取的視頻分組重建視頻數(shù)據(jù)流，執(zhí)行解碼處理，并且獲取包括左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)的立體圖像數(shù)據(jù)。立體圖像數(shù)據(jù)的傳輸格式的不例包括第一傳輸格式(“上下”格式)、第二傳輸格式(“并排”格式)和第三傳輸格式(“全幀”格式、“幀順序”格式或“向后兼容格式”)(見圖4)。字幕解碼器223執(zhí)行與傳輸數(shù)據(jù)生成單元110的字幕編碼器133相反的處理。換句話說，字幕解碼器223從解復用器221提取的字幕分組重建字幕數(shù)據(jù)流，執(zhí)行解碼處理， 并且獲得用于立體圖像的字幕數(shù)據(jù)(包括視差信息組)。立體圖像字幕生成單元224基于用于立體圖像的字幕數(shù)據(jù)，生成疊加立體圖像數(shù) 據(jù)的左眼字幕和右眼字幕的顯示數(shù)據(jù)(位圖數(shù)據(jù))。如上所述，生成用于從廣播站100傳輸 的立體圖像的字幕數(shù)據(jù)，以使得左眼字幕和右眼字幕之間出現(xiàn)視差。為此原因，由立體圖像 字幕生成單元224生成的左眼字幕和右眼字幕的顯示數(shù)據(jù)使得左眼字幕和右眼字幕之間 出現(xiàn)視差(見圖13 (c))。此外，立體圖像字幕生成單元224基于視差信息組(偏移值“offselsequence”)， 使得左眼字幕和右眼字幕之間出現(xiàn)預定視差。如上所述，視差信息組是在顯示字幕的預定 數(shù)量的幀時段的各幀中使得在左眼字幕和右眼字幕之間出現(xiàn)的視差的信息。通過立體圖像 字幕生成單元224如何基于視差信息組使得視差出現(xiàn)取決于工廠默認設置、購買后用戶設置等。例如，立體圖像字幕生成單元224基于視差信息組，以幀為單位順序地更新左眼 字幕和右眼字幕之間的視差(見圖19)。此外，例如，立體圖像字幕生成單元224基于視差信 息組，使得左眼字幕和右眼字幕之間出現(xiàn)視差，該視差基于預定數(shù)量的幀時段的代表性值 (如最大值或平均值)(見圖20)。視頻疊加單元226使得立體圖像字幕生成單元224生成的左眼字幕和右眼字幕的 顯示數(shù)據(jù)(位圖數(shù)據(jù))疊加由視頻解碼器222獲得的立體圖像，因此獲得顯示立體圖像數(shù)據(jù) Vout。然后，視頻疊加單元226將顯示立體圖像數(shù)據(jù)Vout輸出到位流處理單元201的外部。音頻解碼器227執(zhí)行與傳輸數(shù)據(jù)生成單元110的音頻編碼器117相反的處理。換 句話說，音頻解碼器227從解復用器221提取的音頻分組重建音頻基本流，執(zhí)行解碼處理， 并且獲得音頻數(shù)據(jù)Aout。然后，音頻解碼器227將音頻數(shù)據(jù)Aout輸出到位流處理單元201 的外部。將簡要描述圖61所示的位流處理單元201的操作。從數(shù)字調(diào)諧器204 (見圖60) 輸出的位流數(shù)據(jù)BSD提供給解復用器221。解復用器221從位流數(shù)據(jù)BSD提取視頻分組、音 頻分組和字幕分組，并且將各分組分別提供給對應的解碼器。視頻解碼器222從解復用器221提取的視頻分組重建視頻數(shù)據(jù)流，執(zhí)行解碼處理， 并且獲取包括左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)的立體圖像數(shù)據(jù)。立體圖像數(shù)據(jù)提供給視頻疊 加單元226。字幕解碼器223從解復用器221提取的字幕分組重建字幕數(shù)據(jù)流，執(zhí)行解碼處理， 并且獲得用于立體圖像的字幕數(shù)據(jù)(包括視差信息組)。字幕數(shù)據(jù)提供給視頻疊加單元226。立體圖像字幕生成單元224基于用于立體圖像的字幕數(shù)據(jù)，生成疊加立體圖像數(shù) 據(jù)的左眼字幕和右眼字幕的顯示數(shù)據(jù)(位圖數(shù)據(jù))。在該情況下，因為生成用于立體圖像的 字幕數(shù)據(jù)以使得左眼字幕和右眼字幕之間出現(xiàn)視差，所以顯示數(shù)據(jù)使得左眼字幕和右眼字 幕之間出現(xiàn)視差。顯示數(shù)據(jù)提供給視頻疊加單元226。視頻疊加單元226使得立體圖像字幕生成單元224生成的左眼字幕和右眼字幕的 顯示數(shù)據(jù)(位圖數(shù)據(jù))疊加由視頻解碼器222獲得的立體圖像，并且獲得顯示立體圖像數(shù)據(jù) Vout。顯示立體圖像數(shù)據(jù)Vout輸出到位流處理單元201的外部。音頻解碼器227從解復用器221提取的音頻分組重建音頻基本流，執(zhí)行解碼處理，并且獲得音頻數(shù)據(jù)Aout。音頻數(shù)據(jù)Aout輸出到位流處理單元201的外部。在圖60所示的機頂盒200中，從數(shù)字調(diào)諧器204輸出的位流數(shù)據(jù)BSD是包括視頻數(shù)據(jù)流和字幕數(shù)據(jù)流的復用數(shù)據(jù)流。視頻數(shù)據(jù)流包括立體圖像數(shù)據(jù)。字幕數(shù)據(jù)流包括對應于立體圖像數(shù)據(jù)的傳輸格式的用于立體圖像(用于3D圖像)的字幕數(shù)據(jù)。用于立體圖像的字幕數(shù)據(jù)包括左眼字幕數(shù)據(jù)和右眼字幕數(shù)據(jù)。因此，位流處理單元59的立體圖像字幕生成單元224能夠基于用于立體圖像的字幕數(shù)據(jù)，容易地生成用于疊加立體圖像數(shù)據(jù)中包括的左眼圖像數(shù)據(jù)的左眼字幕的顯示數(shù)據(jù)、以及用于疊加立體圖像數(shù)據(jù)中包括的右眼圖像數(shù)據(jù)的右眼字幕的顯示數(shù)據(jù)，因此能夠便利處理。此外，在圖60所示的機頂盒200中，位流處理單元201的字幕解碼器223獲得的字幕數(shù)據(jù)包括視差信息組(偏移值“offselsequence”)。因此，立體圖像字幕生成單元224能夠基于視差信息組，使得左眼字幕和右眼字幕之間出現(xiàn)視差。例如，能夠使得左眼字幕和右眼字幕之間出現(xiàn)以幀為單位順序地更新的視差。此外，例如，能夠使得左眼字幕和右眼字 幕之間出現(xiàn)視差，該視差基于預定數(shù)量的幀時段的代表性值(如最大值或平均值)。[電視接收機的描述]回來參考圖1，電視接收機300通過HDMI電纜400接收從機頂盒200傳輸?shù)牧Ⅲw圖像數(shù)據(jù)。電視接收機300包括3D信號處理單元301。3D信號處理單元301對立體圖像數(shù)據(jù)執(zhí)行對應于傳輸格式的處理(解碼處理)，因此生成左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)。[電視接收機的配置示例]將描述電視接收機300的配置示例。圖62圖示電視接收機300的配置示例。電視接收機300包括3D信號處理單元301、HDMI端子302、HDMI接收單元303、天線端子304、數(shù)字調(diào)諧器305、和位流處理單元306。電視接收機300進一步包括視頻/圖形處理電路307、面板驅(qū)動電路308、顯示面板309、音頻信號處理電路310、音頻放大電路311和揚聲器312。電視接收機300進一步包括CPU 321、閃速ROM 322、DRAM 323、內(nèi)部總線324、遙控接收單元325和遙控發(fā)送器326。天線端子304是對其輸入由接收天線(未示出)接收的電視廣播信號的端子。數(shù)字調(diào)諧器305處理輸入到天線端子304的電視廣播信號，然后輸出對應于用戶選擇的頻道的預定位流數(shù)據(jù)(傳送流)BSD。位流處理單元306具有與圖60所示的機頂盒200的位流處理單元201相同的配置。位流處理單元306從位流數(shù)據(jù)BSD提取立體圖像數(shù)據(jù)、音頻數(shù)據(jù)、標題單元的字幕數(shù)據(jù)、視差矢量等。位流處理單元306將左眼字幕數(shù)據(jù)和右眼字幕數(shù)據(jù)與立體圖像數(shù)據(jù)合成，并且生成并輸出顯示立體圖像數(shù)據(jù)。位流處理單元306輸出音頻數(shù)據(jù)。HDMI接收單元303通過符合HDMI的通信，接收通過HDMI電纜400提供給HDMI端子302的未壓縮的圖像數(shù)據(jù)和音頻數(shù)據(jù)。HDMI接收單元303例如支持HDMII. 4a版本，并且能夠處理立體圖像數(shù)據(jù)。3D信號處理單元301對由HDMI接收單元303接收的或由位流處理單元306獲得的立體圖像數(shù)據(jù)執(zhí)行解碼處理，并且生成左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)。在該情況下，3D信號處理單元301對由位流處理單元306獲得的立體圖像數(shù)據(jù)執(zhí)行對應于其傳輸格式(見圖4)的解碼處理。此外，3D信號處理單元301對由HDMI接收單元303接收的立體圖像數(shù)據(jù)執(zhí)行對應于TMDS傳輸數(shù)據(jù)格式的解碼處理。
視頻/圖形處理電路307基于由3D信號處理單元301生成的左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)，生成用于顯示立體圖像的圖像數(shù)據(jù)。此外，視頻/圖形處理電路307根據(jù)需要對圖像數(shù)據(jù)執(zhí)行圖像質(zhì)量調(diào)整處理。此外，視頻/圖形處理電路307根據(jù)需要將圖像數(shù)據(jù)與諸如菜單或節(jié)目表的疊加信息的數(shù)據(jù)合成。面板驅(qū)動電路308基于從視頻/圖形處理電路307輸出的圖像數(shù)據(jù)驅(qū)動顯示面板309。例如，顯示面板309用IXD (液晶顯示器)、PDP(等離子顯示面板)等配置。音頻信號處理電路310對由HDMI接收單元303接收的或由位流處理單元306獲得的音頻數(shù)據(jù)執(zhí)行必要的處理(如數(shù)字到模擬(D/A)轉(zhuǎn)換)。音頻放大電路311放大從音頻信號處理電路310輸出的音頻信號，并且將放大后的音頻信號提供給揚聲器312。CPU 321控制電視接收機300的每個組件的操作。閃速ROM 322存儲控制軟件和數(shù)據(jù)。DRAM 323提供CPU 321的工作區(qū)域。CPU 321將從閃速R0M322讀取的軟件或數(shù)據(jù)展開到DRAM 323，激活軟件，并且控制電視接收機300的每個組件。

遙控接收單元325接收從遙控發(fā)送器326發(fā)送的遙控信號(遙控代碼)，并且將遙控信號提供給CPU 321。CPU 321基于遙控代碼控制電視接收機300的每個組件。CPU 321、閃速ROM 322和DRAM 323連接到內(nèi)部總線324。將簡要描述圖62所示的電視接收機300的操作。HDMI接收單元303接收通過HDMI電纜400從連接到HDMI端子302的機頂盒200傳輸?shù)牧Ⅲw圖像數(shù)據(jù)和音頻數(shù)據(jù)。HDMI接收單元303接收的立體圖像數(shù)據(jù)提供給3D信號處理單元301。HDMI接收單元303接收的音頻數(shù)據(jù)提供給音頻信號處理電纜310。輸入到天線端子304的電視廣播信號提供給數(shù)字調(diào)諧器305。數(shù)字調(diào)諧器305處理電視廣播信號，并且輸出對應于用戶選擇的頻道的預定位流數(shù)據(jù)(傳送流)BSD。從數(shù)字調(diào)諧器305輸出的位流數(shù)據(jù)BSD提供給位流處理單元306。位流處理單元306從位流數(shù)據(jù)BSD提取立體圖像數(shù)據(jù)、音頻數(shù)據(jù)、標題單元的字幕數(shù)據(jù)、視差矢量等。位流處理單元306將左眼字幕數(shù)據(jù)和右眼字幕數(shù)據(jù)與立體圖像數(shù)據(jù)合成，并且生成顯示顯示立體圖像數(shù)據(jù)。位流處理單元306生成的顯示立體圖像數(shù)據(jù)提供給3D信號處理單元301。位流處理單元306獲得的音頻數(shù)據(jù)提供給音頻信號處理電路310。3D信號處理單元301對由HDMI接收單元303接收的或由位流處理單元306獲得的立體圖像數(shù)據(jù)執(zhí)行解碼處理，并且生成左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)。左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)提供給視頻/圖形處理電路307。視頻/圖形處理電路307基于左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)生成用于顯示立體圖像的圖像數(shù)據(jù)，并且根據(jù)需要對圖像數(shù)據(jù)執(zhí)行圖像質(zhì)量調(diào)整處理和疊加信息數(shù)據(jù)的合成處理。由視頻/圖形處理電路307獲得的圖像數(shù)據(jù)提供給面板驅(qū)動電路308。因此，通過顯示面板309顯示立體圖像。例如，基于左眼圖像數(shù)據(jù)的左眼圖像和基于右眼圖像數(shù)據(jù)的右眼圖像以時分方式交替顯示在顯示面板309上。例如，觀眾能夠通過佩戴快門眼鏡感知立體圖像，在該快門眼鏡中，左眼快門和右眼快門與顯示面板309的顯示同步地交替打開，然后用左眼只觀看左眼圖像并且用右眼只觀看右眼圖像。音頻信號處理電路310對由HDMI接收單元303接收的或由位流處理單元306獲得的音頻數(shù)據(jù)執(zhí)行必要的處理(如D/A轉(zhuǎn)換)。音頻信號通過音頻放大電路311放大，然后提供給揚聲器312。因此，從揚聲器312輸出對應于顯示面板309的顯示圖像的聲音。如上所述，在圖I所示的圖像收發(fā)系統(tǒng)10中，包括視頻數(shù)據(jù)流和字幕數(shù)據(jù)流的復用數(shù)據(jù)流從廣播站100 (傳輸數(shù)據(jù)生成單元201)傳輸?shù)綑C頂盒200。視頻數(shù)據(jù)流包括立體圖像數(shù)據(jù)。字幕數(shù)據(jù)流包括對應于立體圖像數(shù)據(jù)的傳輸格式的用于立體圖像(用于3D圖像)的字幕數(shù)據(jù)。用于立體圖像的字幕數(shù)據(jù)包括左眼字幕數(shù)據(jù)和右眼字幕數(shù)據(jù)。因此，機頂盒200能夠基于用于立體圖像的字幕數(shù)據(jù)，容易地生成用于疊加立體圖像數(shù)據(jù)中包括的左眼圖像數(shù)據(jù)的左眼字幕的顯示數(shù)據(jù)、以及用于疊加立體圖像數(shù)據(jù)中包括的右眼圖像數(shù)據(jù)的右眼字幕的顯示數(shù)據(jù)，因此能夠便利處理。此外，在圖I所示的圖像收發(fā)系統(tǒng)10中，生成從廣播站100 (傳輸數(shù)據(jù)生成單元201)傳輸?shù)綑C頂盒200的用于立體圖像的字幕數(shù)據(jù)，以使得左眼字幕和右眼字幕之間出現(xiàn)視差。為此，在機頂盒200中，立體圖像字幕生成單元224生成的左眼字幕和右眼字幕的顯示數(shù)據(jù)自動使得左眼字幕和右眼字幕之間出現(xiàn)視差。因此，在機頂盒200中，即使不執(zhí)行使得左眼字幕和右眼字幕之間出現(xiàn)視差的特殊處理，當顯示字幕時圖像中每個對象的透視感的一致性也能夠保持優(yōu)化狀態(tài)。此外，在圖I所示的圖像收發(fā)系統(tǒng)10中，從廣播站100 (傳輸數(shù)據(jù)生成單元201)傳輸?shù)綑C頂盒200的用于立體圖像的字幕數(shù)據(jù)包括視差信息組(偏移值“offset_sequence”)。因此，在機頂盒200中，可以基于視差信息組使得左眼字幕和右眼字幕之間出現(xiàn)預定視差。例如，可以使得左眼字幕和右眼字幕之間出現(xiàn)以幀為單位順序更新的視差。此夕卜，例如，可以使得左眼字幕和右眼字幕之間出現(xiàn)視差，該視差基于預定數(shù)量的幀時段的代表性值(如其最大值或其平均值)。<2.修改示例>在上述實施例中，圖像收發(fā)系統(tǒng)10配置為包括廣播站100、機頂盒200和電視接收機300。同時，電視接收機300包括執(zhí)行與機頂盒200中的位流處理單元201相同功能的位流處理單元306，如圖62所示。因此，可以利用廣播站100和電視接收機300配置圖像收發(fā)系統(tǒng)10A，如圖63所示。此外，上述實施例已經(jīng)結(jié)合包括立體圖像數(shù)據(jù)的數(shù)據(jù)流(位流數(shù)據(jù))從廣播站100廣播的示例進行描述。然而，本發(fā)明還可以類似地應用于具有這樣的配置的系統(tǒng)，其中數(shù)據(jù)流經(jīng)由網(wǎng)絡(如因特網(wǎng))傳遞給接收終端。此外，上述實施例已經(jīng)結(jié)合機頂盒200通過HDMI的數(shù)字接口與電視接收機300連接的示例進行描述。然而，即使當機頂盒200經(jīng)由執(zhí)行與HDMI的數(shù)字接口相同功能的數(shù)字接口(包括無線接口以及有線接口)與電視接收機300連接時，本發(fā)明可以類似地應用。此外，上述實施例已經(jīng)結(jié)合字幕被處理為疊加信息的示例進行描述。然而，即使當處理諸如圖形信息或文本信息的疊加信息時，本發(fā)明可以類似地應用。產(chǎn)業(yè)可應用性本發(fā)明可以應用于能夠顯示諸如字幕的疊加信息以疊加圖像的立體圖像系統(tǒng)。
參考符號列表10, IOA圖像收發(fā)系統(tǒng)100廣播站
110傳輸數(shù)據(jù)生成單元113視頻編碼器117音頻編碼器122復用器130數(shù)據(jù)提取單元130a數(shù)據(jù)記錄介質(zhì)131視差信息生成單元132字幕生成單元
133字幕處理單元134字幕編碼器200 機頂盒(STB)201位流處理單元202HDMI 端子203天線端子204數(shù)字調(diào)諧器205視頻信號處理電路206HDMI 傳輸單元207音頻信號處理電路21ICPU215遙控接收單元216遙控發(fā)送器221解復用器222視頻解碼器223字幕解碼器224立體圖像字幕生成單元226視頻疊加單元227音頻解碼器300電視接收機(TV)3013D信號處理單元302HDMI 端子303HDMI 接收單元304天線端子305數(shù)字調(diào)諧器306位流處理單元307視頻/圖形處理電路308面板驅(qū)動電路309顯示面板310音頻信號處理電路311音頻放大電路
312揚聲器32ICPU325遙控接收單元
326遙控發(fā)送器400HDMI 電纜
權(quán)利要求
1.一種立體圖像數(shù)據(jù)發(fā)送設備，包括 圖像數(shù)據(jù)輸出單元，其輸出包括左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)的預定發(fā)送格式的立體圖像； 疊加信息數(shù)據(jù)輸出單元，其輸出疊加信息的數(shù)據(jù)以疊加左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)的圖像； 疊加信息數(shù)據(jù)處理單元，其將從疊加信息數(shù)據(jù)輸出單元輸出的疊加信息的數(shù)據(jù)轉(zhuǎn)換為發(fā)送疊加信息數(shù)據(jù)，其包括對應于預定發(fā)送格式的立體圖像數(shù)據(jù)中包括的左眼圖像數(shù)據(jù)的左眼疊加信息的數(shù)據(jù)和對應于右眼圖像數(shù)據(jù)的右眼疊加信息的數(shù)據(jù)；以及 數(shù)據(jù)發(fā)送單元，其發(fā)送包括第一數(shù)據(jù)流和第二數(shù)據(jù)流的復用數(shù)據(jù)流，該第一數(shù)據(jù)流包括從立體圖像數(shù)據(jù)輸出單元輸出的立體圖像數(shù)據(jù)，該第二數(shù)據(jù)流包括從疊加信息數(shù)據(jù)處理單元輸出的發(fā)送疊加信息數(shù)據(jù)。
2.如權(quán)利要求I所述的立體圖像數(shù)據(jù)發(fā)送設備，還包括 視差信息輸出單元，其輸出左眼圖像數(shù)據(jù)的左眼圖像和右眼圖像數(shù)據(jù)的右眼圖像之間的視差信息， 其中，疊加信息數(shù)據(jù)處理單元通過基于從視差信息輸出單元輸出的視差信息，至少移位左眼疊加信息或右眼疊加信息，使得左眼疊加信息和右眼疊加信息之間出現(xiàn)視差。
3.如權(quán)利要求2所述的立體圖像數(shù)據(jù)發(fā)送設備，還包括 視差信息生成單元，其基于從視差信息輸出單元輸出的視差信息，生成在其中顯示疊加信息的預定數(shù)量的幀時段的每幀中，使得左眼疊加信息和右眼疊加信息之間出現(xiàn)的視差的信息， 其中，數(shù)據(jù)發(fā)送單元在預定數(shù)量的幀時段的每幀中，使用識別信息從發(fā)送疊加信息的數(shù)據(jù)中區(qū)分由視差信息生成單元生成的視差的信息，將該視差的信息包括在第二數(shù)據(jù)流中，并且發(fā)送包括該視差的信息的第二數(shù)據(jù)流。
4.如權(quán)利要求3所述的立體圖像數(shù)據(jù)發(fā)送設備， 其中，視差信息生成單元生成的預定數(shù)量的幀時段的每幀中的視差的信息是關(guān)于前一幀的視差的信息的偏移信息。
5.如權(quán)利要求I所述的立體圖像數(shù)據(jù)發(fā)送設備， 其中，數(shù)據(jù)發(fā)送單元將識別信息插入復用數(shù)據(jù)流中，該識別信息識別對應于立體圖像數(shù)據(jù)的發(fā)送格式的發(fā)送疊加信息數(shù)據(jù)包括在第二數(shù)據(jù)流中。
6.如權(quán)利要求I所述的立體圖像數(shù)據(jù)發(fā)送設備， 其中，疊加信息的數(shù)據(jù)是字幕數(shù)據(jù)，以及 疊加信息數(shù)據(jù)處理單元生成左眼疊加信息的數(shù)據(jù)和右眼疊加信息的數(shù)據(jù)，作為相同區(qū)域的不同對象的數(shù)據(jù)或相同區(qū)域的相同對象的數(shù)據(jù)。
7.如權(quán)利要求I所述的立體圖像數(shù)據(jù)發(fā)送設備， 其中，疊加信息的數(shù)據(jù)是字幕數(shù)據(jù)，以及 疊加信息數(shù)據(jù)處理單元生成左眼疊加信息的數(shù)據(jù)和右眼疊加信息的數(shù)據(jù)，作為相同頁的不同區(qū)域的數(shù)據(jù)。
8.如權(quán)利要求I所述的立體圖像數(shù)據(jù)發(fā)送設備， 其中，疊加信息的數(shù)據(jù)是字幕數(shù)據(jù)，以及疊加信息數(shù)據(jù)處理單元生成左眼疊加信息的數(shù)據(jù)和右眼疊加信息的數(shù)據(jù)，作為不同頁的區(qū)域的數(shù)據(jù)。
9.如權(quán)利要求I所述的立體圖像數(shù)據(jù)發(fā)送設備， 其中，疊加信息的數(shù)據(jù)是字幕數(shù)據(jù)，以及 疊加信息數(shù)據(jù)處理單元生成左眼疊加信息的數(shù)據(jù)和右眼疊加信息的數(shù)據(jù)之一作為預定頁的區(qū)域的數(shù)據(jù)，并且另一個作為從該預定頁的區(qū)域復制的復制區(qū)域的數(shù)據(jù)。
10.如權(quán)利要求I所述的立體圖像數(shù)據(jù)發(fā)送設備， 其中，疊加信息的數(shù)據(jù)是字幕數(shù)據(jù)，以及 疊加信息數(shù)據(jù)處理單元生成左眼疊加信息的數(shù)據(jù)和右眼疊加信息的數(shù)據(jù)之一作為預定頁的區(qū)域的數(shù)據(jù)，并且在另一個由接收器側(cè)合成的假設下生成視差信息。
11.如權(quán)利要求I所述的立體圖像數(shù)據(jù)發(fā)送設備， 其中，疊加信息的數(shù)據(jù)是字幕數(shù)據(jù)，以及 當立體圖像數(shù)據(jù)的發(fā)送格式是并排格式時，疊加信息數(shù)據(jù)處理單元生成左眼疊加信息的數(shù)據(jù)和右眼疊加信息的數(shù)據(jù)，作為相同區(qū)域的不同對象的數(shù)據(jù)。
12.如權(quán)利要求I所述的立體圖像數(shù)據(jù)發(fā)送設備， 其中，疊加信息的數(shù)據(jù)是字幕數(shù)據(jù)，以及 當立體圖像數(shù)據(jù)的發(fā)送格式是上下格式時，疊加信息數(shù)據(jù)處理單元生成左眼疊加信息的數(shù)據(jù)和右眼疊加信息的數(shù)據(jù)，作為相同頁的不同區(qū)域的數(shù)據(jù)。
13.—種發(fā)送立體圖像數(shù)據(jù)的方法，包括 輸出包括左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)的預定發(fā)送格式的立體圖像數(shù)據(jù)； 輸出疊加信息的數(shù)據(jù)以疊加左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)的圖像； 將輸出疊加信息的數(shù)據(jù)時輸出的疊加信息的數(shù)據(jù)轉(zhuǎn)換為發(fā)送疊加信息數(shù)據(jù)，其包括對應于預定發(fā)送格式的立體圖像數(shù)據(jù)中包括左眼圖像數(shù)據(jù)的左眼疊加信息的數(shù)據(jù)和對應于右眼圖像數(shù)據(jù)的右眼疊加信息的數(shù)據(jù)；以及 發(fā)送包括第一數(shù)據(jù)流和第二數(shù)據(jù)流的復用數(shù)據(jù)流，該第一數(shù)據(jù)流包括輸出立體圖像數(shù)據(jù)時輸出的立體圖像數(shù)據(jù)，該第二數(shù)據(jù)流包括輸出疊加信息的數(shù)據(jù)時輸出的發(fā)送疊加信息數(shù)據(jù)。
14.一種立體圖像數(shù)據(jù)接收設備，包括 數(shù)據(jù)接收單元，其接收包括第一數(shù)據(jù)流和第二數(shù)據(jù)流的復用數(shù)據(jù)流， 該第一數(shù)據(jù)流包括預定發(fā)送格式的立體圖像數(shù)據(jù)，其包括左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)，以及 該第二數(shù)據(jù)流包括發(fā)送疊加信息數(shù)據(jù)，其包括對應于預定發(fā)送格式的立體圖像數(shù)據(jù)中包括的左眼圖像數(shù)據(jù)的左眼疊加信息的數(shù)據(jù)和對應于右眼圖像數(shù)據(jù)的右眼疊加信息的數(shù)據(jù)， 圖像數(shù)據(jù)獲取單元，其從數(shù)據(jù)接收單元接收的復用數(shù)據(jù)流中包括的第一數(shù)據(jù)流獲取立體圖像數(shù)據(jù)； 疊加信息數(shù)據(jù)獲取單元，其從數(shù)據(jù)接收單元接收的復用數(shù)據(jù)流中包括的第二數(shù)據(jù)流獲取發(fā)送疊加信息數(shù)據(jù)； 顯示數(shù)據(jù)生成單元，其基于疊加信息數(shù)據(jù)獲取單元獲取的發(fā)送疊加信息數(shù)據(jù)，生成用于以疊加方式在左眼圖像和右眼圖像上顯示疊加信息的顯示數(shù)據(jù)；以及 數(shù)據(jù)合成單元，其通過將顯示數(shù)據(jù)生成單元生成的顯示數(shù)據(jù)疊加在圖像數(shù)據(jù)獲取單元獲取的立體圖像數(shù)據(jù)上，獲得輸出立體圖像數(shù)據(jù)。
15.如權(quán)利要求14所述的立體圖像數(shù)據(jù)接收設備， 其中，數(shù)據(jù)接收單元接收的復用數(shù)據(jù)流中包括的第二數(shù)據(jù)流進一步包括視差的信息，其使得其中顯示疊加信息的預定數(shù)量的幀時段的每幀中的左眼疊加信息和右眼疊加信息之間出現(xiàn)視差， 該立體圖像數(shù)據(jù)接收設備進一步包括視差信息獲取單元，其從數(shù)據(jù)接收單元接收的復用數(shù)據(jù)流中包括的第二數(shù)據(jù)流獲取預定數(shù)量的幀時段的每幀中的視差的信息，以及 顯示數(shù)據(jù)生成單元在預定數(shù)量的幀時段的每幀中，基于視差信息獲取單元獲取的視差的信息，使得左眼疊加信息和右眼疊加信息之間出現(xiàn)預定視差。
16.如權(quán)利要求15所述的立體圖像數(shù)據(jù)接收設備， 其中，顯示數(shù)據(jù)生成單元獲得預定數(shù)量的幀時段的每幀中的視差的信息的代表值，并且使用該預定數(shù)量的幀時段和該代表值使得左眼疊加信息和右眼疊加信息之間出現(xiàn)視差。
17.如權(quán)利要求15所述的立體圖像數(shù)據(jù)接收設備， 其中，顯示數(shù)據(jù)生成單元使用預定數(shù)量的幀時段的每幀中的視差的信息，順序地更新該預定數(shù)量的幀時段中的左眼疊加信息和右眼疊加信息之間的視差。
18.如權(quán)利要求14所述的立體圖像數(shù)據(jù)接收設備，進一步包括 數(shù)字接口單元，其將數(shù)據(jù)合成單元獲取的輸出立體圖像數(shù)據(jù)發(fā)送到外部設備。
19.如權(quán)利要求14所述的立體圖像數(shù)據(jù)接收設備， 其中，數(shù)據(jù)接收單元接收的復用數(shù)據(jù)流包括識別信息，其識別對應于第二數(shù)據(jù)流中包括的立體圖像數(shù)據(jù)的發(fā)送格式的發(fā)送疊加信息數(shù)據(jù)， 該立體圖像數(shù)據(jù)接收設備進一步包括識別信息獲取單元，該識別信息獲取單元從數(shù)據(jù)接收單元接收的復用數(shù)據(jù)流獲取識別信息，以及 疊加信息數(shù)據(jù)識別單元，其基于識別信息獲取單元獲取的識別信息，識別對應于立體圖像數(shù)據(jù)的發(fā)送格式的發(fā)送疊加信息數(shù)據(jù)包括在第二數(shù)據(jù)流中。
20.一種接收立體圖像數(shù)據(jù)的方法，包括 接收包括第一數(shù)據(jù)流和第二數(shù)據(jù)流的復用數(shù)據(jù)流， 該第一數(shù)據(jù)流包括預定發(fā)送格式的立體圖像數(shù)據(jù)，其包括左眼圖像數(shù)據(jù)和右眼圖像數(shù)據(jù)，以及 該第二數(shù)據(jù)流包括發(fā)送疊加信息數(shù)據(jù)，該發(fā)送疊加信息數(shù)據(jù)包括對應于預定發(fā)送格式的立體圖像數(shù)據(jù)中包括的左眼圖像數(shù)據(jù)的左眼疊加信息的數(shù)據(jù)和對應于右眼圖像數(shù)據(jù)的右眼疊加信息的數(shù)據(jù)， 從接收復用數(shù)據(jù)流時接收的復用數(shù)據(jù)流中包括的第一數(shù)據(jù)流獲取立體圖像數(shù)據(jù)； 從接收復用數(shù)據(jù)流時接收的復用數(shù)據(jù)流中包括的第二數(shù)據(jù)流獲取發(fā)送疊加信息數(shù)據(jù)； 基于獲取發(fā)送疊加信息數(shù)據(jù)時獲取的發(fā)送疊加信息數(shù)據(jù)，生成用于以疊加方式在左眼圖像和右眼圖像上顯示疊加信息的顯示數(shù)據(jù)；以及 通過使得生成顯示數(shù)據(jù)時生成的顯示數(shù)據(jù)疊加在獲取圖像數(shù)據(jù)時獲取的立體圖像數(shù)據(jù)上，獲得 輸出立體圖像數(shù)據(jù)。
全文摘要
公開了一種立體圖像數(shù)據(jù)發(fā)送設備和立體圖像數(shù)據(jù)接收設備，其便利接收側(cè)的處理。字幕處理單元(133)將在字幕生成單元(132)生成的二維圖像使用字幕數(shù)據(jù)轉(zhuǎn)換為對應于從數(shù)據(jù)提取單元(130)提供到視頻編碼器(113)的立體圖像數(shù)據(jù)的發(fā)送格式的立體圖像使用字幕數(shù)據(jù)。立體圖像使用字幕數(shù)據(jù)具有左眼字幕的數(shù)據(jù)和右眼字幕的數(shù)據(jù)。生成立體圖像使用字幕數(shù)據(jù)，使得左眼字幕和右眼字幕之間產(chǎn)生視差。在接收側(cè)，基于立體圖像使用字幕數(shù)據(jù)，可能容易地生成疊加在立體圖像數(shù)據(jù)具有的左眼圖像數(shù)據(jù)上的左眼字幕的數(shù)據(jù)和疊加在立體圖像數(shù)據(jù)具有的右眼圖像數(shù)據(jù)上的右眼字幕的數(shù)據(jù)，從而便利處理。
文檔編號H04N7/025GK102884801SQ201180023499
公開日2013年1月16日 申請日期2011年6月3日 優(yōu)先權(quán)日2010年6月10日
發(fā)明者塚越郁夫 申請人:索尼公司