專利名稱:多屏幕顯示設(shè)備的制作方法
技術(shù)領(lǐng)域:
本發(fā)明涉及一種同時(shí)顯示多個(gè)視頻內(nèi)容的多屏幕顯示設(shè)備,本發(fā)明涉及在對(duì)已編 碼視頻內(nèi)容進(jìn)行解碼的過程中減輕負(fù)載的多屏幕顯示設(shè)備。
背景技術(shù):
由于電視廣播頻道個(gè)數(shù)的增加、由于記錄裝置的存儲(chǔ)容量增加導(dǎo)致的記錄節(jié)目個(gè) 數(shù)的增加、因特網(wǎng)上移動(dòng)圖像內(nèi)容的增加等等,用戶已經(jīng)能夠在各種視頻內(nèi)容(移動(dòng)圖像) 中確定要觀看的視頻。當(dāng)前,對(duì)于電視節(jié)目,通過使用EPG(電子節(jié)目指南)從文本信息中選擇頻道、在 記錄裝置中記錄了已記錄節(jié)目的情況下從具有節(jié)目的靜止圖像和在相同屏幕上設(shè)置的EPG 的節(jié)目信息的片段的拇指顯示器上進(jìn)行選擇、以及在因特網(wǎng)的情況下通過使用密碼的文本 檢索使移動(dòng)圖像變窄來執(zhí)行視頻選擇。由于顯示設(shè)備較大的屏幕和較高的分辨率,使用多屏幕顯示系統(tǒng)變得流行起來, 所述多屏幕顯示系統(tǒng)同時(shí)顯示從劃分為多個(gè)區(qū)域的屏幕區(qū)域中的多個(gè)視頻信號(hào)得到的視 頻。期望顯示設(shè)備的較大屏幕和較高分辨率的顯示設(shè)備在未來能夠使得視頻選擇方法同時(shí) 顯示幾十到幾百個(gè)視頻,以便在許多視頻中選擇所需要觀看的視頻。多屏幕顯示系統(tǒng)作為用于在大屏幕顯示設(shè)備中的非常大量視頻中選擇所需視頻 的裝置是有用的,并且例如在專利文獻(xiàn)1的節(jié)目選擇支持設(shè)備中,依賴于在多個(gè)屏幕上顯 示的節(jié)目中的用戶觀看時(shí)間長(zhǎng)度來改變節(jié)目的顯示尺寸,以防止節(jié)目選擇的效率退化。電視廣播、記錄裝置等使用按照MPEG(移動(dòng)圖片編碼專家組)格式編碼的移動(dòng)圖 像。圖10是該移動(dòng)圖像再現(xiàn)格式的典型結(jié)構(gòu)的方框圖。對(duì)按照MPEG編碼的圖像數(shù)據(jù)進(jìn)行解碼的設(shè)備順序地將輸入的已編碼數(shù)據(jù)存儲(chǔ)到 緩沖器11中,順序地讀出輸入數(shù)據(jù),并且用解復(fù)用器12對(duì)必要的信息進(jìn)行解復(fù)用。通過可 變長(zhǎng)度解碼部分13、逆量化器14、逆DCT (離散余弦變換)部分15和移動(dòng)預(yù)測(cè)部分18對(duì)解 復(fù)用的數(shù)據(jù)進(jìn)行處理,在幀緩沖器中存儲(chǔ)之前,使用在圖片累積部分19中累積的在先或在 后幀來進(jìn)行運(yùn)動(dòng)補(bǔ)償,并且圖片重設(shè)部分17對(duì)來自幀緩沖器的圖片順序進(jìn)行校正以讀取 所述圖片,并且將所述圖片按照顯示的順序輸出到屏幕上?;趲瑑?nèi)預(yù)測(cè)方法,按照MPEG格式編碼的移動(dòng)圖像數(shù)據(jù)具有三種圖像(圖片)類 型,即作為進(jìn)行幀內(nèi)圖像獨(dú)立編碼圖像的I圖片,作為進(jìn)行單向幀間預(yù)測(cè)編碼的圖像的P圖 片,和作為進(jìn)行雙向幀間預(yù)測(cè)編碼圖像的B圖片。由于同時(shí)顯示多個(gè)視頻的多屏幕顯示系統(tǒng)需要同時(shí)執(zhí)行對(duì)于多個(gè)輸入視頻信號(hào) 的解碼處理,并且在同時(shí)要顯示的視頻數(shù)量增加時(shí),在解碼處理部分中處理的負(fù)載也增加, 因此難以同時(shí)對(duì)上百個(gè)移動(dòng)圖片執(zhí)行解碼處理。然而,除非在解碼處理部分中減輕處理的負(fù)載,否則擴(kuò)大了每一個(gè)移動(dòng)圖像的解 碼處理,存在的問題是減小了已顯示移動(dòng)圖像的最大個(gè)數(shù)。專利文獻(xiàn)2的移動(dòng)圖像解碼設(shè)備刪除了 I和P圖片之間以及P和P圖片之間的一些或全部B圖片,并且將其余圖片提供給視頻解碼部分,以便再現(xiàn)按照MPEG格式編碼的移 動(dòng)圖像數(shù)據(jù)的解碼時(shí)減小處理負(fù)載。專利文獻(xiàn)1 日本公開專利出版物No. 2005-333524專利文獻(xiàn)2 日本公開專利出版物No. 2000-29986
發(fā)明內(nèi)容
本發(fā)明要解決的問題然而,盡管通過去除沒有用作幀間預(yù)測(cè)的參考圖像的圖像代碼串(B圖片的代碼 串)可以簡(jiǎn)化解碼處理,由于用下降的幀顯示所有多屏幕顯示的視頻,因此,難以理解視頻 內(nèi)容,并且存在不能確定其是否是所需視頻的可能性??紤]到以上情況設(shè)想了本發(fā)明,并且因此,本發(fā)明的目的是提供一種使用多屏幕 顯示來顯示更多視頻的多屏幕顯示設(shè)備而不會(huì)體現(xiàn)出不可思議的感受,同時(shí)減輕了對(duì)已編 碼視頻內(nèi)容的解碼處理的負(fù)載。解決所述問題的手段為了解決所述問題,本發(fā)明具有以下結(jié)構(gòu)。本發(fā)明的多屏幕顯示設(shè)備是一種在單一屏幕上顯示多個(gè)視頻的多屏幕顯示設(shè)備, 包括強(qiáng)調(diào)屏幕確定部分,指定顯示多個(gè)視頻中的強(qiáng)調(diào)視頻的屏幕;以及負(fù)載減輕部分,對(duì) 于除了通過強(qiáng)調(diào)屏幕確定部分確定的在屏幕上顯示的視頻之外的那些視頻,在解碼處理部 分中減小處理負(fù)載。如果視頻的顯示尺寸比預(yù)定尺寸小,所述負(fù)載減輕部分可以減小針對(duì)視頻在解碼 處理部分中的處理負(fù)載。如果視頻是包括I圖片、P圖片和B圖片的混合視頻的已編碼數(shù)據(jù),其中,所述I圖 片是在幀內(nèi)進(jìn)行信息壓縮的二維壓縮視頻數(shù)據(jù),所述P圖片是通過時(shí)間上向前方向用I圖 片添加運(yùn)動(dòng)補(bǔ)償進(jìn)行信息壓縮的三維壓縮視頻數(shù)據(jù),以及所述B圖片是通過時(shí)間上向前和 時(shí)間向后方向用I圖片和P圖片添加運(yùn)動(dòng)補(bǔ)償進(jìn)行信息壓縮的三維壓縮視頻數(shù)據(jù),則所述 負(fù)載減輕部分通過刪除除了由強(qiáng)調(diào)屏幕確定部分確定的在屏幕上顯示的視頻之外的視頻 的B圖片,減小了解碼處理中的處理負(fù)載。所述強(qiáng)調(diào)屏幕確定部分確定了在預(yù)定的時(shí)間間隔處執(zhí)行強(qiáng)調(diào)顯示的屏幕,以將用 戶視線引導(dǎo)到平滑的視頻。本發(fā)明的效果根據(jù)本發(fā)明,可以將多屏幕顯示用于顯示更多視頻而不會(huì)體現(xiàn)出不可思議的感 受,同時(shí)減輕了已編碼視頻內(nèi)容的解碼處理的負(fù)載。
圖1示出了當(dāng)視線移動(dòng)方向表示沿相同水平方向移動(dòng)時(shí)的視線移動(dòng)示例。圖2示出了當(dāng)視線移動(dòng)方向表示形成F形狀移動(dòng)時(shí)的視線移動(dòng)示例。圖3示出了當(dāng)視線移動(dòng)方向表示沿向右和向左方向的無縫交替移動(dòng)時(shí)的視線移 動(dòng)示例。圖4是根據(jù)實(shí)施例的多屏幕顯示設(shè)備的一般方框圖。
4
圖5是根據(jù)實(shí)施例的解碼器的方框圖。圖6根據(jù)實(shí)施例的解碼器中的負(fù)載減輕部分的方框圖。圖7是表示在根據(jù)實(shí)施例的解碼器中的處理流程的流程圖。圖8是根據(jù)實(shí)施例的多屏幕產(chǎn)生部分的方框圖。圖9是表示在多屏幕產(chǎn)生部分中的處理流程的流程圖。圖10是傳統(tǒng)解碼器示例的方框圖。參考數(shù)字的解釋1視頻選擇部分;
2顯示位置確定部分
3顯示數(shù)據(jù)提取部分
4數(shù)據(jù)累積部分;
5解碼處理部分;
11緩沖器;
12解復(fù)用器;
13可變長(zhǎng)度解碼部分
14逆量化器;
15逆DCT部分;
16加法器;
17圖片重設(shè)部分;
18運(yùn)動(dòng)預(yù)測(cè)部分;
19圖片累積部分;
20負(fù)載減輕部分;
21顯示尺寸確定部分
22強(qiáng)調(diào)視頻確定部分
23B圖片跳過部分;
6多屏幕產(chǎn)生部分;
61調(diào)節(jié)尺寸部分;
62亮度調(diào)節(jié)部分;
63組合部分;
7顯示部分;以及
8強(qiáng)調(diào)屏幕確定部分
具體實(shí)施例方式現(xiàn)在將參考附圖描述根據(jù)本發(fā)明的多屏幕顯示設(shè)備的優(yōu)選實(shí)施例。該實(shí)施例將描 述以下情況對(duì)于來自電視廣播或因特網(wǎng)的在諸如硬盤之類的數(shù)據(jù)累積設(shè)備中累積的視頻 內(nèi)容執(zhí)行多屏幕顯示。首先,多屏幕顯示的分離屏幕需要預(yù)先設(shè)置或由用戶設(shè)置。例如,如果將顯示設(shè)備 的屏幕劃分為沿垂直方向10個(gè)視頻*沿水平方向10個(gè)視頻,則多屏幕顯示100個(gè)視頻。下 文中將顯示每一個(gè)多屏幕顯示的視頻的屏幕稱作小屏幕。
如果用戶給出多屏幕顯示的指令,顯示在數(shù)據(jù)累積設(shè)備中累積的視頻內(nèi)容的列 表,以便允許用戶從該列表中選擇將要進(jìn)行多屏幕顯示的所需視頻內(nèi)容。從所述數(shù)據(jù)累積設(shè)備中讀取選擇的視頻內(nèi)容,將其單獨(dú)地調(diào)節(jié)尺寸為所述小屏幕 的尺寸,并且將其組合為顯示設(shè)備的一個(gè)屏幕以執(zhí)行多屏幕顯示。如果選擇的視頻內(nèi)容的個(gè)數(shù)比小屏幕的個(gè)數(shù)大,執(zhí)行多次所述多屏幕顯示;否則, 在沒有視頻內(nèi)容要顯示的小屏幕上什么都不顯示,或者可以改變所述分離屏幕。當(dāng)從多屏幕顯示選擇所需視頻內(nèi)容時(shí),例如,用戶用在多屏幕顯示設(shè)備中包括的 遙控器的橫向鍵將光標(biāo)移動(dòng)到顯示所需視頻內(nèi)容的小屏幕,并且用確定鍵進(jìn)行選擇。當(dāng)選 擇了所需視頻內(nèi)容時(shí),在所述顯示設(shè)備的一個(gè)屏幕上放大并且顯示所述視頻內(nèi)容。在本發(fā)明中,引導(dǎo)用戶的視線,使得容易從所述多屏幕顯示中選擇所需視頻內(nèi)容。當(dāng)人們觀看到多屏幕顯示的視頻內(nèi)容時(shí),已知視線通常從左向右并且從上到下移 動(dòng),由于在本發(fā)明中利用了該性質(zhì),用戶所注視的小屏幕中顯示的視頻相對(duì)于在其他小屏 幕上顯示的視頻進(jìn)行了強(qiáng)調(diào),并且在確定的時(shí)間間隔將顯示所述強(qiáng)調(diào)視頻的小屏幕移動(dòng)至 另一個(gè)小屏幕,以吸引用戶的注意力并且引導(dǎo)用戶的視線。引導(dǎo)用戶視線的方向包括以下移動(dòng)方向。圖1示出了視線移動(dòng)方向表示沿相同水 平方向的移動(dòng)的情況下,并且將其稱作掃描型水平移動(dòng)。圖2示出了視線移動(dòng)方向表示形 成F形狀的移動(dòng)的情況下,并且將其稱作F狀移動(dòng)。圖3示出了視線移動(dòng)方向表示沿向右 和向左方向的無縫交替移動(dòng)的情況,并且將其稱作Z字形水平移動(dòng)。圖1、2和3中示出的數(shù)字代表用于顯示強(qiáng)調(diào)視頻的序列號(hào)。在圖1的示例中,對(duì) 序列號(hào)為1的小屏幕進(jìn)行強(qiáng)調(diào);用與序列號(hào)1相比弱化的強(qiáng)調(diào)來顯示與序列號(hào)2、9和10相 對(duì)應(yīng)的周圍小屏幕;并且用更加弱化的強(qiáng)調(diào)來顯示與其他序列號(hào)相對(duì)應(yīng)的小屏幕。當(dāng)注視 序列號(hào)為28的小屏幕時(shí),用強(qiáng)調(diào)顯示該小屏幕;與序列號(hào)為28相比用弱化的強(qiáng)調(diào)來顯示與 序列號(hào)19、20、21、27、29、35、36和37相對(duì)應(yīng)的周圍小屏幕;并且用進(jìn)一步弱化的強(qiáng)調(diào)來顯 示與其他序列號(hào)相對(duì)應(yīng)的小屏幕。在圖2和圖3的示例中,與其他小屏幕相比,類似的使得對(duì)于所注視序列號(hào)的小屏 幕和周圍小屏幕上的強(qiáng)調(diào)更加顯著。如果將用戶視線從一個(gè)小屏幕到另一個(gè)小屏幕移動(dòng)的時(shí)間間隔(下文中的轉(zhuǎn)換 時(shí)間)設(shè)置為一秒,根據(jù)在圖1至圖3中所示的順序每隔一秒來移動(dòng)顯示強(qiáng)調(diào)視頻的小屏 幕,已促使用戶移動(dòng)視線。視線移動(dòng)方向不局限于這些方向,并且可以遵循反轉(zhuǎn)圖1至圖3所示上下或左后 順序的順序。掃描型垂直移動(dòng)和Z字形垂直移動(dòng)也可用于實(shí)現(xiàn)沿垂直方向而不是水平方向的 移動(dòng)??梢愿鶕?jù)用戶的喜好來設(shè)置移動(dòng)順序。這可以通過提供移動(dòng)順序記錄模式來實(shí) 現(xiàn),所述移動(dòng)順序記錄模式允許用戶實(shí)際上用遙控器等執(zhí)行用于多屏幕視頻的移動(dòng)操作, 以記錄移動(dòng)順序和移動(dòng)時(shí)間(轉(zhuǎn)換時(shí)間)。然后將描述根據(jù)該實(shí)施例的多屏幕顯示設(shè)備。圖4是根據(jù)該實(shí)施例的多屏幕顯示設(shè)備的結(jié)構(gòu)示意圖。在圖4中,多屏幕顯示設(shè) 備包括視頻選擇部分1、顯示位置確定部分2、顯示數(shù)據(jù)提取部分3、數(shù)據(jù)累積部分4、解碼處理部分5、多屏幕產(chǎn)生部分6、顯示部分7和增強(qiáng)屏幕確定部分8。數(shù)據(jù)累積部分4對(duì)按照MPEG格式編碼以進(jìn)行多屏幕顯示的視頻內(nèi)容進(jìn)行累積,并 且由諸如具有大容量和高讀出速度的硬盤之類的存儲(chǔ)介質(zhì)構(gòu)成。在數(shù)據(jù)累積部分4中累積 的那些視頻內(nèi)容是由調(diào)諧器部分從廣播電波中獲取的信號(hào)轉(zhuǎn)換的視頻信號(hào)、從通過與網(wǎng)絡(luò) 相連的服務(wù)器所保留的視頻內(nèi)容而獲得的視頻信號(hào)、以及從另一個(gè)外部視頻輸出裝置(例 如,DVD裝置)輸入的視頻信號(hào)。當(dāng)用戶給出多屏幕顯示指令時(shí),視頻選擇部分1顯示在數(shù)據(jù)累積部分4中累積的 視頻內(nèi)容列表,允許用戶從該列表中選擇所需視頻內(nèi)容進(jìn)行多屏幕顯示,并且向位置確定 部分2提供用于存儲(chǔ)選定視頻內(nèi)容的地址。位置確定部分2確定哪個(gè)小屏幕顯示從視頻選擇部分1提供的視頻內(nèi)容。根據(jù)預(yù) 設(shè)的劃分號(hào)碼,在多屏幕顯示時(shí)向小屏幕的顯示位置給出唯一的號(hào)碼(稱作屏幕號(hào)碼),并 且通過使屏幕號(hào)碼與用于存儲(chǔ)視頻內(nèi)容的地址相對(duì)應(yīng)來向顯示數(shù)據(jù)提取部分3提供所述 屏幕號(hào)碼。顯示數(shù)據(jù)提取部分3同時(shí)向解碼處理部分5提供從位置確定部分2提供的視頻內(nèi) 容的代碼數(shù)據(jù)。對(duì)于視頻內(nèi)容的代碼數(shù)據(jù),從用于存儲(chǔ)視頻內(nèi)容的地址中取出已編碼的數(shù) 據(jù)。當(dāng)發(fā)射所述代碼數(shù)據(jù)時(shí),將顯示通過對(duì)已編碼數(shù)據(jù)進(jìn)行解碼獲得的視頻的小屏幕的屏 幕號(hào)碼進(jìn)行添加并且發(fā)射至解碼處理部分5。在轉(zhuǎn)換時(shí)間期間,增強(qiáng)屏幕確定部分8產(chǎn)生強(qiáng)調(diào)小屏幕的屏幕號(hào)碼,并且持續(xù)的 將所述屏幕號(hào)碼提供至解碼處理部分5和多屏幕產(chǎn)生部分6。因此,將以下的信息片段設(shè)定為預(yù)定值,或者由用戶設(shè)定。(1)轉(zhuǎn)換時(shí)間的設(shè)定轉(zhuǎn)換時(shí)間表示用于改變所述強(qiáng)調(diào)小屏幕的時(shí)間間隔,并且將其設(shè)定為1秒作為缺省值。(2)轉(zhuǎn)換序列號(hào)表的設(shè)定轉(zhuǎn)換序列號(hào)表是存儲(chǔ)按照強(qiáng)調(diào)顯示的順序強(qiáng)調(diào)顯示小屏幕的屏幕號(hào)碼的、并且當(dāng) 確定屏幕劃分個(gè)數(shù)和視線移動(dòng)方向時(shí)設(shè)定的表。根據(jù)三種類型的視線移動(dòng)方向或用戶設(shè)定的方向來確定強(qiáng)調(diào)顯示的序列號(hào)。例如,盡管在圖1的掃描型水平移動(dòng)情況下小屏幕號(hào)碼與強(qiáng)調(diào)顯示的序列號(hào)相 同,在圖2或圖3的情況下小屏幕號(hào)碼并不與強(qiáng)調(diào)顯示的序列號(hào)相同。增強(qiáng)屏幕確定部分8將對(duì)于每一個(gè)轉(zhuǎn)換時(shí)間的強(qiáng)調(diào)顯示的順序進(jìn)行求和,以獲得 在與轉(zhuǎn)換序列號(hào)表的計(jì)數(shù)相對(duì)應(yīng)的位置處的小屏幕的屏幕號(hào)碼,并且在轉(zhuǎn)換期間向解碼處 理部分5和多屏幕產(chǎn)生部分6持續(xù)地提供屏幕號(hào)碼作為強(qiáng)調(diào)的屏幕信息。如果強(qiáng)調(diào)顯示的順序到達(dá)轉(zhuǎn)換序列號(hào)表的末尾,從轉(zhuǎn)換序列號(hào)表的頂部再次執(zhí)行 求和。然后將描述所述解碼處理部分。所述解碼處理部分5包括與已編碼數(shù)據(jù)相對(duì)應(yīng)的多個(gè)解碼器,以同時(shí)在多個(gè)所提 供的已編碼數(shù)據(jù)(視頻信號(hào)數(shù)據(jù))上執(zhí)行解碼處理。在已編碼數(shù)據(jù)的每一個(gè)片段上執(zhí)行解碼處理的每一個(gè)解碼器向多屏幕產(chǎn)生部分6 提供視頻輸出和顯示所述視頻的小屏幕的屏幕號(hào)碼,其中,所述視頻輸出通過在從顯示數(shù)據(jù)提取部分3提供的已編碼數(shù)據(jù)上執(zhí)行解碼處理獲得。下面將描述在已編碼數(shù)據(jù)的單一片段上執(zhí)行解碼處理的解碼器。圖5是根據(jù)該實(shí)施例的解碼器的結(jié)構(gòu)方框圖。在圖5中,解碼器包括緩沖器11、 解復(fù)用器12、負(fù)載減輕部分20、可變長(zhǎng)度解碼部分13、逆量化器14、逆DCT部分15、加法器 16、圖片重設(shè)部分17、移動(dòng)預(yù)測(cè)部分18和圖片累積部分19。根據(jù)解碼處理的發(fā)展,解碼器將從顯示數(shù)據(jù)提取部分3中提供的已編碼數(shù)據(jù)存儲(chǔ) 到緩沖器11中,并且順序地從緩沖器11中讀出已編碼數(shù)據(jù)并且將其提供給解復(fù)用器12。解復(fù)用器12分析已編碼數(shù)據(jù)的首部,并且向負(fù)載減輕部分20提供圖片類型、沿水 平方向的像素個(gè)數(shù)、沿垂直方向的行個(gè)數(shù)、以及在I、P和B類型代碼情況下的已編碼數(shù)據(jù)。 在運(yùn)動(dòng)矢量的情況下,將運(yùn)動(dòng)矢量和編碼模式提供給運(yùn)動(dòng)預(yù)測(cè)部分18。負(fù)載減輕部分20順序地從解復(fù)用器12接收代碼,并且丟棄代碼中滿足預(yù)定條件 的B圖片代碼,以直接向可變長(zhǎng)度解碼部分13提供I圖片代碼和P圖片代碼,如下所述。可變長(zhǎng)度檢測(cè)部分13從負(fù)載減輕部分20提供的代碼中檢測(cè)可變長(zhǎng)度代碼,將所 述可變長(zhǎng)度代碼重新存儲(chǔ)為固定長(zhǎng)度代碼,并且將所述代碼提供給逆量化器14。逆量化器14將在編碼一側(cè)量化的轉(zhuǎn)換系數(shù)的代碼逆轉(zhuǎn)換為原始的轉(zhuǎn)換系數(shù),并 且用來自解復(fù)用器12的量化步長(zhǎng)尺寸執(zhí)行逆量化,以向逆DCT部分15提供轉(zhuǎn)換系數(shù)。逆DCT部分15將來自逆量化器14的轉(zhuǎn)換系數(shù)逆轉(zhuǎn)換為原始像素值,并且再現(xiàn)了 在編碼一側(cè)進(jìn)行DCT (離散余弦變換)的每一個(gè)宏塊的視頻信號(hào)。通過加法器16將再現(xiàn)的 視頻信號(hào)提供給圖片再現(xiàn)部分17,或者在圖片累積部分19中臨時(shí)地累積所述再現(xiàn)的視頻 信號(hào)。運(yùn)動(dòng)預(yù)測(cè)部分18通過用對(duì)于來自圖片累積部分19的在先幀的視頻信號(hào)的運(yùn)動(dòng)矢 量執(zhí)行運(yùn)動(dòng)補(bǔ)償產(chǎn)生當(dāng)前幀的視頻信號(hào)。通過加法器16將運(yùn)動(dòng)補(bǔ)償?shù)囊曨l信號(hào)從逆DCT 部分15添加至視頻信號(hào),并將所述運(yùn)動(dòng)補(bǔ)償?shù)囊曨l信號(hào)存儲(chǔ)在幀緩沖器中。圖片重設(shè)部分17對(duì)來自幀緩沖器的圖片順序進(jìn)行校正,并且輸出按照顯示的順 序讀出的圖片。圖6是在根據(jù)該實(shí)施例的解碼器中的負(fù)載減輕部分20的結(jié)構(gòu)方框圖。在圖6中, 負(fù)載減輕部分20包括顯示尺寸確定部分21、強(qiáng)調(diào)視頻確定部分22和B圖片跳過部分23。在該實(shí)施例中,可以針對(duì)與強(qiáng)調(diào)顯示的序列號(hào)相對(duì)應(yīng)的小屏幕周圍的小屏幕設(shè)定 不刪除B圖片的范圍,并且假設(shè)將為此目的的范圍預(yù)先由缺省值設(shè)定或用戶設(shè)定。例如,當(dāng)只在所注視的小屏幕中沒有刪除B圖片時(shí),將所述范圍設(shè)定為零。當(dāng)在沿 四個(gè)方向的所注視小屏幕中的三個(gè)屏幕內(nèi)的小屏幕中不刪除B圖片時(shí),將所述范圍設(shè)定為 3。自然地,可以沿1/2/3的方向而不是4個(gè)方向來展開所述范圍。負(fù)載減輕部分20首先將解復(fù)用器12提供的已編碼數(shù)據(jù)提供給顯示尺寸確定部分 21。顯示尺寸確定部分21接收所提供的已編碼的顯示尺寸(沿水平方向的像素個(gè)數(shù) 和沿垂直方向的行數(shù)),以確定顯示尺寸是否比預(yù)定閾值更大。如果不大于預(yù)定閾值,將所提供的已編碼數(shù)據(jù)提供給B圖片跳過部分23。如果不 小于預(yù)定閾值,將所提供的已編碼數(shù)據(jù)提供給強(qiáng)調(diào)視頻確定部分22。因?yàn)橛脩敉ǔ娘@示設(shè)備屏幕高度約3倍的距離觀看視頻,可以認(rèn)為如果每個(gè)視
8頻的垂直和水平分辨率不大于顯示設(shè)備屏幕寬度的像素個(gè)數(shù)的1/8,就不會(huì)注意到B圖片 的刪除,因此,將所述預(yù)定閾值設(shè)定為顯示設(shè)備的屏幕寬度的1/8。例如,在使用具有1080個(gè)垂直行和1920個(gè)水平像素的顯示設(shè)備的情況下,如果已 編碼數(shù)據(jù)(視頻信號(hào))具有不大于135的垂直行個(gè)數(shù)和不大于240的水平像素個(gè)數(shù),將所 述值用作確定是否跳過B圖片的預(yù)定閾值。強(qiáng)調(diào)視頻確定部分22確定在對(duì)所提供的已編碼數(shù)據(jù)進(jìn)行解碼時(shí)用于顯示的小屏 幕個(gè)數(shù)是否與從增強(qiáng)屏幕確定部分8提供的屏幕個(gè)數(shù)或用于刪除B圖片的范圍內(nèi)的屏幕個(gè) 數(shù)相同。如果所述屏幕個(gè)數(shù)相同或者在所述范圍內(nèi),直接輸出所提供的已編碼數(shù)據(jù);如果 屏幕個(gè)數(shù)在所述范圍之外,將所提供的已編碼數(shù)據(jù)提供給B圖片跳過部分23。如果B圖片是從顯示尺寸確定部分21或強(qiáng)調(diào)視頻確定部分22提供的已編碼數(shù)據(jù) 的圖片類型,B圖片跳過部分23跳過所提供的已編碼數(shù)據(jù)。可選地,當(dāng)所提供的已編碼數(shù) 據(jù)的圖片類型是I圖片或P圖片時(shí),將所述數(shù)據(jù)直接原樣輸出。如上,負(fù)載減輕部分20確定解碼處理中的每一個(gè)視頻信號(hào)是否與引導(dǎo)用戶視線 的視頻相對(duì)應(yīng)、或者落在引導(dǎo)用戶視線的范圍之內(nèi),并且由于將用戶的視線導(dǎo)引至視頻,通 過使用I圖片、B圖片和P圖片的所有圖片來針對(duì)相應(yīng)的視頻執(zhí)行完整的解碼處理。另一方面,如果不相對(duì)應(yīng),由于幾乎不會(huì)導(dǎo)引用戶的視線,因此去除B圖片,并且 通過只使用I圖片和P圖片來執(zhí)行解碼處理。圖7是表示根據(jù)該實(shí)施例的解碼器中的處理流程的流程圖。對(duì)于以下描述中的符 號(hào),P表示對(duì)當(dāng)處理時(shí)已編碼數(shù)據(jù)進(jìn)行解碼時(shí)用于顯示視頻的小屏幕個(gè)數(shù),以及S表示使用 戶導(dǎo)引視線的強(qiáng)調(diào)屏幕個(gè)數(shù)。輸入所提供的已編碼數(shù)據(jù),并且如果已編碼數(shù)據(jù)的顯示尺寸小于預(yù)定的閾值(步 驟S12/否),跳過B圖片的已解碼數(shù)據(jù)(步驟S14),并且過程進(jìn)行到步驟S15。另一方面,如果所提供的已解碼數(shù)據(jù)大于預(yù)定的閾值(步驟S12/是),確定所提供 的已編碼數(shù)據(jù)的小屏幕個(gè)數(shù)(P)是否接近強(qiáng)調(diào)的屏幕個(gè)數(shù)(步驟S13)。例如,根據(jù)由S-3 < P < S+3表示的等式進(jìn)行確定。確定所述小屏幕個(gè)數(shù)是否與 要強(qiáng)調(diào)的小屏幕的在先和在后三個(gè)小屏幕的個(gè)數(shù)相對(duì)應(yīng)。如果所提供的已編碼數(shù)據(jù)的小屏幕個(gè)數(shù)(P)遠(yuǎn)離強(qiáng)調(diào)屏幕個(gè)數(shù)(S)(步驟S13/ 否),跳過B圖片的已編碼數(shù)據(jù),并且過程進(jìn)行到步驟S15。另一方面,如果所提供的已編碼數(shù)據(jù)的小屏幕個(gè)數(shù)(P)接近強(qiáng)調(diào)屏幕個(gè)數(shù)(步驟 S13/是),過程進(jìn)行到步驟S15。輸出的視頻信號(hào)用于可變長(zhǎng)度解碼的處理(步驟S15),通過使用如上所述處理的 已編碼數(shù)據(jù)(步驟S19)、按照與傳統(tǒng)MPEG解碼處理相同的方式執(zhí)行逆量化(步驟S16)、逆 DCT (步驟S17)和圖片重設(shè)(步驟S18)。將描述多屏幕發(fā)生部分6。所述多屏幕發(fā)生部分6將針對(duì)小屏幕而提供的視頻信號(hào)調(diào)整尺寸為所述小屏幕 的尺寸,在所述多屏幕顯示的預(yù)定位置處組合視頻信號(hào),并且將所述視頻信號(hào)輸出至由液 晶顯示器、等離子體顯示器等等構(gòu)成的顯示部分7。盡管在該實(shí)施例中可以對(duì)與強(qiáng)調(diào)顯示的序列號(hào)相對(duì)應(yīng)的小屏幕周圍的小屏幕執(zhí)行強(qiáng)調(diào)顯示,假設(shè)為此目的的范圍預(yù)先由缺省值或用戶設(shè)定。例如,當(dāng)只針對(duì)所注視的小屏幕執(zhí)行強(qiáng)調(diào)顯示時(shí),將所述范圍設(shè)定為零。當(dāng)針對(duì)來 自沿四個(gè)方向所注視的小屏幕的五個(gè)小屏幕內(nèi)的小屏幕執(zhí)行強(qiáng)調(diào)顯示時(shí),將所述范圍設(shè)定 為5。自然地,所述范圍可以是沿1/2/3個(gè)方向而不是4個(gè)方向。圖8是根據(jù)該實(shí)施例的多屏幕發(fā)生部分6的結(jié)構(gòu)方框圖。在圖8中,所述多屏幕 發(fā)生部分6包括調(diào)整尺寸部分61、亮度調(diào)節(jié)部分62和組合部分63。將調(diào)整尺寸部分61和 亮度調(diào)節(jié)部分62相應(yīng)地提供給小屏幕,以將他們各自的輸出提供給組合部分63。多屏幕發(fā)生部分6將解碼處理部分5提供的視頻信號(hào)提供給相應(yīng)的調(diào)整尺寸部分 61。所述調(diào)整尺寸部分61獲取將要顯示的視頻的顯示尺寸(沿水平方向的像素個(gè)數(shù), 沿垂直方向的行數(shù)),如果所述顯示尺寸水平地大于小屏幕區(qū)域的高寬比,根據(jù)水平像素的 個(gè)數(shù)調(diào)整顯示尺寸,以及如果所述顯示尺寸垂直地大于小屏幕區(qū)域的高寬比,根據(jù)垂直像 素的個(gè)數(shù)調(diào)整顯示尺寸。調(diào)整尺寸部分61將已調(diào)整尺寸的信號(hào)提供給亮度調(diào)節(jié)部分62。亮度調(diào)節(jié)部分62確定用于顯示從調(diào)整尺寸部分61提供的視頻信號(hào)的小屏幕個(gè)數(shù) 是否落在強(qiáng)調(diào)顯示的屏幕個(gè)數(shù)周圍的范圍內(nèi)。如果落在強(qiáng)調(diào)顯示的屏幕個(gè)數(shù)周圍的范圍內(nèi),維持或者增加已調(diào)整尺寸的視頻的 亮度,否則將具有已調(diào)整尺寸視頻的亮度的視頻信號(hào)提供給組合部分63,減小所述已調(diào)整 視頻的亮度使得幾乎不會(huì)將用戶視線導(dǎo)引至此的已調(diào)整尺寸視頻亮度。在亮度調(diào)節(jié)時(shí),可以與強(qiáng)調(diào)顯示的小屏幕的距離成反比例地執(zhí)行漸變亮度調(diào)節(jié), 并且可以執(zhí)行隨著與強(qiáng)調(diào)視頻距離的增加減小所述亮度的顯示。組合部分63在與小屏幕個(gè)數(shù)相對(duì)應(yīng)的屏幕上的顯示位置處對(duì)從亮度調(diào)節(jié)部分62 提供的視頻信號(hào)進(jìn)行組合,并且將所述視頻信號(hào)作為與一個(gè)屏幕相對(duì)應(yīng)的視頻信號(hào)輸出至 顯示部分7。圖9是多屏幕發(fā)生部分6的處理程序的流程圖。從解碼處理部分5接收視頻信號(hào)(步驟S21),并且獲取將要顯示的視頻的顯示尺 寸(沿水平方向的像素個(gè)數(shù),沿垂直方向的行數(shù)),如果所述顯示尺寸水平地大于小屏幕區(qū) 域的高寬比,根據(jù)水平像素的個(gè)數(shù)調(diào)整顯示尺寸;以及如果顯示尺寸垂直地大于小屏幕區(qū) 域的高寬比,根據(jù)垂直像素的個(gè)數(shù)調(diào)整顯示尺寸(步驟S22)。確定用于顯示已調(diào)整尺寸的視頻信號(hào)的小屏幕個(gè)數(shù)(P)是否落在強(qiáng)調(diào)顯示的屏 幕個(gè)數(shù)(S)周圍的范圍內(nèi)(步驟S23)。如果落在強(qiáng)調(diào)顯示的屏幕個(gè)數(shù)周圍的范圍內(nèi)(步驟S23/是),產(chǎn)生具有維持或增 加的已調(diào)整尺寸視頻的亮度的視頻信號(hào)(步驟S24)。否則(步驟S23/否),產(chǎn)生具有減小 亮度的已調(diào)整尺寸的視頻信號(hào),減小所述已調(diào)整尺寸視頻的亮度使得幾乎不會(huì)將用戶視線 導(dǎo)引至此(步驟S25)。例如,根據(jù)由S-5 < P < S+5代表的等式進(jìn)行所述確定。確定小屏幕個(gè)數(shù)是否與 將要強(qiáng)調(diào)的小屏幕的在先和在后五個(gè)小屏幕相對(duì)應(yīng)。在與小屏幕個(gè)數(shù)相對(duì)應(yīng)的屏幕上的顯示位置處組合已調(diào)節(jié)亮度的視頻信號(hào)(步 驟S26),并且作為與一個(gè)屏幕相對(duì)應(yīng)的視頻信號(hào)輸出至顯示部分(步驟S27)。
利用這種結(jié)構(gòu),可以將多屏幕顯示用于顯示多個(gè)視頻而不會(huì)給出不可思議的感 受,同時(shí)減輕了針對(duì)已編碼視頻內(nèi)容的解碼處理的負(fù)載。通過沿自然移動(dòng)方向?qū)б脩舻囊暰€,更加容易地選擇所需視頻。自然地,本發(fā)明不局限于以上實(shí)施例,并且在不脫離本發(fā)明范圍的情況下可以不 同地進(jìn)行修改和更改。例如,盡管已經(jīng)按照在數(shù)據(jù)記錄設(shè)備中累計(jì)視頻內(nèi)容的方式描述了以上實(shí)施例, 如果多屏幕顯示設(shè)備具有電視廣播接收功能、因特網(wǎng)連接功能或?qū)τ谠佻F(xiàn)視頻內(nèi)容的外部 視頻輸出設(shè)備的連接功能,可以在不將視頻內(nèi)容在數(shù)據(jù)記錄設(shè)備上累計(jì)的情況下多屏幕顯 示通過這些功能捕獲的視頻內(nèi)容。盡管在該實(shí)施例中具有不大于預(yù)定閾值的顯示尺寸的視頻中刪除了所有B圖片, 但通過使得能夠接通/關(guān)閉顯示尺寸的確定只刪除了除了將要強(qiáng)調(diào)的視頻之外的視頻的B 圖片。盡管在所述實(shí)施例的描述中視頻內(nèi)容的編碼格式是MPEG-4,本發(fā)明也可應(yīng)用于其 他編碼格式,例如H. 264。
權(quán)利要求
一種多屏幕顯示設(shè)備,在單一屏幕上顯示多個(gè)視頻,包括強(qiáng)調(diào)屏幕確定部分,指定顯示多個(gè)視頻中的強(qiáng)調(diào)視頻的屏幕;以及負(fù)載減輕部分,對(duì)于除了通過強(qiáng)調(diào)屏幕確定部分確定的在屏幕上顯示的視頻之外的那些視頻,在解碼處理部分中減小處理負(fù)載。
2.根據(jù)權(quán)利要求1所述的多屏幕顯示設(shè)備,其中,如果視頻的顯示尺寸比預(yù)定尺寸小, 所述負(fù)載減輕部分減小針對(duì)視頻在解碼處理部分中的處理負(fù)載。
3.根據(jù)權(quán)利要求1或2所述的多屏幕顯示設(shè)備,其中,所述強(qiáng)調(diào)屏幕確定部分確定在預(yù) 定的時(shí)間間隔執(zhí)行強(qiáng)調(diào)顯示的屏幕。
4.根據(jù)權(quán)利要求1、2或3所述的多屏幕顯示設(shè)備,其中,如果所述視頻是包括I圖片、 P圖片和B圖片的混合視頻的已編碼數(shù)據(jù),其中所述I圖片是在幀內(nèi)進(jìn)行信息壓縮的二維壓 縮視頻數(shù)據(jù),所述P圖片是通過時(shí)間上向前方向用I圖片添加運(yùn)動(dòng)補(bǔ)償進(jìn)行信息壓縮的三 維壓縮視頻數(shù)據(jù),以及所述B圖片是通過時(shí)間上向前和時(shí)間向后方向用I圖片或P圖片添 加運(yùn)動(dòng)補(bǔ)償進(jìn)行信息壓縮的三維壓縮視頻數(shù)據(jù),則所述負(fù)載減輕部分通過刪除除了由強(qiáng)調(diào) 屏幕確定部分確定的在屏幕上顯示的視頻之外的視頻的B圖片,減小了解碼處理中的處理 負(fù)載。
全文摘要
提供了一種多屏幕顯示設(shè)備,在減小已編碼圖像內(nèi)容的解碼處理的負(fù)載的同時(shí)通過使用多屏幕顯示,能夠在不帶來不舒適感覺的同時(shí)顯示更多圖像。用于在單一屏幕上顯示由包括混合圖片(I、P、B)的已編碼數(shù)據(jù)組成的多個(gè)圖像的多屏幕顯示設(shè)備包括高亮度屏幕確定部分,用于指定每隔預(yù)定時(shí)間顯示圖像的高亮度圖像輸出的屏幕;以及負(fù)載減小部分,用于對(duì)于通過刪除圖片(B)來對(duì)于在由高亮度屏幕確定部分確定的屏幕上顯示的圖像之外的圖像的解碼處理部分中減小處理負(fù)載。據(jù)此,在針對(duì)每一個(gè)預(yù)定的時(shí)間改變圖像的同時(shí)顯示高亮的圖像,從而可以引導(dǎo)用戶的視線以面對(duì)平滑的圖像。
文檔編號(hào)H04N5/00GK101926168SQ200980102819
公開日2010年12月22日 申請(qǐng)日期2009年1月20日 優(yōu)先權(quán)日2008年1月25日
發(fā)明者三橋禎, 中澤正幸 申請(qǐng)人:夏普株式會(huì)社