遠(yuǎn)程顯示裝置制造方法
【專利摘要】本發(fā)明提供一種遠(yuǎn)程顯示裝置,能夠不對(duì)數(shù)字電視接收器追加硬件,即可在數(shù)字電視接收器的顯示畫面上顯示為了信息處理裝置的顯示畫面上的顯示而生成的包含動(dòng)態(tài)圖像區(qū)域的顯示圖像。信息處理裝置(100)對(duì)表示動(dòng)態(tài)圖像區(qū)域的圖像的數(shù)據(jù)進(jìn)行壓縮編碼并發(fā)送,將靜態(tài)圖像區(qū)域的數(shù)據(jù)作為位圖數(shù)據(jù)進(jìn)行發(fā)送,數(shù)字電視接收器(200)對(duì)壓縮后的動(dòng)態(tài)圖像區(qū)域的數(shù)據(jù)進(jìn)行解碼,并與靜態(tài)圖像區(qū)域的數(shù)據(jù)進(jìn)行合成。
【專利說明】遠(yuǎn)程顯示裝置【技術(shù)領(lǐng)域】
[0001]本發(fā)明涉及在經(jīng)由網(wǎng)絡(luò)與個(gè)人計(jì)算機(jī)(PC)等信息處理裝置連接的數(shù)字電視接收器的顯示畫面上顯示為了該信息處理裝置的顯示畫面上的顯示而生成的圖像(顯示圖像)的遠(yuǎn)程顯示裝置。
【背景技術(shù)】
[0002]隨著辦公室和家庭內(nèi)的網(wǎng)絡(luò)普及,提出了將信息處理裝置、例如PC的顯示圖像顯示在經(jīng)由網(wǎng)絡(luò)與該P(yáng)C連接的顯示裝置的顯示畫面上的方法(專利文獻(xiàn)I)。在這種用途中,一般使用被稱作RFB (Remote Frame Buffer:遠(yuǎn)程幀緩沖)的協(xié)議。但是,該協(xié)議基本上用于位圖數(shù)據(jù)的傳送處理,不適于動(dòng)態(tài)圖像的傳送。
[0003]此外,在專利文獻(xiàn)2中記載了有效實(shí)現(xiàn)動(dòng)態(tài)圖像的傳送的方法。在專利文獻(xiàn)2的方法中,在畫面中僅提取圖像發(fā)生了變化的區(qū)域的像素?cái)?shù)據(jù),進(jìn)行圖像壓縮而傳送。
[0004]【專利文獻(xiàn)I】日本特開2005-284195號(hào)公報(bào)
[0005]【專利文獻(xiàn)2】日本特開2004-086550號(hào)公報(bào)
[0006]在專利文獻(xiàn)I和2的結(jié)構(gòu)中,在顯示圖像包含動(dòng)態(tài)圖像的情況下,為了快速的畫面更新需要增加軟件負(fù)荷和/或追加專用硬件等,從而在產(chǎn)品化時(shí)可能帶來成本上升。
【發(fā)明內(nèi)容】
[0007]本發(fā)明的目的在于,通過將在信息處理裝置中為了其顯示畫面上的顯示而生成的圖像顯示在經(jīng)由網(wǎng)絡(luò)與該信息處理裝置連接的數(shù)字電視接收器的顯示畫面上,將軟件的復(fù)雜化抑制到最小限度,并且直接使用一直以來使用的數(shù)字電視接收器的硬件來實(shí)現(xiàn)例如放置于某個(gè)場(chǎng)所、例如一個(gè)房間的信息處理裝置由`處于例如另一個(gè)場(chǎng)所、例如另一個(gè)房間的數(shù)字電視接收器進(jìn)行操作的情況等。
[0008]本發(fā)明的第I方式的遠(yuǎn)程顯示裝置在經(jīng)由網(wǎng)絡(luò)與信息處理裝置連接的數(shù)字電視接收器的顯示畫面上顯示為了該信息處理裝置的顯示畫面上的顯示而生成的顯示圖像,所述信息處理裝置對(duì)通過保持所述顯示圖像內(nèi)的動(dòng)態(tài)圖像區(qū)域的像素的像素值、并用預(yù)先確定的固定值置換其他區(qū)域的像素的像素值而生成的動(dòng)態(tài)圖像幀數(shù)據(jù)進(jìn)行壓縮編碼,并作為視頻流送出到所述網(wǎng)絡(luò),經(jīng)由所述網(wǎng)絡(luò)將所述顯示圖像內(nèi)的靜態(tài)圖像區(qū)域的數(shù)據(jù)作為位圖數(shù)據(jù)送出到所述網(wǎng)絡(luò),所述數(shù)字電視接收器從所述網(wǎng)絡(luò)接收所述視頻流和所述位圖數(shù)據(jù),對(duì)接收到的所述視頻流進(jìn)行解碼而再現(xiàn)包含動(dòng)態(tài)圖像區(qū)域的圖像,根據(jù)接收到的所述位圖數(shù)據(jù)再現(xiàn)所述靜態(tài)圖像區(qū)域的圖像,對(duì)所再現(xiàn)的所述包含動(dòng)態(tài)圖像區(qū)域的圖像和所再現(xiàn)的所述靜態(tài)圖像區(qū)域的圖像進(jìn)行合成,由所述數(shù)字電視接收器的顯示部顯示通過合成得到的合成圖像。
[0009]本發(fā)明的第2方式的遠(yuǎn)程顯示裝置在經(jīng)由網(wǎng)絡(luò)與信息處理裝置連接的數(shù)字電視接收器的顯示畫面上顯示為了該信息處理裝置的顯示畫面上的顯示而生成的顯示圖像,所述顯示圖像所包含的動(dòng)態(tài)圖像區(qū)域的圖像通過在所述信息處理裝置內(nèi)對(duì)原圖像進(jìn)行放大而得到,所述信息處理裝置對(duì)表示所述原圖像的數(shù)據(jù)進(jìn)行壓縮編碼,并作為視頻流送出到所述網(wǎng)絡(luò),將所述顯示圖像內(nèi)的靜態(tài)圖像區(qū)域的數(shù)據(jù)作為位圖數(shù)據(jù)送出到所述網(wǎng)絡(luò),所述數(shù)字電視接收器從所述網(wǎng)絡(luò)接收所述視頻流和所述位圖數(shù)據(jù),對(duì)接收到的所述視頻流進(jìn)行解碼,并且利用畫中畫功能進(jìn)行放大來再現(xiàn)所述動(dòng)態(tài)圖像區(qū)域的圖像,根據(jù)接收到的所述位圖數(shù)據(jù)再現(xiàn)所述靜態(tài)圖像區(qū)域的圖像,對(duì)所再現(xiàn)的所述動(dòng)態(tài)圖像區(qū)域的圖像和所再現(xiàn)的所述靜態(tài)圖像區(qū)域的圖像進(jìn)行合成,由所述數(shù)字電視接收器的顯示部顯示通過合成得到的合成圖像。
[0010]本發(fā)明的第3方式的遠(yuǎn)程顯示裝置在經(jīng)由網(wǎng)絡(luò)與信息處理裝置連接的數(shù)字電視接收器的顯示畫面上顯示為了該信息處理裝置的顯示畫面上的顯示而生成的顯示圖像,所述信息處理裝置進(jìn)行所述顯示圖像所包含的動(dòng)態(tài)圖像區(qū)域的圖像是否為在所述信息處理裝置內(nèi)對(duì)原圖像進(jìn)行放大而得到的圖像的判定,在所述動(dòng)態(tài)圖像區(qū)域的圖像是通過對(duì)所述原圖像進(jìn)行放大而得到的圖像的情況下,對(duì)表示所述原圖像的數(shù)據(jù)進(jìn)行壓縮編碼,并作為視頻流送出到所述網(wǎng)絡(luò),在所述動(dòng)態(tài)圖像區(qū)域的圖像是未對(duì)所述原圖像進(jìn)行放大而得到的圖像的情況下,對(duì)表示所述動(dòng)態(tài)圖像區(qū)域的圖像的數(shù)據(jù)進(jìn)行壓縮編碼,并作為視頻流送出到所述網(wǎng)絡(luò),將所述顯示圖像內(nèi)的靜態(tài)圖像區(qū)域的數(shù)據(jù)作為位圖數(shù)據(jù)送出到所述網(wǎng)絡(luò),所述數(shù)字電視接收器從所述網(wǎng)絡(luò)接收所述視頻流和所述位圖數(shù)據(jù),在所述動(dòng)態(tài)圖像區(qū)域的圖像是通過對(duì)所述原圖像進(jìn)行放大而得到的圖像的情況下,對(duì)接收到的所述視頻流進(jìn)行解碼,并且利用畫中畫功能進(jìn)行放大來再現(xiàn)所述動(dòng)態(tài)圖像區(qū)域的圖像,在所述動(dòng)態(tài)圖像區(qū)域的圖像是未對(duì)所述原圖像進(jìn)行放大而得到的圖像的情況下,對(duì)接收到的所述視頻流進(jìn)行解碼來再現(xiàn)所述動(dòng)態(tài)圖像區(qū)域的圖像,根據(jù)接收到的所述位圖數(shù)據(jù)再現(xiàn)所述靜態(tài)圖像區(qū)域的圖像,對(duì)所再現(xiàn)的所述動(dòng)態(tài)圖像區(qū)域的圖像和所再現(xiàn)的所述靜態(tài)圖像區(qū)域的圖像進(jìn)行合成,由所述數(shù)字電視接收器的顯示部顯示通過合成得到的合成圖像。
[0011]根據(jù)本發(fā)明,能夠在不對(duì)數(shù)字電視接收器追加硬件的情況下,將包含動(dòng)態(tài)圖像的信息處理裝置的顯示圖像顯示在數(shù)字電視接收器的顯示畫面上。
【專利附圖】
【附圖說明】
[0012]圖1是示出本發(fā)明實(shí)施方式I的遠(yuǎn)程顯示裝置的整體結(jié)構(gòu)的框圖。
[0013]圖2是示出圖1的PC的結(jié)構(gòu)的框圖。
[0014]圖3是與顯示圖像生成部、顯示部和網(wǎng)絡(luò)接口部一起示出用于實(shí)現(xiàn)圖2的PC的區(qū)域判定部、分離部、視頻編碼部、位圖送出部和控制部的功能的結(jié)構(gòu)的框圖。
[0015]圖4是示出圖1的數(shù)字電視接收器的結(jié)構(gòu)的框圖。
[0016]圖5的(a)?(d)是示出圖2和圖4所示的遠(yuǎn)程顯示裝置中的處理流程的概念圖。
[0017]圖6是示出本發(fā)明實(shí)施方式2的遠(yuǎn)程顯示裝置的PC的結(jié)構(gòu)的框圖。
[0018]圖7是示出本發(fā)明實(shí)施方式2的遠(yuǎn)程顯示裝置的數(shù)字電視接收器的結(jié)構(gòu)的框圖。
[0019]圖8的(a)?(f)是示出圖6和圖7所示的遠(yuǎn)程顯示裝置中的處理流程的概念圖。
[0020]圖9是示出本發(fā)明實(shí)施方式3的遠(yuǎn)程顯示裝置的PC的結(jié)構(gòu)的框圖。
[0021]圖10是示出本發(fā)明實(shí)施方式3的遠(yuǎn)程顯示裝置的數(shù)字電視接收器的結(jié)構(gòu)的框圖。
[0022]標(biāo)號(hào)說明
[0023]100個(gè)人計(jì)算機(jī)(PC)、101顯示圖像生成部、102區(qū)域判定部、103分離部、104視頻編碼部、105位圖送出部、106網(wǎng)絡(luò)接口部、107顯示部、108控制部、110軟件、121流解碼部、123分離部、131選擇部、200數(shù)字電視接收器、201網(wǎng)絡(luò)接口部、202視頻流接收部、203視頻解碼部、204位圖接收部、205圖形處理部、206合成部、207顯示部、208控制部、209輸入部、210數(shù)字電視接收器用集成電路、221子畫面生成部、231選擇部、300網(wǎng)絡(luò)。
【具體實(shí)施方式】
[0024]實(shí)施方式1.[0025]圖1示出本發(fā)明實(shí)施方式I的遠(yuǎn)程顯示裝置,作為信息處理裝置的一例的PC100與數(shù)字電視接收器200經(jīng)由網(wǎng)絡(luò)300連接。
[0026]PC100配置于一個(gè)場(chǎng)所,例如一個(gè)房間、家庭內(nèi)的書房等,數(shù)字電視接收器200配
置于另一個(gè)場(chǎng)所、例如另一個(gè)房間、起居室等。
[0027]圖1的遠(yuǎn)程顯示裝置用于利用PC100將表示為了其顯示畫面的顯示而生成的圖像(顯示圖像)的數(shù)據(jù)(畫面數(shù)據(jù))發(fā)送到數(shù)字電視接收器200,并顯示在數(shù)字電視接收器200的顯示畫面上。
[0028]例如圖2所示,PC100具有顯示圖像生成部101、區(qū)域判定部102、分離部103、視頻編碼部104、位圖送出部105、網(wǎng)絡(luò)接口部106、顯示部107和控制部108。
[0029]上述各部中的區(qū)域判定部102、分離部103、視頻編碼部104、位圖送出部105和控制部108通過軟件110、即程序控制的計(jì)算機(jī)實(shí)現(xiàn)。即,如圖3所示,PC100除了顯示圖像生成部101、顯示部107和網(wǎng) 絡(luò)接口部106以外,還具有CPU111、程序存儲(chǔ)器112和數(shù)據(jù)存儲(chǔ)器113,CPUlll通過執(zhí)行程序存儲(chǔ)器112所存儲(chǔ)的程序,實(shí)現(xiàn)區(qū)域判定部102、分離部103、視頻編碼部104、位圖送出部105和控制部108的功能。在CPUlll執(zhí)行程序時(shí)生成的運(yùn)算結(jié)果、數(shù)據(jù)等被臨時(shí)存儲(chǔ)在數(shù)據(jù)存儲(chǔ)器113中。
[0030]顯示圖像生成部101生成表示用于顯示部107的顯示畫面107a上的顯示的圖像(顯示圖像)的圖像數(shù)據(jù)(畫面數(shù)據(jù))。該顯示圖像有時(shí)畫面整體是動(dòng)態(tài)圖像,有時(shí)畫面整體是靜態(tài)圖像。此外,有時(shí)畫面中的一部分是動(dòng)態(tài)圖像,而其他部分是靜態(tài)圖像。
[0031]顯示圖像生成部101由內(nèi)置在PC100中的圖形處理電路構(gòu)成。在該電路中安裝有中貞緩沖器IOla,在幀緩沖器IOla中,蓄積I幀的表示顯示部107的顯示畫面107a上的顯示圖像的圖像數(shù)據(jù)。
[0032]區(qū)域判定部102讀入表示由顯示圖像生成部101生成的顯示圖像的數(shù)據(jù),進(jìn)行各幀的顯示圖像(顯示畫面)中的各部分是否構(gòu)成動(dòng)態(tài)圖像的判定。
[0033]分離部103將顯示圖像分離為由區(qū)域判定部102判定為構(gòu)成動(dòng)態(tài)圖像的部分(動(dòng)態(tài)圖像區(qū)域)和除此以外的部分(靜態(tài)圖像區(qū)域)。
[0034]視頻編碼部104對(duì)由分離部103分離后的動(dòng)態(tài)圖像區(qū)域的圖像數(shù)據(jù)進(jìn)行壓縮編碼來生成編碼數(shù)據(jù),并作為視頻流輸出。
[0035]位圖送出部105將靜態(tài)圖像區(qū)域的圖像數(shù)據(jù)作為位圖數(shù)據(jù)輸出。
[0036]網(wǎng)絡(luò)接口部106將從視頻編碼部104輸出的動(dòng)態(tài)圖像區(qū)域的圖像數(shù)據(jù)和從位圖送出部105輸出的靜態(tài)圖像區(qū)域的圖像數(shù)據(jù)送出到網(wǎng)絡(luò)300。
[0037]例如圖4所示,數(shù)字電視接收器200具有網(wǎng)絡(luò)接口部201、視頻流接收部202、視頻解碼部203、位圖接收部204、圖形處理部205、合成部206、顯示部207、控制部208和輸入部209。
[0038]網(wǎng)絡(luò)接口部201接收從PC100經(jīng)由網(wǎng)絡(luò)300送出的圖像數(shù)據(jù)。
[0039]視頻流接收部202在網(wǎng)絡(luò)接口部201接收到的圖像數(shù)據(jù)中,取出動(dòng)態(tài)圖像區(qū)域的圖像數(shù)據(jù)(通過壓縮編碼生成的視頻流),并提供給視頻解碼部203。
[0040]視頻解碼部203對(duì)由視頻流接收部202接收到的動(dòng)態(tài)圖像區(qū)域的圖像數(shù)據(jù)進(jìn)行解碼。
[0041]位圖接收部204在網(wǎng)絡(luò)接口部201接收到的圖像數(shù)據(jù)中,取出靜態(tài)圖像區(qū)域的圖像數(shù)據(jù)(位圖數(shù)據(jù))并提供給圖形處理部205。
[0042]圖形處理部205將由位圖接收部204接收到的靜態(tài)圖像區(qū)域的圖像數(shù)據(jù)轉(zhuǎn)換為適于數(shù)字電視接收器200的顯示畫面207a上的顯示的形式的數(shù)據(jù)。
[0043]合成部206對(duì)視頻解碼部203的輸出和圖形處理部205的輸出進(jìn)行合成來生成表示應(yīng)顯示在數(shù)字電視接收器200的顯示部207的顯示畫面207a上的圖像(電視顯示圖像)的數(shù)據(jù)(畫面數(shù)據(jù)),并提供給顯示部207。
[0044]顯示部207顯示與從合成部206提供的數(shù)據(jù)對(duì)應(yīng)的圖像。
[0045]上述各部中的視頻流接收部202、視頻解碼部203、位圖接收部204、圖形處理部205和控制部208由數(shù)字電視接收器用集成電路(DTV解碼器芯片)210構(gòu)成。 [0046]輸入部209生成與用戶的操作輸入對(duì)應(yīng)的信號(hào)。
[0047]該操作輸入例如根據(jù)顯示畫面207a上的顯示圖像所包含的⑶I (圖形用戶界面)進(jìn)行。
[0048]與操作輸入對(duì)應(yīng)的信號(hào)作為用戶事件(表示用戶事件的)Ue被輸入到控制部208,并從控制部208經(jīng)由網(wǎng)絡(luò)接口部201被送出到網(wǎng)絡(luò)300,在PC100中,用網(wǎng)絡(luò)接口 106接收表示上述用戶事件的信號(hào)Ue,傳遞到控制部108,控制部108根據(jù)該用戶事件,進(jìn)行PC100的各部的控制。作為該控制的一環(huán),控制顯示圖像生成部101,對(duì)通過顯示圖像生成部101生成的圖像施加變更。例如,在顯示菜單選擇畫面時(shí),如果通過操作輸入按下操作按鈕而選擇了一個(gè)選擇項(xiàng),則根據(jù)該選擇項(xiàng)的選擇顯示提示下一個(gè)操作的畫面。通過反復(fù)進(jìn)行這種處理,而進(jìn)行利用輸入部209進(jìn)行的對(duì)PC100的遠(yuǎn)程操作。
[0049]以下,參照?qǐng)D5的(a)~(d)對(duì)上述遠(yuǎn)程顯示裝置的動(dòng)作更詳細(xì)地進(jìn)行說明。
[0050]圖5的(a)示出由顯示圖像生成部101生成、并蓄積在幀緩沖器IOla中的圖像的一例。圖示的圖像310包含動(dòng)態(tài)圖像區(qū)域311、312以及除此以外的區(qū)域(靜態(tài)圖像區(qū)域)313。
[0051]在區(qū)域判定部102中,讀出蓄積在幀緩沖器IOla中的圖像數(shù)據(jù),進(jìn)行用圖像數(shù)據(jù)表示的圖像的各部分是否為動(dòng)態(tài)圖像區(qū)域(動(dòng)態(tài)圖像部分)的判定,并輸出表示判定結(jié)果的信息MS。作為該信息MS,可以輸出表示判定為動(dòng)態(tài)圖像區(qū)域的部分的位置的信息(幀緩沖地址)。
[0052]作為判定圖像的各部分是否為動(dòng)態(tài)圖像區(qū)域的判定方法,提出了各種方法,可以使用任意一種方法。
[0053]例如,在連續(xù)的(前后的)幀之間取相同顯示位置的像素?cái)?shù)據(jù)之差,將包含較多檢測(cè)到大于預(yù)定值的差的像素的區(qū)域判定為動(dòng)態(tài)圖像區(qū)域。
[0054]在這種判定中,將畫面分割為多個(gè)矩形區(qū)域,關(guān)于各區(qū)域,可以在上述差(絕對(duì)值)大于預(yù)定值的像素所占比例大于預(yù)定值的情況下將該區(qū)域判定為動(dòng)態(tài)圖像區(qū)域。
[0055]此外,可以在用顯示圖像生成部101對(duì)從其外部提供的動(dòng)態(tài)圖像和靜態(tài)圖像進(jìn)行合成來生成顯示圖像數(shù)據(jù)、且與動(dòng)態(tài)圖像的圖像數(shù)據(jù)和靜態(tài)圖像的圖像數(shù)據(jù)一起提供表示是動(dòng)態(tài)圖像還是靜態(tài)圖像的附加信息的情況下,將該附加信息發(fā)送到區(qū)域判定部102,并由區(qū)域判定部102根據(jù)上述附加信息進(jìn)行各部分是否為動(dòng)態(tài)圖像的判定。
[0056]該情況下同樣,例如可以針對(duì)將畫面分割為多個(gè)矩形區(qū)域而形成的各個(gè)區(qū)域,根據(jù)上述附加信息輸出是否為動(dòng)態(tài)圖像區(qū)域的判定結(jié)果。
[0057]分離部103將各幀的顯示圖像(顯示畫面)分離為由區(qū)域判定部102判定為動(dòng)態(tài)圖像的部分(動(dòng)態(tài)圖像區(qū)域)和除此以外的部分(靜態(tài)圖像區(qū)域),從而生成包含動(dòng)態(tài)圖像區(qū)域的圖像數(shù)據(jù)的動(dòng)態(tài)圖像幀數(shù)據(jù)320(圖5的(b))、和包含靜態(tài)圖像區(qū)域的圖像數(shù)據(jù)的靜態(tài)圖像幀數(shù)據(jù)330 (圖5的(C))。
[0058]動(dòng)態(tài)圖像幀數(shù)據(jù)320保持檢測(cè)到的動(dòng)態(tài)圖像區(qū)域311、312的像素的像素值,并且將靜態(tài)圖像區(qū)域313的像素的像素值置換為預(yù)先確定的固定值,通過上述置換生成的區(qū)域用標(biāo)號(hào)323表75。
[0059]靜態(tài)圖像幀數(shù)據(jù)330保持靜態(tài)圖像區(qū)域313的像素的像素值,并且將動(dòng)態(tài)圖像區(qū)域311、312的像素的像素值置換為與圖形數(shù)據(jù)中的透明部分對(duì)應(yīng)的值,通過上述置換生成的區(qū)域用標(biāo)號(hào)331、332表不。
[0060]用動(dòng)態(tài)圖像幀數(shù)據(jù)320表示的圖像和用靜態(tài)圖像幀數(shù)據(jù)330表示的圖像均與PC100的顯示畫面107a的圖像具有相同大小(像素?cái)?shù))。
[0061]圖5的(b)所示的動(dòng)態(tài)圖像幀數(shù)據(jù)320由視頻編碼部104進(jìn)行壓縮編碼,從而生成編碼畫面。將編碼畫面(表示編碼畫面的數(shù)據(jù))存儲(chǔ)到由數(shù)據(jù)存儲(chǔ)器113內(nèi)的存儲(chǔ)區(qū)域構(gòu)成的幀緩沖器后,將其作為編碼后的視頻流發(fā)送到網(wǎng)絡(luò)接口部106,并從網(wǎng)絡(luò)接口部106發(fā)送到網(wǎng)絡(luò)300。
[0062]視頻編碼部104中的壓縮使用可由數(shù)字電視接收器200內(nèi)的視頻解碼部203進(jìn)行解碼的方式進(jìn)行。
[0063]一般而言,數(shù)字電視接收器搭載與在數(shù)字廣播中使用的壓縮方式MPEG — 2對(duì)應(yīng)的硬件解碼器作為數(shù)字電視接收器用集成電路210的一部分,并將該硬件解碼器用作圖4的視頻解碼部203,因此視頻編碼部104中的編碼期望依照MPEG — 2進(jìn)行。
[0064]如果使用MPEG — 2TS (傳輸流)方式作為流(streaming)方式,則在數(shù)字電視接收器200中能夠以與廣播接收時(shí)相同的處理進(jìn)行解碼來顯示動(dòng)態(tài)圖像,因此比較適合。
[0065]從分離部103輸出的靜態(tài)圖像幀數(shù)據(jù)330 (圖5的(C))通過位圖送出部105轉(zhuǎn)換為適于網(wǎng)絡(luò)傳送形式的數(shù)據(jù)(表示位圖畫面的數(shù)據(jù)),在存儲(chǔ)到數(shù)據(jù)存儲(chǔ)器113內(nèi)后,經(jīng)由網(wǎng)絡(luò)接口部106送出到網(wǎng)絡(luò)300,并經(jīng)由數(shù)字電視接收器200的網(wǎng)絡(luò)接口部201到達(dá)至位圖接收部204。
[0066]作為由圖像生成部101生成的位圖畫面的圖像數(shù)據(jù)(位圖數(shù)據(jù))的形式,可以采用包含透明度(阿爾法值)的顏色格式ARGB32 (阿爾法值8位、紅8位、綠8位、藍(lán)8位),以及ARGB1555 (阿爾法值I位、紅5位、綠5位、藍(lán)5位),關(guān)于動(dòng)態(tài)圖像區(qū)域311、312,設(shè)定為表示完全透明的值(阿爾法值:0)。
[0067]在不能使用上述顏色格式的情況下,可以采用所謂的被稱作色度鍵合成的方法,在該方法中,將動(dòng)態(tài)圖像區(qū)域的各像素的像素值置換為表示預(yù)先確定的顏色的值后的數(shù)據(jù)作為靜態(tài)圖像幀數(shù)據(jù),從位圖送出部105經(jīng)由網(wǎng)絡(luò)接口部106、201、位圖接收部204和圖形顯示部205提供給合成部206,當(dāng)合成部206從圖形處理部205接收到上述動(dòng)態(tài)圖像區(qū)域的各像素的像素值時(shí),使該部分透明,顯示用視頻解碼部203的輸出表示的動(dòng)態(tài)圖像。
[0068]作為位圖圖像的網(wǎng)絡(luò)傳送方式,例如能夠使用RFB協(xié)議(遠(yuǎn)程幀緩沖協(xié)議)。例如,能夠通過導(dǎo)入被稱作VNC (Virtual Network Computing:虛擬網(wǎng)絡(luò)計(jì)算)的軟件包實(shí)現(xiàn)基于RFB協(xié)議的經(jīng)由網(wǎng)絡(luò)的位圖傳送。
[0069]本實(shí)施方式中,在使用VNC時(shí),在PC100中安裝VNC服務(wù)器軟件,在數(shù)字電視接收器200中安裝VNC客戶端軟件,將由安裝有VNC服務(wù)器軟件的PC100生成的GUI (圖形用戶界面)作為位圖數(shù)據(jù)的一部分,經(jīng)由網(wǎng)絡(luò)送出到安裝有VNC客戶端軟件的數(shù)字電視接收器200,在數(shù)字電視接收器200中,使顯示部207顯示與該⑶I對(duì)應(yīng)的畫面,并將與通過輸入部209輸入的操作對(duì)應(yīng)的用戶事件回送到PC100,由此進(jìn)行PC100的遠(yuǎn)程操作。
[0070]在本實(shí)施方式中,在數(shù)字電視接收器200中,作為輸入部209,除了設(shè)置于主體的操作鍵、和利用紅外線通信對(duì)主體的接收部(未圖示)發(fā)送信號(hào)的遙控器以外,還假定了能夠連接鍵盤和鼠標(biāo)的情況。在該情況下,需要在構(gòu)成數(shù)字電視接收器200的控制部208的處理器(嵌入式處理器)中,安裝連接鍵盤、鼠標(biāo)所需的軟件(驅(qū)動(dòng)程序)。
[0071]通常操作按鈕等PC畫面上的⑶I通過位圖傳送進(jìn)行,因此即使分離動(dòng)態(tài)圖像區(qū)域,對(duì)VNC動(dòng)作也沒有影響,能夠通過連接包含與數(shù)字電視接收器200連接的鍵盤、鼠標(biāo)等的輸入部209,一邊觀看數(shù)字電視接收器200的畫面,一邊進(jìn)行選擇待再現(xiàn)的動(dòng)態(tài)圖像的操作。
[0072]在數(shù)字電視接收器200中,經(jīng)由網(wǎng)絡(luò)300接收到的動(dòng)態(tài)圖像區(qū)域的圖像數(shù)據(jù)(視頻編碼部104的輸出)和靜態(tài)圖像區(qū)域的圖像數(shù)據(jù)(位圖送出部105的輸出)分別通過視頻流接收部202和位圖接收部204從網(wǎng)絡(luò)接口部201取出,并分別提供給視頻解碼部203和圖形處理部205。
[0073]在視頻解碼部203中,在畫面整體中與動(dòng)態(tài)圖像區(qū)域(圖5的(b)的區(qū)域311、312)對(duì)應(yīng)的、數(shù)字電視接收器200的顯示畫面207a上的位置,進(jìn)行與動(dòng)態(tài)圖像區(qū)域的圖像數(shù)據(jù)對(duì)應(yīng)的描繪,從而再現(xiàn)和/或復(fù)原與圖5的(b)所示的畫面相同內(nèi)容的畫面(表示畫面的數(shù)據(jù))。
[0074]在圖形處理部205中,在畫面整體中與靜態(tài)圖像區(qū)域(圖5的(C)的區(qū)域313)對(duì)應(yīng)的、數(shù)字電視接收器200的顯示畫面207a上的位置,進(jìn)行與靜態(tài)圖像區(qū)域的圖像數(shù)據(jù)(位圖數(shù)據(jù))對(duì)應(yīng)的描繪,從而再現(xiàn)和/或復(fù)原與圖5的(c)所示的畫面相同內(nèi)容的畫面(表示畫面的數(shù)據(jù))。
[0075]視頻解碼部203的輸出和圖形處理部205的輸出由合成部206合成從而成為合成圖像340 (圖5的(d)),被提供給顯示部207,并顯示在顯示部207的顯示畫面207a上。
[0076]動(dòng)態(tài)圖像區(qū)域由于配置在原位置(與PC畫面上的位置對(duì)應(yīng)的位置),因此僅通過與從圖形處理部205輸出的位圖圖像對(duì)準(zhǔn)坐標(biāo)位置地重疊視頻解碼部203的輸出圖像,就能夠再現(xiàn)原來的PC畫面(為了 PC畫面上的顯示而生成的圖像)。
[0077]S卩,得到提取圖5的(b)的畫面中的動(dòng)態(tài)圖像區(qū)域311、312的數(shù)據(jù)并嵌入到圖5的
(c)的畫面中的區(qū)域331、332 (透明部分)后的合成圖像。[0078]在數(shù)字電視接收器200的顯示畫面207a的大小(像素?cái)?shù))與PC100的顯示畫面的107a的大小(像素?cái)?shù))不同的情況下,進(jìn)行縮放。
[0079]該縮放可以由合成部206在畫面合成后進(jìn)行,也可以在合成前分別在動(dòng)態(tài)圖像區(qū)域和靜態(tài)圖像區(qū)域中進(jìn)行。
[0080]數(shù)字電視接收器用集成電路210通常也具備縮放的功能。
[0081]在數(shù)字電視接收器200中進(jìn)行的處理一般全部能夠由在數(shù)字電視的產(chǎn)品化時(shí)導(dǎo)入的數(shù)字電視接收器用集成電路進(jìn)行,因此能夠在不特別追加硬件的情況下實(shí)現(xiàn)。
[0082]如上所述,在視頻編碼部104中使用根據(jù)MPEG — 2標(biāo)準(zhǔn)進(jìn)行壓縮編碼的軟件,由此能夠使用集成電路210內(nèi)的MPEG - 2解碼器,能夠在不需要追加硬件的情況下進(jìn)行動(dòng)態(tài)圖像的再現(xiàn)。
[0083]關(guān)于位圖圖像,也能夠通過執(zhí)行用于在數(shù)字電視接收器控制用的處理器208上顯示屏幕顯示(OSD)等的圖形功能來容易地實(shí)現(xiàn)。
[0084]因此,圖4所示的結(jié)構(gòu)能夠通過對(duì)以往的數(shù)字電視接收器的軟件進(jìn)行部分變更或追加來實(shí)現(xiàn)。
[0085]此外,PC100的區(qū)域判定部102、分離部103、視頻編碼部104和位圖送出部105能夠如上述那樣僅用軟件實(shí)現(xiàn)。
[0086]特別是,位圖數(shù)據(jù)的收發(fā)能夠通過利用廣泛使用的VNC軟件容易地實(shí)現(xiàn)。此時(shí),利用VNC功能在數(shù)字電視接收 器200上連接鼠標(biāo)和/或鍵盤,由此能夠一邊觀察數(shù)字電視接收器200的顯示部207所顯示的圖像(本來為了在PC100的顯示部107上進(jìn)行顯示而生成的圖像)一邊操作PC100。
[0087]顯示畫面207a上的⑶I的操作按鈕等配置在動(dòng)態(tài)圖像區(qū)域以外的區(qū)域,被發(fā)送位圖。因此,通過操作而產(chǎn)生的PC的顯示圖像的變化不會(huì)受到伴隨動(dòng)態(tài)圖像編碼而產(chǎn)生的延遲等的影響,顯示圖像的相對(duì)于操作的變化基本不產(chǎn)生延遲。
[0088]實(shí)施方式2.[0089]圖6和圖7示出構(gòu)成本發(fā)明實(shí)施方式2的遠(yuǎn)程顯示裝置的PC100和數(shù)字電視接收器 200。
[0090]圖示的PC100和數(shù)字電視接收器200與參照?qǐng)D2和圖4說明的實(shí)施方式I的PC100和數(shù)字電視接收器200大致相同,但在以下方面不同:在PC100中附加流解碼部121,在數(shù)字電視接收器200中附加子畫面生成部221,并且替代圖2的分離部103而設(shè)置了分離部123。
[0091]在PC中顯示動(dòng)態(tài)圖像的情況下,有時(shí)將從外部送來的影像在顯示圖像生成部101中進(jìn)行放大后顯示在畫面上。在放大圖像較大的情況下,例如占據(jù)畫面的幾乎整個(gè)區(qū)域的情況下,如果以上述實(shí)施方式I的方法進(jìn)行處理,則視頻編碼部104的處理負(fù)荷增大。在實(shí)施方式2中,在這種情況下,減輕視頻編碼部104的處理負(fù)荷,從而即使進(jìn)行視頻編碼部104等的處理的CPUlll的性能較低,也能夠與實(shí)施方式I同樣地,在不改變數(shù)字電視接收器的硬件結(jié)構(gòu)的情況下,在數(shù)字電視接收器上顯示包含動(dòng)態(tài)圖像區(qū)域和靜態(tài)圖像區(qū)域的圖像。
[0092]圖6和圖7是示出實(shí)施方式2的遠(yuǎn)程顯示裝置的PC100和數(shù)字電視接收器200的框圖,對(duì)與圖2和圖4相同的部件標(biāo)注相同標(biāo)號(hào)。
[0093]流解碼部121接收經(jīng)由互聯(lián)網(wǎng)等網(wǎng)絡(luò)發(fā)送的表示影像的流數(shù)據(jù)并進(jìn)行解碼。[0094]流解碼部121的輸出351 (圖8的(a))被提供給顯示圖像生成部101,并且直接被提供給視頻編碼部104。
[0095]提供給顯示圖像生成部101的動(dòng)態(tài)圖像數(shù)據(jù)351 (圖8的(a))與另外生成的位圖圖像數(shù)據(jù)合成從而成為合成圖像350 (圖8的(b))。在該合成時(shí),動(dòng)態(tài)圖像351被放大從而如圖8的(b)所示那樣占據(jù)區(qū)域352,位圖圖像配置于動(dòng)態(tài)圖像占據(jù)的區(qū)域352以外的區(qū)域353。在圖8的(b)所示的例子中,在被放大的動(dòng)態(tài)圖像占據(jù)的矩形區(qū)域352的周圍,形成位圖圖像的區(qū)域353。
[0096]在經(jīng)由互聯(lián)網(wǎng)送出影像的情況下,不一定總能充分確保傳送頻帶,因此送出遠(yuǎn)低于PC畫面的顯示分辨率的影像的情況較多,在視聽時(shí)利用PC100的顯示圖像生成部101的圖形功能,頻繁放大進(jìn)行顯示。在這種情況下,將放大后的圖像數(shù)據(jù)存儲(chǔ)到幀緩沖器101a。
[0097]因此,在讀出顯示圖像生成部101的幀緩沖器IOla的內(nèi)容并由視頻編碼部104對(duì)動(dòng)態(tài)圖像區(qū)域的圖像數(shù)據(jù)進(jìn)行編碼時(shí),與對(duì)原尺寸的圖像進(jìn)行編碼的情況相比,處理負(fù)荷增加,而且可能會(huì)導(dǎo)致圖像質(zhì)量劣化。
[0098]在本實(shí)施方式中,為了避免這種情況,將表示放大前的動(dòng)態(tài)圖像的數(shù)據(jù)送出到視頻編碼部104進(jìn)行編碼。為了這樣的處理,變更PC100的軟件并將表示放大前的動(dòng)態(tài)圖像的數(shù)據(jù)提供給視頻編碼部104,另一方面,在分離部123中,可以不生成保持有動(dòng)態(tài)圖像區(qū)域的像素的像素值的圖像數(shù)據(jù)(實(shí)施方式I中的“動(dòng)態(tài)圖像幀數(shù)據(jù)”)。
[0099]在視頻編碼部104中,對(duì)表示從流解碼部121提供的動(dòng)態(tài)圖像的圖像數(shù)據(jù)(圖8的(a))進(jìn)行壓縮編碼,從而生成視頻流361 (圖8的(C))。
[0100]視頻流361 (圖8的(C))由網(wǎng)絡(luò)接口部106送出到網(wǎng)絡(luò)300。
[0101]區(qū)域判定部102進(jìn)行由從顯示圖像生成部101輸出的圖像數(shù)據(jù)表示的圖像的各部分是否表示動(dòng)態(tài)圖像的判定。在該判定中,在顯示圖像生成部101中的圖像合成時(shí),在對(duì)來自流解碼部121的圖像進(jìn)行放大后得到表示所配置的畫面上的位置的數(shù)據(jù)(配置數(shù)據(jù)),能夠根據(jù)該配置數(shù)據(jù),進(jìn)行畫面的各區(qū)域是否為動(dòng)態(tài)圖像區(qū)域的判定。
[0102]分離部123根據(jù)區(qū)域判定部102的判定結(jié)果提取靜態(tài)圖像區(qū)域。即,將動(dòng)態(tài)圖像區(qū)域352的像素的像素值置換為與圖形數(shù)據(jù)中的透明部分對(duì)應(yīng)的值(置換后的區(qū)域用標(biāo)號(hào)362表示),從而生成了用原像素的像素值構(gòu)成其他區(qū)域353的靜態(tài)圖像幀數(shù)據(jù)360(圖8的⑷)。
[0103]位圖送出部105將由分離部123分離后的靜態(tài)圖像幀數(shù)據(jù)360轉(zhuǎn)換為適于網(wǎng)絡(luò)傳送形式的數(shù)據(jù),并經(jīng)由網(wǎng)絡(luò)接口部106送出到網(wǎng)絡(luò)300。
[0104]送出到網(wǎng)絡(luò)300的視頻編碼部104的輸出和位圖送出部105的輸出由數(shù)字電視接收器200的網(wǎng)絡(luò)接口部201接收。
[0105]視頻流接收部202在網(wǎng)絡(luò)接口部201接收到的數(shù)據(jù)中,取出視頻編碼部104的輸出并提供給視頻解碼部203。
[0106]位圖接收部204在網(wǎng)絡(luò)接口部201接收到的數(shù)據(jù)中,取出位圖送出部105的輸出并提供給圖形處理部205。
[0107]到達(dá)位圖接收部204的靜態(tài)圖像區(qū)域的圖像數(shù)據(jù)被提供給圖形處理部205。
[0108]在圖形處理部205中,在畫面整體中與靜態(tài)圖像區(qū)域(圖8的(b)、圖8的(d)的353)對(duì)應(yīng)的、數(shù)字電視接收器200的顯示畫面207a上的位置,進(jìn)行與靜態(tài)圖像區(qū)域的圖像數(shù)據(jù)(位圖數(shù)據(jù))對(duì)應(yīng)的描繪,從而再現(xiàn)和/或復(fù)原與圖8的(d)所示的畫面相同的畫面(表示畫面的數(shù)據(jù))。
[0109]另一方面,視頻解碼部203對(duì)視頻流361 (圖8的(C))進(jìn)行解碼,再現(xiàn)和/或復(fù)原與用流解碼部121的輸出表示的圖像351 (圖8的(a))相同內(nèi)容的圖像371 (圖8的(e))。
[0110]視頻解碼部203的輸出371被提供給子畫面生成部221。
[0111]子畫面生成部221具有生成畫中畫(PIP)中的子畫面的功能,對(duì)用視頻解碼部203的輸出表示的圖像進(jìn)行放大,設(shè)為與PC畫面上的動(dòng)態(tài)圖像區(qū)域(圖8的(b)的352)相同的大小,因此設(shè)為與靜態(tài)圖像幀數(shù)據(jù)的透明部分362相同的大小,將該畫面上的配置位置決定為與靜態(tài)圖像幀數(shù)據(jù)的透明區(qū)域362的位置一致。放大率根據(jù)動(dòng)態(tài)圖像371的尺寸和透明部分362的尺寸計(jì)算。從圖形處理部205提供表示透明部分362的尺寸和位置的信息SP0也可以對(duì)其進(jìn)行替代,在PC100的顯示圖像生成部101中進(jìn)行動(dòng)態(tài)圖像的放大,將在生成合成圖像350時(shí)使用的、表示放大率和動(dòng)態(tài)圖像區(qū)域352的位置的信息從PC100發(fā)送到數(shù)字電視接收器200,并在子畫面生成部221中利用該信息。
[0112]在合成部206中,對(duì)由子畫面生成部221生成的動(dòng)態(tài)圖像、和從圖形處理部205輸出的靜態(tài)圖像進(jìn)行合成,從而生成合成圖像380 (圖8的(f))。
[0113]通過該合成,得到將由子畫面生成部221生成的圖像(被放大且決定位置后的圖像)嵌入到圖8的(d)所示的圖像中的區(qū)域362 (透明部分)后的合成圖像。在合成圖像中,由子畫面生成部221生成的嵌入圖像用標(biāo)號(hào)381表示。
[0114]大多數(shù)字電視接收器安裝了 PIP的功能。
[0115]PIP是將原本兩個(gè)影像資源中的任意一個(gè)顯示在畫面整體,將另一個(gè)影像作為子畫面顯示在畫面的一部分上的功能。靈活運(yùn)用該功能,由此通過對(duì)送來的動(dòng)態(tài)圖像進(jìn)行放大而成為預(yù)定尺寸的影像,與顯示位圖圖像的圖形畫面合成,由此對(duì)PClOO的顯示圖像進(jìn)行再現(xiàn)。
[0116]在實(shí)施方式2的結(jié)構(gòu)的情況下,也能夠通過利用大多數(shù)字電視接收器用集成電路支持的功能之一的PIP功能,在不準(zhǔn)備特別的硬件和軟件的情況下在數(shù)字電視接收器的畫面上顯示還包含動(dòng)態(tài)圖像的PC的顯示圖像。
[0117]實(shí)施方式3.[0118]圖9和圖10示出構(gòu)成本發(fā)明實(shí)施方式3的遠(yuǎn)程顯示裝置的PC100和數(shù)字電視接收器200。
[0119]圖示的PC100和數(shù)字電視接收器200與參照?qǐng)D6和圖7說明的實(shí)施方式2的PC100和數(shù)字電視接收器200大致相同,但在PC100中附加選擇部131、在數(shù)字電視接收器200中附加選擇部231。
[0120] 選擇部131接收表示是否由顯示圖像生成部101對(duì)所輸入的動(dòng)態(tài)圖像進(jìn)行了放大的信息Ey,并根據(jù)該信息,選擇表示從流解碼部121輸出的動(dòng)態(tài)圖像的數(shù)據(jù)、和從分離部103輸出的動(dòng)態(tài)圖像幀數(shù)據(jù)中的任意一個(gè)并輸出。即,在進(jìn)行了放大的情況下,將流解碼部121的輸出提供給視頻編碼部104,在沒有進(jìn)行放大的情況下,將從分離部103輸出的動(dòng)態(tài)圖像幀數(shù)據(jù)提供給視頻編碼部104。
[0121]表示是否進(jìn)行了放大的信息Ey還被傳送到數(shù)字電視接收器200的選擇部231,選擇部231根據(jù)該信息,選擇子畫面生成部221的輸出、和視頻解碼部203的輸出中的任意一個(gè)并輸出。即,在進(jìn)行了放大的情況下,將子畫面生成部221的輸出提供給合成部206,在沒有進(jìn)行放大的情況下,將視頻解碼部203的輸出提供給合成部206。
[0122]如圖10中虛線所示,還將表示是否進(jìn)行了放大的信息Ey送出到數(shù)字電視接收器200內(nèi)的子畫面生成部221,在沒有進(jìn)行放大的情況下,可以中止子畫面生成部221中的放大處理。并且,如圖9中虛線所示,還將表示是否進(jìn)行了放大的信息Ey送出到分離部103,在進(jìn)行了放大的情況下,可以不進(jìn)行分離部103中的、動(dòng)態(tài)圖像幀數(shù)據(jù)的生成。
[0123]能夠通過這種處理,根據(jù)由顯示圖像生成部101生成的圖像的狀態(tài)進(jìn)行切換動(dòng)作,能夠在各種情況下進(jìn)行最佳的處理。
【權(quán)利要求】
1.一種遠(yuǎn)程顯示裝置,其在經(jīng)由網(wǎng)絡(luò)與信息處理裝置連接的數(shù)字電視接收器的顯示畫面上顯示為了該信息處理裝置的顯示畫面上的顯示而生成的顯示圖像,其特征在于, 所述信息處理裝置 對(duì)通過保持所述顯示圖像內(nèi)的動(dòng)態(tài)圖像區(qū)域的像素的像素值、并用預(yù)先確定的固定值置換其他區(qū)域的像素的像素值而生成的動(dòng)態(tài)圖像幀數(shù)據(jù)進(jìn)行壓縮編碼,并作為視頻流送出到所述網(wǎng)絡(luò), 經(jīng)由所述網(wǎng)絡(luò)將所述顯示圖像內(nèi)的靜態(tài)圖像區(qū)域的數(shù)據(jù)作為位圖數(shù)據(jù)送出到所述網(wǎng)絡(luò), 所述數(shù)字電視接收器 從所述網(wǎng)絡(luò)接收所述視頻流和所述位圖數(shù)據(jù), 對(duì)接收到的所述視頻流進(jìn)行解碼而再現(xiàn)包含動(dòng)態(tài)圖像區(qū)域的圖像, 根據(jù)接收到的所述位圖數(shù)據(jù)再現(xiàn)所述靜態(tài)圖像區(qū)域的圖像, 對(duì)所再現(xiàn)的所述包含動(dòng)態(tài)圖像區(qū)域的圖像和所再現(xiàn)的所述靜態(tài)圖像區(qū)域的圖像進(jìn)行合成,由所述數(shù)字電視接收器的顯示部顯示通過合成得到的合成圖像。
2.根據(jù)權(quán)利要求1所述的遠(yuǎn)程顯示裝置,其特征在于, 所述信息處理裝置具有: 分離部,其生成所述動(dòng)態(tài)圖像幀數(shù)據(jù)和靜態(tài)圖像幀數(shù)據(jù),該靜態(tài)圖像幀數(shù)據(jù)將所述動(dòng)態(tài)圖像區(qū)域的像素的像素值 置換為與圖形數(shù)據(jù)中的透明部分相當(dāng)?shù)闹挡⒈3至似渌麉^(qū)域的像素的像素值; 視頻編碼部,其通過對(duì)所述動(dòng)態(tài)圖像幀數(shù)據(jù)進(jìn)行壓縮編碼來生成所述視頻流并送出到所述網(wǎng)絡(luò);以及 位圖送出部,其用位圖數(shù)據(jù)的形式將由所述分離部生成的所述靜態(tài)圖像幀數(shù)據(jù)送出到所述網(wǎng)絡(luò), 所述數(shù)字電視接收器具有: 視頻解碼部,其對(duì)從所述網(wǎng)絡(luò)接收到的所述視頻流進(jìn)行解碼而輸出解碼圖像; 圖形處理部,其將從所述網(wǎng)絡(luò)接收到的所述位圖數(shù)據(jù)轉(zhuǎn)換為適于所述數(shù)字電視接收器的顯示畫面上的顯示的形式來對(duì)所述靜態(tài)圖像區(qū)域的圖像進(jìn)行再現(xiàn);以及 合成部,其對(duì)由所述視頻解碼部生成的所述解碼圖像、和由所述圖形處理部再現(xiàn)的所述靜態(tài)圖像區(qū)域的圖像進(jìn)行合成來生成所述合成圖像。
3.一種遠(yuǎn)程顯示裝置,其在經(jīng)由網(wǎng)絡(luò)與信息處理裝置連接的數(shù)字電視接收器的顯示畫面上顯示為了該信息處理裝置的顯示畫面上的顯示而生成的顯示圖像,其特征在于, 所述顯示圖像所包含的動(dòng)態(tài)圖像區(qū)域的圖像是通過在所述信息處理裝置內(nèi)對(duì)原圖像進(jìn)行放大而得到的, 所述信息處理裝置 對(duì)表示所述原圖像的數(shù)據(jù)進(jìn)行壓縮編碼,并作為視頻流送出到所述網(wǎng)絡(luò), 將所述顯示圖像內(nèi)的靜態(tài)圖像區(qū)域的數(shù)據(jù)作為位圖數(shù)據(jù)送出到所述網(wǎng)絡(luò), 所述數(shù)字電視接收器 從所述網(wǎng)絡(luò)接收所述視頻流和所述位圖數(shù)據(jù), 對(duì)接收到的所述視頻流進(jìn)行解碼,并且利用畫中畫功能進(jìn)行放大來再現(xiàn)所述動(dòng)態(tài)圖像區(qū)域的圖像, 根據(jù)接收到的所述位圖數(shù)據(jù)再現(xiàn)所述靜態(tài)圖像區(qū)域的圖像, 對(duì)所再現(xiàn)的所述動(dòng)態(tài)圖像區(qū)域的圖像和所再現(xiàn)的所述靜態(tài)圖像區(qū)域的圖像進(jìn)行合成,由所述數(shù)字電視接收器的顯示部顯示通過合成得到的合成圖像。
4.根據(jù)權(quán)利要求3所述的遠(yuǎn)程顯示裝置,其特征在于, 所述信息處理裝置具有: 視頻編碼部,其通過取得表示所述原圖像的數(shù)據(jù)并進(jìn)行壓縮編碼來生成所述視頻流并送出到網(wǎng)絡(luò); 分離部,其輸出將所述顯示圖像內(nèi)的所述動(dòng)態(tài)圖像區(qū)域的像素的像素值置換為與圖形數(shù)據(jù)中的透明部分相當(dāng)?shù)闹担⒈3至似渌麉^(qū)域的像素值的靜態(tài)圖像幀數(shù)據(jù);以及 位圖送出部,其用位圖數(shù)據(jù)的形式將由所述分離部生成的所述靜態(tài)圖像幀數(shù)據(jù)送出到所述網(wǎng)絡(luò), 所述數(shù)字電視接收器具有: 視頻解碼部,其對(duì)從所述網(wǎng)絡(luò)接收到的所述視頻流進(jìn)行解碼并輸出解碼圖像; 子畫面生成部,其將從所述視頻解碼部輸出的所述解碼圖像作為畫中畫的子畫面進(jìn)行處理,進(jìn)行放大和定位,生成放大和定位后的圖像; 圖形處理部,其將從所述網(wǎng)絡(luò)接收到的所述位圖數(shù)據(jù)轉(zhuǎn)換為適于所述數(shù)字電視接收器的顯示畫面上的顯示的形式來對(duì)所述靜態(tài)圖像區(qū)域的圖像進(jìn)行再現(xiàn);以及 合成部,其對(duì)由所述子畫面生成部生成的圖像、和由所述圖形處理部再現(xiàn)的所述靜態(tài)圖像區(qū)域的圖像進(jìn)行合成來生成所述合成圖像, 所述子畫面生成部以與所述靜態(tài)圖像幀數(shù)據(jù)表示的幀的所述透明部分的尺寸和位置匹配的方式,進(jìn)行所述解碼圖像的放大和定位。
5.一種遠(yuǎn)程顯示裝置,其在經(jīng)由網(wǎng)絡(luò)與信息處理裝置連接的數(shù)字電視接收器的顯示畫面上顯示為了該信息處理裝置的顯示畫面上的顯示而生成的顯示圖像,其特征在于, 所述信息處理裝置 進(jìn)行所述顯示圖像所包含的動(dòng)態(tài)圖像區(qū)域的圖像是否為在所述信息處理裝置內(nèi)對(duì)原圖像進(jìn)行放大而得到的圖像的判定, 在所述動(dòng)態(tài)圖像區(qū)域的圖像是通過對(duì)所述原圖像進(jìn)行放大而得到的圖像的情況下,對(duì)表示所述原圖像的數(shù)據(jù)進(jìn)行壓縮編碼,并作為視頻流送出到所述網(wǎng)絡(luò), 在所述動(dòng)態(tài)圖像區(qū)域的圖像是未對(duì)所述原圖像進(jìn)行放大而得到的圖像的情況下,對(duì)表示所述動(dòng)態(tài)圖像區(qū)域的圖像的數(shù)據(jù)進(jìn)行壓縮編碼,并作為視頻流送出到所述網(wǎng)絡(luò), 將所述顯示圖像內(nèi)的靜態(tài)圖像區(qū)域的數(shù)據(jù)作為位圖數(shù)據(jù)送出到所述網(wǎng)絡(luò), 所述數(shù)字電視接收器 從所述網(wǎng)絡(luò)接收所述視頻流和所述位圖數(shù)據(jù), 在所述動(dòng)態(tài)圖像區(qū)域的圖像是通過對(duì)所述原圖像進(jìn)行放大而得到的圖像的情況下,對(duì)接收到的所述視頻流進(jìn)行解碼,并且利用畫中畫功能進(jìn)行放大來再現(xiàn)所述動(dòng)態(tài)圖像區(qū)域的圖像, 在所述動(dòng)態(tài)圖像區(qū)域的圖像是未對(duì)所述原圖像進(jìn)行放大而得到的圖像的情況下,對(duì)接收到的所述視頻流進(jìn)行解 碼來再現(xiàn)所述動(dòng)態(tài)圖像區(qū)域的圖像,根據(jù)接收到的所述位圖數(shù)據(jù)再現(xiàn)所述靜態(tài)圖像區(qū)域的圖像, 對(duì)所再現(xiàn)的所述動(dòng)態(tài)圖像區(qū)域的圖像和所再現(xiàn)的所述靜態(tài)圖像區(qū)域的圖像進(jìn)行合成,由所述數(shù)字電視接收器的顯示部顯示通過合成得到的合成圖像。
6.根據(jù)權(quán)利要求5所述的遠(yuǎn)程顯示裝置,其特征在于, 所述信息處理裝置具有: 分離部,其生成動(dòng)態(tài)圖像幀數(shù)據(jù)和靜態(tài)圖像幀數(shù)據(jù),所述動(dòng)態(tài)圖像幀數(shù)據(jù)保持所述顯示圖像內(nèi)的所述動(dòng)態(tài)圖像區(qū)域的像素的像素值,并用預(yù)先確定的固定值置換其他區(qū)域的像素的像素值,所述靜態(tài)圖像幀數(shù)據(jù)將所述動(dòng)態(tài)圖像區(qū)域的像素的像素值置換為與圖形數(shù)據(jù)中的透明部分相當(dāng)?shù)闹?,并保持其他區(qū)域的像素的像素值; 第I選擇部,其在所述動(dòng)態(tài)圖像區(qū)域的圖像是通過對(duì)所述原圖像進(jìn)行放大而得到的圖像的情況下,選擇表示所述原圖像的數(shù)據(jù)并輸出,在所述動(dòng)態(tài)圖像區(qū)域的圖像是未對(duì)所述原圖像進(jìn)行放大而得到的圖像的情況下,選擇所述動(dòng)態(tài)圖像幀數(shù)據(jù)并輸出; 視頻編碼部,其通過對(duì)由所述第I選擇部選擇的數(shù)據(jù)進(jìn)行壓縮編碼來生成所述視頻流并送出到所述網(wǎng)絡(luò);以及 位圖送出部,其用位圖數(shù)據(jù)的形式將由所述分離部生成的所述靜態(tài)圖像幀數(shù)據(jù)送出到所述網(wǎng)絡(luò), 所述數(shù)字電視接收器具有: 視頻解碼部,其對(duì)從所述網(wǎng)絡(luò)接收到的所述視頻流進(jìn)行解碼并輸出解碼圖像; 子畫面生成部,其將從所述視頻解碼部輸出的所述解碼圖像作為畫中畫的子畫面進(jìn)行處理,進(jìn)行放大和定位,生成放大和定位后的圖像;第2選擇部,其在所述動(dòng)態(tài)圖像區(qū)域的圖像是通過對(duì)所述原圖像進(jìn)行放大而得到的圖像的情況下,選擇由所述子畫面生成部生成的圖像,在所述動(dòng)態(tài)圖像區(qū)域的圖像是未對(duì)所述原圖像進(jìn)行放大而得到的圖像的情況下,選擇從所述視頻解碼部輸出的所述解碼圖像;圖形處理部,其將從所述網(wǎng)絡(luò)接收到的所述位圖數(shù)據(jù)轉(zhuǎn)換為適于所述數(shù)字電視接收器的顯示畫面上的顯示的形式來對(duì)所述靜態(tài)圖像區(qū)域的圖像進(jìn)行再現(xiàn);以及 合成部,其對(duì)由所述第2選擇部選擇的圖像、和由所述圖形處理部再現(xiàn)的所述靜態(tài)圖像區(qū)域的圖像進(jìn)行合成來生成所述合成圖像, 所述子畫面生成部以與所述靜態(tài)圖像幀數(shù)據(jù)表示的幀的所述透明部分的尺寸和位置匹配的方式,進(jìn)行所述解碼圖像的放大和定位。
7.根據(jù)權(quán)利要求2、4或6所述的遠(yuǎn)程顯示裝置,其特征在于, 使用RFB協(xié)議從所述信息處理裝置向所述數(shù)字電視接收器發(fā)送所述靜態(tài)圖像幀數(shù)據(jù)。
8.根據(jù)權(quán)利要求2、4或6所述的遠(yuǎn)程顯示裝置,其特征在于, 所述視頻編碼部進(jìn)行基于MPEG - 2標(biāo)準(zhǔn)的壓縮編碼。
9.根據(jù)權(quán)利要求2、4或6所述的遠(yuǎn)程顯示裝置,其特征在于, 所述靜態(tài)圖像幀數(shù)據(jù)包含用于⑶I顯示的數(shù)據(jù), 所述數(shù)字電視接收器具有受理根據(jù)所述GUI顯示進(jìn)行的操作輸入的輸入部,并且將由所述輸入部受理的操作輸入發(fā)送到所述信息處理裝置, 在所述信息處理裝置中, 根據(jù)所述操作輸入,變更所述GUI顯示的內(nèi)容。
10.根據(jù)權(quán)利要求2、4或6所述的遠(yuǎn)程顯示裝置,其特征在于,所述信息處理裝置還具有進(jìn)行所述顯示圖像內(nèi)的各區(qū)域是否為動(dòng)態(tài)圖像區(qū)域的判定的區(qū)域判定部, 所述分離部 根據(jù)所述區(qū)域判定部的判定結(jié)果,進(jìn)行所述動(dòng)態(tài)圖像幀數(shù)據(jù)和所述靜態(tài)圖像幀數(shù)據(jù)中的至少一方的生成。
【文檔編號(hào)】H04N5/45GK103581733SQ201310292454
【公開日】2014年2月12日 申請(qǐng)日期:2013年7月12日 優(yōu)先權(quán)日:2012年7月23日
【發(fā)明者】綱島健次 申請(qǐng)人:三菱電機(jī)株式會(huì)社