亚洲成年人黄色一级片,日本香港三级亚洲三级,黄色成人小视频,国产青草视频,国产一区二区久久精品,91在线免费公开视频,成年轻人网站色直接看

利用視線(xiàn)跟蹤的自適應(yīng)顯示的制作方法

文檔序號(hào):910008閱讀:270來(lái)源:國(guó)知局

專(zhuān)利名稱(chēng)::利用視線(xiàn)跟蹤的自適應(yīng)顯示的制作方法
技術(shù)領(lǐng)域
:本發(fā)明涉及利用視線(xiàn)跟蹤用于在計(jì)算平臺(tái)的顯示屏上以自適應(yīng)的方式輸出信息。
背景技術(shù)
:隨著在例如LCD屏、OLED屏等顯示屏方面的現(xiàn)代技術(shù)進(jìn)步,采用顯示屏的計(jì)算平臺(tái)的多樣性以及向平臺(tái)要求的功能性都在持續(xù)增加。例如,象征著手持式形狀因素(handheldformfactor)的有限的屏面積和電池壽命往往導(dǎo)致了顯示屏的空間分辨率相對(duì)低,使得手持式設(shè)備的實(shí)用性經(jīng)常受到限制,因顯示屏無(wú)能力在沒(méi)有連續(xù)積極用戶(hù)干預(yù)(例如,屏幕點(diǎn)擊,滑動(dòng),等等)情況下呈現(xiàn)足夠的視場(chǎng)(FOV)以向終端用戶(hù)展現(xiàn)最有關(guān)數(shù)據(jù)(例如,圖像數(shù)據(jù)幀的子區(qū)域,GUI(圖形用戶(hù)接口)的子區(qū)域,等等)。對(duì)于另一示范性平臺(tái),象征著家用電視的大屏幕是針對(duì)比個(gè)人計(jì)算機(jī)或者手持式設(shè)備的視距長(zhǎng)得多的視距所設(shè)計(jì)的。因而,通常有必要在具有獨(dú)特接口(例如“10英尺接口”)的家用電視上呈現(xiàn)圖形數(shù)據(jù)對(duì)象,要求用戶(hù)學(xué)習(xí)導(dǎo)航(navigate)不同形狀因素的設(shè)備之間的多個(gè)接口。此外,某些計(jì)算平臺(tái)提供顯示視頻(即圖像數(shù)據(jù)幀流)的應(yīng)用,該視頻由集成有計(jì)算機(jī)渲染圖形對(duì)像的視頻圖像傳感器收集。例如,SonyPlaystationEyePet游戲應(yīng)用程序與由耦合到計(jì)算平臺(tái)的視頻圖像傳感器所收集的應(yīng)用程序用戶(hù)與用戶(hù)環(huán)境(例如,客廳)的視頻一起渲染(render)虛擬寵物的圖形圖像。于是用戶(hù)可以在顯示器上觀(guān)看他們與其虛擬寵物交互。由于對(duì)于這樣的游戲應(yīng)用程序典型的高清晰度顯示分辨率(例如1080p),需要有效的帶寬將視頻數(shù)據(jù)從視頻圖像傳感器傳輸?shù)接?jì)算平臺(tái)。該帶寬限制或者降低在顯示器上呈現(xiàn)的視頻數(shù)據(jù)的質(zhì)量,減少可用于渲染圖形的處理器周期,或者顯著提高視頻圖像傳感器/傳感器與計(jì)算平臺(tái)之間的接口的制造成本。對(duì)于無(wú)線(xiàn)內(nèi)聯(lián)網(wǎng)傳輸模式與互聯(lián)網(wǎng)傳輸模式兩者,視頻傳輸帶寬均成為更多的問(wèn)題。本發(fā)明的實(shí)施例在本說(shuō)明書(shū)結(jié)束部分中被特別指出并且清楚地被要求保護(hù)。然而,關(guān)于組織和操作方法兩者,連同目標(biāo)、特征及其優(yōu)點(diǎn),本發(fā)明的實(shí)施例可能最好在借助附圖閱讀時(shí)通過(guò)參考以下詳細(xì)說(shuō)明來(lái)理解,其中:圖1示出按照實(shí)施例的示范性自適應(yīng)顯示系統(tǒng)的示意圖2A為按照實(shí)施例確定所顯示的圖像數(shù)據(jù)幀的受關(guān)注的子區(qū)域的示范性基于網(wǎng)格的方法的流程圖2B為按照實(shí)施例確定所顯示的圖像數(shù)據(jù)幀的受關(guān)注的子區(qū)域的示范性基于輪廓的方法的流程圖3A為按照實(shí)施例基于顯示器用戶(hù)關(guān)注適配要顯示的數(shù)據(jù)的量的示范性方法的流程圖3B為按照實(shí)施例基于顯示器用戶(hù)關(guān)注適配要傳輸?shù)臄?shù)據(jù)的量的示范性方法的流程圖;圖3C為按照實(shí)施例基于顯示器用戶(hù)關(guān)注適配數(shù)據(jù)壓縮率的示范性方法的流程圖3D為按照實(shí)施例基于顯示器用戶(hù)關(guān)注適配接口數(shù)據(jù)壓縮率的示范性方法的流程圖4示出按照本發(fā)明的一個(gè)實(shí)施例可被用于適配顯示的用戶(hù)接口和硬件;以及圖5示出按照本發(fā)明的一個(gè)實(shí)施例可被用于處理指令的附加硬件。為了說(shuō)明的清楚,圖中示出的元件沒(méi)有必要地按照比例繪制。另外,在被認(rèn)為合適的地方,參考數(shù)字在圖之中被重復(fù)以指示相應(yīng)或相似的元件。
發(fā)明內(nèi)容此處描述了用于基于顯示器用戶(hù)關(guān)注適配顯示屏輸出的方法和系統(tǒng)。實(shí)施例采用視線(xiàn)跟蹤(gazetracking)來(lái)確定顯示屏區(qū)的處于用戶(hù)關(guān)注焦點(diǎn)的子區(qū)域,并且自適應(yīng)地確定為顯示屏的受關(guān)注的和不受關(guān)注的子區(qū)域提供的數(shù)據(jù)量,其方式是分別處理這兩個(gè)組來(lái)改善應(yīng)用程序/平臺(tái)的功能性和/或者減少用于傳輸或處理所收集的圖像數(shù)據(jù)幀所需的帶寬。盡管為徹底理解本發(fā)明的實(shí)施例陳述了很多具體細(xì)節(jié),本領(lǐng)域技術(shù)人員將理解的是,在沒(méi)有這些具體細(xì)節(jié)的情況下可以實(shí)施其他實(shí)施例。在其他實(shí)例中,并沒(méi)有詳細(xì)地描述眾所周知的方法、進(jìn)程、部件和電路,以便不使本發(fā)明不清楚。此處描述的某些部分根據(jù)算法和在計(jì)算機(jī)存儲(chǔ)器內(nèi)的數(shù)據(jù)比特或者二進(jìn)制數(shù)字信號(hào)上的操作的符號(hào)表示來(lái)呈現(xiàn)。這些算法描述和表示可能是數(shù)據(jù)處理領(lǐng)域技術(shù)人員所使用的技術(shù)以將其工作的實(shí)質(zhì)傳達(dá)給本領(lǐng)域有些技術(shù)人員。如此處所使用的算法是導(dǎo)致期望結(jié)果的行為或操作的自相一致序列。這些包括物理量的物理操縱。通常、可是并非必要地,這些量采取能夠被存儲(chǔ)、傳遞、組合、比較以及另外操縱的電或者磁信號(hào)的形式。主要出于習(xí)慣用語(yǔ)的原因,將這些信號(hào)稱(chēng)為比特、值、元素、符號(hào)、字符、術(shù)語(yǔ)、數(shù)字等等已經(jīng)證明有時(shí)是方便的。除非特別聲明或者另外從以下討論中為明顯的,應(yīng)當(dāng)理解的是,在整個(gè)描述中,利用諸如“處理”、“計(jì)算”、“轉(zhuǎn)換”、“調(diào)解”、“確定”、或者“識(shí)別”術(shù)語(yǔ)的討論,均指計(jì)算平臺(tái)的行為和處理,該計(jì)算平臺(tái)是包含處理器的電子計(jì)算設(shè)備,該處理器將在處理器的寄存器和可訪(fǎng)問(wèn)的平臺(tái)存儲(chǔ)器內(nèi)表示為物理(例如電子)量的數(shù)據(jù)操縱并變換為在計(jì)算機(jī)平臺(tái)存儲(chǔ)器、處理器寄存器或顯示屏內(nèi)類(lèi)似地表示為物理量的其他數(shù)據(jù)。計(jì)算機(jī)程序可以被存儲(chǔ)在計(jì)算機(jī)可讀的存儲(chǔ)介質(zhì)中,例如、但不限于,任意類(lèi)型的磁盤(pán),包括軟盤(pán)、光盤(pán)(例如光盤(pán)只讀存儲(chǔ)器(⑶-R0M),數(shù)字視頻光盤(pán)(DVD),Blu-RayDiscs(藍(lán)光光盤(pán))等等)和磁光盤(pán)、只讀存儲(chǔ)器(ROM)、隨機(jī)存取存儲(chǔ)器(RAM)、EPROM、EEPR0M、磁或光卡,或者任意其他類(lèi)型的適用于存儲(chǔ)電子指令的非暫時(shí)介質(zhì)。術(shù)語(yǔ)“耦合”和“連接”,連同其衍生詞,可以在此用來(lái)描述用于執(zhí)行這里的操作的裝置的部件之間的結(jié)構(gòu)關(guān)系。要理解的是,這些術(shù)語(yǔ)并不意指為彼此的同義詞。相反地,在特定的實(shí)施例中,“連接”可以用于指示兩個(gè)或多個(gè)元件之間彼此直接物理或者電接觸。“耦合”可用于指示兩個(gè)或多個(gè)元件之間彼此或者直接或者間接(通過(guò)其之間的其他居間元件)物理或者電接觸,以及/或者兩個(gè)或多個(gè)元件彼此協(xié)作或者通信(例如,如在因果關(guān)系(causeaneffectrelationship)中)。圖1示出示范性自適應(yīng)顯示系統(tǒng)100,其包含耦合到顯示屏110的計(jì)算平臺(tái)105。計(jì)算平臺(tái)105包含中央處理器,其至少負(fù)責(zé)為顯示屏110生成輸出106,并且可以進(jìn)一步執(zhí)行這里所述的視線(xiàn)跟蹤、顯示子區(qū)域確定以及視頻解碼/幀組裝操作中的一個(gè)或多個(gè)。計(jì)算平臺(tái)105可以為所要求的目的專(zhuān)門(mén)地被構(gòu)造,或者可以包括通用計(jì)算機(jī),該通用計(jì)算機(jī)通過(guò)在計(jì)算機(jī)中存儲(chǔ)的計(jì)算機(jī)程序選擇性地被激活或者重新配置。在一個(gè)實(shí)施例中,計(jì)算平臺(tái)105是游戲控制臺(tái)(例如,SonyPlaystation),其具有是任意常規(guī)顯示器(例如IXD,OLED,CRT,等等)的顯示屏110。在另一個(gè)實(shí)施例中,計(jì)算平臺(tái)105是具有嵌入式顯示屏IlOA(例如,IXD,0LED)的手持式游戲設(shè)備105A(例如,索尼便攜式游戲機(jī)(SonyPlaystationPortable)(PSP)。在替換的實(shí)施例中,計(jì)算平臺(tái)105是具有嵌入式顯示屏110B(例如,LCD,0LED)的手持式電信設(shè)備105B(例如,索尼愛(ài)立信手機(jī)(SonyEricssonmobilephone))。圖2A和2B示出兩個(gè)用于確定在顯示屏中所呈現(xiàn)的信息幀的受關(guān)注的子區(qū)域的示范性方法。這些方法可應(yīng)用于渲染的圖形對(duì)象(例如CGI)或者成流的多媒體(例如視頻)。圖2A是說(shuō)明用于確定圖像數(shù)據(jù)幀的受關(guān)注的子區(qū)域的基于網(wǎng)格的方法200的實(shí)施例的流程圖,該方法可以由自適應(yīng)顯示系統(tǒng)100執(zhí)行。在操作205處,一個(gè)或多個(gè)對(duì)象被輸出到顯示屏110(圖1)。例如,在圖2A中進(jìn)一步示出了顯示區(qū)210中的對(duì)象206。對(duì)象206可以是被渲染的對(duì)象,例如游戲化身、網(wǎng)頁(yè)塊,其與由渲染引擎已知的顯示區(qū)210的幀有位置關(guān)系。例如,在對(duì)象206是網(wǎng)頁(yè)上的縮略圖的地方,該縮略圖對(duì)象在顯示區(qū)210內(nèi)將具有已知的位置。替換地,對(duì)象206可以是在顯示區(qū)210內(nèi)所呈現(xiàn)的視頻幀的一部分,在該情況下計(jì)算平臺(tái)205不能預(yù)先確定在顯示區(qū)210內(nèi)對(duì)象206與其他內(nèi)容之間的邏輯關(guān)聯(lián)。在操作215處,跟蹤觀(guān)看顯示屏110的用戶(hù)的視線(xiàn)模式。圖2A進(jìn)一步描述了針對(duì)顯示區(qū)210中的內(nèi)容通過(guò)耦合到計(jì)算平臺(tái)105(圖1中所示)的視線(xiàn)跟蹤器130確定的示范性視線(xiàn)模式208。通常,視線(xiàn)跟蹤器130包含任意在本領(lǐng)域中已知的可操作來(lái)跟蹤觀(guān)看顯示屏110的平臺(tái)用戶(hù)170的眼睛位置和/或眼睛運(yùn)動(dòng)的硬件和/或軟件模塊。在該示范性實(shí)施例中,視線(xiàn)跟蹤器130是基于視頻的系統(tǒng),其聚焦于平臺(tái)用戶(hù)170的一只或者兩只眼睛,并且當(dāng)平臺(tái)用戶(hù)170觀(guān)看顯示屏110時(shí)記錄眼睛運(yùn)動(dòng)。視線(xiàn)跟蹤器130可以是頭盔式的,或者是依賴(lài)視頻圖像傳感器的遠(yuǎn)程系統(tǒng),該視頻圖像傳感器被定位在距平臺(tái)用戶(hù)170至少一臂長(zhǎng)度處。在圖1中所示的示范性實(shí)施例中,視線(xiàn)跟蹤器130向視線(xiàn)方向分析器140輸出眼睛視線(xiàn)方向模式131。在其他實(shí)施例中,視線(xiàn)跟蹤器130是頭盔式的,并且輸出眼睛轉(zhuǎn)動(dòng)模式。在其他實(shí)施例中,用戶(hù)可以佩戴放置在眼睛周?chē)钠つw上的電極來(lái)測(cè)量用于眼睛運(yùn)動(dòng)跟蹤的眼電圖(EOG)信號(hào)。該EOG信號(hào)對(duì)于測(cè)量由于視線(xiàn)偏移造成的眼睛掃視運(yùn)動(dòng)以及探測(cè)眨眼將是特別有用的;從而對(duì)于確定視線(xiàn)偏移以及眨眼是好的。EOG也對(duì)于不同的照明條件是穩(wěn)健的,并且能被作為可穿戴系統(tǒng)實(shí)現(xiàn)。在示范性實(shí)施例中,由視線(xiàn)跟蹤器130所采用的視頻圖像傳感器是專(zhuān)用攝像機(jī)(例如,紅外(IR)敏感的),該專(zhuān)用攝像機(jī)被集成到視線(xiàn)跟蹤器130中。替換地,視線(xiàn)跟蹤器130可以被稱(chēng)合到通用數(shù)字視頻圖像傳感器120上,例如SonyPlayStationEye,其也被耦合到計(jì)算平臺(tái)105上。在實(shí)施例中,數(shù)字視頻圖像傳感器120以至少1920x1080像素的高清晰度(HD)分辨率利用足以至少捕捉平臺(tái)用戶(hù)170和用戶(hù)直接環(huán)境(例如,客廳家具,地面,房間墻壁等等)的視場(chǎng)(FOV)122收集圖像數(shù)據(jù)幀,并且可以進(jìn)一步捕捉至少一個(gè)其他平臺(tái)用戶(hù)180以及旁觀(guān)者185。因?yàn)檫h(yuǎn)場(chǎng)視線(xiàn)跟蹤在技術(shù)上比近場(chǎng)視線(xiàn)跟蹤更具有挑戰(zhàn)性,所以視線(xiàn)跟蹤實(shí)現(xiàn)可能取決于計(jì)算平臺(tái)105的格式。例如,在游戲機(jī)格式中,視線(xiàn)跟蹤器130優(yōu)選地使用專(zhuān)用攝像機(jī),其被優(yōu)化用于眼睛/視線(xiàn)跟蹤的目的并且與視頻圖像傳感器120不同??蛇x地,可以通過(guò)拍攝一個(gè)/多個(gè)用戶(hù)的頭像來(lái)注冊(cè)一個(gè)/多個(gè)用戶(hù)來(lái)改善視線(xiàn)跟蹤性能。然而對(duì)于手持式游戲設(shè)備105A,嵌入式視頻圖像傳感器120A可以可操作來(lái)向視線(xiàn)跟蹤器130輸出所收集的視頻數(shù)據(jù)幀125,其包含平臺(tái)用戶(hù)170的(一只或兩只)眼睛(eys(s))或者臉部。對(duì)于這樣的實(shí)施例,由嵌入式視頻圖像傳感器120A所收集的圖像數(shù)據(jù)可用于兩個(gè)視線(xiàn)跟蹤目的和一般用于在顯示屏IlOA上顯示。類(lèi)似地,對(duì)于手持式電信設(shè)備105B,嵌入式視頻圖像傳感器120B可操作來(lái)向視線(xiàn)跟蹤器130輸出所收集的聚焦于平臺(tái)用戶(hù)170的(一只或兩只)眼睛或者臉部的視頻數(shù)據(jù)幀125。在還有其他實(shí)施例中,可以不存在通用數(shù)字視頻圖像傳感器120,而只有集成到視線(xiàn)跟蹤器130中的專(zhuān)用攝像機(jī)?;氐綀D2A,在操作220處,視線(xiàn)模式(例如,視線(xiàn)模式208)通過(guò)視線(xiàn)方向分析器被映射到顯示屏的子區(qū)域。例如,視線(xiàn)模式208被映射到子區(qū)域的m乘η網(wǎng)格。通常,為顯示屏定義的數(shù)目m和η可以根據(jù)特定顯示屏的物理尺寸以及分辨率而相當(dāng)大地改變,并且要被最優(yōu)化,例如用于提供最滿(mǎn)意的用戶(hù)體驗(yàn)。網(wǎng)格尺寸參數(shù)的優(yōu)化可以通過(guò)研究設(shè)備尺寸與網(wǎng)格尺寸參數(shù)之間的關(guān)系而離線(xiàn)完成。于是,網(wǎng)格尺寸參數(shù)可以基于顯示器特性而被自動(dòng)設(shè)置/加載,所述顯示器特性可以通過(guò)或者向系統(tǒng)注冊(cè)顯示器(即用戶(hù)可以輸入物理設(shè)備的規(guī)格或者選擇預(yù)定義的選項(xiàng)中的一個(gè))或者使用計(jì)算平臺(tái)自動(dòng)探測(cè)顯示器類(lèi)型、即它是PSP還是索尼愛(ài)立信手機(jī)(SonyEricsonphone)還是索尼IXDTV來(lái)獲得。在操作230處,視線(xiàn)方向分析器基于視線(xiàn)模式208確定對(duì)于用戶(hù)有較大興趣的子區(qū)域221中的一個(gè)或多個(gè)。例如,視線(xiàn)模式度量可被分配給子區(qū)域221,并且度量然后被取閾值或者在子區(qū)域中進(jìn)行比較,來(lái)確定受關(guān)注的(一個(gè)或多個(gè))子區(qū)域。例如,在圖2A中的顯示區(qū)210中,115和111分別是受關(guān)注以及不受關(guān)注的子區(qū)域。雖然任意常規(guī)視線(xiàn)模式度量都可以在操作230處被采用,但是在示范性實(shí)施例中,在每個(gè)子區(qū)域內(nèi)多個(gè)眼睛注視或者視線(xiàn)模式掃描長(zhǎng)度被確定。圖2B是確定圖像數(shù)據(jù)幀的受關(guān)注的子區(qū)域的基于輪廓的方法201的實(shí)施例的流程圖,該方法可以通過(guò)自適應(yīng)顯示系統(tǒng)100執(zhí)行。在從視頻圖像傳感器120接收的圖像數(shù)據(jù)幀可能并不像渲染的GUI可能的那樣有任意邏輯塊層級(jí)的地方,輪廓算法可用于識(shí)別是平臺(tái)用戶(hù)關(guān)注的主題的對(duì)象。在特定的實(shí)施例中,新的輪廓探測(cè)過(guò)程周期性地或者被事件觸發(fā),例如當(dāng)用戶(hù)眨眼或者視線(xiàn)偏移時(shí)。方法201開(kāi)始于操作205,其中向顯示屏210輸出一個(gè)或多個(gè)對(duì)象(例如,由視頻圖像傳感器收集的圖像數(shù)據(jù)幀)。如之前在操作215處描述的那樣,視線(xiàn)模式被跟蹤,以生成在圖2B中所表示的視線(xiàn)模式208。在操作223處,執(zhí)行輪廓探測(cè)算法(例如,通過(guò)視線(xiàn)方向分析器140),以探測(cè)圖像數(shù)據(jù)幀221內(nèi)的輪廓。該輪廓探測(cè)算法可以基于視線(xiàn)模式在幀的特定位置被發(fā)起,或者輪廓探測(cè)算法可以被應(yīng)用于整個(gè)幀。在第一種情況下,生成包含視線(xiàn)模式閾值量的輪廓,而在第二種情況下,基于視線(xiàn)模式與特定的一個(gè)/多個(gè)輪廓的重疊水平,從多個(gè)輪廓中選擇一個(gè)或多個(gè)輪廓。例如,基于幀221和視線(xiàn)模式208生成輪廓251。在操作232處,于是確定受關(guān)注的子區(qū)域。該確定可能需要選擇輪廓251,或進(jìn)一步執(zhí)行向上適化算法,用以將幀221的、接近輪廓251的像素包括在與受關(guān)注的子區(qū)域115對(duì)應(yīng)的幀的第一部分中。該幀的剩余部分于是被指定為與不受關(guān)注的子區(qū)域111對(duì)應(yīng)的幀的第二部分。利用基于輪廓的方法201來(lái)使圖像數(shù)據(jù)幀的部分與顯示器的受關(guān)注的子區(qū)域相關(guān)可以相對(duì)于在顯示器與圖像數(shù)據(jù)幀之間m乘η網(wǎng)格的直接映射改善真實(shí)感?;谳喞姆椒?01也可以減少傳輸帶寬,其中在顯示器與圖像數(shù)據(jù)幀之間m乘η網(wǎng)格的直接映射情況下低于所述傳輸帶寬是可能的,例如在網(wǎng)格尺寸與圖像數(shù)據(jù)中對(duì)象的尺寸不是最佳匹配時(shí)。圖3Α示出用于適配(adapte)顯示的方法300,其中通過(guò)根據(jù)用戶(hù)的關(guān)注焦點(diǎn)以可變的分辨率顯示數(shù)據(jù)幀的部分,相對(duì)于不受關(guān)注的子區(qū)域中的對(duì)象修改用于表示受關(guān)注的子區(qū)域中的一個(gè)或多個(gè)對(duì)象所采用的數(shù)據(jù)量。在操作330處,從方法200或201接收至少一個(gè)受關(guān)注的子區(qū)域,例如圖2A或圖2B中的受關(guān)注的子區(qū)域115。在操作340處,表示在受關(guān)注的子區(qū)域內(nèi)所顯示的對(duì)象的數(shù)據(jù)量被修改,用以相對(duì)于在子區(qū)域確定之前由顯示屏提供的數(shù)據(jù)量改變與受關(guān)注的區(qū)域內(nèi)的對(duì)象有關(guān)系的數(shù)據(jù)量。在內(nèi)容縮放(contentzoom)實(shí)施例中,專(zhuān)用于受關(guān)注的子區(qū)域的顯示屏分辨率的百分比可以隨著與不受關(guān)注的子區(qū)域有關(guān)系的顯示屏分辨率的百分比降低而增加,從而受關(guān)注的子區(qū)域的分辨率比不受關(guān)注的子區(qū)域分辨率高。例如,在操作330處接收到的受關(guān)注的子區(qū)域115,其為顯示區(qū)210的25%,在操作340處被提高到顯示區(qū)210的約67%。在操作345處,連同被放大的對(duì)象206顯示修改后的輸出。因而,對(duì)象206能以更高的分辨率被渲染,或者被擴(kuò)張(例如,在對(duì)象206是縮略圖的地方)。如圖1中進(jìn)一步所示的,自適應(yīng)顯示系統(tǒng)100包含自適應(yīng)顯示處理器150,其被耦合到視線(xiàn)方向分析器140上。在該示范性實(shí)施例中,自適應(yīng)顯示處理器150是信號(hào)處理器,其以硬件、軟件或者兩者的組合的方式實(shí)現(xiàn)。對(duì)于自適應(yīng)顯示方法300,計(jì)算平臺(tái)105的處理器從自適應(yīng)顯示處理器150接收輸出151,用于修改被顯示的數(shù)據(jù)。圖3B是用于適配顯示的示范性方法301的流程圖,其中通過(guò)根據(jù)用戶(hù)的關(guān)注焦點(diǎn)以可變的分辨率將圖像數(shù)據(jù)幀的部分(例如,由視頻圖像傳感器(如視頻圖像傳感器120)所收集的)傳輸給計(jì)算平臺(tái)150,相對(duì)于不受關(guān)注的子區(qū)域中的對(duì)象修改表示受關(guān)注的子區(qū)域中的對(duì)象的數(shù)據(jù)量。在實(shí)施例中,受關(guān)注的子區(qū)域被以較高分辨率傳輸,而不受關(guān)注的子區(qū)域被以較低分辨率傳輸。由于圖像數(shù)據(jù)幀將被以高速率傳輸,因此方法301可以被周期性地以低于在受關(guān)注的子區(qū)域情況下幀速率的頻率執(zhí)行,一旦被確定,被應(yīng)用于多個(gè)幀。方法301可以基于事件來(lái)被觸發(fā),例如但不限于,預(yù)定數(shù)目的幀、確定眼睛視線(xiàn)是否偏離所選的(即受關(guān)注的)子區(qū)域的距離度量或者用戶(hù)眨眼的指示,該指示是預(yù)期的眼睛視線(xiàn)偏移的可能標(biāo)志。從操作325開(kāi)始,視頻圖像傳感器120收集圖像數(shù)據(jù)幀。對(duì)于圖1中所示的實(shí)施例,視頻圖像傳感器120具有FOV122,其包括平臺(tái)用戶(hù)170、第二平臺(tái)用戶(hù)180以及旁觀(guān)者185。在操作330處,從視線(xiàn)方向分析器140接收受關(guān)注的子區(qū)域141。在操作365處,使顯示器的受關(guān)注的子區(qū)域與所收集的(一個(gè)或多個(gè))幀的部分相關(guān),并且與受關(guān)注的子區(qū)域?qū)?yīng)的所收集的(一個(gè)或多個(gè))幀的第一部分以高分辨率(例如,視頻圖像傳感器120的至少1920x1080像素的HD分辨率)被傳輸?shù)接?jì)算平臺(tái)。在操作370處,與不受關(guān)注的子區(qū)域?qū)?yīng)的所收集的(一個(gè)或多個(gè))幀的第二部分以低分辨率被傳輸?shù)接?jì)算平臺(tái),該分辨率低于第一部分的分辨率。例如,在視頻圖像傳感器120以高分辨率收集的地方,自適應(yīng)顯示處理器150使用任意的常規(guī)比特率整形技術(shù)降采樣所收集的(一個(gè)或多個(gè))幀的第二部分以減少表示第二部分的數(shù)據(jù)量。因而,使比特率整形算法取決于對(duì)所顯示的輸出的用戶(hù)關(guān)注。在一個(gè)實(shí)施例中,自適應(yīng)顯示處理器150相對(duì)于第一部分減少第二部分的空間(水平和/或垂直)分辨率,減少傳輸帶寬需求。舉一個(gè)例子來(lái)說(shuō),其中第一部分以對(duì)應(yīng)于每掃描線(xiàn)1920個(gè)樣本的采樣的分辨率被傳輸,第二部分被降采樣到每掃描線(xiàn)1440或1280個(gè)樣本的采樣。在另一個(gè)實(shí)施例中,自適應(yīng)顯示處理器150相對(duì)于第一部分減少第二幀部分的時(shí)間分辨率,以減少傳輸帶寬需求。例如,可以相對(duì)于第一部分在第二部分內(nèi)減少幀速率。顯示屏部分然后例如在圖1中通過(guò)鏈接161被傳輸?shù)接?jì)算平臺(tái)105的處理器。在操作375處,計(jì)算平臺(tái)處理器利用任意常規(guī)方法將第一和第二部分聚集成重構(gòu)幀,用于輸出給顯示屏110。在一些實(shí)施例中,其中由視頻圖像傳感器所收集的圖像數(shù)據(jù)幀被輸出到顯示屏,通過(guò)可變比特率壓縮,表示受關(guān)注的子區(qū)域中的對(duì)象的數(shù)據(jù)量相對(duì)于不受關(guān)注的子區(qū)域中的那些被修改。對(duì)于這樣的實(shí)施例,圖像傳感器本地的壓縮引擎用于接收來(lái)自自適應(yīng)顯示處理器150的輸出。例如,參照?qǐng)D1,壓縮引擎160是硬件或者軟件,其可操作用于壓縮從視頻圖像傳感器120接收的圖像數(shù)據(jù)幀125。壓縮引擎160可以執(zhí)行本領(lǐng)域中已知的任意(一個(gè)或多個(gè))壓縮算法,例如執(zhí)行一個(gè)或多個(gè)專(zhuān)有的或者標(biāo)準(zhǔn)兼容的編解碼器(例如,MPEG-4)用以執(zhí)行幀內(nèi)(空間)壓縮和幀間(動(dòng)作)壓縮中的至少一個(gè)。在該示范性實(shí)施例中,壓縮引擎160用于執(zhí)行對(duì)所收集的圖像數(shù)據(jù)幀125的幀內(nèi)和幀間壓縮兩者。圖3C是用于適配顯示的示范性方法350的流程圖,其中壓縮引擎基于視線(xiàn)跟蹤信息應(yīng)用所收集的圖像數(shù)據(jù)幀的可變比特率壓縮。再次從操作325開(kāi)始,視頻圖像傳感器收集圖像數(shù)據(jù)幀。如圖1中所示,視頻圖像傳感器120具有FOV122,其包括平臺(tái)用戶(hù)170、第二平臺(tái)用戶(hù)180以及旁觀(guān)者185。在操作380處,可變比特率壓縮算法被應(yīng)用于所收集的圖像數(shù)據(jù)幀上。在一個(gè)實(shí)施例中,與受關(guān)注的子區(qū)域?qū)?yīng)的所收集的幀的第一部分以高比特率被壓縮(空間地和/或時(shí)間地),而與不受關(guān)注的子區(qū)域?qū)?yīng)的所收集的幀的第二部分以低比特率(即低于第一部分)被壓縮(空間地和/或時(shí)間地)?!ぴ诓僮?90處,被壓縮的幀例如被傳輸?shù)接?jì)算平臺(tái)105。在操作395處,計(jì)算平臺(tái)105上的與壓縮引擎160耦合的處理器然后用適當(dāng)?shù)慕獯a算法(例如,如應(yīng)用于每個(gè)部分)對(duì)幀的第一和第二部分解碼,以將傳輸?shù)?一個(gè)或多個(gè))圖像數(shù)據(jù)幀聚集成重構(gòu)幀,用以在顯示屏110上顯示。圖3D是進(jìn)一步示出示范性可變比特率壓縮方法377的流程圖,其可以在方法350(圖3C)的操作380處被執(zhí)行。方法377從在操作330處接收(一個(gè)或多個(gè))受關(guān)注的子區(qū)域開(kāi)始。(一個(gè)或多個(gè))受關(guān)注的子區(qū)域可以基本上如對(duì)于圖2A中的方法200所述的或者參照?qǐng)D2B的方法201所述那樣被識(shí)別/確定。例如,在圖2A中的方法200的情況中,顯示屏100被劃分成由m乘η個(gè)子區(qū)域的網(wǎng)格。數(shù)目m和η可以被優(yōu)化用以最大化顯示器感知質(zhì)量與傳輸帶寬降低的組合。視線(xiàn)方向分析器140將來(lái)自視線(xiàn)跟蹤器130的眼睛視線(xiàn)方向模式輸出131映射到此m乘η子區(qū)域。視線(xiàn)模式準(zhǔn)則橫越子區(qū)域被應(yīng)用,并且受關(guān)注的子區(qū)域115被識(shí)別?;氐綀D3D,在操作378處,壓縮引擎160確定要首先基于標(biāo)準(zhǔn)壓縮算法被壓縮的像素或圖像部分。例如,在幀之間變化的圖像部分利用幀間壓縮算法來(lái)識(shí)別。在操作382處,壓縮引擎160確定那些具有差異的圖像部分中的哪些位于受關(guān)注的子區(qū)域115內(nèi),并且在操作384處,那些差異以高比特率被發(fā)送(例如,至計(jì)算平臺(tái)105)。在操作386處,針對(duì)不受關(guān)注的子區(qū)域111的差異以低比特率(例如,比受關(guān)注的子區(qū)域低)被發(fā)送(例如,至計(jì)算平臺(tái)105)。類(lèi)似地,壓縮引擎160可以按根據(jù)由視線(xiàn)方向分析器140識(shí)別的子區(qū)域的方式來(lái)執(zhí)行幀內(nèi)壓縮算法。例如,壓縮引擎160可以以以下方式在空間冗余算法中應(yīng)用不同的閾值,所述方式在受關(guān)注的子區(qū)域115和不受關(guān)注的子區(qū)域111之間進(jìn)行區(qū)別。在另一實(shí)施例中,在操作380處執(zhí)行的可變比特率壓縮可以在與顯示器的受關(guān)注的和不受關(guān)注的子區(qū)域?qū)?yīng)的所收集的幀的部分之間辨別I幀處理法。例如,對(duì)于與不受關(guān)注的子區(qū)域?qū)?yīng)的幀部分,防止I幀從其他幀復(fù)制數(shù)據(jù)的規(guī)則可以是不嚴(yán)格的。在一些實(shí)施例中,可以采用具有包含至少平臺(tái)用戶(hù)170的FOV的視頻圖像傳感器120。然而,在其他實(shí)施例中,如由圖2B中的幀221所示,所收集的幀不包含平臺(tái)用戶(hù)170。對(duì)于這樣的實(shí)施例,所收集的圖像數(shù)據(jù)幀源自(sourceby)遠(yuǎn)離平臺(tái)用戶(hù)位置的視頻圖像傳感器(例如,在圖1中,被聯(lián)網(wǎng)到計(jì)算平臺(tái)105上的遠(yuǎn)程視頻圖像傳感器128),或者之前收集的圖像數(shù)據(jù)幀的服務(wù)器(例如,通過(guò)互聯(lián)網(wǎng)127聯(lián)網(wǎng)的視頻存檔站點(diǎn)129)。對(duì)于這樣的實(shí)施例,遠(yuǎn)程壓縮引擎165可以被用于響應(yīng)從自適應(yīng)顯示處理器150接收的信息實(shí)現(xiàn)此處所述的依賴(lài)視線(xiàn)的壓縮算法。也應(yīng)注意的是,方法301,350和377都類(lèi)似地可應(yīng)用于從視頻歸檔站點(diǎn)129或者遠(yuǎn)程視頻圖像傳感器128傳輸圖像數(shù)據(jù)幀。在另外的實(shí)施例中,針對(duì)多個(gè)用戶(hù)中的每一個(gè)跟蹤視線(xiàn)模式。例如,參考回圖1,可以針對(duì)平臺(tái)用戶(hù)170和平臺(tái)用戶(hù)180中的每一個(gè)跟蹤視線(xiàn)模式。由多個(gè)用戶(hù)中的每一個(gè)關(guān)注的顯示屏子區(qū)域的單獨(dú)確定于是可以被確定(例如,在操作215處)。例如,視線(xiàn)171的方向可以被跟蹤并且受關(guān)注的子區(qū)域115被識(shí)別,并且視線(xiàn)181的方向也被跟蹤并且受關(guān)注的子區(qū)域116被識(shí)別。于是,遵循此處所述的方法適配顯示屏輸出,以相對(duì)于不受關(guān)注的子區(qū)域修改受關(guān)注的子區(qū)域內(nèi)的數(shù)據(jù)量。雖然這些方法可以以該方式被擴(kuò)展到多個(gè)用戶(hù),當(dāng)用戶(hù)數(shù)目增加時(shí),帶寬減少率可能下降。然而,這將取決于所顯示的信息的性質(zhì)。例如,在一些游戲應(yīng)用程序中,用戶(hù)的視線(xiàn)可能由于任務(wù)驅(qū)動(dòng)關(guān)注而相當(dāng)多地重疊。例如,在網(wǎng)球游戲中,兩個(gè)用戶(hù)的視線(xiàn)在游戲中將處于網(wǎng)球上是非常有可能的。在其他多用戶(hù)實(shí)施例中,例如其中`在平臺(tái)用戶(hù)170和平臺(tái)用戶(hù)180之間輪流游戲玩法,可能只針對(duì)與輸入設(shè)備(例如SonyPlayStationMoveMotionController(動(dòng)作控制器))關(guān)聯(lián)的用戶(hù)執(zhí)行視線(xiàn)跟蹤和/或視線(xiàn)方向分析。在圖1所示的示范性實(shí)施例中,例如基于由視頻圖像傳感器120所收集的圖像幀,平臺(tái)用戶(hù)170與動(dòng)作控制器190關(guān)聯(lián),并且當(dāng)所關(guān)聯(lián)的動(dòng)作控制器190處在激活的游戲玩法模式中時(shí),只針對(duì)平臺(tái)用戶(hù)170執(zhí)行視線(xiàn)模式跟蹤。當(dāng)游戲玩法轉(zhuǎn)移到動(dòng)作控制器195時(shí),于是只對(duì)與該控制器相關(guān)聯(lián)的平臺(tái)用戶(hù)180執(zhí)行視線(xiàn)跟蹤。任意在此描述的顯示適配方法于是都可以跨多個(gè)用戶(hù)被個(gè)性化。圖4根據(jù)本發(fā)明的一個(gè)實(shí)施例進(jìn)一步示出硬件和用戶(hù)接口,其可用于基于視線(xiàn)跟蹤適配顯示。圖4示意性示出SonyPlaystation3娛樂(lè)設(shè)備的總系統(tǒng)架構(gòu),即可以是兼容的用于實(shí)現(xiàn)此處所述的自適應(yīng)顯示方法的控制臺(tái)。提供平臺(tái)單元1400,連同可連接到平臺(tái)單元1400的不同外圍設(shè)備。該平臺(tái)單元包括=Cell處理器1428;Rambus動(dòng)態(tài)隨機(jī)存取存儲(chǔ)器(XDRAM)單元1426;具有專(zhuān)用視頻隨機(jī)存取存儲(chǔ)器(VRAM)單元1432的真實(shí)仿真器圖形單元1430;以及I/O橋1434。平臺(tái)單元1400也包含用于從盤(pán)1440A讀取的BluRayDiskBD-ROM光盤(pán)讀取器1440和可移動(dòng)吸入式(slot_in)硬盤(pán)驅(qū)動(dòng)器(HDD)1436,其通過(guò)I/O橋1434可訪(fǎng)問(wèn)??蛇x擇地,平臺(tái)單元1400還包含存儲(chǔ)卡讀取器1438用于讀取快閃存儲(chǔ)卡(compactflashmemorycard)、MemoryStick存儲(chǔ)卡等等,其類(lèi)似地可通過(guò)I/O橋1434訪(fǎng)問(wèn)。I/O橋1434也連接到多通用串行總線(xiàn)(USB)2.0端口1424;千兆位以太網(wǎng)端口1422;IEEE802.llb/g無(wú)線(xiàn)網(wǎng)絡(luò)(W1-Fi)端口1420;能支持高達(dá)7個(gè)藍(lán)牙連接的Bluetooth無(wú)線(xiàn)鏈接端口1418。在操作中,1/0橋1434處理所有無(wú)線(xiàn)、USB和以太網(wǎng)數(shù)據(jù),其包括來(lái)自一個(gè)或多個(gè)游戲控制器1402的數(shù)據(jù)。例如,當(dāng)用戶(hù)在玩游戲時(shí),1/0橋1434通過(guò)藍(lán)牙鏈接從游戲(動(dòng)作)控制器1402接收數(shù)據(jù),并將其引導(dǎo)給Cell處理器1428,該處理器相應(yīng)地更新游戲的當(dāng)前狀態(tài)。無(wú)線(xiàn)、USB和以太網(wǎng)端口除了游戲控制器1402之外還為諸如遠(yuǎn)程控制裝置1404;鍵盤(pán)1406;鼠標(biāo)1408;便攜式娛樂(lè)設(shè)備1410如SonyPlaystation便攜式娛樂(lè)設(shè)備;視頻圖像傳感器如Playstation眼睛視頻圖像傳感器1412;麥克風(fēng)耳機(jī)1414;麥克風(fēng)或麥克風(fēng)陣列1415或者視線(xiàn)跟蹤器130的其他外圍設(shè)備提供連通性。因此這樣的外圍設(shè)備原則上可以無(wú)線(xiàn)地連接到平臺(tái)單元1400上;例如便攜式娛樂(lè)設(shè)備1410可以通過(guò)W1-Fiad-hoc連接通信,而麥克風(fēng)耳機(jī)1414可以通過(guò)藍(lán)牙鏈接通信。提供這些接口意味著Playstation3設(shè)備也可能與例如數(shù)字視頻記錄機(jī)(DVR),機(jī)頂盒,數(shù)字視頻圖像傳感器,便攜式媒體播放器,IP電話(huà)上的語(yǔ)音,移動(dòng)電話(huà),打印機(jī)以及掃描儀的其他外圍設(shè)備兼容。游戲控制器1402可操作用于通過(guò)藍(lán)牙鏈接與平臺(tái)單元1400無(wú)線(xiàn)通信,或者與USB端口連接,從而也提供用于給游戲控制器1402的電池充電的功率。游戲控制器1402也可以包含存儲(chǔ)器,處理器,存儲(chǔ)卡讀取器,永久性存儲(chǔ)器如閃存,光發(fā)射器如LED或者紅外光,麥克風(fēng)和揚(yáng)聲器,聲室,數(shù)字視頻圖像傳感器,內(nèi)部時(shí)鐘,可辨認(rèn)/可識(shí)別的形狀如面向游戲控制臺(tái)的球形部分,以及采用如Bluetooth、WiFi等協(xié)議的無(wú)線(xiàn)通信。游戲(動(dòng)作)控制器1402是被設(shè)計(jì)用雙手使用的控制器。除了一個(gè)或多個(gè)模擬操縱桿和常規(guī)控制按鈕之外,游戲控制器容許三維位置確定。因此,除了或者代替常規(guī)按鈕和操縱桿命令,游戲控制器用戶(hù)的姿勢(shì)和運(yùn)動(dòng)可以被轉(zhuǎn)化為游戲輸入??蛇x地,其他無(wú)線(xiàn)使能外圍設(shè)備,例如Playstation便攜式設(shè)備,可以被用作控制器。在Playstation便攜式設(shè)備的情況下,可以在設(shè)備的屏幕上提供附加的游戲或者控制信息(例如,控制指令或者生命數(shù))。其他替換的或者補(bǔ)充的控制設(shè)備也可以被使用,例如跳舞毯(未示出)、光槍(未示出)、方向盤(pán)和踏板(未示出)等等。遠(yuǎn)程控制器1404也可操作用于通過(guò)藍(lán)牙鏈接與平臺(tái)單元1400無(wú)線(xiàn)通信。遠(yuǎn)程控制器1404包含控制裝置,其適用于BluRayTMDiskBD-ROM讀取器1440的操作以及盤(pán)內(nèi)容的導(dǎo)航。除了常規(guī)的預(yù)錄式和可錄的⑶以及所謂的超音頻⑶之外,BluRayTMDiskBD-ROM讀取器1440可操作用于讀取兼容于Playstation和PlayStation2設(shè)備的CD-ROM。除了常規(guī)的預(yù)錄式和可錄的DVD之外,讀取器1440也可操作用于讀取兼容于Playstation2和Playstation3設(shè)備的DVD-ROM。進(jìn)一步地,讀取器1440可操作用于讀取兼容于Playstation3設(shè)備以及常規(guī)的預(yù)錄式和可錄的藍(lán)光盤(pán)的BD-R0M。平臺(tái)單元1400可操作用于通過(guò)音頻和視頻連接器將經(jīng)由真實(shí)合成器圖形單元1430由Playstation3設(shè)備生成或者解碼的音頻和視頻提供給顯示器和聲音輸出設(shè)備,例如顯示屏110。音頻連接器1450可以包含常規(guī)的模擬和數(shù)字輸出,而視頻連接器1452可以多方面地包含分量視頻,S視頻,復(fù)合視頻,以及一個(gè)或者多個(gè)高清晰度多媒體接口(HDMI)輸出。因此,視頻輸出可以處于諸如PAL或NTSC的格式,或者處于720p,1080i或1080p高清晰度。在一個(gè)實(shí)施例中,視頻圖像傳感器1412包含單獨(dú)的電荷耦合器件(CXD)以及LED指示器。傳感器1412可以進(jìn)一步包含基于軟件或硬件的數(shù)據(jù)壓縮和編碼裝置,以便壓縮的視頻數(shù)據(jù)能夠以合適的格式被傳輸,例如用于由平臺(tái)單元1400解碼的基于圖像內(nèi)MPEG(活動(dòng)圖像專(zhuān)家組(motionpictureexpertgroup))標(biāo)準(zhǔn)。視頻圖像傳感器LED指示器被設(shè)置用于響應(yīng)于來(lái)自平臺(tái)單元1400的適當(dāng)?shù)目刂茢?shù)據(jù)照亮,例如用于表示不利的照明條件。視頻圖像傳感器1412的實(shí)施例可以多方面地通過(guò)HDMI,USB,藍(lán)牙或者W1-Fi通信端口連接到平臺(tái)單元1400。視頻圖像傳感器的實(shí)施例可以包含一個(gè)或多個(gè)相關(guān)聯(lián)的麥克風(fēng),并且也可以能夠用于傳輸音頻數(shù)據(jù)。在視頻圖像傳感器的實(shí)施例中,CCD可以具有適用于高清晰度視頻捕捉的分辨率。在使用中,由視頻圖像傳感器捕捉到的圖像可以例如被合并到游戲內(nèi)或者被解釋為游戲控制輸入。在另一實(shí)施例中,視頻圖像傳感器是紅外視頻圖像傳感器,其適用于探測(cè)紅外光。圖5根據(jù)本發(fā)明的一個(gè)實(shí)施例示出可用于處理指令的附加硬件。圖4的Cell處理器1428如在圖5中進(jìn)一步所示,具有包含4個(gè)基本部件的架構(gòu):外部輸入和輸出結(jié)構(gòu),其包含存儲(chǔ)器控制器1560和雙總線(xiàn)接口控制器1570A,B;主處理器,其被稱(chēng)為主處理元件(PowerProcessingElement)1550;8個(gè)協(xié)處理器,其被稱(chēng)為協(xié)同處理元件(SPE)1510A-H;以及連接以上部件的循環(huán)數(shù)據(jù)總線(xiàn),其被稱(chēng)為元件互連總線(xiàn)(EIB)1580。相比于Playstation2設(shè)備的情感引擎的6.2GFL0P,Cell處理器的總浮點(diǎn)性能為218GFLOPS0主處理元件(PPE)1550基于雙向同時(shí)多線(xiàn)程電源(Power)1470,其適應(yīng)以3.2GHz的內(nèi)部時(shí)鐘運(yùn)行的PowerPC核(PPU)1555。它包含512kB2級(jí)(L2)緩存1552和32kBI級(jí)(LI)緩存1551。PPE1550能夠?qū)崿F(xiàn)每時(shí)鐘循環(huán)8個(gè)單獨(dú)的位置操作,轉(zhuǎn)變?yōu)?.2GHz處的25.6GFL0P。PPE1550的主要任務(wù)是充當(dāng)用于SPE1510A-H的控制器,其處理大部分的計(jì)算工作量。在操作中,PPE1550維持工作隊(duì)列,為SPE1510A-H調(diào)度任務(wù)并且監(jiān)控其進(jìn)展。因此,每個(gè)SPE1510A-H運(yùn)行內(nèi)核,該內(nèi)核的作用是取得工作,執(zhí)行工作,并且與PPE1550同步。每個(gè)協(xié)同處理元件(SPE)1510A-H均包含相應(yīng)的協(xié)同處理單元(SPU)1520A-H,以及相應(yīng)的存儲(chǔ)流控制器(MFC)1540A-H,所述存儲(chǔ)流控制器依次包含相應(yīng)的動(dòng)態(tài)存儲(chǔ)器存取控制器(DMAC)1542A-H,相應(yīng)的存儲(chǔ)器管理單元(MMU)1544A-H,以及總線(xiàn)接口(未示出)。每個(gè)SPU1520A-H是RISC處理器,其以3.2GHz被時(shí)鐘控制并包含256kB本地RAM1530A-H,原則上可擴(kuò)展為4GB。每個(gè)SPE給出單精度性能的理論25.6GFLOPS0SPU在單個(gè)時(shí)鐘循環(huán)內(nèi)可以對(duì)4個(gè)單精度浮點(diǎn)成員,4個(gè)32比特?cái)?shù)字,8個(gè)16比特整數(shù),或者16個(gè)8比特整數(shù)操作。在相同的時(shí)鐘循環(huán)內(nèi),該SPU還能執(zhí)行存儲(chǔ)操作。SPU1520A-H不直接訪(fǎng)問(wèn)系統(tǒng)存儲(chǔ)器XDRAM1426;由SPU1520A-H形成的64比特地址被傳遞給MFC1540A-H,該MFC指示其DMAC控制器1542A-H通過(guò)EIB1580和存儲(chǔ)器控制器1560訪(fǎng)問(wèn)存儲(chǔ)器。元件互連總線(xiàn)(EIB)1580是Cell處理器1428內(nèi)部的邏輯循環(huán)通信總線(xiàn),其連接以上處理器元件,即PPE1550,存儲(chǔ)器控制器1560,雙總線(xiàn)接口控制器1570A,B以及8個(gè)SPE1510A-H,總計(jì)12個(gè)參與者。參與者可以以每時(shí)鐘循環(huán)8字節(jié)的速率對(duì)總線(xiàn)同時(shí)地讀和寫(xiě)。如前所注釋的,每個(gè)SPE1510A-H包含DMAC1542A-H,用于調(diào)度較長(zhǎng)的讀或?qū)懶蛄?。EIB包含4個(gè)通道,其中兩個(gè)分別沿順時(shí)針?lè)较蚝湍鏁r(shí)針?lè)较?。因此?duì)12個(gè)參與者,任意兩個(gè)參與者之間最長(zhǎng)的逐步數(shù)據(jù)流在適當(dāng)方向上是6步。因此,在通過(guò)在參與者之間仲裁的充分利用事件中,用于12槽的理論峰值瞬時(shí)EIB帶寬為每時(shí)鐘96B。這等于在3.2GHz時(shí)鐘速率時(shí)307.2GB/s(每秒千兆字節(jié))的理論峰值帶寬。存儲(chǔ)器控制器1560包含由Rambus公司開(kāi)發(fā)的XDRAM接口1378。存儲(chǔ)器控制器以25.6GB/s的理論峰值帶寬與RambusXDRAM1426相連。雙總線(xiàn)接口控制器1570A,B包含RambusFlexIO系統(tǒng)接口1572A,B。接口被組織成12個(gè)通道,每個(gè)通道為8比特寬,其中5個(gè)路徑是入站,7個(gè)是出站。要理解的是以上描述意圖是說(shuō)明性的,而不是限制性的。例如,盡管圖中的流程圖示出由本發(fā)明的某些實(shí)施例執(zhí)行的特定操作順序,應(yīng)當(dāng)理解的是,這樣的順序并不是需要的(例如,替換的實(shí)施例可以以不同的順序執(zhí)行操作,組合某些操作,重疊某些操作,等等)。此外,在閱讀和理解以上描述時(shí),許多其他的實(shí)施例將對(duì)于本領(lǐng)域技術(shù)人員是顯而易見(jiàn)的。雖然參照具體示范性實(shí)施例描述了本發(fā)明,但將認(rèn)識(shí)到,本發(fā)明并不局限于所述的實(shí)施例,而是可以在所附的權(quán)利要求的精神和范圍內(nèi)以修改與改動(dòng)來(lái)實(shí)施。因此,本發(fā)明的范圍應(yīng)當(dāng)參照所附的權(quán)利要求連同這樣的權(quán)利要求所授權(quán)給的等價(jià)物的全部范圍來(lái)確定。權(quán)利要求1.一種用于適配顯示的方法,包括:在顯示屏上呈現(xiàn)輸出;對(duì)觀(guān)看顯示屏輸出的用戶(hù)的視線(xiàn)模式進(jìn)行跟蹤;將視線(xiàn)模式映射到顯示屏的物理位置;基于該映射,確定顯示屏的被用戶(hù)正關(guān)注的子區(qū)域;以及通過(guò)相對(duì)于在顯示屏的不受關(guān)注的子區(qū)域中顯示的對(duì)象改變表示在受關(guān)注的子區(qū)域內(nèi)顯示的對(duì)象的數(shù)據(jù)量來(lái)修改顯示屏輸出。2.權(quán)利要求1的方法,其中通過(guò)將不受關(guān)注的子區(qū)域的分辨率改變?yōu)榈陀谑荜P(guān)注的子區(qū)域分辨率來(lái)修改顯示屏輸出,或者通過(guò)將受關(guān)注的子區(qū)域的分辨率改變?yōu)楦哂诓皇荜P(guān)注的子區(qū)域分辨率來(lái)修改。3.權(quán)利要求1的方法,其中映射視線(xiàn)模式進(jìn)一步包括:將顯示屏劃分為m乘η網(wǎng)格的子區(qū)域;將視線(xiàn)模式度量分配給一個(gè)或者多個(gè)子區(qū)域;并且其中確定受關(guān)注的子區(qū)域進(jìn)一步包括在子區(qū)域之間視線(xiàn)模式度量的比較。4.權(quán)利要求1的方法,進(jìn)一步包括:利用視頻圖像傳感器收集圖像數(shù)據(jù)幀;以對(duì)于與受關(guān)注的子區(qū)域?qū)?yīng)的所收集的圖像數(shù)據(jù)幀的第一部分比對(duì)于與不受關(guān)注的子區(qū)域?qū)?yīng)的所收集的圖像數(shù)據(jù)幀的第二部分大的比特率將所收集的圖像數(shù)據(jù)幀傳輸給計(jì)算平臺(tái);利用計(jì)算平臺(tái)將所收集的圖像數(shù)據(jù)幀的第一和第二部分聚集成重構(gòu)圖像數(shù)據(jù)幀;并且在顯示屏上顯示重構(gòu)圖像數(shù)據(jù)幀。5.權(quán)利要求4的方法,進(jìn)一步包括,對(duì)于所收集的圖像數(shù)據(jù)幀的第一部分比對(duì)于所收集的圖像數(shù)據(jù)幀的第二部分應(yīng)用較低的幀內(nèi)或幀間壓縮;或者對(duì)所收集的圖像數(shù)據(jù)幀的第二部分進(jìn)行次采樣。6.權(quán)利要求4的方法,其中圖像數(shù)據(jù)幀以至少1920x1080像素的HD分辨率被收集,并且其中與受關(guān)注的子區(qū)域?qū)?yīng)的重構(gòu)圖像數(shù)據(jù)幀以HD分辨率被顯示,而不受關(guān)注的子區(qū)域以低于HD分辨率的分辨率被顯示。7.權(quán)利要求4的方法,其中基于所收集的圖像數(shù)據(jù)幀跟蹤用戶(hù)的視線(xiàn)模式。8.權(quán)利要求4的方法,其中通過(guò)對(duì)所收集的圖像幀執(zhí)行輪廓探測(cè)算法來(lái)確定與受關(guān)注的子區(qū)域?qū)?yīng)的所記錄的圖像數(shù)據(jù)幀的部分。9.權(quán)利要求8的方法,其中新的輪廓探測(cè)算法或者周期性地或者響應(yīng)于接收到指示用戶(hù)眨眼或者視線(xiàn)偏移高于閾值而被發(fā)起。10.權(quán)利要求1的方法,其中針對(duì)多個(gè)用戶(hù)中的每一個(gè)跟蹤視線(xiàn)模式,其中確定由多個(gè)用戶(hù)中的每一個(gè)關(guān)注的顯示屏的子區(qū)域,并且其中針對(duì)每一個(gè)受關(guān)注的子區(qū)域修改顯示屏輸出。11.權(quán)利要求10的方法,進(jìn)一步包括,基于所收集的圖像幀,將多個(gè)用戶(hù)中的用戶(hù)與輸入設(shè)備關(guān)聯(lián),并且其中只針對(duì)與輸入設(shè)備相關(guān)聯(lián)的用戶(hù)執(zhí)行視線(xiàn)模式跟蹤。12.—種非暫時(shí)計(jì)算機(jī)可讀介質(zhì),具有其上所存儲(chǔ)的一組指令,所述指令在被處理系統(tǒng)執(zhí)行時(shí),使處理系統(tǒng)執(zhí)行權(quán)利要求1的方法。13.—種自適應(yīng)顯不系統(tǒng),包括:具有顯示屏的計(jì)算平臺(tái);視線(xiàn)跟蹤器,用于跟蹤觀(guān)看來(lái)自顯示屏的輸出的用戶(hù)的視線(xiàn)模式;視線(xiàn)方向分析器,用于將視線(xiàn)模式映射到顯示屏的物理位置并且基于該映射確定被用戶(hù)正關(guān)注的顯示屏的子區(qū)域;以及自適應(yīng)顯示處理器,用于相對(duì)于在顯示屏的不受關(guān)注的子區(qū)域中顯示的對(duì)象改變表示在受關(guān)注的子區(qū)域內(nèi)顯示的對(duì)象的數(shù)據(jù)量。14.權(quán)利要求13的系統(tǒng),其中自適應(yīng)顯示處理器用于通過(guò)將不受關(guān)注的子區(qū)域的分辨率改變?yōu)榈陀谑荜P(guān)注的子區(qū)域分辨率,或者通過(guò)將受關(guān)注的子區(qū)域的分辨率改變?yōu)楦哂诓皇荜P(guān)注的子區(qū)域分辨率來(lái)修改顯示屏輸出。15.權(quán)利要求13的系統(tǒng),其中視線(xiàn)方向分析器用于通過(guò)將顯示屏劃分成m乘η網(wǎng)格的子區(qū)域并且將視線(xiàn)模式度量分配給一個(gè)或多個(gè)子區(qū)域來(lái)映射視線(xiàn)模式;并且其中視線(xiàn)方向分析器用于基于子區(qū)域之間視線(xiàn)模式度量的比較來(lái)確定受關(guān)注的子區(qū)域。16.權(quán)利要求15的系統(tǒng),其中視線(xiàn)模式度量可以是如下中的任一個(gè):多個(gè)注視,視線(xiàn)模式掃描長(zhǎng)度,或者視線(xiàn)模式掃描區(qū)。17.權(quán)利要求13的系統(tǒng),進(jìn)一步包括視頻圖像傳感器,用來(lái)收集圖像數(shù)據(jù)幀,其中自適應(yīng)顯示處理器用于以對(duì)于與受關(guān)注的子區(qū)域?qū)?yīng)的所收集的圖像數(shù)據(jù)幀的第一部分比對(duì)于與不受關(guān)注的子區(qū)域?qū)?yīng)的所收集的圖像數(shù)據(jù)幀的第二部分大的比特率使所收集的圖像數(shù)據(jù)幀傳輸給計(jì)算平臺(tái),并且其中計(jì)算平臺(tái)用于將所收集的圖像數(shù)據(jù)幀的第一和第二部分聚集成重構(gòu)圖像數(shù)據(jù)幀,并且其中顯示屏用于顯示重構(gòu)圖像數(shù)據(jù)幀。18.權(quán)利要求17的系統(tǒng),進(jìn)一步包括壓縮引擎,用于對(duì)于所收集的圖像數(shù)據(jù)幀的第一部分比對(duì)于所收集的圖像數(shù)據(jù)幀的第二部分應(yīng)用較低的幀內(nèi)或幀間壓縮;或者其中自適應(yīng)顯示處理器用于對(duì)所收集的圖像數(shù)據(jù)幀的第二部分進(jìn)行次采樣。19.權(quán)利要求17的系統(tǒng),其中視頻圖像傳感器用于以至少1920x1080像素的HD分辨率收集圖像數(shù)據(jù)幀,并且其中顯示屏用于以HD分辨率顯示與受關(guān)注的子區(qū)域?qū)?yīng)的重構(gòu)圖像數(shù)據(jù)幀并且以低于HD分辨率的分辨率顯示不受關(guān)注的子區(qū)域。20.權(quán)利要求13的系統(tǒng),其中視線(xiàn)跟蹤器用于基于所收集的圖像數(shù)據(jù)幀跟蹤用戶(hù)的視線(xiàn)模式。21.權(quán)利要求13的系統(tǒng),其中視線(xiàn)方向分析器用于通過(guò)對(duì)所收集的圖像幀執(zhí)行輪廓探測(cè)算法來(lái)確定與受關(guān)注的子區(qū)域?qū)?yīng)的所記錄的圖像數(shù)據(jù)幀的部分。22.權(quán)利要求21的系統(tǒng),其中視線(xiàn)方向分析器用于或者周期性地或者響應(yīng)于接收到指示用戶(hù)眨眼或者視線(xiàn)偏移高于閾值而發(fā)起新的輪廓探測(cè)算法。23.權(quán)利要求13的系統(tǒng),其中視線(xiàn)跟蹤器用于對(duì)于多個(gè)用戶(hù)中的每一個(gè)跟蹤視線(xiàn)模式,其中視線(xiàn)方向分析器用于確定由多個(gè)用戶(hù)中的每一個(gè)關(guān)注的顯示屏的子區(qū)域。24.權(quán)利要求23的系統(tǒng),進(jìn)一步包括可被計(jì)算平臺(tái)識(shí)別的用戶(hù)輸入設(shè)備,并且其中視線(xiàn)跟蹤器用于只跟蹤基于所收集的圖像數(shù)據(jù)幀與輸入設(shè)備相關(guān)聯(lián)的用戶(hù)的視線(xiàn)模式。全文摘要本發(fā)明涉及用于基于顯示器用戶(hù)關(guān)注適配顯示屏輸出的方法和系統(tǒng)。采用視線(xiàn)方向跟蹤來(lái)確定用戶(hù)正關(guān)注的顯示屏區(qū)的子區(qū)域。受關(guān)注的子區(qū)域的顯示相對(duì)于顯示屏的剩余部分被修改,例如,通過(guò)相對(duì)于在顯示屏的不受關(guān)注的子區(qū)域中顯示的對(duì)象改變表示在受關(guān)注的子區(qū)域內(nèi)顯示的對(duì)象的數(shù)據(jù)量。文檔編號(hào)A61B3/14GK103249352SQ201180059058公開(kāi)日2013年8月14日申請(qǐng)日期2011年6月15日優(yōu)先權(quán)日2010年12月8日發(fā)明者O.卡林利申請(qǐng)人:索尼電腦娛樂(lè)公司
網(wǎng)友詢(xún)問(wèn)留言 已有0條留言
  • 還沒(méi)有人留言評(píng)論。精彩留言會(huì)獲得點(diǎn)贊!
1