專利名稱：用于手持電子裝置的用戶接口控制器方法和設(shè)備的制作方法
技術(shù)領(lǐng)域：
本發(fā)明大體涉及手持電子裝置的領(lǐng)域，并且更具體地涉及與在手 持電子裝置顯示器上呈現(xiàn)的信息的人類交互的領(lǐng)域。
背景技術(shù)：
小型的手持電子裝置正在變得足夠復(fù)雜，從而使得與這些手持電 子裝置的友好交互的設(shè)計(jì)成為挑戰(zhàn)。特別地，在很多手持電子裝置上 使用的較小、高密度、全色顯示器上能夠呈現(xiàn)的信息需要與用在膝上 型電腦和臺式計(jì)算機(jī)上的鼠標(biāo)相似的功能，從而便利與顯示器上的信 息的人類交互。用于提供這種交互的一種技術(shù)是以尖頭物體接觸顯示 表面，以識別在顯示器上顯示的物體或區(qū)域，但是在操作較小手持裝 置例如蜂窩電話的許多情況下，這不是容易完成的。


通用實(shí)例示出本發(fā)明，并且不限制于參考附圖，在附圖中，相同 的參考數(shù)字表示相同的元件，并且在附圖中
圖1是示出根據(jù)本發(fā)明的一些實(shí)施例的手持裝置的功能框圖。
圖2是示出根據(jù)本發(fā)明的一些實(shí)施例的手持電子裝置并包括引導(dǎo) 物體和一些虛擬幾何線的透視圖。
圖3是示出根據(jù)本發(fā)明的一些實(shí)施例的相機(jī)的圖像平面的平面圖。
圖4是示出根據(jù)本發(fā)明的一些實(shí)施例的手持電子裝置和引導(dǎo)物體 的截面圖。
圖5是示出根據(jù)本發(fā)明的一些實(shí)施例的包括物體標(biāo)記圖像的手持 電子裝置的圖像平面的平面圖。
圖6是根據(jù)本發(fā)明的一些實(shí)施例的可被用于位置和方向的引導(dǎo)物 體的圖。
圖7是根據(jù)本發(fā)明的一些實(shí)施例的顯示表面的平面圖。
圖8是示出根據(jù)本發(fā)明的一些實(shí)施例的手持電子裝置并且包括引
導(dǎo)物體和一些虛擬幾何線的透視圖。
圖9是示出根據(jù)本發(fā)明的一些實(shí)施例的手持電子裝置并且包括一
些虛擬幾何線的正視圖。
圖10、 11和12示出根據(jù)本發(fā)明的一些實(shí)施例的在手持裝置中使 用的方法的一些步驟的流程圖。
本領(lǐng)域技術(shù)人員將理解，附圖中的元件為了簡單和清楚而示出， 并不必然按照比例繪制。例如，在附圖中的一些元件的尺寸可能相對 于其他元件被放大擴(kuò)大，以幫助改善對于本發(fā)明的實(shí)施例的理解。
具體實(shí)施例方式
在根據(jù)這里所述的本發(fā)明的實(shí)施例來詳細(xì)描述特定的人類交互技 術(shù)之前，應(yīng)該知道，實(shí)施例主要在于關(guān)于與手持電子裝置的人類交互 的方法步驟和設(shè)備部件的組合。因此，在適當(dāng)?shù)胤揭呀?jīng)利用附圖中的 常用符號來表示設(shè)備部件和方法步驟，僅僅顯示與理解實(shí)施例相關(guān)的 那些特定細(xì)節(jié)，從而使得本公開不與對于受益于這里描述的本領(lǐng)域技 術(shù)人員顯而易見的細(xì)節(jié)弄混。
參考圖1，示出根據(jù)本發(fā)明的一些實(shí)施例的手持電子裝置100的 功能框圖。該手持電子裝置100包括顯示器105、第一相機(jī)110、以及 耦合到顯示器105和第一相機(jī)110的處理功能115。該手持電子裝置 100可以進(jìn)一步包括第二相機(jī)130、光源120、 一個或多個傳感器125 以及電話功能(function) 135，其中每個(被包括的)也被耦合到處理
功能115。根據(jù)本發(fā)明，獨(dú)特地包括手持電子裝置100作為相比傳統(tǒng)裝 置充分改進(jìn)了與手持電子裝置100的人類交互的設(shè)備，并且在這里還 描述用于實(shí)現(xiàn)關(guān)于手持電子裝置100的這些改進(jìn)的方法。
手持電子裝置100被優(yōu)選地設(shè)計(jì)為在通常使用時能夠被抓握在一 只手中。因此，顯示器105相比于例如膝上型計(jì)算機(jī)、臺式計(jì)算機(jī)以 及設(shè)計(jì)用于桌面、墻壁或自立(sdf-standing)安裝的電視機(jī)的這些電 子裝置的顯示器來說，典型地較小。手持電子裝置100可以是蜂窩電 話，在這種情況下其將包括電話功能135。特別地，當(dāng)手持電子裝置 100是蜂窩電話時，則在很多情況下，顯示器105將為大約2X2厘米 的量級。本發(fā)明能夠?qū)ζ涮峁┯幸饬x的益處的多數(shù)電子裝置100將具 有小于100平方厘米的顯示器可視面積。顯示器105的可視表面可以 是平坦的或接近平坦的，但是替換的結(jié)構(gòu)也可以與本發(fā)明一起使用。 顯示器105的技術(shù)可以是與手持電子裝置兼容的任何可用技術(shù)，用于 傳統(tǒng)顯示器的技術(shù)包括但是不局限于液晶、電致發(fā)光、發(fā)光二極管以 及有機(jī)發(fā)光裝置。顯示器100可以包括除了為了實(shí)際目的而必需與顯 示面板配合使用的驅(qū)動電路之外的電路；例如，可以包括可以從處理 功能115接收視頻信號并將該視頻信號轉(zhuǎn)換為顯示驅(qū)動電路所需要的 電子信號的電路。這些電路可以例如包括微處理器、相關(guān)聯(lián)的程序指 令以及相關(guān)的處理電路，或者這些電路可以是專用電路。
蜂窩電話功能135可以提供任何可用類型的一個或多個蜂窩電話 服務(wù)。某些傳統(tǒng)技術(shù)是根據(jù)例如GSM、 CDMA 2000、 GPRS等的標(biāo)準(zhǔn) 執(zhí)行的時分多址(TDMA)、碼分多址(CDMA)或模擬的技術(shù)。電話 功能135包括必需的無線電發(fā)射機(jī)和接收機(jī)、以及操作該無線電發(fā)射 機(jī)和接收機(jī)的處理、按需編碼和解碼語音、麥克風(fēng)，以及可以包括電 話需要的鍵盤和鍵盤感應(yīng)功能。電話功能135由此在很多例子中包括 可以包括微處理器、相關(guān)聯(lián)的程序指令以及相關(guān)電路的處理電路。
手持電子裝置100可以由一個或多個電池供電，并且可以具有相
關(guān)聯(lián)的電力轉(zhuǎn)換和調(diào)節(jié)功能。然而，手持電子裝置100可以可選擇地 由電源供電，并且依然獲得本發(fā)明的益處。
第一相機(jī)110與當(dāng)前在蜂窩電話中可用的相機(jī)相似。第一相機(jī)110 在所提供的透鏡光學(xué)器件的特性上有一些不同，因?yàn)樵诒粍澐譃槎S 的一些實(shí)施例中，本發(fā)明可能不能大大受益于大于大約IO厘米(例如，
從5厘米到15厘米)的視野范圍深度。在一些可能包括那些被分類為 二維的實(shí)施例中以及在被劃分為三維的一些實(shí)施例中，第一相機(jī)110
可能受益于非常短，也就是接近零厘米的視野深度，并且通過大于大
約50厘米則不能提供充分改進(jìn)的益處。在一個例子中，本發(fā)明可以利 用具有從大約5厘米到大約25厘米的范圍的視野深度而提供充分的益 處。這些值優(yōu)選在對于手持裝置常見的環(huán)境光條件下獲得，這些環(huán)境 光條件可以包括接近完全黑暗、明亮的陽光以及在那些之間的環(huán)境光 條件。如下更詳細(xì)所述的，在本發(fā)明的一些實(shí)施例中提供所獲得得期 望的視野深度的方法。單色相機(jī)對于本發(fā)明的一些實(shí)施例可能是非常 適合的，而在其他實(shí)施例中可能需要彩色相機(jī)。
處理功能115可以包括微處理器、存儲在適合存儲器中的相關(guān)聯(lián) 的程序指令、以及相關(guān)電路，諸如存儲器管理和輸入/輸出電路。處理 功能115電路可能在兩個或多個集成電路中，或處理功能115電路全 部在一個集成電路中，或處理功能115電路連同手持電子裝置100的 其他功能都在一個集成電路中。
參考圖2，示出根據(jù)本發(fā)明的一些實(shí)施例的手持電子裝置100的 透視圖，其包括引導(dǎo)物體260和一些虛擬幾何線。在該手持電子裝置 100的這個視圖中所示的是顯示器的可視表面210、相機(jī)開孔215、光 源開孔220、傳感器開孔235、作為開關(guān)的傳感器245以及鍵盤區(qū)域240。 如由點(diǎn)線226所示，第一相機(jī)110在這個例子中具有圓錐形的視野， 具有視野的軸230。視野的軸230基本上垂直于顯示器的表面210。(顯 示器可視表面被假設(shè)為基本平行于手持電子裝置100的表面)。對于
典型的顯示器105來說，該軸可以被認(rèn)為定向?yàn)榛旧洗怪庇陲@示器
105,這些顯示器105在它們的結(jié)構(gòu)上是平面的。相機(jī)開孔215可以包 括相機(jī)鏡頭，并且還可以被稱為相機(jī)鏡頭215。
引導(dǎo)物體260可以是多種物體之一，這些物體之一可以被描述為 伸長桿(wand)，該伸長桿在圖2所示的特定實(shí)施例中包括安裝在手 柄的一端處的球270。其他實(shí)施例可以是人員的手指、手指甲或在指尖 上攜載的套管狀裝置。引導(dǎo)物體260可以用手抓握(在圖2中沒有示 出)。當(dāng)引導(dǎo)物體是具有球270的伸長桿時，球270具有這樣的表面， 該表面可以經(jīng)由從球270的表面投射255的光，在第一相機(jī)110的圖 像平面301 (圖3)上產(chǎn)生圖像370 (圖3)。球的表面在這里被稱為 引導(dǎo)物體標(biāo)記，以及在其他實(shí)施例中可能有多個引導(dǎo)物體標(biāo)記。當(dāng)實(shí) 施例包括手指時，可能有僅僅一個引導(dǎo)物體標(biāo)記，諸如手指甲或套管 狀裝置。投射255到圖像表面301上的光可能是例如從球270的表 面反射的環(huán)境光；從光源120發(fā)射并從球270的表面反射的光；或者 在球270內(nèi)生成并透射通過透明或半透明的球表面的光；或者在球270 的表面處生成的光。引導(dǎo)物體260的其他部分(手柄)的表面(在這 個例子中不是引導(dǎo)物體標(biāo)記)的圖像360也可以利用反射光而被投射 到圖像平面301上。在一些實(shí)施例中，引導(dǎo)物體標(biāo)記可以覆蓋整個引 導(dǎo)物體。
參考圖3，示出根據(jù)本發(fā)明的一些實(shí)施例的第一相機(jī)110的圖像 平面301的平面圖。圖像平面301可以是用來捕捉視頻圖像的成像裝 置的有效(active)表面，例如光電管的掃描矩陣。在圖3所示的例子 中，成像裝置的有效表面具有外周302,該外周302近似對應(yīng)于第一相 機(jī)110的視野的限制。在圖像平面301上產(chǎn)生的引導(dǎo)物體260的圖像 360和球270的圖像370被稱為物體標(biāo)記的圖像(或物體標(biāo)記圖像)。 如下將進(jìn)一步詳細(xì)描述的，在可選擇實(shí)施例中可以實(shí)現(xiàn)引導(dǎo)物體260, 該引導(dǎo)物體260生成可選擇的物體標(biāo)記圖像。在本發(fā)明的可選擇實(shí)施 例中，可以在引導(dǎo)物體上提供多于一個的物體標(biāo)記。在很多實(shí)施例中，
引導(dǎo)物體被設(shè)計(jì)為利用一只手舒適地抓握及在手持電子裝置100上移 動，而手持電子裝置100則被抓握在另一只手中。第一相機(jī)110利用 可以包括本領(lǐng)域技術(shù)人員公知的技術(shù)來生成一連串視頻圖像。響應(yīng)于
引導(dǎo)物體260相對于手持電子裝置100的移動，物體標(biāo)記圖像370可 以出現(xiàn)在接連的視頻圖像中的不同的位置和方位處。應(yīng)該知道，通常， 因?yàn)槲矬w標(biāo)記是通過傳統(tǒng)透鏡在圖像平面上的投影，而傳統(tǒng)透鏡產(chǎn)生 相對于引導(dǎo)物體的二維視圖的成比例型式(scaled version)而發(fā)生變形
的圖像，所以物體標(biāo)記圖像不只是引導(dǎo)物體的二維視圖的成比例型式 (其中該二維視圖的平面垂直于視野的軸)。因此，在這個例子中的
物體標(biāo)記圖像不是圓，而更像是橢圓。
處理功能115獨(dú)特地包括第一功能，其使用可能包括公知傳統(tǒng) 技術(shù)諸如邊緣識別的技術(shù)來執(zhí)行物體標(biāo)記圖像370的目標(biāo)識別；以及 第二功能，其使用可以包括公知傳統(tǒng)技術(shù)的技術(shù)來確定引導(dǎo)物體260 的參考點(diǎn)271 (圖2)的至少二維位置。當(dāng)引導(dǎo)物體是諸如手指、指甲 或套管狀物體的物體時，參考點(diǎn)271可以是在手指尖、手指甲或套管 狀物體處的點(diǎn)。在一個實(shí)施例中，使用坐標(biāo)系，將參考點(diǎn)271的二維 位置定義為參考點(diǎn)271在圖像平面301上的投射位置，該坐標(biāo)系是一 組正交矩形軸305、 310，這組正交矩形軸在圖像平面內(nèi)的原點(diǎn)是圖像 平面與視野225的軸230相交的點(diǎn)。雖然這沒有識別在具有相同原點(diǎn) 的三維直角坐標(biāo)系中的參考點(diǎn)271自身的二維位置，但是以這種方式 來定義物體標(biāo)記的投射位置對于于本發(fā)明的很多應(yīng)用是適用的。在所 述例子中，第一功能將物體標(biāo)記圖像370識別為被投射稍微修改后的 圓，而第二功能確定在圖像平面301的正交坐標(biāo)系305、 310中的物體 標(biāo)記圖像370的中心的二維位置。在一些實(shí)施例中，物體標(biāo)記圖像可 能充分接近圓，這是使用圓的方程來識別的。在其他實(shí)施例中，處理 功能115的第一功能識別比投射的球更復(fù)雜的物體標(biāo)記，諸如指尖、 手指甲或套管狀裝置的圖像，而處理功能115的第二功能確定引導(dǎo)物 體的三維位置和定向。處理功能115的第三功能保持從由第一相機(jī)110 生成的連續(xù)視頻圖像的至少一些所獲得的引導(dǎo)物體260的歷史位置(或
方位，當(dāng)利用第二功能確定時；或位置及方位兩者)。處理功能115 的第一、第二和第三功能通過術(shù)語"生成在第一相機(jī)的視野內(nèi)的引導(dǎo) 物體的軌跡"被包括在這里，而"引導(dǎo)物體的軌跡"通常組成引導(dǎo)物 體的三維位置的近期歷史，并且還可以包括在可能為很多秒的時間周 期內(nèi)的引導(dǎo)物體的定向，但是在一些情況中可以組成"引導(dǎo)物體的軌 跡"的更通常定義的子集，例如僅僅是引導(dǎo)物體的當(dāng)前位置。
如下將更詳細(xì)描述的，處理功能可以響應(yīng)于用于跟蹤的坐標(biāo)系中 的引導(dǎo)物體260的軌跡而執(zhí)行修改顯示在顯示器105上的場景的進(jìn)一 步功能。與這個方面相關(guān)的是將引導(dǎo)物體的軌跡從用于跟蹤引導(dǎo)物體 的坐標(biāo)系映射到顯示器105上，該軌跡的映射具有在圖3中示為正方 形320的外周。應(yīng)理解，將引導(dǎo)物體的軌跡映射到顯示器105可能比 圖3中可推斷出的簡單關(guān)系更復(fù)雜，其中，如果顯示器是正方形的， 則如在關(guān)于第一相機(jī)110的坐標(biāo)系中定義的引導(dǎo)物體軌跡的坐標(biāo)和顯 示器的關(guān)系可以是單調(diào)的成比例關(guān)系。容易看到，如果顯示器是矩形 的，則通過在x和y方向上使用不同的比例值，可以將顯示器映射為 所示的正方形。也可以使用其他的映射。例如，可以在x和y方向上 使用公共比例因子來映射矩形顯示器；在這種情況下，對應(yīng)于顯示器 的x和y軸的引導(dǎo)物體260的移動距離將是不同的。
參考圖4，示出根據(jù)本發(fā)明的一些實(shí)施例的手持電子裝置100和 引導(dǎo)物體260的截面圖。參考圖5，示出手持電子裝置100的成像平面 301的平面圖，其包括當(dāng)引導(dǎo)物體260在圖4所示的相對于手持電子裝 置100的位置時由球的表面產(chǎn)生的物體標(biāo)記圖像370。引導(dǎo)物體不一定 處在如圖2或3所示的相對于手持電子裝置100的位置處。圖4和5 還示出具有在第一相機(jī)開孔215的鏡頭的投射中心處的原點(diǎn)的三維坐 標(biāo)系。使用三維坐標(biāo)在這個例子中以三維來定義引導(dǎo)物體260的位置， 該位置也就是球270的中心的位置，并且被識別為Phi((])) 405、 Theta(0) 510以及R 410。 Theta是相對于圖像平面301中的參考線505繞著視 野225的軸230在圖像平面301中的旋轉(zhuǎn)角。Phi是從視野225的軸230
的傾斜角，并且R是從原點(diǎn)到引導(dǎo)物體260的位置(參考點(diǎn)271)的距 離。在圖5中，具有恒定的cj)值(例如30°)的所有位置的軌跡的投影 是圓。應(yīng)理解，物體標(biāo)記圖像370的尺寸隨著到球270的距離R的減 少而增加，此外，球270的圖像從當(dāng)(t)是零度時的圓改變?yōu)闄E圓形，隨 著())的增加該橢圓形變得更加細(xì)長?？梢愿鶕?jù)球270的橢圓圖像的尺寸 諸如橢圓的長軸571的測量以及根據(jù)角度(j)來確定R。可以根據(jù)在圖像 平面301上的主軸571的中心距離軸230與圖像平面301的交點(diǎn)的距 離來確定角度(|)。因此，確定引導(dǎo)物體260的三維位置。但是，進(jìn)一步 從參照圖3-5給出的描述中得知，因?yàn)檫@些例子的物體標(biāo)記是球，所以 可能不能利用所述的測量來確定引導(dǎo)物體260的定向。當(dāng)使用比球更 復(fù)雜的引導(dǎo)物體諸如指甲或套管狀物體時，適用相同的原理但是需要 使用更復(fù)雜的公式。例如，引導(dǎo)物體距離第一相機(jī)開孔的距離與物體 標(biāo)記圖像的尺寸相關(guān)聯(lián)的原理依然是正確的，但是確定物體標(biāo)記圖像 的尺寸可能更加困難，并且可能包括確定引導(dǎo)物體的定向。
可以通過位于引導(dǎo)物體上的6個獨(dú)特可識別的點(diǎn)，來完成通過使 用相機(jī)圖像確定在三維坐標(biāo)系中的引導(dǎo)物體的位置和定向。然而，還 應(yīng)該理解，更簡單的方法經(jīng)常可以提供期望的位置和定向信息。例如， 可能僅僅確定參考圖3-5描述的引導(dǎo)物體260的手柄的定向就足夠滿意 了 (也就是，不分析圍繞手柄的軸的轉(zhuǎn)動量)。此外， 一些理論的模 糊(theoretical ambiguity)是可以接受的，例如在上面的例子中假設(shè)手 柄總是指向遠(yuǎn)離相機(jī)。為了一些用途，可以使用僅僅三維位置而不需 要定向，但是在其他用途中，可以使用僅僅二維位置而不需要定向。 根據(jù)在這里更詳盡描述的本發(fā)明的實(shí)施例，三維位置可能足夠了。在 這些實(shí)施例的一些中，基準(zhǔn)點(diǎn)距離圖像平面的距離可以以與使用在其 他兩個維度中的基準(zhǔn)點(diǎn)的位置的方式完全無關(guān)的方式進(jìn)行使用。
多種技術(shù)可以被用來利用處理功能115協(xié)助引導(dǎo)物體的識別。大 體說來，這些方法的目標(biāo)是提高在引導(dǎo)物體260的某些點(diǎn)或區(qū)域的圖 像相對于圍繞那些點(diǎn)或區(qū)域的圖像之間的亮度對比率以及邊緣銳度，
并使得定義的點(diǎn)位置的確定計(jì)算起來較為簡單。在上述的伸長桿的情 況下，利用在球的中心處的定義點(diǎn)位置，使用球來投射圓形或近似圓 形，圖像基本上與伸長桿的定向無關(guān)(只要手柄的厚度相比于球270
的直徑非常小)。球270可以被涂覆以高度漫反射白色涂層，從而當(dāng)
在多種環(huán)境條件中操作時提供較高的亮度對比率。為了在可能更多的
環(huán)境條件中進(jìn)行操作，球270可以被涂覆以回射反光涂層，并且手持 電子裝置100可以設(shè)有光源120,該光源120具有位于接近第一相機(jī)開 孔215的開孔220。球270可以是光源。在一些實(shí)施例中，圖像處理功 能可以僅僅對物體標(biāo)記圖像的一個光帶(例如藍(lán))起反應(yīng)，其可以由 在物體標(biāo)記中的光源產(chǎn)生或可以選擇性地由物體標(biāo)記反射。對于除了 伸長桿260之外的引導(dǎo)物體，相似的改進(jìn)可以是有幫助的。例如，套 管狀物體可以具有反射白色涂層，或具有特定顏色的指甲拋光的指甲 尤其在較差的照明條件下可以提高檢測可靠性。
當(dāng)有多個引導(dǎo)物體標(biāo)記時，相對于在距離第一相機(jī)110的正常距 離處的視野，尺寸較小的引導(dǎo)物體標(biāo)記可以是特別有利的。引導(dǎo)物體 可以采用適于用在手持電子裝置100的短范圍內(nèi)(如上所述)以及適 于需要的跟蹤信息量的任何形狀。例如，在此以上描述的伸長桿可能 最適用于二維和三維位置信息，而沒有定向信息。添加到伸長桿的手 柄的引導(dǎo)物體標(biāo)記(例如， 一對回射反光帶)，可以允許在很多情況 下相當(dāng)令人滿意的有限定向確定。在需要全部定向和三維位置的情況 下，引導(dǎo)物體可能需要具有一個或多個充分間隔開的引導(dǎo)物體，從而 在正常使用時，在引導(dǎo)物體的所有定向上可以唯一地識別出6個引導(dǎo) 物體。通常，圖像處理功能用來識別引導(dǎo)物體標(biāo)記的圖像以及跟蹤引 導(dǎo)物體的參數(shù)包括已知用于目標(biāo)識別的那些參數(shù)，并且可以包括諸如 邊緣檢測、對比度檢測、形狀檢測等的圖像檢測參數(shù)，其中每個圖像 檢測參數(shù)可以具有閾值和增益設(shè)置，該閾值和增益設(shè)置用來增強(qiáng)目標(biāo) 檢測。 一旦已經(jīng)識別出引導(dǎo)物體標(biāo)記的圖像，可以使用第一組公式來 確定引導(dǎo)物體的位置(也就是，相對于引導(dǎo)物體的主體固定的定義點(diǎn) 的位置)，以及可以使用第二組公式來確定定向。更典型地，第一和
第二組公式是將諸如斜率和邊緣的端部之類的中間值轉(zhuǎn)換為在所選擇 坐標(biāo)系中的標(biāo)記位置和定向的公式。
為了降低處理功能115的復(fù)雜性的目的，期望使用反射引導(dǎo)物體 標(biāo)記。這提供了使得引導(dǎo)物體標(biāo)記看來比圖像中的其他物體更亮的益 處。如果可以充分增加這種相對亮度，則快門速度可以增加到相機(jī)基 本上檢測不到其他物體的程度。當(dāng)減少在圖像的不期望物體的數(shù)量時， 可以使用簡單得多的算法來識別在圖像中的引導(dǎo)物體標(biāo)記。因?yàn)樾枰?計(jì)算更少的結(jié)果，這種復(fù)雜性的降低轉(zhuǎn)化為降低的功耗。因?yàn)榭梢越?低存儲器需求，所以這種復(fù)雜性的降低還降低了處理功能成本，并且 可以選擇更少的專用處理加速器、或者更慢更小的處理器芯。特別地，
反射材料可以是回射反光的而不是更常見的鏡面反射器或Lambertian 反射器，其中，該回射反光材料高效地直接向著光源將光發(fā)射回去， 在該鏡面反射器中以角度a入射的光線被以角度反射(例如在鏡 中)，而該Lambertian反射器以在所有角度上的均勻分布來反射光。 當(dāng)使用回射反光器時，需要在非?？拷鄼C(jī)鏡頭215的地方包括光源 120例如LED，從而使得鏡頭215在由回射反光的引導(dǎo)物體標(biāo)記向著光 源發(fā)射回來的光的圓錐體內(nèi)。在圖6中示出了可以提供三維位置和多 數(shù)正常定向的確定的引導(dǎo)物體的一個實(shí)施例，其是在一端處具有火柴 棍人(stick figure) 605的伸長桿600的圖?；鸩窆魅?05向用戶提供 引導(dǎo)物體的定向的自然指示(natural indication)，并且包括多個回射 反光器610。(可選擇地，回射反光器610可以由發(fā)光部件來代替，其 可以使用不同顏色來簡化對于引導(dǎo)物體標(biāo)記的識別，但是其相比于回 射反光器將增加伸長桿的復(fù)雜性，并且其可能不能在所有環(huán)境照明條 件下都良好工作。)
在其他實(shí)施例中，視野的軸可以被引導(dǎo)從垂直于顯示器離開。例 如，視野的軸可以被引導(dǎo)為使得其典型地當(dāng)手持電子設(shè)備被抓握在用 戶的左手中時指向垂線的右側(cè)。由于到引導(dǎo)物體的背景中除了用戶臉 之外的物體的更長范圍，這可以改進(jìn)在背景中的圖像標(biāo)記的邊緣檢測 和對比率，否則其具有用戶臉。該遠(yuǎn)離用戶臉的視野軸的偏移可能需
要手持電子裝置的左手型式和右手型式，所以備選方案是提供可以被 手動轉(zhuǎn)換(shifted)以提高在多種環(huán)境下的準(zhǔn)確圖像檢測的概率的第一 相機(jī)110。
現(xiàn)在參考圖7，示出根據(jù)本發(fā)明的一些實(shí)施例的顯示表面210的
平面圖。該視圖示出包括字符和圖標(biāo)的場景。在這里使用術(shù)語場景來
表示顯示在顯示器上的隨著時間可能變化的一組信息。例如，如所示 的文本屏幕可能通過添加字符、改變字符或刪除字符、或者例如通過
將圖標(biāo)改變?yōu)榱硪粓D標(biāo)來發(fā)生改變。對于其他用途，場景可以是被呈 現(xiàn)在顯示器105上的視頻圖像的一幀。如上所述，可由處理功能使用 引導(dǎo)物體的軌跡來修改顯示器105上的場景。這些修改包括但是不局 限于在顯示器上的一個或多個連續(xù)場景中移動光標(biāo)物體；在顯示器 上的一個或多個連續(xù)場景中選擇一個或多個場景物體；以及調(diào)節(jié)在顯 示器上的連續(xù)場景的觀察透視(viewing perspective)。光標(biāo)物體705 可以呈現(xiàn)為類似于圖7所示的文本插入標(biāo)記，但是替換地也可以是任 何圖標(biāo)，該圖標(biāo)包括但是不局限于諸如沙漏或加號或箭頭的常見光標(biāo) 圖標(biāo)，這些光標(biāo)圖標(biāo)可以閃爍也可以不閃爍或具有其他類型的變化外 觀。光標(biāo)物體705可以響應(yīng)于二維的引導(dǎo)物體的位置而進(jìn)行移動，并 且可以與其他命令結(jié)合使用，以執(zhí)行常見的光標(biāo)功能，例如選擇一個
或多個字符或圖標(biāo)。命令可以是用于影響光標(biāo)物體的動作、使用或外 觀的任何命令，包括但是不局限于那些與鼠標(biāo)鍵相關(guān)聯(lián)的命令，例如 點(diǎn)擊左鍵、點(diǎn)擊右鍵等。命令或者可以是影響與光標(biāo)無關(guān)的功能的命 令。這些功能的例子包括但是不局限于音量水平變化和信道選擇。可 以使用用于手持電子裝置的任何輸入傳感器來輸入命令，該輸入傳感 器例如一個或多個按壓或滑動開關(guān)、旋轉(zhuǎn)撥號盤、小鍵盤開關(guān)(keypad switch)、與命令識別功能耦合的麥克風(fēng)以及在顯示器表面210或其他 位置中的接觸式傳感器。命令傳感技術(shù)可以是由圖像處理功能進(jìn)行的 對于視頻圖像中的引導(dǎo)物體260的獨(dú)特軌跡的檢測，其被保存用于特 定應(yīng)用中的命令，例如遠(yuǎn)離顯示器105的引導(dǎo)物體的非常快的移動。
根據(jù)本發(fā)明的一些實(shí)施例，如下更詳細(xì)所述，在最佳定義引導(dǎo)物體距 離手持電子裝置的距離的一個維度上，以特定方式不同的引導(dǎo)物體的 連續(xù)位置的檢測，被用來啟動一個命令或多個命令之一。命令傳感技 術(shù)可以包括對于引導(dǎo)物體標(biāo)記的獨(dú)特圖案的檢測。例如，通常不被激 勵的物體標(biāo)記可以響應(yīng)于在用戶的部分上的操作而發(fā)光，該操作例如 按下在引導(dǎo)物體上的按鈕。可選擇地或附加的技術(shù)是響應(yīng)于用戶的手 行為而改變物體標(biāo)記的顏色或亮度。
命令可以啟動繪圖功能，該繪圖功能響應(yīng)于光標(biāo)的動作而繪制場 景物體，其中，光標(biāo)的動作是響應(yīng)于引導(dǎo)物體的動作的。這種繪制可
以采用任何類型，例如創(chuàng)建新圖片，或者采用在從另一源獲得的場景 上的覆蓋手畫線的方式。作為一個例子，另一計(jì)算裝置的用戶可以發(fā) 送圖片到手持裝置100，并且手持裝置的用戶可以通過調(diào)用繪圖命令并 使用引導(dǎo)物體圍繞第一場景物體在場景之上繪制第二場景物體，來識 別第一場景物體(例如在人群中的一個人的圖片)。然后，手持裝置 100的用戶可以將標(biāo)記后的圖片返回到計(jì)算裝置(例如，通過蜂窩消 息)，用于呈現(xiàn)給計(jì)算裝置的用戶。
雖然上面已經(jīng)描述了二維位置跟蹤的例子，二維位置和定向跟蹤
也可以是有用的，例如用于僅僅呈現(xiàn)為臺和隊(duì)列桿(queue stick)的平 面圖的簡單的臺球游戲。當(dāng)施加利用在基本上與用于二維位置的兩個 維度正交的維度中的引導(dǎo)物體260的移動所獨(dú)立生成的命令時，該維 度是基本上識別距離手持電子裝置100的距離的維度，則不使用在手 持電子裝置上的任何鍵就可以玩這個游戲。
現(xiàn)在參考圖8，示出根據(jù)本發(fā)明的一些實(shí)施例的類似于圖2所示 的手持電子裝置100的透視圖。參照手持電子裝置定義虛擬表面805 和SIO，在這個例子中該虛擬表面805和810是虛擬平面(planar surface)，用于由處理功能115使用來基本上基于引導(dǎo)物體260距離手 持裝置100的距離而生成命令事件。在一些實(shí)施例中，可以僅僅使用
一個虛擬平面。
參考圖9，示出根據(jù)本發(fā)明的一些實(shí)施例的手持電子裝置900的
截面圖。手持電子裝置900包括具有視野軸905和由線910、 915所示 的視野外周的相機(jī)，此外的與手持電子裝置100相同地操作。兩個虛 擬表面920、 925示出為不是平面的，但是具有和圖8所示的虛擬表面 相同的功能；也就是，它們是參照手持電子裝置定義的，并由處理功 能115用來基本上基于引導(dǎo)物體260距離手持裝置100的距離而生成 命令事件。在這個例子中，因?yàn)楫?dāng)打開手持電子裝置900而由引導(dǎo)物 體使用時，該手持電子裝置900向用戶呈現(xiàn)兩個平面表面901、 902， 而不是圖2所示的一個平面，所以用戶對于距離手持電子裝置的特定 距離的感知通過使用非平面虛擬表面920、 925被更好的匹配。因?yàn)殡?子裝置900的兩個平面901、 902成小于180度的角，可以由彎曲的虛 擬表面920、 925比平面更好地近似用戶對于距離手持單元的均勻距離 的感知。通常，本發(fā)明的實(shí)施例可以使用允許用戶可接受地與手持電 子裝置IOO交互的任何三維表面或多個三維表面。
參考圖10，示出根據(jù)本發(fā)明的一些實(shí)施例的手持裝置100、 900 中使用的獨(dú)特方法的步驟。在步驟1005，在顯示器105上呈現(xiàn)信息。 在步驟1010，處理由相機(jī)捕捉的視頻圖像以跟蹤在相機(jī)的視野內(nèi)的引 導(dǎo)物體諸如引導(dǎo)物體260 (圖2)的三維位置，并且還可以跟蹤引導(dǎo)物 體的定向。在步驟1015，生成引導(dǎo)物體的二維位置，其中，該二維位 置被用來修改在顯示器例如顯示器105 (圖l)上的場景中的對應(yīng)位置。 "控制在顯示器上的場景中的對應(yīng)位置"表示可以影響顯示器的一些 可視方面(visual aspect)，諸如響應(yīng)于基本上在圖像平面例如圖像平 面301 (圖3)中的兩個維度上的對于引導(dǎo)物體的跟蹤來布置的光標(biāo)或 其他圖標(biāo)。此外，"控制在顯示器上的場景中的對應(yīng)位置"不需要是 準(zhǔn)確的一對一的對應(yīng)。在一個例子中，當(dāng)光標(biāo)已經(jīng)達(dá)到顯示器上的位 置并且二維位置改變了少于某個閾值(在引導(dǎo)物體基本上在第三維度 的方向上移動的同時)，該方法將凍結(jié)在場景中的該位置。在步驟1020，
響應(yīng)于引導(dǎo)裝置的當(dāng)前位置與關(guān)于手持電子裝置定義的虛擬表面的比 較，來控制手持電子裝置100、 900的功能。
參考圖11，流程圖示出本發(fā)明的一些實(shí)施例的步驟1020的細(xì)節(jié)。 在這些實(shí)施例中，僅僅定義一個虛擬表面，例如參照手持電子裝置100、 卯0來定義圖8的表面S05或者圖9的表面920。當(dāng)由處理功能跟蹤的 引導(dǎo)物體的位置橫穿虛擬表面，也就是，在表面上的一點(diǎn)處從表面的 一側(cè)穿到另一側(cè)時，手持裝置的處理功能在步驟1105生成事件。在這 些實(shí)施例的一些中，處理功能還生成虛擬表面的橫穿方向。通過使用 以這些形式(利用或不利用方向指示)之一來生成的事件，處理功能 可以生成基本上任何傳統(tǒng)單鼠標(biāo)鍵事件的等效。處理功能可以以基本 上同時的方式使用引導(dǎo)裝置的二維位置來控制在顯示器上的對應(yīng)位 置，而不管引導(dǎo)物體在(單個)虛擬表面的哪側(cè)上。
參考圖12，流程圖示出本發(fā)明的一些實(shí)施例的步驟1020的細(xì)節(jié)。 在這些實(shí)施例中，定義至少兩個表面，例如圖S的表面805、 810以及 圖9的表面920、 925。使用圖9的例子，利用兩個表面920、 925定義 三個區(qū)域。當(dāng)由處理功能跟蹤的引導(dǎo)物體的位置處于包圍比虛擬表面 925距離手持電子裝置100、 900更遠(yuǎn)的那些位置的區(qū)域中時，手持裝 置的處理功能在步驟1205通過生成重復(fù)的第一事件來控制功能。當(dāng)跟 蹤的引導(dǎo)物體的位置處于包圍比虛擬表面920更接近手持電子裝置 100、 900的那些位置的區(qū)域中時，處理功能在步驟1205生成重復(fù)的第 二事件。當(dāng)引導(dǎo)物體處在虛擬表面920和925之間時，處理功能可以 僅僅使用引導(dǎo)裝置的二維位置來控制在顯示器上的對應(yīng)位置，但是當(dāng) 引導(dǎo)裝置處在其他兩個區(qū)域之一中時，處理功能可以在產(chǎn)生重復(fù)的事 件的同時，基本上同時地使用引導(dǎo)裝置的二維位置來控制在顯示器上 的對應(yīng)位置。在這些實(shí)施例的一些例子中，第一事件可以被用來逐漸 減少音量控制或降低巻動控制(scroll control)，而第二事件可以被分 別用來逐漸地增加音量控制或升高巻動控制。
步驟1205的更通常的描述可以是對于多個區(qū)域中的至少一個 (例如在上個例子中的三個區(qū)域中的兩個)，根據(jù)引導(dǎo)物體處在該多 個區(qū)域的至少一個的哪個中來控制功能，并且其中，由參照手持電子 裝置定義的至少兩個虛擬表面來定義該多個區(qū)域(在上個例子中為三 個)。每個區(qū)域具有包括多個虛擬表面的至少一個的邊界。
在對于其中使用多個區(qū)域的至少一個來控制功能的實(shí)施例的擴(kuò)展 中，可以在控制功能的(多個)區(qū)域中定義分區(qū)，以增加在區(qū)域中定 義的控制的模式或狀態(tài)的數(shù)量。當(dāng)參照手持電子裝置僅僅定義一個虛 擬表面，結(jié)果在由虛擬表面定義的全部兩個區(qū)域中僅僅一個區(qū)域被用 于控制功能時，可以使用這種方法。當(dāng)然，可以通過定義多于一個的 虛擬表面來定義和使用控制功能的兩個或多個這樣的區(qū)域。在這些情 況下，"該功能"可以包括多個子功能，每個子功能可以方便地與一 組分區(qū)或區(qū)域相關(guān)聯(lián)。在一些情況下，子功能可以被描述為分開的功
在一個或多個區(qū)域中定義分區(qū)的實(shí)施例中，分區(qū)可以是區(qū)域的相 互不相容(exclusive)的部分。在一個或多個區(qū)域中定義分區(qū)的實(shí)施例 中，處理功能使用分區(qū)來控制功能的模式或狀態(tài)，并且不同時地使用 用于控制顯示器的對應(yīng)位置的引導(dǎo)物體的二維位置。在具有多于一個 的虛擬表面的那些實(shí)施例中，應(yīng)理解，這些表面被定義為不與相機(jī)的 視野相交。在一些實(shí)施例中，區(qū)域或分區(qū)邊界可以隨著時間而變化。 例如，虛擬表面可以響應(yīng)于相對于彼此的手持裝置的部件的定向的改 變而進(jìn)行變化，或者在環(huán)境條件中的變化。
在使用分區(qū)的例子中，包括比虛擬表面810 (圖8)距離手持電子 裝置IOO (圖8)更遠(yuǎn)的位置的區(qū)域可以被分為四個象限，對于用戶這 些象限可以描述為右上象限(分區(qū)I)、右下象限(分區(qū)II)、左下象 限(分區(qū)III)和左上象限(分區(qū)IV)。此外，包括比虛擬表面805 (圖 8)更靠近手持電子裝置800 (圖8)的位置的區(qū)域可以被分為兩半，
這兩半對于用戶可以被描述為左一半(分區(qū)V)和右下象限(分區(qū)VI)。 分區(qū)I和II可以被用來控制音量設(shè)置子功能，分區(qū)II和IV可以被用來 控制信道設(shè)置子功能，以及分區(qū)V和VI可以被用來控制手持裝置的設(shè) 置的功能的滾動子功能。
其中使用一個或多個虛擬表面來控制功能的手持電子裝置的模式 不需要是該手持電子裝置的永久模式。例如，對于手持電子裝置的物 理控制，或者對另一個例子來說的對于區(qū)域的分區(qū)的物理控制，可以 將手持電子裝置的操作模式改變?yōu)椴煌哪Ｊ健２煌牟僮髂Ｊ娇梢?改變虛擬表面的數(shù)量(例如從0到l或2)、分區(qū)的數(shù)量，并且可以相 應(yīng)地調(diào)用由起到控制作用的區(qū)域所控制的不同功能。
應(yīng)理解，呈現(xiàn)在顯示器105上的場景可以是已經(jīng)被存儲在存儲器 中、或從存儲器產(chǎn)生的、或由手持裝置100接收到的場景。在一些實(shí) 施例中，如現(xiàn)在公知的，手持裝置100可以具有第二內(nèi)置相機(jī)，用于 捕捉靜止或視頻圖像，或者第一相機(jī)可以用于捕捉作為場景呈現(xiàn)在顯 示器上的靜止或視頻圖像，該場景用于使用引導(dǎo)物體進(jìn)行修改。
應(yīng)理解，手持電子裝置的處理功能15和包括功能105、 110、 120、 125、 130、 135的其他功能的一個或多個的部分，可以包括一個或多個 傳統(tǒng)處理器以及對應(yīng)的唯一存儲的程序指令，這些程序指令控制該一 個或多個處理器以執(zhí)行這里所述的一些或所有功能；這樣，部分處理 功能115以及部分其他功能105、 110、 120、 125、 130、 135可以被解 釋為執(zhí)行這些功能的方法的步驟?？蛇x擇地，這些功能115以及部分 功能105、 110、 120、 125、 130、 135可以由沒有存儲程序指令的狀態(tài) 機(jī)來執(zhí)行，其中，功能115、 105、 110、 120、 125、 130、 135的每個 功能或一些部分的一些組合可以被實(shí)現(xiàn)為定制邏輯(custom logic)。 當(dāng)然，可以使用兩種方法的組合。因此，在這里已經(jīng)描述了用于手持 電子裝置的方法和設(shè)備。
在之前的說明書中，已經(jīng)參考特定實(shí)施例描述了本發(fā)明及其益處 和優(yōu)點(diǎn)。然而，本領(lǐng)域技術(shù)人員將知道，可以在不偏離在以下的權(quán)利 要求中闡明的本發(fā)明的范圍的情況下，可以進(jìn)行多種修改和變化。因 此，說明和附圖都被認(rèn)為是描述性的而不是限制性的，并且所有這些 修改都意圖被包括在本發(fā)明的范圍內(nèi)。益處、優(yōu)點(diǎn)、對于問題的解決 方案、以及可能導(dǎo)致任何益處、優(yōu)點(diǎn)或解決方案發(fā)生或變得更加顯著 的任何因素不被解釋為任何權(quán)利要求或所有權(quán)利要求的關(guān)鍵、必需或 實(shí)質(zhì)特征或因素。
如這里的使用，術(shù)語"包括"、"包括(comprising)"或其任何 其他變體意圖覆蓋非排他性的包括，例如，包括一系列因素的過程、 方法、物品或設(shè)備不僅僅包括那些因素而是還包括其他沒有明顯列出 或這些過程、方法、物品或設(shè)備固有的其他因素。
如這里使用的"組"表示非空的組(例如對于這里定義的組來說， 每個組包括至少一個部件)。如這里使用的術(shù)語"另外"被定義為至 少第二個或更多。如這里使用的術(shù)語"包括"和/或"具有"被定義為 包括。如這里參考光電技術(shù)使用的術(shù)語"耦合"被定義為連接，雖然 不一定是直接連接，并且也不一定是機(jī)械連接。如這里使用的術(shù)語"程 序"被定義為設(shè)計(jì)用于在計(jì)算機(jī)上執(zhí)行的指令序列。"程序"或"計(jì) 算機(jī)程序"可以包括例程、功能、過程、對象方法、對象實(shí)現(xiàn)、可執(zhí) 行應(yīng)用程序、小應(yīng)用程序、小服務(wù)程序、源代碼、目標(biāo)代碼、設(shè)計(jì)用 于在計(jì)算機(jī)系統(tǒng)上執(zhí)行的指令的共享庫/動態(tài)負(fù)載庫和/或其他序列。進(jìn) 一步知道，關(guān)系術(shù)語的使用，如果有的話，比如第一和第二，頂部和 底部等等，僅僅被用來將一個實(shí)體或行為從其他的實(shí)體或行為區(qū)分開， 而不必然要求或意味著在這些實(shí)體或行為之間存在任何實(shí)際的這些關(guān) 系或順序。
權(quán)利要求
1.一種手持電子裝置的用戶接口控制器，包括顯示器，生成視頻圖像的相機(jī)；以及耦合到所述顯示器和所述相機(jī)的處理功能，所述處理功能在所述顯示器上呈現(xiàn)信息，處理所述視頻圖像，以生成在所述相機(jī)的視野內(nèi)的引導(dǎo)物體的位置的三維軌跡，生成所述引導(dǎo)物體的二維位置，所述二維位置被用來控制在所述顯示器上的場景中的對應(yīng)位置，以及響應(yīng)于所述引導(dǎo)物體的所述軌跡與關(guān)于所述手持電子裝置而定義的虛擬表面的比較，來控制所述手持電子裝置的功能。
2. 根據(jù)權(quán)利要求1所述的用戶接口控制器，進(jìn)一步包括當(dāng)所述 比較的結(jié)果是所述軌跡橫穿所述虛擬表面時生成事件，并且基本上同 時地生成所述二維位置。
3. 根據(jù)權(quán)利要求1所述的手持電子裝置的用戶接口控制器，其中， 所述顯示器具有小于100平方厘米的可視面積。
4. 根據(jù)權(quán)利要求1所述的手持電子裝置的用戶接口控制器，其中， 所述相機(jī)在通常使用所預(yù)期的照明條件下具有至少10厘米的視野范圍 深度。
5. 根據(jù)權(quán)利要求1所述的手持電子裝置的用戶接口控制器，其中， 所述相機(jī)的所述視野的軸被定向?yàn)榛旧洗怪庇谒鲲@示器的方向。
6. 根據(jù)權(quán)利要求1所述的手持電子裝置的用戶接口控制器，其中， 所述視野的軸被定向?yàn)閺牟僮髡叩哪樀念A(yù)期方向偏移的方向。
7. 根據(jù)權(quán)利要求1所述的手持電子裝置的用戶接口控制器，其中， 由所述手持電子裝置的操作者來移動所述相機(jī)的所述視野的軸。
8. 根據(jù)權(quán)利要求l所述的手持電子裝置的用戶接口控制器，其中， 處理所述視頻圖像以生成所述引導(dǎo)物體的位置軌跡的所述處理功能響 應(yīng)于一個或多個引導(dǎo)物體標(biāo)記的圖像，該引導(dǎo)物體標(biāo)記的圖像具有以 下一個或多個特征每個物體標(biāo)記圖像是包括至少一個定義的點(diǎn)位置的定義形狀的投射，每個物體標(biāo)記圖像相對于所述視野在尺寸上較小， 每個物體標(biāo)記圖像相比于即時環(huán)境具有較高的亮度對比率，以及 每個物體標(biāo)記圖像主要包括在特定光帶中的光。
9. 根據(jù)權(quán)利要求l所述的用戶接口控制器，其中，對于多個區(qū)域 的至少一個，根據(jù)所述引導(dǎo)物體處于所述多個區(qū)域的至少一個的哪一 個中來控制所述功能，并且其中，利用多個虛擬表面來定義所述多個 區(qū)域，該多個虛擬表面是參照所述手持電子裝置來定義的。
10. —種在手持電子裝置中使用的用戶接口方法，該手持電子裝 置具有生成視頻圖像的相機(jī)并且具有顯示器，所述用戶接口方法包括在所述顯示器上呈現(xiàn)信息；處理所述視頻圖像，以生成在所述相機(jī)的視野內(nèi)的引導(dǎo)物體的位 置的三維軌跡；生成所述引導(dǎo)物體的二維位置，所述二維位置被用來控制在所述 顯示器上的場景中的對應(yīng)位置；以及響應(yīng)于所述引導(dǎo)裝置的所述軌跡與關(guān)于所述手持電子裝置定義的 虛擬表面的比較，來控制所述手持電子裝置的功能。
全文摘要
一種手持電子裝置(100)的用戶接口控制器，其具有生成視頻圖像的相機(jī)，在該手持電子裝置的顯示器(105)上呈現(xiàn)(1005)信息，處理(1010)該視頻圖像以跟蹤在相機(jī)的視野(225)內(nèi)的引導(dǎo)物體(260)的三維位置，生成(1015)用于控制在顯示器上的場景中的對應(yīng)位置的引導(dǎo)物體的二維位置，并響應(yīng)于引導(dǎo)裝置的軌跡與關(guān)于手持電子裝置定義的虛擬表面(805、810、920、925)的比較來控制(1020)手持電子裝置的功能。
文檔編號G09G5/00GK101185114SQ200680018224
公開日2008年5月21日 申請日期2006年4月14日 優(yōu)先權(quán)日2005年5月27日
發(fā)明者凱文·W·杰利, 布魯斯·A·奧古斯丁, 拉塞爾·D·馬雷亞興, 詹姆斯·E·克倫肖, 邁克爾·S·希姆斯 申請人:摩托羅拉公司