專利名稱：用于提供對(duì)象信息的裝置和方法
技術(shù)領(lǐng)域：
本發(fā)明涉及增強(qiáng)現(xiàn)實(shí)(augumented reality :AR)，并且更具體地，涉及用于提供對(duì)象的屬性信息的裝置和方法。
背景技術(shù)：
本申請(qǐng)要求2010年8月20日提交的申請(qǐng)?zhí)枮?0-2010-0080781的韓國(guó)專利申請(qǐng)的優(yōu)先權(quán)，在此通過(guò)引證的方式將上述申請(qǐng)并入于此。AR是一種通過(guò)將用戶觀看到的真實(shí)世界與具有附加信息的虛擬世界進(jìn)行混合而獲得的虛擬現(xiàn)實(shí)。與提供虛擬空間和虛擬對(duì)象的顯示的虛擬現(xiàn)實(shí)(VR)不同地，AR通過(guò)向真實(shí)世界添加虛擬對(duì)象而提供附加信息。也就是說(shuō)，與僅利用虛擬世界獲取的VR不同地，AR 是通過(guò)將虛擬對(duì)象與真實(shí)世界進(jìn)行混合而獲得的，由此向用戶提供帶有附加信息的現(xiàn)實(shí)的圖像。由于移動(dòng)設(shè)備(諸如，移動(dòng)電話、個(gè)人數(shù)字助理(PDA)、超便攜移動(dòng)個(gè)人電腦(UMPC) 等)和無(wú)線網(wǎng)絡(luò)裝置的計(jì)算能力的發(fā)展，各種類型的AR業(yè)務(wù)已經(jīng)變得可用。作為一個(gè)示例，移動(dòng)電話的相機(jī)拍攝的真實(shí)世界的對(duì)象和與該對(duì)象相關(guān)的屬性信息被處理為虛擬信息，該虛擬信息與真實(shí)世界中的另一個(gè)對(duì)象合并并且被一起顯示。在這樣的傳統(tǒng)AR業(yè)務(wù)中，如果顯示有多個(gè)對(duì)象，則無(wú)法有效地提供每個(gè)對(duì)象的屬性信息。也就是說(shuō)，如果在移動(dòng)電話的顯示器的預(yù)定區(qū)域中以某對(duì)象為焦點(diǎn)，則AR業(yè)務(wù)顯示該對(duì)象的屬性信息，或者與用戶的關(guān)注無(wú)關(guān)地顯示對(duì)象的屬性信息。

發(fā)明內(nèi)容
在一個(gè)方面中，提供了一種用于提供對(duì)象信息的裝置和方法，該裝置和方法能夠根據(jù)基于顯示在屏幕上的對(duì)象的狀態(tài)的級(jí)別而提供對(duì)象的屬性信息。本發(fā)明的其它特征將在以下描述中進(jìn)行闡述，并且部分將從該描述而變得明了， 或者可以通過(guò)對(duì)本發(fā)明的實(shí)踐而得知?！N示例性實(shí)施方式提供了一種顯示從圖像中提取出的對(duì)象的裝置，該裝置包括與對(duì)象服務(wù)器通信的通信單元，所述對(duì)象服務(wù)器存儲(chǔ)對(duì)象和對(duì)應(yīng)的屬性信息；識(shí)別所述對(duì)象的對(duì)象識(shí)別單元；控制單元，其控制與所識(shí)別的對(duì)象一起顯示屬性信息，在所述對(duì)象服務(wù)器中存儲(chǔ)有與所識(shí)別對(duì)象的預(yù)定加權(quán)相對(duì)應(yīng)的數(shù)量的屬性信息。一種示例性實(shí)施方式提供了一種用于在裝置上顯示從圖像中提取出的對(duì)象和關(guān)于該對(duì)象的屬性信息的方法，該方法包括從所述圖像中識(shí)別所述對(duì)象；基于加權(quán)信息存儲(chǔ)單元而確定與所識(shí)別的對(duì)象相關(guān)的所顯示的屬性信息的數(shù)量，所述加權(quán)信息存儲(chǔ)單元存儲(chǔ)用于確定所顯示的屬性信息的數(shù)量的加權(quán)條件值；和從存儲(chǔ)有多個(gè)對(duì)象和關(guān)于所述多個(gè)對(duì)象的屬性信息的對(duì)象服務(wù)器接收所確定的數(shù)量的屬性信息；和在顯示單元上與所識(shí)別的對(duì)象一起顯示所述屬性信息應(yīng)該理解，前面的一般描述和下面的具體描述都是示例性和說(shuō)明性的，并且旨在對(duì)要求保護(hù)的本發(fā)明提供進(jìn)一步說(shuō)明。


附圖被包括進(jìn)來(lái)以提供對(duì)本發(fā)明的進(jìn)一步的理解，并且被并入而構(gòu)成本申請(qǐng)的一部分，附圖示出了本發(fā)明的實(shí)施方式，并與說(shuō)明書(shū)一起用于解釋本發(fā)明的原理。在附圖中圖1是示出根據(jù)本發(fā)明的示例性實(shí)施方式的裝置的示例的框圖；圖2是示出根據(jù)本發(fā)明的示例性實(shí)施方式的裝置的顯示器的圖；圖3是示出根據(jù)本發(fā)明的示例性實(shí)施方式的裝置的顯示器的圖；圖4是示出根據(jù)本發(fā)明的示例性實(shí)施方式的顯示屬性信息的裝置的顯示器的圖；圖5是示出了根據(jù)本發(fā)明的示例性實(shí)施方式的用于顯示屬性信息的方法的示例的流程圖。
具體實(shí)施例方式以下參照附圖對(duì)本發(fā)明進(jìn)行更充分地描述，附圖中示出了本發(fā)明的實(shí)施方式。然而，本發(fā)明可以由許多不同的形式實(shí)現(xiàn)并且不應(yīng)被理解為限于在此闡述的實(shí)施方式。而是， 提供這些實(shí)施方式使本公開(kāi)詳盡，并且將向本領(lǐng)域普通技術(shù)人員充分地傳達(dá)本發(fā)明的范圍。在附圖中，為了清楚起見(jiàn)，可能放大了層和區(qū)域的尺寸和相對(duì)尺寸。附圖中相似的附圖標(biāo)記表示相似的元件。應(yīng)當(dāng)理解，當(dāng)提到元件或者層“在”另一個(gè)元件或?qū)印吧稀被蛘吲c另一個(gè)元件或?qū)?“連接”時(shí)，可以是直接在另一個(gè)元件或?qū)由匣蛘咧苯优c另一個(gè)元件或?qū)舆B接，或者可以存在插入元件或?qū)?。與之不同地，當(dāng)提到元件或者層“直接在”另一個(gè)元件或?qū)印吧稀被蛘吲c另一個(gè)元件或?qū)印爸苯舆B接”時(shí)，則不存在存在插入元件或?qū)?。圖1是示出根據(jù)本發(fā)明的示例性實(shí)施方式的裝置的示例的框圖。如圖1所示，用于提供對(duì)象信息(在顯示的各個(gè)階段)的裝置包括通信單元100、 對(duì)象識(shí)別單元110、控制單元120、加權(quán)信息存儲(chǔ)單元130和顯示單元140。該裝置可以是諸如移動(dòng)電話、平板計(jì)算機(jī)等的移動(dòng)設(shè)備或者固定終端。通信單元100例如通過(guò)無(wú)線或者有線網(wǎng)絡(luò)與對(duì)象服務(wù)器(未示出)通信。該裝置可以向?qū)ο蠓?wù)器發(fā)送圖像的對(duì)象，該對(duì)象為圖像中的諸如建筑或者標(biāo)志的區(qū)別項(xiàng)。該圖像通過(guò)顯示單元140顯示，并且可以與對(duì)象屬性信息(可以包括對(duì)應(yīng)對(duì)象的狀態(tài))一同顯示。該裝置通過(guò)通信單元100從對(duì)象服務(wù)器接收與該對(duì)象的狀態(tài)(諸如其在圖像中的位置)對(duì)應(yīng)的屬性信息。對(duì)象服務(wù)器存儲(chǔ)多個(gè)對(duì)象的圖像以及基于對(duì)象相對(duì)于圖像或者裝置的狀態(tài)的對(duì)應(yīng)屬性信息。對(duì)象識(shí)別單元110從圖像中提取并且識(shí)別對(duì)象，該圖像可通過(guò)內(nèi)置于該裝置中的相機(jī)來(lái)輸入。然而，可以使用其他圖像源，諸如從外部相機(jī)接收到的圖像或者存儲(chǔ)在裝置內(nèi)或者裝置外部的圖像文件。該裝置基于對(duì)象相對(duì)于圖像的狀態(tài)、通過(guò)通信單元100從對(duì)象服務(wù)器接收屬性信息。控制單元120可以基于所識(shí)別的對(duì)象以及基于加權(quán)條件的屬性信息執(zhí)行控制操作。可以使用各種加權(quán)條件，以下討論幾種示例?？刂茊卧?20可以執(zhí)行控制操作以將屬性信息與所識(shí)別的對(duì)象進(jìn)行混合，并且通過(guò)顯示單元140在該裝置上顯示至少包含有所識(shí)別的對(duì)象和所識(shí)別的對(duì)象的屬性信息的圖像?？刂茊卧?20可以與加權(quán)值處理單元121和合并單元1 相結(jié)合地執(zhí)行該操作。加權(quán)值處理單元121確定與正在顯示的對(duì)象的屬性信息相關(guān)聯(lián)的加權(quán)，并且存儲(chǔ)用于確定關(guān)于多個(gè)對(duì)象的屬性信息的加權(quán)條件值。因此，加權(quán)值處理單元121通過(guò)使用存儲(chǔ)在加權(quán)信息存儲(chǔ)單元130中的加權(quán)條件值，而確定正在顯示的對(duì)象的屬性信息。因此，關(guān)于對(duì)象的屬性信息表示用于確定要顯示的對(duì)象的開(kāi)放(open)屬性信息的范圍的信息。在加權(quán)值處理單元121確定了對(duì)象的屬性信息之后，合并單元1 基于所確定的屬性信息的級(jí)別從對(duì)象服務(wù)器接收屬性信息，并且將所接收到的屬性信息與對(duì)應(yīng)的對(duì)象進(jìn)行混合，以在顯示單元140上顯示兩條信息。加權(quán)值處理單元121可以通過(guò)基于對(duì)象尺寸的加權(quán)單元122確定顯示對(duì)象的屬性信息?；趯?duì)象尺寸的加權(quán)單元122確定所識(shí)別對(duì)象的尺寸，然后基于所識(shí)別對(duì)象的尺寸來(lái)分配屬性信息。該尺寸可以取決于裝置和對(duì)象之間的距離，并且這樣，可以通過(guò)使用與尺寸相關(guān)的加權(quán)條件值而確定與該對(duì)象相關(guān)聯(lián)的屬性信息。正在顯示的所識(shí)別對(duì)象的面積可以取決于對(duì)象與裝置之間的距離。因此，基于對(duì)象尺寸的加權(quán)單元122確定與所顯示的較小對(duì)象相關(guān)聯(lián)的屬性信息的范圍更簡(jiǎn)要，而所顯示的較大對(duì)象具有更具體的將顯示的屬性信息，并且可以具有包含更多信息的屬性信息。因此，該裝置可以提供與顯示器中的對(duì)象尺寸對(duì)應(yīng)的多種數(shù)量的屬性信息。雖然圖1示出加權(quán)值處理單元121包括元件122、123、124、 125、1沈、127和128中的每一個(gè)，但是并不限于此，例如加權(quán)值處理單元121可以包括一個(gè)或者更多個(gè)這些元件。圖2是示出了根據(jù)本發(fā)明的示例性實(shí)施方式的裝置的顯示器的圖。如圖2所示，如果用戶指定了將由與裝置相關(guān)聯(lián)的相機(jī)拍照的區(qū)域，則由該相機(jī)來(lái)拍取該區(qū)域的圖像。該裝置從由相機(jī)獲得的圖像中識(shí)別與對(duì)象對(duì)應(yīng)的建筑1210和建筑 2230。基于對(duì)象尺寸的加權(quán)單元122可以基于正在顯示的建筑1210和建筑2230的尺寸來(lái)確定建筑1210和建筑2230的屬性信息。也就是說(shuō)，該裝置根據(jù)存儲(chǔ)在加權(quán)信息存儲(chǔ)單元 130中的與對(duì)象的尺寸相關(guān)的加權(quán)條件值，來(lái)確定與建筑1210和建筑2230的尺寸對(duì)應(yīng)的建筑1210和建筑2230的屬性信息。更具體地說(shuō)，因?yàn)榻ㄖ?230比建筑1210離該裝置更遠(yuǎn)， 所以正在顯示的建筑2230的面積比建筑建筑1210的面積小。因此，該裝置將建筑2230的屬性信息確定為“基本級(jí)”，并且提供建筑2230的基本屬性信息。例如，基本屬性信息可以是建筑2230的名稱。這樣，在這種情況下，顯示器可以與表示建筑名稱的標(biāo)簽一同顯示建筑2230。因?yàn)榻ㄖ?210比建筑2230離該裝置更近，所以所顯示的建筑1210的面積比建筑 2230的面積大。因此，該裝置將建筑1210的屬性信息確定為“具體級(jí)”，并且提供具體的屬性信息。具體的屬性信息可以包括建筑1210的名稱和具體信息。這樣，在這種情況下，顯示器可以與表示建筑名稱和具體屬性信息的標(biāo)簽一起顯示建筑1210。不同的信息組合可以預(yù)設(shè)于對(duì)象服務(wù)器中，以基于對(duì)象的多種定位和尺寸而被顯示。根據(jù)另一個(gè)示例，加權(quán)值處理單元121可以根據(jù)基于聚焦的加權(quán)單元123確定正在顯示的對(duì)象的屬性信息?；诰劢沟募訖?quán)單元123通過(guò)使用存儲(chǔ)在加權(quán)信息存儲(chǔ)單元 130中的與屏幕聚焦相關(guān)的加權(quán)條件值，基于對(duì)象的顯示點(diǎn)與顯示器中心點(diǎn)之間的距離差確定該對(duì)象的屬性信息。也就是說(shuō)，如果正在顯示的對(duì)象向顯示器的中心點(diǎn)移動(dòng)地更近，則基于聚焦的加權(quán)單元123確定使用該對(duì)象的具體屬性信息，并且如果正在顯示的對(duì)象離顯示器的中心點(diǎn)移動(dòng)地更遠(yuǎn)，則基于聚焦的加權(quán)單元123確定使用該對(duì)象的簡(jiǎn)要屬性信息。 以這種方式，該裝置基于對(duì)象的顯示點(diǎn)與顯示器的中心點(diǎn)之間的距離差，提供與對(duì)象對(duì)應(yīng)的簡(jiǎn)要屬性信息或者具體屬性信息。
圖3是示出了根據(jù)本發(fā)明的示例性實(shí)施方式的裝置的顯示器的圖。如圖3所示，如果用戶利用相機(jī)拍攝了圖像，并且將該圖像提供給裝置，則對(duì)象識(shí)別單元110可以從該圖像中提取并識(shí)別與對(duì)象對(duì)應(yīng)的建筑1310和建筑2330。該裝置通過(guò)基于聚焦的加權(quán)單元123取得顯示建筑1310和建筑2330的點(diǎn)。該裝置取得顯示建筑1310 和建筑2330的點(diǎn)相對(duì)于顯示器的中心點(diǎn)的距離信息?；诰劢沟募訖?quán)單元123基于正顯示在屏幕上的建筑1310和建筑2330的點(diǎn)相對(duì)于屏幕的中心點(diǎn)的距離，來(lái)確定與建筑1310 和建筑2330相關(guān)的屬性信息。這樣，因?yàn)榻ㄖ?310比建筑2330離屏幕的中心點(diǎn)更近，所以基于聚焦的加權(quán)單元123確定建筑1310的屬性信息為“具體級(jí)”，并且提供將與對(duì)應(yīng)的對(duì)象一同顯示的具體屬性信息，并且基于聚焦的加權(quán)單元123確定建筑2330的屬性信息為 “簡(jiǎn)要級(jí)”，并且提供將與對(duì)應(yīng)的對(duì)象一同顯示的簡(jiǎn)要屬性信息。由于建筑1310和建筑2330 的屬性信息量是通過(guò)基于聚焦的加權(quán)單元123確定的，所以該裝置從對(duì)象服務(wù)器接收包含有建筑1310的名稱和具體信息的屬性信息，并與建筑1310 —起顯示所接收到的屬性信息。 此外，該裝置從對(duì)象服務(wù)器接收包含有建筑2330的名稱的簡(jiǎn)要屬性信息，并與建筑2330 — 起顯示所接收到的屬性信息。根據(jù)另一個(gè)示例，加權(quán)值處理單元121可以根據(jù)基于對(duì)象數(shù)量的加權(quán)單元124來(lái)確定正在顯示的對(duì)象的屬性信息?；趯?duì)象數(shù)量的加權(quán)單元1 通過(guò)參照基于正在顯示的對(duì)象數(shù)量而存儲(chǔ)加權(quán)條件值的加權(quán)信息存儲(chǔ)單元130，基于正在顯示的對(duì)象數(shù)量來(lái)確定對(duì)象的屬性信息。例如，如果只有一個(gè)對(duì)象正被顯示，則基于對(duì)象數(shù)量的加權(quán)單元1 確定該對(duì)象的屬性信息為“具體級(jí)”，并且提供具體的屬性信息。如果，例如至少三個(gè)對(duì)象正在被顯示，則基于對(duì)象數(shù)量的加權(quán)單元1 確定該對(duì)象的屬性信息的級(jí)別為“簡(jiǎn)要級(jí)”，并且提供簡(jiǎn)要的屬性信息。以這種方式，該裝置根據(jù)基于對(duì)象數(shù)量的加權(quán)單元1 所確定的級(jí)別從對(duì)象服務(wù)器接收與對(duì)象對(duì)應(yīng)的簡(jiǎn)要屬性信息或者具體屬性信息，并且與對(duì)象一起顯示所接收到的屬性信息。根據(jù)另一個(gè)示例，加權(quán)值處理單元121可以根據(jù)基于時(shí)間的加權(quán)單元125來(lái)確定正在顯示的對(duì)象的屬性信息?；跁r(shí)間的加權(quán)單元125通過(guò)參照加權(quán)信息存儲(chǔ)單元130檢查在顯示所識(shí)別的對(duì)象的特定時(shí)間點(diǎn)之后的預(yù)定時(shí)間內(nèi)顯示在屏幕上的對(duì)象的位置信息是否改變，確定對(duì)應(yīng)的對(duì)象的屬性信息。更具體地說(shuō)，基于時(shí)間的加權(quán)單元125在特定的時(shí)間取得正在顯示的對(duì)象的位置信息。之后，基于時(shí)間的加權(quán)單元125確定所取得的對(duì)象的位置信息在特定的時(shí)間內(nèi)是否存在改變。例如，如果用戶在移動(dòng)的時(shí)候拍照或者提供場(chǎng)景的圖像，則可以確定已從該照片中提取并識(shí)別出的對(duì)象的位置信息隨著時(shí)間改變。這樣，基于時(shí)間的加權(quán)單元125可確定所識(shí)別的對(duì)象的屬性信息為“簡(jiǎn)要級(jí)”，并且由此與對(duì)象一起顯示簡(jiǎn)要的屬性信息。如果用戶靜止站立或者移動(dòng)得不大，則用戶可拍照或者提供場(chǎng)景的圖像，并且可以確定已從該照片中提取并識(shí)別出的對(duì)象的位置信息在少于預(yù)定時(shí)間的時(shí)間內(nèi)沒(méi)有改變。這樣，基于時(shí)間的加權(quán)單元125確定所識(shí)別的對(duì)象的屬性信息為“具體級(jí)”，并且與對(duì)象一起顯示具體的屬性信息。這樣，在該示例中，基于時(shí)間的加權(quán)單元125基于裝置設(shè)備的移動(dòng)而改變作為屬性信息并入的信息的數(shù)量。如上所述，該裝置基于對(duì)象的位置信息的改變通過(guò)基于時(shí)間的加權(quán)單元125來(lái)設(shè)置對(duì)應(yīng)的對(duì)象的屬性信息的級(jí)別，由此提供與對(duì)象對(duì)應(yīng)的簡(jiǎn)要屬性信息或者具體屬性信息。
根據(jù)另一個(gè)示例，加權(quán)值處理單元121可以根據(jù)基于變化的加權(quán)單元1 來(lái)確定所顯示的對(duì)象的屬性信息?；谧兓募訖?quán)單元1 通過(guò)參照存儲(chǔ)有取決于對(duì)象變化的加權(quán)條件值的加權(quán)信息存儲(chǔ)單元130，而基于正在顯示的所識(shí)別對(duì)象的尺寸變化或者運(yùn)動(dòng)變化來(lái)確定將被顯示的屬性信息。例如，如果對(duì)象從顯示器的邊界移動(dòng)到顯示器的中心，則確定發(fā)生了從顯示器的邊界到中心的運(yùn)動(dòng)變化，從而基于變化的加權(quán)單元1 確定該對(duì)象的屬性信息處于“具體級(jí)”，并且由此與對(duì)象一起顯示具體的屬性信息。因此，該裝置根據(jù)基于變化的加權(quán)單元126所確定的級(jí)別從對(duì)象服務(wù)器接收具體的屬性信息，并且與該對(duì)象一起顯示所接收到的具體屬性信息。根據(jù)另一個(gè)示例，用戶可利用放大模式來(lái)拍攝含有對(duì)象的照片或者提供包含有對(duì)象的圖像。在這種情況下，顯示比利用普通模式所拍攝的圖像大的該對(duì)象的放大圖像，并且確定正在顯示的對(duì)象存在尺寸變化。因此，基于變化的加權(quán)單元126確定屬性信息處于“具體級(jí)”，并且由此與對(duì)應(yīng)的對(duì)象一起顯示具體屬性信息。因此，該裝置從對(duì)象服務(wù)器接收與由基于變化的加權(quán)單元126所確定的級(jí)別對(duì)應(yīng)的具體屬性信息，并且與對(duì)應(yīng)的對(duì)象一起顯示所接收到的屬性信息。如上所述，該裝置通過(guò)基于變化的加權(quán)單元126、基于對(duì)象的運(yùn)動(dòng)變化或者尺寸變化來(lái)重新確定對(duì)象的屬性信息的級(jí)別，并且根據(jù)重新確定的級(jí)別顯示簡(jiǎn)要屬性信息或者具體屬性信息。根據(jù)另一個(gè)示例，加權(quán)值處理單元121可以通過(guò)基于偏好的加權(quán)單元127來(lái)確定所顯示的對(duì)象的屬性信息?；谄玫募訖?quán)單元127通過(guò)參照存儲(chǔ)有取決于用戶偏好的加權(quán)條件值的加權(quán)信息存儲(chǔ)單元130，而確定所識(shí)別的對(duì)象的屬性信息。例如，加權(quán)信息存儲(chǔ)單元130可以存儲(chǔ)與娛樂(lè)相關(guān)的優(yōu)先級(jí)信息和與購(gòu)物相關(guān)的優(yōu)先級(jí)信息。以這種方式，基于偏好的加權(quán)單元127檢查正在顯示的對(duì)象是否與用戶輸入的偏好信息相關(guān)。作為檢查的結(jié)果，如果該對(duì)象與該偏好信息相關(guān)，則基于偏好的加權(quán)單元127將該對(duì)象的屬性信息的級(jí)別確定為最高。由此，該裝置接收與基于偏好的加權(quán)單元127所確定的級(jí)別對(duì)應(yīng)的具體屬性信息并且與對(duì)應(yīng)的對(duì)象一起顯示所接收到的屬性信息。根據(jù)另一個(gè)示例，加權(quán)值處理單元121可以通過(guò)復(fù)合加權(quán)單元1 確定正在顯示的對(duì)象的屬性信息。在用戶請(qǐng)求時(shí)，復(fù)合加權(quán)單元1 通過(guò)參照存儲(chǔ)有為基于對(duì)象尺寸的加權(quán)單元122、基于聚焦的加權(quán)單元123、基于對(duì)象數(shù)量的加權(quán)單元124、基于時(shí)間的加權(quán)單元125、基于變化的加權(quán)單元1 和基于偏好的加權(quán)單元127的各個(gè)加權(quán)條件值確定優(yōu)先級(jí)的加權(quán)條件值的加權(quán)信息存儲(chǔ)單元130，而確定所識(shí)別的對(duì)象的屬性信息。因此，該裝置從對(duì)象服務(wù)器接收與基于各個(gè)加權(quán)單元122、123、124、125、1 和127的加權(quán)條件值的優(yōu)先級(jí)而確定的屬性信息的級(jí)別對(duì)應(yīng)的屬性信息，并且與對(duì)應(yīng)的對(duì)象一起顯示所接收到的屬性信肩、ο圖4是示出了根據(jù)本發(fā)明的示例性實(shí)施方式的顯示屬性信息的裝置的顯示器的圖。例如，用戶可以向與聚焦相關(guān)的加權(quán)條件值和與對(duì)象的變化相關(guān)的加權(quán)條件值提供最高的優(yōu)先級(jí)。在這種情況下，如圖4所示，當(dāng)顯示了與對(duì)象對(duì)應(yīng)的建筑1410和建筑M30 時(shí)，復(fù)合加權(quán)單元1 通過(guò)利用確定各個(gè)加權(quán)單元122、123、124、125,126和127的各個(gè)加權(quán)條件值的優(yōu)先級(jí)的加權(quán)條件值，來(lái)確定建筑1410和建筑M30的屬性信息。也就是說(shuō)，由于確定了建筑1410位于顯示器的中心點(diǎn)，所以復(fù)合加權(quán)單元1 將建筑1410的屬性信息確定為處于高級(jí)別。此外，由于確定了建筑M30位于顯示器的邊界，所以復(fù)合加權(quán)單元128 將建筑M30的屬性信息確定為處于低級(jí)別。因此，該裝置接收建筑1410的具體屬性信息和建筑M30的簡(jiǎn)要屬性信息，并且與建筑1410和建筑M30 —起顯示各個(gè)接收到的屬性信息。如圖4所示，如果建筑1410和建筑M30移動(dòng)，則確定發(fā)生了建筑1410和建筑M30的運(yùn)動(dòng)變化，并且復(fù)合加權(quán)單元1 重新確定建筑1410和建筑M30的屬性信息。也就是說(shuō)， 由于確定了建筑1410從顯示器的中心點(diǎn)或者更中心的點(diǎn)移動(dòng)到邊界“A”，所以復(fù)合加權(quán)單元1 將建筑1410的屬性信息的級(jí)別確定為低。此外，確定建筑M30從顯示器的邊界移動(dòng)到中心點(diǎn)“B”，則復(fù)合加權(quán)單元1 將建筑M30的屬性信息的級(jí)別確定為高。因此，該裝置從對(duì)象服務(wù)器接收建筑1410的簡(jiǎn)要屬性信息和建筑M30的具體屬性信息，并且與建筑 1410和建筑M30 —起顯示各個(gè)接收到的屬性信息。圖5是示出了根據(jù)本發(fā)明的示例性實(shí)施方式的顯示屬性信息的方法的示例的流程圖。裝置從通過(guò)內(nèi)置相機(jī)輸入或者由圖像文件提供的圖像中提取對(duì)象，并且識(shí)別該對(duì)象(500)。也就是說(shuō)，用戶指定將由該裝置的相機(jī)拍攝的區(qū)域。當(dāng)用戶指定了感興趣的區(qū)域時(shí)，該裝置從該圖像中提取對(duì)象，并且識(shí)別該對(duì)象。該裝置通過(guò)參照存儲(chǔ)有用于確定所識(shí)別的對(duì)象的屬性信息的加權(quán)條件值的加權(quán)信息存儲(chǔ)單元，來(lái)確定與所識(shí)別的對(duì)象相關(guān)的屬性信息(510)。該裝置將與屬性信息相關(guān)的請(qǐng)求消息或者多個(gè)消息傳送給被配置為存儲(chǔ)并管理多個(gè)對(duì)象的圖像以及各個(gè)對(duì)象的屬性信息的對(duì)象服務(wù)器(520)。與屬性信息相關(guān)的請(qǐng)求消息可以包括所確定的屬性信息的級(jí)別。之后，該裝置接收與將顯示的對(duì)象相關(guān)的屬性信息的數(shù)量所對(duì)應(yīng)的屬性信息，并且在顯示器上顯示包含有所接收到的屬性信息和該對(duì)象的圖像(530)。在確定將從對(duì)象服務(wù)器提供給顯示器的屬性信息的數(shù)量時(shí)，本領(lǐng)域普通技術(shù)人員可以利用各種系數(shù)和技術(shù)。例如，本領(lǐng)域普通技術(shù)人員可以利用與加權(quán)值處理單元122、 123、124、125、126、127和1 結(jié)合使用的處理或者它們的等同處理相似的處理。例如，裝置可以基于所識(shí)別對(duì)象的尺寸(取決于該裝置與該對(duì)象之間的距離)，來(lái)確定正在顯示的對(duì)象的屬性信息。該裝置從所顯示的圖像中提取對(duì)象，并且識(shí)別該對(duì)象。該裝置獲取該對(duì)象的面積。該裝置通過(guò)參照存儲(chǔ)有與該對(duì)象的尺寸相關(guān)的加權(quán)條件值的加權(quán)信息存儲(chǔ)器，基于該對(duì)象的面積來(lái)確定該對(duì)象的屬性信息。該裝置正在顯示的對(duì)象的面積隨著該裝置與該對(duì)象之間的距離改變。因此，對(duì)象在顯示器上看起來(lái)越小，該對(duì)象就位于離該裝置越遠(yuǎn)，從而該裝置確定該對(duì)象的屬性信息，并且由此將屬性信息確定為簡(jiǎn)要屬性信息并且/或顯示該對(duì)象的簡(jiǎn)要屬性信息。對(duì)象在顯示器上看起來(lái)越大，該對(duì)象就位于離該裝置越近，從而該裝置將屬性信息確定為具體屬性信息并且/或在屏幕上顯示該對(duì)象的具體屬性信息。以這種方式，該裝置可以基于正顯示在屏幕上的對(duì)象的面積或者尺寸來(lái)提供與對(duì)象對(duì)應(yīng)的具體屬性信息或者簡(jiǎn)要屬性信息。例如，該裝置可以基于在屏幕上顯示的所識(shí)別對(duì)象的位置來(lái)確定正在顯示的對(duì)象的屬性信息。也就是說(shuō)，該裝置從通過(guò)裝置的相機(jī)而輸入的圖像中提取對(duì)象，或者從另一個(gè)源接收?qǐng)D像文件，并且識(shí)別該對(duì)象。該裝置獲取顯示有所識(shí)別對(duì)象的顯示位置。該裝置通過(guò)參照存儲(chǔ)有與聚焦相關(guān)的加權(quán)條件值的加權(quán)信息存儲(chǔ)單元，基于顯示的所識(shí)別對(duì)象的位置與參考點(diǎn)(諸如顯示器的中心)之間的距離差來(lái)確定對(duì)應(yīng)對(duì)象的屬性信息。也就是說(shuō)， 該終端裝置以如下方式確定對(duì)象的屬性信息與顯示器的中心越近的對(duì)象具有將顯示在屏幕上的越具體的屬性信息。該裝置以如下方式確定對(duì)象的屬性信息離顯示器的中心越遠(yuǎn)的對(duì)象具有將顯示在顯示器上的越簡(jiǎn)要的屬性信息。以這種方式，該裝置基于正在顯示的對(duì)象的位置與顯示器的中心之間的距離差提供與對(duì)象對(duì)應(yīng)的具體屬性信息或者簡(jiǎn)要屬性 fn息ο例如，該裝置可以基于正在顯示的對(duì)象的數(shù)量確定正在顯示的對(duì)象的屬性信息。 該裝置從通過(guò)該裝置的相機(jī)或者另一個(gè)圖像提供源輸入的圖像中提取圖像，并且識(shí)別這些對(duì)象。該裝置確定所識(shí)別的對(duì)象的數(shù)量。之后，該裝置通過(guò)參照存儲(chǔ)有與正在顯示的對(duì)象的數(shù)量相關(guān)的加權(quán)條件值的加權(quán)信息存儲(chǔ)單元，基于這些對(duì)象的數(shù)量來(lái)確定這些對(duì)象的屬性信息。如果只有一個(gè)對(duì)象被確定為將被顯示，則該裝置將該對(duì)象的屬性信息確定為提供具體屬性信息的具體級(jí)。如果，例如至少三個(gè)對(duì)象被確定為將在屏幕上顯示，則該裝置將該三個(gè)對(duì)象的屬性信息確定為提供簡(jiǎn)要屬性信息的簡(jiǎn)要級(jí)。以這種方式，該裝置基于所確定的對(duì)象數(shù)量從對(duì)象服務(wù)器接收與對(duì)象對(duì)應(yīng)的簡(jiǎn)要屬性信息或者具體屬性信息，并且與對(duì)象一起顯示所接收到的屬性信息。例如，該裝置可以基于在特定的時(shí)間(該時(shí)間可以預(yù)先設(shè)置)內(nèi)對(duì)象位置信息的變化，來(lái)確定正在顯示的所識(shí)別對(duì)象的屬性信息。也就是說(shuō)，該裝置獲取正在顯示的對(duì)象的位置信息。該裝置通過(guò)參照存儲(chǔ)有取決于位置信息的變化的加權(quán)條件值的加權(quán)信息存儲(chǔ)單元，檢查對(duì)象的位置信息的變化。用戶可以在移動(dòng)的時(shí)候通過(guò)他/她的裝置的相機(jī)拍攝照片，或者從源接收多個(gè)圖像。在這種情況下，如果確定已經(jīng)從照片中識(shí)別的對(duì)象的位置信息隨著時(shí)間改變了，則該裝置將所識(shí)別的對(duì)象的屬性信息確定為“簡(jiǎn)要級(jí)”，并且提供將與所識(shí)別的對(duì)象一起顯示的簡(jiǎn)要屬性信息。靜止站立的用戶可以利用他/她的相機(jī)拍攝照片。 在這種情況下，確定已經(jīng)從照片中識(shí)別的對(duì)象的位置信息在特定的時(shí)間內(nèi)沒(méi)有改變，從而該裝置將所識(shí)別的對(duì)象的屬性信息確定為“具體級(jí)”，并且提供將與所識(shí)別的對(duì)象一起顯示的具體屬性信息。如上所述，該裝置基于該對(duì)象位置信息的改變而設(shè)置對(duì)應(yīng)對(duì)象的屬性信息，由此提供對(duì)應(yīng)對(duì)象的簡(jiǎn)要屬性信息或者具體屬性信息。例如，該裝置可以基于所顯示的對(duì)象的尺寸變化或者移動(dòng)變化，來(lái)確定被顯示的所識(shí)別對(duì)象的屬性信息。也就是說(shuō)，該裝置可以通過(guò)參照存儲(chǔ)有取決于對(duì)象的變化的加權(quán)條件值的加權(quán)信息存儲(chǔ)單元，基于對(duì)象的尺寸變化或者移動(dòng)變化來(lái)確定所顯示的對(duì)象的屬性信息的級(jí)別。如果正在顯示的對(duì)象從顯示器的中心移動(dòng)到邊界，則確定發(fā)生了從顯示器的中心到邊界的運(yùn)動(dòng)變化，從而該裝置將該對(duì)象的屬性信息確定為顯示簡(jiǎn)要屬性信息的簡(jiǎn)要級(jí)。因此，該裝置從對(duì)象服務(wù)器接收與該對(duì)象對(duì)應(yīng)的簡(jiǎn)要屬性信息，并且與該對(duì)象一起顯示所接收到的簡(jiǎn)要屬性信息。用戶可以利用相機(jī)的縮小模式拍攝真實(shí)世界中的對(duì)象的照片。在這種情況下，比利用普通模式所拍攝的圖像小的該對(duì)象的縮小圖像被顯示，并且確定正在顯示的對(duì)象發(fā)生了尺寸變化。如上所述，如果確定正在顯示的對(duì)象發(fā)生了尺寸變化， 則該裝置將屬性信息確定為“簡(jiǎn)要級(jí)”，并且與對(duì)應(yīng)的對(duì)象一起提供將要顯示的簡(jiǎn)要屬性信息。因此，該裝置從對(duì)象服務(wù)器接收簡(jiǎn)要屬性信息并且與該對(duì)象一起顯示所接收到的屬性信息。如上所述，該裝置基于該對(duì)象的移動(dòng)變化或者尺寸變化而重新確定對(duì)應(yīng)對(duì)象的屬性信息的級(jí)別，并且根據(jù)該重新確定來(lái)顯示簡(jiǎn)要屬性信息或具體屬性信息。
例如，該裝置可以基于用戶的偏好而確定正在顯示的對(duì)象的屬性信息。也就是說(shuō)， 該裝置通過(guò)參照存儲(chǔ)有取決于用戶的偏好的加權(quán)條件值的加權(quán)信息存儲(chǔ)單元，確定所識(shí)別對(duì)象的屬性信息。該裝置可以在加權(quán)信息存儲(chǔ)單元中存儲(chǔ)，例如與娛樂(lè)相關(guān)的優(yōu)先級(jí)信息和與購(gòu)物相關(guān)的優(yōu)先級(jí)信息。以這種方式，該裝置檢查所顯示的對(duì)象是否與用戶輸入的偏好信息相關(guān)。作為檢查的結(jié)果，如果該對(duì)象與偏好信息相關(guān)，則該裝置將該對(duì)象的屬性信息確定為最高級(jí)別。由此，該裝置接收具體屬性信息并且與對(duì)應(yīng)的對(duì)象一起顯示所接收到的屬性信息。例如，該裝置可以基于針對(duì)以上確定對(duì)象的屬性信息的方法的優(yōu)先級(jí)，來(lái)確定正在顯示的對(duì)象的屬性信息。也就是說(shuō)，在用戶請(qǐng)求時(shí)，該裝置通過(guò)參照確定并存儲(chǔ)有針對(duì)與以上方法相關(guān)的各個(gè)加權(quán)條件值的優(yōu)先級(jí)的加權(quán)信息存儲(chǔ)單元，來(lái)確定所顯示的對(duì)象的屬性信息。用戶可以向與聚焦相關(guān)的加權(quán)條件值和與對(duì)象的變化相關(guān)的加權(quán)條件值賦予較高的優(yōu)先級(jí)。在這種情況下，如圖4所示，由于顯示了與對(duì)象對(duì)應(yīng)的建筑1410和建筑M30，識(shí)別出建筑1位于顯示器中心點(diǎn)或者中心點(diǎn)附近，并且該裝置將建筑1410的屬性信息的級(jí)別確定為高級(jí)別。此外，由于識(shí)別出建筑M30位于顯示器的邊界或者邊界附近，該裝置將建筑M30的屬性信息的級(jí)別確定為低級(jí)別。因此，該裝置接收建筑1410的具體屬性信息和建筑M30的簡(jiǎn)要屬性信息，并且與建筑1410和建筑M30 —起顯示所接收到的屬性信息。如果建筑1410和建筑M30如圖4所示移動(dòng)，則確定建筑1410和建筑M30發(fā)生了移動(dòng)變化， 并且該裝置重新確定建筑1410和建筑M30的屬性信息。也就是說(shuō)，由于確定了建筑1410 從顯示器的中心點(diǎn)移動(dòng)到邊界“A”，所以該裝置將建筑1410的屬性信息確定為低級(jí)別。此外，由于確定了建筑M30從屏幕的邊界移動(dòng)到中心點(diǎn)或者更中心的點(diǎn)“B”，所以該裝置將建筑M30的屬性信息確定為高級(jí)別。因此，該裝置從對(duì)象服務(wù)器接收建筑1410的的簡(jiǎn)要屬性信息和建筑M30的具體屬性信息，并且與建筑1410和建筑M30 —起在屏幕上顯示所接收到的屬性信息。本領(lǐng)域普通技術(shù)人員將會(huì)明了，在不偏離本發(fā)明的精神或范圍的情況下可以對(duì)本發(fā)明進(jìn)行多種修改和變型。這樣，本發(fā)明旨在覆蓋落入所附權(quán)利要求及其等同物的范圍中的本發(fā)明的這些修改和變型。
權(quán)利要求
1.一種顯示從圖像中提取出的對(duì)象的裝置，該裝置包括與對(duì)象服務(wù)器通信的通信單元，所述對(duì)象服務(wù)器存儲(chǔ)對(duì)象和對(duì)應(yīng)的屬性信息； 識(shí)別所述對(duì)象的對(duì)象識(shí)別單元；控制單元，其根據(jù)所識(shí)別對(duì)象來(lái)控制屬性信息的顯示，并且與存儲(chǔ)在所述對(duì)象服務(wù)器中的所識(shí)別對(duì)象的加權(quán)相對(duì)應(yīng)地控制所述屬性信息的數(shù)量；和顯示單元，其與所識(shí)別對(duì)象一起顯示所述屬性信息。
2.根據(jù)權(quán)利要求1所述的裝置，該裝置還包括加權(quán)信息存儲(chǔ)單元，其存儲(chǔ)用于確定多個(gè)對(duì)象的所述加權(quán)的加權(quán)條件值，其中，所述控制單元包括加權(quán)值處理單元，其具有基于所識(shí)別對(duì)象的特性而確定所述屬性信息的所述加權(quán)條件值的加權(quán)單元。
3.根據(jù)權(quán)利要求2所述的裝置，其中，所述加權(quán)單元包括 基于對(duì)象尺寸的加權(quán)單元，其中所述特性是所識(shí)別對(duì)象的尺寸。
4.根據(jù)權(quán)利要求2所述的裝置，其中，所述加權(quán)單元包括基于聚焦的加權(quán)單元，其中所述特性是所識(shí)別對(duì)象的顯示點(diǎn)與所述顯示單元的中心點(diǎn)之間的距離差。
5.根據(jù)權(quán)利要求2所述的裝置，其中，所述加權(quán)單元包括 基于對(duì)象數(shù)量的加權(quán)單元，其中所述特性是正在顯示的對(duì)象的數(shù)量。
6.根據(jù)權(quán)利要求2所述的裝置，其中，所述加權(quán)單元包括基于時(shí)間的加權(quán)單元，其中所述特性是基于正在顯示的所識(shí)別對(duì)象的位置在一時(shí)間點(diǎn)之后的一段時(shí)間內(nèi)的改變。
7.根據(jù)權(quán)利要求2所述的裝置，其中，所述加權(quán)單元包括基于變化的加權(quán)單元，其中所述特性是基于正在顯示的所識(shí)別對(duì)象的尺寸變化或者移動(dòng)變化。
8.根據(jù)權(quán)利要求2所述的裝置，其中，所述加權(quán)單元包括 基于偏好的加權(quán)單元，其中所述特性是基于用戶的偏好。
9.根據(jù)權(quán)利要求2所述的裝置，其中，所述加權(quán)單元包括復(fù)合加權(quán)單元，其中所述特性是基于不同類型的加權(quán)單元的組合。
10.一種在終端裝置上顯示從圖像中提取出的對(duì)象以及關(guān)于所述對(duì)象的屬性信息的方法，該方法包括從所述圖像中識(shí)別所述對(duì)象；基于加權(quán)信息存儲(chǔ)單元而確定與所識(shí)別對(duì)象相關(guān)的所顯示的屬性信息的數(shù)量，所述加權(quán)信息存儲(chǔ)單元存儲(chǔ)用于確定所顯示的屬性信息的數(shù)量的加權(quán)條件值；從存儲(chǔ)有多個(gè)對(duì)象和關(guān)于所述多個(gè)對(duì)象的屬性信息的對(duì)象服務(wù)器接收所確定數(shù)量的屬性信息；和在顯示單元上與所識(shí)別對(duì)象一起顯示所述屬性信息。
11.根據(jù)權(quán)利要求10所述的方法，其中，所述確定是基于正在顯示的所識(shí)別對(duì)象的尺寸，其中正在顯示的所識(shí)別對(duì)象的所述尺寸隨著所述裝置與所述對(duì)象之間的距離而改變。
12.根據(jù)權(quán)利要求10所述的方法，其中，所述確定是基于所識(shí)別對(duì)象的顯示點(diǎn)與所述顯示單元的中心點(diǎn)之間的距離差。
13.根據(jù)權(quán)利要求10所述的方法，其中，所述確定是基于所顯示的對(duì)象的數(shù)量。
14.根據(jù)權(quán)利要求10所述的方法，其中，所述確定是基于檢查正在顯示的所識(shí)別對(duì)象在一時(shí)間點(diǎn)后的一段時(shí)間內(nèi)的位置信息是否改變。
15.根據(jù)權(quán)利要求10所述的方法，其中，所述確定是基于被顯示的所識(shí)別對(duì)象的尺寸變化或者移動(dòng)變化。
16.根據(jù)權(quán)利要求10所述的方法，其中，所述確定是基于用戶的偏好。
17.根據(jù)權(quán)利要求10所述的方法，其中，所述確定是基于用于確定加權(quán)值的不同特性的組合。
18.根據(jù)權(quán)利要求17所述的方法，其中，所述組合是從至少一種以下特性的組合取得的正在顯示的所識(shí)別對(duì)象的尺寸、所識(shí)別對(duì)象的顯示點(diǎn)與所述顯示單元的中心點(diǎn)之間的距離差、所顯示的對(duì)象的數(shù)量、在一段時(shí)間內(nèi)被顯示的所識(shí)別對(duì)象的位置信息的改變、被顯示的所識(shí)別對(duì)象的變化以及用戶的偏好。
全文摘要
本發(fā)明提供了用于提供對(duì)象信息的裝置和方法，該裝置和方法用于在增強(qiáng)現(xiàn)實(shí)中提供關(guān)于正在該裝置的屏幕上顯示的對(duì)象的屬性信息。用于顯示從諸如相機(jī)的圖像輸入中提取出的對(duì)象的所述裝置包括通信單元、對(duì)象識(shí)別單元和控制單元。所述通信單元被配置為針對(duì)對(duì)象服務(wù)器執(zhí)行數(shù)據(jù)通信，所述對(duì)象服務(wù)器存儲(chǔ)有多個(gè)對(duì)象和每個(gè)對(duì)象的屬性信息。所述對(duì)象識(shí)別單元被配置為從所述圖像輸入中提取所述對(duì)象并且識(shí)別所述對(duì)象。所述裝置基于所述對(duì)象的狀態(tài)確定正在顯示的對(duì)象的屬性信息并且提供屬性信息。
文檔編號(hào)G06F17/30GK102436460SQ201110212028
公開(kāi)日2012年5月2日 申請(qǐng)日期2011年7月27日 優(yōu)先權(quán)日2010年8月20日
發(fā)明者陳容根 申請(qǐng)人:株式會(huì)社泛泰