用于提供終端裝置視野內(nèi)的對象的信息的方法、終端裝置和計算機可讀記錄介質(zhì)的制作方法
【專利摘要】本發(fā)明涉及一種利用輸入到終端的圖像及其相關(guān)信息以增強現(xiàn)實(AR)的形式提供終端視野中包括的對象信息的方法。該方法包括如下步驟：(a)通過參考至少一條關(guān)于終端位置、位移和視角的信息，指定與所述輸入圖像對應(yīng)的指定視野；以及（b)獲取與所述終端視野中包括的對象對應(yīng)的圖形元素，可以利用用于匹配樓宇圖像的技術(shù)識別其身份，以及通過在終端屏幕上顯示的對象位置上提供圖形元素，以增強現(xiàn)實的形式利用輸入圖像顯示所獲取的圖形元素。
【專利說明】用于提供終端裝置視野內(nèi)的對象的信息的方法、終端裝置 和計算機可讀記錄介質(zhì)

【技術(shù)領(lǐng)域】
[0001] 本發(fā)明涉及一種用于提供終端視野中包括的對象信息的方法、終端和計算機可讀 記錄介質(zhì)；更具體而言，涉及利用以增強現(xiàn)實（AR)形式通過與終端輸入的圖像一起顯示與 終端視野中包括的對象對應(yīng)的圖形元素，使得用戶能夠根據(jù)興趣識別終端視野中包括的對 象并有效獲得關(guān)于對象的信息的方法、終端和計算機可讀記錄介質(zhì)。

【背景技術(shù)】
[0002] 近來，由于因特網(wǎng)的廣泛使用，提供轉(zhuǎn)換成數(shù)字形式的地理信息已經(jīng)很常見，該地 理信息曾經(jīng)以例如書本的印刷形式提供的。在線提供的數(shù)字地圖服務(wù)、車輛中安裝的導航 系統(tǒng)等可以是范例。這樣一來，數(shù)字化地理信息的好處之一是通過用戶界面為用戶提供各 種方便功能，用戶界面能夠允許用戶檢索期望的地理信息。此外，通過遠程更新服務(wù)等可以 容易地更新地理信息的變化，從而在最新地理信息方面，這樣的數(shù)字數(shù)據(jù)可以比常規(guī)印刷 材料更優(yōu)越。
[0003] 具體而言，最近介紹了一種技術(shù)，以增強現(xiàn)實（AR)的形式提供地理信息，顯示附加 信息，包括在終端實時拍攝的輸入圖像上組合的計算機圖形（CG)、文本等。根據(jù)AR技術(shù)，該 技術(shù)可以通過更直觀的方法為用戶提供地理信息，因為它可以提供在視覺上與輸入圖像重 疊的附加信息(例如表示感興趣點（Ρ0Ι)的圖形元素等)，輸入圖像即用戶正觀看的現(xiàn)實世 界的圖形，是通過終端的攝像機模塊輸入的。
[0004] 但是，如果利用常規(guī)增強現(xiàn)實技術(shù)提供終端視野中包括的對象的補充信息，通常 簡單地以字符串形式顯示對象名稱。
[0005] 不過，根據(jù)常規(guī)的增強現(xiàn)實技術(shù)，由于必須要僅通過字符串等區(qū)分用戶希望搜索 的對象，所以相應(yīng)對象之間的區(qū)分不是可視地明確揭示出來的。此外，由于通常移動終端中 裝備的顯示器尺寸(例如液晶顯示器等）未大到足以顯示大量信息，如果終端視野中包括多 個對象，由于字符串的尺寸減小且誤讀率增大，可見度變差。
[0006] 因此，本發(fā)明的 申請人:想到開發(fā)一項技術(shù)，利用輸入圖像顯示其視野中包括的對 象的圖形元素，例如商標、標志等以提高從用戶角度來看終端視野中包括的對象的區(qū)分程 度，從而支持用戶迅速識別終端視野中包括的對象并精確獲取對象的信息。


【發(fā)明內(nèi)容】

[0007] 技術(shù)問題
[0008] 因此，本發(fā)明的目的是解決上述所有問題。
[0009] 本發(fā)明的另一個目的是，參考終端位置、位移和視角信息，指定與輸入到其中的輸 入圖像對應(yīng)的其視野，并以增強現(xiàn)實的形式在其屏幕上顯示的對象位置處提供與其視野中 包括的對象對應(yīng)的圖形元素。
[0010] 用于解決問題的手段 toon] 用于實現(xiàn)上述目的的本發(fā)明的典型配置如下。
[0012] 根據(jù)本發(fā)明的一個方面，提供了一種利用輸入到終端的圖像及其相關(guān)信息，以增 強現(xiàn)實（AR)的形式提供終端視野中包括的對象信息的方法，包括如下步驟：(a)通過參考 至少一條關(guān)于終端位置、位移和視角的信息，指定與所述輸入圖像對應(yīng)的指定視野；以及 (b)獲取與所述終端視野中包括的對象對應(yīng)的圖形元素，可以利用用于匹配樓宇圖像的技 術(shù)識別其身份，以及通過在終端屏幕上顯示的對象位置上提供圖形元素，以增強現(xiàn)實的形 式和輸入圖像一起顯示所獲取的圖形元素。
[0013] 根據(jù)本發(fā)明的另一方面，提供了一種利用輸入的圖像和與其相關(guān)的信息，以增強 現(xiàn)實（AR)的形式提供視野中包括的對象的信息的終端，包括：位置和位移測量部分，通過 參考至少一條關(guān)于其位置、位移和視角的信息，指定與所述輸入圖像對應(yīng)的其視野；信息搜 索部分，如果對象被作為查詢輸入，利用用于匹配樓宇圖像的技術(shù)識別其視野中包括的對 象，并獲取與所識別對象對應(yīng)的圖形元素；以及用戶接口部分，以增強現(xiàn)實的形式和輸入 圖像一起顯示所獲取的圖形元素，所獲取的該圖形元素被提供在其屏幕上顯示的對象位置 上。
[0014] 根據(jù)本發(fā)明，還提供用于實施本發(fā)明的另一種方法、系統(tǒng)、以及記錄有用于實施上 述方法的計算機程序命令的計算機可讀介質(zhì)。
[0015] 發(fā)明效果
[0016] 根據(jù)本發(fā)明，可以在終端屏幕上顯示的對象位置上提供與終端視野中包括的對象 對應(yīng)的圖形元素的信息并和輸入圖像一起顯示它。因此，能夠允許用戶有效地識別終端視 野中包括的對象并更精確地獲取其關(guān)于對象的信息。

【專利附圖】

【附圖說明】
[0017] 圖1是簡要示出了根據(jù)本發(fā)明范例實施例提供終端視野中包括的對象信息的整 個系統(tǒng)的配置的圖示；
[0018] 圖2是示范性示出了根據(jù)本發(fā)明范例實施例的終端200內(nèi)部配置的圖示；
[0019] 圖3是示范性示出了根據(jù)本發(fā)明范例實施例與終端視野中包括的對象對應(yīng)的圖 形元素的圖示。
[0020] 附圖標記
[0021] 100 :通信網(wǎng)絡(luò)
[0022] 200 :終端
[0023] 210 :輸入圖像獲取部分
[0024] 220 :位置和位移測量部分
[0025] 230 :增強現(xiàn)實實施部分
[0026] 240:用戶接口部分
[0027] 250 :信息搜索部分
[0028] 260 :通信部分
[0029] 270 :控制部分
[0030] 300 :信息提供服務(wù)器

【具體實施方式】
[0031] 在以下詳細描述中，參考了附圖，附圖通過例示方式示出了可以實踐本發(fā)明的具 體實施例。充分詳細地描述這些實施例以使本領(lǐng)域的技術(shù)人員能夠?qū)嵺`本發(fā)明。要理解的 是，本發(fā)明的各實施例盡管不同，但未必相互排斥。例如，可以在其他實施例中實施這里結(jié) 合一個實施例描述的特定特征、結(jié)構(gòu)或特性而不脫離本發(fā)明的精神和范圍。此外，要理解可 以修改每個公開實施例之內(nèi)個體元件的位置或布置而不脫離本發(fā)明的精神和范圍。因此， 不應(yīng)以限制性意義理解以下詳細描述，本發(fā)明的范圍僅受經(jīng)適當解釋的所附權(quán)利要求連同 被賦予權(quán)利要求的等價描述的完整范圍的限定。在附圖中，在幾幅視圖中，類似的數(shù)字表示 相同或類似的功能。
[0032] 下面，為了使本發(fā)明所屬【技術(shù)領(lǐng)域】的技術(shù)人員能夠容易地實施本發(fā)明，參照附圖 詳細說明本發(fā)明的優(yōu)選的實施例。
[0033][本發(fā)明的優(yōu)選實施例]
[0034] 整個系統(tǒng)的配置
[0035] 圖1簡要示出了根據(jù)本發(fā)明范例實施例提供終端視野中包括的對象信息的整個 系統(tǒng)的配置。
[0036] 如圖1所示，根據(jù)本發(fā)明范例實施例的整個系統(tǒng)可以包括通信網(wǎng)絡(luò)100、終端200 和信息提供服務(wù)器300。
[0037] 首先，不論是有線還是無線，根據(jù)本發(fā)明范例實施例的通信網(wǎng)絡(luò)100可以配置為 各種網(wǎng)絡(luò)，包括遠程通信網(wǎng)絡(luò)、局域網(wǎng)（LAN)、城域網(wǎng)（MAN)、廣域網(wǎng)（WAN)、人造衛(wèi)星網(wǎng)絡(luò) 等。更優(yōu)選地，必須要理解，本發(fā)明中的通信網(wǎng)絡(luò)100是包括萬維網(wǎng)（www)、CDMA (碼分多 址)、WCDMA (寬帶碼分多址）或GSM (全球移動通信系統(tǒng)）的網(wǎng)絡(luò)概念。
[0038] 接下來，根據(jù)本發(fā)明范例實施例的終端200可以執(zhí)行如下功能：利用通過終端200 中包括的攝像儀器，如攝像機輸入的圖像以及與輸入圖像，即對象相關(guān)的信息，以增強現(xiàn)實 (AR)的形式在其屏幕上顯示的對象位置處提供與終端200的視野中包括的對象對應(yīng)的圖 形元素。根據(jù)本發(fā)明，終端200可以是數(shù)字裝置，包括允許用戶訪問通信網(wǎng)絡(luò)100并隨后 與之通信的功能。在這里，可以采用數(shù)字裝置作為根據(jù)本發(fā)明的終端200,例如具有存儲模 塊和有計算能力的微處理器的個人計算機(例如桌面計算機、膝上計算機、平板PC等)、工作 站、PDA、上網(wǎng)本和蜂窩電話。稍后將解釋終端200的內(nèi)部配置。
[0039] 根據(jù)本發(fā)明的范例實施例，信息提供服務(wù)器300可以執(zhí)行如下功能：通過通信網(wǎng) 絡(luò)100與終端200和另一信息提供服務(wù)器(未示出)通信，應(yīng)終端200的請求提供各種信息。 更具體而言，信息提供服務(wù)器300包括網(wǎng)絡(luò)內(nèi)容搜索引擎(未示出），可以搜索與終端200的 請求對應(yīng)的信息并提供搜索結(jié)果，允許終端200的用戶瀏覽。例如，信息提供服務(wù)器300可 以是因特網(wǎng)搜索門戶的工作服務(wù)器，為終端200提供的信息可以是關(guān)于網(wǎng)址、網(wǎng)絡(luò)文獻、知 識、博客、社區(qū)、圖像、視頻、新聞、音樂、購物、地圖、書籍、電影等的各種信息。當然，如有必 要，該搜索引擎可以包括在與信息提供服務(wù)器300無關(guān)的不同的計算裝置或記錄介質(zhì)中。
[0040] 終端的配置
[0041] 下文是對終端200內(nèi)部配置和部件的詳細解釋，這些部件執(zhí)行其重要功能以實施 本發(fā)明。
[0042] 圖2示范性示出了根據(jù)本發(fā)明范例實施例的終端200的內(nèi)部配置。
[0043] 參考圖2,根據(jù)本發(fā)明范例實施例的終端200可以包括輸入圖像獲取部分210、位 置和位移測量部分220、增強現(xiàn)實實施部分230、用戶接口部分240、信息搜索部分250、通信 部分260和控制部分270。根據(jù)本發(fā)明的范例實施例，輸入圖像獲取部分210、位置和位移 測量部分220、增強現(xiàn)實實施部分230、用戶接口部分240、信息搜索部分250、通信部分260 和控制部分270中的至少一些可以是與用戶終端200通信的程序模塊。程序模塊可以以操 作系統(tǒng)、應(yīng)用程序模塊和其他程序模塊的形式包括在終端200中，也可以物理地存儲在幾 個存儲裝置上。此外，程序模塊可以存儲于可與終端200通信的遠程存儲裝置上。程序模 塊可以包括但不限于用于執(zhí)行具體操作的例程、子例程、程序、對象、組成部分和數(shù)據(jù)結(jié)構(gòu) 或稍后將根據(jù)本發(fā)明描述的一種特定的抽象數(shù)據(jù)。
[0044] 首先，根據(jù)本發(fā)明范例實施例的輸入圖像獲取部分210可以執(zhí)行以下功能：獲取 輸入圖像以充當將在稍后解釋的增強現(xiàn)實實施部分230實施的增強現(xiàn)實的依據(jù)。更具體而 言，根據(jù)本發(fā)明范例實施例的輸入圖像獲取部分210可以包括攝像儀器，例如CCD攝像機， 并執(zhí)行在預(yù)覽狀態(tài)下實時接收拿著終端200的用戶周圍的風景景觀的功能。
[0045] 為了判斷終端200獲取的輸入圖像對應(yīng)于現(xiàn)實世界的哪個區(qū)域，根據(jù)本發(fā)明范例 實施例的位置和位移測量部分220可以執(zhí)行測量終端200位置和位移的功能。
[0046] 更確切地說，根據(jù)本發(fā)明范例實施例的位置和位移測量部分220可以利用用于采 集位置信息的技術(shù)，例如GPS (全球定位系統(tǒng))技術(shù)或移動通信技術(shù)來測量終端200的位置。 例如，位置和位移測量部分220可以包括GPS模塊或移動通信模塊。此外，根據(jù)本發(fā)明范例 實施例的位置和位移測量部分220可以利用感測模塊測量終端200的位移。例如，位置和 位移測量部分220可以包括加速度計和陀螺儀，加速度計用于感測終端200的移動距離、速 度、運動方向等，陀螺儀用于感測終端200的轉(zhuǎn)速、角速度、角加速度、方向等。
[0047] 此外，根據(jù)本發(fā)明范例實施例的位置和位移測量部分220可以執(zhí)行如下功能：通 過參考如上所述測量的終端200的位置、位移和視角的信息，指定與通過終端輸入的圖像 對應(yīng)的終端200的視野，即位置被確定為視點的終端200的視野。
[0048] 更具體而言，根據(jù)本發(fā)明范例實施例的終端200的視野表示現(xiàn)實世界中的三維區(qū) 域，可以將其指定為頂點（即視點）對應(yīng)于終端200的視見平截頭體。在這里，如果圖像是 由攝像儀器拍攝或通過其在預(yù)覽狀態(tài)中輸入的，視見平截頭體表示攝像儀器，例如攝像機 視野中包括的三維區(qū)域。它可以根據(jù)攝影透鏡的類型被定義為錐形或多棱錐形狀的無窮 大區(qū)域(或定義為形狀為梯形柱體或梯形多棱體等的有限區(qū)域，這是通過由垂直于視線方 向的近平面或遠平面切割所述錐體或所述多棱錐生成的，視線方向即終端200中嵌入的 鏡頭的中心的方向，該鏡頭面對其要拍攝的現(xiàn)實世界，近平面比遠平面更接近視點)，其中 心充當視點。相對于視見平截頭體而言，可以參考本發(fā)明的 申請人:提交的韓國專利申請 No. 2010-0002340的說明書。必須將該說明書視為已經(jīng)結(jié)合到本文中。
[0049] 此外，根據(jù)本發(fā)明范例實施例的增強現(xiàn)實實施部分230可以執(zhí)行如下功能：通過 組合終端200獲取的輸入圖像和與輸入圖像相關(guān)的信息實施增強現(xiàn)實，由此產(chǎn)生以增強現(xiàn) 實的形式可視表達的輸出圖像。例如，根據(jù)本發(fā)明范例實施例的增強現(xiàn)實實施部分230可 以顯示圖形元素，指示出認為關(guān)于包括在終端200視野中的對象(例如樓宇、商店等)的感興 趣點（Ρ0Ι)，作為與輸入圖像相關(guān)的信息，并且如果用戶選擇了關(guān)于對象的感興趣點，在對 象上提供更詳細信息。作為另一范例，根據(jù)本發(fā)明范例實施例的增強現(xiàn)實實施部分230可 以通過如下方式實施增強現(xiàn)實：顯示輸入圖像以與用于顯示終端200所在地方周圍對象位 置的半透明二維地圖或包括關(guān)于終端200的地點的天氣信息的半透明信息窗口疊加。
[0050] 為了利用終端200獲取的輸入圖像和與輸入圖像相關(guān)的信息實施增強現(xiàn)實，根據(jù) 本發(fā)明范例實施例的用戶接口部分240還另外地可以執(zhí)行如下功能：和輸入圖像一起在其 屏幕上顯示的對象位置處顯示關(guān)于終端200視野中包括的對象的圖形元素。為此，必須通 過首先參考終端200視野的信息和現(xiàn)實世界中存在的對象位置進行用于搜索終端200視野 中包括的對象和搜索與對象對應(yīng)的圖形元素的過程。這可以由信息搜索部分250執(zhí)行，稍 后將加以解釋。
[0051] 在這里，根據(jù)本發(fā)明范例實施例除輸入圖像之外還顯示的圖形元素可以包括對象 的商標、標志、圖案標識等。不過，顯然根據(jù)本發(fā)明的圖形元素不僅限于上文列出的那些，根 據(jù)本發(fā)明的圖形元素中可以包括暗示或引導終端200視野中包括的對象的名稱、類型、性 質(zhì)等的其他條目。
[0052] 如果終端200視野中包括的第一對象遮擋了其中還包括的第二對象，由此終端 200的屏幕上不顯示第二對象，根據(jù)本發(fā)明范例實施例的用戶接口部分240還可以執(zhí)行如 下功能：分別有差異地顯示與第一和第二對象對應(yīng)的圖形元素。例如，假設(shè)提供了與終端 200的視野中包括的樓宇A(yù)和位于連接終端200與樓宇A(yù)的直線延長線上的樓宇B對應(yīng)的 圖形元素，則不能直接在終端200的屏幕上顯示樓宇B，因為樓宇B被樓宇A(yù)隱藏起來，但是 可以應(yīng)用各種范例以再現(xiàn)本發(fā)明，這些范例包括：可以將與樓宇B對應(yīng)的圖形元素一部分 顯示為疊加在與樓宇A(yù)對應(yīng)的圖形元素的后面，或者可以通過翻滾它們以按照相繼次序顯 示分別與樓宇A(yù)和樓宇B對應(yīng)的圖形元素。
[0053] 圖3示范性示出了根據(jù)本發(fā)明范例實施例與終端視野中包括的對象對應(yīng)的圖形 元素的配置。
[0054] 參考圖3,可以確認允許以增強現(xiàn)實形式在輸出圖像中顯示根據(jù)本發(fā)明范例實施 例與終端200視野中包括的對象對應(yīng)的圖形元素的配置。更具體而言，顯示基于終端200的 視野位于屏幕中心稍右側(cè)的名為"Starbucks"的商店的商標徽章作為與商店"Starbucks" 對應(yīng)的圖形元素，顯示基于終端200的視野位于"Starbucks"后方的商店"Tom&Toms"的商 標徽章作為與商店" Tom&Toms "對應(yīng)的圖形元素。
[0055] 根據(jù)本發(fā)明的范例實施例，可以通過終端200的顯示部分(未示出）可視地表達以 增強現(xiàn)實形式實現(xiàn)的其他圖像的信息以及輸出圖像的信息。例如，根據(jù)本發(fā)明范例實施例 的顯示部分可以是平板顯示器，包括IXD (液晶顯示器）或0LED (有機發(fā)光二極管)。
[0056] 此外，根據(jù)本發(fā)明范例實施例的信息搜索部分250可以執(zhí)行如下功能：參考終端 200的視野信息和現(xiàn)實世界中對象位置的信息來識別終端200視野中包括的對象，然后獲 取與所識別對象對應(yīng)的圖形元素。
[0057] 此外，根據(jù)本發(fā)明范例實施例的信息搜索部分250可以執(zhí)行如下功能：通過參考 現(xiàn)實世界中存在的對象的緯度、經(jīng)度、海拔高度等信息以及從終端200的位置、位移、視角 等獲取的視場（即一個三維區(qū)域，該三維區(qū)域是頂點為終端200的視點的視見平截頭體）信 息，來識別終端200的視野中存在的對象。
[0058] 如果通過用戶接口部分240輸入包括終端200視野中至少一個或多個樓宇等 的墻壁的樓宇圖像作為查詢，根據(jù)本發(fā)明另一范例實施例的信息搜索部分250可以利用 匹配樓宇圖像的技術(shù)搜索與輸入查詢中包括的樓宇匹配的適當樓宇，參考搜索到的樓宇 識別輸入查詢中包括的樓宇，并獲取與輸入查詢中包括的樓宇對應(yīng)的數(shù)據(jù)庫上存儲的圖 形元素。作為用于匹配樓宇圖像的技術(shù)，可以參考本發(fā)明的發(fā)明人提交的韓國專利申請 No. 2009-0087794的說明書。必須將該說明書視為已經(jīng)結(jié)合到本文中。
[0059] 上文已經(jīng)描述了用于識別終端200視野中包括的對象的方法，但其不僅限于上述 范例實施例，應(yīng)用各種范例將能夠再現(xiàn)本發(fā)明。
[0060] 根據(jù)本發(fā)明的范例實施例，信息搜索部分250可以執(zhí)行如下功能：通過與信息提 供服務(wù)器300通信來搜索所需信息，以提供終端200請求的信息。例如，假設(shè)從終端200請 求關(guān)于商店A的信息，根據(jù)本發(fā)明范例實施例的信息搜索部分250還可以通過訪問信息搜 索門戶的服務(wù)器來搜索關(guān)于商店A的位置、電話號碼、出售商產(chǎn)品、評論等的信息并允許為 終端200提供至少一些搜索的信息。
[0061] 此外，根據(jù)本發(fā)明范例實施例的通信部分260可以執(zhí)行如下功能：允許終端200與 諸如信息提供服務(wù)器300的外部裝置通信。
[0062] 最后，根據(jù)本發(fā)明范例實施例的控制部分270可以控制輸入圖像獲取部分210、位 置和位移測量部分220、增強現(xiàn)實實施部分230、用戶接口部分240、信息搜索部分250和通 信部分260之間的數(shù)據(jù)流動。換言之，控制部分270可以控制來自終端200外部或其部件 之間的數(shù)據(jù)流動，由此使得輸入圖像獲取部分210、位置和位移測量部分220、增強現(xiàn)實實 施部分230、用戶接口部分240、信息搜索部分250和通信部分260執(zhí)行其獨特功能。
[0063] 可以通過可記錄到計算機可讀介質(zhì)的各種計算機手段以可執(zhí)行程序命令的形式 實施本發(fā)明的實施例。計算機可讀介質(zhì)可以包括程序命令、數(shù)據(jù)文件和數(shù)據(jù)結(jié)構(gòu)的僅一種 或其組合。介質(zhì)上記錄的程序命令可以是為本發(fā)明專門設(shè)計的部分或計算機軟件領(lǐng)域的 技術(shù)人員也可使用。計算機可讀記錄介質(zhì)包括諸如硬盤、軟盤、磁帶的磁介質(zhì)，諸如CD-ROM 和DVD的光學介質(zhì)，諸如軟磁盤（floptical)的磁光介質(zhì)以及專門設(shè)計成存儲和執(zhí)行程序 的諸如R〇M、RAM和閃速存儲器的硬件裝置。程序命令不僅包括匯編程序生成的機器語言代 碼，而且包括可由解釋程序使用的高層級代碼等，它們是由計算機執(zhí)行的。上述硬件裝置能 夠作為超過一個軟件模塊來工作，以執(zhí)行本發(fā)明的動作，在相反情況下它們能夠同樣做。 [0064] 盡管已經(jīng)參考優(yōu)選實施例展示和描述了本發(fā)明，但本領(lǐng)域的技術(shù)人員將要理解， 可以做出各種變化和修改而不脫離以下權(quán)利要求中界定的本發(fā)明精神和范圍。
[0065] 因此，一定不能將本發(fā)明的創(chuàng)意限于所解釋的實施例，以下專利權(quán)利要求以及包 括與專利權(quán)利要求相等或等價的變化的每樣東西都屬于本發(fā)明創(chuàng)意的范疇。
【權(quán)利要求】
1. 一種利用輸入到終端的圖像及其相關(guān)信息，以增強現(xiàn)實（AR)的形式提供所述終端 視野中包括的對象的信息的方法，包括如下步驟： (a) 通過參考至少一條關(guān)于終端位置、位移和視角的信息，指定與所述輸入圖像對應(yīng)的 該終端的視野；以及 (b) 獲取與所述終端視野中包括的對象對應(yīng)的圖形元素，該對象的身份已利用用于匹 配樓宇圖像的技術(shù)被識別，以及通過在終端屏幕上顯示的該對象位置上提供圖形元素，以 增強現(xiàn)實的形式和輸入圖像一起顯示所獲取的圖形元素。
2. 根據(jù)權(quán)利要求1所述的方法，其中由頂點對應(yīng)于所述終端的視見平截頭體指定所述 視野。
3. 根據(jù)權(quán)利要求1所述的方法，其中所述圖形元素包括所述對象的商標、標志或圖案 標識中的至少一種。
4. 一種利用輸入到終端的圖像及其相關(guān)信息，以增強現(xiàn)實（AR)的形式提供所述終端 視野中包括的對象信息的方法，包括如下步驟： (a) 通過參考至少一條關(guān)于該終端的位置、位移和視角的信息，指定與所述輸入圖像對 應(yīng)的該終端的視野；以及 (b) 在第一對象的位置處有差異地以增強現(xiàn)實形式和輸入圖像一起顯示多個圖形元 素，所述多個圖形元素分別對應(yīng)于包括在該終端視野中并顯示于其屏幕上的第一對象以及 包括在其視野中且未顯示于其屏幕上的第二對象，其中第二對象由于被所述第一對象隱藏 而不在屏幕上顯示。
5. -種利用輸入的圖像和與其相關(guān)的信息，以增強現(xiàn)實（AR)的形式提供視野中包括 的對象信息的終端，包括： 位置和位移測量部分，通過參考至少一條關(guān)于其位置、位移和視角的信息，指定與所述 輸入圖像對應(yīng)的其視野； 信息搜索部分，如果對象被作為查詢輸入，利用用于匹配樓宇圖像的技術(shù)識別其視野 中包括的對象，并獲取與所識別對象對應(yīng)的圖形元素；以及 用戶接口部分，以增強現(xiàn)實的形式和輸入圖像一起顯示所獲取的圖形元素，該圖形元 素提供在其屏幕上顯示的所述對象的位置上。
6. 根據(jù)權(quán)利要求5所述的終端，其中由頂點對應(yīng)于該終端的視見平截頭體指定所述視 野。
7. 根據(jù)權(quán)利要求5所述的終端，其中所述圖形元素包括所述對象的商標、標志或圖案 標識中的至少一種。
8. -種利用輸入的圖像和與其相關(guān)的信息，以增強現(xiàn)實（AR)的形式提供視野中包括 的對象的信息的終端，包括： 位置和位移測量部分，通過參考至少一條關(guān)于該終端的位置、位移和視角的信息，指定 與所述輸入圖像對應(yīng)的其視野；以及 用戶接口部分，在第一對象的位置處有差異地以增強現(xiàn)實形式和輸入圖像一起顯示多 個圖形元素，所述多個圖形元素分別對應(yīng)于包括在其視野中并顯示于其屏幕上的第一對象 以及包括在其視野中且未顯示于其屏幕上的第二對象，其中該第二對象由于被所述第一對 象隱藏而沒有在屏幕上顯示。
9. 一種介質(zhì)，記錄計算機可讀程序，以執(zhí)行根據(jù)權(quán)利要求1到4的任一項所述的方法。
【文檔編號】G06T1/00GK104221056SQ201180008527
【公開日】2014年12月17日 申請日期:2011年1月27日 優(yōu)先權(quán)日:2010年2月5日
【發(fā)明者】柳重熙, 李慶淑 申請人:英特爾公司