專(zhuān)利名稱(chēng)：圖像匹配裝置和圖像匹配方法
技術(shù)領(lǐng)域：
本發(fā)明涉及圖像匹配裝置和圖像匹配方法。
背景技術(shù)：
利用在從相機(jī)接收到的圖像上覆蓋(overlay)從網(wǎng)絡(luò)接收到的圖像以及還可從網(wǎng)絡(luò)接收到的任何附加信息(例如在設(shè)備上正在播放哪首音樂(lè)等)，將環(huán)境視覺(jué)化變?yōu)榱丝赡?。這種類(lèi)型的增強(qiáng)型視圖經(jīng)常被稱(chēng)為“增強(qiáng)現(xiàn)實(shí)”(AR)。AR應(yīng)用需要識(shí)別用戶向其請(qǐng)求獲得信息的設(shè)備。作為AR應(yīng)用的示例的Sekai相機(jī)基于已捕獲到目標(biāo)設(shè)備的移動(dòng)設(shè)備的位置信息來(lái)識(shí)別目標(biāo)設(shè)備。該位置信息是使用移動(dòng)設(shè)備中的GPS、運(yùn)動(dòng)和角度傳感器來(lái)計(jì)算的。然而，GPS不提供足夠的精確度，并且插入各個(gè)設(shè)備的位置會(huì)打擾到最終用戶并且將是不被接受的。作為AR應(yīng)用的另一示例的ARToolKit通過(guò)利用要被相機(jī)捕獲的標(biāo)記來(lái)識(shí)別目標(biāo)設(shè)備。然而，最終用戶需要在不同位置放置標(biāo)記，并因而最終用戶不會(huì)接受該解決方案。US2010135527提出了通過(guò)執(zhí)行圖像匹配來(lái)識(shí)別設(shè)備的AR應(yīng)用。根據(jù)該申請(qǐng)，移動(dòng)互聯(lián)網(wǎng)設(shè)備將捕獲的設(shè)備圖像與圖像數(shù)據(jù)庫(kù)中存儲(chǔ)的多個(gè)候選設(shè)備圖像相比較，以識(shí)別所捕獲的設(shè)備。該解決方案優(yōu)于Sekai相機(jī)和ARToolKit，因?yàn)樵摻鉀Q方案不需要使用位置信息和標(biāo)記。然而，當(dāng)圖像數(shù)據(jù)庫(kù)存儲(chǔ)很多設(shè)備圖像時(shí)，圖像匹配的處理時(shí)間將增加，并且圖像匹配的精確度也將退化。因此，期望改進(jìn)圖像匹配的處理時(shí)間和精確度。

發(fā)明內(nèi)容
根據(jù)本發(fā)明的一個(gè)方面，提供了圖像匹配裝置。該裝置包括:存儲(chǔ)單元，被配置為存儲(chǔ)連接到局域網(wǎng)的一個(gè)或更多個(gè)設(shè)備的圖像數(shù)據(jù)；獲取單元，被配置為獲得通過(guò)捕獲設(shè)備而獲得的設(shè)備圖像的圖像數(shù)據(jù)；指定單元，被配置為指定要被用于圖像匹配的一個(gè)或更多個(gè)局域網(wǎng)；以及圖像匹配單元，被配置為執(zhí)行所獲得的圖像數(shù)據(jù)與所存儲(chǔ)的連接到所指定的局域網(wǎng)的一個(gè)或更多個(gè)設(shè)備的圖像數(shù)據(jù)的圖像匹配。參考附圖，由下面的示例性實(shí)施例的描述，本發(fā)明的其他特征將變得顯而易見(jiàn)。


圖1示意了示例性系統(tǒng)，其可包括根據(jù)一些實(shí)施例的圖像匹配裝置。圖2示意了根據(jù)第一實(shí)施例的組件的示例性部署。圖3A-3C示意了根據(jù)一些實(shí)施例的組件的示例性細(xì)節(jié)。圖4示意了根據(jù)一些實(shí)施例的示例性上下文表。圖5示意了根據(jù)一些實(shí)施例，用于管理上下文表的總體操作的示例。圖6示意了根據(jù)本實(shí)施例，用于產(chǎn)生AR圖像的總體操作的示例。圖7不意了不例性的捕犾圖像和AR圖像。圖8示意了根據(jù)第二實(shí)施例的組件的示例性部署。
圖9示意了根據(jù)第三實(shí)施例的組件的示例性部署。圖10示意了根據(jù)第三實(shí)施例，用于執(zhí)行圖像匹配的總體操作的示例。圖11示意了根據(jù)第四實(shí)施例的組件的示例性部署。
具體實(shí)施例方式現(xiàn)在將參照附圖描述本發(fā)明的實(shí)施例。下面描述的各個(gè)實(shí)施例將有助于從一般到更特殊地理解多種概念。應(yīng)該注意到，本發(fā)明的技術(shù)范圍由權(quán)利要求所限定，而不受下面描述的各個(gè)實(shí)施例限制。此外，在實(shí)施例中描述的特征的所有組合對(duì)于本發(fā)明來(lái)說(shuō)不一定都是必不可少的。本發(fā)明的一個(gè)方面涉及執(zhí)行圖像匹配的圖像匹配裝置。圖像匹配是用于通過(guò)設(shè)備的圖像數(shù)據(jù)來(lái)識(shí)別設(shè)備的過(guò)程。設(shè)備的圖像數(shù)據(jù)可以是設(shè)備自己的圖片，或者是從設(shè)備的圖片提取的特征值，例如，形狀、顏色等等。用于圖像匹配的圖像數(shù)據(jù)取決于圖像匹配的算法，諸如縮放不變特征變換(Scale Invariant Feature Transform, SIFT)、加速魯棒性特征(Speeded-Up Robust Features, SURF)以及來(lái)自加速段測(cè)試(Accelerated SegmentTest,FAST)的特征。下文中，術(shù)語(yǔ)“設(shè)備圖像”表示設(shè)備的圖片，以及術(shù)語(yǔ)“圖像數(shù)據(jù)”表示用于執(zhí)行對(duì)設(shè)備的圖像匹配的數(shù)據(jù)。設(shè)備圖像可以是靜止圖像或是運(yùn)動(dòng)圖像的幀。圖1示意了示例性系統(tǒng)100，在該系統(tǒng)100中，可以應(yīng)用根據(jù)本發(fā)明的一些實(shí)施例的圖像匹配裝置。下面，將在增強(qiáng)現(xiàn)實(shí)(AR)應(yīng)用的上下文中描述圖像匹配裝置。然而，可以將圖像匹配裝置用于稍后描述的其他應(yīng)用。系統(tǒng)100可以包括移動(dòng)電話101、個(gè)人網(wǎng)絡(luò)應(yīng)用服務(wù)器(PNAS) 102、網(wǎng)關(guān)(G/W) 103和一個(gè)或更多個(gè)設(shè)備104。移動(dòng)設(shè)備10UPNAS 102和G/W 103中的任何設(shè)備可以作為下面描述的圖像匹配裝置操作。移動(dòng)電話101是向用戶107提供AR圖像的移動(dòng)設(shè)備。移動(dòng)電話101是用戶終端的示例，并且可以使用其他用戶終端，例如膝上型PC、桌面型PC和數(shù)字相機(jī)。G/W 103是LAN 105和互聯(lián)網(wǎng)106之間的網(wǎng)關(guān)設(shè)備，并且可以管理LAN 105。設(shè)備104連接到LAN 105并經(jīng)由G/W 103向PNAS 102提供其信息?？梢杂筛鶕?jù)本發(fā)明的實(shí)施例的圖像匹配裝置來(lái)識(shí)別可連接到局域網(wǎng)的任何設(shè)備。局域網(wǎng)包括圖1中示出的家庭網(wǎng)絡(luò)，以及車(chē)內(nèi)網(wǎng)絡(luò)、辦公室網(wǎng)絡(luò)和其他閉合網(wǎng)絡(luò)。通過(guò)使用已知的遠(yuǎn)程接入技術(shù)，設(shè)備104是從PNAS 102可達(dá)的。根據(jù)本發(fā)明的實(shí)施例，為了保持圖像匹配簡(jiǎn)單和資源需求較小，要與輸入設(shè)備相比較的設(shè)備被縮減為連接到局域網(wǎng)的設(shè)備。PNAS 102是用于聚合在局域網(wǎng)(例如家庭網(wǎng)絡(luò)和車(chē)內(nèi)網(wǎng)絡(luò))中發(fā)現(xiàn)的設(shè)備能力和狀態(tài)信息的服務(wù)器。在一些實(shí)施例中，PNAS102向移動(dòng)電話101提供圖像匹配服務(wù)。<第一實(shí)施例>圖2示意了根據(jù)本發(fā)明的第一實(shí)施例，系統(tǒng)100中的各個(gè)設(shè)備的示例性配置。圖2中的移動(dòng)電話210、PNAS 220和G/W 230分別對(duì)應(yīng)于圖1中的移動(dòng)電話10UPNAS 102和G/W 103。在第一實(shí)施例中，PNAS 220作為圖像匹配裝置進(jìn)行操作。移動(dòng)電話210可以包括CPU 211、存儲(chǔ)器212、相機(jī)213、觸摸屏214和AR瀏覽器215o CPU 211控制移動(dòng)電話210的整體操作。為了簡(jiǎn)單起見(jiàn)，沒(méi)有示出CPU 211和移動(dòng)電話210中的各個(gè)組件之間的箭頭。存儲(chǔ)器212存儲(chǔ)用于移動(dòng)電話210的操作的計(jì)算機(jī)程序和數(shù)據(jù)。相機(jī)213是用于捕獲圖像(包括設(shè)備104的設(shè)備圖像)的圖像形成單元。相機(jī)213可以根據(jù)來(lái)自用戶107的指令捕獲靜止圖像或運(yùn)動(dòng)圖像。相機(jī)213向AR瀏覽器215提供所捕獲的圖像。觸摸屏214顯示由AR瀏覽器215提供的AR圖像。觸摸屏214既操作為輸入單元也操作為輸出單元，然而作為觸摸屏214的補(bǔ)充或替代，移動(dòng)電話210可以分別包括輸入設(shè)備(例如，鍵盤(pán))和輸出設(shè)備(例如，非觸摸顯示器)。AR瀏覽器215從相機(jī)213獲得所捕獲的圖像，并在然后向PNAS 220發(fā)送所捕獲的圖像，以請(qǐng)求所捕獲的圖像的AR圖像。AR瀏覽器215從PNAS 220接收作為響應(yīng)的AR圖像，并在然后向觸摸屏214提供AR圖像。G/W 230可以包括CPU 231、存儲(chǔ)器232和上下文提供器233。CPU 231控制G/W230的整體操作。為了簡(jiǎn)單起見(jiàn)，沒(méi)有示出CPU 231和G/W 230中的各個(gè)組件之間的箭頭。存儲(chǔ)器232存儲(chǔ)用于G/W 230的操作的計(jì)算機(jī)程序和數(shù)據(jù)。上下文提供器233發(fā)現(xiàn)連接到LAN 105的設(shè)備104。上下文提供器233可以例如使用諸如UPnP、DLNA, Zigbee和Bluetooth等協(xié)議來(lái)發(fā)現(xiàn)設(shè)備104。當(dāng)G/W支持一個(gè)以上協(xié)議時(shí)，上下文提供器233可以使用不同的協(xié)議發(fā)現(xiàn)不同的LAN。作為設(shè)備發(fā)現(xiàn)的補(bǔ)充或替代，用戶107可以手動(dòng)將設(shè)備104注冊(cè)到上下文提供器233。上下文提供器233還從已發(fā)現(xiàn)的或已注冊(cè)的設(shè)備104獲得上下文信息。設(shè)備104的上下文信息是表示設(shè)備的信息，并且可以包括靜態(tài)信息，例如設(shè)備標(biāo)識(shí)、設(shè)備類(lèi)型、設(shè)備模型、設(shè)備制造商、設(shè)備能力、以及設(shè)備的易記名稱(chēng)、可能操作的菜單(例如，播放音樂(lè)、與用戶107的朋友開(kāi)啟聊天會(huì)話)，還可以包括動(dòng)態(tài)信息。例如，什么文件、應(yīng)用和多媒體內(nèi)容被存儲(chǔ)在設(shè)備中、什么服務(wù)和應(yīng)用正在運(yùn)行、誰(shuí)在使用設(shè)備、以及現(xiàn)在使用設(shè)備104的朋友的列表。上下文提供器233向PNAS 220提供所獲得的上下文信息。上下文提供器233具有唯一標(biāo)識(shí)符，該唯一標(biāo)識(shí)符被用于識(shí)別由G/W 230管理的一個(gè)或更多個(gè)LAN 105。PNAS 220從移動(dòng)電話210獲得圖像，識(shí)別所獲得的圖像中包括的設(shè)備，并創(chuàng)建AR圖像，在該AR圖像上覆蓋了與所識(shí)別的設(shè)備有關(guān)的信息。PNAS 220將所產(chǎn)生的AR圖像發(fā)送回移動(dòng)電話210。PNAS 220可以包括CPU 221、存儲(chǔ)器222、AR圖像編排器(composer) 223、圖像匹配器224、上下文管理器225和設(shè)備圖像數(shù)據(jù)庫(kù)226。CPU 221控制PNAS 220的整體操作。為了簡(jiǎn)單起見(jiàn)，沒(méi)有示出CPU 221和PNAS 220中的各個(gè)組件之間的箭頭。存儲(chǔ)器222存儲(chǔ)用于PNAS 220的操作的計(jì)算機(jī)程序和數(shù)據(jù)。設(shè)備圖像數(shù)據(jù)庫(kù)226存儲(chǔ)對(duì)相同型號(hào)的所有設(shè)備來(lái)說(shuō)公共的上下文信息。設(shè)備圖像數(shù)據(jù)庫(kù)226中存儲(chǔ)的上下文信息的示例可以包括設(shè)備型號(hào)、設(shè)備規(guī)范、版本日期、分類(lèi)價(jià)格和設(shè)備制造商。上下文信息還包括設(shè)備的圖像數(shù)據(jù)。上下文信息還可以包括所支持的協(xié)議，上下文提供器223可以使用該所支持的協(xié)議來(lái)連接到具有該設(shè)備型號(hào)的設(shè)備。作為協(xié)議信息的替代或補(bǔ)充，可以將對(duì)軟件的引用包括在上下文信息中，該軟件可安裝在上下文提供器223中，用于連接到具有該設(shè)備型號(hào)的設(shè)備。如上所述，圖像數(shù)據(jù)取決于用于使用圖像匹配的算法。從而，設(shè)備圖像數(shù)據(jù)庫(kù)226可以包括針對(duì)不同算法的不同圖像數(shù)據(jù)集合。設(shè)備圖像數(shù)據(jù)庫(kù)226還可以包括針對(duì)通過(guò)從不同角度捕獲設(shè)備而獲得的設(shè)備圖像的不同圖像數(shù)據(jù)集合。可以由PNAS 220的操作員、AR服務(wù)的服務(wù)提供商、AR服務(wù)的用戶和/或設(shè)備制造商通過(guò)管理接口將上下文信息注冊(cè)到設(shè)備圖像數(shù)據(jù)庫(kù)226。設(shè)備圖像數(shù)據(jù)庫(kù)226可以具有從設(shè)備圖像提取圖像數(shù)據(jù)的功能。設(shè)備型號(hào)的上下文信息與設(shè)備型號(hào)的標(biāo)識(shí)相關(guān)聯(lián)，以使得通過(guò)使用設(shè)備型號(hào)的標(biāo)識(shí)作為關(guān)鍵字來(lái)獲取上下文信息。例如，設(shè)備型號(hào)的標(biāo)識(shí)可以是設(shè)備制造商的名稱(chēng)與型號(hào)名稱(chēng)的組合，或者其可以是相同設(shè)備型號(hào)中公共的序列號(hào)的前三雙。上下文管理器225管理用于執(zhí)行圖像匹配的圖像數(shù)據(jù)以及上下文信息。如圖3B中示出的，上下文管理器225可以包括上下文表321、設(shè)備信息獲取單元322、型號(hào)信息獲取單元323和軟件提供單元324。圖4示意了上下文表321的示例。上下文表321存儲(chǔ)設(shè)備104的標(biāo)識(shí)、設(shè)備104連接到的LAN的LAN標(biāo)識(shí)、設(shè)備104的圖像數(shù)據(jù)的集合以及設(shè)備104的上下文信息，以使得LAN標(biāo)識(shí)、圖像數(shù)據(jù)的集合和上下文信息與設(shè)備標(biāo)識(shí)相關(guān)聯(lián)。列“設(shè)備ID” 401表示設(shè)備標(biāo)識(shí)，列“LAN ID”表示LAN標(biāo)識(shí)，列“圖像數(shù)據(jù)集”表示圖像數(shù)據(jù)的集合，以及列“上下文信息”表示上下文信息。LAN標(biāo)識(shí)是PNAS 102可以借以唯一地標(biāo)識(shí)LAN的標(biāo)識(shí)。LAN標(biāo)識(shí)的示例是G/W的全球IP地址與G/W使用來(lái)管理LAN的私人標(biāo)識(shí)的配對(duì)。上下文表321可以包括連接到不同LAN的設(shè)備的多個(gè)條目。例如，設(shè)備“設(shè)備A”連接到LAN “LAN A”和“LANC”，設(shè)備“設(shè)備B”連接到LAN “LAN A”，以及設(shè)備“設(shè)備D”連接到LAN “LAN B”。圖像數(shù)據(jù)的集合可以包括多個(gè)圖像數(shù)據(jù)，例如針對(duì)從不同角度捕獲的設(shè)備的設(shè)備圖像的不同圖形數(shù)據(jù)以及用于執(zhí)行圖像匹配的不同算法的不同圖像數(shù)據(jù)。設(shè)備信息獲取單元322獲得設(shè)備104的設(shè)備標(biāo)識(shí)、設(shè)備104連接到的LAN的LAN標(biāo)識(shí)以及設(shè)備104的上下文信息。當(dāng)上下文表321不包括針對(duì)于其設(shè)備標(biāo)識(shí)已被獲得的設(shè)備的條目時(shí)，設(shè)備信息獲取單元232創(chuàng)建在其中將LAN標(biāo)識(shí)和上下文信息與設(shè)備標(biāo)識(shí)相關(guān)聯(lián)的條目。當(dāng)上下文表321已經(jīng)包括針對(duì)于其設(shè)備標(biāo)識(shí)已被獲得的設(shè)備的條目時(shí)，設(shè)備信息獲取單元232使用設(shè)備標(biāo)識(shí)作為關(guān)鍵字來(lái)更新LAN標(biāo)識(shí)和上下文信息。型號(hào)信息獲取單元323從設(shè)備圖像數(shù)據(jù)庫(kù)226獲取設(shè)備104的圖像數(shù)據(jù)以及在設(shè)備104的設(shè)備型號(hào)中公共的上下文信息。型號(hào)信息獲取單元可以使用從上下文提供器233獲得的上下文信息中包括的設(shè)備型號(hào)作為關(guān)鍵字。如稍后描述的，軟件提供單元324向上下文提供器233提供軟件。設(shè)備圖像數(shù)據(jù)庫(kù)226和上下文管理器225都存儲(chǔ)圖像數(shù)據(jù)，然而設(shè)備圖像數(shù)據(jù)庫(kù)226與上下文管理器225中存儲(chǔ)的針對(duì)特定設(shè)備104的圖像數(shù)據(jù)可以不同。圖像數(shù)據(jù)庫(kù)226中存儲(chǔ)的設(shè)備圖像在設(shè)備型號(hào)中是公共的(換言之，在具有相同設(shè)計(jì)的設(shè)備中是公共的)。另一方面，上下文管理器225中存儲(chǔ)的設(shè)備圖像是單個(gè)設(shè)備104所特有的，因?yàn)樵O(shè)備104的實(shí)際設(shè)備圖像可以不同于在設(shè)備型號(hào)中公共的設(shè)備104的設(shè)備圖像。例如，當(dāng)用戶107在設(shè)備104的表面貼上字符印章以個(gè)性化設(shè)備104時(shí)，所捕獲的包含印章的設(shè)備圖像可降低與在設(shè)備型號(hào)中公共的設(shè)備圖像的圖像匹配的性能。AR圖像編排器233基于從移動(dòng)電話210接收到的捕獲的設(shè)備圖像，產(chǎn)生AR圖像。在圖2中，AR圖像編排器223包括在PNAS 220中，然而可以代之將AR圖像編排器223包括在移動(dòng)電話210中。如圖3C中示出的，AR圖像編排器223可以包括AR圖像產(chǎn)生單元331、設(shè)備圖像獲取單元332、圖像數(shù)據(jù)產(chǎn)生單元333和發(fā)送單元334。設(shè)備圖像獲取單元332從移動(dòng)電話獲得包括設(shè)備104的設(shè)備圖像在內(nèi)的捕獲的圖像。圖像數(shù)據(jù)產(chǎn)生單元333基于設(shè)備104的設(shè)備圖像來(lái)產(chǎn)生設(shè)備104的圖像數(shù)據(jù)。如上所述，要用于執(zhí)行圖像匹配的圖像數(shù)據(jù)取決于圖像匹配的算法。AR圖像產(chǎn)生單元331向圖像匹配器224發(fā)送圖像數(shù)據(jù)，并請(qǐng)求使用圖像數(shù)據(jù)來(lái)執(zhí)行圖像匹配。AR圖像產(chǎn)生單元331獲得針對(duì)所識(shí)別的設(shè)備的上下文信息，并通過(guò)將上下文信息覆蓋在捕獲的圖像上來(lái)產(chǎn)生AR圖像。發(fā)送單元334向移動(dòng)電話210發(fā)送所產(chǎn)生的AR圖像。圖像匹配器224識(shí)別其圖像已被捕獲的設(shè)備104。圖像匹配器224可以包括圖像數(shù)據(jù)獲取單元311、圖像匹配單元312、LAN指定單元313和上下文表更新單元314。圖像數(shù)據(jù)獲取單元311從AR圖像編排器223獲得圖像數(shù)據(jù)。LAN指定單元313指定要被用于圖像匹配的LAN 105。圖像匹配單元312將所獲得的圖像數(shù)據(jù)與上下文管理器225的上下文表321中存儲(chǔ)的圖像數(shù)據(jù)相比較。圖像匹配單元312向AR圖像編排器223返回圖像匹配的結(jié)果。例如，在所獲得的圖像數(shù)據(jù)與上下文表321中存儲(chǔ)的圖像數(shù)據(jù)之一匹配時(shí)，圖像匹配單元312返回捕獲的設(shè)備的設(shè)備標(biāo)識(shí)，以及在所獲得的圖像數(shù)據(jù)與上下文表321中存儲(chǔ)的所有圖像數(shù)據(jù)都不匹配時(shí)，返回出錯(cuò)。圖像匹配單元312使用所指定的LAN標(biāo)識(shí)來(lái)縮減將捕獲的設(shè)備的圖像數(shù)據(jù)與之相比較的圖像數(shù)據(jù)的數(shù)量。將要比較其圖像數(shù)據(jù)的設(shè)備稱(chēng)為“候選設(shè)備”?，F(xiàn)在將參考圖4中的上下文表321來(lái)描述示例。假設(shè)LAN指定單元313因?yàn)槠鋱D像已被捕獲的設(shè)備104很可能連接到“LAN A”而指定應(yīng)該將“LAN A”用于圖像匹配。在該情況下，圖像匹配單元312選擇“Dev A”、“Dev B”和“Dev C”作為候選設(shè)備，因?yàn)槠洹癓AN ID”402包括“LAN A”，并在然后，圖像匹配單元312將所獲得的圖像數(shù)據(jù)與候選設(shè)備的圖像數(shù)據(jù)相比較。圖5示意了根據(jù)本實(shí)施例，用于管理上下文表321的總體操作的示例。各個(gè)設(shè)備中包括的CPU執(zhí)行存儲(chǔ)在各個(gè)設(shè)備的存儲(chǔ)器中的計(jì)算機(jī)程序，以處理這些操作。在步驟S501中，上下文提供器233例如通過(guò)UPnP過(guò)程來(lái)發(fā)現(xiàn)連接到作為G/W 103的相同LAN 105的設(shè)備104。然后，上下文提供器233從已發(fā)現(xiàn)的設(shè)備104獲取上下文信息。上下文信息包括已發(fā)現(xiàn)的設(shè)備104的設(shè)備標(biāo)識(shí)。在步驟S502中，上下文提供器233向上下文管理器225提供已發(fā)現(xiàn)的設(shè)備104所連接到的LAN 105的LAN標(biāo)識(shí)，以及已發(fā)現(xiàn)的設(shè)備104的上下文信息。上下文提供器233可以使用其標(biāo)識(shí)來(lái)作為L(zhǎng)AN標(biāo)識(shí)。當(dāng)上下文提供器233支持一個(gè)以上協(xié)議時(shí)，上下文提供器233可以針對(duì)各個(gè)協(xié)議來(lái)發(fā)現(xiàn)連接到LAN的設(shè)備104。在該情況下，上下文提供器233可以將多個(gè)LAN標(biāo)識(shí)與其標(biāo)識(shí)一起向上下文管理器225發(fā)送。上下文管理器225從上下文提供器233接收LAN標(biāo)識(shí)和上下文信息(在相同情況下，還有上下文提供器233的標(biāo)識(shí))。在步驟S503中，上下文管理器225從設(shè)備圖像數(shù)據(jù)庫(kù)226獲取在已發(fā)現(xiàn)的設(shè)備104的設(shè)備型號(hào)中公共的上下文信息。上下文管理器225可以使用從上下文提供器233獲得的上下文信息中包括的設(shè)備型號(hào)的標(biāo)識(shí)來(lái)作為關(guān)鍵字。替代上下文信息本身，上下文管理器225可以獲取針對(duì)上下文信息的鏈接(例如，URL)。在步驟S504中，上下文管理器使用來(lái)自上下文提供器233和設(shè)備圖像數(shù)據(jù)庫(kù)226的上下文信息創(chuàng)建或更新上下文表中針對(duì)已發(fā)現(xiàn)的設(shè)備104的條目?？梢灾貜?fù)步驟S501到S504，以使得上下文表231存儲(chǔ)最新的上下文信息。圖6示意了根據(jù)本實(shí)施例，用于產(chǎn)生AR圖像的總體操作的示例。各個(gè)設(shè)備中包括的CPU執(zhí)行存儲(chǔ)在各個(gè)設(shè)備的存儲(chǔ)器中的計(jì)算機(jī)程序，以處理這些操作?？梢耘c圖6中描述的操作并行地執(zhí)行這些操作。
在步驟S601中，用戶107對(duì)移動(dòng)電話210進(jìn)行移動(dòng)來(lái)捕獲設(shè)備104，以及相機(jī)捕獲包括設(shè)備圖像的圖像，并向AR瀏覽器215發(fā)送捕獲的圖像。圖7示出了捕獲的圖像的示例。捕獲的圖像701包括設(shè)備104(例如，音頻設(shè)備)的設(shè)備圖像702。在該步驟中，AR瀏覽器215可以等待來(lái)自相機(jī)213的圖像變得穩(wěn)定?？梢允褂靡苿?dòng)電話210的運(yùn)動(dòng)和方向傳感器(未示出)以及連續(xù)的相機(jī)圖像之間的比較來(lái)確定該穩(wěn)定性。此外，當(dāng)捕獲的圖像中包括兩個(gè)或更多設(shè)備時(shí)，為了確定要識(shí)別的設(shè)備圖像，AR瀏覽器215可以等待用戶的輸入。例如，用戶107希望在觸摸屏214上僅指出用戶希望獲得與其有關(guān)的信息的設(shè)備104。在步驟S602中，AR瀏覽器215向AR圖像編排器223發(fā)送捕獲的圖像701。在步驟S603中，AR圖像編排器223從捕獲的圖像701提取設(shè)備圖像702，并基于設(shè)備圖像702來(lái)創(chuàng)建捕獲的設(shè)備104的圖像數(shù)據(jù)。當(dāng)捕獲的圖像701包括兩個(gè)或更多設(shè)備圖像時(shí)，AR圖像編排器223可以選擇設(shè)備圖像中的例如靠近捕獲的圖像701的中心的設(shè)備圖像。備選地，AR圖像編排器223可以提取各個(gè)設(shè)備的設(shè)備圖像。在該情況下，針對(duì)各個(gè)設(shè)備圖像執(zhí)行下面的過(guò)程。備選地，AR圖像編排器223可以由包括一個(gè)或更多個(gè)設(shè)備的整個(gè)捕獲的圖像來(lái)創(chuàng)建圖像數(shù)據(jù)。在步驟S604中，AR圖像編排器223向圖像匹配器224發(fā)送捕獲的設(shè)備104的圖像數(shù)據(jù)，并請(qǐng)求返回捕獲的設(shè)備104的設(shè)備標(biāo)識(shí)。如果在圖像數(shù)據(jù)中已經(jīng)匹配了多個(gè)設(shè)備，圖像匹配器224可以返回一個(gè)以上的設(shè)備標(biāo)識(shí)。圖像匹配器224可以返回捕獲的設(shè)備104在捕獲的圖像701中的位置和大小。在步驟S605中，圖像匹配器指定要被用于圖像匹配的一個(gè)或更多個(gè)LAN。當(dāng)移動(dòng)電話210經(jīng)由G/W 230與PNAS 220通信時(shí)，圖像匹配器224可以假設(shè)捕獲的設(shè)備104和移動(dòng)電話210連接到相同的LAN，并且可以選擇由G/W 230管理的LAN來(lái)作為要被用于圖像匹配的LAN。備選地，圖像匹配器224可以從具有捕獲的圖像701的移動(dòng)電話210接收LAN105的LAN標(biāo)識(shí)。移動(dòng)電話210可以通過(guò)來(lái)自用戶107的輸入獲得LAN標(biāo)識(shí)?？梢栽谝苿?dòng)電話210或PNAS 220中預(yù)設(shè)用于圖像匹配的一個(gè)或更多個(gè)LAN標(biāo)識(shí)。當(dāng)圖像匹配器224獲得上下文提供器233的標(biāo)識(shí)時(shí)，圖像匹配器224可以指定由G/W 230管理的、包括上下文提供器233的一個(gè)或更多個(gè)LAN。圖像匹配器224可以從移動(dòng)電話210獲得上下文提供器223的標(biāo)識(shí)。備選地，圖像匹配器224可以存儲(chǔ)與移動(dòng)電話的標(biāo)識(shí)相關(guān)聯(lián)的上下文提供器的標(biāo)識(shí)，并獲得移動(dòng)電話的標(biāo)識(shí)以識(shí)別所存儲(chǔ)的上下文提供器的標(biāo)識(shí)。用戶107可以將用戶107希望用于圖像匹配的一個(gè)或更多個(gè)LAN注冊(cè)到PNAS 220。在步驟S606中，如上所述，圖像匹配器224執(zhí)行捕獲的設(shè)備104的圖像數(shù)據(jù)的圖像匹配。在步驟S607中，圖像匹配器224向AR圖像編排器223返回捕獲的設(shè)備104的設(shè)備標(biāo)識(shí)。當(dāng)捕獲的圖像包括一個(gè)以上的設(shè)備圖像時(shí)，圖像匹配器224可以返回一個(gè)以上的設(shè)備標(biāo)識(shí)。在步驟S608中，AR圖像編排器223使用設(shè)備標(biāo)識(shí)來(lái)作為關(guān)鍵字，向上下文管理器225請(qǐng)求捕獲的設(shè)備104的上下文信息。在步驟S609中，上下文管理器225向AR圖像編排器223返回上下文信息。在步驟S610中，AR圖像編排器223通過(guò)將捕獲的設(shè)備104的上下文信息704覆蓋在捕獲的圖像701上，產(chǎn)生圖7中示出的AR圖像703。在步驟S611中，AR圖像編排器223向AR瀏覽器215發(fā)送AR圖像703。在步驟S612中，AR瀏覽器215在觸摸屏214上顯示AR圖像703。在步驟S613中，圖像匹配器224可以使用圖像匹配的結(jié)果來(lái)更新上下文管理器225中的上下文表，以提高下一次比較的性能。捕獲的設(shè)備104的圖像數(shù)據(jù)應(yīng)該表示捕獲的設(shè)備104的最新的設(shè)備圖像。因此，圖像匹配器224可以通過(guò)使用在步驟S604處獲得的圖像數(shù)據(jù)來(lái)更新上下文表321中存儲(chǔ)的圖像數(shù)據(jù)的集合。例如，圖像匹配器224可以將上下文表321中存儲(chǔ)的圖像數(shù)據(jù)替換為獲得的圖像數(shù)據(jù)。此外，當(dāng)在步驟S604處獲得的圖像數(shù)據(jù)從不同的角度和不同的距離捕獲設(shè)備104時(shí)，可以將獲得的圖像數(shù)據(jù)添加到上下文表321中存儲(chǔ)的圖像數(shù)據(jù)的集合?，F(xiàn)在將描述本實(shí)施例的一些變型。這些變型還可以應(yīng)用于后面描述的其他實(shí)施例。圖像匹配器224還可以通過(guò)使用周?chē)h(huán)境的信息(例如，移動(dòng)電話210發(fā)現(xiàn)的WifiSSID、移動(dòng)電話210的角度傳感器的值以及相機(jī)能力)來(lái)縮減候選設(shè)備。此外或備選地，上下文管理器225可以對(duì)候選設(shè)備分類(lèi)，以使得具有最高可能性的候選設(shè)備在第一位，具有較低可能性的設(shè)備在其后。圖像匹配器224可以跳過(guò)與圖像匹配器224確定在移動(dòng)電話210的當(dāng)前位置處相機(jī)213不能捕獲的候選設(shè)備的圖像匹配。例如，如果用戶107在家中并且汽車(chē)駕駛在遠(yuǎn)處，汽車(chē)導(dǎo)航設(shè)備不能被相機(jī)213捕獲。不存在用于確定設(shè)備被相機(jī)213捕獲到的可能性的單個(gè)算法，然而可以通過(guò)多個(gè)方式進(jìn)行估計(jì)。圖像匹配器224可以使用移動(dòng)設(shè)備210的大致位置信息和與家和汽車(chē)的距離，其是由GPS測(cè)量的，由蜂窩網(wǎng)絡(luò)的三角測(cè)量法測(cè)量的，或者是提前提供的。圖像匹配器224可以使用過(guò)去的圖像匹配結(jié)果以及用戶107之前與設(shè)備104互動(dòng)的頻率。如果從過(guò)去的圖像匹配知道了移動(dòng)電話210和設(shè)備104之間的相對(duì)位置，圖像匹配器224可以估計(jì)相機(jī)213的大致位置和角度。例如，房間中有TV和立體聲并且TV和立體聲位于相機(jī)213永遠(yuǎn)不可在同時(shí)捕獲到它們的路線上，則當(dāng)TV在捕獲的圖像中時(shí)，可以將立體聲從候選設(shè)備移除。<第二實(shí)施例>圖8示意了根據(jù)本發(fā)明的第二實(shí)施例，系統(tǒng)100中的各個(gè)設(shè)備的示例性配置。移動(dòng)電話810和PNAS 820分別對(duì)應(yīng)于移動(dòng)電話101和PNAS 102。G/W 103未包括在根據(jù)本實(shí)施例的系統(tǒng)中。在第二實(shí)施例中，移動(dòng)電話810作為圖像匹配裝置操作。圖8中示出的組件的功能和操作與圖2中示出的組件相似，并因此將省略對(duì)這些組件的描述。在本實(shí)施例中，移動(dòng)電話810包括CPU 211、存儲(chǔ)器212、相機(jī)213、觸摸屏214、AR瀏覽器215、AR圖像編排器223、圖像匹配器224、上下文提供器233和上下文管理器225。因?yàn)橐苿?dòng)電話810包括上下文提供器233，移動(dòng)電話810可以發(fā)現(xiàn)設(shè)備104。上下文管理器225可以管理同一移動(dòng)電話810中的上下文提供器233已發(fā)現(xiàn)的設(shè)備。移動(dòng)電話810可以具有另一 AR瀏覽器應(yīng)用(例如，Sekai相機(jī))，并在上下文提供器233沒(méi)發(fā)現(xiàn)任何設(shè)備時(shí)使用該AR瀏覽器應(yīng)用。當(dāng)上下文提供器233發(fā)現(xiàn)了設(shè)備104時(shí)，移動(dòng)電話810可以代之以使用AR瀏覽器215。<第三實(shí)施例>圖9示意了根據(jù)本發(fā)明的第三實(shí)施例，系統(tǒng)100中的各個(gè)設(shè)備的示例性配置。圖930中的移動(dòng)電話910、PNAS 920和G/W 930分別對(duì)應(yīng)于移動(dòng)電話101、PNAS 102和G/W103。在第三實(shí)施例中，PNAS 920和移動(dòng)電話910作為圖像匹配裝置操作。亦即，移動(dòng)電話910包括圖像匹配器224a和上下文管理器225a，亦即PNAS 920包括圖像匹配器224b和上下文管理器225b。圖9中示出的組件的功能和操作與圖2中示出的組件相似，并因此將省略對(duì)這些組件的描述。在本實(shí)施例中，與移動(dòng)電話910所提供的相比，PNAS 920可以提供更強(qiáng)大的圖像匹配。PNAS 920將具有比移動(dòng)電話910更大的處理功率。因此，可發(fā)生:由移動(dòng)電話910中的圖像匹配器224a執(zhí)行的圖像匹配失敗，而由PNAS 920中的圖像匹配器224b執(zhí)行的圖像匹配成功。因此，AR圖像編排器223可以首先向圖像匹配器224a請(qǐng)求圖像匹配，并在接下來(lái)向圖像匹配器225b請(qǐng)求圖像匹配。此外，可發(fā)生:上下文管理器225a、225b不包括針對(duì)捕獲的設(shè)備的實(shí)體，例如當(dāng)上下文提供器233不能發(fā)現(xiàn)捕獲的設(shè)備時(shí)，即是如此。在該情況下，PNAS 920中的圖像匹配器224b可以將捕獲的設(shè)備104的圖像數(shù)據(jù)與設(shè)備圖像數(shù)據(jù)庫(kù)226中存儲(chǔ)的圖像數(shù)據(jù)相比較。在本實(shí)施例中，上下文管理器225a可以作為上下文管理器225b的高速緩存器工作。亦即，上下文管理器225a中的上下文表可以是上下文管理器225b中的上下文表的子集。假設(shè)上下文管理器225包括圖4中示出的上下文表321。當(dāng)移動(dòng)電話210與G/W 230中的上下文提供器233相關(guān)聯(lián)時(shí)(例如，當(dāng)移動(dòng)電話210正在經(jīng)由G/W 230與互聯(lián)網(wǎng)106連接時(shí)，或者當(dāng)用戶107向PNAS 220注冊(cè)移動(dòng)電話210與G/W 230之間的關(guān)聯(lián)時(shí))，上下文管理器225a中的上下文表可以僅包括其LAN標(biāo)識(shí)對(duì)應(yīng)于G/W 930的實(shí)體410?？梢栽跉w屬訂戶服務(wù)器、活躍地址簿、IP多媒體子系統(tǒng)中的存在性和資源列表XDMS中維持移動(dòng)電話210與上下文提供器233之間的關(guān)聯(lián)。當(dāng)上下文管理器225a從上下文管理器225b接收數(shù)據(jù)時(shí)，上下文管理器225b可以對(duì)上下文管理器225a授權(quán)?？梢詫⒁苿?dòng)電話910的預(yù)訂用于驗(yàn)證?？梢栽谄渌麑?shí)施例中執(zhí)行該授權(quán)。作為從上下文管理器225b獲得上下文信息的替代或補(bǔ)充，上下文管理器225a還可以從上下文提供器223和/或設(shè)備104獲得上下文信肩、O圖10示意了根據(jù)本實(shí)施例，用于執(zhí)行圖像匹配的總體操作的示例。圖10中的操作在圖6中的步驟S606處執(zhí)行。各個(gè)設(shè)備中包括的CPU執(zhí)行存儲(chǔ)在各個(gè)設(shè)備的存儲(chǔ)器中的計(jì)算機(jī)程序，以處理這些操作。在步驟S1001中，AR圖像編排器223向圖像匹配器224a請(qǐng)求執(zhí)行對(duì)捕獲的設(shè)備104的圖像數(shù)據(jù)的圖像匹配。在步驟S1002中，圖像匹配器224a將捕獲的設(shè)備104的圖像數(shù)據(jù)與上下文管理器225a管理的候選設(shè)備的圖像數(shù)據(jù)相比較。當(dāng)存在匹配的候選設(shè)備(步驟S1002中是“是”)時(shí)，圖像匹配器224a向AR圖像編排器223返回匹配的候選設(shè)備的設(shè)備標(biāo)識(shí)。當(dāng)不存在任何匹配的候選設(shè)備(步驟S1002中是“否”)時(shí)，過(guò)程進(jìn)行到步驟S1003。在步驟S1003中，AR圖像編排器223向圖像匹配器224b請(qǐng)求執(zhí)行對(duì)捕獲的設(shè)備104的圖像數(shù)據(jù)的圖像匹配。在步驟S1004中，圖像匹配器224b將捕獲的設(shè)備104的圖像數(shù)據(jù)與上下文管理器225b管理的候選設(shè)備的圖像數(shù)據(jù)相比較。當(dāng)存在匹配的候選設(shè)備(步驟S1004中是“是”)時(shí)，圖像匹配器224b向AR圖像編排器223返回匹配的候選設(shè)備的設(shè)備標(biāo)識(shí)。當(dāng)不存在任何匹配的候選設(shè)備(步驟S1004中是“否”)時(shí)，過(guò)程進(jìn)行到步驟S1005。在步驟S1005中，圖像匹配器224b將捕獲的設(shè)備104的圖像數(shù)據(jù)與設(shè)備圖像數(shù)據(jù)庫(kù)226中存儲(chǔ)的圖像數(shù)據(jù)相比較。在該情況下，圖像匹配器224b不可返回捕獲的設(shè)備104的設(shè)備標(biāo)識(shí)。從而，在步驟S1007中，圖像匹配器224b可以向AR圖像編排器223返回與捕獲的設(shè)備104的設(shè)備型號(hào)有關(guān)的上下文信息。為何上下文管理器225a、225b不包括針對(duì)捕獲的設(shè)備104的實(shí)體的一個(gè)可能的原因是捕獲的設(shè)備104正在使用上下文提供器233不支持的協(xié)議。在該情況下，通過(guò)安裝處理協(xié)議集合的軟件來(lái)更新上下文提供器233以發(fā)現(xiàn)設(shè)備并獲取設(shè)備的上下文信息是可能的。在步驟S1006中，上下文管理器225b中的軟件提供單元324使用在步驟S1005處獲得的設(shè)備型號(hào)標(biāo)識(shí)來(lái)從設(shè)備圖像數(shù)據(jù)庫(kù)226或設(shè)備制造商服務(wù)器獲得這種軟件。軟件提供單元324查詢上下文提供器233，以看是否已經(jīng)安裝了軟件以及否則是否可能使用例如TR-069來(lái)進(jìn)行安裝。如果軟件提供單元324知道上下文提供器的狀態(tài)，可以跳過(guò)查詢。軟件提供單元324將軟件安裝到上下文提供器233。上下文提供器233啟動(dòng)安裝的軟件，并發(fā)現(xiàn)尚未發(fā)現(xiàn)的設(shè)備。在這之后，上下文管理器225a、225b可以通過(guò)圖5中描述的過(guò)程來(lái)管理安裝了軟件的設(shè)備。圖像匹配器224b可以在步驟S1006發(fā)生之前返回結(jié)果，因?yàn)閷④浖惭b到上下文提供器233的過(guò)程花費(fèi)了時(shí)間。在該情況下，圖像匹配器224b將在軟件安裝完成之后從AR圖像編排器接收新的圖像數(shù)據(jù)，并且由上下文提供器233來(lái)發(fā)現(xiàn)設(shè)備104，以及圖像匹配器224b可以通過(guò)針對(duì)新的圖像數(shù)據(jù)運(yùn)行步驟S1005來(lái)返回設(shè)備的上下文信息。〈第四實(shí)施例〉圖11示意了根據(jù)本發(fā)明的第四實(shí)施例，系統(tǒng)100中的各個(gè)設(shè)備的示例性配置。圖1130中的移動(dòng)電話1110、PNAS 1120和G/W 930分別對(duì)應(yīng)于移動(dòng)電話10UPNAS 102和G/W103。在第四實(shí)施例中，G/W 1130作為圖像匹配裝置操作。亦即，G/W 1130包括CPU 231、存儲(chǔ)器232、上下文提供器233、圖像匹配器224、AR圖像編排器223和上下文管理器225。此夕卜，相機(jī)213與移動(dòng)電話1110位于不同的位置，并例如工作為辦公室中的監(jiān)視相機(jī)。圖11中示出的組件的功能和操作與圖2中示出的組件相似，并因此將省略對(duì)這些組件的描述。向G/W 1130中的AR圖像編排器223傳送相機(jī)213捕獲的圖像。然后，AR圖像編排器223產(chǎn)生AR圖像，并向移動(dòng)電話1110提供AR圖像。用戶107可以根據(jù)捕獲的圖像上覆蓋的上下文信息與在顯示器中遠(yuǎn)程找到的設(shè)備104交互。在本實(shí)施例中，可以將移動(dòng)電話1110的移動(dòng)或者觸摸屏214上的控制連接到遠(yuǎn)程相機(jī)213的傾斜、搖動(dòng)和縮放控制相連接?？梢允褂脧倪@些控制導(dǎo)出或從相機(jī)213本身獲得的相機(jī)角度和縮放比率來(lái)如第一實(shí)施例中討論的對(duì)候選設(shè)備進(jìn)行分類(lèi)和縮減。移動(dòng)電話1110可以具有內(nèi)置的相機(jī)，以及例如通過(guò)將觸摸屏214的上半部指派給相機(jī)圖像并將下半部指派給另一方，AR瀏覽器215可以對(duì)來(lái)自相機(jī)213和內(nèi)置相機(jī)的圖像都進(jìn)行呈現(xiàn)。AR瀏覽器215使用戶107可以同時(shí)與這些屏幕交互，從一個(gè)屏幕向另一個(gè)屏幕傳遞對(duì)象或信息。AR瀏覽器可以在內(nèi)置相機(jī)的捕獲圖像中發(fā)現(xiàn)相機(jī)213。然后，PNAS1120可以連接到相機(jī)213，并在內(nèi)置相機(jī)的捕獲圖像中發(fā)現(xiàn)設(shè)備。當(dāng)相機(jī)213被AR瀏覽器215發(fā)現(xiàn)時(shí)，可以向上下文提供器233提供相機(jī)213的粗略位置，作為用于提高估計(jì)精確度的上下文信息的一部分?？梢酝ㄟ^(guò)與AR瀏覽器215中的其他已知設(shè)備的相對(duì)位置，以及還使用移動(dòng)電話1110中的各個(gè)傳感器來(lái)再次估計(jì)相機(jī)213的粗略位置。<其他實(shí)施例>在所述實(shí)施例中，在AR應(yīng)用的上下文中描述根據(jù)本發(fā)明的圖像匹配技術(shù)。然而，圖像匹配技術(shù)不限于AR應(yīng)用。例如，作為捕獲的設(shè)備104的上下文信息的替代或補(bǔ)充，AR圖像編排器223或AR瀏覽器213還可以獲得與捕獲的設(shè)備104有關(guān)的數(shù)據(jù)。與捕獲的設(shè)備104有關(guān)的數(shù)據(jù)可以包括用于控制捕獲的設(shè)備104的軟件以及與捕獲的設(shè)備104相關(guān)聯(lián)的廣告。當(dāng)捕獲的設(shè)備104例如是TV時(shí)，移動(dòng)電話101可以獲得移動(dòng)電話101使用其來(lái)作為T(mén)V的遙控器工作的軟件。數(shù)據(jù)可以包括互聯(lián)網(wǎng)上的社交聯(lián)網(wǎng)服務(wù)、日志和微博服務(wù)中與捕獲的設(shè)備104有關(guān)通告和評(píng)論，可選地，該通告和評(píng)論是通過(guò)考慮到最終用戶與這些服務(wù)的社交關(guān)系而獲得的。數(shù)據(jù)還可以包括從設(shè)備104的賣(mài)方獲得的軟件補(bǔ)丁和防火墻更新信息、對(duì)在設(shè)備104中運(yùn)行的新軟件的推薦或廣告。AR瀏覽器213可以將獲得的數(shù)據(jù)、軟件或其補(bǔ)丁與捕獲的圖像一起顯示。根據(jù)本發(fā)明的實(shí)施例，可以改進(jìn)處理時(shí)間和圖像的精確度。此外，第一實(shí)施例提供了以下優(yōu)點(diǎn):解決方案可應(yīng)用于計(jì)算資源受限的移動(dòng)設(shè)備。第二實(shí)施例提供了以下優(yōu)點(diǎn):當(dāng)在移動(dòng)設(shè)備本地發(fā)生圖像匹配和信息的覆蓋時(shí)，快速給出對(duì)最終用戶的反饋。與第一實(shí)施例相比，還對(duì)網(wǎng)絡(luò)資源有更少的需求。第三實(shí)施例提供了混合解決方案，其中，由需要較少計(jì)算資源的算法本地地處理圖像，以及通過(guò)高級(jí)的和/或資源需求量大的算法來(lái)對(duì)結(jié)果進(jìn)行補(bǔ)償。盡管已經(jīng)參考示例性實(shí)施例描述了本發(fā)明，應(yīng)當(dāng)理解本發(fā)明不限于所公開(kāi)的示例性實(shí)施例。以下權(quán)利要求的范圍與最寬的解釋相一致，以便包含所有的這種修改和等同結(jié)構(gòu)與功能。
權(quán)利要求
1.一種圖像匹配裝置(101、102、103)，包括: 存儲(chǔ)單元(321)，被配置為存儲(chǔ)連接到局域網(wǎng)(105)的一個(gè)或更多個(gè)設(shè)備(104)的圖像數(shù)據(jù)； 獲取單元(311)，被配置為獲得通過(guò)捕獲設(shè)備而獲得的設(shè)備圖像的圖像數(shù)據(jù)； 指定單元(313)，被配置為指定要被用于圖像匹配的一個(gè)或更多個(gè)局域網(wǎng)；以及 圖像匹配單元(312)，被配置為執(zhí)行所獲得的圖像數(shù)據(jù)與所存儲(chǔ)的連接到所指定的局域網(wǎng)的一個(gè)或更多個(gè)設(shè)備的圖像數(shù)據(jù)的圖像匹配。
2.根據(jù)權(quán)利要求1所述的裝置，還包括:被配置為通過(guò)使用所述圖像匹配的結(jié)果來(lái)獲得與所捕獲的設(shè)備有關(guān)的數(shù)據(jù)的單元(331)。
3.根據(jù)權(quán)利要求2所述的裝置，其中，所述與所捕獲的設(shè)備有關(guān)的數(shù)據(jù)包括以下至少一項(xiàng):與所捕獲的設(shè)備有關(guān)的上下文信息、用于控制所捕獲的設(shè)備的軟件、以及與所捕獲的設(shè)備相關(guān)聯(lián)的廣告。
4.根據(jù)權(quán)利要求1-3中任一項(xiàng)所述的裝置，其中，所述圖像匹配單元還被配置為:基于捕獲設(shè)備時(shí)的條件，降低在圖像匹配中要使用的圖像數(shù)據(jù)的數(shù)量，或者改變?cè)趫D像匹配中要使用的圖像數(shù)據(jù)的順序。
5.根據(jù)權(quán)利要求1-4中任一項(xiàng)所述的裝置，還包括:被配置為針對(duì)所捕獲的設(shè)備的圖像數(shù)據(jù)將所獲得的圖像數(shù)據(jù)存儲(chǔ)在所述存儲(chǔ)單元中的單元(314)。
6.根據(jù)權(quán)利要求2-5中任一項(xiàng)所述的裝置(102)，其中 所述裝置是用于向移動(dòng)終端(101)提供圖像匹配服務(wù)的服務(wù)器， 所述獲取單元被配置為通過(guò)從所述移動(dòng)終端接收?qǐng)D像數(shù)據(jù)來(lái)獲得圖像數(shù)據(jù)。
7.根據(jù)權(quán)利要求6所述的裝置，其中: 所述獲取單元還被配置為從所述移動(dòng)終端接收所捕獲的設(shè)備的設(shè)備圖像，以及所述裝置還包括: 被配置為通過(guò)將與所捕獲的設(shè)備有關(guān)的數(shù)據(jù)覆蓋到接收到的設(shè)備圖像來(lái)產(chǎn)生增強(qiáng)現(xiàn)實(shí)圖像的單元(331)，以及 被配置為向所述移動(dòng)終端發(fā)送所產(chǎn)生的增強(qiáng)現(xiàn)實(shí)圖像的單元(334)。
8.根據(jù)權(quán)利要求6或7所述的裝置，還包括:數(shù)據(jù)庫(kù)(226)，被配置為針對(duì)每個(gè)設(shè)備型號(hào)存儲(chǔ)圖像數(shù)據(jù)，其中，所述圖像匹配單元還被配置為:當(dāng)在與所述存儲(chǔ)單元中存儲(chǔ)的圖像數(shù)據(jù)的圖像匹配中沒(méi)有匹配得到圖像數(shù)據(jù)時(shí)，執(zhí)行所獲得的圖像數(shù)據(jù)與所述數(shù)據(jù)庫(kù)中存儲(chǔ)的圖像數(shù)據(jù)的圖像匹配。
9.根據(jù)權(quán)利要求8所述的裝置，還包括:被配置為向所指定的局域網(wǎng)的網(wǎng)關(guān)(103)或移動(dòng)終端(101)提供軟件的單元(324)，所述軟件使得當(dāng)在與所述存儲(chǔ)單元中存儲(chǔ)的圖像數(shù)據(jù)的圖像匹配中沒(méi)有匹配得到圖像數(shù)據(jù)時(shí)，所述網(wǎng)關(guān)或所述移動(dòng)終端能夠發(fā)現(xiàn)所捕獲的設(shè)備。
10.根據(jù)權(quán)利要求2-5中任一項(xiàng)所述的裝置(101)，其中 所述裝置是移動(dòng)終端，以及 所述獲取單元還被配置為獲得所捕獲的設(shè)備的設(shè)備圖像，以及所述裝置還包括: 被配置為通過(guò)將與所捕獲的設(shè)備有關(guān)的數(shù)據(jù)覆蓋到所獲得的設(shè)備圖像來(lái)產(chǎn)生增強(qiáng)現(xiàn)實(shí)圖像的單元(331)，以及顯示單元(214)，被配置為顯示所產(chǎn)生的增強(qiáng)現(xiàn)實(shí)圖像。
11.根據(jù)權(quán)利要求10所述的裝置，還包括:圖像形成單元(213)，被配置為捕獲設(shè)備圖像。
12.根據(jù)權(quán)利要求10或11所述的裝置，還包括:單元(215)，被配置為，當(dāng)在與所述存儲(chǔ)單元中存儲(chǔ)的圖像數(shù)據(jù)的圖像匹配中沒(méi)有匹配得到圖像數(shù)據(jù)時(shí)，請(qǐng)求提供圖像匹配服務(wù)的服務(wù)器(102)執(zhí)行對(duì)所獲得的圖像數(shù)據(jù)的圖像匹配。
13.—種通過(guò)使用存儲(chǔ)器(321)來(lái)進(jìn)行的圖像匹配方法，所述存儲(chǔ)器存儲(chǔ)連接到局域網(wǎng)(105)的一個(gè)或更多個(gè)設(shè)備(104)的圖像數(shù)據(jù)，所述方法包括: 獲得(S604)通過(guò)捕獲設(shè)備而獲得的設(shè)備圖像的圖像數(shù)據(jù)； 指定(S605)要被用于圖像匹配的一個(gè)或更多個(gè)局域網(wǎng)，以及執(zhí)行(S606)所獲得的圖像數(shù)據(jù)與所存儲(chǔ)的連接到所指定的局域網(wǎng)的一個(gè)或更多個(gè)設(shè)備的圖像數(shù)據(jù)的圖像 匹配。
全文摘要
本發(fā)明提供了圖像匹配裝置。該裝置包括存儲(chǔ)單元，被配置為存儲(chǔ)連接到局域網(wǎng)的一個(gè)或更多個(gè)設(shè)備的圖像數(shù)據(jù)；獲取單元，被配置為獲得通過(guò)捕獲設(shè)備而獲得的設(shè)備圖像的圖像數(shù)據(jù)；指定單元，被配置為指定要被用于圖像匹配的一個(gè)或更多個(gè)局域網(wǎng)；以及圖像匹配單元，被配置為執(zhí)行所獲得的圖像數(shù)據(jù)與所存儲(chǔ)的連接到所指定的局域網(wǎng)的一個(gè)或更多個(gè)設(shè)備的圖像數(shù)據(jù)的圖像匹配。
文檔編號(hào)G06F13/00GK103168294SQ201080069749
公開(kāi)日2013年6月19日 申請(qǐng)日期2010年10月22日 優(yōu)先權(quán)日2010年10月22日
發(fā)明者松村剛志, 約翰·吉爾姆, 村上慎吾, 小田稔周, 安川健太 申請(qǐng)人:瑞典愛(ài)立信有限公司