增強(qiáng)現(xiàn)實(shí)的實(shí)現(xiàn)方法、客戶(hù)端裝置和服務(wù)器的制造方法
【專(zhuān)利摘要】本發(fā)明提出一種增強(qiáng)現(xiàn)實(shí)的實(shí)現(xiàn)方法、客戶(hù)端裝置和服務(wù)器。其中,該方法包括:獲得待識(shí)別對(duì)象的相關(guān)信息,其中,待識(shí)別對(duì)象的相關(guān)信息包括待識(shí)別對(duì)象的圖像信息;向服務(wù)器發(fā)送相關(guān)信息,并接收服務(wù)器根據(jù)相關(guān)信息返回的待識(shí)別對(duì)象的增強(qiáng)信息及增強(qiáng)信息的顯示位置信息;以及根據(jù)顯示位置信息,同時(shí)顯示待識(shí)別對(duì)象的增強(qiáng)信息和圖像信息以實(shí)現(xiàn)增強(qiáng)現(xiàn)實(shí)。本發(fā)明實(shí)施例的增強(qiáng)現(xiàn)實(shí)的實(shí)現(xiàn)方法、客戶(hù)端裝置和服務(wù)器,提供了一種實(shí)現(xiàn)增強(qiáng)現(xiàn)實(shí)的新的交互方式,通過(guò)待識(shí)別對(duì)象的圖像信息用戶(hù)可以獲得該對(duì)象的增強(qiáng)信息,通過(guò)增強(qiáng)信息用戶(hù)可以獲得該對(duì)象中的有用信息,增加對(duì)待識(shí)別對(duì)象的了解。
【專(zhuān)利說(shuō)明】增強(qiáng)現(xiàn)實(shí)的實(shí)現(xiàn)方法、客戶(hù)端裝置和服務(wù)器
【技術(shù)領(lǐng)域】
[0001]本發(fā)明涉及計(jì)算機(jī)【技術(shù)領(lǐng)域】,尤其涉及一種增強(qiáng)現(xiàn)實(shí)的實(shí)現(xiàn)方法、客戶(hù)端裝置和服務(wù)器。
【背景技術(shù)】
[0002]增強(qiáng)現(xiàn)實(shí)技術(shù)(Augmented Reality Technique,簡(jiǎn)稱(chēng)AR),是在虛擬現(xiàn)實(shí)基礎(chǔ)上發(fā)展起來(lái)的新技術(shù),是通過(guò)計(jì)算機(jī)系統(tǒng)提供的信息增加用戶(hù)對(duì)現(xiàn)實(shí)世界感知的技術(shù),并將計(jì)算機(jī)生成的虛擬物體、場(chǎng)景或系統(tǒng)提示信息疊加到真實(shí)場(chǎng)景中,從而實(shí)現(xiàn)對(duì)現(xiàn)實(shí)的“增強(qiáng)”。
[0003]目前,具有增強(qiáng)現(xiàn)實(shí)技術(shù)的應(yīng)用程序例如社交類(lèi)和地圖類(lèi)應(yīng)用程序中的增強(qiáng)現(xiàn)實(shí)內(nèi)容是由開(kāi)發(fā)者制作完成的,具體而言,開(kāi)發(fā)者基于地理定位和圖像標(biāo)記匹配原則制作增強(qiáng)現(xiàn)實(shí)內(nèi)容,并將增強(qiáng)現(xiàn)實(shí)內(nèi)容封裝在該應(yīng)用程序的開(kāi)發(fā)工具包(SDK,SoftwareDevelopment Kit))中,以使用戶(hù)可根據(jù)增加現(xiàn)實(shí)內(nèi)容獲得用戶(hù)所需對(duì)象的有用信息。
[0004]然而,目前具有增強(qiáng)現(xiàn)實(shí)技術(shù)的應(yīng)用程序并不支持基于圖像識(shí)別信息做增強(qiáng)現(xiàn)實(shí)內(nèi)容的方式,其主要原因是基于圖像識(shí)別的效果不理想。具體而言,如果用戶(hù)基于圖像向現(xiàn)有的具有增強(qiáng)現(xiàn)實(shí)技術(shù)的應(yīng)用程序發(fā)送請(qǐng)求之后,該應(yīng)用程序識(shí)別該圖像,也無(wú)法顯示該圖像的有用信息,用戶(hù)無(wú)法獲得該圖像的有用信息。因此,具有增強(qiáng)現(xiàn)實(shí)技術(shù)的應(yīng)用程序的用戶(hù)體驗(yàn)并不理想。
【發(fā)明內(nèi)容】
[0005]本發(fā)明旨在至少解決上述技術(shù)問(wèn)題之一。
[0006]為此,本發(fā)明的第一個(gè)目的在于提出一種增強(qiáng)現(xiàn)實(shí)的實(shí)現(xiàn)方法。該方法提供了一種實(shí)現(xiàn)增強(qiáng)現(xiàn)實(shí)的新的交互方式,通過(guò)待識(shí)別對(duì)象的圖像信息用戶(hù)可以獲得該對(duì)象的增強(qiáng)信息,通過(guò)增強(qiáng)信息用戶(hù)可以獲得該對(duì)象中的有用信息,增加了用戶(hù)對(duì)待識(shí)別對(duì)象的了解,提聞了用戶(hù)的體驗(yàn)度。
[0007]本發(fā)明的第二個(gè)目的在于提出一種增強(qiáng)現(xiàn)實(shí)的實(shí)現(xiàn)方法。
[0008]本發(fā)明的第三個(gè)目的在于提出一種客戶(hù)端裝置。
[0009]本發(fā)明的第四個(gè)目的在于提出一種服務(wù)器。
[0010]為了實(shí)現(xiàn)上述目的,本發(fā)明第一方面實(shí)施例的增強(qiáng)現(xiàn)實(shí)的實(shí)現(xiàn)方法,包括以下步驟:獲得待識(shí)別對(duì)象的相關(guān)信息,其中,所述待識(shí)別對(duì)象的相關(guān)信息包括所述待識(shí)別對(duì)象的圖像信息;向服務(wù)器發(fā)送所述相關(guān)信息,并接收所述服務(wù)器根據(jù)所述相關(guān)信息返回的所述待識(shí)別對(duì)象的增強(qiáng)信息及所述增強(qiáng)信息的顯示位置信息;以及根據(jù)所述顯示位置信息,同時(shí)顯示所述待識(shí)別對(duì)象的所述增強(qiáng)信息和所述圖像信息以實(shí)現(xiàn)增強(qiáng)現(xiàn)實(shí)。
[0011]本發(fā)明實(shí)施例的增強(qiáng)現(xiàn)實(shí)的實(shí)現(xiàn)方法,向服務(wù)器發(fā)送待識(shí)別對(duì)象的相關(guān)信息,并接收服務(wù)器返回待識(shí)別對(duì)象的增強(qiáng)信息及增強(qiáng)信息的顯示位置信息,以及同時(shí)顯示待識(shí)別對(duì)象的圖像信息和增強(qiáng)信息,通過(guò)增強(qiáng)信息用戶(hù)可以獲得待識(shí)別對(duì)象中的有用信息,方便了用戶(hù)對(duì)待識(shí)別對(duì)象的了解。[0012]為了實(shí)現(xiàn)上述目的,本發(fā)明第二方面實(shí)施例的增強(qiáng)現(xiàn)實(shí)的實(shí)現(xiàn)方法,包括以下步驟:接收客戶(hù)端發(fā)送的待識(shí)別對(duì)象的相關(guān)信息,其中,所述待識(shí)別對(duì)象的相關(guān)信息包括所述待識(shí)別對(duì)象的圖像信息;對(duì)所述相關(guān)信息進(jìn)行識(shí)別,獲得對(duì)應(yīng)的識(shí)別結(jié)果,根據(jù)所述識(shí)別結(jié)果生成所述待識(shí)別對(duì)象的增強(qiáng)信息及所述增強(qiáng)信息的顯示位置信息;以及向所述客戶(hù)端返回所述增強(qiáng)信息及所述增強(qiáng)信息的顯示位置信息,以使所述客戶(hù)端根據(jù)所述顯示位置信息,同時(shí)顯示所述待識(shí)別對(duì)象的所述增強(qiáng)信息和所述圖像信息以實(shí)現(xiàn)增強(qiáng)現(xiàn)實(shí)。
[0013]本發(fā)明實(shí)施例的增強(qiáng)現(xiàn)實(shí)的實(shí)現(xiàn)方法,接收客戶(hù)端發(fā)送的待識(shí)別對(duì)象的相關(guān)信息,對(duì)相關(guān)信息進(jìn)行識(shí)別,獲得對(duì)應(yīng)的識(shí)別結(jié)果,并根據(jù)識(shí)別結(jié)果生成待識(shí)別對(duì)象的增強(qiáng)信息及增強(qiáng)信息的顯示位置信息,以及將增強(qiáng)信息和顯示位置信息發(fā)送至客戶(hù)端,由此,提供了一種實(shí)現(xiàn)增強(qiáng)現(xiàn)實(shí)的新的交互方式,使得客戶(hù)端可以獲得待識(shí)別對(duì)象的增強(qiáng)信息,通過(guò)增強(qiáng)信息用戶(hù)可以獲得該對(duì)象中的有用信息,增加對(duì)待識(shí)別對(duì)象的了解。
[0014]為了實(shí)現(xiàn)上述目的,本發(fā)明第三方面實(shí)施例的客戶(hù)端裝置,包括:獲得模塊,用于獲得待識(shí)別對(duì)象的相關(guān)信息,其中,所述待識(shí)別對(duì)象的相關(guān)信息包括所述待識(shí)別對(duì)象的圖像信息;通信模塊,用于向服務(wù)器發(fā)送所述相關(guān)信息,并接收所述服務(wù)器根據(jù)所述相關(guān)信息返回的所述待識(shí)別對(duì)象的增強(qiáng)信息及所述增強(qiáng)信息的顯示位置信息;以及顯示模塊,用于根據(jù)所述顯示位置信息,同時(shí)顯示所述待識(shí)別對(duì)象的所述增強(qiáng)信息和所述圖像信息以實(shí)現(xiàn)增強(qiáng)現(xiàn)實(shí)。
[0015]本發(fā)明實(shí)施例的客戶(hù)端裝置,通過(guò)獲得模塊獲得待識(shí)別對(duì)象的相關(guān)信息,通過(guò)通信模塊向服務(wù)器發(fā)送待識(shí)別對(duì)象的相關(guān)信息,并接收服務(wù)器返回待識(shí)別對(duì)象的增強(qiáng)信息及增強(qiáng)信息的顯示位置信息,以及通過(guò)顯示模塊同時(shí)顯示待識(shí)別對(duì)象的圖像信息和增強(qiáng)信息,通過(guò)增強(qiáng)信息用戶(hù)可以獲得待識(shí)別對(duì)象中的有用信息,方便了用戶(hù)對(duì)待識(shí)別對(duì)象的了解。
[0016]為了實(shí)現(xiàn)上述目的,本發(fā)明第四方面實(shí)施例的服務(wù)器,包括:接收模塊,用于接收客戶(hù)端發(fā)送的待識(shí)別對(duì)象的相關(guān)信息,其中,所述待識(shí)別對(duì)象的相關(guān)信息包括所述待識(shí)別對(duì)象的圖像信息;融合處理模塊,用于對(duì)所述接收模塊接收的所述相關(guān)信息進(jìn)行識(shí)別,獲得對(duì)應(yīng)的識(shí)別結(jié)果,根據(jù)所述識(shí)別結(jié)果生成所述待識(shí)別對(duì)象的增強(qiáng)信息及所述增強(qiáng)信息的顯示位置信息;以及返回模塊,用于向所述客戶(hù)端返回所述融合處理模塊生成的所述增強(qiáng)信息及所述增強(qiáng)信息的顯示位置信息,以使所述客戶(hù)端根據(jù)所述顯示位置信息,同時(shí)顯示所述待識(shí)別對(duì)象的所述增強(qiáng)信息和所述圖像信息以實(shí)現(xiàn)增強(qiáng)現(xiàn)實(shí)。
[0017]本發(fā)明實(shí)施例的服務(wù)器,通過(guò)接收模塊接收客戶(hù)端發(fā)送的待識(shí)別對(duì)象的相關(guān)信息,通過(guò)融合處理模塊對(duì)相關(guān)信息進(jìn)行識(shí)別,獲得對(duì)應(yīng)的識(shí)別結(jié)果,并根據(jù)識(shí)別結(jié)果生成待識(shí)別對(duì)象的增強(qiáng)信息及增強(qiáng)信息的顯示位置信息,以及通過(guò)返回模塊將增強(qiáng)信息及增強(qiáng)信息的顯示位置信息發(fā)送至客戶(hù)端,由此,提供了一種實(shí)現(xiàn)增強(qiáng)現(xiàn)實(shí)的新的交互方式,使得客戶(hù)端可以獲得待識(shí)別對(duì)象的增強(qiáng)信息,通過(guò)增強(qiáng)信息用戶(hù)可以獲得該對(duì)象中的有用信息,增加對(duì)待識(shí)別對(duì)象的了解。
[0018]本發(fā)明附加的方面和優(yōu)點(diǎn)將在下面的描述中部分給出,部分將從下面的描述中變得明顯,或通過(guò)本發(fā)明的實(shí)踐了解到。
【專(zhuān)利附圖】
【附圖說(shuō)明】[0019]本發(fā)明上述的和/或附加的方面和優(yōu)點(diǎn)從下面結(jié)合附圖對(duì)實(shí)施例的描述中將變得明顯和容易理解,其中,
[0020]圖1是根據(jù)本發(fā)明一個(gè)實(shí)施例的增強(qiáng)現(xiàn)實(shí)的實(shí)現(xiàn)方法的流程圖。
[0021]圖2是根據(jù)本發(fā)明一個(gè)實(shí)施例的增強(qiáng)現(xiàn)實(shí)的實(shí)現(xiàn)方法的流程圖。
[0022]圖3是根據(jù)本發(fā)明一個(gè)實(shí)施例的客戶(hù)端裝置的結(jié)構(gòu)示意圖。
[0023]圖4是根據(jù)本發(fā)明一個(gè)實(shí)施例的服務(wù)器的結(jié)構(gòu)示意圖。
[0024]圖5是根據(jù)本發(fā)明一個(gè)具體實(shí)施例的服務(wù)器的結(jié)構(gòu)示意圖。
【具體實(shí)施方式】
[0025]下面詳細(xì)描述本發(fā)明的實(shí)施例,所述實(shí)施例的示例在附圖中示出,其中自始至終相同或類(lèi)似的標(biāo)號(hào)表示相同或類(lèi)似的元件或具有相同或類(lèi)似功能的元件。下面通過(guò)參考附圖描述的實(shí)施例是示例性的,僅用于解釋本發(fā)明,而不能理解為對(duì)本發(fā)明的限制。相反,本發(fā)明的實(shí)施例包括落入所附加權(quán)利要求書(shū)的精神和內(nèi)涵范圍內(nèi)的所有變化、修改和等同物。
[0026]下面參考附圖描述本發(fā)明實(shí)施例的增強(qiáng)現(xiàn)實(shí)的實(shí)現(xiàn)方法、客戶(hù)端裝置和服務(wù)器。
[0027]圖1是根據(jù)本發(fā)明一個(gè)實(shí)施例的增強(qiáng)現(xiàn)實(shí)的實(shí)現(xiàn)方法的流程圖。該實(shí)施例從客戶(hù)端側(cè)進(jìn)行描述,如圖1所示,該增強(qiáng)現(xiàn)實(shí)的實(shí)現(xiàn)方法包括:
[0028]S101,獲得待識(shí)別對(duì)象的相關(guān)信息,其中,待識(shí)別對(duì)象的相關(guān)信息包括待識(shí)別對(duì)象的圖像信息。
[0029]在該實(shí)施例中,上述客戶(hù)端可以是移動(dòng)終端,也可以是穿戴式設(shè)備例如增強(qiáng)現(xiàn)實(shí)眼鏡。其中,移動(dòng)終端是手機(jī)、平板電腦等具有各種操作系統(tǒng)的硬件設(shè)備。
[0030]在該實(shí)施例中,待識(shí)別對(duì)象的相關(guān)信息還可以包括待識(shí)別對(duì)象的聲音信息、位置信息以及通過(guò)傳感器獲得的各種數(shù)據(jù)等。
[0031]具體而言,在開(kāi)啟客戶(hù)端后,客戶(hù)端可通過(guò)攝像頭獲得待識(shí)別對(duì)象的圖像信息,還可通過(guò)聲音采集設(shè)備獲得待識(shí)別對(duì)象的聲音信息,以及還可通過(guò)位置采集模塊獲得待識(shí)別對(duì)象的位置信息等。
[0032]S102,向服務(wù)器發(fā)送相關(guān)信息,并接收服務(wù)器根據(jù)相關(guān)信息返回的待識(shí)別對(duì)象的增強(qiáng)信息及增強(qiáng)信息的顯示位置信息。
[0033]其中,待識(shí)別對(duì)象的增強(qiáng)信息可以包括但不限于推薦信息、聲音信息、地理服務(wù)信息等信息。
[0034]具體而言,在客戶(hù)端獲得待識(shí)別對(duì)象的圖像信息、聲音信息、位置信息之后,還可以分別對(duì)上述信息進(jìn)行預(yù)處理,例如,對(duì)待識(shí)別對(duì)象的圖像信息可進(jìn)行切割、壓縮等處理,以及對(duì)待識(shí)別對(duì)象的聲音信息可進(jìn)行去噪、濾波處理等處理,以提高服務(wù)器根據(jù)接收的預(yù)處理后的信息返回增強(qiáng)信息的效率。在對(duì)上述信息進(jìn)行預(yù)處理之后,客戶(hù)端將處理后的相關(guān)信息發(fā)送至服務(wù)器。服務(wù)器在接收到待識(shí)別對(duì)象的相關(guān)信息后,將對(duì)相關(guān)信息進(jìn)行識(shí)別,獲得對(duì)應(yīng)的識(shí)別結(jié)果,并根據(jù)識(shí)別結(jié)果生成待識(shí)別對(duì)象的增強(qiáng)信息及增強(qiáng)信息的顯示位置信息,以及將生成的待識(shí)別對(duì)象的增強(qiáng)信息及增強(qiáng)信息的顯示位置信息返回至客戶(hù)端。
[0035]其中,增強(qiáng)信息的顯示位置信息為服務(wù)器在待識(shí)別對(duì)象的圖像信息中預(yù)設(shè)地可以顯示增強(qiáng)信息的位置。[0036]S103,根據(jù)顯示位置信息,同時(shí)顯示待識(shí)別對(duì)象的增強(qiáng)信息和圖像信息以實(shí)現(xiàn)增強(qiáng)現(xiàn)實(shí)。
[0037]具體地,客戶(hù)端接收服務(wù)器返回的待識(shí)別對(duì)象的增強(qiáng)信息及增強(qiáng)信息的顯示位置信息,并按照預(yù)定的方式將增強(qiáng)信息渲染疊加到客戶(hù)端所獲得的圖像信息中,例如可利用全息投影的方式展示增強(qiáng)信息和圖像信息,全息投影的方式可使圖像信息中顯示的增強(qiáng)信息具有三維空間感,由此,使得客戶(hù)端可同時(shí)顯示待識(shí)別對(duì)象的增強(qiáng)信息和圖像信息,增強(qiáng)了圖像信息的現(xiàn)實(shí)性,方便了用戶(hù)對(duì)待識(shí)別對(duì)象的了解。
[0038]以客戶(hù)端獲得北京故宮博物館的圖像信息和地理信息為例,在客戶(hù)端獲得上述圖像信息后,可對(duì)上述圖像信息進(jìn)行切割、壓縮等處理,并在預(yù)處理之后,客戶(hù)端可將處理后的圖像信息和地理信息發(fā)送至服務(wù)器,服務(wù)器接收客戶(hù)端發(fā)送的待識(shí)別對(duì)象及北京故宮博物館的圖像信息和地理信息,首先判斷待識(shí)別對(duì)象的類(lèi)型,確定待識(shí)別對(duì)象為景物,則先對(duì)地理信息進(jìn)行識(shí)別,后對(duì)圖像信息進(jìn)行識(shí)別,具體地,首先對(duì)接收待識(shí)別對(duì)象的地理信息以獲得待識(shí)別對(duì)象的位置信息,然后通過(guò)服務(wù)器中的圖像識(shí)別模型對(duì)所接收到的圖像信息進(jìn)行識(shí)別,獲得該圖像信息對(duì)應(yīng)的簡(jiǎn)明信息,然后根據(jù)簡(jiǎn)明信息到信息源體系中獲得該圖像信息的詳細(xì)信息和推薦數(shù)據(jù),上述圖像信息的位置信息、詳細(xì)信息和推薦數(shù)據(jù)即為北京故宮博物館的圖像信息的增強(qiáng)信息,服務(wù)器在獲得北京故宮博物館的圖像信息的增強(qiáng)信息之后,為增強(qiáng)信息設(shè)置一個(gè)顯示位置信息,并將獲得的增強(qiáng)信息及增強(qiáng)信息的顯示位置信息返回至客戶(hù)端,客戶(hù)端上將同時(shí)顯示北京故宮博物館的圖像信息和增強(qiáng)信息。此外,服務(wù)器還可以從本地的信息源中獲得北京故宮博物館的圖像信息對(duì)應(yīng)的音頻文件,其中,該音頻文件可對(duì)北京故宮博物館的圖像信息中的景色或者物品進(jìn)行語(yǔ)音介紹,通過(guò)上述語(yǔ)音介紹用戶(hù)可以更多的了解北京博物館的景色或者物品的相關(guān)信息。
[0039]再以客戶(hù)端獲得狗的圖像信息和聲音信息為例,在客戶(hù)端將狗的圖像信息和聲音信息上傳至服務(wù)器后,服務(wù)器接收客戶(hù)端發(fā)送的待識(shí)別對(duì)象即狗的圖像信息和聲音信息,首先判斷待識(shí)別對(duì)象的類(lèi)型,確定待識(shí)別對(duì)象為動(dòng)物,則先對(duì)聲音信息進(jìn)行識(shí)別,后對(duì)圖像信息進(jìn)行識(shí)別,具體地,從本地保存的聲音識(shí)別模型中對(duì)接收的聲音信息進(jìn)行識(shí)別,以獲得該聲音信息對(duì)應(yīng)的狗的種類(lèi),然后通過(guò)本地保存的圖像識(shí)別模型對(duì)所接收到的圖像信息進(jìn)行識(shí)別,獲得該圖像信息對(duì)應(yīng)的簡(jiǎn)明信息例如狗的名稱(chēng),然后根據(jù)簡(jiǎn)明信息到信息源體系中獲得該圖像信息的詳細(xì)信息和推薦數(shù)據(jù)例如獲得狗的性格特點(diǎn)、飼養(yǎng)注意事項(xiàng)以及周?chē)膶?duì)應(yīng)的寵物醫(yī)院等增強(qiáng)信息,并結(jié)合圖像信息為該增強(qiáng)信息設(shè)置一個(gè)顯示位置信息,最后將獲得的增強(qiáng)信息及增強(qiáng)信息的顯示位置信息發(fā)送至客戶(hù)端,客戶(hù)端中將同時(shí)顯示狗的圖像信息和增強(qiáng)信息,通過(guò)增強(qiáng)信息用戶(hù)可以了解對(duì)狗進(jìn)行更全面的了解,方便了用戶(hù)對(duì)狗的飼養(yǎng)。
[0040]此外,在客戶(hù)端獲得例如某輛汽車(chē)的圖像信息后,服務(wù)器將為用戶(hù)返回該輛汽車(chē)對(duì)應(yīng)的名城、價(jià)格、性能以及相關(guān)購(gòu)買(mǎi)推薦信息等增強(qiáng)信息及增強(qiáng)信息的顯示位置信息,用戶(hù)通過(guò)客戶(hù)端上顯示的上述增強(qiáng)信息可以對(duì)該輛汽車(chē)進(jìn)行全面了解,提高了用戶(hù)的體驗(yàn)。
[0041]本發(fā)明實(shí)施例的增強(qiáng)現(xiàn)實(shí)的實(shí)現(xiàn)方法,向服務(wù)器發(fā)送待識(shí)別對(duì)象的相關(guān)信息,并接收服務(wù)器返回待識(shí)別對(duì)象的增強(qiáng)信息及增強(qiáng)信息的顯示位置信息,以及同時(shí)顯示待識(shí)別對(duì)象的圖像信息和增強(qiáng)信息,通過(guò)增強(qiáng)信息用戶(hù)可以獲得待識(shí)別對(duì)象中的有用信息,方便了用戶(hù)對(duì)待識(shí)別對(duì)象的了解。[0042]圖2是根據(jù)本發(fā)明一個(gè)實(shí)施例的增強(qiáng)現(xiàn)實(shí)的實(shí)現(xiàn)方法的流程圖。該實(shí)施例從服務(wù)器側(cè)進(jìn)行描述,如圖2所示,該增強(qiáng)現(xiàn)實(shí)的實(shí)現(xiàn)方法包括:
[0043]S201,接收客戶(hù)端發(fā)送的待識(shí)別對(duì)象的相關(guān)信息。
[0044]具體而言,服務(wù)器不僅可以接收客戶(hù)端發(fā)送的待識(shí)別對(duì)象的圖像信息,還可以接收待識(shí)別對(duì)象的聲音信息、位置信息和各種傳感器獲得的數(shù)據(jù)。
[0045]S202,對(duì)相關(guān)信息進(jìn)行識(shí)別,獲得對(duì)應(yīng)的識(shí)別結(jié)果,根據(jù)識(shí)別結(jié)果生成待識(shí)別對(duì)象的增強(qiáng)信息及增強(qiáng)信息的顯示位置信息。[0046]在該實(shí)施例中,可以采用串行/或并行的方式采用對(duì)應(yīng)的識(shí)別模型對(duì)相關(guān)信息進(jìn)行識(shí)別,獲得對(duì)應(yīng)的識(shí)別結(jié)果。其中,串行的方式為:獲得所述待識(shí)別對(duì)象對(duì)應(yīng)的類(lèi)型信息,根據(jù)所述類(lèi)型信息確定采用的識(shí)別模型的順序,并按照所述順序采用對(duì)應(yīng)的識(shí)別模型對(duì)所述相關(guān)信息進(jìn)行識(shí)別,獲得識(shí)別結(jié)果;例如,對(duì)于某種待識(shí)別對(duì)象可以先進(jìn)行聲音識(shí)別,等識(shí)別出一定種類(lèi)(達(dá)到一定概率時(shí)),再對(duì)圖像信息進(jìn)行識(shí)別,使圖像信息在上一步識(shí)別出的種類(lèi)中進(jìn)一步識(shí)別,提高識(shí)別概率;如果還沒(méi)有識(shí)別出具體對(duì)象名(標(biāo)識(shí))而進(jìn)一步確定了分類(lèi),則繼續(xù)在細(xì)分的分類(lèi)下進(jìn)行聲音識(shí)別或者其它信息識(shí)別,獲得識(shí)別結(jié)果。其中,并行的方式為:并行采用對(duì)應(yīng)的識(shí)別模型對(duì)所述相關(guān)信息進(jìn)行識(shí)別,獲得識(shí)別結(jié)果。例如,并行對(duì)待識(shí)別對(duì)象的相關(guān)信息進(jìn)行識(shí)別,例如可以按照Y=axl+bx2+cx3……(這個(gè)線性公式是個(gè)舉例,也可以是二次或者其它更復(fù)雜的計(jì)算方式)的方式進(jìn)行模型訓(xùn)練,Y表示待識(shí)別對(duì)象的最終識(shí)別概率,Xl表示采用聲音識(shí)別模型的識(shí)別概率,x2表示采用圖像識(shí)別模型的概率,x3表示位置識(shí)別模塊的概率,a、b、c為根據(jù)歷史數(shù)據(jù)獲得的各模型對(duì)應(yīng)的系數(shù)。需要說(shuō)明的是,在實(shí)際應(yīng)用中,串行或者并行可以混合使用,以提高識(shí)別的概率和準(zhǔn)確率。
[0047]需要說(shuō)明的是,上述串行或并行的識(shí)別方式僅為服務(wù)器在進(jìn)行融合處理的過(guò)程中采用的調(diào)用算法,本領(lǐng)域的技術(shù)人員根據(jù)上述描述可以獲知服務(wù)器需要具有通信功能,且在具有通信功能的基礎(chǔ)上采用上述示例性調(diào)度算法進(jìn)行識(shí)別。
[0048]具體地,服務(wù)器在接收到客戶(hù)端發(fā)送的待識(shí)別對(duì)象的相關(guān)信息后,可根據(jù)待識(shí)別對(duì)象的相關(guān)信息獲得待識(shí)別對(duì)象對(duì)應(yīng)的類(lèi)型信息,其中,類(lèi)型信息可以包括但不限于動(dòng)物、景點(diǎn)等類(lèi)型。在獲得待識(shí)別對(duì)象對(duì)應(yīng)的類(lèi)型信息后,可根據(jù)類(lèi)型信息確定對(duì)應(yīng)的識(shí)別方式對(duì)相關(guān)信息進(jìn)行識(shí)別,獲得識(shí)別結(jié)果。也就是說(shuō),可根據(jù)待識(shí)別對(duì)象對(duì)應(yīng)的類(lèi)型信息確定識(shí)別待識(shí)別對(duì)象相關(guān)信息的順序,然后根據(jù)順序?qū)ΥR(shí)別對(duì)象進(jìn)行識(shí)別,以獲得識(shí)別結(jié)果。
[0049]具體而言,可根據(jù)確定的識(shí)別方式和從本地的信息源中獲得的信息,對(duì)相關(guān)信息進(jìn)行識(shí)別,獲得識(shí)別結(jié)果。其中,可通過(guò)例如百度百科、搜索推薦數(shù)據(jù)等搭建本地的信息源。
[0050]在該實(shí)施例中,在對(duì)待識(shí)別對(duì)象的圖像信息進(jìn)行識(shí)別時(shí),如果識(shí)別到圖像信息中包含多個(gè)待識(shí)別對(duì)象,則對(duì)圖像信息進(jìn)行分割,以獲得每個(gè)待識(shí)別對(duì)象和每個(gè)待識(shí)別對(duì)象在圖像信息中對(duì)應(yīng)的位置,然后分別對(duì)每個(gè)待識(shí)別對(duì)象和對(duì)應(yīng)的位置進(jìn)行識(shí)別,獲得圖像信息中每個(gè)待識(shí)別對(duì)象的名稱(chēng)、識(shí)別概率和位置信息。
[0051]具體地,對(duì)于每個(gè)待識(shí)別對(duì)象,當(dāng)確定當(dāng)前待識(shí)別對(duì)象的識(shí)別概率大于預(yù)定閾值時(shí),根據(jù)當(dāng)前待識(shí)別對(duì)象的名稱(chēng)和位置信息獲得識(shí)別結(jié)果;當(dāng)確定當(dāng)前待識(shí)別對(duì)象的識(shí)別概率小于等于預(yù)定閾值時(shí),即表明當(dāng)前采用的識(shí)別模型可能不合適,則可以采用其他識(shí)別模型重新對(duì)當(dāng)前待識(shí)別對(duì)象進(jìn)行識(shí)別,直至當(dāng)前待識(shí)別對(duì)象的識(shí)別概率大于預(yù)定閾值。
[0052]在該實(shí)施例中,在獲得待識(shí)別對(duì)象的識(shí)別結(jié)果后,還可根據(jù)識(shí)別結(jié)果從本地的信息源中獲得待識(shí)別對(duì)象的關(guān)聯(lián)信息,然后對(duì)待識(shí)別對(duì)象的關(guān)聯(lián)信息和識(shí)別結(jié)果進(jìn)行整合,生成待識(shí)別對(duì)象的增強(qiáng)信息。
[0053]下面以服務(wù)器接收到客戶(hù)端發(fā)送的圖像信息中包含2條待識(shí)別的小狗為例,來(lái)詳細(xì)說(shuō)明服務(wù)器獲得2條待識(shí)別的小狗對(duì)應(yīng)的增強(qiáng)信息的過(guò)程。
[0054]具體而言,服務(wù)器對(duì)圖像信息進(jìn)行分割,獲得圖像信息中2條待識(shí)別的小狗和其在圖像信息中對(duì)應(yīng)的位置,然后按照2條待識(shí)別的小狗在圖像信息中對(duì)應(yīng)的位置對(duì)2條待識(shí)別的小狗分別進(jìn)行識(shí)別,比如按照從左到右的順序?qū)?條待識(shí)別的小狗進(jìn)行識(shí)別。進(jìn)一步而言,首先根據(jù)本地的圖像識(shí)別模型中對(duì)左邊待識(shí)別的小狗進(jìn)行識(shí)別,獲得其對(duì)應(yīng)的識(shí)別概率,如果當(dāng)前的識(shí)別概率大于預(yù)設(shè)閾值例如80%,則確定左邊待識(shí)別的小狗的名稱(chēng)為當(dāng)前圖像識(shí)別模型對(duì)應(yīng)的名稱(chēng)。如果當(dāng)前的識(shí)別概率小于等于預(yù)設(shè)閾值例如80%,則重新采用新的圖像識(shí)別模型對(duì)左邊待識(shí)別的小狗進(jìn)行識(shí)別,直至左邊待識(shí)別的小狗的識(shí)別概率大于預(yù)定閾值例如80%,然后根據(jù)當(dāng)前的圖像識(shí)別模型確定左邊待識(shí)別的小狗的名稱(chēng)。在確定左邊待識(shí)別的小狗的名稱(chēng)后,還可從本地的信息源中獲得左邊待識(shí)別的小狗的關(guān)聯(lián)信息例如左邊待識(shí)別的小狗的性格特點(diǎn)、飼養(yǎng)注意事項(xiàng)以及周?chē)鷮?duì)應(yīng)的寵物醫(yī)院等信息,然后將關(guān)聯(lián)信息和識(shí)別結(jié)果即待識(shí)別的小狗的名稱(chēng)進(jìn)行整合,生成待識(shí)別的小狗的增強(qiáng)信息。
[0055]在獲得圖像信息中的左邊待識(shí)別的小狗的增強(qiáng)信息之后,可通過(guò)相似的過(guò)程獲得右邊小狗對(duì)應(yīng)的增強(qiáng)信息。
[0056]S203,向客戶(hù)端返回增強(qiáng)信息及增強(qiáng)信息的顯示位置信息,以使客戶(hù)端同時(shí)顯示待識(shí)別對(duì)象的增強(qiáng)信息和圖像信息以實(shí)現(xiàn)增強(qiáng)現(xiàn)實(shí)。
[0057]具體而言,在獲得圖像信息中的增強(qiáng)信息后,將上述增強(qiáng)信息返回至客戶(hù)端;客戶(hù)端接收?qǐng)D像信息的增強(qiáng)信息,并在客戶(hù)端上按照預(yù)定的方式將增強(qiáng)信息渲染疊加到客戶(hù)端所獲得的圖像信息中,還可以利用全息投影的方式展示增強(qiáng)信息和所獲得的圖像信息,由此,使得客戶(hù)端可同時(shí)顯示待識(shí)別對(duì)象的增強(qiáng)信息和圖像信息,增強(qiáng)了圖像信息的現(xiàn)實(shí)性,方便了用戶(hù)對(duì)待識(shí)別對(duì)象的了解。
[0058]本實(shí)施例模擬人腦對(duì)信息進(jìn)行綜合處理,來(lái)提高對(duì)待識(shí)別對(duì)象的識(shí)別概率,其中,對(duì)圖像進(jìn)行識(shí)別是其中非常關(guān)鍵的一環(huán),同時(shí)基于串行或并行不同的識(shí)別方式采用不同的識(shí)別模型進(jìn)行識(shí)別,可以大大提高識(shí)別概率,同時(shí)整合有用的信息源,可以做出真正具有增強(qiáng)信息意義的應(yīng)用。
[0059]本發(fā)明實(shí)施例的增強(qiáng)現(xiàn)實(shí)的實(shí)現(xiàn)方法,接收客戶(hù)端發(fā)送的待識(shí)別對(duì)象的相關(guān)信息,對(duì)相關(guān)信息進(jìn)行識(shí)別,獲得對(duì)應(yīng)的識(shí)別結(jié)果,并根據(jù)識(shí)別結(jié)果生成待識(shí)別對(duì)象的增強(qiáng)信息及增強(qiáng)信息的顯示位置信息,以及將增強(qiáng)信息和顯示位置信息發(fā)送至客戶(hù)端,由此,提供了一種實(shí)現(xiàn)增強(qiáng)現(xiàn)實(shí)的新的交互方式,使得客戶(hù)端可以獲得待識(shí)別對(duì)象的增強(qiáng)信息,通過(guò)增強(qiáng)信息用戶(hù)可以獲得該對(duì)象中的有用信息,增加對(duì)待識(shí)別對(duì)象的了解。
[0060]為了實(shí)現(xiàn)上述實(shí)施例,本發(fā)明還提出一種客戶(hù)端裝置。該客戶(hù)端裝置可以位于移動(dòng)終端中,還可以位于穿戴設(shè)備例如增強(qiáng)現(xiàn)實(shí)眼鏡中。其中,移動(dòng)終端是手機(jī)、平板電腦等具有各種操作系統(tǒng)的硬件設(shè)備。
[0061]圖3是根據(jù)本發(fā)明一個(gè)實(shí)施例的客戶(hù)端裝置的結(jié)構(gòu)示意圖。
[0062]如圖3所示,該客戶(hù)端裝置包括:獲得模塊11、通信模塊12和顯示模塊13。
[0063]具體地,獲得模塊11用于獲得待識(shí)別對(duì)象的相關(guān)信息。[0064]其中,待識(shí)別對(duì)象的相關(guān)信息包括待識(shí)別對(duì)象的圖像信息。
[0065]另外,上述待識(shí)別對(duì)象的相關(guān)信息還可以包括待識(shí)別對(duì)象的聲音信息、位置信息以及通過(guò)傳感器獲得的各種數(shù)據(jù)等。
[0066]另外,為了可以獲得待識(shí)別對(duì)象的相關(guān)信息,上述獲得模塊11還可以包括但不限于圖像采集單元、聲音采集單元和位置采集單元。圖像采集單元用于獲得待識(shí)別對(duì)象的圖像信息,聲音采集單元用于獲得待識(shí)別對(duì)象的聲音信息,位置采集單元用于獲得待識(shí)別對(duì)象的位置信息。
[0067]具體地,通信模塊12用于向服務(wù)器發(fā)送相關(guān)信息,并接收服務(wù)器根據(jù)相關(guān)信息返回的待識(shí)別對(duì)象的增強(qiáng)信息及所述增強(qiáng)信息的顯示位置信息。
[0068]其中,待識(shí)別對(duì)象的增強(qiáng)信息可以包括但不限于推薦信息、聲音信息、地理服務(wù)信息等信息。
[0069]上述通信模塊12具體用于對(duì)相關(guān)信息進(jìn)行預(yù)處理,并向服務(wù)器發(fā)送處理后的相關(guān)信息。具體而言,在上述獲得模塊11獲得待識(shí)別對(duì)象的圖像信息、聲音信息、位置信息后,通信模塊12可分別對(duì)上述信息進(jìn)行預(yù)處理,例如,通信模塊12可對(duì)待識(shí)別對(duì)象的圖像信息可進(jìn)行切割、壓縮等預(yù)處理,以及對(duì)待識(shí)別對(duì)象的聲音信息可進(jìn)行去噪、濾波處理等預(yù)處理。
[0070]在上述通信模塊12對(duì)待識(shí)別對(duì)象的相關(guān)信息進(jìn)行預(yù)處理后,上述通信模塊12將處理后的相關(guān)信息發(fā)送至服務(wù)器。服務(wù)器在接收到待識(shí)別對(duì)象的相關(guān)信息后,將對(duì)相關(guān)信息進(jìn)行識(shí)別,獲得對(duì)應(yīng)的識(shí)別結(jié)果,并根據(jù)識(shí)別結(jié)果生成待識(shí)別對(duì)象的增強(qiáng)信息,服務(wù)器還設(shè)置增強(qiáng)信息的顯示位置信息,以及將生成的待識(shí)別對(duì)象的增強(qiáng)信息及增強(qiáng)信息的顯示位置信息返回至客戶(hù)端裝置,通信模塊12接收服務(wù)器返回的增強(qiáng)信息及增強(qiáng)信息的顯示位置信息。
[0071]具體地,顯示模塊13用于根據(jù)顯示位置信息,同時(shí)顯示待識(shí)別對(duì)象的增強(qiáng)信息和圖像信息以實(shí)現(xiàn)增強(qiáng)現(xiàn)實(shí)。
[0072]上述顯示模塊13具體用于按照預(yù)定的方式同時(shí)顯示待識(shí)別對(duì)象的增強(qiáng)信息和圖像信息。具體而言,在通信模塊12接收到服務(wù)器返回的待識(shí)別對(duì)象的增強(qiáng)信息及增強(qiáng)信息的顯示位置信息后,顯示模塊13可按照預(yù)定的方式將增強(qiáng)信息渲染疊加到客戶(hù)端所獲得的圖像信息中,例如顯示模塊13可利用全息投影的方式展示增強(qiáng)信息和圖像信息,全息投影的方式可使圖像信息中顯示的增強(qiáng)信息具有三維空間感,由此,使得顯示模塊13可同時(shí)顯示待識(shí)別對(duì)象的圖像信息和增強(qiáng)信息,增強(qiáng)了圖像信息的現(xiàn)實(shí)性,方便了用戶(hù)對(duì)待識(shí)別對(duì)象的了解。
[0073]包含獲得模塊11、通信模塊12和接收模塊13的客戶(hù)端裝置進(jìn)行增強(qiáng)現(xiàn)實(shí)的實(shí)現(xiàn)過(guò)程可參見(jiàn)圖1,此處不贅述。
[0074]本發(fā)明實(shí)施例的客戶(hù)端裝置,通過(guò)獲得模塊獲得待識(shí)別對(duì)象的相關(guān)信息,通過(guò)通信模塊向服務(wù)器發(fā)送待識(shí)別對(duì)象的相關(guān)信息,并接收服務(wù)器返回待識(shí)別對(duì)象的增強(qiáng)信息及增強(qiáng)信息的顯示位置信息,以及通過(guò)顯示模塊同時(shí)顯示待識(shí)別對(duì)象的圖像信息和增強(qiáng)信息,通過(guò)增強(qiáng)信息用戶(hù)可以獲得待識(shí)別對(duì)象中的有用信息,方便了用戶(hù)對(duì)待識(shí)別對(duì)象的了解。
[0075]為了實(shí)現(xiàn)上述實(shí)施例,本發(fā)明還提出一種服務(wù)器。[0076]圖4是根據(jù)本發(fā)明一個(gè)實(shí)施例的服務(wù)器的結(jié)構(gòu)示意圖。
[0077]如圖4所示,該服務(wù)器包括:接收模塊21、融合處理模塊22和返回模塊23。
[0078]具體地,接收模塊21用于接收客戶(hù)端發(fā)送的待識(shí)別對(duì)象的相關(guān)信息,其中,待識(shí)別對(duì)象的相關(guān)信息包括待識(shí)別對(duì)象的圖像信息。
[0079]具體而言,上述接收模塊21不僅可以接收客戶(hù)端發(fā)送的待識(shí)別對(duì)象的圖像信息,還可以接收待識(shí)別對(duì)象的聲音信息、位置信息和各種傳感器獲得的數(shù)據(jù)。
[0080]具體地,融合處理模塊22用于對(duì)接收模塊接收的相關(guān)信息進(jìn)行識(shí)別,獲得對(duì)應(yīng)的識(shí)別結(jié)果,根據(jù)識(shí)別結(jié)果生成待識(shí)別對(duì)象的增強(qiáng)信息及增強(qiáng)信息的顯示位置信息。
[0081]具體地,返回模塊23用于向客戶(hù)端返回融合處理模塊生成的增強(qiáng)信息及增強(qiáng)信息的顯示位置信息,以使客戶(hù)端根據(jù)顯示位置信息,同時(shí)顯示待識(shí)別對(duì)象的增強(qiáng)信息和圖像信息以實(shí)現(xiàn)增強(qiáng)現(xiàn)實(shí)。
[0082]上述融合處理模塊22可以包括識(shí)別單元221和整合單元222,如圖5所示。
[0083]其中,識(shí)別單元221用于獲得待識(shí)別對(duì)象對(duì)應(yīng)的類(lèi)型信息,根據(jù)類(lèi)型信息確定采用的識(shí)別模型的順序,并按照所述順序采用對(duì)應(yīng)的識(shí)別模型對(duì)相關(guān)信息進(jìn)行識(shí)別,獲得識(shí)別結(jié)果和/或并行采用對(duì)應(yīng)的識(shí)別模型對(duì)相關(guān)信息進(jìn)行識(shí)別,獲得識(shí)別結(jié)果;整合單元222用于根據(jù)識(shí)別結(jié)果從本地的信息源中獲得待識(shí)別對(duì)象的關(guān)聯(lián)信息,對(duì)關(guān)聯(lián)信息和識(shí)別結(jié)果進(jìn)行整合,生成待識(shí)別對(duì)象的增強(qiáng)信息。
[0084]具體地,在上述接收模塊21接收到客戶(hù)端發(fā)送的待識(shí)別對(duì)象的相關(guān)信息后,上述識(shí)別單元221可根據(jù)待識(shí)別對(duì)象的相關(guān)信息獲得待識(shí)別對(duì)象對(duì)應(yīng)的類(lèi)型信息,其中,類(lèi)型信息可以包括但不限于動(dòng)物、景點(diǎn)等類(lèi)型。在上述識(shí)別單元221獲得待識(shí)別對(duì)象對(duì)應(yīng)的類(lèi)型信息后,上述識(shí)別單元221還可按照順序采用對(duì)應(yīng)的識(shí)別模型并結(jié)合從本地的信息源中獲得的信息,對(duì)相關(guān)信息進(jìn)行識(shí)別,獲得識(shí)別結(jié)果;和/或并行采用對(duì)應(yīng)的識(shí)別模型并結(jié)合從本地的信息源中獲得的信息,對(duì)相關(guān)信息進(jìn)行識(shí)別,獲得識(shí)別結(jié)果。
[0085]上述識(shí)別單元221具體包括:第一識(shí)別子單元2211和第二識(shí)別子單元2212。其中,第一識(shí)別子單元2211用于對(duì)待識(shí)別對(duì)象的圖像信息進(jìn)行識(shí)別,獲得圖像信息中包含的多個(gè)待識(shí)別對(duì)象以及每個(gè)待識(shí)別對(duì)象的名稱(chēng)、識(shí)別概率和位置信息;第二識(shí)別子單元2212用于對(duì)于每個(gè)待識(shí)別對(duì)象,當(dāng)確定當(dāng)前待識(shí)別對(duì)象的識(shí)別概率大于預(yù)定閾值時(shí),根據(jù)當(dāng)前待識(shí)別對(duì)象的名稱(chēng)和位置信息獲得識(shí)別結(jié)果;當(dāng)確定當(dāng)前待識(shí)別對(duì)象的識(shí)別概率小于等于預(yù)定閾值時(shí),重新對(duì)當(dāng)前待識(shí)別對(duì)象進(jìn)行識(shí)別,直至當(dāng)前待識(shí)別對(duì)象的識(shí)別概率大于預(yù)定閾值。
[0086]包含接收模塊21、融合處理模塊22和返回模塊23的服務(wù)器進(jìn)行增強(qiáng)現(xiàn)實(shí)的實(shí)現(xiàn)的過(guò)程可參見(jiàn)圖2,此處不贅述。
[0087]本發(fā)明實(shí)施例的服務(wù)器,通過(guò)接收模塊接收客戶(hù)端發(fā)送的待識(shí)別對(duì)象的相關(guān)信息,通過(guò)融合處理模塊對(duì)相關(guān)信息進(jìn)行識(shí)別,獲得對(duì)應(yīng)的識(shí)別結(jié)果,并根據(jù)識(shí)別結(jié)果生成待識(shí)別對(duì)象的增強(qiáng)信息及增強(qiáng)信息的顯示位置信息,以及通過(guò)返回模塊將增強(qiáng)信息及增強(qiáng)信息的顯示位置信息發(fā)送至客戶(hù)端,由此,提供了一種實(shí)現(xiàn)增強(qiáng)現(xiàn)實(shí)的新的交互方式,使得客戶(hù)端可以獲得待識(shí)別對(duì)象的增強(qiáng)信息,通過(guò)增強(qiáng)信息用戶(hù)可以獲得該對(duì)象中的有用信息,增加對(duì)待識(shí)別對(duì)象的了解。
[0088]應(yīng)理解,本發(fā)明的各部分可用硬件、軟件、固件或它們的組合來(lái)實(shí)現(xiàn)。在上述實(shí)施方式中,多個(gè)步驟或方法可用存儲(chǔ)在存儲(chǔ)器中且由合適的指令執(zhí)行系統(tǒng)執(zhí)行的軟件或固件來(lái)實(shí)現(xiàn)。如,如果用硬件來(lái)實(shí)現(xiàn),和在另一實(shí)施方式中一樣,可用本領(lǐng)域公知的下列技術(shù)中的任一項(xiàng)或他們的組合來(lái)實(shí)現(xiàn):具有用于對(duì)數(shù)據(jù)信號(hào)實(shí)現(xiàn)邏輯功能的邏輯門(mén)電路的離散邏輯電路,具有合適的組合邏輯門(mén)電路的專(zhuān)用集成電路,可編程門(mén)陣列(PGA),現(xiàn)場(chǎng)可編程門(mén)陣列(FPGA)等。
[0089]在本說(shuō)明書(shū)的描述中,參考術(shù)語(yǔ)“一個(gè)實(shí)施例”、“一些實(shí)施例”、“示例”、“具體示例”、或“一些示例”等的描述意指結(jié)合該實(shí)施例或示例描述的具體特征、結(jié)構(gòu)、材料或者特點(diǎn)包含于本發(fā)明的至少一個(gè)實(shí)施例或示例中。在本說(shuō)明書(shū)中,對(duì)上述術(shù)語(yǔ)的示意性表述不一定指的是相同的實(shí)施例或示例。而且,描述的具體特征、結(jié)構(gòu)、材料或者特點(diǎn)可以在任何的一個(gè)或多個(gè)實(shí)施例或示例中以合適的方式結(jié)合。
[0090]此外,術(shù)語(yǔ)“第一”、“第二”僅用于描述目的,而不能理解為指示或暗示相對(duì)重要性或者隱含指明所指示的技術(shù)特征的數(shù)量。由此,限定有“第一”、“第二”的特征可以明示或者隱含地包括至少一個(gè)該特征。在本發(fā)明的描述中,“少兩個(gè),例如兩個(gè),三個(gè)等,除非另有明確具體的限定。
[0091]盡管已經(jīng)示出和描述了本發(fā)明的實(shí)施例,本領(lǐng)域的普通技術(shù)人員可以理解:在不脫離本發(fā)明的原理和宗旨的情況下可以對(duì)這些實(shí)施例進(jìn)行多種變化、修改、替換和變型,本發(fā)明的范圍由權(quán)利要求及其等同物限定。
【權(quán)利要求】
1.一種增強(qiáng)現(xiàn)實(shí)的實(shí)現(xiàn)方法,其特征在于,包括: 獲得待識(shí)別對(duì)象的相關(guān)信息,其中,所述待識(shí)別對(duì)象的相關(guān)信息包括所述待識(shí)別對(duì)象的圖像信息; 向服務(wù)器發(fā)送所述相關(guān)信息,并接收所述服務(wù)器根據(jù)所述相關(guān)信息返回的所述待識(shí)別對(duì)象的增強(qiáng)信息及所述增強(qiáng)信息的顯示位置信息;以及 根據(jù)所述顯示位置信息,同時(shí)顯示所述待識(shí)別對(duì)象的所述增強(qiáng)信息和所述圖像信息以實(shí)現(xiàn)增強(qiáng)現(xiàn)實(shí)。
2.根據(jù)權(quán)利要求1所述的方法,其特征在于,所述待識(shí)別對(duì)象的相關(guān)信息還包括所述待識(shí)別對(duì)象的聲音信息和位置信息。
3.根據(jù)權(quán)利要求1或2所述的方法,其特征在于,所述向服務(wù)器發(fā)送所述相關(guān)信息,包括: 對(duì)所述相關(guān)信息進(jìn)行預(yù)處理,并向服務(wù)器發(fā)送處理后的相關(guān)信息。
4.根據(jù)權(quán)利要求1所述的方法,其特征在于,所述同時(shí)顯示所述待識(shí)別對(duì)象的所述增強(qiáng)信息和所述圖像信息以實(shí)現(xiàn)增強(qiáng)現(xiàn)實(shí),包括: 按照預(yù)定的方式同時(shí)顯示所述待識(shí)別對(duì)象的所述增強(qiáng)信息和所述圖像信息,所述預(yù)定的方式包括全息投影的方式。
5.—種增強(qiáng)現(xiàn)實(shí)的實(shí)現(xiàn)方法,其特征在于,包括: 接收客戶(hù)端發(fā)送的待識(shí)別對(duì)象的相關(guān)信息,其中,所述待識(shí)別對(duì)象的相關(guān)信息包括所述待識(shí)別對(duì)象的圖像信息; 對(duì)所述相關(guān)信息進(jìn)行識(shí)別,獲得對(duì)應(yīng)的識(shí)別結(jié)果,根據(jù)所述識(shí)別結(jié)果生成所述待識(shí)別對(duì)象的增強(qiáng)信息及所述增強(qiáng)信息的顯示位置信息;以及 向所述客戶(hù)端返回所述增強(qiáng)信息及所述增強(qiáng)信息的顯示位置信息,以使所述客戶(hù)端根據(jù)所述顯示位置信息,同時(shí)顯示所述待識(shí)別對(duì)象的所述增強(qiáng)信息和所述圖像信息以實(shí)現(xiàn)增強(qiáng)現(xiàn)實(shí)。
6.根據(jù)權(quán)利要求5所述的方法,其特征在于,所述根據(jù)所述識(shí)別結(jié)果生成所述待識(shí)別對(duì)象的增強(qiáng)信息,包括: 根據(jù)所述識(shí)別結(jié)果從本地的信息源中獲得所述待識(shí)別對(duì)象的關(guān)聯(lián)信息,對(duì)所述關(guān)聯(lián)信息和所述識(shí)別結(jié)果進(jìn)行整合,生成所述待識(shí)別對(duì)象的增強(qiáng)信息。
7.根據(jù)權(quán)利要求5或6所述的方法,其特征在于,所述待識(shí)別對(duì)象的相關(guān)信息還包括所述待識(shí)別對(duì)象的聲音信息和位置信息。
8.根據(jù)權(quán)利要求7所述的方法,其特征在于,所述對(duì)所述相關(guān)信息進(jìn)行識(shí)別,包括: 獲得所述待識(shí)別對(duì)象對(duì)應(yīng)的類(lèi)型信息,根據(jù)所述類(lèi)型信息確定采用的識(shí)別模型的順序,并按照所述順序采用對(duì)應(yīng)的識(shí)別模型對(duì)所述相關(guān)信息進(jìn)行識(shí)別,獲得識(shí)別結(jié)果;和/或 并行采用對(duì)應(yīng)的識(shí)別模型對(duì)所述相關(guān)信息進(jìn)行識(shí)別,獲得識(shí)別結(jié)果。
9.根據(jù)權(quán)利要求8所述的方法,其特征在于,所述按照所述順序采用對(duì)應(yīng)的識(shí)別模型對(duì)所述相關(guān)信息進(jìn)行識(shí)別,獲得識(shí)別結(jié)果,包括: 按照所述順序采用對(duì)應(yīng)的識(shí)別模型并結(jié)合從本地的信息源中獲得的信息,對(duì)所述相關(guān)信息進(jìn)行識(shí)別,獲得識(shí)別結(jié)果;和/或 所述并行采用對(duì)應(yīng)的識(shí)別模型對(duì)所述相關(guān)信息進(jìn)行識(shí)別,獲得識(shí)別結(jié)果,包括:并行采用對(duì)應(yīng)的識(shí)別模型并結(jié)合從本地的信息源中獲得的信息,對(duì)所述相關(guān)信息進(jìn)行識(shí)別,獲得識(shí)別結(jié)果。
10.根據(jù)權(quán)利要求9所述的方法,其特征在于,所述對(duì)所述相關(guān)信息進(jìn)行識(shí)別,獲得識(shí)別結(jié)果,包括: 對(duì)所述待識(shí)別對(duì)象的圖像信息進(jìn)行識(shí)別,獲得所述圖像信息中包含的多個(gè)待識(shí)別對(duì)象以及每個(gè)待識(shí)別對(duì)象的名稱(chēng)、識(shí)別概率和位置信息; 對(duì)于每個(gè)待識(shí)別對(duì)象,當(dāng)確定當(dāng)前待識(shí)別對(duì)象的識(shí)別概率大于預(yù)定閾值時(shí),根據(jù)所述當(dāng)前待識(shí)別對(duì)象的名稱(chēng)和位置信息獲得識(shí)別結(jié)果;當(dāng)確定當(dāng)前待識(shí)別對(duì)象的識(shí)別概率小于等于所述預(yù)定閾值時(shí),重新對(duì)所述當(dāng)前待識(shí)別對(duì)象進(jìn)行識(shí)別,直至當(dāng)前待識(shí)別對(duì)象的識(shí)別概率大于預(yù)定閾值。
11.一種客戶(hù)端裝置,其特征在于,包括: 獲得模塊,用于獲得待識(shí)別對(duì)象的相關(guān)信息,其中,所述待識(shí)別對(duì)象的相關(guān)信息包括所述待識(shí)別對(duì)象的圖像信息; 通信模塊,用于向服務(wù) 器發(fā)送所述相關(guān)信息,并接收所述服務(wù)器根據(jù)所述相關(guān)信息返回的所述待識(shí)別對(duì)象的增強(qiáng)信息及所述增強(qiáng)信息的顯示位置信息;以及 顯示模塊,用于根據(jù)所述顯示位置信息,同時(shí)顯示所述待識(shí)別對(duì)象的所述增強(qiáng)信息和所述圖像信息以實(shí)現(xiàn)增強(qiáng)現(xiàn)實(shí)。
12.根據(jù)權(quán)利要求11所述的客戶(hù)端裝置,其特征在于,所述待識(shí)別對(duì)象的相關(guān)信息還包括所述待識(shí)別對(duì)象的聲音信息和位置信息。
13.根據(jù)權(quán)利要求11或12所述的客戶(hù)端裝置,其特征在于,所述通信模塊,具體用于: 對(duì)所述相關(guān)信息進(jìn)行預(yù)處理,并向服務(wù)器發(fā)送處理后的相關(guān)信息。
14.根據(jù)權(quán)利要求11所述的客戶(hù)端裝置,其特征在于,所述顯示模塊,具體用于: 按照預(yù)定的方式同時(shí)顯示所述待識(shí)別對(duì)象的所述增強(qiáng)信息和所述圖像信息,所述預(yù)定的方式包括全息投影的方式。
15.—種服務(wù)器,其特征在于,包括: 接收模塊,用于接收客戶(hù)端發(fā)送的待識(shí)別對(duì)象的相關(guān)信息,其中,所述待識(shí)別對(duì)象的相關(guān)信息包括所述待識(shí)別對(duì)象的圖像信息; 融合處理模塊,用于對(duì)所述接收模塊接收的所述相關(guān)信息進(jìn)行識(shí)別,獲得對(duì)應(yīng)的識(shí)別結(jié)果,根據(jù)所述識(shí)別結(jié)果生成所述待識(shí)別對(duì)象的增強(qiáng)信息及所述增強(qiáng)信息的顯示位置信息;以及 返回模塊,用于向所述客戶(hù)端返回所述融合處理模塊生成的所述增強(qiáng)信息及所述增強(qiáng)信息的顯示位置信息,以使所述客戶(hù)端根據(jù)所述顯示位置信息,同時(shí)顯示所述待識(shí)別對(duì)象的所述增強(qiáng)信息和所述圖像信息以實(shí)現(xiàn)增強(qiáng)現(xiàn)實(shí)。
16.根據(jù)權(quán)利要求15所述的服務(wù)器,其特征在于,所述融合處理模塊,包括: 整合單元,用于根據(jù)所述識(shí)別結(jié)果從本地的信息源中獲得所述待識(shí)別對(duì)象的關(guān)聯(lián)信息,對(duì)所述關(guān)聯(lián)信息和所述識(shí)別結(jié)果進(jìn)行整合,生成所述待識(shí)別對(duì)象的增強(qiáng)信息。
17.根據(jù)權(quán)利要求16所述的服務(wù)器,其特征在于,所述待識(shí)別對(duì)象的相關(guān)信息還包括所述待識(shí)別對(duì)象的聲音信息和位置信息。
18.根據(jù)權(quán)利要求16或17所述的服務(wù)器,其特征在于,所述融合處理模塊,還包括:識(shí)別單元,用于獲得所述待識(shí)別對(duì)象對(duì)應(yīng)的類(lèi)型信息,根據(jù)所述類(lèi)型信息確定采用的識(shí)別模型的順序,并按照所述順序采用對(duì)應(yīng)的識(shí)別模型對(duì)所述相關(guān)信息進(jìn)行識(shí)別,獲得識(shí)別結(jié)果;和/或 并行采用對(duì)應(yīng)的識(shí)別模型對(duì)所述相關(guān)信息進(jìn)行識(shí)別,獲得識(shí)別結(jié)果。
19.根據(jù)權(quán)利要求18所述的服務(wù)器,其特征在于,所述識(shí)別單元,具體用于: 按照所述順序采用對(duì)應(yīng)的識(shí)別模型并結(jié)合從本地的信息源中獲得的信息,對(duì)所述相關(guān)信息進(jìn)行識(shí)別,獲得識(shí)別結(jié)果;和/或 并行采用對(duì)應(yīng)的識(shí)別模型并結(jié)合從本地的信息源中獲得的信息,對(duì)所述相關(guān)信息進(jìn)行識(shí)別,獲得識(shí)別結(jié)果。
20.根據(jù)權(quán)利要求19所述的裝置,其特征在于,所述識(shí)別單元,包括: 第一識(shí)別子單元,用于對(duì)所述待識(shí)別對(duì)象的圖像信息進(jìn)行識(shí)別,獲得所述圖像信息中包含的多個(gè)待識(shí)別對(duì)象以及每個(gè)待識(shí)別對(duì)象的名稱(chēng)、識(shí)別概率和位置信息; 第二識(shí)別子單元,用于對(duì)于每個(gè)待識(shí)別對(duì)象,當(dāng)確定當(dāng)前待識(shí)別對(duì)象的識(shí)別概率大于預(yù)定閾值時(shí),根據(jù)所述當(dāng)前待識(shí)別對(duì)象的名稱(chēng)和位置信息獲得識(shí)別結(jié)果;當(dāng)確定當(dāng)前待識(shí)別對(duì)象的識(shí)別概率小于等于所述預(yù)定閾值時(shí),重新對(duì)所述當(dāng)前待識(shí)別對(duì)象進(jìn)行識(shí)別,直至當(dāng)前待識(shí)別對(duì)象的識(shí)別 概率大于預(yù)定閾值。
【文檔編號(hào)】G06F17/30GK103942049SQ201410149033
【公開(kāi)日】2014年7月23日 申請(qǐng)日期:2014年4月14日 優(yōu)先權(quán)日:2014年4月14日
【發(fā)明者】楊春勇, 賀周洲, 傅正超, 隋鑫 申請(qǐng)人:百度在線網(wǎng)絡(luò)技術(shù)(北京)有限公司