一種基于圖片識別顯示咨詢信息的方法和系統(tǒng)的制作方法
【專利摘要】本發(fā)明提供了一種基于圖片識別顯示咨詢信息的方法和系統(tǒng)，用于包含攝像頭模塊和顯示模塊的移動終端，所述方法包括：輸入步驟，所述移動終端通過攝像頭模塊拍攝標(biāo)識物圖片，并將所述標(biāo)識物圖片上傳至服務(wù)器端；識別處理步驟，所述服務(wù)器端對所述標(biāo)識物圖片進(jìn)行文字識別、比對，并進(jìn)行信息搜索，獲得咨詢信息。本發(fā)明能夠根據(jù)用戶拍的照片識別出對應(yīng)的標(biāo)識物，并且通過服務(wù)器端對圖片內(nèi)容進(jìn)行搜索，并不斷修正，獲取到豐富的咨詢信息，讓結(jié)果越來越接近用戶的需求。
【專利說明】—種基于圖片識別顯示咨詢信息的方法和系統(tǒng)
【技術(shù)領(lǐng)域】
[0001]本發(fā)明屬于移動通訊領(lǐng)域，尤其涉及一種基于圖片識別顯示咨詢信息的方法和系統(tǒng)。
【背景技術(shù)】 [0002]目前，人們對信息的搜集往往是通過文字搜索或者語音搜索技術(shù)來獲取相應(yīng)的內(nèi)容，但是在很多場景下，用戶需要更加精確的信息來源，傳統(tǒng)的搜索技術(shù)無法滿足人們的需求，并且隨著移動互聯(lián)網(wǎng)的發(fā)展，搜索技術(shù)從文字、語音逐漸往圖像識別發(fā)展，人們更加喜歡簡潔易用并富有人性化的搜索方式，而圖像搜索作為一種更加符合大多數(shù)人思維模式的搜索方式，越來越成為迫切的需求，從用戶體驗上講比文字和語音搜索都要好。

【發(fā)明內(nèi)容】

[0003]有鑒于此，本發(fā)明的目的是提供一種基于圖片識別顯示咨詢信息的方法和系統(tǒng)，能夠根據(jù)用戶拍的照片識別出對應(yīng)的標(biāo)識物，能從服務(wù)器端不斷優(yōu)化搜索策略，能更好地改進(jìn)搜索策略，讓用戶有更好的搜索體驗。
[0004]本發(fā)明提供一種基于圖片識別顯示咨詢信息的方法，用于包含攝像頭模塊和顯示模塊的移動終端，該方法包括:
[0005]輸入步驟，所述移動終端通過攝像頭模塊拍攝標(biāo)識物圖片，并將所述標(biāo)識物圖片上傳至服務(wù)器端；
[0006]識別處理步驟，所述服務(wù)器端對所述標(biāo)識物圖片進(jìn)行文字識別、比對，并進(jìn)行信息搜索，獲得咨詢信息。
[0007]根據(jù)上述的方法，其中，所述攝像頭模塊包括前置攝像頭和/或后置攝像頭。
[0008]根據(jù)上述的方法，其中，所述標(biāo)識物包括:建筑物、景觀、名片、標(biāo)簽。
[0009]根據(jù)上述的方法，其中，所述識別處理步驟進(jìn)一步包括:
[0010]圖文處理步驟，如果所述標(biāo)識物圖片中包含有圖標(biāo)或文字信息，則從所述標(biāo)識物圖片中檢測出圖標(biāo)和文字信息，否則直接執(zhí)行比對識別步驟；
[0011]比對識別步驟，依據(jù)所述圖標(biāo)、文字信息和/或標(biāo)識物圖片，在所述服務(wù)器端進(jìn)行搜索、比對識別出與所述圖標(biāo)、文字信息和/或標(biāo)識物圖片對應(yīng)的咨詢信息。
[0012]根據(jù)上述的方法，其中，所述咨詢信息包括:建筑物資料、景觀介紹、公司詳情、商品?目息。
[0013]本發(fā)明提供一種基于圖片識別顯示咨詢信息的系統(tǒng)，用于包含攝像頭模塊和顯示豐吳塊的移動終端，該系統(tǒng)包括:移動終端、服務(wù)器端，
[0014]所述移動終端包括:輸入模塊，用于移動終端通過攝像頭模塊拍攝標(biāo)識物圖片，并將所述標(biāo)識物圖片上傳至服務(wù)器端；
[0015]所述服務(wù)器端包括:通訊模塊、識別處理單元，
[0016]所述通訊模塊，用于接收所述移動終端發(fā)送的標(biāo)識物圖片數(shù)據(jù)，并將所述識別處理單元獲得的咨詢信息發(fā)送到所述移動終端；
[0017]所述識別處理單元，用于對所述移動終端發(fā)送的所述標(biāo)識物圖片進(jìn)行文字識別、比對，并進(jìn)行信息搜索，獲得咨詢信息。
[0018]根據(jù)上述的系統(tǒng)，其中，所述攝像頭模塊包括前置攝像頭和/或后置攝像頭。
[0019]根據(jù)上述的系統(tǒng)，其中，所述標(biāo)識物包括:建筑物、景觀、名片、標(biāo)簽。
[0020]根據(jù)上述的系統(tǒng)，其中，所述識別處理單元進(jìn)一步包括:
[0021]圖文處理模塊，用于如果所述標(biāo)識物圖片中包含有文字信息，則從所述標(biāo)識物圖片中檢測出圖標(biāo)和文字信息；
[0022]比對識別模塊，用于依據(jù)所述圖標(biāo)、文字信息和/或標(biāo)識物圖片，在所述服務(wù)器端進(jìn)行搜索、比對識別出與所述圖標(biāo)、文字信息和/或標(biāo)識物圖片對應(yīng)的咨詢信息。
[0023]根據(jù)上述的系統(tǒng)，其中，所述咨詢信息包括:建筑物資料、景觀介紹、公司詳情、商品?目息。
[0024]本發(fā)明提供的一種基于圖片識別顯示咨詢信息的方法和系統(tǒng)，能夠根據(jù)用戶拍的照片識別出對應(yīng)的標(biāo)識物，并且通過服務(wù)器端對圖片內(nèi)容進(jìn)行搜索，并不斷修正，獲取到豐富的咨詢信息，讓結(jié)果越來越 接近用戶的需求。
【專利附圖】

【附圖說明】
[0025]為了更清楚地說明本發(fā)明實(shí)施例或現(xiàn)有技術(shù)中的技術(shù)方案，下面將對實(shí)施例或現(xiàn)有技術(shù)描述中所需要使用的附圖作簡單的介紹。顯而易見地，下面描述中的附圖僅僅是本發(fā)明的一些實(shí)施例，對于本領(lǐng)域內(nèi)普通技術(shù)人員來說，在不付出創(chuàng)造性勞動的前提下，還可以根據(jù)這些附圖獲得其他的附圖。在附圖中:
[0026]圖1是根據(jù)本發(fā)明實(shí)施例的顯示咨詢信息的方法流程圖；
[0027]圖2是根據(jù)本發(fā)明實(shí)施例的顯示咨詢信息的具體方法流程圖；
[0028]圖3是根據(jù)本發(fā)明實(shí)施例的服務(wù)器端獲取咨詢信息的處理流程圖；以及
[0029]圖4是根據(jù)本發(fā)明實(shí)施例的顯示咨詢信息的系統(tǒng)框圖。
【具體實(shí)施方式】
[0030]為了使本發(fā)明實(shí)施例的目的、技術(shù)方案和優(yōu)點(diǎn)更加清楚明白，下面結(jié)合附圖對本發(fā)明實(shí)施例做進(jìn)一步詳細(xì)說明。在此，本發(fā)明的示意性實(shí)施例及其說明用于解釋本發(fā)明，但并不作為對本發(fā)明的限定。
[0031]參見圖1，本實(shí)施例的提供的顯示咨詢信息的方法流程圖，包括以下步驟:
[0032]步驟110，輸入步驟，移動終端通過攝像頭模塊拍攝標(biāo)識物圖片，并將標(biāo)識物圖片上傳至服務(wù)器端。
[0033]步驟120，識別處理步驟，服務(wù)器端對標(biāo)識物圖片進(jìn)行文字識別、比對，并進(jìn)行信息搜索，獲得咨詢信息。
[0034]本發(fā)明的移動終端包括:手機(jī)、平板電腦等智能移動終端，具備有攝像頭模塊，并能進(jìn)行基本拍攝操作，在以下實(shí)施例中以手機(jī)為例對顯示咨詢信息的方法進(jìn)行詳細(xì)描述。
[0035]參見圖2，根據(jù)本發(fā)明實(shí)施例的顯示咨詢信息的具體方法流程圖，具體如下所述:
[0036]步驟210，啟動手機(jī)客戶冋時啟動手機(jī)的攝像頭，拍攝標(biāo)識物圖片。[0037]用戶在遇到需要進(jìn)行了解的標(biāo)識物時，可以通過手機(jī)來拍攝該標(biāo)識物的圖片，其中，標(biāo)識物包括但不限于:建筑物、景觀、名片、標(biāo)簽等，比如，用戶在旅游時參觀了“埃菲爾鐵塔”，很想要了解關(guān)于“埃菲爾鐵塔”的一些資料，這時用戶可以先通過手機(jī)對其進(jìn)行拍照。其中，手機(jī)的攝像頭包括:前置攝像頭、后置攝像頭。
[0038]步驟220，手機(jī)客戶端對手機(jī)拍攝的標(biāo)識物圖片進(jìn)行保存，完成信息的采集。
[0039]步驟230，手機(jī)客戶端將標(biāo)識物圖片上傳到服務(wù)器端。
[0040]步驟240，服務(wù)器端對標(biāo)識物圖片進(jìn)行文字識別、比對，并進(jìn)行信息搜索，將獲得的標(biāo)識物圖片對應(yīng)的咨詢信息返回給移動終端。
[0041]服務(wù)器端對標(biāo)識物圖片進(jìn)行處理后獲得咨詢信息的過程具體如圖3，根據(jù)本發(fā)明實(shí)施例的服務(wù)器端獲取咨詢信息的處理流程圖，步驟進(jìn)一步包括:
[0042]步驟310，服務(wù)器端接收手機(jī)上傳的標(biāo)識物圖片數(shù)據(jù)。如果標(biāo)識物圖片中包含有圖標(biāo)或文字信息，需要進(jìn)行進(jìn)一步的處理，則執(zhí)行步驟320，否則執(zhí)行步驟330。
[0043]步驟320，服務(wù)器端從標(biāo)識物圖片中檢測出圖標(biāo)和文字信息。
[0044]首先，服務(wù)器端依據(jù)標(biāo)識物圖片按照一定方法(如基于顏色的連通分量方法)或算法(如基于紋理的分割算法)檢測出其中包含的圖標(biāo)和文字區(qū)域；然后，將文字區(qū)域的文字圖像從畫面背景中分割出來得到文字圖像信息，服務(wù)器端依據(jù)文字圖像信息與文字庫進(jìn)行比對識別，依據(jù)文字圖像信息中文字的筆畫特征與文字庫進(jìn)行比對，檢索出最相似字形的文字；最后，對比對識別結(jié)果進(jìn)行分類、整理后獲得圖標(biāo)和文字信息。其中，文字庫包括但不限于:漢字、字母、數(shù)字等，服務(wù)器端的文字庫還可以定期從網(wǎng)絡(luò)上進(jìn)行下載更新。
[0045]步驟330，根據(jù)圖標(biāo)、文字信息和/或標(biāo)識物圖片，在服務(wù)器端進(jìn)行搜索，比對識別出與圖標(biāo)、文字信息和/或標(biāo)識物圖片對應(yīng)的咨詢信息。
[0046]服務(wù)器端可以預(yù)先采集并建立標(biāo)識物資料數(shù)據(jù)庫，通過比對可以識別出當(dāng)前圖標(biāo)、文字信息和/或標(biāo)識物圖片的準(zhǔn)確內(nèi)容，再通過服務(wù)器搜索出對應(yīng)的咨詢信息，該咨詢信息包括但不限于:建筑物資料、景觀介紹、公司詳情、商品信息等，具體可以包括:建筑物的歷史背景和地理交通，景觀的特色介紹和地理交通，公司Logo、網(wǎng)址和相關(guān)新聞鏈接，商品名稱、類型和打折信息等，比如:服務(wù)器端通過比對“埃菲爾鐵塔”的圖片，搜索出“埃菲爾鐵塔”的歷史背景和地理位置介紹，以及交通情況。
[0047]如果在服務(wù)器端沒有識別到圖標(biāo)、文字信息和/或標(biāo)識物圖片的準(zhǔn)確內(nèi)容，可以通過網(wǎng)絡(luò)進(jìn)行檢索。
[0048]步驟340，服務(wù)器端將咨詢信息返回給移動終端。
[0049]實(shí)際使用過程中，如果服務(wù)器端進(jìn)行搜索后并沒有相匹配的咨詢信息，則返回咨詢信息為空，并提示用戶“沒有找到相關(guān)信息”。
[0050]步驟250，移動終端收到服務(wù)器端返回的咨詢信息，用戶可選擇顯示需要的信息。
[0051]收到返回的咨詢信息后，手機(jī)可通過顯示屏進(jìn)行顯示，用戶可以通過選擇建筑物資料、景觀介紹、公司詳情、商品信息來獲取需要的信息。比如:
[0052]選擇建筑物資料，用戶可了解建筑物的歷史背景、地理位置、交通情況，并可實(shí)現(xiàn)導(dǎo)航功能；
[0053]選擇景觀介紹，用戶可了解標(biāo)識物圖片中景觀的特色介紹、地理位置、交通情況，并可實(shí)現(xiàn)導(dǎo)航功能；[0054]選擇公司詳情，用戶可了解名片上公司Logo對應(yīng)的公司名稱地址、公司網(wǎng)址、相關(guān)新聞鏈接；
[0055]選擇商品信息，用戶可了解標(biāo)簽對應(yīng)商品的名稱、類型、價格和打折信息等。
[0056]圖4是本實(shí)施例提供的顯示咨詢信息的系統(tǒng)框圖，用于包含攝像頭模塊410和顯示模塊420的移動終端400a，該系統(tǒng)400包括:移動終端400a、服務(wù)器端400b，本實(shí)施例中所說的攝像頭模塊410包括前置攝像頭和/或后置攝像頭。
[0057]移動終纟而400a包括:輸入I吳塊430，用于移動終纟而400a通過攝像頭|吳塊410拍攝標(biāo)識物圖片，并將標(biāo)識物圖片上傳至服務(wù)器端400b，其中，標(biāo)識物包括但不限于:建筑物、景觀、名片、標(biāo)簽等。
[0058]服務(wù)器端400b包括:通訊模塊440，用于接收所述移動終端400a發(fā)送的標(biāo)識物圖片數(shù)據(jù)，并將識別處理單元450獲得的咨詢信息發(fā)送到移動終端400a ;識別處理單元450，用于對移動終端400a發(fā)送的標(biāo)識物圖片進(jìn)行文字識別、比對，并進(jìn)行信息搜索，獲得咨詢信息。
[0059]在本實(shí)施例中，識別處理單元450進(jìn)一步包括:
[0060]圖文處理模塊450a，用于如果標(biāo)識物圖片中包含有文字信息，則從標(biāo)識物圖片中檢測出圖標(biāo)和文字信息。首先，圖文處理模塊450a依據(jù)標(biāo)識物圖片按照一定方法(如基于顏色的連通分量方法)或算法(如基于紋理的分割算法)檢測出其中包含的圖標(biāo)和文字區(qū)域；然后，將文字區(qū)域的文字圖像從畫面背景中分割出來得到文字圖像信息，圖文處理模塊450a依據(jù)文字圖像信息與文字庫進(jìn)行比對識別，依據(jù)文字圖像信息中文字的筆畫特征與文字庫進(jìn)行比對，檢索出最相似字形的文字；最后，對比對識別結(jié)果進(jìn)行分類、整理后獲得圖標(biāo)和文字信息。其中，文字庫包括但不限于:漢字、字母、數(shù)字等，服務(wù)器端的文字庫還可以定期從網(wǎng)絡(luò)上進(jìn)行下載更新；
[0061 ] 比對識別模塊450b，用于依據(jù)圖標(biāo)、文字信息和/或標(biāo)識物圖片，在服務(wù)器端400b進(jìn)行搜索、比對識別出與圖標(biāo)、文字信息和/或標(biāo)識物圖片對應(yīng)的咨詢信息。
[0062]本實(shí)施例中，咨詢信息包括但不限于:建筑物資料、景觀介紹、公司詳情、商品信息等，具體可以包括:建筑物的歷史背景和地理交通，景觀的特色介紹和地理交通，公司Logo、網(wǎng)址和相關(guān)新聞鏈接，商品名稱、類型和打折信息等。
[0063]如果在服務(wù)器端沒有識別到圖標(biāo)、文字信息和/或標(biāo)識物圖片的準(zhǔn)確內(nèi)容，可以通過網(wǎng)絡(luò)進(jìn)行檢索。
[0064]以上所述的具體實(shí)施例，對本發(fā)明的目的、技術(shù)方案和有益效果進(jìn)行了進(jìn)一步詳細(xì)說明，所應(yīng)理解的是，以上所述僅為本發(fā)明的具體實(shí)施例而已，并不用于限定本發(fā)明的保護(hù)范圍，凡在本發(fā)明的精神和原則之內(nèi)，所做的任何修改、等同替換、改進(jìn)等，均應(yīng)包含在本發(fā)明的保護(hù)范圍之內(nèi)。
【權(quán)利要求】
1.一種基于圖片識別顯示咨詢信息的方法，用于包含攝像頭模塊和顯示模塊的移動終端，其特征在于，所述方法包括: 輸入步驟，所述移動終端通過攝像頭模塊拍攝標(biāo)識物圖片，并將所述標(biāo)識物圖片上傳至服務(wù)器端； 識別處理步驟，所述服務(wù)器端對所述標(biāo)識物圖片進(jìn)行文字識別、比對，并進(jìn)行信息搜索，獲得咨詢息。
2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述攝像頭模塊包括前置攝像頭和/或后置攝像頭。
3.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述標(biāo)識物包括:建筑物、景觀、名片、標(biāo)簽。
4.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述識別處理步驟進(jìn)一步包括: 圖文處理步驟，如果所述標(biāo)識物圖片中包含有圖標(biāo)或文字信息，則從所述標(biāo)識物圖片中檢測出圖標(biāo)和文字信息，否則直接執(zhí)行比對識別步驟； 比對識別步驟，依據(jù)所述圖標(biāo)、文字信息和/或標(biāo)識物圖片，在所述服務(wù)器端進(jìn)行搜索、比對識別出與所述圖標(biāo)、文字信息和/或標(biāo)識物圖片對應(yīng)的咨詢信息。
5.根據(jù)權(quán)利要求4所述的方法，其特征在于，所述咨詢信息包括:建筑物資料、景觀介紹、公司詳情、商品信息。
6.一種基于圖片識別顯示咨詢信息的系統(tǒng)，用于包含攝像頭模塊和顯示模塊的移動終端，其特征在于，所述系統(tǒng)包括:移動終端、服務(wù)器端， 所述移動終端包括:輸入模塊，用于移動終端通過攝像頭模塊拍攝標(biāo)識物圖片，并將所述標(biāo)識物圖片上傳至服務(wù)器端； 所述服務(wù)器端包括:通訊模塊、識別處理單元， 所述通訊模塊，用于接收所述移動終端發(fā)送的標(biāo)識物圖片數(shù)據(jù)，并將所述識別處理單元獲得的咨詢信息發(fā)送到所述移動終端； 所述識別處理單元，用于對所述移動終端發(fā)送的所述標(biāo)識物圖片進(jìn)行文字識別、比對，并進(jìn)行信息搜索，獲得咨詢信息。
7.根據(jù)權(quán)利要求6所述的系統(tǒng)，其特征在于，所述攝像頭模塊包括前置攝像頭和/或后置攝像頭。
8.根據(jù)權(quán)利要求6所述的系統(tǒng)，其特征在于，所述標(biāo)識物包括:建筑物、景觀、名片、標(biāo)簽。
9.根據(jù)權(quán)利要求6所述的系統(tǒng)，其特征在于，所述識別處理單元進(jìn)一步包括: 圖文處理模塊，用于如果所述標(biāo)識物圖片中包含有文字信息，則從所述標(biāo)識物圖片中檢測出圖標(biāo)和文字信息； 比對識別模塊，用于依據(jù)所述圖標(biāo)、文字信息和/或標(biāo)識物圖片，在所述服務(wù)器端進(jìn)行搜索、比對識別出與所述圖標(biāo)、文字信息和/或標(biāo)識物圖片對應(yīng)的咨詢信息。
10.根據(jù)權(quán)利要求9所述的系統(tǒng)，其特征在于，所述咨詢信息包括:建筑物資料、景觀介紹、公司詳情、商品信息。
【文檔編號】G06K9/00GK103678305SQ201210318666
【公開日】2014年3月26日 申請日期:2012年8月31日 優(yōu)先權(quán)日:2012年8月31日
【發(fā)明者】鄒仕洪, 曾陽 申請人:北京網(wǎng)秦天下科技有限公司