眼鏡式移動終端的制作方法
【專利摘要】本發(fā)明提供一種眼鏡式移動終端。該眼鏡式移動終端包括：透明屏幕；框架，該框架被配置成將透明屏幕固定在佩帶眼鏡式移動終端的用戶的眼睛前面；相機，該相機被安裝到框架，并且被配置成拍攝用戶的眼睛前面的圖像；存儲器；圖像識別單元，該圖像識別單元被配置成從通過相機拍攝的圖像中提取信息；以及控制器，該控制器被配置成將被提取的信息與存儲在存儲器中的相關(guān)信息進行比較，并且與捕捉到的圖像一起在透明屏幕上顯示相關(guān)信息。
【專利說明】眼鏡式移動終端
[0001]相關(guān)申請的交叉引用
[0002]本申請要求2012年12月5日提交的韓國專利號10-2012-0140408的較早 申請日期:和優(yōu)先權(quán)的權(quán)益，其內(nèi)容通過引用整體合并在此。
【技術(shù)領(lǐng)域】
[0003]本發(fā)明涉及一種包括相機和透明屏幕的眼鏡式移動終端，其能夠容易地獲取和使用信息并且引導日常生活。
【背景技術(shù)】
[0004]通常，終端能夠被分類成移動終端和固定終端。另外，移動終端能夠進一步被分類成手持式終端和車載終端。此外，移動終端能夠執(zhí)行諸如數(shù)據(jù)和語音通信、經(jīng)由相機捕捉圖像和視頻、記錄音頻、經(jīng)由揚聲器系統(tǒng)播放音樂文件并且輸出音樂、以及在顯示器上顯示圖像和視頻的各種功能。
[0005]最近，為了用戶的便利，對可穿戴移動終端的興趣正在上升，并且對安裝到眼鏡、手鐲以及衣服上的各種類型移動終端的研究正在進行。

【發(fā)明內(nèi)容】

[0006]本發(fā)明的目的是為了提供一種包括相機和透明屏幕的眼鏡式移動終端，其能夠容易地獲取和使用信息，在用戶的日常生活中幫助他們。
[0007]為了實現(xiàn)這些目的和其它的優(yōu)點并且根據(jù)本發(fā)明的用途，如在此具體化和廣泛地描述的，一種眼鏡式移動終端包括:透明屏幕；框架，該框架被配置成將透明屏幕固定在用戶的眼睛前面；音頻輸出模塊，該音頻輸出模塊被配置成將聲音發(fā)送到用戶；相機，該相機被安裝到框架以拍攝用戶的眼睛前面的圖像；存儲器，該存儲器被配置成將輸入/輸出信息存儲在其中；圖像識別單元，該圖像識別單元被配置成從通過相機拍攝的圖像中提取信息；以及控制器，該控制器被配置成執(zhí)行以下中的至少一個:將從圖像提取的信息存儲在存儲器中，將被提取的信息與存儲在存儲器中的相關(guān)信息進行比較，以及將相關(guān)信息輸出到透明屏幕或者音頻輸出模塊。
[0008]當相機拍攝相同的圖像超過預設(shè)的時間段時，圖像識別單元可以提取信息。可替選地，當一個對象占據(jù)圖像所占有的區(qū)域的預設(shè)范圍時，圖像識別單元可以提取與對象有關(guān)的彳目息。
[0009]根據(jù)本發(fā)明的第一實施例，圖像可以包括日歷，并且被提取的信息可以包括日歷的年、月、日和在日歷中寫入的備忘錄。
[0010]根據(jù)本發(fā)明的第二實施例，圖像可以是備忘錄并且信息可以是在備忘錄上寫入的字符。控制器可以在透明屏幕上以預設(shè)級別或者更高級別來顯示與在備忘錄中寫入的字符相對應的被存儲的信息。
[0011]根據(jù)本發(fā)明的第三實施例，圖像可以包括對象，并且信息可以是以一個或者多個角度拍攝的對象的圖像，并且控制器可以將拍攝的圖像與存儲在存儲器中的指定對象的圖像進行比較，并且確定拍攝的對象是否對應于指定對象的圖像。
[0012]此時，眼鏡式移動終端可以進一步包括位置信息模塊，該位置信息模塊被配置成識別用戶的位置，其中，當拍攝的對象對應于指定對象時，控制器在存儲器中記錄用戶位置作為用于指定對象的日志記錄，并且用戶能夠讀取該日志記錄。
[0013]可替選地，當拍攝的圖像對應于指定對象時，控制器可以將與指定對象有關(guān)的被存儲的信息輸出到透明屏幕或者經(jīng)由音頻輸出模塊輸出被存儲的信息。
[0014]眼鏡式移動終端可以進一步包括麥克風，該麥克風被配置成將眼鏡式移動終端附近的聲音轉(zhuǎn)換成數(shù)字信號，其中圖像是鈔票或者硬幣，并且信息是鈔票或者硬幣的數(shù)量，并且控制器將通過麥克風獲取的與錢數(shù)有關(guān)的語音信息與鈔票或者硬幣的數(shù)量進行比較，以計算找零，并且將計算的找零輸出到透明屏幕或者經(jīng)由音頻輸出模塊輸出計算的找零。
【專利附圖】

【附圖說明】
[0015]附圖被包括以提供對本發(fā)明的進一步理解并且被并入和組成本說明書的一部分，附圖圖示了本發(fā)明的實施例，并且連同描述一起用作解釋本發(fā)明的原理。在附圖中:
[0016]圖1是根據(jù)本發(fā)明的一個實施例的眼鏡式移動終端的框圖；
[0017]圖2是根據(jù)本發(fā)明的一個實施例的眼鏡式移動終端的前透視圖；
[0018]圖3是圖示根據(jù)本發(fā)明的一個實施例的眼鏡式移動終端的控制方法的流程圖；
[0019]圖4至圖7是圖示根據(jù)本發(fā)明的一個實施例的眼鏡式移動終端的操作狀態(tài)的圖；
[0020]圖8至圖12是圖示根據(jù)本發(fā)明的另一實施例的眼鏡式移動終端的操作狀態(tài)的圖；
[0021]圖13至圖18是圖示根據(jù)本發(fā)明的再一實施例的眼鏡式移動終端的操作狀態(tài)的圖；以及
[0022]圖19至圖22是圖示根據(jù)本發(fā)明的又一實施例的眼鏡式移動終端的操作狀態(tài)的圖。
【具體實施方式】
[0023]在下面的詳細描述中，參考形成其一部分的附圖，并且該附圖通過圖示的方式示出本發(fā)明的特定實施例。
[0024]如在此所使用的，后綴“模塊”、“單元”以及“部分”被用于元件，僅便于公開。因此，后綴本身沒有被賦予顯著的意義或者任務(wù)，并且可以理解能夠一起或者可交換地使用“模塊”、“單元”以及“部分”。
[0025]圖1是根據(jù)本發(fā)明的實施例的眼鏡式移動終端100的框圖。圖1示出根據(jù)本發(fā)明的一個實施例的眼鏡式移動終端100，其包括無線通信單元110、輸入單元120、感測單元140、輸出單元150、存儲器160、控制器180、電源單元190等等。圖1示出具有各種組件的眼鏡式移動終端100，但是可理解的是實現(xiàn)所有圖示的組件不是必需的。可以替代地實現(xiàn)較多或者較少的組件。
[0026]在下面的描述中，順次地解釋眼鏡式移動終端100的上述元件。
[0027]首先，無線通信單元1120通常包括允許在眼鏡式移動終端100和無線通信系統(tǒng)或者眼鏡式移動終端100所位于的網(wǎng)絡(luò)之間進行無線通信的一個或者多個組件。例如，無線通信單元110能夠包括廣播接收模塊、移動通信模塊112、無線因特網(wǎng)模塊113、短程通信模塊114、位置定位模塊115等等。
[0028]移動通信模塊112經(jīng)由諸如GSM(全球移動通信系統(tǒng))、CDMA(碼分多址)、以及WCDMA(寬帶CDMA)等等的移動網(wǎng)絡(luò)將無線信號發(fā)送到一個或者多個網(wǎng)絡(luò)實體(例如，基站、外部終端、服務(wù)器等等)/從一個或者多個網(wǎng)絡(luò)實體(例如，基站、外部終端、服務(wù)器等等)接收無線信號。這樣的無線信號可以表示音頻、視頻以及根據(jù)文本/多媒體消息傳輸和接收的數(shù)據(jù)
坐寸ο
[0029]無線因特網(wǎng)模塊113支持眼鏡式移動終端100的因特網(wǎng)訪問。此模塊可以被內(nèi)部地或者外部地耦合到眼鏡式移動終端100。在這樣的情況下，無線因特網(wǎng)技術(shù)能夠包括WLAN (無線LAN) (W1-Fi),Wibro (無線寬帶)、Wimax (全球微波互聯(lián)接入)、HSDPA (高速下行鏈路分組接入)、GSM、CDMA, WCDMA, LET (長期演進)等等。
[0030]經(jīng)由移動通信網(wǎng)絡(luò)來實現(xiàn)通過Wibro、HSPDA、GSM、CDMA、WCDMA、LTE等等的無線因特網(wǎng)訪問。在這方面中，被配置成經(jīng)由移動通信網(wǎng)絡(luò)執(zhí)行無線因特網(wǎng)訪問的無線因特網(wǎng)模塊113能夠被理解為是一種移動通信模塊112。
[0031]短程通信模塊114有助于相對短程的通信。用于實現(xiàn)此模塊的適當?shù)募夹g(shù)包括射頻識別(RFID)、紅外數(shù)據(jù)協(xié)會(IrDA)、超寬帶(UWB)、以及通常被稱為藍牙和紫蜂的網(wǎng)絡(luò)技術(shù)，列舉一些例子。
[0032]位置定位模塊115識別或者以其它方式獲得眼鏡式移動終端100的位置。如果需要，可以利用全球定位系統(tǒng)(GPS)模塊實現(xiàn)此模塊。根據(jù)當前技術(shù)，GPS模塊115能夠通過從至少三個衛(wèi)星計算距離信息和精確的時間信息并且然后將三角法應用于所計算的信息，來精確地計算基于經(jīng)度、緯度和高度以及方向(或者方位)中的至少一個的當前三維位置信息。當前，使用三個衛(wèi)星計算位置和時間信息，并且然后使用另一衛(wèi)星修正所計算的位置定位和時間信息的誤差。此外，GPS模塊115能夠通過持續(xù)地計算實時當前位置來計算速度信息。
[0033]參考圖1，輸入單元120被配置成將音頻或者視頻信號輸入提供給眼鏡式移動終端100。如所示，輸入單元120包括相機121和麥克風122。相機121在視頻呼叫模式或者拍攝模式下接收并且處理通過圖像傳感器獲得的靜止圖片或者視頻的圖像幀。另外，已處理的圖像幀能夠被顯示在透明屏幕151上。
[0034]通過相機121處理的圖像幀能夠被存儲在存儲器160中或者能夠經(jīng)由無線通信單元Iio向外發(fā)送?？蛇x地，根據(jù)使用環(huán)境可以將至少兩個相機121提供給眼鏡式移動終端100。
[0035]當便攜式設(shè)備處于諸如電話呼叫模式、記錄模式以及語音識別的特定模式中時，麥克風122接收外部音頻信號。此音頻信號被處理并且轉(zhuǎn)換為電音頻信號。當在呼叫模式下時，處理的音頻數(shù)據(jù)被變換為經(jīng)由移動通信模塊112可發(fā)送到移動通信基站的格式。麥克風122通常包括各種噪聲消除算法，以消除在接收外部音頻信號的過程中生成的噪聲。
[0036]圖像識別單元125是被配置成從通過相機121拍攝的圖像中提取信息的設(shè)備，并且圖像識別單元125可以識別被拍攝的圖像。當被拍攝的圖像具有字符時，圖像識別單元將字符轉(zhuǎn)換成文本數(shù)據(jù)。當圖像具有多個對象時，圖像識別單元提取對象，該對象將會與存儲在存儲器160中的信息進行比較。
[0037]當相機121拍攝運動圖片時，運動圖片包括靜止圖像，并且圖像識別單元125獲取所有靜止圖像的信息，并且控制器處理獲取的信息。然而，此處理可能引起不必要的浪費。另外，如果這樣的不必要信息被提取并且被提供給用戶，則使用像眼鏡一樣可佩帶的眼鏡式移動終端100的用戶可能是不方便的。
[0038]當用戶按下在框架中提供的用戶輸入單元128或者使用用于獲取圖像信息的語音命令時，用戶能夠提取適當?shù)男畔??？商孢x地，當注視一個對象超過預設(shè)時間段時，相機121可以拍攝相同的對象超過預設(shè)時間段，并且可以提取關(guān)于對象的信息。
[0039]可替選地，當用戶接近特定對象時，對象占據(jù)用戶視野的大的區(qū)域，并且圖像識別單元125能夠確定用戶正在注視相對應的對象。因此，當通過相機121識別的圖像的一個對象占據(jù)組成運動圖片的圖像的預設(shè)范圍時，可以提取關(guān)于該對象的信息。
[0040]可替選地，圖像識別單元125可以識別由用戶創(chuàng)建的手勢并且處理輸入手勢作為用戶命令。例如，圖像識別單元125可以將用戶繪制的圓圈識別為“是”，或者執(zhí)行選擇位于圓圈中的字符或者對象的功能。
[0041]語音識別單元126能夠?qū)⒔?jīng)由麥克風122輸入的用戶語音轉(zhuǎn)換成文本數(shù)據(jù)，或者將用戶語音識別為特定命令(在下文中，“語音命令”)。根據(jù)本發(fā)明的實施例的眼鏡式移動終端100能夠包括鍵盤。然而，被配置成識別用戶的語音命令的語音識別單元126的功能是方便的，以便于激活移動終端100的功能。
[0042]S卩，給眼鏡式移動終端100提供鍵盤可能包括一些缺點。然而，眼鏡式移動終端100可以包括框架上的按鈕型用戶輸入單元128，并且因此能夠經(jīng)由按鈕型用戶輸入單元128輸入頻繁地使用的命令。例如，用戶經(jīng)由按鈕型用戶輸入單元128能夠輸入用于拍攝用戶觀看的圖像或者從圖像提取信息的命令，或者用于控制從音頻輸出單元152輸出的聲音的音量的命令。
[0043]各種類型的輸入單元可作為用戶輸入單元128應用，并且包括用于從形成在其中的金屬圓頂識別物理壓力以產(chǎn)生信號的模塊。
[0044]另外，感測單元140感測移動終端100的狀態(tài)和用戶周圍環(huán)境，并且在圖1中包括陀螺儀傳感器141和加速度傳感器142。陀螺儀傳感器141是被配置成感測移動終端100的傾斜相位(phase)和在x、y以及z軸中的傾斜變化的裝置,并且其能夠被稱為角速度傳感器。陀螺儀傳感器感測相對于各個軸的旋轉(zhuǎn)移動，以感測移動終端殼體的傾斜和搖動。
[0045]陀螺儀傳感器具有帶有三個軸的陀螺(spinning top),并且這樣的陀螺儀傳感器最近被發(fā)展成具有提高的精確度和緊湊的尺寸，諸如光陀螺儀傳感器或振動陀螺儀傳感器，使得陀螺儀傳感器能夠被安裝在包括移動終端的緊湊尺寸的電子裝置中。另外，通過MEMS模塊實現(xiàn)的6軸傳感器能夠被用作陀螺儀傳感器141。被應用于本發(fā)明的陀螺儀傳感器141不限于在上面提及的這些類型，并且能夠感測眼鏡式移動終端100的傾斜和運動的所有類型的陀螺儀傳感器可應用于本發(fā)明。
[0046]加速度傳感器142能夠測量動態(tài)力，例如，眼鏡式移動終端100的加速度，并且其能夠從加速度變化中檢測振動、沖擊等等。當具有質(zhì)量的對象被加速時，力被產(chǎn)生，并且通過加速度傳感器142感測到力的變化。
[0047]此外，輸出單元150生成與視覺、聽覺、觸覺等等有關(guān)的輸出。并且，輸出單元150包括透明屏幕151、音頻輸出模塊152等等。
[0048]透明屏幕151被布置在用戶眼睛的前面，并且其與眼鏡的透鏡相類似。被布置在用戶眼睛的前面的透明屏幕允許用戶看到位于前面的對象，并且其可以是透明的并且被配置成將文本或者圖像輸出到屏幕，使得給用戶提供信息。
[0049]作為用于透明顯示器的代表性示例，存在TOLED (透明OLED)等等。透明屏幕151的后部配置也能夠以光透射型實現(xiàn)。在此配置中，用戶能夠經(jīng)由終端主體的透明屏幕151占據(jù)的區(qū)域看到終端主體的后面的對象。
[0050]音頻輸出模塊152在包括呼叫接收模式、呼叫撥打模式、記錄模式、語音識別模式、廣播接收模式等等的各種模式中起作用，以輸出從無線通信單元110接收到的音頻數(shù)據(jù)或存儲在存儲器160中的音頻數(shù)據(jù)。在操作期間，音頻輸出模塊152輸出與特定功能(例如，接收到呼叫、接收到消息等等)相關(guān)的音頻。通常使用一個或多個揚聲器、蜂鳴器、其它音頻產(chǎn)生設(shè)備及其組合來實現(xiàn)音頻輸出模塊152。
[0051]存儲器160能夠存儲為控制器180處理和控制并且實現(xiàn)功能而配置的程序，以用于暫時存儲輸入/輸出數(shù)據(jù)。存儲器160能夠?qū)⑿碌妮斎霐?shù)據(jù)存儲在其中并且提取被存儲的數(shù)據(jù)。存儲器160的存儲功能可以通過SD卡或者輔助存儲裝置來擴展。
[0052]另外，控制器180通?？刂埔苿咏K端100的整體操作。例如，控制器180可以控制無線通信單元發(fā)送/接收各種信號或者處理輸入數(shù)據(jù)或者控制透明屏幕151和音頻輸出單元，僅將信息提供給用戶。在上面提及的圖像識別單元125和語音識別單元126可以作為部件被提供在控制器中。
[0053]根據(jù)本發(fā)明的實施例的控制器180可以從通過相機121獲取的圖像中提取信息，并且將提取的信息與存儲的信息進行比較(S31)。而且，控制器180可以將提取的信息存儲在存儲器160中(S32)，輸出從存儲器160提取的相關(guān)聯(lián)信息，以將提取的信息輸出到透明屏幕151，或者在因特網(wǎng)上搜索相關(guān)聯(lián)信息(S34)(參見圖3)。
[0054]電源單元190為眼鏡式移動終端100提供各種組件所要求的電力。該電力可以是內(nèi)部電力、外部電力、或者其組合。此外，電池可以包括內(nèi)置可充電電池，并且可以被可拆卸地附接到終端主體以用于充電等等。
[0055]可以使用例如計算機軟件、硬件或者其一些組合在計算機可讀介質(zhì)中實現(xiàn)在此描述的各種實施例。
[0056]接下來，圖2圖示根據(jù)本發(fā)明的實施例的眼鏡式移動終端100，其包括透明屏幕151、框架101、相機121以及音頻輸出單元152。當用戶佩戴眼鏡式移動終端時透明屏幕151允許用戶看到位于前面的對象，并且給用戶提供在其上輸出的各種信息?？蚣?01將透明屏幕151固定到用戶的面部，以將透明屏幕151定位在他們的眼睛的前面。
[0057]此外，在框架101中可以提供無線通信單元110、輸入單元120、感測單元140、輸出單元150和控制器180。用戶輸入單元128也可以被提供在框架101中，以輸入用戶命令，或者存儲卡槽可以被提供在框架101中以擴展存儲功能。相機121被配置成獲取圖像信息，并且其可以被布置與眼睛相鄰以獲得與通過用戶的眼睛獲取的圖像相似的圖像。
[0058]如在附圖中所示，一個相機121或者用于三維信息的兩個或多個相機121可以被布置在眼睛附近。如在附圖中所示，音頻輸出單元152也能夠輸出大聲的語音以允許數(shù)個人同時聽見，像揚聲器一樣，或者經(jīng)由插在耳朵中的接收器或者耳機在耳朵附近輸出用戶可聽見的聲音。
[0059]接下來，圖3是圖示根據(jù)本發(fā)明的一個實施例的眼鏡式移動終端的控制方法的流程圖。如所示的，圖像識別單元125從通過相機121識別的圖像中提取信息(S10和S20)。信息可以是文本數(shù)據(jù)或者特定對象。稍后將會描述信息的特定示例。
[0060]控制器180將提取的信息與存儲的信息進行比較，或者將提取的信息存儲在存儲器160中(S32)?？商孢x地，控制器180提取存儲在存儲器160中的相關(guān)聯(lián)信息以輸出到透明屏幕151 (S33)或者在因特網(wǎng)上搜索相關(guān)聯(lián)信息(S34)。
[0061 ] 在提取的信息和預存儲的信息之間的比較(S31)意指提取的信息與存儲的信息相同或者相似。當提取的信息對應于存儲在存儲器160中的信息時，提取的信息被認為是與存儲的信息相對應。當提取的信息部分地對應于存儲的信息時，提取的信息被認為是與存儲的信息相關(guān)聯(lián)。
[0062]當在存儲器160中存儲提取的信息時，獲取的信息可以被簡單地存儲?？商孢x地，當在與存儲的信息比較(S31)之后其不是重復的信息時，在存儲器160中更新提取的信息。當其與存儲的信息相關(guān)聯(lián)時，最新獲取的信息可以被添加到相關(guān)聯(lián)信息。
[0063]在輸出被存儲在存儲器160中的相關(guān)聯(lián)信息中(S33)，當與獲取的信息相關(guān)聯(lián)的信息被存儲在存儲器160中時，存儲在存儲器160中的相關(guān)聯(lián)信息可以被輸出到透明屏幕151或者經(jīng)由音頻輸出單元150提供給用戶。獲取的信息可以作為搜索字被采用，并且可以搜索與獲取的信息部分地對應或者相似的信息，并且提供搜索到的信息。
[0064]在因特網(wǎng)搜索相關(guān)聯(lián)信息(S34)中，當沒有與提取的信息相關(guān)聯(lián)的特定信息或者被存儲的信息要被獲取時，可以使用在無線通信單元中提供的無線因特網(wǎng)模塊113，并且可以在因特網(wǎng)上獲取相關(guān)聯(lián)信息。
[0065]現(xiàn)在將會描述通過參考圖3所提及的根據(jù)本發(fā)明的實施例的眼鏡式移動終端100執(zhí)行的各種功能的實施例。
[0066]特別地，圖4至圖7是圖示根據(jù)本發(fā)明的一個實施例的眼鏡式移動終端的操作狀態(tài)的圖。在本實施例中，通過相機121獲取的圖像包括如在圖4中所示的日歷310。
[0067]當用戶注視日歷310超過預設(shè)的時間段或者在近距離注視時，從日歷310提取信息。當滿足條件之一或者滿足兩個條件時，信息可以被設(shè)置為從日歷310中提取?？商孢x地，可以通過用戶按下被附接到眼鏡式移動終端100的用戶輸入單元128或者語音命令來實現(xiàn)信息的獲取。
[0068]當圖像識別單元125識別日歷310時，標記511可以被顯示在被識別為日歷310的區(qū)域上，如在圖4中所示。從日歷310中能夠提取的信息可以對應于月311、年312以及日313。在存儲器160中可以搜索關(guān)于日歷的年月日的信息。換言之，可以搜索用戶的日程表，并且在存儲器160中搜索用戶存儲在日程表中的信息。
[0069]另外，可以自動地實現(xiàn)在存儲器160中搜索被存儲的信息?？商孢x地，如在圖4中所示，圖像識別單元125可以識別日歷310，并且從圖像中提取信息。然后，按鈕512a和512b可以在透明屏幕151的下部區(qū)域中被輸出到透明屏幕151，以確認用戶是否想要顯示被存儲的信息。按鈕512a和512b沒有被物理地觸摸，而是用戶能夠輸入與相應按鈕相對應的語音命令或者使用用戶輸入單元128。
[0070]如在圖5中所示，在存儲器160中搜索到的信息513能夠被輸出到透明屏幕151，并且與用戶正在注視的日歷310重疊。當用戶移動時，日歷310的尺寸或者位置根據(jù)用戶的移動在用戶的視野中移動，并且被輸出到透明屏幕151的被存儲的信息513的尺寸或者位置可以被改變。
[0071]如在圖6中所示，當日歷310的尺寸增加時，輸出信息的透明屏幕151的空間也能夠增加，使得被存儲的信息513’能夠被更加具體地顯示。當用戶想要獲取被存儲在存儲器160中的內(nèi)容或者與特定數(shù)據(jù)或者時段相關(guān)聯(lián)的信息時，能夠經(jīng)由無線通信單元110在外部因特網(wǎng)上搜索信息。
[0072]另外，圖5圖示與韓國中秋節(jié)(chuseok)相關(guān)聯(lián)的信息，韓國感恩節(jié)被附加地搜索并且被輸出到透明屏幕151?？梢酝ㄟ^用戶的語音命令或者對用戶輸入單元128的用戶輸入來實現(xiàn)因特網(wǎng)搜索，或者讀取用戶創(chuàng)建的手勢并且通過圖像識別單元125被識別為命令。
[0073]根據(jù)另一實施例，當用戶說出搜索信息“10月13日的音樂會”時，語音識別單元126將語音的內(nèi)容識別為語音命令，并且控制器180根據(jù)命令經(jīng)由無線因特網(wǎng)模塊113搜索關(guān)于10月13日的音樂會的信息。
[0074]除了年、月、以及日311、312以及313之外，能夠從在相對應的日歷310上寫入的字符315識別能夠從日歷310中提取的信息，以存儲為文本數(shù)據(jù)。在本示例中，檢查在被提取的信息和被存儲在存儲器160中的信息之間是否存在重疊，并且沒有重疊的內(nèi)容可以被重新添加。通過經(jīng)由語音命令激活被輸出到透明屏幕151的按鈕，可以執(zhí)行存儲，或者可以存儲用戶選擇的區(qū)域515和516的信息，如在圖7中所示。
[0075]接下來，圖8至圖12是圖示根據(jù)本發(fā)明的另一實施例的眼鏡式移動終端的操作狀態(tài)的圖。在本實施例中，通過相機121拍攝的圖像是如在圖8中所示的備忘錄320，并且圖像識別單元125經(jīng)由OCR將在備忘錄上寫入的字符轉(zhuǎn)換成文本數(shù)據(jù)。被存儲的圖像導致大的數(shù)據(jù)容量，并且難以編輯圖像，因此在備忘錄上的手寫被轉(zhuǎn)換成文本數(shù)據(jù)。
[0076]將提取的文本數(shù)據(jù)與存儲在存儲器160中的信息進行比較并且搜索相關(guān)聯(lián)信息。例如，結(jié)合被存儲在存儲器160中的內(nèi)容可以進行會議記錄或者在課堂上的筆記，并且信息被檢索以使得識別在最后的會議或者課堂中記錄的內(nèi)容。
[0077]為了提取相關(guān)聯(lián)信息，將提取的信息與在上面所提及的被存儲的信息進行比較，并且提取與提取的文本數(shù)據(jù)相對應的信息。在圖8中，從備忘錄320的圖像中識別字符321。例如，與主題有關(guān)的諸如“會議記錄”和“智能眼鏡”的文本被提取并且在存儲的信息中搜索。即使在本實施例中，可以利用標記521來顯示用于信息提取的被識別為對象的字符。
[0078]一旦從存儲器中檢索到相關(guān)信息，相關(guān)信息522a和522b可以被顯示在如在圖8中所示的透明屏幕151上。通過相關(guān)信息具有的所有內(nèi)容不必須被顯示，并且僅名稱和日期能夠以縮略圖模式被顯示。當選擇相對應的備忘錄時，用戶可以選擇是否檢查備忘錄523a的內(nèi)容，是否存儲與所選擇的備忘錄523b —起分組的新備忘錄，或者是否存儲在所選擇的備忘錄523c之后的備忘錄，如在圖9中所示。
[0079]—旦用戶開始進行備忘錄，圖像識別單元125能夠識別用戶實時地最新寫入的字符，并且將識別的字符轉(zhuǎn)換成數(shù)字文本。此外，被轉(zhuǎn)換的文本可以被顯示在如在圖10中所示的透明屏幕151上的524，以允許用戶檢查是否適當?shù)貓?zhí)行了文本轉(zhuǎn)換。
[0080]當想要在因特網(wǎng)上搜索備忘錄的特定內(nèi)容時，用戶可以選擇特定內(nèi)容并且經(jīng)由無線因特網(wǎng)模塊113搜索所選擇的內(nèi)容?？商孢x地，可以經(jīng)由語音命令執(zhí)行搜索。然而，有時候當在圖書館或者會議期間進行備忘錄時難以使用語音命令。
[0081]因此，在本發(fā)明中，當用戶做出被配置成指定搜索內(nèi)容321的手勢323時，圖像識別單元125可以將手勢323識別為用戶命令。當想要檢查被顯示在透明屏幕151上的搜索到的內(nèi)容縮略圖525的詳情時，擴大按鈕525a可以被激活以在大屏幕中檢查搜索到的內(nèi)容。
[0082]記事簿(memo pad)通常具有有限的尺寸。如在圖12中所示，當用戶開始新的一頁時，圖像識別單元125可以識別頁面更換，并且詢問用戶是否應將搜索到的內(nèi)容存儲為新的頁面526a，將其存儲為新的文本526b，或者將其存儲在一個頁面中，跟隨前一頁。
[0083]接下來，圖13至圖18時圖示根據(jù)本發(fā)明的另一實施例的眼鏡式移動終端的操作狀態(tài)的圖。在本實施例中，通過相機121拍攝的運動圖片包括對象330’，并且圖像識別單元125提取并且處理相對應對象的圖像。
[0084]用戶可以將對象330’的圖像存儲在存儲器160中，作為被存儲的信息。例如，如在圖13中所示，諸如錢包、手表和鑰匙的具有丟失危險的對象330’的圖像被存儲。優(yōu)選地，存儲在盡可能多的方向中拍攝的多個圖像。具有被存儲在存儲器中的圖像的這種對象能夠稱為“指定對象”。
[0085]如在圖14中所示，從通過相機121拍攝的運動圖片中提取對象330的圖像，同時被區(qū)別于背景，并且將提取的圖像與存儲在存儲器160中的指定對象330’的圖像進行比較，以檢查提取的圖像是否對應于指定對象330’的圖像。
[0086]當基于比較的結(jié)果對象330的提取圖像對應于指定圖像330’的圖像時，通過相機121拍攝的運動圖片的時間和地點被存儲(參見圖15)。換言之，生成指定對象330’的日志記錄文件。
[0087]如果用戶丟失指定對象330’，則相對應對象的日志記錄被搜索，并且能夠提供看到和拍攝指定對象330’的最后地方，以使用戶容易找到指定對象330’。
[0088]可替選地，當從通過相機121拍攝的運動圖片中提取的對象330的圖像與指定對象330’的圖像相同時，能夠輸出與指定對象330’有關(guān)的信息。存儲的信息可以作為文本在透明屏幕151上輸出，或者作為語音被輸出到音頻輸出單元152。
[0089]例如，當用戶節(jié)食時，如在圖16中所示，包括肉和蛋糕的高卡路里食物可以被設(shè)置為指定對象330’。當被提取的對象330的圖像與指定對象330’相同時，可以輸出告訴用戶不要吃對象330的消息。
[0090]可替選地，當如圖17中所示會議室被設(shè)置為指定對象330’時，關(guān)于會議日程表的信息534可以從存儲器160中提取并且被輸出?？商孢x地，當如在圖18中所示特定人的面部被設(shè)置為指定對象330’時，與特定人有關(guān)的備忘錄533可以從存儲器160中搜索并且被輸出。
[0091]當指定對象330’是如在圖14或者圖17中所示的特定對象時，在指定對象330’的圖像和對象330的被提取圖像之間的高匹配率使得對象330對應于指定對象330’。當指定對象330’是如在圖16中所示的對象時，在圖像之間的低匹配率可以使對象300被設(shè)置為對應于指定對象330’。
[0092]當如在圖17中所示對象的被提取圖像包括時間信息時，可以僅提供與相對應的時間接近的信息，或者可以提供與在該時間之前數(shù)個小時的時間有關(guān)的信息。
[0093]接下來，圖19至圖22時圖示根據(jù)本發(fā)明的又一實施例的眼鏡式移動終端的操作狀態(tài)的圖。在本實施例中，如在圖20中所示圖像是諸如鈔票和硬幣的錢341，并且圖像識別單元125提取錢數(shù)541。
[0094]當售貨員說出用戶必須支付的錢數(shù)時，如在圖19中所示，包括麥克風122的語音識別單元提取用戶必須支付的數(shù)量作為數(shù)字信息。用戶必須支付的錢數(shù)可以是售貨員的語音或者包括數(shù)量的圖像，使得圖像識別單元125可以從該圖像中提取用戶必須支付的錢數(shù)。
[0095]從用戶拿出并且給予售貨員的錢341的圖像中提取錢數(shù)541作為數(shù)字信息，如在圖20中所示。將用戶必須支付的錢數(shù)與用戶拿出的錢數(shù)541進行比較，使得可以基于比較的結(jié)果計算找零(change) 542。
[0096]接下來，如在圖21中所示通過相機121拍攝的圖像是收據(jù)345，并且從收據(jù)345提取的信息可以包括在收據(jù)345上記錄的數(shù)量345a和日期345b。另外，可以從收據(jù)345的圖像中提取關(guān)于地點345c或者使用的信用卡/借記卡345d的信息。然后控制器180能夠?qū)⑻崛〉男畔?45a、345b、345c以及345d添加到被存儲在160中的賬簿中，如在圖22中所示。在本實施例中，用戶能夠方便地維護他們的賬戶，而不用必須手動地輸入信息。
[0097]如上所述，根據(jù)用戶視野而獲取的圖像可以被處理，并且可以提取各種類型的信息，使得被提取的信息可以被輸入或者與存儲的信息進行比較，或者使得可以搜索存儲的信息，以將搜索到的信息提供給用戶。因此，能夠被容易地獲取和利用新的信息。
[0098]此外，與可能容易丟失的對象或者相對應對象330有關(guān)的信息可以被提供給用戶，以輔助用戶的記憶力。
[0099]本發(fā)明包含對在此討論的各個示例和實施例的各種修改。根據(jù)本發(fā)明，一個實施例或者示例中的在上面描述的一個或者多個特征能夠被同等地應用于在上面描述的另一實施例或者示例。在上面描述的一個或者多個實施例或者示例的特征能夠被組合進上面描述的每個實施例或者示例中。本發(fā)明的一個或者多個實施例或者示例的任何全部或者部分組合也是本發(fā)明的一部分。
[0100]因為在沒有脫離其精神和必要特征的情況下可以以數(shù)種方式實現(xiàn)本發(fā)明，也應理解的是，上述實施例不受前述描述的任何詳情的限制，除非另外明文規(guī)定，而是應該在所附權(quán)利要求中定義的其精神和范圍內(nèi)廣泛地解釋，并且因此落入權(quán)利要求的邊界和范圍內(nèi)、或者這樣的邊界和范圍的等效物內(nèi)的所有變化和修改旨在被所附的權(quán)利要求所包含。
【權(quán)利要求】
1.一種眼鏡式移動終端，包括: 透明屏幕； 框架，所述框架被配置成將所述透明屏幕固定在佩帶所述眼鏡式移動終端的用戶的眼睛前面； 相機，所述相機被安裝到所述框架，并且被配置成拍攝所述用戶的眼睛前面的圖像； 存儲器； 圖像識別單元，所述圖像識別單元被配置成從通過所述相機拍攝的圖像中提取信息；以及 控制器，所述控制器被配置成: 將被提取的信息與被存儲在所述存儲器中的相關(guān)信息進行比較，并且 與捕捉到的圖像一起在所述透明屏幕上顯示所述相關(guān)信息。
2.根據(jù)權(quán)利要求1所述的眼鏡式移動終端，其中所述控制器進一步被配置成僅存儲從通過所述相機拍攝的圖像的被提取的信息。
3.根據(jù)權(quán)利要求1所述的眼鏡式移動終端，進一步包括: 音頻輸出模塊，所述音頻輸出模塊被配置成輸出聲音信息， 其中所述控制器進一步被配置·成經(jīng)由所述音頻輸出模塊輸出所述相關(guān)信息。
4.根據(jù)權(quán)利要求1所述的眼鏡式移動終端，其中所述圖像識別單元進一步被配置成，當所述相機拍攝圖像超過預設(shè)的時間段時，或者當一個對象占據(jù)圖像中所包括的區(qū)域的預設(shè)范圍時，提取信息。
5.根據(jù)權(quán)利要求1所述的眼鏡式移動終端，其中所述圖像包括日歷，所述被提取的信息包括在所述日歷上寫入的備忘錄和所述日歷的年、月、日中的至少一個，并且所述存儲器中的相關(guān)信息對應于在所述日歷上寫入的備忘錄和所述年、月、日中至少一個，并且 其中所述控制器被進一步配置成將所述相關(guān)信息疊加在所述日歷上。
6.根據(jù)權(quán)利要求5所述的眼鏡式移動終端，其中所述控制器進一步被配置成根據(jù)用戶的移動在所述透明屏幕上放大/縮小并且移動所述相關(guān)信息。
7.根據(jù)權(quán)利要求5所述的眼鏡式移動終端，進一步包括: 無線通信單元，所述無線通信單元與因特網(wǎng)相連接， 其中所述控制器進一步被配置成，在所述因特網(wǎng)上搜索與所述日歷相關(guān)的相關(guān)信息，并且將所述相關(guān)信息疊加在所述透明屏幕上。
8.根據(jù)權(quán)利要求1所述的眼鏡式移動終端，其中所述圖像是備忘錄，并且所述被提取的信息是在所述備忘錄上寫入的字符。
9.根據(jù)權(quán)利要求8所述的眼鏡式移動終端，其中所述控制器進一步被配置成，在所述透明屏幕上顯示與被寫入的字符相對應的被存儲的信息的至少一部分。
10.根據(jù)權(quán)利要求9所述的眼鏡式移動終端，其中所述控制器進一步被配置成將所述被存儲的信息顯示為縮略圖圖像。
11.根據(jù)權(quán)利要求9所述的眼鏡式移動終端，其中所述控制器進一步被配置成，選擇是將從所述備忘錄提取的信息與所述相關(guān)信息合并或者分組，還是將所述被提取的信息作為獨立的信息存儲。
12.根據(jù)權(quán)利要求8所述的眼鏡式移動終端，其中所述圖像識別單元進一步被配置成，執(zhí)行用于識別在所述備忘錄上實時地最新寫入的字符的字符識別處理，將被識別的字符轉(zhuǎn)換成文本，并且在所述透明屏幕上顯示被轉(zhuǎn)換的文本。
13.根據(jù)權(quán)利要求8所述的眼鏡式移動終端，其中所述控制器進一步被配置成提示所述用戶將所述備忘錄作為新的文檔或者新的頁面存儲。
14.根據(jù)權(quán)利要求8所述的眼鏡式移動終端，進一步包括: 無線通信單元，所述無線通信單元連接到因特網(wǎng)； 其中所述控制器進一步被配置成，在所述因特網(wǎng)上搜索從所述備忘錄中選擇的字符的特性，并且在所述透明屏幕上顯示與搜索到的特性有關(guān)的信息。
15.根據(jù)權(quán)利要求1所述的眼鏡式移動終端，其中所述圖像包括對象，并且被存儲在所述存儲器中的相關(guān)信息包括以一個或者多個角度拍攝的對象的至少一個圖像，并且 其中所述控制器進一步被配置成，將被拍攝的圖像與被存儲在所述存儲器中的相關(guān)信息進行比較，并且確定被拍攝的圖像中的對象是否對應于包括在所述相關(guān)信息中的對象。
16.根據(jù)權(quán)利要求15所述的眼鏡式移動終端，進一步包括: 位置信息模塊，所述位置信息模塊被配置成識別所述移動終端的位置， 其中所述控制器進一步被配置成，當被拍攝的圖像中的對象對應于包括在所述相關(guān)信息中的對象時，將位置記錄在所述存儲器中，作為用于所述對象的日志記錄。
17.根據(jù)權(quán)利要求15所述的眼鏡式移動終端，其中所述控制器進一步被配置成，當被拍攝的圖像中的對象對應于包括在所述相關(guān)信息中的對象時，在所述透明屏幕上顯示所述對象的附加信息，或者 經(jīng)由所述音頻輸出模塊輸出所述附加信息。
18.根據(jù)權(quán)利要求17所述的眼鏡式移動終端，其中當當前時間接近指定時間時，所述附加信息包括所述指定時間。
19.根據(jù)權(quán)利要求1所述的眼鏡式移動終端，進一步包括: 麥克風，所述麥克風被配置成將指示需要支付的錢數(shù)的收銀員語音轉(zhuǎn)換成數(shù)字信號， 其中所述圖像包括用戶支付的金錢的圖像，并且 其中所述控制器被進一步配置成: 將被轉(zhuǎn)換的語音與用戶支付的金錢的圖像進行比較， 計算應給用戶的找零的數(shù)量，并且 在所述透明屏幕或者所述音頻輸出模塊上輸出所計算的找零的數(shù)量。
20.根據(jù)權(quán)利要求1所述的眼鏡式移動終端，其中所述圖像是收據(jù)，并且所述被提取的信息對應于包括在所述收據(jù)中的單獨的項目，并且 其中所述控制器進一步被配置成更新在所述存儲器中存儲的賬簿，以包括所述被提取的信息。
【文檔編號】H04M1/02GK103856590SQ201310349539
【公開日】2014年6月11日 申請日期:2013年8月12日 優(yōu)先權(quán)日:2012年12月5日
【發(fā)明者】丁周榮, 宋炯勛 申請人:Lg電子株式會社