圖像顯示裝置和圖像顯示方法
【專利摘要】本發(fā)明涉及圖像顯示裝置和圖像顯示方法。一種通過安裝在頭或面部來使用的圖像顯示裝置,包括:顯示圖像的圖像顯示單元;輸入圖像的圖像輸入單元;判斷單元,判斷輸入到圖像輸入單元的圖像,或者獲得對于該輸入圖像的判斷結(jié)果;以及控制單元,基于判斷單元的判斷結(jié)果來控制圖像顯示單元。
【專利說明】圖像顯示裝置和圖像顯示方法
[0001]相關(guān)申請的交叉引用
[0002]本申請要求于2013年I月21日提交的日本在先專利申請JP2013-008050的權(quán)益,該申請的全部內(nèi)容以引用的方式并入本文。
【技術(shù)領(lǐng)域】
[0003]在本說明中公開的本技術(shù)涉及通過安裝在用戶的頭或面部上來使用的圖像顯示裝置及其圖像顯示方法,并且涉及一種顯示針對例如用戶視野中的目標估計或診斷的結(jié)果的圖像顯示裝置及其圖像顯示方法。
【背景技術(shù)】
[0004]基于人的可見部位(諸如面部、耳、手、指甲)的形狀、大小或顏色(生物信息)來估計或診斷人的性格或運勢的“占卜”已經(jīng)流行了很長時間。例如,手相學很流行,這是由于手相學可以告知在手掌上形成的多種類型的掌紋(諸如,生命線、命運線、智慧線、感情線或婚姻線)上顯示出來的性格或運勢。
[0005]掌紋本身是可見的生物信息,其甚至可以由業(yè)余人士容易地通過觀察來提取。在多種類型的占卜中,手相占卜的普及度是很高的。但是,存在一種情況,其中,由于存在很多信息,例如,每種掌紋具有對性格或運勢的不同的含義,兩條或更多條掌紋應(yīng)當相互關(guān)聯(lián)地來判斷等等,業(yè)余人士很難解讀某人的手掌。
[0006]例如,已經(jīng)提出了一種手相占卜系統(tǒng),其中,接收通過網(wǎng)絡(luò)從具有照相機的移動終端發(fā)送的掌紋的圖像,從接收到的掌紋的圖像提取掌紋數(shù)據(jù),基于提取的掌紋數(shù)據(jù)獲得表示占卜結(jié)果的占卜數(shù)據(jù),并且該數(shù)據(jù)被發(fā)送到具有照相機的移動終端(例如,參考日本未審專利申請公報N0.2007-183)。該手相占卜系統(tǒng)可以在計算機不可用的環(huán)境中提供手相占卜。
[0007]但是,與掌紋數(shù)據(jù)相關(guān)的占卜數(shù)據(jù)被簡單地返回到移動終端。由于這一原因,用戶很難(在此時視野中的手掌上)可視地識別出自己的多條掌紋中的哪一條成為占卜數(shù)據(jù)的依據(jù)。
[0008]另外,提出了在掌紋圖像中準確地指定目標特征線等的目標特征線指定裝置(例如,參考日本未審專利申請公報N0.2010-123020)。例如,通過將由目標特征線指定裝置指定的目標特征線數(shù)據(jù)與從數(shù)據(jù)庫獲得的多個掌紋數(shù)據(jù)項進行比較,指定表示最接近目標特征線的掌紋的掌紋數(shù)據(jù),并輸出與指定的掌紋數(shù)據(jù)相關(guān)的掌紋數(shù)據(jù),信息輸出裝置能夠執(zhí)行手相占卜。
[0009]但是,從信息輸出裝置輸出的掌紋數(shù)據(jù)是文本格式的數(shù)據(jù),其中,基于掌紋的類型、形狀、長度和位置關(guān)系,定義由手相師等事先判斷的諸如人的運勢(婚姻運勢、愛情運勢、工作運勢、金錢運勢等)和才能以及健康情況(好或壞)的內(nèi)容。也就是說,用戶不能(在他自身的視野中的手掌上)可視地識別自己的多條掌紋中的哪一條成為手相占卜數(shù)據(jù)的依據(jù)。[0010]另外,有一種觀點認為左手和右手的每個手掌的掌紋具有不同的含義(例如,有一種觀點認為人的慣用手的掌紋告知了這個人的后天才能或未來,另一只手上的掌紋告知了這個人的先天才能或過去)。由于這一原因,優(yōu)選地,在手相占卜中,需要解讀兩只手上的掌紋。在使用具有照相機的移動終端拍攝掌紋的圖像的系統(tǒng)中,由于在拿著照相機時,用戶應(yīng)當分別對左手和右手執(zhí)行拍攝和發(fā)送圖像的操作,因此會付出兩倍的勞動。
【發(fā)明內(nèi)容】
[0011]希望提供一種出色的圖像顯示裝置及其圖像顯示方法,該圖像顯示裝置能夠優(yōu)選地顯示針對用戶視野中的目標估計或診斷的結(jié)果。
[0012]還希望提供一種圖像顯示裝置及其圖像顯示方法,該圖像顯示裝置能夠可視地顯示基于例如人的身體上的特定部位的圖像估計或診斷的結(jié)果。
[0013]根據(jù)本技術(shù)實施例,一種通過被安裝在頭或面部上來使用的圖像顯示裝置包括:顯示圖像的圖像顯示單元;輸入圖像的圖像輸入單元;判斷單元,判斷被輸入到圖像輸入單元的圖像,或者獲得對于該輸入圖像的判斷結(jié)果;以及控制單元,基于判斷單元的判斷結(jié)果來控制圖像顯示單元。
[0014]根據(jù)該實施例的圖像顯示裝置還可以包括照相機。另外,圖像輸入單元可以被配置為輸入由照相機拍攝的圖像。
[0015]在根據(jù)實施例的圖像顯示裝置中,照相機可以被配置為拍攝用戶的注視方向,或者拍攝用戶身體的至少一部分。
[0016]根據(jù)實施例的圖像顯示裝置還可以包括存儲圖像的存儲單元。另外,圖像輸入單元可以被配置為輸入從存儲單元讀出的圖像。
[0017]根據(jù)實施例的圖像顯示裝置還可以包括與外部裝置通信的通信單元。另外,圖像輸入單元可以被配置為輸入通過通信單元從外部裝置獲得的圖像。
[0018]在根據(jù)實施例的圖像顯示裝置中,圖像顯示單元可以以透視(see-through)模式來顯示圖像,圖像輸入單元可以輸入其中使用照相機拍攝用戶的注視方向的拍攝圖像,判斷單元可以判斷拍攝圖像中的特定部分,以及控制單元可以在圖像顯示單元上顯示判斷結(jié)果,以使得判斷結(jié)果與用戶視野的特定部分重疊。
[0019]在根據(jù)實施例的圖像顯示裝置中,圖像顯示單元可以顯示其中使用照相機拍攝用戶的注視方向的拍攝圖像,圖像輸入單元可以輸入拍攝圖像,判斷單元可以判斷拍攝圖像中的特定部分,以及控制單元可以通過將判斷結(jié)果與拍攝圖像中的特定部分重疊來顯示判斷結(jié)果。
[0020]根據(jù)實施例的圖像顯示裝置還可以包括存儲單元,該存儲單元存儲判斷單元的判斷結(jié)果或者基于該判斷結(jié)果進行控制的圖像。
[0021]在根據(jù)實施例的圖像顯示裝置中,判斷單元可以基于輸入圖像中的特定部分的特征來執(zhí)行診斷,并且控制單元可以通過使診斷的結(jié)果與在由圖像顯示單元顯示的圖像中的特定部分所對應(yīng)的位置重疊,來顯示該結(jié)果。
[0022]在根據(jù)實施例的圖像顯示裝置中,判斷單元可以執(zhí)行對于包括在輸入圖像中的手掌上的掌紋的手掌解讀,并且控制單元可以通過使手掌解讀的結(jié)果與由圖像顯示單元顯示的圖像中的對應(yīng)于特定部分的位置重疊,來顯示該結(jié)果。[0023]根據(jù)實施例的圖像顯示裝置還可以包括特征量提取單元,該特征量提取單元從在輸入圖像中包括的手掌提取掌紋,并且判斷單元可以基于由特征量提取單元提取的掌紋來執(zhí)行手掌解讀。
[0024]在根據(jù)實施例的圖像顯示裝置中,控制單元可以被配置為通過使由特征量提取單元提取的掌紋與由圖像顯示單元顯示的圖像重疊來顯示所述掌紋。
[0025]在根據(jù)實施例的圖像顯示裝置中,圖像顯示裝置的圖像輸入單元可以輸入包括左手掌和右手掌的圖像,并且判斷單元可以對輸入圖像中的左手掌和右手掌執(zhí)行手掌解讀。
[0026]根據(jù)實施例的圖像顯示裝置還可以包括從包括在輸入圖像中的手掌提取掌紋的特征量提取單元,并且控制單元可以通過將從左手掌和右手掌的其中之一提取出的掌紋左右反轉(zhuǎn)并與另一只手掌上的掌紋重疊,來顯示所述掌紋。
[0027]在根據(jù)實施例的圖像顯示裝置中,判斷單元可以診斷包括在輸入圖像中的手的至少一根手指的根部的掌丘,并且控制單元可以通過使診斷的結(jié)果與由圖像顯示單元顯示的圖像中的對應(yīng)于掌丘的位置重疊,來顯示該結(jié)果。
[0028]在根據(jù)實施例的圖像顯示裝置中,判斷單元可以診斷包括在輸入圖像中的手的至少一根手指的長度,并且控制單元可以通過使診斷的結(jié)果與由圖像顯示單元顯示的圖像中的對應(yīng)手指重疊,來顯示該結(jié)果。
[0029]在根據(jù)實施例的圖像顯示裝置中,判斷單元可以執(zhí)行對于包括在輸入圖像中的面部圖像的面相解讀,并且控制單元可以通過使面相解讀的結(jié)果與由圖像顯示單元顯示的圖像中成為面相解讀的依據(jù)的位置重疊,來顯示該結(jié)果。
[0030]在根據(jù)實施例的圖像顯示裝置中,判斷單元可以執(zhí)行對于包括在輸入圖像中的面部圖像的皮膚診斷,并且控制單元可以通過使皮膚診斷的結(jié)果與由圖像顯示單元顯示的圖像中的成為皮膚診斷的依據(jù)的位置重疊,來顯示該結(jié)果。
[0031]在根據(jù)實施例的圖像顯示裝置中,判斷單元可以從包括在輸入拍攝圖像中的人的身體指定穴位的位置,并且控制單元可以通過使該穴位的指定位置與由圖像顯示單元顯示的圖像中的對應(yīng)位置重疊,來顯示該指定位置。
[0032]根據(jù)本技術(shù)的另一個實施例,提供一種圖像顯示方法,該圖像顯示方法在通過安裝在頭或面部上來使用的圖像顯示裝置中顯示圖像,該方法包括:圖像輸入;判斷在圖像輸入中輸入的圖像,或者獲得對于該輸入圖像的判斷結(jié)果;以及基于所述判斷的判斷結(jié)果來控制要顯示的圖像。
[0033]根據(jù)在本說明中公開的技術(shù)的實施例,由于對于用戶的視野中的目標估計或診斷的結(jié)果通過與用戶的視野重疊來顯示,因此用戶可以容易地理解估計或診斷的結(jié)果的依據(jù)。
[0034]另外,根據(jù)在本說明中公開的技術(shù)的實施例,由于基于人的身體的特定部位的圖像估計或診斷的結(jié)果是通過與觀看該部分的視野進行重疊來顯示的,因此用戶可以容易地理解估計或診斷的結(jié)果的依據(jù)。
[0035]在本說明書中公開的技術(shù)的進一步的其它目的、特征或優(yōu)點將通過基于稍后描述的實施例或附圖的詳細描述來闡明。
【專利附圖】
【附圖說明】[0036]圖1是示出從前面觀看配戴有透射型頭部安裝圖像顯示裝置的用戶的狀態(tài)的圖;
[0037]圖2是示出從上方觀看配戴有透射型頭部安裝圖像顯示裝置的用戶的狀態(tài)的圖;
[0038]圖3是示出從前面觀看配戴有遮光型頭部安裝圖像顯示裝置的用戶的狀態(tài)的圖;
[0039]圖4是示出從上方觀看配戴有遮光型頭部安裝圖像顯示裝置的用戶的狀態(tài)的圖;
[0040]圖5是示出圖像顯示裝置的內(nèi)部配置例子的圖;
[0041]圖6是示意性地示出用于顯示對于用戶的視野中的目標估計或診斷的結(jié)果的圖像顯示裝置的功能配置的圖;
[0042]圖7是示意性地示出用于顯示對于用戶的視野中的目標估計或診斷的結(jié)果的圖像顯示裝置的處理序列的流程圖;
[0043]圖8是舉例說明由圖像輸入單元輸入的手掌的圖像的圖;
[0044]圖9是示出與手掌重疊地顯示掌紋的狀態(tài)的圖;
[0045]圖10是示出使手掌解讀的結(jié)果與掌紋相關(guān)并與手掌重疊顯示的狀態(tài)的圖;
[0046]圖11是舉例說明由圖像輸入單元同時輸入用戶的左手掌和右手掌的圖像的圖;
[0047]圖12是示出與左手掌和右手掌重疊顯示每條掌紋的狀態(tài)的圖;
[0048]圖13是示出對左手掌和右手掌的手掌解讀的結(jié)果是通過與左手掌和右手掌上各自的掌紋相關(guān)地顯示的狀態(tài)的圖;
[0049]圖14是示出右手的掌紋被左右反轉(zhuǎn)并與左手的掌紋重疊顯示的狀態(tài)的圖;
[0050]圖15是示出與手掌重疊顯示表示每根手指的根部的掌丘的等高線的狀態(tài)的圖;
[0051]圖16是示出基于掌丘的診斷結(jié)果通過與表示掌丘的等高線相關(guān)地與手掌重疊顯示的狀態(tài)的圖;
[0052]圖17是示出與手掌重疊顯示表示成為每根手指的標準的長度的虛擬手指的狀態(tài)的圖;
[0053]圖18是示出與手掌重疊顯示基于手指長度的診斷結(jié)果的狀態(tài)的圖;
[0054]圖19是舉例說明由圖像輸入單元使用內(nèi)部照相機或外部照相機輸入的包括鼻子的面部圖像的圖;
[0055]圖20是示出與輸入的面部圖像重疊顯示具有作為標準的大小、高度、形狀等的虛擬鼻子的圖像的狀態(tài)的圖;
[0056]圖21是示出與面部圖像重疊顯示使用整個鼻子的大小、鼻子的高度、鼻子的顏色、鼻尖的形狀、鼻孔及其縱溝等的面部解讀的結(jié)果的狀態(tài)的圖;
[0057]圖22是示出與面部圖像重疊顯示美膚診斷的結(jié)果的狀態(tài)的圖;
[0058]圖23是舉例說明在配戴有圖像顯示裝置的用戶的視野中用戶自己的足底的圖像的圖;
[0059]圖24是示出足部穴位圖上的足部穴位的位置被投影變換到用戶的視野中的足底上的狀態(tài)的圖;以及
[0060]圖25是示出與原始足底的圖像重疊顯示足部穴位的位置的狀態(tài)的圖。
【具體實施方式】
[0061 ] 在下文中,將參考附圖詳細描述將在本說明中公開的技術(shù)的實施例。
[0062] A.裝置的配置[0063]圖1示出根據(jù)將在本說明中公開的技術(shù)的一個實施例的圖像顯示裝置100的外部配置。圖像顯示裝置100通過被安裝在用戶的頭或面部上來使用,并且在左眼和右眼中的每一個中顯示圖像。示出的圖像顯示裝置100是透射型(B卩,透視型),并且在該裝置顯示圖像的同時,用戶能夠越過該圖像觀看(即,透視)真實世界中的風景。因此,可以通過將虛擬顯示圖像與真實世界中的風景重疊來顯示該圖像(例如,參考日本未審專利申請公報N0.2011-2753)。由于顯示圖像不會從外側(cè)(即,另一個人)被看到,因此在顯示信息時可以容易地保護隱私。
[0064]當顯示對于用戶視野中的目標估計或診斷的結(jié)果時,可以使用圖像顯示裝置100,但是,這一點將在稍后詳細描述。
[0065]示出的圖像顯示裝置100具有與用于視力矯正的眼鏡類似的結(jié)構(gòu)。由透明光導單元等形成的虛擬圖像光學單元IOlL和IOlR被布置在圖像顯示裝置100的主體的面對用戶的左眼和右眼的位置處,并且用戶觀察到的圖像被顯示在各虛擬圖像光學單元IOlL和IOlR中。例如,虛擬圖像光學單元IOlL和IOlR由眼鏡框形狀的支持體102支持。
[0066]用于輸入周圍圖像(用戶的視野)的外部照相機512被布置在眼鏡框形狀的支持體102的大致中央。更優(yōu)選地,使用多個照相機來構(gòu)成外部照相機512,從而使用視差信息來獲得周邊圖像的三維信息。另外,麥克風103L和103R布置在支持體102的左右兩端附近。由于存在大致左右對稱的麥克風103L和103R,因此,通過僅識別朝向中央的語音(用戶的語音),可以分離出環(huán)境噪音或者另一個人的講話聲音,并且防止例如在使用語音輸入進行操作時的誤動作。
[0067]圖2示出從上方觀看用戶配戴的圖像顯示裝置100的狀態(tài)。如圖所示,分別顯示和輸出左眼圖像和右眼圖像的顯示面板104L和104R被布置在圖像顯示裝置100的左右兩端。顯示面板104L和104R中的每一個是由諸如液晶顯示器、有機EL裝置等的微顯示器形成。從顯示面板104L和104R輸出的左顯示圖像和右顯示圖像由虛擬圖像光學單元IOlL和IOlR分別引導到左眼和右眼附近,并且其放大的虛擬圖像在用戶的瞳孔中形成。
[0068]另外,圖3示出根據(jù)在本說明中公開的技術(shù)的另一個實施例的圖像顯示裝置300的外部配置。圖像顯示裝置300被安裝在用戶的頭或面部上來使用,但是,該裝置是遮光型的,當被安裝在頭上時直接覆蓋住用戶的眼睛,并且可以為正在觀看和收聽圖像的用戶提供一定程度的專心。另外,不同于透視型,配戴著圖像顯示裝置300的用戶不能直接觀看到真實世界中的風景,但是,當配備拍攝在用戶的注視方向上的風景的外部照相機512并且顯示成像的圖像時,該用戶能夠間接地觀看到真實世界中的風景(即,使用視頻的透視)。當然,通過將虛擬現(xiàn)實圖像與視頻透視模式中的圖像重疊,可以顯示虛擬顯示圖像。由于顯示圖像不會從外側(cè)(即,另一個人)觀看到,因此在顯示信息時可以容易地保護隱私。
[0069]當顯示對于用戶視野中的目標估計或診斷的結(jié)果時,也可以使用圖像顯示裝置300,但是,這一點將在稍后詳細描述。
[0070]示出的圖像顯示裝置300的結(jié)構(gòu)類似于帽子形狀,并且被配置為直接覆蓋配戴該裝置的用戶的左右眼。用戶觀察的顯示面板(在圖3中未示出)被布置在圖像顯示裝置300的主體中的面對左右眼的位置。該顯示面板例如由諸如有機EL裝置或者液晶裝置的微顯示器構(gòu)成。
[0071]用于輸入周圍圖像(用戶的視野)的外部照相機512被布置在具有帽子形狀的圖像顯示裝置300的主體的前臉的大致中央。另外,麥克風303L和303R被分別布置在圖像顯示裝置300的主體的左右兩端的附近。由于存在大致左右對稱的麥克風303L和303R,因此,通過僅識別朝向中央的語音(用戶的語音),可以分離出環(huán)境噪音或者另一個人的講話聲音,并且防止例如在使用語音輸入進行操作時的誤動作。
[0072]圖4示出了從上方觀看配戴圖3中示出的圖像顯示裝置300的用戶的狀態(tài)。示出的圖像顯示裝置300包括在面向用戶的面部的側(cè)表面處用于左眼和右眼的顯示面板304L和304R。顯示面板304L和304R例如由諸如有機EL裝置或者液晶裝置的微顯示器構(gòu)成。通過穿過虛擬圖像光學單元301L和301R,顯示面板304L和304R的顯示圖像作為放大的虛擬圖像由用戶來觀察。另外,由于每個用戶的眼睛的高度或?qū)挾却嬖趥€體差異,因此需要將左右的每個顯示系統(tǒng)的位置與配戴該裝置的用戶的眼睛對齊。在圖4中示出的例子中,在右眼顯示面板與左眼顯示面板之間提供眼睛寬度調(diào)整機構(gòu)305。
[0073]圖5示出圖像顯示裝置100的內(nèi)部配置示例。另一個圖像顯示裝置300的內(nèi)部配置與圖像顯示裝置100的內(nèi)部配置相同。在下文中,將描述每一個單元。
[0074]控制單元501包括只讀存儲器(ROM) 501A或者隨機存取存儲器(RAM) 501B。將在控制單元501中執(zhí)行的程序代碼或者各種數(shù)據(jù)項被存儲在R0M501A中。通過執(zhí)行下載到RAM501B中的程序,控制單元501總地控制圖像顯示裝置100的全部操作,包括圖像的顯示控制。存在被存儲在R0M501A中的作為程序或數(shù)據(jù)項的圖像顯示控制程序、使用外部照相機512拍攝的圖像(例如,拍攝了用戶的注視方向的圖像)的圖像處理程序、用于諸如互聯(lián)網(wǎng)上的服務(wù)器(未示出)的外部裝置的通信處理程序、以及對裝置100來說唯一的識別信息。使用外部照相機512拍攝的圖像的圖像處理程序執(zhí)行例如拍攝圖像的分析以及分析結(jié)果的顯示控制。拍攝圖像的分析包括對于用戶視野中的目標的估計處理或診斷處理,諸如基于身體特征的診斷或占卜(諸如當拍攝手掌時的手掌解讀、當拍攝面部時的面相解讀)、基于面部圖像的美膚診斷、室內(nèi)攝影時的風水占卜(Chinese geomancy)以及除這些以外的布局診斷。另外,通過將分析結(jié)果與用戶的視野重疊(包括透視以及視頻透視),圖像處理程序顯示并控制分析結(jié)果。稍后將詳細描述圖像處理。
[0075]輸入操作單元502包括一個或多個諸如鍵、按鈕或者開關(guān)的操作器,用戶使用所述操作器來執(zhí)行輸入操作、通過操作器從用戶接收指令以及將指令輸出到控制單元501。另夕卜,輸入操作單元502類似地從用戶接收在遠程控制接收單元503中接收到的由遠程控制命令形成的指令,并將這些指令輸出到控制單元501。
[0076]姿勢/位置檢測單元504是檢測配戴圖像顯示裝置100的用戶的頭的姿勢的單元。姿勢/位置檢測單元504由陀螺儀傳感器、加速度傳感器、全球定位系統(tǒng)(GPS)傳感器和磁場傳感器中的任意一種,或者考慮了每種傳感器的優(yōu)點和缺點的兩種或更多種傳感器的組合構(gòu)成。
[0077]狀態(tài)檢測單元511獲得關(guān)于配戴圖像顯示裝置100的用戶的狀態(tài)的狀態(tài)信息,并將該信息輸出到控制單元501。例如,該單元獲得以下狀態(tài)作為狀態(tài)信息:用戶的工作狀態(tài)(是否配戴著圖像顯示裝置100)、用戶的動作狀態(tài)(諸如停止、行走、奔跑的移動狀態(tài)、眼瞼的開閉狀態(tài)、注視方向)、精神狀態(tài)(興奮度、覺醒度、感覺、情緒等,例如,在觀看顯示圖像時用戶是否投入或?qū)W⒂陲@示圖像)以及身體狀態(tài)。另外,為了從用戶獲得這些狀態(tài)信息,狀態(tài)檢測單元511可以包括各種狀態(tài)傳感器(均未在圖中圖示),諸如,由機械開關(guān)等形成的穿戴傳感器、拍攝用戶的面部的內(nèi)部照相機、陀螺儀傳感器、加速度傳感器、速度傳感器、壓力傳感器、體溫傳感器、出汗傳感器、肌電傳感器、眼電位傳感器以及腦電圖傳感器。
[0078]外部照相機512被布置在具有例如眼鏡形狀的圖像顯示裝置100的主體的前臉的大致中央(參考圖1),并且能夠拍攝周圍圖像。另外,根據(jù)在狀態(tài)檢測單元511中檢測到的用戶的注視方向,通過執(zhí)行外部照相機512的平搖、俯仰和橫滾方向上的姿勢控制,使用外部照相機512可以拍攝用戶自己的視線的圖像,S卩,用戶注視方向上的圖像??梢詫⑼獠空障鄼C512的拍攝圖像顯示并輸出到顯示單元509,并且還可以將該圖像存儲在存儲單元506中。
[0079]通信單元505執(zhí)行與諸如互聯(lián)網(wǎng)上的服務(wù)器(未示出)的外部裝置的通信處理,以及通信信號的編碼和解碼以及調(diào)制和解調(diào)處理。另外,控制單元501從通信單元505將傳輸數(shù)據(jù)發(fā)出到外部裝置。通信單元505的配置是任意的。例如,可以根據(jù)在與作為通信伙伴的外部裝置進行的發(fā)送接收操作中使用的通信標準,來配置通信單元505。該通信標準可以是有線的也可以是無線的。作為通信標準,存在移動高清連接(MHL)、通用串行總線(UBS)、高清晰度多媒體接口(HDMI)、W1-Fi (注冊商標)、藍牙(注冊商標)通信、紅外線通信等。
[0080]存儲單元506是由固態(tài)硬盤(SSD)等形成的大容量存儲裝置。存儲單元506存儲在控制單元501中執(zhí)行的應(yīng)用程序或者數(shù)據(jù),諸如使用外部照相機512 (將在稍后描述)拍攝的圖像或者通過通信單元505從網(wǎng)絡(luò)獲得的圖像。另外,存儲單元506可以積累用于對在外部照相機512中拍攝的圖像執(zhí)行估計處理或者診斷處理的診斷數(shù)據(jù)庫(將在稍后描述),該診斷數(shù)據(jù)庫與基于諸如掌紋或面相的身體特征的診斷或占卜、皮膚診斷、足部穴位的位置有關(guān)。另外,通過對圖像(包括重疊有診斷結(jié)果的圖像)執(zhí)行估計處理或者診斷處理而獲得的診斷結(jié)果可以被積累到存儲單元506中,以用于重用或者其它目的。
[0081]圖像處理單元507還執(zhí)行信號處理(諸如對于從控制單元501輸出的圖像信號的圖像質(zhì)量校正),并且將該圖像信號轉(zhuǎn)換為對應(yīng)于顯示單元509的屏幕的分辨率。另外,顯示驅(qū)動單元508順序地選擇顯示單元509在每一行中的像素,執(zhí)行像素的線順序掃描,并且基于進行了信號處理的圖像信號來提供像素信號。
[0082]顯示單元509包括例如由諸如有機電致發(fā)光(EL)裝置或者液晶顯示器的微顯示器構(gòu)成的顯示面板。虛擬圖像光學單元510通過放大該圖像來投影顯示單元509的顯示圖像,并使得用戶觀察作為放大虛擬圖像的該圖像。
[0083]聲音處理單兀513對從控制單兀501輸出的聲音信號執(zhí)行聲音放大或聲音質(zhì)量校正,并且進一步執(zhí)行輸入聲音信號的信號處理等。另外,聲音輸入/輸出單元將進行了聲音處理的聲音輸出到外部,并執(zhí)行來自麥克風(上文中描述)的聲音的輸入。
[0084]B.使用圖像顯示裝置的信息呈現(xiàn)
[0085]以虛擬顯示圖像與用戶實際看到的真實世界中的風景重疊的方式,通過安裝在用戶的頭或面部來使用的圖像顯示裝置100可以將信息呈現(xiàn)給用戶。例如,當表示與存在于用戶的視野中的物體有關(guān)的信息的虛擬圖像與該物體重疊地顯示時,用戶可以確切地理解該息是什么。
[0086]另外,即使在沒入型圖像顯示裝置300 (非透視型)的情況中,通過使用外部照相機512拍攝存在于用戶視野中的真實世界中的風景并且通過將虛擬圖像與其視頻透視模式中的圖像重疊來顯示虛擬圖像,也可以執(zhí)行與上述相同的信息呈現(xiàn)。[0087]另一方面,以前使用過一種方法,其中,使用圖像分析來執(zhí)行基于從用戶身體上的特定部位提取的可見生物信息的診斷處理或估計處理(包括基于諸如掌紋或面相的身體特征的診斷或占卜)。
[0088]因此,在根據(jù)實施例的圖像顯示裝置100 (和300)中,當使用外部照相機512拍攝用戶注視方向上的圖像時,在通過將在拍攝圖像中包含的目標(人的身體上的特定部位,例如,用戶的手掌或者面部)的圖像分析所獲得的估計或診斷的結(jié)果與用戶在真實世界中看到的風景重疊來執(zhí)行該結(jié)果的透視顯示(包括視頻透視顯示)時,可以向用戶呈現(xiàn)在他自己視野中的目標的估計或診斷的結(jié)果以便被容易理解。
[0089]圖6示意性地示出圖像顯示裝置100的功能配置,其中,對于用戶視野中的目標的估計或診斷的結(jié)果被與用戶視野重疊地顯示。在控制單元501執(zhí)行例如預定程序時,圖示的功能配置可以被實現(xiàn)。
[0090]例如,圖像輸入單元601輸入外部照相機512的拍攝圖像、存儲在存儲單元506中的過去的拍攝圖像、以及通過通信單元505從外部取入的圖像(例如,另一個用戶的注視方向的圖像或者在網(wǎng)絡(luò)上示出的圖像)。
[0091]如上所述,通過根據(jù)使用狀態(tài)檢測單元511檢測到的用戶的注視方向來執(zhí)行姿勢控制,外部照相機512拍攝用戶的注視方向的圖像。在這種情況中,用戶注視方向的實時圖像被輸入到圖像輸入單元601。當然,還可以將存儲在存儲單元506中的用戶注視方向的過去的拍攝圖像輸入到圖像輸入單元601。
[0092]特征量提取單元602從被輸入到圖像輸入單元601的圖像提取在隨后的階段的診斷處理中使用的特征量。另外,診斷單元603將在特征量提取單元602中提取的特征量與診斷數(shù)據(jù)庫604中用于診斷的特征量進行對照,執(zhí)行診斷處理,并且生成其診斷結(jié)果。診斷單元603將診斷結(jié)果輸出到用于后續(xù)階段的合成單元605。另外,出于重用等的目的,診斷單元603可以將診斷結(jié)果存儲在存儲單元506中。
[0093]另外,診斷單元603和診斷數(shù)據(jù)庫604 (在圖6中以虛線圍繞的部分)不是必須內(nèi)置在圖像顯示裝置100中。例如,還可以使用外部計算資源(諸如,通過通信單元505連接的網(wǎng)絡(luò)上的服務(wù)器)來建立診斷單元603和診斷數(shù)據(jù)庫604。在這種情況下,在特征量提取單元602中的從輸入圖像提取的特征量被在通信單元505中發(fā)送到服務(wù)器,并且在通信單元505中接收診斷結(jié)果。另外,特征量提取單元602也可以被布置在外部,而不在圖像顯示裝置100中,并且,在這種情況下,輸入圖像被以原樣從通信單元505發(fā)送。
[0094]合成單元605合成虛擬圖像,在該虛擬圖像中在診斷單元603中生成的診斷結(jié)果被與圖像輸入單元601的輸入圖像重疊。另外,合成單元將虛擬圖像顯示并輸出到顯示單元509,并且通過使結(jié)果與輸入圖像(用戶看到的在真實世界中的風景)重疊,以透視模式(包括視頻透視顯示)顯示診斷結(jié)果。另外,當針對輸入圖像的診斷單元603的診斷結(jié)果還被作為聲音信息輸出時,該結(jié)果被從聲音輸入/輸出單兀514輸出到外部。另外,出于重用等的目的,在合成單元605中合成的圖像可以被存儲在存儲單元506中。
[0095]另外,圖7以流程圖的形式示出在圖像顯示裝置100中通過使對于用戶視野中的目標的估計或者診斷的結(jié)果與用戶的視野重疊來顯示所述結(jié)果的處理序列。在控制單元501執(zhí)行例如預定程序時,圖示的處理序列被執(zhí)行。
[0096]例如,該處理隨著圖像顯示裝置100的電源開啟而開始,或者響應(yīng)于由用戶通過輸入操作單元502等指示的開始處理的指令而開始。
[0097]另外,在該處理的啟動期間,圖像輸入單元601輸入使用外部照相機512拍攝的實時圖像(步驟S701)。例如,外部照相機512拍攝用戶注視方向的圖像。但是,圖像輸入單元601可以輸入存儲在存儲單元506中的過去的拍攝圖像,或者通過通信單元505從外部取入的圖像。在該處理中的輸入圖像被顯示并輸出到顯示單元509 (步驟S702)。
[0098]另外,特征量提取單元602從輸入到圖像輸入單元601的圖像提取將被用于隨后的階段的診斷處理的特征量(步驟S703)。
[0099]隨后,診斷單元603通過將從特征量提取單元602提取的特征量與診斷數(shù)據(jù)庫中用于診斷的特征量進行對照來執(zhí)行診斷處理,并生成其診斷結(jié)果(步驟S704)。獲得的診斷結(jié)果可以被存儲在存儲單兀506中。
[0100]隨后,合成單元605合成虛擬圖像,在該虛擬圖像中在診斷單元603中生成的診斷結(jié)果與圖像輸入單元601的輸入圖像重疊。另外,合成單元605將虛擬圖像顯示并輸出到顯示單元509,并且通過將診斷結(jié)果與輸入圖像(用戶看到的在真實世界中的風景)重疊,以透視模式(包括視頻透視模式)顯示診斷結(jié)果(步驟S705)。另外,當診斷單元603將針對輸入圖像的診斷結(jié)果還作為聲音信息輸出時,該結(jié)果被從聲音輸入/輸出單元514輸出到外部。出于重用等的目的,其中合成有診斷結(jié)果的圖像或聲音信息可以被存儲在存儲單元506中。
[0101]之后,響應(yīng)于通過輸入操作單元502等來自用戶的結(jié)束該處理的指令,執(zhí)行結(jié)束處理(步驟S706),并且處理例程結(jié)束。
[0102]在結(jié)束處理中,可以包括:將在步驟S704中獲得的診斷結(jié)果、諸如在步驟S705中由合成單元605合成的虛擬圖像的信息存儲在存儲單元506中或者上傳到服務(wù)器,診斷數(shù)據(jù)庫604的更新處理等。
[0103]在診斷單元603中執(zhí)行的診斷處理中,存在對于用戶視野中的目標的估計處理或診斷處理,諸如基于身體特征的診斷或占卜,例如,當配戴有圖像顯示裝置100的用戶觀看他自己或另一個人的手掌時的手掌解讀、當該用戶觀看另一個人的面部(或者在鏡子上反射的他自己的面部)時的面相解讀、當觀察房子或建筑物時的房子的家相(physiognomy)的診斷、當觀看另一個人的面部(或者在鏡子上反射的他自己的面部)時的美膚診斷、當觀看房間時的風水占卜以及除了這些以外的布局診斷。根據(jù)本實施例,診斷單元603執(zhí)行關(guān)于圖像輸入單元601的輸入圖像(諸如由外部照相機512在用戶注視方向上拍攝的圖像)的上述診斷。另外,合成單元605合成診斷結(jié)果以與輸入圖像重疊,并且將該結(jié)果顯示并輸出到顯示單元509上。因此,用戶不是僅僅接受診斷結(jié)果,而是能夠更具體地且更準確地理解診斷內(nèi)容,例如,診斷結(jié)果的依據(jù)是在輸入圖像中的哪個具體部分等。
[0104]B-1.手相解讀
[0105]首先,進行手相解讀的情況將作為基于身體特征的診斷或占卜的例子來描述。
[0106]圖8舉例說明了配戴有圖像顯示裝置100的用戶的視野中的用戶自己的左手掌的圖像800。圖像輸入單元601可以使用外部照相機512將在用戶的視野中的手掌的圖像800輸入。另外,手掌的圖像800不是必須是使用外部照相機512拍攝的實時圖像,而可以是臨時存儲在存儲單元506中的過去的拍攝圖像,或者可以是通過通信單元505下載的他自己或另一個人的手掌圖像。[0107]特征量提取單元602從輸入的手掌圖像提取掌紋作為手掌的特征量,并將每條掌紋的信息輸出到診斷單元603。另外,通過將掌紋與手掌圖像900重疊,合成單元605將從手掌提取的每條掌紋901顯示并輸出到顯示單元509上,作為在處理中的顯示圖像,即,作為手相解讀中的顯示圖像(參考圖9)。
[0108]另外,診斷單元603將特征量提取單元602中提取的每條掌紋與診斷數(shù)據(jù)庫604中的掌紋數(shù)據(jù)庫進行對照,執(zhí)行手相解讀,并生成其診斷結(jié)果。另外,合成單元605合成虛擬圖像,在該虛擬圖像中,在診斷單元603中生成的診斷結(jié)果與圖像輸入單元601的輸入圖像重疊,并且如圖10所示,通過將結(jié)果與原始的手掌圖像1000重疊,合成單元將該結(jié)果顯示并輸出到顯示單元509上。在圖示的例子中,每條掌紋1001的含義以從該掌紋出現(xiàn)的氣球1002和1003的形式來顯示。因此,由于通過與以文本格式顯示的手相解讀數(shù)據(jù)(諸如婚姻運勢、愛情運勢、工作運勢、金錢運勢)的情況(例如,參考日本未審專利申請公報N0.2007-183和日本未審專利申請公報N0.2010-123020)相比,用戶能夠可視地確認診斷結(jié)果是依據(jù)哪條掌紋,因此用戶可以容易地理解診斷結(jié)果,并且診斷結(jié)果變得更可靠。
[0109]另外,有一種觀點認為左手和右手中的每只手上的掌紋具有不同的含義(例如,有一種觀點認為人的慣用手上的掌紋告知了這個人的后天才能或未來,另一只手上的掌紋告知了這個人的先天才能或過去)。出于這一原因,在執(zhí)行手相解讀時,優(yōu)選地,需要對兩只手進行手相解讀。但是,在遇到用戶使用具有照相機的移動終端或者數(shù)字照相機來拍攝他自己的手掌的情況的系統(tǒng)的情況下(例如,參考日本未審專利申請公報N0.2007-183和日本未審專利申請公報N0.2010-123020),用戶應(yīng)當在拿著照相機的同時分別對左右手進行拍攝,這會付出兩倍的勞動。
[0110]與此相反,根據(jù)本實施例,圖像輸入是使用安裝在用戶的頭或面部上的圖像顯示裝置100的外部照相機512來進行的。也就是說,如圖11所示,可以同時輸入用戶的左右手掌圖像1100,由于用戶在兩只手都空閑的情況下進行圖像輸入,因此可以節(jié)省時間。
[0111]另外,特征量提取單元602同時從左右手掌的每一個中提取掌紋1201L和1201R,并通過將這些掌紋分別與手掌圖像1200L和1200R重疊來將這些掌紋顯示并輸出在顯示單元509上(參考圖12)。
[0112]另外,通過將在特征量提取單元602中提取的左右掌紋1301L和1301R中的每一個與診斷數(shù)據(jù)庫604中的掌紋數(shù)據(jù)庫進行對照,診斷單元603進行手相解讀,并以從所述掌紋出現(xiàn)的氣球1302至1305的形式來顯示掌紋1301L和1301R中的每條的含義(參考圖13)。
[0113]如圖14所示,合成單元605生成圖像1401R’(在圖中以虛線表示),其中,在由特征量提取單元602從用戶的左手掌1400L和右手掌1400R提取的左掌紋1401L和右掌紋140IR之中的右手的掌紋140IR被左右反轉(zhuǎn),并且該圖像可以與左手圖像1400L上的掌紋1401L重疊顯示。通過在圖14中圖示的圖像,用戶可以一目了然地理解他的左掌紋和右掌紋是相互不同的,并且確認左右類似的掌紋以及左右顯著不同的掌紋。另外,可以推測所診斷的婚姻運勢、愛情運勢、工作運勢、金錢運勢等是依據(jù)于先天還是后天的性質(zhì)。
[0114]另外,已經(jīng)使用了一種方法,其中,才能或性格是分別基于五根手指的根部的凸起部分(即“掌丘”)來解讀的。因此,特征量提取單元602可以從輸入自圖像輸入單元601的手掌圖像提取與手掌的凹凸有關(guān)的信息作為特征量。例如,當外部照相機512是由多個照相機構(gòu)成時,可以基于從每個照相機的拍攝圖像獲得的視差信息來獲得手掌的三維信息。另外,如圖15所示,通過使等高線1501與輸入手掌圖像1500重疊,合成單元605可以顯示表不手掌的應(yīng)答的等聞線1501 (在圖中由虛線表不)。
[0115]另外,診斷單元603將特征量提取單元602中提取的每根手指的根部的掌丘與診斷數(shù)據(jù)庫604中的掌丘數(shù)據(jù)庫進行對照,并生成其診斷結(jié)果。另外,合成單元605合成虛擬圖像,在該虛擬圖像中,在診斷單元603中生成的診斷結(jié)果與圖像輸入單元601的輸入圖像重疊,如圖16所示,合成單元605使虛擬圖像與原始的手掌圖像1600重疊,并且將該圖像顯示并輸出到顯示單元509上。在圖示的例子中,每根手指的根部的掌丘1601的含義被以從掌丘出現(xiàn)的氣球1602和1603的形式來顯示。由于用戶能夠可視地確認才能或性格的診斷結(jié)果依據(jù)于哪個掌丘,因此用戶可以容易地理解診斷結(jié)果,并且診斷結(jié)果變得更可靠。
[0116]另外,雖然絕對不是手相學,但是,還使用了一種方法,其中,人的才能或性格是基于作為手掌的可見信息的手指的長度來診斷的。在這種情況下,特征量提取單元602對于從圖像輸入單元601輸入的手掌圖像的全部五個手指或者關(guān)注的一部分手指,計算關(guān)于手指的長度的信息,作為特征量。如圖17所示,通過將具有標準長度的虛擬手指圖像1701(在圖中由虛線表示)與輸入手掌圖像1700重疊,合成單元605可以顯示該虛擬手指圖像1701。當進行診斷時,可以使用粗的虛線來顯示將被特別關(guān)注的虛擬手指(在圖中,使用粗的虛線來表示被特別關(guān)注的食指和無名指這兩個虛擬手指)。
[0117]另外,診斷單元603將在特征量提取單元602中提取的每根手指的長度與診斷數(shù)據(jù)庫604中的手指長度數(shù)據(jù)庫進行對照,進行人的才能或性格的診斷,并且生成其診斷結(jié)果。另外,合成單元605合成虛擬圖像,在該虛擬圖像中,由診斷單元603生成的診斷結(jié)果與圖像輸入單元601的輸入圖像重疊,并且如圖18所示,通過將該虛擬圖像與原始的手掌圖像1800重疊,合成單元605將虛擬圖像顯示并輸出到顯示單元509上。在圖示的例子中,基于無名指的長度診斷的結(jié)果被以從無名指的尖端出現(xiàn)的氣球1802的形式來顯示。另夕卜,通過與實際的手掌圖像1800重疊地顯示具有標準長度的虛擬手指圖像1801,并且在診斷時被特別關(guān)注的手指的虛擬手指被使用粗虛線來顯示(同上)。由于用戶能夠可視地確認才能或性格的診斷結(jié)果依據(jù)于哪根手指,因此用戶可以容易地理解診斷結(jié)果,并且診斷結(jié)果變得更可靠。
[0118]B-2.面相解讀
[0119]隨后,進行面相解讀的情況將作為基于身體特征的診斷或占卜的另一個例子來描述。
[0120]圖像輸入單元601輸入使用包括在狀態(tài)檢測單元511中的內(nèi)部照相機(在上文中描述過)拍攝的用戶的面部圖像,或者使用外部照相機512拍攝的在用戶眼前的人的面部圖像。或者,可以輸入可以從存儲單元506得到的使用內(nèi)部照相機或外部照相機512在過去拍攝的面部圖像或者通過通信單元505從外部服務(wù)器下載的面部圖像。
[0121]特征量提取單元602從輸入的面部圖像提取作為診斷目標的部位的諸如輪廓、大小、色調(diào)等的面部特征量,并將該面部特征量輸出到診斷單元603。另外,通過將在特征量提取單元602中提取的面部特征量與診斷數(shù)據(jù)庫604中的面相數(shù)據(jù)庫進行對照,診斷單元603進行面相解讀。
[0122]當進行面相解讀時,一般參考整個面部的形狀、以及諸如眼、鼻、耳、嘴、眉毛、顎等的面部部位的形狀或大小。
[0123]例如,在使用鼻子的面相解讀中,使用整個鼻子的大小、鼻子的高度、鼻子的顏色、鼻尖的形狀、鼻孔及其縱溝等。圖19舉例說明通過圖像輸入單元601使用內(nèi)部照相機或外部照相機512輸入的包括鼻子的面部圖像。
[0124]特征量提取單元602從在圖像輸入單元601中輸入的面部圖像提取面部的特征量,諸如整個鼻子的大小、鼻子的高度、鼻子的顏色、鼻尖的形狀、鼻孔及其縱溝等。如圖20所示,通過將具有作為標準的大小、高度、形狀等的虛擬鼻子的圖像2001 (在圖中由虛線表示)與輸入面部圖像2000重疊,合成單元605顯示圖像2001。
[0125]另外,診斷單元603將諸如整個鼻子的大小、鼻子的高度、鼻子的顏色、鼻尖的形狀、鼻孔及其縱溝等的面部的每個特征量與診斷數(shù)據(jù)庫604中的面相數(shù)據(jù)庫進行對照,并診斷諸如金錢運勢或家庭運勢的運勢或者諸如行動力的性格。另外,合成單元605合成虛擬圖像,在該虛擬圖像中,在診斷單元603中生成的診斷結(jié)果與圖像輸入單元601的輸入圖像重疊,并且如圖21所示,通過將該結(jié)果與面部圖像2100重疊,合成單元605將該結(jié)果顯示并輸出到顯示單元509上。在圖示的例子中,使用整個鼻子的大小、鼻子的高度、鼻子的顏色、鼻尖的形狀、鼻孔及其縱溝等進行的面相解讀的結(jié)果被以從鼻子出現(xiàn)的氣球2102的形式來顯示。由于用戶可以可視地確認面部圖像的擁有者的運勢或性格的診斷結(jié)果是依據(jù)于哪個面部部位,因此用戶可以容易地理解診斷結(jié)果,并且診斷結(jié)果變得更可靠。
[0126]B-3.美膚診斷
[0127]另外,除了面相以外,還可以進行皮膚診斷。例如,已經(jīng)知道了使用面部的部分圖像的測量來進行紋理分析、斑點分析、膚色分析、皮脂分析等的技術(shù),或者使用整個面部的圖像的測量來進行皺紋/毛孔分析、斑點分析、葉啉分析等的技術(shù)(例如,參考日本未審專利申請公報N0.2007-130104),或者使用近紅外照相機進行的諸如保濕的高精度皮膚分析(例如,參考日本未審專利申請公報N0.2011-206513)。
[0128]因此,特征量提取單元602使用對于使用內(nèi)部照相機拍攝的用戶自己的面部或者使用外部照相機512拍攝的另一個人的面部進行的部分圖像的測量來進行紋理分析、斑點分析、膚色分析、皮脂分析等,或者使用整個面部的圖像的測量來進行皺紋/毛孔分析、斑點分析、葉啉分析等,并將分析結(jié)果輸出到診斷單元603。或者,特征量提取單元602使用用內(nèi)部照相機或外部照相機512拍攝的面部圖像的近紅外區(qū)域進行皮膚分析,并將分析結(jié)果輸出到診斷單元603。通過將在特征量提取單元602中提取的面部特征量與診斷數(shù)據(jù)庫604中的美膚數(shù)據(jù)庫進行對照,并通過執(zhí)行美膚診斷,診斷單元603可以指定面部中的美膚的部分等,或者相反地指定皮膚嚴重損壞的部分。另外,合成單元605合成虛擬圖像,在該虛擬圖像中,在診斷單元603中生成的診斷結(jié)果與圖像輸入單元601的輸入圖像重疊,并且如圖22所示,通過使該結(jié)果與面部圖像2200重疊,合成單元605將該結(jié)果顯示并輸出到顯示單元509上。在圖示的例子中,皮膚診斷結(jié)果以諸如從面部圖像2200中被足夠地護理的美膚部分出現(xiàn)的氣球“好”2201的形式來顯示,或者相反地以諸如從嚴重損壞的部分出現(xiàn)的氣球“差”2202的形式來顯示。可以顯示作為整個面部圖像2200的分析結(jié)果計算出的皮膚年齡2203。用戶可以容易地用裸眼檢查面部圖像中的哪部分應(yīng)當進行護理。另外,診斷結(jié)果變得更可靠,從而可以使用戶希望進行皮膚護理。
[0129]B-4.穴位的顯示[0130]由于在面部存在諸如眼、眉毛、鼻子、嘴等的多個面部部位,因此通過以面部部位為目標來指定面部中的位置相對容易。與此相反,由于在其上展開的是大致均勻的皮膚,因此在足底表面等上不存在目標,因此,在足底上難以指定位置。
[0131]例如,在諸如消化系統(tǒng)或支氣管系統(tǒng)、腦部以及關(guān)節(jié)的整個身體的穴位都集中在足底上,并且通過針對與機能減退的部位對應(yīng)的穴位進行指壓治療或按摩可以促進恢復。
[0132]但是,由于在足底上有如此多的穴位,與專家的情況不同,普通用戶難以記住穴位以及每個穴位與有效部位之間的對應(yīng)關(guān)系。另外,盡管有足部穴位表,但是由于足底的形狀或縱橫比存在個體差異,因此在真實的足底上很難確切地示出足部穴位表中的穴位。當然,不僅是足底,諸如背部的每個位置的穴位也很難記住。
[0133]因此,根據(jù)本實施例,當觀看足底的用戶的注視方向上的圖像通過外部照相機512從圖像輸入單元601被取入時,并且當診斷單元603獲得對應(yīng)于希望改善機能的部位的穴位時,診斷單元將其診斷結(jié)果顯示并輸出到顯示單元509上,以與輸入圖像重疊。因此,即使當用戶不記得或者不參考穴位表時,用戶也能夠準確地理解穴位,并且能夠準確地進行按摩或指壓治療。
[0134]圖23舉例說明在配戴有圖像顯示裝置100的用戶的視野中用戶自己的足底(或者,將由該用戶提供足部穴位按摩服務(wù)的另一個人的足底)的圖像2300。圖像輸入單元601可以使用外部照相機512將在用戶的視野中的足底的圖像2300輸入。
[0135]這里,例如,通過聲音輸入或者對于輸入/輸出操作單元502的操作,用戶輸入表示對應(yīng)于用戶尋找的部位(例如,胃)的足部穴位的指令。
[0136]特征量提取單元602從輸入圖像2300提取足底2301的輪廓作為特征量,并將該輪廓輸出到診斷單元603。在特征量提取單元中提取的足底2301的大小或形狀以及縱橫比存在個體差異。
[0137]另一方面,表示具有正規(guī)化形狀的足底上的足部穴位的每個位置的足底的表(未示出)被存儲在診斷數(shù)據(jù)庫604中。
[0138]當通過參考診斷數(shù)據(jù)庫604中的足部穴位表2400找到對應(yīng)于用戶指定的部位(例如,胃)的足部穴位2401時,診斷單元603在特征量提取單元602中提取的(用戶的視野上的)足底2042的輪廓上執(zhí)行對其位置的投影變換(參考圖24)。
[0139]另外,通過將作為診斷結(jié)果獲得的足部穴位2501的位置與原始的足底的圖像2500重疊,合成單元605將足部穴位2501顯示并輸出到顯示單元509上(參照圖25)。因此,在不記得或者不參考穴位表的情況下,用戶能夠準確地理解穴位,并且準確地進行按摩或指壓處理。
[0140]另外,在圖23到圖25中僅描述了足底上的穴位,但是,還可以將本說明書中公開的技術(shù)應(yīng)用于其它部位,諸如手掌上的穴位、肩部上的穴位以及背部上的穴位。
[0141](I)一種通過安裝在頭或面部來使用的圖像顯示裝置,包括:顯示圖像的圖像顯示單元;輸入圖像的圖像輸入單元;判斷單元,判斷輸入到圖像輸入單元的圖像,或者獲得對于該輸入圖像的判斷結(jié)果;以及控制單元,基于判斷單元的判斷結(jié)果來控制圖像顯示單元。
[0142](2)在(I)中描述的圖像顯示裝置,還包括照相機,其中,圖像輸入單元輸入由該照相機拍攝的圖像。
[0143](3)在(2)中描述的圖像顯示裝置,其中,照相機拍攝用戶的注視方向或者用戶的身體的至少一部分。
[0144](4)在(I)中描述的圖像顯示裝置,還包括存儲圖像的存儲單元,并且其中,圖像輸入單元輸入從存儲單元讀出的圖像。
[0145](5)在(I)中描述的圖像顯示裝置,還包括與外部裝置通信的通信單元,并且其中,圖像輸入單元輸入通過通信單元從外部裝置獲得的圖像。
[0146](6)在(I)中描述的圖像顯示裝置,其中,控制單元通過使表示判斷結(jié)果的圖像與由圖像顯示單元顯示的圖像的對應(yīng)位置重疊,來顯示表示判斷結(jié)果的圖像。
[0147](7)在(I)中描述的圖像顯示裝置,其中,圖像輸入單元輸入由圖像顯示單元顯示的圖像,判斷單元判斷輸入圖像中的特定部分,以及控制單元通過使判斷結(jié)果與由圖像顯示單元顯示的圖像中的對應(yīng)于所述特定部分的位置重疊,來顯示判斷結(jié)果。
[0148](8)在(I)中描述的圖像顯示裝置,其中,圖像顯示單元以透視模式來顯示圖像,圖像輸入單元輸入其中使用照相機拍攝用戶的注視方向的拍攝圖像,判斷單元判斷所述拍攝圖像中的特定部分,并且控制單元在圖像顯示單元上顯示判斷結(jié)果,以使得判斷結(jié)果與用戶視野上的所述特定部分重疊。
[0149](9)在(I)中描述的圖像顯示裝置,其中,圖像顯示單元顯示其中使用照相機拍攝用戶的注視方向的拍攝圖像,圖像輸入單元輸入所述拍攝圖像,判斷單元判斷所述拍攝圖像中的特定部分,并且控制單元通過使判斷結(jié)果與所述拍攝圖像中的所述特定部分重疊來顯示該結(jié)果。
[0150](10)在(I)中描述的圖像顯示裝置,還包括存儲判斷單元的判斷結(jié)果或基于判斷結(jié)果來控制的圖像的存儲單元。
[0151](11)在(6)到(9)中的任一項中描述的圖像顯示裝置,其中,判斷單元基于輸入圖像中的特定部分的特征來執(zhí)行診斷,并且控制單元通過使診斷的結(jié)果與由圖像顯示單元顯示的圖像中的對應(yīng)于所述特定部分的位置重疊,來顯示該結(jié)果。
[0152](12 )在(6 )到(9 )中的任一項中描述的圖像顯示裝置,其中,判斷單元對于包括在輸入圖像中的手掌上的掌紋進行手相解讀,并且控制單元通過使手相解讀的結(jié)果與由圖像顯示單元顯示的圖像中的對應(yīng)于所述掌紋的位置重疊,來顯示該結(jié)果。
[0153](13)在(12)中描述的圖像顯示裝置,還包括從包括在輸入圖像中的手掌提取掌紋的特征量提取單元,并且其中,判斷單元基于由特征量提取單元提取的掌紋來執(zhí)行手相解讀。
[0154](14)在(13)中描述的圖像顯示裝置,其中,控制單元通過使由特征量提取單元提取的掌紋與由圖像顯示單元顯示的圖像重疊,來顯示所述掌紋。
[0155](15)在(12)中描述的圖像顯示裝置,其中,圖像輸入單元輸入包括左右手掌的圖像,并且判斷單元對來自輸入圖像的左右手掌進行手相解讀。
[0156](16)在(15)中描述的圖像顯示裝置,還包括從包括在輸入圖像中的手掌提取掌紋的特征量提取單元,并且其中,控制單元通過將從左右手掌之一提取的掌紋左右反轉(zhuǎn)并與另一只手掌上的掌紋重疊,來顯示所述掌紋。
[0157](17 )在(6 )到(9 )中的任一項中描述的圖像顯示裝置,其中,判斷單元診斷包括在輸入圖像中的手的至少一根手指的根部的掌丘,并且控制單元通過使診斷的結(jié)果與由圖像顯示單元顯示的圖像中的對應(yīng)于所述掌丘的位置重疊,來顯示該結(jié)果。[0158](18)在(6)到(9)中的任一項中描述的圖像顯示裝置,其中,判斷單元診斷包括在輸入圖像中的手的至少一根手指的長度,并且控制單元通過使診斷的結(jié)果與由圖像顯示單元顯示的圖像中的對應(yīng)手指重疊,來顯示該結(jié)果。
[0159](19)在(6)到(9)中的任一項中描述的圖像顯示裝置,其中,判斷單元對于包括在輸入圖像中的面部圖像進行面相解讀,并且控制單元通過使面相解讀的結(jié)果與由圖像顯示單元顯示的圖像中的成為面相解讀的依據(jù)的位置重疊,來顯示該結(jié)果。
[0160](20)在(6)到(9)中的任一項中描述的圖像顯示裝置,其中,判斷單元對于包括在輸入圖像中的面部圖像進行皮膚診斷,并且控制單元通過使皮膚診斷的結(jié)果與由圖像顯示單元顯示的圖像中的成為皮膚診斷的依據(jù)的位置重疊,來顯示該結(jié)果。
[0161](21)在(6)到(9)中的任一項中描述的圖像顯示裝置,其中,判斷單元從包括在輸入拍攝圖像中的人的身體指定穴位的位置,并且控制單元通過使指定的所述穴位的位置與由圖像顯示單元顯示的圖像中的對應(yīng)位置重疊,來顯示指定的所述穴位的位置。
[0162](22) 一種在通過安裝在頭或面部來使用的圖像顯示裝置中顯示圖像的圖像顯示方法,該方法包括:圖像的輸入;判斷在所述圖像的輸入中輸入的圖像,或者獲得對于該輸入圖像的判斷結(jié)果;以及基于所述判斷的判斷結(jié)果來控制將被顯示的圖像。
[0163](23) —種計算機程序,其中,以計算機可讀的格式描述了用于在頭部安裝的圖像顯示裝置或面部安裝的圖像顯示裝置中顯示圖像的處理,該程序使得計算機充當:顯示圖像的圖像顯示單元;輸入圖像的圖像輸入單元;判斷單元,判斷輸入到圖像輸入單元的圖像,或者獲得對于該輸入圖像的判斷結(jié)果;以及控制單元,基于判斷單元的判斷結(jié)果來控制將被顯示的圖像。
[0164]本領(lǐng)域技術(shù)人員應(yīng)當理解,可以根據(jù)設(shè)計要求和其它因素進行各種修改、組合、子組合和替換,只要它們在所附權(quán)利要求或其等同物的范圍內(nèi)即可。
【權(quán)利要求】
1.一種通過被安裝在頭或面部來使用的圖像顯示裝置,包括: 顯示圖像的圖像顯示單元; 輸入圖像的圖像輸入單元; 判斷單元,該判斷單元判斷輸入到圖像輸入單元的圖像,或者獲得對于該輸入圖像的判斷結(jié)果;以及 控制單元,該控制單元基于判斷單元的判斷結(jié)果來控制圖像顯示單元。
2.根據(jù)權(quán)利要求1所述的圖像顯示裝置,還包括: 照相機, 其中,圖像輸入單元輸入由該照相機拍攝的圖像。
3.根據(jù)權(quán)利要求2所述的圖像顯示裝置, 其中,照相機拍 攝用戶的注視方向或者用戶身體的至少一部分。
4.根據(jù)權(quán)利要求1所述的圖像顯示裝置,還包括: 存儲圖像的存儲單元, 其中,圖像輸入單元輸入從存儲單元讀出的圖像。
5.根據(jù)權(quán)利要求1所述的圖像顯示裝置,還包括: 與外部裝置通信的通信單元, 其中,圖像輸入單元輸入通過通信單元從外部裝置獲得的圖像。
6.根據(jù)權(quán)利要求1所述的圖像顯示裝置, 其中,圖像顯示單元以透視模式來顯示圖像, 其中,圖像輸入單元輸入使用照相機拍攝用戶的注視方向的拍攝圖像, 其中,判斷單元判斷所述拍攝圖像中的特定部位,并且 其中,控制單元在圖像顯示單元上顯示判斷結(jié)果,以使得判斷結(jié)果與用戶視野上的所述特定部位重疊。
7.根據(jù)權(quán)利要求1所述的圖像顯示裝置, 其中,圖像顯示單元顯示使用照相機拍攝用戶的注視方向的拍攝圖像, 其中,圖像輸入單元輸入所述拍攝圖像, 其中,判斷單元判斷所述拍攝圖像中的特定部位,并且 其中,控制單元通過使判斷結(jié)果與所述拍攝圖像中的所述特定部位重疊來顯示判斷結(jié)果O
8.根據(jù)權(quán)利要求1所述的圖像顯示裝置,還包括: 存儲單元,該存儲單元存儲判斷單元的判斷結(jié)果或基于判斷結(jié)果來控制的圖像。
9.根據(jù)權(quán)利要求6所述的圖像顯示裝置, 其中,判斷單元基于輸入圖像中的特定部位的特征來執(zhí)行診斷,并且其中,控制單元通過使診斷的結(jié)果與由圖像顯示單元顯示的圖像中的對應(yīng)于所述特定部位的位置重疊,來顯示該結(jié)果。
10.根據(jù)權(quán)利要求6所述的圖像顯示裝置, 其中,判斷單元對于包括在輸入圖像中的手掌上的掌紋進行手相解讀,并且其中,控制單元通過使手相解讀的結(jié)果與由圖像顯示單元顯示的圖像中的對應(yīng)于所述掌紋的位置重疊,來顯示該結(jié)果。
11.根據(jù)權(quán)利要求10所述的圖像顯示裝置,還包括: 從包括在輸入圖像中的手掌提取掌紋的特征量提取單元, 其中,判斷單元基于由特征量提取單元提取的掌紋來執(zhí)行手相解讀。
12.根據(jù)權(quán)利要求11所述的圖像顯示裝置, 其中,控制單元通過使由特征量提取單元提取的掌紋與由圖像顯示單元顯示的圖像重疊,來顯示所述掌紋。
13.根據(jù)權(quán)利要求10所述的圖像顯示裝置, 其中,圖像輸入單元輸入包括左右手掌的圖像,并且 其中,判斷單元根據(jù)輸入圖像對左右手掌進行手相解讀。
14.根據(jù)權(quán)利要求13所述的圖像顯示裝置,還包括: 從包括在輸入圖像中的手掌提取掌紋的特征量提取單元, 其中,控制單元通過將從左右手掌之一提取的掌紋左右反轉(zhuǎn)并與另一只手掌上的掌紋重疊,來顯示所述掌紋。
15.根據(jù)權(quán)利要求6所述的圖像顯示裝置, 其中,判斷單元診斷包括在輸入圖像中的手的至少一根手指的根部的掌丘,并且其中,控制單元通過使診斷的結(jié)果與由圖像顯示單元顯示的圖像中的對應(yīng)于所述掌丘的位置重疊,來顯示該結(jié)果。
16.根據(jù)權(quán)利要求6所述的圖像顯示裝置, 其中,判斷單元診斷包括在輸入圖像中的手的至少一根手指的長度,并且其中,控制單元通過使診斷的結(jié)果與由圖像顯示單元顯示的圖像中的對應(yīng)手指重疊,來顯示該結(jié)果。
17.根據(jù)權(quán)利要求6所述的圖像顯示裝置, 其中,判斷單元對于包括在輸入圖像中的面部圖像進行面相解讀,并且其中,控制單元通過使面相解讀的結(jié)果與由圖像顯示單元顯示的圖像中的成為面相解讀的依據(jù)的位置重疊,來顯示該結(jié)果。
18.根據(jù)權(quán)利要求6所述的圖像顯示裝置, 其中,判斷單元對于包括在輸入圖像中的面部圖像進行皮膚診斷,并且其中,控制單元通過使皮膚診斷的結(jié)果與由圖像顯示單元顯示的圖像中的成為皮膚診斷的依據(jù)的位置重疊,來顯示該結(jié)果。
19.根據(jù)權(quán)利要求6所述的圖像顯示裝置, 其中,判斷單元從包括在輸入的拍攝圖像中的人的身體指定穴位的位置,并且其中,控制單元通過使指定的所述穴位的位置與由圖像顯示單元顯示的圖像中的對應(yīng)位置重疊,來顯示該位置。
20.一種在通過安裝在頭或面部來使用的圖像顯示裝置中顯示圖像的圖像顯示方法,該方法包括: 輸入圖像; 判斷在圖像的所述輸入中輸入的圖像,或者獲得對于該輸入圖像的判斷結(jié)果;以及 基于所述判斷的判斷結(jié)果來控制將被顯示的圖像。
【文檔編號】G06F3/14GK103942019SQ201410014343
【公開日】2014年7月23日 申請日期:2014年1月14日 優(yōu)先權(quán)日:2013年1月21日
【發(fā)明者】高井基行, 佐古曜一郎, 武田正資, 宮島靖 申請人:索尼公司