專利名稱：信息處理裝置的制作方法
技術(shù)領(lǐng)域：
本發(fā)明涉及一種信息處理裝置，特別涉及一種按照用戶基于雙重顯示
(Dual View)的圖像信息而進(jìn)行操作的信息、命令等來(lái)進(jìn)行處理的信息處理 裝置。
背景技術(shù)：
眾所周知，具有雙重顯示功能的顯示裝置可以分別對(duì)于不同視角方向 同時(shí)顯示圖像。由此，也能夠依據(jù)用戶的觀看位置來(lái)顯示不同的圖像(例如， 參照專利文獻(xiàn)1)。專利文獻(xiàn)l中，通過(guò)將視差柵格(parallaxbarrier)設(shè)置在液 晶顯示屏的前面，實(shí)現(xiàn)了依據(jù)用戶的觀看位置來(lái)顯示不同圖像的雙重顯示。
在此，作為根據(jù)用戶利用顯示出的圖像信息來(lái)進(jìn)行操作的信息進(jìn)行處 理的方法，能夠舉出利用觸摸屏的方法。具體而言，將觸摸屏設(shè)置在顯示 裝置的屏幕上。在此，屏幕所顯示的圖形用戶界面(GUI: Graphical User Interface)中含有顯示元件(以下，稱為圖形用戶界面元件)，如菜單、按鈕開(kāi) 關(guān)等。用戶通過(guò)觸摸屏來(lái)觸摸所希望的屏幕上顯示的圖形用戶界面元件， 從而能夠輸入對(duì)應(yīng)于該圖形用戶界面元件的命令、信息等。如此，通過(guò)將 觸摸屏設(shè)置在屏幕上，能夠使用戶更加直觀地進(jìn)行操作。
然而，在具有雙重顯示功能的顯示裝置中，依據(jù)用戶的觀看位置來(lái)顯 示不同的圖像。也就是說(shuō)，具有雙重顯示功能的顯示裝置向各個(gè)觀看位置 的用戶分別顯示出獨(dú)立的圖像。因此，如上所述，在利用設(shè)置在屏幕上的 觸摸屏來(lái)進(jìn)行輸入的情況下，由于處理裝置不能識(shí)別對(duì)顯示在哪一視角方 向的圖像進(jìn)行了輸入，所以存在有不能進(jìn)行適當(dāng)處理的問(wèn)題。
為了解決上述問(wèn)題，提出了在不同圖像上不重疊用戶界面元件來(lái)顯示 的方法(例如，參照專利文獻(xiàn)2)。也就是說(shuō)，由于將圖形用戶界面元件顯 示在不同位置上，所以，即使如上所述利用設(shè)置在屏幕上的觸摸屏來(lái)進(jìn)行
輸入，也能夠識(shí)別出對(duì)顯示在某一視角方向的圖像進(jìn)行了輸入，從而能夠 對(duì)各個(gè)觀看位置進(jìn)行適當(dāng)處理。
專利文獻(xiàn)l:日本專利文獻(xiàn)特開(kāi)2003-177357號(hào)公報(bào)； 專利文獻(xiàn)2:日本專利文獻(xiàn)特開(kāi)2005-284592號(hào)公報(bào)。

發(fā)明內(nèi)容
在此，在不把用戶界面元件重疊來(lái)顯示的方法中，如上所述，用戶利 用設(shè)置在屏幕上的觸摸屏來(lái)進(jìn)行輸入操作。因此，當(dāng)在一個(gè)觀看位置的用 戶進(jìn)行操作時(shí)，用戶所進(jìn)行操作的手遮蓋了顯示在另一觀看位置的圖像。 象這樣，在不把在不同圖像上的用戶界面元件重疊來(lái)顯示的方法中，由于 用戶利用設(shè)置在屏幕上的觸摸屏來(lái)進(jìn)行輸入操作，所以能夠向進(jìn)行操作的 用戶提供直觀的操作感。然而，存在有不進(jìn)行操作的用戶不能觀看的問(wèn)題。
此外，在不把用戶界面元件重疊來(lái)顯示的方法中，為了識(shí)別對(duì)顯示在 某一視角方向的圖像進(jìn)行輸入，必須把圖形用戶界面元件配置在不同圖像 上且不重疊的位置上。在此，圖形用戶界面元件起著使用戶的輸入更為簡(jiǎn) 便的作用。因此，在上述的現(xiàn)有方法中，由于必須將圖形用戶界面元件配 置在不同圖像上且不重疊的位置上，所以不一定能將圖形用戶界面元件配 置在各個(gè)圖像中的最佳位置上。也就是說(shuō)，存在有以下問(wèn)題即使可以將 圖形用戶界面元件配置顯示在一個(gè)視角方向的圖像中用戶的輸入更加簡(jiǎn)便 的最佳位置上，，也不一定能將圖形用戶界面元件配置在顯示在另一視角方 向的圖像中的最佳位置上。
因此，本發(fā)明的目的在于提供一種信息處理裝置，通過(guò)該信息處理裝 置，即使在利用具有雙重顯示功能的顯示裝置的情況下，也能夠?qū)M(jìn)行操 作的用戶提供直觀的操作感，并且，使不進(jìn)行操作的用戶得到更好觀看效 果。另外，本發(fā)明提供一種信息處理裝置，通過(guò)該信息處理裝置，將圖形 用戶界面元件配置在顯示在不同視角方向的各個(gè)圖像中的最佳位置上，從 而能夠使用戶的輸入操作更加直觀簡(jiǎn)便。
本發(fā)明以根據(jù)用戶的操作進(jìn)行處理的信息處理裝置為前提。本發(fā)明包
括顯示部，同時(shí)顯示面向顯示屏面能夠從左邊的視角方向觀看的左圖像、 以及面向顯示屏面能夠從右邊的視角方向觀看的右圖像；操作部，接受用戶對(duì)在顯示部中顯示的圖像上的位置進(jìn)行指定的操作；攝像部，拍攝用戶 對(duì)操作部進(jìn)行操作的手；手圖像生成部，由攝像部所拍攝的圖像中生成表 示用戶進(jìn)行操作的手的手圖像；操作手判斷部，判斷用戶對(duì)操作部進(jìn)行操 作的手是左手還是右手；圖像判斷部，根據(jù)操作手判斷部的判斷結(jié)果，判 斷進(jìn)行操作的用戶觀看的圖像是左圖像還是右圖像；以及執(zhí)行處理部，當(dāng) 在圖像判斷部判斷出用戶觀看的圖像是右圖像時(shí)，顯示左圖像和重疊有手 圖像的右圖像，同時(shí)，認(rèn)為是與在操作部指定的位置相對(duì)應(yīng)的右圖像上的 位置被指定，而執(zhí)行對(duì)應(yīng)于該右圖像上的位置的處理；當(dāng)在圖像判斷部判 斷出用戶觀看的圖像是左圖像時(shí)，顯示右圖像和重疊有手圖像的左圖像， 同時(shí)，認(rèn)為是與在操作部指定的位置相對(duì)應(yīng)的左圖像上的位置被指定，而 執(zhí)行對(duì)應(yīng)于該左圖像上的位置的處理。
此外，操作手判斷部，優(yōu)選根據(jù)在手圖像生成部生成的手圖像，來(lái)判 斷用戶進(jìn)行操作的手是左手還是右手。
此外，本發(fā)明的優(yōu)選情況是該信息處理裝置還包括識(shí)別信息讀取部， 該識(shí)別信息讀取部讀出紅外線標(biāo)簽所具有的識(shí)別信息，該紅外線標(biāo)簽被安 裝在用戶進(jìn)行操作的手上，操作手判斷部，根據(jù)在識(shí)別信息讀取部讀出的 識(shí)別信息，來(lái)判斷用戶進(jìn)行操作的手是左手還是右手。
此外，本發(fā)明的優(yōu)選情況是當(dāng)在操作手判斷部判斷出用戶進(jìn)行操作 的手是左手時(shí)，執(zhí)行處理部將應(yīng)顯示的左圖像改變?yōu)榕c右圖像相同的圖像， 同時(shí)，將手圖像重疊在左圖像及右圖像上進(jìn)行顯示，當(dāng)在操作手判斷部判 斷出用戶進(jìn)行操作的手是右手時(shí)，執(zhí)行處理部將應(yīng)顯示的右圖像改變?yōu)榕c 左圖像相同的圖像，同時(shí)，將手圖像重疊在左圖像及右圖像上進(jìn)行顯示。
此外，本發(fā)明的優(yōu)選情況是當(dāng)在操作手判斷部判斷出用戶進(jìn)行操作 的手是左手時(shí)，執(zhí)行處理部將包含在右圖像的圖形用戶界面元件重疊在左 圖像上進(jìn)行顯示，同時(shí)，將手圖像重疊在左圖像及右圖像上進(jìn)行顯示，當(dāng) 在操作手判斷部判斷出用戶進(jìn)行操作的手是右手時(shí)，執(zhí)行處理部將包含在 左圖像的圖形用戶界面元件重疊在右圖像上進(jìn)行顯示，同時(shí)，將手圖像重 疊在左圖像及右圖像上進(jìn)行顯示。
此外，本發(fā)明的優(yōu)選情況是當(dāng)在操作手判斷部判斷出用戶進(jìn)行操作 的手是左手時(shí)，執(zhí)行處理部使右圖像和手圖像半透明重疊在左圖像上進(jìn)行
顯示，同時(shí)，將手圖像重疊在右圖像上進(jìn)行顯示，當(dāng)在操作手判斷部判斷 出用戶進(jìn)行操作的手是右手時(shí)，執(zhí)行處理部使左圖像和手圖像半透明重疊 在右圖像上進(jìn)行顯示，同時(shí)，將手圖像重疊在左圖像上進(jìn)行顯示。
此外，本發(fā)明的優(yōu)選情況是當(dāng)在操作手判斷部判斷出用戶進(jìn)行操作 的手是左手時(shí)，執(zhí)行處理部將手圖像重疊在應(yīng)顯示的右圖像上進(jìn)行顯示， 同時(shí)，將表示手圖像的指尖位置的圖像重疊在左圖像上進(jìn)行顯示，當(dāng)在操 作手判斷部判斷出用戶進(jìn)行操作的手是右手時(shí)，執(zhí)行處理部將手圖像重疊 在應(yīng)顯示的左圖像上進(jìn)行顯示，同時(shí)，將表示手圖像的指尖位置的圖像重 疊在右圖像上進(jìn)行顯示。
此外，本發(fā)明的優(yōu)選情況是當(dāng)在操作手判斷部判斷出用戶進(jìn)行操作 的手是左手時(shí)，執(zhí)行處理部確定包含在左圖像的圖像中的、與在操作部指 定的右圖像上的位置相對(duì)應(yīng)的圖像，并改變?cè)搱D像的顯示形態(tài)，當(dāng)在操作 手判斷部判斷出用戶進(jìn)行操作的手是右手時(shí)，執(zhí)行處理部確定包含在右圖 像中的、與在操作部指定的左圖像上的位置相對(duì)應(yīng)的圖像，并改變?cè)搱D像 的顯示形態(tài)。
此外，本發(fā)明的優(yōu)選情況是在左圖像及右圖像中含有顯示相同的圖 形用戶界面元件；左圖像的圖形用戶界面元件及右圖像的圖形用戶界面元 件分別對(duì)應(yīng)于不同的處理。
此外，本發(fā)明的優(yōu)選情況是操作部從用戶那里接受建立對(duì)應(yīng)關(guān)系操 作，該建立對(duì)應(yīng)關(guān)系操作用以建立圖形用戶界面元件與該圖形用戶界面元 件被指定時(shí)應(yīng)執(zhí)行的處理之間的對(duì)應(yīng)關(guān)系。當(dāng)在進(jìn)行了建立對(duì)應(yīng)關(guān)系操作 的情況下，操作手判斷部判斷出用戶進(jìn)行操作的手是左手時(shí)，執(zhí)行處理部 將由該建立對(duì)應(yīng)關(guān)系操作來(lái)建立對(duì)應(yīng)關(guān)系的圖形用戶界面元件重疊在左圖 像上進(jìn)行顯示，當(dāng)在進(jìn)行了建立對(duì)應(yīng)關(guān)系操作的情況下操作手判斷部判斷 出用戶進(jìn)行操作的手是右手時(shí)，執(zhí)行處理部將由該建立對(duì)應(yīng)關(guān)系操作來(lái)建 立對(duì)應(yīng)關(guān)系的圖形用戶界面元件重疊在右圖像上進(jìn)行顯示。
如上所述，根據(jù)本發(fā)明，判斷進(jìn)行操作的用戶所觀看的圖像是左圖像 還是右圖像，在判斷為右圖像時(shí)將手圖像重疊在右圖像上顯示，在判斷為 左圖像時(shí)將手圖像重疊在左圖像上顯示。也就是說(shuō)，通過(guò)將進(jìn)行操作的用
戶自己的手圖像重疊在向進(jìn)行操作的用戶顯示出的圖像上，能夠使進(jìn)行操 作的用戶更加直觀地操作。并且，此時(shí)，不向不進(jìn)行操作的用戶重疊進(jìn)行 操作的用戶的手圖像。由此，即使在將各個(gè)圖像同時(shí)顯示在不同視角方向 的所謂雙重顯示中，也能夠使進(jìn)行操作的用戶的手不干擾不進(jìn)行操作的用 戶，得到更好的觀看效果。


圖1為用以說(shuō)明本發(fā)明所涉及的信息處理裝置進(jìn)行處理的概要的圖。
圖2為表示攝像部13拍攝操作部12附近的情況的圖。
圖3為表示本發(fā)明所涉及的信息處理裝置的結(jié)構(gòu)的圖。
圖4為表示本發(fā)明所涉及的信息處理裝置的處理流程的流程圖。
圖5為示意表示利用本信息處理裝置的處理進(jìn)行顯示的圖。
圖6為表示左右手判斷處理詳細(xì)流程的流程圖。
圖7為以模式表示左右手判斷處理方法的圖。
圖8為表示通過(guò)三維顯示及二維顯示來(lái)進(jìn)行處理的情況的圖。
圖9為表示執(zhí)行處理部104在二維顯示的、比例尺不同的圖像之間進(jìn)
行處理的情況的圖。
圖10為表示用戶21所按下的圖像A上的建筑物T未顯示在圖像B上
的情況下，執(zhí)行處理部104改變圖像B的比例尺的情況的圖。
圖11為表示使執(zhí)行一系列操作的快捷圖標(biāo)(shortcuticon)從向操作人員 移到非操作人員的情況的圖。
圖12為表示被設(shè)定在圖像A及圖像B上的移動(dòng)領(lǐng)域的一個(gè)例圖。
圖13為表示副駕駛座的用戶21不知道音響屏幕上的操作方法，而按 下幫助按鈕的情況的圖。
圖14為表示在按下幫助按鈕后，音響屏幕被顯示在兩個(gè)圖像上，駕駛 座的用戶22教操作方法的情況的圖。
圖15為表示與圖14有關(guān)的其它例子的圖。
圖16為表示與圖14有關(guān)的其它例子的圖。
圖17為表示與圖14有關(guān)的其它例子的圖。
圖18為表示將攝像部13配置在操作面板下方的例子的圖。
圖19為包括兩個(gè)攝像部13的結(jié)構(gòu)的圖。
圖20為表示攝像部13所拍攝的操作部12附近的圖像13g的一個(gè)例圖。
(附圖標(biāo)記說(shuō)明)
11圖像源
12操作部
13攝像部
14控制部
15顯示部用控制部
16顯示部
101手圖像生成部
102左右手判斷部
103手圖像重疊部
104執(zhí)行處理部
21副駕駛座的用戶
22駕駛座的用戶
具體實(shí)施例方式
在具體說(shuō)明本發(fā)明所涉及的信息處理裝置之前,結(jié)合圖l，對(duì)本發(fā)明所 涉及的信息處理裝置所進(jìn)行的處理概要進(jìn)行說(shuō)明。圖1為用以說(shuō)明本發(fā)明 所涉及的信息處理裝置所進(jìn)行的處理概要的圖。
在圖1中，假設(shè)本發(fā)明所涉及的信息處理裝置被設(shè)置于例如車(chē)載環(huán)境 中。用戶21坐在汽車(chē)的副駕駛座，用戶22坐在駕駛座。顯示部16是具有 雙重顯示功能的顯示器，向副駕駛座的用戶21顯示出圖像A。圖1中，將 包含圖形用戶界面元件A的圖像顯示為圖像A。另一方面，顯示部16向駕 駛座的用戶22顯示出圖像B，其中，圖像B與圖像A不同。圖1中，作為 圖像B顯示出地圖信息。此外，在副駕駛座的用戶21與駕駛座的用戶22 之間以橫倒方式設(shè)置有操作部12，其中，該操作部12例如由觸摸板 (touchpad)構(gòu)成。副駕駛座的用戶21在該操作部12上用右手21HR來(lái)進(jìn)行 操作。此外，如圖2所示，操作部12由攝影機(jī)等攝像部13拍攝。攝像部 13被設(shè)置于汽車(chē)的天花板上等。圖2為表示攝像部13拍攝操作部12附近 的情況的圖。
在此，例如，假設(shè)副駕駛座的用戶21希望一邊觀看圖像A—邊按下圖 形用戶界面元件A，來(lái)進(jìn)行對(duì)應(yīng)于圖形用戶界面元件A的處理。此時(shí)，副 駕駛座的用戶21用右手21HR在操作部12上進(jìn)行操作，指定圖像A上的 位置。此時(shí)，通過(guò)本發(fā)明所涉及的信息處理裝置的處理，來(lái)將攝像部13所 拍攝的副駕駛座的用戶21的右手圖像21SR重疊在圖像A上。接著，副駕 駛座的用戶21可以一邊看自己的重疊顯示的右手圖像21SR， 一邊移動(dòng)操 作部12上的右手21HR，按下圖像上的圖形用戶界面元件A。另一方面， 不將副駕駛座的用戶21的右手圖像21SR重疊在駕駛座的用戶22側(cè)的圖像 B上。
象這樣，在本發(fā)明所涉及的信息處理裝置中，通過(guò)將副駕駛座的用戶 21的右手圖像21SR顯示在顯示部16的屏幕上，來(lái)代替將觸摸屏設(shè)置在顯 示部16的屏幕上。由此，可使進(jìn)行操作的副駕駛座的用戶21更加直觀地 進(jìn)行操作。并且，在本發(fā)明所涉及的信息處理裝置中，不在駕駛座的不進(jìn) 行操作的用戶22側(cè)顯示進(jìn)行操作的副駕駛座的用戶21的右手圖像21SR。 由此，即使在利用具有雙重顯示功能的顯示部的情況下，進(jìn)行操作的副駕 駛座的用戶21的右手HR本身也不會(huì)干擾駕駛座的用戶22，而得到更好的 觀看效果。
以下，結(jié)合圖3，對(duì)本發(fā)明所涉及的信息處理裝置加以具體說(shuō)明。圖3 為表示本發(fā)明所涉及的信息處理裝置的結(jié)構(gòu)的圖。圖3中，本發(fā)明所涉及 的信息處理裝置包括操作部12、攝像部13、控制部14、顯示部用控制部 15以及顯示部16。此外，圖像源IIA及圖像源11B是輸出圖像的來(lái)源， 其中，該圖像是分別向不同觀看位置的用戶進(jìn)行顯示的圖像。圖像例如是 通過(guò)電視機(jī)接收的圖像、由AV機(jī)器等再現(xiàn)機(jī)器再現(xiàn)的圖像等。此外，以 下，為了便于說(shuō)明，使圖像源11A輸出的圖像為圖像A，使圖像源11B輸 出的圖像為圖像B。此外，在以下的說(shuō)明中，使圖像A為面向顯示部16 顯示在左邊視角方向(以下，簡(jiǎn)稱為左邊方向)的圖像，使圖像B為面向顯 示部16顯示在右邊的視角方向(以下，簡(jiǎn)稱為右邊方向)的圖像。
操作部12接受用戶指定在所顯示的圖像上的位置的操作。也就是說(shuō)， 進(jìn)行操作的用戶(以下，稱為操作人員)將手放在操作部12上來(lái)進(jìn)行操作， 指定圖像上的位置。操作部12只要至少包括操作面板便可，在此，例如，
假設(shè)操作部12由觸摸板構(gòu)成。并且，假設(shè)觸摸板上的坐標(biāo)位置與圖像上的 坐標(biāo)位置相對(duì)應(yīng)。
攝像部13拍攝至少包含操作部12上的操作人員的手的范圍，輸出包 含操作人員的手的圖像。例如，攝像部13由可見(jiàn)光攝像機(jī)構(gòu)成。攝像部13 除了由可見(jiàn)光攝像機(jī)構(gòu)成以外，例如，還可以由紅外線攝像機(jī)、近紅外線 攝像機(jī)、溫度記錄器等構(gòu)成。即，攝像部13可由任何機(jī)器構(gòu)成，只要該機(jī) 器是取得能夠提取操作人員的手區(qū)域的圖像的機(jī)器即可。此外，如圖2所 示，將攝像部13設(shè)置于能夠拍攝操作部12的位置上。
控制部14例如由CPU構(gòu)成。此夕卜，控制部14包括手圖像生成部101、 左右手判斷部102、手圖像重疊部103以及執(zhí)行處理部104的功能。手圖像 生成部101由攝像部13所取得的操作部12附近的圖像生成表示操作人員 的手的手區(qū)域圖像(以下，稱為手圖像)。此外，手圖像生成部101既可生成 實(shí)拍的手圖像，也可提取手區(qū)域中的外圍輪廓，通過(guò)對(duì)該外圍輪廓設(shè)定預(yù) 先所規(guī)定的圖案、顏色等，從而生成手圖像。當(dāng)在手圖像生成部101生成 了手圖像時(shí)，左右手判斷部102根據(jù)該手圖像來(lái)判斷操作人員的手是右手 還是左手。手圖像重疊部103根據(jù)在左右手判斷部102判斷的結(jié)果，將在 手圖像生成部101生成的手圖像重疊在圖像A或圖像B上。執(zhí)行處理部104 根據(jù)操作人員在操作部12輸入的信息，執(zhí)行處理。具體而言，執(zhí)行處理部 104根據(jù)左右手判斷部102的判斷結(jié)果，來(lái)取得信息，即，操作人員是被顯 示出圖像A的用戶還是被顯示出圖像B的用戶的信息。也就是說(shuō)，執(zhí)行處 理部104可以在根據(jù)左右手判斷部102的判斷結(jié)果來(lái)識(shí)別在哪個(gè)視角方向 的用戶進(jìn)行了輸入后，再進(jìn)行處理。例如，在被顯示出圖像A的用戶是操 作人員的情況下，執(zhí)行處理部104對(duì)圖像源11A進(jìn)行適當(dāng)?shù)脑L問(wèn)，根據(jù)被 顯示出圖像A的用戶的輸入，執(zhí)行處理。
顯示部用控制部15將在控制部14的手圖像重疊部103處理的各圖像 (圖像A及B)提供給顯示部16，進(jìn)行用以進(jìn)行雙重顯示的控制。顯示部16 是能夠雙重顯示的顯示器。例如，顯示部16由液晶顯示屏構(gòu)成，其中，在 液晶顯示屏的前面設(shè)有視差柵格。通過(guò)該顯示部用控制部15以及該顯示部 16的結(jié)構(gòu)，在顯示部16同時(shí)將圖像A及圖像B顯示在不同的視角方向上。 也就是說(shuō)，顯示部16所顯示的圖像依據(jù)用戶的觀看位置成為不同的圖像。
此外，顯示部用控制部15以及顯示部16可由任何機(jī)器構(gòu)成，只要該機(jī)器 是實(shí)現(xiàn)雙重顯示的機(jī)器即可。
接下來(lái)，結(jié)合圖4，對(duì)本發(fā)明所涉及的信息處理裝置的處理進(jìn)行具體說(shuō) 明。圖4為表示本發(fā)明所涉及的信息處理裝置的處理流程的流程圖。
首先，手圖像生成部101取得攝像部13所拍攝的操作部12附近的圖 像(步驟Sl)。手圖像生成部101從在步驟Sl中取得的操作部12附近的圖 像中提取膚色區(qū)域(步驟S2)。接著，通過(guò)對(duì)所提取的膚色區(qū)域進(jìn)行去噪音 處理，取得被確認(rèn)為手的區(qū)域(步驟S3)。在此，可利用眾所周知的方法作 為去噪音處理的方法。例如，有這樣的方法在提取的區(qū)域?yàn)槎鄠€(gè)的情況 下，通過(guò)對(duì)各個(gè)區(qū)域的面積進(jìn)行比較，將最大區(qū)域確認(rèn)為手的區(qū)域，并取 得該區(qū)域。此外，在利用紅外線攝像機(jī)作為攝像部13的情況下，不能提取 膚色區(qū)域。因此，為了提取手區(qū)域，而采用通過(guò)亮度值的閾值來(lái)提取手區(qū) 域的方法。此外，此時(shí)，優(yōu)選通過(guò)設(shè)置紅外線投射器，照射操作面板上方， 來(lái)容易地提取手區(qū)域。
在步驟S3之后，手圖像生成部101判斷步驟S3中取得的區(qū)域是否為 手(步驟S4)。在此，做為判斷是否為手的方法，可利用一般的方法。例如， 想到了這樣的方法預(yù)先存儲(chǔ)手的模式(pattem)，對(duì)該手的模式與步驟S3 中取得的區(qū)域的模式進(jìn)行比較(模式匹配pattern matching)。步驟S4中， 手圖像生成部101在判斷出所取得的區(qū)域?yàn)槭值那闆r下，將步驟S3中取得 的區(qū)域生成為手圖像，處理進(jìn)入步驟S5。另一方面，步驟S4中，在手圖 像生成部101判斷出所取得的區(qū)域不為手時(shí)，在手圖像未重疊的情況下進(jìn) 行雙重顯示(步驟S6)。
在歩驟S4之后，左右手判斷部102根據(jù)所提取的手圖像，來(lái)判斷操作 人員的手是右手還是左手(步驟S5)。此外，后面再對(duì)步驟S5的具體處理加 以說(shuō)明。在步驟S5中判斷出操作人員的手為右手的情況下，處理進(jìn)入步驟 S8(步驟S7的右手)。另一方面，在步驟S5中判斷為左手的情況下，處理 進(jìn)入步驟Sll(步驟S7的左手)。
步驟S8中，手圖像重疊部103將步驟S4中取得的右手的手圖像重疊 在顯示在左邊方向的圖像A上。接著，進(jìn)行僅將手圖像重疊在圖像A上顯 示的雙重顯示(步驟S14)。也就是說(shuō)，由于用右手進(jìn)行操作的用戶在與圖像
A的顯示方向相同的左邊方向，所以只有用右手進(jìn)行操作的用戶看到了重 疊在圖像A上顯示的手圖像。在此，為了容易理解而結(jié)合圖5進(jìn)行說(shuō)明。 把操作人員的手(圖5中的右手21HR)放在操作部12上時(shí)，通過(guò)上述處理， 最終使操作人員的手圖像(圖5中的右手的手圖像21SR)重疊在顯示在左邊 方向的圖像A上顯示。圖5為示意表示利用本信息處理裝置的處理進(jìn)行顯 示的圖。此外，就步驟S8中將手圖像重疊在圖像A上的哪個(gè)位置上，例 如，想到了這樣的方法從攝像部13所取得的操作部12附近的圖像中檢 測(cè)操作部12的四個(gè)角落，進(jìn)行調(diào)整，以使該四個(gè)角落與圖像A或B的四 個(gè)角落一致。
此外，在步驟S8之后，由于在用戶一邊看重疊顯示的手圖像， 一邊在 操作部12上進(jìn)行指定圖像上的位置的輸入時(shí)(步驟S9的"是")，步驟S5 中判斷出操作人員的手為右手，所以，執(zhí)行處理部104對(duì)圖像源11A進(jìn)行 適當(dāng)?shù)脑L問(wèn)，根據(jù)在操作部12被指定的圖像A上的位置，執(zhí)行處理(步驟 SIO)。例如，若在圖像A上的位置上有圖形用戶界面元件等的話，則進(jìn)行 對(duì)應(yīng)于該圖形用戶界面元件的處理。之后，進(jìn)行手圖像僅重疊顯示在經(jīng)執(zhí) 行處理部104處理后的圖像A上雙重顯示(步驟S14)。
另一方面，在步驟S5中判斷出操作人員的手為左手的情況下，將步驟 S4中取得的左手的手圖像重疊在顯示在右邊方向的圖像B上(步驟Sll)。 接著，進(jìn)行將手圖像僅在圖像B上重疊顯示的雙重顯示(步驟S14)。也就是 說(shuō)，由于用左手進(jìn)行操作的用戶在與圖像B的顯示方向相同的右邊方向， 所以只有用左手進(jìn)行操作的用戶看到了重疊在圖像B上顯示的手圖像。此 外，在步驟Sll之后，由于在用戶一邊看重疊顯示的手圖像， 一邊在操作 部12上進(jìn)行指定圖像上的位置的輸入時(shí)(步驟S12的"是")，步驟S5中 判斷出操作人員的手為右手，執(zhí)行處理部104對(duì)圖像源11B進(jìn)行適當(dāng)?shù)脑L 問(wèn)，根據(jù)在操作部12被指定的圖像B上的位置，執(zhí)行處理(步驟S13)。之 后，進(jìn)行手圖像僅重疊顯示在經(jīng)執(zhí)行處理部104處理后的圖像B上的雙重 顯示(步驟S14)。
象這樣，執(zhí)行處理部104可根據(jù)左右手判斷部102的判斷結(jié)果，識(shí)別 操作人員是對(duì)圖像A上的位置進(jìn)行了輸入還是對(duì)圖像B上的位置進(jìn)行了輸 入，對(duì)于各個(gè)操作人員的輸入分別進(jìn)行個(gè)別處理。也就是說(shuō)，執(zhí)行處理部
104可根據(jù)在不同視角方向的操作人員的各個(gè)輸入，來(lái)改變處理的內(nèi)容。
接著，結(jié)合圖6，就左右手判斷處理(圖4的步驟S5)進(jìn)行詳細(xì)的說(shuō)明。 圖6為詳細(xì)表示左右手判斷處理流程的流程圖。在此，以通過(guò)從手區(qū)域中 求出手掌區(qū)域，檢測(cè)手指區(qū)域，確定各個(gè)手指區(qū)域中的指尖位置，來(lái)判斷 為左手還是右手的方法為例進(jìn)行說(shuō)明。首先，將規(guī)定半徑的圓配置在手圖 像生成部101中提取的手區(qū)域內(nèi)(步驟S511)。在此，將規(guī)定半徑的值設(shè)為 配置的圓比指圍大。在步驟S511之后，將該圓的外圍輪廓線與手區(qū)域的外 圍輪廓線的距離作為參數(shù)求出(步驟S512)。在此，例如，將圓的外圍輪廓 線上所有點(diǎn)各自與手區(qū)域的外圍輪廓線上的所有點(diǎn)的距離作為參數(shù)求出。 在步驟S512之后，只提取閾值以下的值的參數(shù)(步驟S513)。這是為了在決 定手掌區(qū)域時(shí)，將手指區(qū)域的外圍輪廓線所涉及的、較大的參數(shù)事先從運(yùn) 算對(duì)象除去，從而減輕處理的負(fù)擔(dān)。
在步驟S513之后，改變所配置的圓的位置和半徑，將與手區(qū)域的手掌 部分最相似的圓作為手掌區(qū)域求出(步驟S514 S518)。具體而言，首先移 動(dòng)圓的位置，求出參數(shù)值為最小的位置(步驟S514以及S515)。此時(shí)，例如， 根據(jù)在圓的外圍輪廓線上的各點(diǎn)求出的參數(shù)值的偏差(deviations)情況來(lái)移 動(dòng)圓的位置。具體而言，將圓的位置向較大的值的參數(shù)分布較多的方向移 動(dòng)。接下來(lái)，在決定圓的位置后，改變圓的半徑求出參數(shù)值最小的半徑(步 驟S516以及S517)。如圖7所示，將通過(guò)步驟S514 S517的處理決定的 圓決定為手掌區(qū)域(步驟S518)。圖7為示意表示左右手判斷處理方法的圖。
此外，在步驟S514 S517的處理中，會(huì)有兩個(gè)圓，該兩個(gè)圓都與手掌 最相似并且兩者的半徑不同的情況。此時(shí)，優(yōu)選以半徑較大的圓為手掌區(qū) 域。此外，上述的說(shuō)明中雖然用圓來(lái)求出手掌區(qū)域，但是，例如，也可用 橢圓或與實(shí)際的手掌形狀相似的形狀，來(lái)求出手掌區(qū)域。近似的形狀與實(shí) 際的手掌形狀越相似，越能夠正確地求出手掌區(qū)域。此外，上述參數(shù)可以 是普遍的模式匹配等的參數(shù)。
在步驟S518之后，如圖7所示，通過(guò)除去手掌區(qū)域，提取各個(gè)手指區(qū) 域(步驟S519)。接下來(lái)，對(duì)各個(gè)手指區(qū)域，求出手掌區(qū)域的中心(圓的中心) 與手指區(qū)域的外圍輪廓線的距離(步驟S520)。接著，將所算出的各個(gè)手指 區(qū)域中與手掌區(qū)域的中心距離最大的點(diǎn)設(shè)定為指尖點(diǎn)(步驟S521)。在圖7中，可以得知與圓的中心距離最大的點(diǎn)在指尖。在此，在設(shè)定五個(gè)指尖點(diǎn)
的情況下(步驟S522),對(duì)于各指尖點(diǎn)，算出最近的指尖點(diǎn)之間的距離(步驟 S523)。也就是說(shuō)，如圖7所示，對(duì)拇指來(lái)說(shuō)，與拇指與各個(gè)手指之間的距 離相比，拇指與食指之間的距離最小。如圖7所示，如此求出的距離有四 個(gè)。在步驟S523之后，將被設(shè)定的各指尖點(diǎn)中在左右方向上的兩個(gè)端點(diǎn)中 的、在步驟S523中算出的距離較大的端點(diǎn)設(shè)定為拇指的指尖點(diǎn)(步驟S524)。 在圖7中，可得知兩個(gè)端點(diǎn)(X點(diǎn)以及Y點(diǎn))中的、X點(diǎn)的距離x大于Y點(diǎn) 的距離y。由此，可以確認(rèn)X點(diǎn)為拇指。
在步驟S524之后，判斷拇指的指尖點(diǎn)在右端還是在左端(步驟S525)。 當(dāng)拇指的指尖點(diǎn)在右端時(shí)判斷為左手(步驟S526)，當(dāng)拇指的指尖點(diǎn)在左端 時(shí)判斷為右手(步驟S527)。在此，結(jié)束對(duì)左右手判斷處理的流程的說(shuō)明。
此外，在上述左右手判斷處理中，根據(jù)左右方向的端點(diǎn)求出了拇指， 本發(fā)明并不局限于此。例如，圖7中，拇指與其它手指相比，位于屏幕的 最下方。也可利用該情況，將屏幕下方的指尖點(diǎn)設(shè)定為拇指。此外，也可 通過(guò)利用上述根據(jù)左右方向的端點(diǎn)來(lái)求出拇指的方法、和求出屏幕下方的 指尖點(diǎn)的方法，來(lái)設(shè)定拇指的指尖點(diǎn)。此外，也可利用其它普遍方法。
此外，在上述的左右手判斷處理中，利用手圖像生成部101所生成的 手圖像來(lái)判斷為右手或左手，本發(fā)明并不局限于此。例如，也可采用這樣 的方法，g卩，通過(guò)在操作人員的手上安裝具有左/右手的識(shí)別信息的紅外 線標(biāo)簽，與識(shí)別信息讀取部(未圖示)進(jìn)行通信，來(lái)檢測(cè)操作人員的手是右手 還是左手。識(shí)別信息是讀取部通過(guò)與紅外線標(biāo)簽進(jìn)行通信來(lái)讀出識(shí)別信息 的。該識(shí)別信息讀取部既可配置于操作部12中，也可配置于操作部12夕卜。 此外，也可采用這樣的方法，即，通過(guò)利用圖像處理來(lái)檢測(cè)手掌的手相， 來(lái)檢測(cè)右手或左手。
此外，如上所述，執(zhí)行處理部104可根據(jù)位于不同視角方向的操作人 員的各個(gè)輸入，來(lái)改變處理的內(nèi)容。在上述說(shuō)明中，僅對(duì)對(duì)應(yīng)于一個(gè)操作 人員的輸入的處理進(jìn)行了說(shuō)明，本發(fā)明并不局限于此。例如，當(dāng)進(jìn)行對(duì)應(yīng) 于一個(gè)操作人員的輸入的處理時(shí)，也可對(duì)不進(jìn)行操作的其它用戶執(zhí)行與該 處理有關(guān)的圖像間的處理。以下，用具體的例子，對(duì)該圖像間的處理，進(jìn) 行說(shuō)明。 結(jié)合圖8，對(duì)第l具體例子進(jìn)行說(shuō)明。例如，有這樣的情況在觀看不 同的地像的各個(gè)用戶之間，操作人員想要告訴非操作人員地圖上的特 定位置。在此設(shè)定為在各個(gè)用戶觀看不同的地像的情況下，操作人 員按下地像上的特定位置時(shí)，使非操作人員所觀看的地像上與操 作人員所按下的特定位置相對(duì)應(yīng)的位置改變其顯示形態(tài)，如使它忽亮忽滅 等，以便告訴非操作人員該位置。
圖8為表示通過(guò)三維顯示以及二維顯示來(lái)進(jìn)行處理的情況的圖。圖8 與圖1同樣，例如，假設(shè)將本發(fā)明所涉及的信息處理裝置設(shè)置于車(chē)載環(huán)境 中。此外，圖8所示的各個(gè)部分與圖1所示的各個(gè)部分的不同之處僅在于
圖像A及圖像B的內(nèi)容以及處理不同，因此，省略其它部分的詳細(xì)說(shuō)明。 圖8中，圖像A是三維顯示的地像。圖像B為二維顯示的地像。 副駕駛座的用戶21觀看三維顯示的地圖。駕駛座的用戶22觀看二維顯示 的地圖。
在此，如圖8所示，副駕駛座的用戶21 —邊觀看重疊在圖像A上的右 手圖像21SR， 一邊用放在操作部12上的右手來(lái)按下屏幕上的三維顯示的 建筑物T(圖形用戶界面元件)。此時(shí)，執(zhí)行處理部104首先從左右手判斷部 102取得判斷結(jié)果，即進(jìn)行輸入的是用戶21還是22。在此，用戶21用右 手21HR來(lái)進(jìn)行操作，因此，在左右手判斷部102判斷為右手。因此，可 得知操作人員是在左邊方向的用戶21。由此，在執(zhí)行處理部104檢測(cè)出與 在操作部12上所按下的坐標(biāo)位置相對(duì)應(yīng)的圖像A上的坐標(biāo)位置的、三維顯 示的建筑物T。之后，執(zhí)行處理部104對(duì)于不進(jìn)行操作的駕駛座的用戶22 觀看的圖像B，檢索出與三維顯示的建筑物T相對(duì)應(yīng)的、二維顯示的建筑 物T的坐標(biāo)位置。接下來(lái)，如圖8所示，執(zhí)行處理部104進(jìn)行處理，例如， 使被檢索出的圖像B上的二維顯示的建筑物T忽亮忽滅。此外，圖8中， 在執(zhí)行處理部104的處理中，必須在三維顯示的地圖與二維顯示的地圖之 間轉(zhuǎn)換坐標(biāo)位置，但是，此轉(zhuǎn)換方式本身采用普遍的轉(zhuǎn)換方式，因此省略 其詳細(xì)說(shuō)明。
此外，圖8中，雖然說(shuō)明了三維顯示以及二維顯示之間的處理，但是， 如圖9所示，也可在均為二維顯示、而比例尺不同的圖像之間進(jìn)行處理。 圖9為表示執(zhí)行處理部104在均為二維顯示、而比例尺不同的圖像之間進(jìn)
行處理的情況的圖。此外，如圖10所示，在用戶21所按下的圖像A上的 建筑物T未顯示在圖像B上時(shí)，執(zhí)行處理部104也可進(jìn)行處理以改變圖像 B的比例尺，來(lái)顯示建筑物T。圖10為表示用戶21所按下的圖像A上的 建筑物T未顯示在圖像B上的情況下，執(zhí)行處理部104改變圖像B的比例 尺的情況的圖。
此外，執(zhí)行處理部104不僅根據(jù)所按下的坐標(biāo)位置，也可根據(jù)左右手 判斷部102的判斷結(jié)果來(lái)改變控制命令。具體而言，例如，在向用戶21及 22分別顯示出的圖像上，將相同功能(相同顯示形態(tài))且該相同功能所對(duì)應(yīng) 的處理內(nèi)容不同的圖形用戶界面元件設(shè)置在相同位置上。由此，根據(jù)操作 人員的手是右手還是左手，所執(zhí)行的處理內(nèi)容不一樣。具有相同功能，但 該相同功能所對(duì)應(yīng)的處理內(nèi)容不同的圖形用戶界面元件例如是在駕駛座 的用戶22進(jìn)行操作的情況下，使圖形用戶界面元件簡(jiǎn)易地顯示處理，以免 妨礙駕車(chē)操作。另一方面，在副駕駛座的用戶21進(jìn)行操作的情況下，盡可 能顯示出較多的信息。該處理的優(yōu)點(diǎn)在于通過(guò)進(jìn)行這樣的處理，即使在 執(zhí)行相同功能時(shí)，仍能夠便于用戶操作。
結(jié)合圖ll，對(duì)第2具體例子進(jìn)行說(shuō)明。用戶駕車(chē)時(shí)若一邊觀看屏幕， 一邊進(jìn)行復(fù)雜的操作，則會(huì)有妨礙安全行車(chē)的情況。因此，使復(fù)雜操作由 副駕駛座的用戶進(jìn)行，而駕車(chē)的用戶只決定執(zhí)行該復(fù)雜操作的時(shí)機(jī)。圖11 為表示使執(zhí)行一系列操作的命令(快捷圖標(biāo))從向操作人員移到非操作人 員的情況的圖。圖ll所表示的情況是為了使駕車(chē)的用戶22的操作更加 簡(jiǎn)便易用，副駕駛座的用戶21進(jìn)行建立對(duì)應(yīng)關(guān)系操作，以制作用于執(zhí)行設(shè) 定目的地的一系列操作的快捷圖標(biāo)(圖形用戶界面元件)，并將該快捷圖標(biāo)移 動(dòng)到駕駛座的用戶22的圖像B上。
此時(shí)，副駕駛座的用戶21在圖像A上按下想要設(shè)定為目的地的地點(diǎn)的 圖形用戶界面元件23后，按下目的地的圖形用戶界面元件24。之后，副駕 駛座的用戶21制作執(zhí)行該目的地設(shè)定所涉及的一系列操作的指令用的快捷 圖標(biāo)25。在此，圖11中，所制作的快捷圖標(biāo)25顯示在圖像A的右上方。 副駕駛座的用戶21將所制作的快捷圖標(biāo)25拖放到設(shè)定在圖像A的右上角 的特定領(lǐng)域26。從而使快捷圖標(biāo)25移動(dòng)到駕駛座的用戶22的圖像B上的 特定領(lǐng)域27。之后，駕駛座的用戶22只要按下顯示在圖像B上的特定領(lǐng)
域27的快捷圖標(biāo)25，便可設(shè)定目的地。即，執(zhí)行操作的時(shí)間可由駕車(chē)人隨 意決定。
在此，制作快捷圖標(biāo)25的處理中既可采用與一般的個(gè)人電腦中利用的 批處理命令的制作同樣的方法，也可采用其它的一般方法。此外，對(duì)將快 捷圖標(biāo)25從圖像A移動(dòng)到圖像B的處理進(jìn)行詳細(xì)的說(shuō)明。如圖12所示， 首先在圖像A及圖像B上分別將特定領(lǐng)域26以及27設(shè)定為圖像A與圖像 B之間移動(dòng)的領(lǐng)域(移動(dòng)領(lǐng)域)。圖12為表示被設(shè)定在圖像A及圖像B上的 移動(dòng)領(lǐng)域的一個(gè)例圖。只要在把快捷圖標(biāo)25拖放到該移動(dòng)領(lǐng)域時(shí)，將快捷 圖標(biāo)25從圖像A移動(dòng)到畫(huà)像B(或從圖像B到圖像A)并將之顯示便可。此 外，圖12中，將移動(dòng)領(lǐng)域顯示在相同位置上，但，也可將移動(dòng)領(lǐng)域顯示在 圖像A及圖像B各個(gè)的不同位置上。此外，使快捷圖標(biāo)移動(dòng)的處理即可由 執(zhí)行處理部104迸行，也可在圖4所示的結(jié)構(gòu)基礎(chǔ)上設(shè)置新的快捷圖標(biāo)移 動(dòng)部，使該快捷圖標(biāo)移動(dòng)部進(jìn)行該處理。
結(jié)合圖13 圖17，對(duì)第3具體例子進(jìn)行說(shuō)明。在幫助模式(hdp mode) 的情況下，在操作人員將操作方法教給與他觀看不同圖像的用戶時(shí)，優(yōu)選 將操作人員的手圖像顯示在兩個(gè)圖像上。因此，以該處理為第3具體例子 進(jìn)行詳細(xì)說(shuō)明。
圖13為表示副駕駛座的用戶21不知道音響屏幕上的操作方法，而按 下幫助按鈕的情況的圖。圖14為表示在按下幫助按鈕后，音響屏幕被顯示 在兩個(gè)屏幕上，駕駛座的用戶22教操作方法的情況的圖。圖15 圖17為 表示與圖14有關(guān)的其它例子的圖。
圖13中，副駕駛座的用戶21—邊看重疊在圖像A上的右手圖像21SR， 一邊按下幫助按鈕。此時(shí)，執(zhí)行處理部104首先從左右手判斷部102取得 判斷結(jié)果，即進(jìn)行輸入的是用戶21還是22。在此，用戶21用右手21HR 來(lái)進(jìn)行操作，因此左右手判斷部102判斷為右手。總之，可得知操作人員 是在左邊方向的用戶21。由此，執(zhí)行處理部104檢測(cè)出與在操作部12上所 按下的坐標(biāo)位置相對(duì)應(yīng)的圖像A上的坐標(biāo)位置的、幫助按鈕的圖形用戶界 面元件。之后，如圖14所示，執(zhí)行處理部104將向駕駛座的用戶22顯示 出的圖像轉(zhuǎn)變成與圖像A相同的音響屏幕。接下來(lái)，教操作方法的人，即 在此駕駛座的用戶22將左手22HL放在操作部12上。此時(shí)，被放在操作
部12上的左手由手圖像重疊部103重疊在向用戶21顯示出的圖像A及向 用戶22顯示出的圖像B上。之后，駕駛座的用戶22可通過(guò)利用該重疊在 兩個(gè)圖像上的左手圖像22SL，將操作方法教給副駕駛座的用戶21。
此外，圖14中，執(zhí)行處理部104雖然將向駕駛座的用戶22顯示出的 圖像轉(zhuǎn)變成與向按下幫助按鈕的副駕駛座的用戶21顯示出的圖像A相同的 圖像，但，如圖15所示，也可使圖像A半透明，并將之重疊在向駕駛座的 用戶22顯示出的圖像B上。
此外，例如，在副駕駛座的用戶21通過(guò)音響屏幕觀看電視節(jié)目、DVD 等動(dòng)畫(huà)吋按下幫助按鈕的情況下，如上所述，若向駕駛座的用戶22也顯示 出相同的圖像，則駕車(chē)的用戶22的注意力會(huì)被該影像吸引過(guò)去，而產(chǎn)生妨 礙行車(chē)的情況。在此情況下，執(zhí)行處理部104也可不向駕駛座的用戶22顯 示出包含在向副駕駛座的用戶21顯示出的圖像中的顯示動(dòng)畫(huà)的領(lǐng)域。
此外，如圖16所示，執(zhí)行處理部104也可只把向副駕駛座的用戶21 顯示出的圖像A中可以進(jìn)行操作的按鈕的圖形用戶界面元件重疊在向駕駛 座的用戶22顯示出的圖像B上。此時(shí)，執(zhí)行處理部104提取向按下幫助按 鈕的用戶21顯示出的圖像A中可以按下的所有圖形用戶界面元件。接著， 將所提取的圖形用戶界面元件重疊在圖像B上的、與圖像A上的位置相同 的位置上。此外，優(yōu)選將對(duì)應(yīng)于圖形用戶界面元件的功能的名稱等以語(yǔ)言 記載在圖形用戶界面元件中。
此外，如圖17所示，執(zhí)行處理部104也可使手圖像重疊部103將左手 圖像22SL重疊在向教操作方法的駕駛座的用戶22顯示出的圖像上，并且， 只將基于左手圖像22SL的光標(biāo)或指尖點(diǎn)的圖像重疊在向被教操作方法的 副駕駛座的用戶21顯示出的圖像A上。圖17中，表示左手圖像22SL的 各指尖位置的指示標(biāo)記22SLP重疊在向副駕駛座的用戶21顯示出的圖像A 上顯示。該指示標(biāo)記22SLP也可以是圖17所示的圓狀，也可以是任何形狀， 只要該指示標(biāo)記22SLP可以區(qū)別于其它箭頭等圖形用戶界面元件即可。
如上所述，根據(jù)本發(fā)明所涉及的信息處理裝置，通過(guò)判斷操作人員的 手是右手還是左手，將操作人員的手圖像重疊在向該操作人員顯示出的圖 像，來(lái)使操作人員更加直觀地進(jìn)行操作。并且，根據(jù)本發(fā)明所涉及的信息 處理裝置，不向非操作人員顯示出操作人員的手圖像，因此，即使在利用
具有雙重顯示功能的顯示部的情況下，也能夠使操作人員的手不打擾非操 作人員，可以得到更好的觀看效果。并且，根據(jù)本發(fā)明所涉及的信息處理 裝置，判斷操作人員的手是右手還是左手，根據(jù)該判斷結(jié)果來(lái)進(jìn)行對(duì)應(yīng)于 操作人員的輸入的處理。也就是說(shuō)，根據(jù)該判斷結(jié)果，可以識(shí)別在不同視 角方向的用戶的各個(gè)輸入，從而進(jìn)行對(duì)應(yīng)于各個(gè)輸入的處理。此外，根據(jù) 本發(fā)明所涉及的信息處理裝置，基于判斷結(jié)果，即操作人員的手是右手還 是左手，可以進(jìn)行對(duì)應(yīng)于操作人員的輸入的處理，因此，在分別顯示在不 同視角方向的各個(gè)圖像上將圖形用戶界面元件等配置在最佳位置上。
此外，如上所述，操作部12由觸摸板構(gòu)成，操作人員所按下的觸摸板 上的坐標(biāo)位置與屏幕上的坐標(biāo)位置相對(duì)應(yīng)。在此，觸摸板可以是任何機(jī)器， 只要該機(jī)器能夠檢測(cè)出所按下的坐標(biāo)位置即可，并且，也可不采用觸摸板
本身。例如，如圖18所示，想到了這樣的方法將攝像部13配置在透明
的操作面板的下方，測(cè)量出操作面板與操作人員的手的距離，從而判斷操
作人員的手是否接觸到操作面板。圖18為表示將攝像部13配置在操作面 板下方的例子的圖。此時(shí)，只要使從攝像部13所拍攝的圖像求出的、手接 觸到的坐標(biāo)位置與圖像A上的坐標(biāo)位置相對(duì)應(yīng)，能夠不利用觸摸板，僅由 攝像部13與操作面板構(gòu)成操作部12。此外，在將攝像部13配置于圖18 所示的位置上的情況下，攝像部13所取得的手圖像為手掌的圖像。由此， 此時(shí)，在手圖像重疊部103進(jìn)行重疊之前，通過(guò)將手圖像的左右反轉(zhuǎn)，也 就是重疊手圖像的鏡像便可。此外，配置于操作面板的下方的攝像部13的 數(shù)量既可以是象圖19所示那樣，為兩個(gè)，也可以是兩個(gè)以上。圖19為包 括兩個(gè)攝像部13的結(jié)構(gòu)的圖。此外，也可設(shè)定為攝像部13只拍攝進(jìn)行 操作的手，操作部12通過(guò)將只進(jìn)行按下等輸入的輸入機(jī)器(開(kāi)關(guān)、觸摸板 等)設(shè)置在攝像部13的拍攝范圍外的位置、操作面板上以外的位置等來(lái)構(gòu) 成。此時(shí)，例如，將所按下的坐標(biāo)位置設(shè)定為攝像部13所拍攝的手圖像中 的食指的位置便可。
此外，如上所述，通過(guò)左右手判斷部102判斷進(jìn)行操作的用戶的手是 左手還是右手，來(lái)判斷進(jìn)行操作的用戶所看到的圖像是圖像A還是圖像B， 但，也可利用其它方法來(lái)判斷。例如，也可利用紅外線標(biāo)簽，其中，該紅 外線標(biāo)簽具有可以識(shí)別進(jìn)行操作的用戶所看到的是圖像A還是圖像B的識(shí)
別信息。此外，例如，如圖20所示，也可以不根據(jù)用戶進(jìn)行操作的手而根 據(jù)手臂部分移動(dòng)的方向以及/或位置，來(lái)判斷進(jìn)行操作的用戶所看到的是 圖像A還是圖像B。圖20為表示攝像部13所拍攝的操作部12附近的圖像 13g的一個(gè)例圖。圖20中，例如，手30被移動(dòng)到攝像部13所拍攝的圖像 13g上。此時(shí)，手30的手臂部分301的位置在圖像的右邊。由此，通過(guò)利 用攝像部13所拍攝的圖像13g來(lái)檢測(cè)手臂部分301的位置，從而可以判斷 出進(jìn)行操作的用戶看到的是操作部12的右邊方向的圖像B。
本發(fā)明對(duì)于即使在利用具有雙重顯示功能的顯示裝置的情況下，也能 夠使進(jìn)行操作的用戶更加直觀地進(jìn)行操作，同時(shí)，可以使各個(gè)用戶得到更 好的觀看效果的、包括攝像機(jī)的信息處理機(jī)器等尤其有用。
權(quán)利要求
1.一種信息處理裝置，根據(jù)用戶的操作進(jìn)行處理，其特征在于該信息處理裝置包括顯示部，同時(shí)顯示能夠面向顯示屏面從左邊的視角方向觀看的左圖像、以及能夠面向顯示屏面從右邊的視角方向觀看的右圖像，操作部，接受所述用戶對(duì)在所述顯示部中顯示的圖像上的位置進(jìn)行指定的操作，攝像部，拍攝所述用戶對(duì)所述操作部進(jìn)行操作的手，手圖像生成部，由所述攝像部所拍攝的圖像生成表示所述用戶進(jìn)行操作的手的手圖像，操作手判斷部，判斷用戶對(duì)所述操作部進(jìn)行操作的手是左手還是右手，圖像判斷部，根據(jù)所述操作手判斷部的判斷結(jié)果，來(lái)判斷進(jìn)行操作的所述用戶所觀看的圖像是所述左圖像還是所述右圖像，以及執(zhí)行處理部，當(dāng)在所述圖像判斷部判斷出所述用戶觀看的圖像是所述右圖像時(shí)，顯示所述左圖像和重疊有所述手圖像的右圖像，同時(shí)，認(rèn)為是與在所述操作部指定的位置相對(duì)應(yīng)的右圖像上的位置被指定，而執(zhí)行對(duì)應(yīng)于該右圖像上的位置的處理，當(dāng)在所述圖像判斷部判斷出所述用戶觀看的圖像是所述左圖像時(shí)，顯示所述右圖像和重疊有所述手圖像的左圖像，同時(shí)，認(rèn)為是與在所述操作部指定的位置相對(duì)應(yīng)的左圖像上的位置被指定，而執(zhí)行對(duì)應(yīng)于該左圖像上的位置的處理。
2、 根據(jù)權(quán)利要求l所述的信息處理裝置，其特征在于 所述操作手判斷部，根據(jù)在所述手圖像生成部生成的手圖像，來(lái)判斷所述用戶進(jìn)行操作的手是左手還是右手。
3、 根據(jù)權(quán)利要求l所述的信息處理裝置，其特征在于-該信息處理裝置還包括識(shí)別信息讀取部，該識(shí)別信息讀取部讀出紅外線標(biāo)簽所具有的識(shí)別信息，該紅外線標(biāo)簽被安裝在所述用戶進(jìn)行操作的手 上；所述操作手判斷部，根據(jù)在所述識(shí)別信息讀取部讀出的識(shí)別信息，來(lái) 判斷所述用戶進(jìn)行操作的手是左手還是右手。
4、 根據(jù)權(quán)利要求1至3中任意一項(xiàng)所述的信息處理裝置，其特征在于當(dāng)在所述操作手判斷部判斷出所述用戶進(jìn)行操作的手是左手時(shí)，所述 執(zhí)行處理部將應(yīng)顯示的左圖像改變?yōu)榕c右圖像相同的圖像，同時(shí)，將所述 手圖像重疊在左圖像及右圖像上進(jìn)行顯示，當(dāng)在所述操作手判斷部判斷出 所述用戶進(jìn)行操作的手是右手時(shí)，所述執(zhí)行處理部將應(yīng)顯示的右圖像改變 為與左圖像相同的圖像，同時(shí)，將所述手圖像重疊在左圖像及右圖像上進(jìn) 行顯示。
5、 根據(jù)權(quán)利要求1至3中任意一項(xiàng)所述的信息處理裝置，其特征在于當(dāng)在所述操作手判斷部判斷出所述用戶進(jìn)行操作的手是左手時(shí)，所述 執(zhí)行處理部將包含在所述右圖像的圖形用戶界面元件重疊在左圖像上進(jìn)行 顯示，同時(shí)，將所述手圖像重疊在左圖像及右圖像上進(jìn)行顯示，當(dāng)在所述 操作手判斷部判斷出所述用戶進(jìn)行操作的手是右手時(shí)，所述執(zhí)行處理部將 包含在所述左圖像的圖形用戶界面元件重疊在右圖像上進(jìn)行顯示，同時(shí)， 將所述手圖像重疊在左圖像及右圖像上進(jìn)行顯示。
6、 根據(jù)權(quán)利要求1至3中任意一項(xiàng)所述的信息處理裝置，其特征在于當(dāng)在所述操作手判斷部判斷出所述用戶進(jìn)行操作的手是左手時(shí)，所述 執(zhí)行處理部使所述右圖像和所述手圖像半透明重疊在左圖像上進(jìn)行顯示， 同時(shí)，將所述手圖像重疊在右圖像上進(jìn)行顯示，當(dāng)在所述操作手判斷部判 斷出所述用戶進(jìn)行操作的手是右手時(shí)，所述執(zhí)行處理部使所述左圖像和所 述手圖像半透明重疊在右圖像上進(jìn)行顯示，同時(shí)，將所述手圖像重疊在左 圖像上進(jìn)行顯示。
7、 根據(jù)權(quán)利要求1至3中任意一項(xiàng)所述的信息處理裝置，其特征在于當(dāng)在所述操作手判斷部判斷出所述用戶進(jìn)行操作的手是左手時(shí)，所述 執(zhí)行處理部將所述手圖像重疊在應(yīng)顯示的右圖像上進(jìn)行顯示，同時(shí)，將表 示所述手圖像的指尖位置的圖像重疊在所述左圖像上進(jìn)行顯示，當(dāng)在所述 操作手判斷部判斷出所述用戶進(jìn)行操作的手是右手時(shí)，所述執(zhí)行處理部將 所述手圖像重疊在應(yīng)顯示的左圖像上進(jìn)行顯示，同時(shí)，將表示所述手圖像 的指尖位置的圖像重疊在所述右圖像上進(jìn)行顯示。
8、 根據(jù)權(quán)利要求1至3中任意一項(xiàng)所述的信息處理裝置，其特征在于當(dāng)在所述操作手判斷部判斷出所述用戶進(jìn)行操作的手是左手時(shí)，所述 執(zhí)行處理部確定包含在左圖像的圖像中的、與在所述操作部指定的右圖像 上的位置相對(duì)應(yīng)的圖像，并改變?cè)搱D像的顯示形態(tài)，當(dāng)在所述操作手判斷 部判斷出所述用戶進(jìn)行操作的手是右手時(shí)，所述執(zhí)行處理部確定包含在右 圖像的圖像中的、與在所述操作部指定的左圖像上的位置相對(duì)應(yīng)的圖像， 并改變?cè)搱D像的顯示形態(tài)。
9、 根據(jù)權(quán)利要求1至3中任意一項(xiàng)所述的信息處理裝置，其特征在于在所述左圖像及所述右圖像中含有顯示相同的圖形用戶界面元件； 所述左圖像的圖形用戶界面元件及所述右圖像的圖形用戶界面元件 分別對(duì)應(yīng)于不同的處理。
10、 根據(jù)權(quán)利要求1至3中任意一項(xiàng)所述的信息處理裝置，其特征在于所述操作部從用戶那里接受建立對(duì)應(yīng)關(guān)系操作，該建立對(duì)應(yīng)關(guān)系操作 用以建立圖形用戶界面元件與該圖形用戶界面元件被指定時(shí)應(yīng)執(zhí)行的處理 之間的對(duì)應(yīng)關(guān)系；當(dāng)在進(jìn)行了所述建立對(duì)應(yīng)關(guān)系操作的情況下，所述操作手判斷部判斷 出所述用戶進(jìn)行操作的手是左手時(shí)，所述執(zhí)行處理部將由該建立對(duì)應(yīng)關(guān)系 操作來(lái)建立對(duì)應(yīng)關(guān)系的圖形用戶界面元件重疊在左圖像上進(jìn)行顯示，當(dāng)在 進(jìn)行了所述建立對(duì)應(yīng)關(guān)系操作的情況下，所述操作手判斷部判斷出用戶進(jìn) 行操作的手是右手時(shí)，所述執(zhí)行處理部將由該建立對(duì)應(yīng)關(guān)系操作來(lái)建立對(duì) 應(yīng)關(guān)系的圖形用戶界面元件重疊在右圖像上進(jìn)行顯示。
全文摘要
本發(fā)明的目的在于提供一種在具有雙重顯示功能的顯示裝置中，能夠使進(jìn)行操作的用戶更加直觀地進(jìn)行操作，同時(shí)，使不進(jìn)行操作的用戶得到更好的觀看效果的信息處理裝置。該信息處理裝置包括顯示部(16)，同時(shí)顯示左圖像和右圖像；操作部(12)，接受操作；攝像部(13)，拍攝進(jìn)行操作的手；手圖像生成部(101)，由所拍攝的圖像來(lái)生成表示進(jìn)行操作的手的手圖像；操作手判斷部(102)，判斷進(jìn)行操作的手是左手還是右手；圖像判斷部，判斷所觀看的圖像是左圖像還是右圖像；以及執(zhí)行處理部(104)，在判斷出所觀看的是右圖像時(shí)，顯示左圖像和重疊有手圖像的右圖像，同時(shí)，執(zhí)行對(duì)應(yīng)于右圖像上的位置的處理，在判斷出所觀看的是左圖像時(shí)，顯示右圖像和重疊有手圖像的左圖像，同時(shí)，執(zhí)行對(duì)應(yīng)于左圖像上的位置的處理。
文檔編號(hào)G06F3/038GK101375235SQ20078000380
公開(kāi)日2009年2月25日 申請(qǐng)日期2007年2月1日 優(yōu)先權(quán)日2006年2月3日
發(fā)明者寺田智裕, 山下敦士, 平井卓哉 申請(qǐng)人:松下電器產(chǎn)業(yè)株式會(huì)社