亚洲成年人黄色一级片,日本香港三级亚洲三级,黄色成人小视频,国产青草视频,国产一区二区久久精品,91在线免费公开视频,成年轻人网站色直接看

定位控制裝置和定位控制裝置的集成電路、以及定位控制方法

文檔序號:6397012閱讀:165來源:國知局
專利名稱:定位控制裝置和定位控制裝置的集成電路、以及定位控制方法
技術(shù)領(lǐng)域
本發(fā)明涉及識別操作者指示顯示畫面上的位置的指示操作的定位控制技術(shù)。
背景技術(shù)
近年來,廣泛地進行通過大型顯示器、投影儀等放映出個人電腦等的畫面,一邊看放映出的畫面一邊進行會議。在這樣的會議中,通常進行一邊指示畫面上存在的圖和文字一邊做說明、提問等。作為指示畫面上的圖和文字的手段,存在指示棒或激光指示器等直接在被放映出的顯示器上定位的方法。另外,作為其他的手段,也存在使用鼠標、定位裝置等的輸入設備,·在顯示圖和文字的畫面上顯示光標來進行定位的方法(例如、參考專利文獻3)。還有,作為指示者不使用輸入設備等的定位方法,公知有檢測指示者的指尖來顯示光標、進行定位的技術(shù)(例如,參考專利文獻I、專利文獻2、以及專利文獻4)。在專利文獻I、專利文獻2、以及專利文獻4中公開有如下技術(shù)具有照相機等的攝像單元,根據(jù)由攝像單元得到的多個圖像檢測指示者的指尖的位置,并進行定位?,F(xiàn)有技術(shù)文獻專利文獻專利文獻I :日本專利特開平4一 271423號公報專利文獻2 日本專利特開平5 — 19957號公報專利文獻3 日本專利特開2007 — 226397號公報專利文獻4 日本專利特開2006 — 209359號公報

發(fā)明內(nèi)容
發(fā)明將要解決的技術(shù)問題然而,專利文獻I、專利文獻2、以及的專利文獻4技術(shù)是采用一個光標來定位的技術(shù),其前提是由攝像單元得到的圖像所包含的指尖的個數(shù)與光標數(shù)相同為一個。用于定位的光標的個數(shù)也可以不限于一個而是兩個以上,但在這些以往的技術(shù)中,在拍攝的指尖的個數(shù)比光標數(shù)多的情況下,存在從拍攝的指尖中無法確定用于決定光標的指尖的問題。本發(fā)明的目的為提供如下的定位控制技術(shù)即使多個操作者被拍攝,也能夠從操作者中決定指示者,并僅由被決定的指示者進行定位動作。為了解決課題的單元為了解決上述以往的問題,本發(fā)明的定位控制裝置,從進行指示操作的操作者中,決定能夠指定光標位置的指示者,其特征在于,具有位置取得部,取得各操作者的臉的位置、和各操作者的指尖或其代替部件的位置;距離計算部,將取得的各操作者的臉的位置、和各操作者的指尖或其代替部件的位置建立對應,計算建立了對應的臉的位置和指尖或其代替部件的位置之間的距離;指示者決定部,使用所述距離來決定指示者;以及,光標位置計算部,使用決定了的指示者的指尖或其代替部件的位置來計算光標位置,并輸出所計算的光標位置。發(fā)明的效果根據(jù)本發(fā)明的定位控制裝置,可使用臉的位置與指尖或其代替部件之間的距離,從多個操作者中確定指定定位對象的位置的指示者,且不被其他的操作者影響而僅由指示者進行定位動作。


圖I是示出本發(fā)明的實施方式I的具有定位控制裝置的顯示控制裝置的結(jié)構(gòu)的框圖。圖2是示出本發(fā)明的實施方式I的與顯示控制裝置連接的輸入輸出終端的外觀的 示意圖。圖3是示出本發(fā)明的實施方式I的定位控制裝置的動作的流程圖。圖4是示出本發(fā)明的實施方式I的被檢測的指尖和照相機的位置關(guān)系的圖。圖5是示出本發(fā)明的實施方式I的照相機、和被攝體的指尖和臉的位置關(guān)系的一個例子的圖。圖6是示出本發(fā)明的實施方式I的照相機、和多個被攝體的指尖和臉的位置關(guān)系的一個例子的圖。圖7是示出本發(fā)明的實施方式I的從照相機正面的位置示出照相機視角的框、臉位置、和指尖位置的一個例子的圖。圖8是示出本發(fā)明的實施方式I的臉指間距離計算部的動作的一個例子的流程圖。圖9是示出本發(fā)明的實施方式I的指示者決定部的動作的一個例子的流程圖。圖10是示出本發(fā)明的實施方式I的光標合成部的動作的一個例子的流程圖。圖11是示出本發(fā)明的實施方式I的光標合成部生成的合成顯示圖像的一個例子的圖。圖12是示出本發(fā)明的實施方式I的變形例I的臉指間距離的大小的示意圖。圖13是示出本發(fā)明的實施方式I的變形例I的臉指間距離和光標移動率的對應的一個例子的圖。圖14是示出本發(fā)明的實施方式2的光標合成部生成的合成顯示圖像的一個例子的圖。圖15是示出本發(fā)明的實施方式2的管理多個指示者的管理信息的一個例子的圖。圖16是示出本發(fā)明的實施方式2的指示者決定部的動作的一個例子的流程圖。圖17是示出本發(fā)明的實施方式3的顯示控制裝置的系統(tǒng)結(jié)構(gòu)的一個例子的圖。圖18是示出將本發(fā)明的實施方式I的定位控制裝置作為集成電路的結(jié)構(gòu)的一個例子的圖。
具體實施例方式〈實現(xiàn)發(fā)明的經(jīng)過〉
在以往的拍攝指尖來進行定位的方法中,因為以拍攝一個指尖為前提,所以在同時拍攝兩個以上的指尖時,無法確定用于決定光標位置的一個指尖。即,在同時拍攝比光標數(shù)多的指尖的情況下,無法選出用于與光標一對一建立對應的指尖。因此,發(fā)明者們在進行指示操作的情況和不進行指示操作的情況之間,著眼于臉與指尖的距離的不同。一般情況下,進行指示操作的人因為伸手而使指尖接近畫面,所以臉和指尖之間的距離往往變大、或不固定。與此相對,未進行指示操作的人一般情況下因為手的動作很小、或伸展肘的情況少,所以臉和指尖的間的距離往往很小、或不變動。因此,通過使用臉和指尖之間的距離,可從多個人物中選出僅進行指示操作的人 。另外,在著眼于一個的操作者的情況下,在開始指示操作的前后,以及終止的前后,臉和指尖的距離較大變化。因此,使用臉和指尖的間的距離,可檢測出操作者開始了指示操作的情況、以及指示者停止指示操作的情況。因此,能夠在指示者停止指示操作的情況下從選出該指示者的對象離開,進而在其他的操作者開始指示操作的情況下選出該操作者。通過這樣做,能夠?qū)H進行定位動作的人作為指示者選出。并且,在指示者交替這樣的情況下,緊前的指示者停止定位操作,新成為指示者的人只需開始開始定位操作即可。因此,能用簡易的方法決定指示者,另外,指示者的交替也容易。<實施方式>以下關(guān)于本發(fā)明的實施方式,一邊參照圖一邊進行說明。(實施方式I)圖I是示出本發(fā)明的實施方式的具有定位控制裝置的顯示控制裝置100的結(jié)構(gòu)的框圖。顯示控制裝置100與輸入輸出終端200、和輸出顯示圖像的個人計算機(未圖示)連接,多個操作者一邊看在一個顯示裝置顯示的畫面,一邊對由指尖進行定位操作的情況進行說明。< 結(jié)構(gòu) >在圖I中,顯示控制裝置100具有定位控制裝置101、顯示圖像輸入部102、光標合成部103、以及圖像輸出部104。顯示控制裝置100例如由TV會議系統(tǒng)的主設備等實現(xiàn),定位控制裝置101、顯示圖像輸入部102、光標合成部103、以及圖像輸出部104作為集成電路的一部分而被實現(xiàn)。另外,輸入輸出終端200具有照相機201和顯示裝置202。顯示裝置202例如由大型的液晶顯示器實現(xiàn)。照相機201拍攝進行指定顯示裝置的畫面上的位置的定位操作的操作者,并輸出到顯示控制裝置100。另外,照相機201輸出的照相機圖像不僅包含檢測被攝體的信息,還包含可取得與被攝體的距離的信息。照相機201由左右兩個照相機201a、201b的一組構(gòu)成,將被拍攝的兩個圖像作為立體圖像輸出到顯示控制裝置100。顯示控制裝置100使用在照相機201a、201b拍攝的立體圖像的左圖像和右圖像的視差,計算從照相機到被攝體的距離。定位控制裝置101從照相機201接收圖像,取得作為被攝體而被攝影的操作者的臉和指尖間的距離。在多個操作者被拍攝的情況下,使用取得了的多個臉指間距離,決定指定定位對象的位置的指示者。定位控制裝置101根據(jù)決定的指示者的信息,計算顯示的光標的位置,并作為光標位置信息而輸出。定位控制裝置101由顯示控制裝置100的CPU(未圖示)和存儲部(未圖示)組成。存儲部例如由EEPROM等的非易失性存儲器來實現(xiàn),CPU讀取并執(zhí)行存儲在存儲部的程序。顯不圖像輸入部102 例如,有 HDMI (High Definition MultimediaInterface :高清晰度多媒體接口)輸入端子,將在畫面顯示的信息作為顯示圖像,并通過該輸入端子從個人計算機取得。光標合成部103從定位控制裝置101接收光標位置信息,并在顯示圖像輸入部102取得了的圖像進行重疊光標的合成,生成合成顯示圖像。另外,光標合成部103在從定位控制裝置101接收光標位置信息之前,將規(guī)定的光標位置作為光標位置信息使用,并合成光標。規(guī)定的光標位置是顯示圖像的左上角。圖像輸出部104接收由光標合成部103生成的合成顯示圖像,并輸出到顯示裝置202。顯示裝置202在畫面上顯示合成顯示圖像。
定位控制裝置101具有位置取得部111、臉指間距離計算部112、指示者決定部113、以及光標位置計算部114。位置取得部111從照相機201接收圖像,檢測作為被攝體而被拍攝的操作者的臉和指尖之間的位置,并向臉指間距離計算部112輸出檢測的位置信息。位置取得部111具有圖像輸入部121、臉檢測部122、以及指尖檢測部123。圖像輸入部121從照相機201接收圖像,并輸出到臉檢測部122和指尖檢測部123。臉檢測部122根據(jù)從自圖像輸入部121接收的照相機圖像,檢測作為被攝體而被拍攝的操作者的臉來輸出位置信息。臉檢測部122,在照相機圖像映現(xiàn)有人物的臉的情況下,將映現(xiàn)的人物的臉作為所有操作者的臉來進行檢測。臉檢測部122將檢測的臉的位置信息輸出到臉指間距離計算部112。位置信息包含與照相機的距離、以及水平、垂直位置的3個信息。指尖檢測部123根據(jù)由圖像輸入部121接收的照相機圖像,檢測作為被攝體而被拍攝的操作者的指尖并輸出位置信息。指尖檢測部123在照相機圖像映現(xiàn)人物的指尖的情況下,將映現(xiàn)的指尖作為所有操作者的指尖進行檢測。指尖檢測部123向臉指間距離計算部112輸出檢測的指尖的位置信息。位置信息包含與照相機的距離、以及水平、垂直位置的3個信息。臉指間距離計算部112根據(jù)位置取得部111輸出了的臉的位置和指尖的位置,將操作者的臉和操作者的指尖建立對應,并計算建立對應了的臉和指尖的距離(臉指間距離)。在作為被攝體映現(xiàn)有多個操作者的情況下,位置取得部111如上述輸出多個臉的位置信息。臉指間距離計算部112對位置取得部111輸出了的多個臉的位置,分別決定一個對應的指尖,并計算針對多個操作者的臉指間距離。指示者決定部113使用臉指間距離計算部112計算的臉指間距離,決定指定定位對象的位置的、具有光標移動權(quán)限的指示者。指示者決定部113輸出決定了的作為指示者的信息的臉和指尖的位置信息、以及該指示者的臉指間距離。所謂指示者是具有光標移動權(quán)限的唯一的操作者。在本實施方式中,指示者決定部113在作為被攝體映現(xiàn)多個操作者的情況下,將臉指間距離最大的操作者決定為指示者。另外,指示者決定部113在臉指間距離計算部112僅計算了一個臉指間距離的情況下,將可取得臉指間距離的該操作者決定為指示者。另外,指示者決定部113在臉指間距離計算部112 —個臉指間距離也沒計算出的情況下,決定為不存在指示者。光標位置計算部114根據(jù)作為從指示者決定部113接收了的指示者的信息的臉和指尖的位置信息、和指示者的臉指間距離,計算顯示的光標的位置,作為光標位置信息輸出。光標位置計算部114保存顯示中的光標位置、和指定該光標位置的指示者的臉和指尖的位置信息,根據(jù)新接收了的指示者的臉和指尖的位置信息,判斷是否存在指示者的變更。在存在指示者的變更的情況下,光標位置計算部114將光標初始位置作為當前光標位置信息輸出。光標初始位置是圖像的中央位置。在不存在指示者的變更的情況下,光標位置計算部114利用后述的計算方法計算光標位置,作為當前光標位置信息輸出。圖2是示出了本實施方式的與顯示控制裝置100連接的輸入輸出終端200的外觀的示意圖。輸入輸出終端200由用于畫面顯示的一個顯示裝置202、和用于拍攝的一組照相 機201組成。照相機201是左右兩個照相機201a、201b作為一組的立體攝影機,輸出立體圖像。在圖2中,照相機201設置在顯示裝置202的上部。在照相機201和顯示裝置202朝向相同的方向被接近設置時,操作者在一邊看在顯示裝置202顯示的畫面一邊進行定位操作時,存在操作者的臉和指尖變得容易進入照相機201的視角內(nèi)這樣的優(yōu)點。〈動作〉圖3是示出本實施方式的包含定位控制裝置101的顯示控制裝置100動作的流程圖。顯示控制裝置100取得照相機201的圖像(S10)。位置取得部111啟動臉檢測部122和指尖檢測部123。其次,臉檢測部122分析圖像輸入部121取得了的圖像,檢測所有映現(xiàn)的人物的臉,并向臉指間距離計算部112輸出各自的位置信息(S20)。同樣地,指尖檢測部123分析圖像輸入部121取得了的圖像,檢測所有映現(xiàn)的人物的指尖,并向臉指間距離計算部112輸出各自的位置信息(S30)。在此,關(guān)于取得臉和指尖的位置信息的方法進行說明。首先,通過使用外框(輪廓)或被包含的部分、皮膚的顏色等的圖像識別來檢測臉或指尖之后,從被檢測的區(qū)域提取與照相機201最近的特征點。在檢測臉的情況下,一般來說為了檢測臉的外框(輪廓),使用在臉的外框的范圍內(nèi)距離照相機201距離最近的點作為特征點。這種情況下,特征點因為通常是鼻子頭,以下以鼻子頭作為臉的位置進行說明。同樣地,在檢測指尖的情況下,通常檢測輪廓線,作為特征點,使用與照相機最近的點。這種情況下,特征點因為通常是食指的尖端,所以以下以食指的尖端作為指尖的位置進行說明。接著,求出特征點的位置。以下,對于指尖的位置的取得方法進行說明,臉的位置的取得方法也相同。圖4示出照相機201a和指尖的位置關(guān)系。301是指尖的位置。另外,視角的框300是從照相機201a到指尖301的距離的照相機201a的視角的范圍。首先,根據(jù)照相機201a的圖像和照相機201b的圖像,檢測指尖301的視差,并計算從照相機到指尖的距離Z。其次,導出將從指尖301向照相機201a的矢量作為法線矢量的平面,通過向該平面投影照相機視角從而得到視角的框300。視角的框300的大小,即的垂直方向的長度和水平方向的長度,全都由照相機的視角和距離Z決定。在本實施方式中,使用視角的框300內(nèi)的水平方向的位置X、垂直方向的位置Y,取得指尖的位置(X、Y、Z)。BP,X和Y是依賴于視角的框300的大小的相對值,將向著視角的框300左下的角作為原點(0,0),將對向的右上的角作為(200,150)。其次,臉指間距離計算部112使臉和指尖建立對應,并計算建立了對應的臉和指尖之間的臉指間距離(S40)。圖5是從橫方向示出了照相機201a、和被攝體的指尖和臉的位置關(guān)系的關(guān)系圖。311是指尖的位置,321是臉的位置。310是在指尖位置311的照相機視角的框,320是在臉位置321的照相機視角的框。另外,兩個照相機視角的框310、320,在從正側(cè)面看時,顯示為
直線。 圖6是從橫方向示出了照相機201a、多個被攝體的指尖及臉的位置關(guān)系的關(guān)系圖。331是被攝體a的指尖位置,341是被攝體a的臉位置,351是被攝體b的指尖位置,361是被攝體b的臉位置。330、340、350、360分別是在被攝體a的指尖位置331、被攝體a的臉位置341、被攝體b的指尖位置351、被攝體b的臉位置361的照相機視角的框。在圖6中檢測到被攝體a和被攝體b的兩人,被攝體a與被攝體b相比,位于靠近照相機的位置。圖7是從照相機201a的光軸上的點看圖6位置關(guān)系的圖。圖8是臉指間距離計算部112的動作的流程圖。使用圖8,對于臉指間距離計算部112根據(jù)臉的位置和指尖的位置、將操作者的臉和指尖建立對應并取得臉指間距離的動作進行說明。另外,在本實施方式中,臉指間距離計算部112以滿足“條件I :指尖位置一方比臉位置靠近照相機”和“條件2 :對臉位置和指尖位置最近的建立對應”的兩者來將臉和指尖
建立對應。臉指間距離計算部112從位置取得部111取得的臉位置中,選擇還未被選擇、且最靠近照相機201a的一個臉位置(S410)。接著,臉指間距離計算部112從位置取得部111取得的指尖位置中,選擇與哪個臉也未建立對應的一個指尖位置(S420 )。接著,臉指間距離計算部112對選擇的臉位置和選擇的指尖位置進行組合,判斷哪個靠近照相機201a (S430)。在指尖位置靠近照相機201a的情況下(S430),取得組合的臉和指尖間的距離(S440)。并且,臉指間距離計算部112對選擇中的臉如果未保存臉指間距離(S450),則保存取得的臉指間距離,將選擇中的指與選擇中的臉建立對應(S460)。另外,臉指間距離計算部112如果對選擇中的臉保存臉指間距離,則將保存的臉指間距離與重新取得了的臉指間距離進行比較(S450),在新的臉指間距離小的情況下,除去與選擇中的臉有關(guān)的建立的對應和臉指間距離,保存取得了的臉指間距離,將選擇中的指與選擇中的臉建立對應(S460)。另一方面,在臉位置的一方靠近照相機201a的情況下(S430),臉指間距離計算部112判斷該組合偏離建立對應的條件。接著,對于選擇的一個臉位置存在未選擇的指尖位置的情況下(S470為是),返回到S420重復與新選擇的指尖位置的組合判斷。
另一方面,在對選擇的一個臉位置選擇所有的指尖位置的情況下(S470為否),判斷是否存在未選擇的臉位置(S480),在存在未選擇的臉位置的情況下,返回到S410,新選擇臉位置并重復與指尖位置的組合判斷。在選擇完所有的臉位置的情況下(S480為否),臉指間距離計算部112結(jié)束建立對應的處理。由此,臉指間距離計算部112在多個操作者作為被攝體映現(xiàn)的情況下,對于選擇的一個臉位置將位于最合適位置的指尖位置順序建立對應。由此,臉指間距離計算部112對于作為被攝體所映現(xiàn)的操作者,將臉與指尖建立對應,并能夠取得臉指間距離。以下,使用圖6和圖7,對臉指間距離計算部112將多個操作者的臉和指尖的處理建立對應的具體例進行說明。
臉指間距離計算部112為了對被檢測的臉位置341、361和指尖位置331、351發(fā)現(xiàn)對應關(guān)系,對各自的臉位置按順序地組合位于最合適位置的指尖位置。首先,臉指間距離計算部112選擇臉位置中的靠近照相機的臉位置341 (S410)。其次,臉指間距離計算部112選擇指尖位置33KS420)。接著,臉指間距離計算部112判斷臉位置341和指尖位置331的哪個靠近照相機201a (S430),因為指尖位置331的一方靠近照相機,所以取得臉位置341和指尖位置331之間的距離(S440)。因為對于臉位置341不存在建立對應的指尖(S450),所以臉指間距離計算部112將臉位置341和指尖位置331建立對應,并保存臉指間距離(S460)。接著,因為對于臉位置341未選擇指尖位置351 (在S470為是),所以臉指間距離計算部112選擇指尖位置351 (S420)。接著,臉指間距離計算部112判斷臉位置341和指尖位置351哪個靠近照相機201a (S430),因為臉位置341的一方靠近照相機,所以對于臉位置341判斷是否存在未被選擇的指尖(S470),因為沒有未被選擇的指尖,所以判斷是否存在未被選擇的臉(S480)。臉指間距離計算部112選擇未選擇的臉位置361 (S410)。接著,臉指間距離計算部112選擇指尖位置351 (S420)。接著,臉指間距離計算部112判斷臉位置361和指尖位置351的哪個靠近照相機201a (S430),因為指尖位置351的一方靠近照相機,所以取得臉位置361和指尖位置351的間的距離(S440)。因為對臉位置361不存在建立對應的指尖(S450),所以臉指間距離計算部112將臉位置361和指尖位置351建立對應,并保存臉指間距離(S460)。其次,對于臉位置361判斷是否不存在未被選擇的指尖(S470),因為指尖331已經(jīng)與臉位置341建立對應而無法選擇,所以判斷是否存在未被選擇的臉(S480)。臉指間距離計算部112因為不存在未選擇的臉的位置所以終止處理。這樣做,臉位置341與指尖位置331建立對應而能夠計算臉指間距離,臉位置361與指尖位置351建立對應而能夠計算臉指間距離。其次,指示者決定部113根據(jù)臉指間距離決定指示者(S50)。圖9是示出指示者決定部113的動作的流程圖。使用圖9,對指示者決定部113決定指示者的動作進行說明。指示者決定部113,從臉指間距離計算部112建立對應的的臉和指尖的對應關(guān)系(以下稱為對)中,選擇一個對。選擇的對是比較元對(S510)。接著,指示者決定部113判斷臉指間距離計算部112建立對應的對是否另外存在(在S520為是),在存在的情況下,從其中選擇一個對(S530)。被選擇的對是比較目的的對。指示者決定部113,通過比較元對和比較目的對,判斷某個臉指間距離大(S540),在比較目的對的臉指間距離方大的情況下,指示者決定部113將比較目的臉指間距離作為新的比較元對(S550)。接著,指示者決定部113判斷臉指間距離計算部112建立對應的對是否另外存在(S520),在存在的情況下重復將一個對選擇為目的對的處理。另一方面,臉指間距離計算部112在建立對應的對所有作為比較元或比較目的而被選擇一次以上的情況下(在S520為否),指示者決定部113判斷比較元對臉指間距離最大,并將該對決定為指示者(S560)。
其次,光標位置計算部114根據(jù)決定的指示者的信息,計算光標位置并輸出(S60)。光標位置計算部114從指示者決定部113接收I名的指示者的信息。光標位置計算部114保存顯示中的光標位置、和指定了該光標位置的指示者的信息(臉的位置信息、以及指尖的位置信息),根據(jù)新接收了的指示者的信息判斷是否存在指示者的變更,接著,進行光標位置的計算。這是因為按照新的指示者與緊前的指示者是否相同,光標位置的計算方法不同。光標位置計算部114通過在指示者的臉的位置是否存在大的移動來判斷有無指示者的變更。本實施方式涉及的定位控制裝置101是以操作者不從自己的座位移動來進行定位操作為前提。因此,光標位置計算部114將鄰接的座位中心間的距離的1/2作為閾值,在緊前的指示者的臉的位置和當前指示者的臉的位置的間的距離如果超過閾值則判斷存在指示者的變更,在不是這樣情況下,因為可推測緊前的指示者和新的指示者是相同座席,所以判斷指示者未變更。在指示者的變更情況下,光標位置計算部114將預先保存的光標初始位置作為當前光標位置信息輸出。光標初始位置如上所述是畫面的中央位置。在不存在指示者變更的情況下,光標位置計算部114將從指尖向顯示裝置的直線和顯示裝置的顯示面的交點的位置作為當前的光標位置來輸出。通過以上SlO S60的各動作,定位控制裝置101基于從照相機201取得了的圖像輸出到光標位置。接著,對于顯示控制裝置100輸出指示內(nèi)容的動作進行說明。顯示圖像輸入部102從個人計算機取得應在顯示裝置202顯示圖像,光標合成部103對從顯示圖像輸入部102取得的圖像,在定位控制裝置101輸出的光標位置疊加合成光標并向圖像輸出部104輸出(S70)。圖10是示出光標合成部103動作的流程圖。光標合成部103從顯示圖像輸入部102接收顯示圖像(S710)。該顯示圖像是顯示用的原圖像的數(shù)據(jù)。其次,光標合成部103判斷是否從定位控制裝置101接收到光標位置的指定(S720)。在沒有位置指定的情況下(S720),光標合成部103在顯示圖像的規(guī)定的位置合成光標,生成合成顯示圖像(S730)。在這里,所謂規(guī)定的位置如上所述是畫面的左上角。在存在位置指定的情況下(S720),光標合成部103在顯示圖像的、光標位置信息示出的指定位置合成光標,生成合成顯示圖像(S740 )。最后,光標合成部103將生成的合成顯示圖像輸出到圖像輸出部104 (S750)。圖11是示出光標合成部103生成的合成顯示圖像的一個例子。圖11 (A)的401是光標合成部103從顯示圖像輸入部102接收的顯示圖像。402是光標的圖像數(shù)據(jù)。403示出光標合成部103從定位控制裝置101接收的光標位置信息示出的指定位置。圖11 (B)的404是使用圖11 (A)示出了的各信息生成的合成顯示圖像。光標合成部103在從顯示圖像輸入部102接收了的顯示圖像401的、光標位置信息示出的指定位置403疊加光標的圖像數(shù)據(jù)402來進行合成,生成合成顯示圖像404?!纯偨Y(jié)〉·由此,具有了定位控制裝置的顯示控制裝置從多個操作者中,決定指定定位對象的位置的指示者,在決定的指示者指定的位置可顯示光標。定位控制裝置在多個操作者進行定位操作的情況下,使用作為被攝體映現(xiàn)的操作者的臉指間距離,從多個操作者中,決定具有光標移動權(quán)限的指示者。操作者通過從當前操作中的指示者向照相機伸出自己的手,從而可得到光標移動權(quán)限。操作者從當前操作中的指示者向照相機伸出自己的手的動作與向操作者區(qū)域移動的情況相比因為不妨礙會議的進行,所以能提高會議進行的效率。特別是,在物理上狹窄的房間,因為不需要困難地移動座席而有效。另外,因為通過臉指間距離選擇指示者,而不依賴于照相機和操作者的間的距離,所以即使在比操作者更靠近照相機的位置存在其他的參加者的情況下,操作者通過進行從當前操作中的指示者向照相機伸出自己的手的動作,從而作為指示者可得到光標移動權(quán)限。另外,定位控制裝置具有光標的操作權(quán)的指示者變更時,通過將光標的初始位置例如向畫面的中央移動,從而可與緊前的指示者所指的位置沒有關(guān)系地開始移動光標。(變形例I)在實施方式I的光標位置計算部114將從指尖向顯示裝置朝向的直線、和顯示裝置的顯示面的交叉點的位置作為光標位置,但在顯示裝置的顯示面相對指尖的可移動范圍大的情況下,存在產(chǎn)生指示者無法指示的區(qū)域。在這樣的情況下,例如,如果是使用了鼠標的光標移動,則在移動到移動鼠標的平面上的端的時候,通過臨時使鼠標懸浮而返回,從而能進一步使其向同方向移動。但是,在實施方式I的定位控制裝置中,因為無法區(qū)別用于移動光標的指尖的移動和不伴隨光標移動的指尖的移動,所以通過這樣的方法無法擴展光標的移動范圍。因此,存在如下的光標位置計算方法將從顯示中的光標位置向指尖的移動的方向移動的位置作為新的光標位置。在這個情況下,需要決定光標的移動距離,但通常使用指尖的移動距離決定光標的移動距離。然而,在光標的移動距離是指尖的移動距離的常數(shù)倍的情況下,在該常數(shù)小時,存在產(chǎn)生光標的不可移動的范圍的情況。另外,反過來,在該常數(shù)大時,僅稍微移動指尖光標就很大地移動,難于微小的光標移動,有時無法適當?shù)夭僮鞴鈽恕?br> 在本變形例中,光標位置計算部114使用指示者的臉指尖間距離來決定光標的移動量。由此,指示者通過分開使用向臉靠近指尖的定位、和從臉遠離指尖的定位,從而能適當操縱光標。有關(guān)本變形例涉及的定位控制裝置,因為除了光標位置計算的方法與實施方式I相同,所以關(guān)于與實施方式I相同的結(jié)構(gòu)及動作省略說明,僅對光標位置計算的方法進行說明。圖12是示出了臉和指尖的距離的大小的示意圖。
`
圖12 (A)例示臉和指尖的距離長的情況。圖12 (B)例示臉和指尖的距離短的情況。在圖12中,501示出臉的位置。另外,圖12 (A)示出臉和指尖的距離長的情況,502是指尖的位置,503是臉的位置501和指尖的位置502之間的臉指間距離。與此相對,圖12 (B)示出臉和指尖的距離短的情況,504是指尖的位置,505示出臉的位置501和指尖的位置504之間的臉指間距離。圖13是示出了臉指間距離和光標移動率的對應的一個例子的圖表。在圖13中,橫軸示出臉指間距離,縱座標軸示出光標移動率。601是示出臉指間距離和光標移動率的對應的圖表。按照被給予的臉指間距離,設定與601圖表對應的光標移動率。例如,在臉指間距離是503的情況下,光標移動率成為603的大小。臉指間距離是505的情況,光標移動率成為605的大小。如圖13所示,在本實施方式中,以臉指間距離變得越小光標移動率變得越大的方式進行設定。因此,在想較大地移動光標的情況下,指示者使指尖靠近自己的臉即可。另外,指示者通過將指尖從自己的臉遠離,能夠指示光標微小的移動。光標位置計算部114對于圖13示出的光標移動率計算乘以了指尖移動的距離的值,并將該值作為光標移動距離(光標移動距離=光標移動率X指尖移動距離)。由此,光標位置計算部114在指示者移動指尖時計算方向和距離,將移動到根據(jù)顯示中的光標位置計算的方向和距離的位置作為當前的光標位置信息而輸出?!纯偨Y(jié)〉由此,本變形例涉及的定位控制裝置因為通過指示者變更臉和指尖的距離,能夠控制光標的移動距離,所以指示者能夠保持指尖的移動距離那樣使光標的移動距離變化,能夠更加按照指示者的意圖控制光標。另外,在指示者的指尖的可移動的范圍窄的情況下,通過控制臉指間距離增大光標移動率,從而可防止在畫面上產(chǎn)生光標不能移動的范圍的問題。(實施方式2)在本實施方式的具有定位控制裝置的顯示控制裝置具有以下特征可同時的顯示多個光標,多個指示者對多個光標分別進行操作。本變形例涉及的顯示控制裝置因為除了指示者決定部、光標位置計算部、和光標合成部的動作不同之外,與實施方式I相同,所以對于與實施方式I相同的結(jié)構(gòu)及動作省略說明,僅對差異部分進行說明。本變形例涉及的顯示控制裝置150具有定位控制裝置151和光標合成部153,來分別代替定位控制裝置101和光標合成部103。另外,定位控制裝置151具有指示者決定部163和光標位置計算部164,來分別代替指示者決定部113和光標位置計算部114。再者,指示者決定部163除了決定多個指示者之外,具有與指示者決定部113同樣的功能。另外,光標位置計算部164除了得到多個指示者的信息來輸出多個光標位置之外,具有與光標位置計算部114相同的功能。同樣,光標合成部153除了得多個光標位置合成多個光標之外,具有與光標合成部103相同的功能。圖14是光標合成部153生成的合成顯示圖像的一個例子,示出合成多個光標的情況。
在圖14中,700示出合成顯示圖像,701、702、703分別示出光標。以下,對指示者決定部163、光標位置計算部164、和光標合成部153的動作進行說明。指示者決定部163使用臉指間距離計算部112取得了的臉指間距離,決定與可顯示的光標數(shù)對應的人數(shù)的指示者。指示者決定部163輸出決定了的指示者的信息(臉和指尖的位置信息、臉指間距離)。在本實施方式中,指示者決定部163按照臉指間距離由大到小的順序,選擇不超過可顯示光標數(shù)的數(shù)量的指示者。圖16是示出指示者決定部163的動作的一個例子的流程圖。使用圖16,對選擇指示者的動作進行說明。指示者決定部163從由臉指間距離計算部112接收了的對應的臉和指尖的對中,選擇一個對。選擇的對是比較元對(S810)。接著,指示者決定部163將比較元對選擇為指示者(S820)。接著,指示者決定部163判斷另外是否存在臉和指尖的對應關(guān)系(S830)。在另外存在臉和指尖的對應關(guān)系的情況下,將一個對作為比較目的對進行選擇(S840)。接著,指示者決定部163判斷當前的指示者數(shù)量是否不足光標數(shù)上限(S850)。在當前指示者數(shù)已經(jīng)達到光標數(shù)上限的情況下(S850為否),指示者決定部163在比較元對和比較目的對之間比較臉指間距離的大小(S860)。比較目的對的臉指間距離大的情況下(S870為否),從指示者移除比較元對,選擇比較目的對作為指示者(S880)。接著,作為指示者被選擇的對中,選擇臉指間距離最小的對作為新的比較元對(S890)。此后,指示者決定部163對于剩余的對進行判斷(返回到S830)。相反,在比較元對的臉指間距離大的情況下(S870為是),指示者決定部163對當前比較目的對不進行任何操作,指示者決定部163對剩余的對進行判斷(返回到S830)。另一方面,在當前的指示者數(shù)量不足光標數(shù)上限的情況下(S850為是),將比較目的對作為指示者進行選擇(S860),接著,在作為指示者選擇的對中,將臉指間距離小的對選擇為新的比較元對(S890)。此后,指示者決定部163對剩余的對進行判斷(返回到S830)。對全部的對判斷結(jié)束時(S830為否),指示者決定部163將作為當前指示者而選擇的對決定為指示者。另外,光標位置計算部164根據(jù)從指示者決定部163接收的多個指示者的信息,計算顯示的多個光標的位置,作為光標位置信息輸出。另外,光標合成部153接收定位控制裝置151輸出的多個光標位置信息,在顯示圖像重疊合成多個光標,生成合成顯示圖像。圖15示出管理多個指示者的管理信息的一個例子。在圖15中,能夠與圖14相同示顯示的光標數(shù)為3個,示出管理信息的形式為表的例子。在圖15中,管理信息對一人的指示者保存有用于識別指示者的標識(No.)、臉的位置、指尖位置、以及光標的形狀。用于識別指示者的標識符(No.)是基于由實施方式I說明的指示者相同判斷而制作。光標合成部153例如將與標識符No. I的緊前的指示者的臉的位置的距離為閾值以下的臉的位置對應的新的指示者的標識符設為No. I。光標合成部153按照每個標識符分配不同的光標形狀,在該指示者保存光標移動權(quán)限的期間,維持一次分配了的光標形狀,并以在操作的途中光標的形狀不變的方式來進行控制?!纯偨Y(jié)〉由此,本實施方式涉及的定位控制裝置決定多個指示者,并可對各個的指示者分配個別的光標。 另外,本實施方式涉及的定位控制裝置,對沒進行定位的被攝體人物不分配光標,可防止不必要的光標的顯示。(實施方式3)在本實施方式的具有定位控制裝置的顯示控制裝置具有以下特征可與多個輸入輸出終端連接,在多個地點共享相同的畫面并操作相同的光標。在多地點進行會議的情況下,在各自的地點設置顯示裝置和照相機,參加會議的操作者一邊看設置在各自的地點的顯示裝置顯示的畫面,一邊進行定位操作。圖17是示出了本實施方式涉及的顯示控制裝置的系統(tǒng)結(jié)構(gòu)的圖。圖17是3個地點(會議室A、B、C)會議的例子。在會議室A設置輸入輸出終端810a,在會議室B設置輸入輸出終端810b和具有定位控制裝置的顯示控制裝置800,在會議室C設置輸入輸出終端810c。具有定位控制裝置的顯示控制裝置800通過網(wǎng)絡821與會議室A的輸入輸出終端810a連接,通過網(wǎng)絡822與會議室C的輸入輸出終端810c連接。具有了定位控制裝置的顯示控制裝置800通過網(wǎng)絡821、822,輸入其他的地點的輸入輸出終端810a、810c的各自的照相機拍攝的照相機圖像。顯示控制裝置800根據(jù)輸入輸出終端810a、810b、810c各自的照相機拍攝的圖像檢測臉位直和指尖位直,決定指不者來計算光標位置。顯示控制裝置800例如,能夠?qū)δ樀奈恢眯畔⒑椭讣獾奈恢眯畔⒏郊优臄z的輸入輸出終端的信息等,將臉和指尖與地點建立關(guān)聯(lián),而進行建立臉的位置和指尖位置的對應、計算臉指間距離。另外,顯示控制裝置800通過網(wǎng)絡821、822,向其他的地點的輸入輸出終端810a、810c的顯示裝置輸出同樣的畫面。具有定位控制裝置的顯示控制裝置800,從由多地點參加的操作者中決定具有光標移動權(quán)限的指示者,并對多個地點的顯示裝置輸出合成光標而生成的合成顯示圖像?!纯偨Y(jié)〉由此,本實施方式涉及的畫面控制裝置,在多個地點進行會議的情況下,可通過網(wǎng)絡在多個地點共享同樣的畫面。另外,本實施方式涉及的定位控制裝置從在多地點參加的操作者中,決定具有光標移動權(quán)限的指示者,并容易地切換指示者。另外,指示者通過與操作中的照相機的距離無關(guān)地向照相機進行移動指尖的動作,從而可對指定定位對象的位置的光標進行適當?shù)匾苿?。另外,本實施方式涉及的定位控制裝置因為使用臉和指尖的間的距離決定指示者,所以與由照相機和指尖的距離決定指示者的情況相比,按照每個地點,即使會議室的面積、會議室內(nèi)的配置不同的情況下,也不管這些的外部的因素都能夠適當?shù)貨Q定指示者。<本實施方式涉及的其他的變形例>(I)在實施方式I中,為了取得臉和指尖的位置,照相機201對由由兩個照相機構(gòu)成的一組照相機的情況進行了說明,但本發(fā)明未必限于這種情況。例如,照相機201也可以由一個照相機和紅外線傳感器照相機等距離檢測單元的組合來實現(xiàn)。這種情況下,臉檢測部122和指尖檢測部123可使用通常的照相機的圖像進行臉和指的水平方向、垂直方向的位置檢測,由紅外線傳感器照相機檢測這些被攝體和照相機之間的距離,并能檢測臉和指尖的位置。
(2)在實施方式I中,對輸入輸出終端200由利用大型的液晶顯示器實現(xiàn)的顯示裝置202、設置在顯示裝置202的上部的照相機201所構(gòu)成的情況進行了說明,但本發(fā)明未必限定于這種情況。顯示裝置202例如也可以由等離子體顯示器、有機E L顯示器、或是投影儀等實現(xiàn)。另外,例如,顯示裝置202可由電視接收機實現(xiàn),顯示控制裝置100也可以由作為包含在該電視接收機的集成電路的一部分來實現(xiàn)。另外,照相機201不限于顯示裝置202上部,例如也可以設置在會議室的墻面或天花板等的可將操作者作為被攝體的任意的位置。(3)在實施方式I中,對臉的特征點在臉的外框的范圍內(nèi)距離照相機201距離最近的點的情況進行了說明,但本發(fā)明未必限于這種情況。臉的特征點例如也可以是與距離照相機201的距離無關(guān)地設置為鼻子的頭,或是,在操作者戴眼鏡的情況下,并且也可以將眼鏡上的一點作為臉的特征點等、與臉一體動作將拍攝中未分離的部分視為臉的一部分。另外,對指尖的特征點在手的輪廓線的范圍內(nèi)離照相機201距離最近的點的情況進行了說明,但本發(fā)明未必限于這種情況。指尖的特征點例如也可以不管離照相機201的距離而設置為食指的尖端。(4)在實施方式I中對以指尖進行定位操作的情況進行了說明,但本發(fā)明未必限于這種情況。定位操作例如也可以由手持的筆記工具、指示桿等的尖端進行。這是通過指尖檢測部123利用使用外框、顏色等的圖像識別檢測手以及在手中持有的筆記工具等的物體,以在手中持有的筆記工具等的前端作為特征點,并將特征點的位置作為指尖的位置而取得來實現(xiàn)。通過這樣做,可將手持的筆記工具等的前端作為指尖的代替部件。另外,指尖的代替部件不限于筆記工具、指示桿等。如果能夠指示位置或方向的,且與臉容易挨近、或遠離的東西,則能夠作為指尖的代替部件來使用。(5)在實施方式I中,對位置取得部111具有圖像輸入部121、臉檢測部122和指尖檢測部123進行了說明,但本發(fā)明未必限于這種情況。位置取得部111例如也可以作為從其他的定位控制裝置、或檢測臉和指尖的位置的裝置等取得臉的位置信息和指尖的位置信息的設備。(6)在實施方式I中,在用于計算臉或指尖的水平位置、垂直位置的照相機視角的框中,將框的左下角作為原點,將右上角作為(200,150),但本發(fā)明未必限于這種情況。照相機視角的框的4邊的長度根據(jù)照相機的分辨率可以是任意的值,不限于矩形的形狀。另外,原點的位置可以是框的中央、或框的左上角等任意的位置。另外,關(guān)于水平方向設為朝向X軸關(guān)于從左向右的方向,關(guān)于垂直方向設為在Y軸從下向上的方向,但也可以是朝向X軸從右向左的方向,或是在Y軸從上向下的方向等,也可以使用任意的坐標系。(7)在實施方式I中,對臉指間距離計算部112從距離照相機最近的臉按順序搜索對應的指尖的情況進行了說明,但本發(fā)明未必限于這種情況。例如,臉指間距離計算部112也可以從距離照相機最遠的臉按順序搜索對應的指尖,也可以由從位置取得部111取得了的順序搜索與臉對應的指尖?;蚴牵?,臉指間距離計算部112也可以首先選擇指尖之后搜索對應的臉。(8)在實施方式I中,臉指間距離計算部112將從臉靠近照相機201a、并且與臉最近的指尖建立對應,但本發(fā)明未必限于這種情況。例如,臉檢測部122和指尖檢測部123除了各自位置信息還可按照每個臉或按照每個指尖輸出固有識別信息,并使用識別信息來進行建立對應。另外,也可以在臉指間距離設置閾值,并排除臉指間距離超過閾值的臉和指尖的組合。另外,在臉和指尖的位置中,也可以使用Z的值的差分或X的值的差分而排除存在閾值以上的差分的組合。 (9)在實施方式I中,光標位置計算部114將相鄰的座位的中心間的距離的1/2設為閾值,對緊前的指示者的臉的位置和新的指示者的臉的位置的距離超過閾值的情況判斷為指示者更換的情況,進行了說明,但本發(fā)明未必限于這種情況。閾值不限于相鄰的座席的中心間的距離的1/2,例如,也可以是座席的寬度,另外也可以使用不依賴于會議室的規(guī)定的值等的任意的值。另外,例如,光標位置計算部114也可以從位置取得部111也取得指示者以外的臉的位置信息,并將指示者的臉和與指示者的臉最近的其他的臉的距離的1/2作為閾值?;蛘?,臉檢測部122按照每個臉將固有的識別信息與臉的位置信息一起輸出,光標位置計算部114也可以通過臉檢測部122輸出的臉的識別信息是否一致,來判斷指示者是否更換。通過這樣做,可進行使用了圖像識別的、更正確的指示者的同一性判斷。(10)在實施方式I中,對光標位置計算部114將光標初始位置設為畫面的中央位置進行了說明,但本發(fā)明未必限于這種情況。例如,光標初始位置也可以是畫面左上位置等的特定的位置。另外,光標初始位置也可以是從指尖向顯示裝置的直線和顯示裝置的顯示面的交點的位置。(11)在實施方式I中,對在光標合成部103的規(guī)定的光標位置為顯示畫面左上角的情況進行了說明,但是本發(fā)明未必限定于這種情況。例如,規(guī)定的光標位置也可以是顯示圖像的中央位置等的任意的坐標位置?;蚴?,規(guī)定的光標位置也可以是合成上次光標的位置。另外,規(guī)定的光標位置既可以與光標位置計算部114保存的光標初始位置相同,也可以不同。另外,在光標合成部103不保存規(guī)定的光標位置,而在定位控制裝置101不輸出光標位置的情況下,光標合成部103也可以不合成光標而將從顯示圖像輸入部102所輸入的圖像按照原樣從圖像輸出部104輸出。通過這樣做,在不存在指示者的情況下,能夠消去光標以避免成為顯示圖像的妨礙。(12)在實施方式I中,對顯示圖像輸入部102通過HDMl輸入端子從個人計算機取得顯示圖像的情況進行了說明,但本發(fā)明未必限于這種情況。顯示圖像輸入部102例如也可以具有模擬RGB輸入端子、DVl輸入端子、顯示端口輸入端子、或是合成的輸入端子等的能夠接受顯示圖像的任意的接口。另外,顯示圖像的取得元不限于個人計算機,也可以是BD播放機等任意的圖像輸出裝置?;蛘?,顯示圖像輸入 部102例如也可以具有從SDXC存儲卡等的存儲設備將顯示圖像作為文件來取得的讀卡器等從記錄介質(zhì)或網(wǎng)絡取得顯示圖像的接口。(13)在實施方式I中,對按照光標位置計算部114輸出的光標位置信息、光標合成部103在由顯示圖像輸入部102輸入的圖像上合成光標的情況進行了說明,但本發(fā)明未必限于這種情況。例如,也可以是顯示控制裝置100不具有顯示圖像輸入部102、光標合成部103以及圖像輸出部104,而定位控制裝置101具有HID (Human Interface Device :人機接口設備)類的USB接口、或是P S /2鼠標接口,將光標位置計算部114計算的光標位置信息輸出到個人計算機,個人計算機使用光標位置信息在顯示圖像合成光標。通過這樣做,不需要在顯示控制裝置合成光標,而使個人計算機進行光標合成處理,從而可從個人計算機向顯示裝置202直接輸出圖像。(14)在實施方式I的變形例I中,對于臉指間距離和光標移動率的關(guān)系由I次函數(shù)表示的情況進行了說明,但本發(fā)明未必限定于這種情況。例如,臉指間距離和光標移動率可以是反比例的關(guān)系,也可以是由其他的以函數(shù)表示。另外,例如,臉指間距離和光標移動率的關(guān)系也可以使用變換表而被定義,使用該表將臉指間距離變換為光標移動率,并計算該光標移動距離。(15)在實施方式2中,對用于識別指示者的標識符(No.)基于如在實施方式I說明的指示者相同判斷而制作的情況進行了說明,但本發(fā)明未必限定于這種情況。例如,如在其他的變形例(9)說明,臉檢測部122按照每個臉輸出固有的識別信息,用于識別指示者的標識符(No.)也可以基于該臉固有的識別信息而生成。另外,由管理信息所存儲的光標的形狀也可以含有光標的大小和顏色等、在形狀以外確定光標的信息。(16)在實施方式3中,對在具有定位控制裝置的顯示控制裝置800對臉的位置信息和指尖的位置信息附加拍攝的輸入輸出終端的信息的情況進行了說明,但本發(fā)明未必限于這種情況。例如,也可以對于地點A、地點B、地點C的每一個,以互相間坐標值不重復的方式確定坐標系(原點的位置),取得指尖和臉的位置信息。通過這樣做,可防止某地點的臉和另外的地點的指被建立對應。(17)在實施方式3中,具有定位控制裝置的顯示控制裝置800通過網(wǎng)絡821、822,接受其他的地點的輸入輸出終端810a、810c的照相機拍攝的照相機圖像的情況進行了說明,但本發(fā)明未必限定于這種情況。例如,輸入輸出終端810a具有與照相機連接的位置取得部111,輸入輸出終端810a可以通過網(wǎng)絡821向顯示控制裝置800的位置取得部111輸出臉的位置信息和指尖的位置信息?;蚴?,輸入輸出終端810a具有與照相機連接的位置取得部111和臉指間距離計算部112,輸入輸出終端810a可以通過網(wǎng)絡821向顯示控制裝置800的指示者決定部113輸出臉指間距離信息。通過這樣做,網(wǎng)絡821不需要直接傳送照相機圖像,而能夠使網(wǎng)絡利用效率進一步提高。另外,輸入輸出終端810c和網(wǎng)絡822當然也可以是同樣的結(jié)構(gòu)。另外,也可以是在會議室C中連接輸入輸出終端810c,設置不具有定位控制裝置101的顯示控制裝置,顯示控制裝置800通過網(wǎng)絡822向會議室C的顯示控制裝置輸出光標位置信息。通過這樣做,會議室C的顯示控制裝置因為使用光標位置信息而向輸入輸出終端810c輸出光標,所以網(wǎng)絡822不需要能直接傳送光標合成后的顯示圖像,可使網(wǎng)絡利用效率提高。另外,輸入輸出終端810a和網(wǎng)絡821當然也可以是同樣的結(jié)構(gòu)。另外,會議室A的輸入輸出終端810a也可以由照相機和顯示器、以及內(nèi)置網(wǎng)絡功能的附帶照相機的攜帶電話終端來實現(xiàn)。通過這樣做,使用具有該手機端的操作者的自己的家的一室來實現(xiàn)會議室A,操作者從自己的家等可參加會議。(18)在各實施方式及各變形例涉及的定位控制裝置將其構(gòu)成要素的全部或一部分既可以由單個芯片或多個芯片的集成電路實現(xiàn),也可以由計算機的程序?qū)崿F(xiàn),也可以由其他的某種方式實施。例如,也可以通過一個芯片實現(xiàn)包含定位控制裝置的顯示控制裝置,也可以由一個芯片僅實現(xiàn)定位控制裝置,由另外的芯片實現(xiàn)光標合成部等。
在由集成電路實現(xiàn)的情況下,典型的情況下實現(xiàn)為LSI (Largescaleintegration :大規(guī)模集成電路)。在這里設為LSI,但根據(jù)集成度的差異,有時也稱為集成電路、系統(tǒng)LSI、超級LSI、極超(ultra) LSI。另外,集成電路化的方法不限于LSI,也可以由專線、或通用處理器實現(xiàn)。在LSI制造后,也可以利用可程序化的FPGA(Field ProgrammableGate Array :現(xiàn)場可編程門陣列)、或可重構(gòu)LSI內(nèi)部的電路單元的連接和設定的可重構(gòu)處理器。進而,根據(jù)半導體技術(shù)的進展、或派生的其他技術(shù),如果對LSI替換的集成電路技術(shù)出現(xiàn),當然也可以使用該技術(shù)對功能塊進行集成化。例如,作為由集成電路實現(xiàn)的一個例子,也可以由圖18結(jié)構(gòu)來實現(xiàn)。在圖18中,顯示控制裝置100由集成電路實現(xiàn)。因為顯示控制裝置100的各部分與實施方式I相同所以賦予相同符號,對于同樣的結(jié)構(gòu)省略說明。顯示控制裝置100從照相機圖像輸入部211輸入照相機圖像,并向圖像輸出部212輸出合成顯示圖像。照相機圖像輸入部211向圖像輸入部121輸入照相機圖像。另外,圖像輸出部212輸出由圖像輸出部104 (未圖示)所輸出的圖像。另外,有關(guān)本發(fā)明的定位控制裝置也可以由被寫入到存儲介質(zhì)的程序、和讀入程序來執(zhí)行的計算機實現(xiàn)。存儲介質(zhì)也可以是存儲卡、光盤等任何的記錄介質(zhì)。另外,本發(fā)明涉及的定位控制裝置也可以由經(jīng)由網(wǎng)絡而被下載的程序、和由網(wǎng)絡下載程序來執(zhí)行的計算機實現(xiàn)。該程序是執(zhí)行由位置取得步驟、臉指間距離計算步驟、指示者決定步驟、以及光標位置計算步驟構(gòu)成的定位處理的程序,其中,位置取得步驟,取得各操作者的臉的位置、和各操作者的指尖的位置;臉指間距離計算步驟,將取得了的各操作者的臉的位置和各操作者的指尖的位置建立對應,計算建立了對應的臉的位置和指尖的位置之間的臉指間距離;指示者決定步驟,使用所述臉指間距離決定指示者;光標位置計算步驟,使用決定了的指示者的指尖的位置計算光標位置,并輸出計算的光標位置。另外,這種情況下,輸出顯示圖像的個人計算機也可以是與讀入上述程序并執(zhí)行程序的計算機相同的硬件結(jié)構(gòu)。另外,本發(fā)明不僅在會議室這樣的特定的場所使用,也可以作為家庭內(nèi)的電視的定位操作、個人計算機、手機、便攜信息終端、攝像機、數(shù)碼相機等的定位器來發(fā)揮作用。(19)在各實施方式及各變形例僅為例示,而不是對本記載內(nèi)容的限定,也考慮有進行本發(fā)明的范圍示出的種種的變更。
以下,對實施方式涉及的定位控制裝置及其集成電路以及的定位控制方法的結(jié)構(gòu)及效果進行說明。(a)實施方式涉及的定位控制裝置,從進行指示操作的操作者中,決定能夠指定光標位置的指示者,其特征在于,具有位置取得部,取得各操作者的臉的位置、和各操作者的指尖或其代替部件的位置;距離計算部,將取得的各操作者的臉的位置、和各操作者的指尖或其代替部件的位置建立對應,計算建立了對應的臉的位置和指尖或其代替部件的位置之間的距離;指示者決定部,使用所述距離決定指示者;以及,光標位置計算部,使用決定的指示者的指尖或其代替部件的位置計算光標位置,并輸出所計算的光標位置。另外,實施方式涉及的集成電路,從進行指示操作的操作者中,決定能夠指定光標位置的指示者,其特征在于,具有位置取得部,取得各操作者的臉的位置、和各操作者的指尖或其代替部件的位置;距離計算部,將取得了的各操作 者的臉的位置、和各操作者的指尖或其代替部件的位置建立對應,來計算建立了對應的臉的位置和指尖或其代替部件的位置之間的距離;指示者決定部,使用所述距離來決定指示者;光標位置計算部,使用決定了的指示者的指尖或其代替部件的位置計算光標位置,并輸出計算的光標位置。另外,實施方式涉及的定位控制方法,從進行指示操作的操作者中,決定能夠指定光標位置的指示者,其特征在于,具有位置取得步驟,取得各操作者的臉的位置、和各操作者的指尖或其代替部件的位置;距離計算步驟,將取得了的各操作者的臉的位置、和各操作者的指尖或其代替部件的位置建立對應,計算建立了對應的臉的位置和指尖或其代替部件的位置之間的距離;指示者決定步驟,使用所述距離決定指示者;以及光標位置計算步驟,用決定的指示者的指尖或其代替部件的位置來計算光標位置,并輸出計算的光標位置。根據(jù)這些上述的結(jié)構(gòu),使用臉和指尖或其代替部件之間的距離確定指定定位對象的位置的指示者,指示者能夠不影響其他的操作者來進行定位動作,另外,通過使指示者和其他的操作者變動該距離,從而可容易地變更指示者。(b)另外,在實施方式涉及的上述(a)的定位控制裝置中,也可以設置為上述位置取得部將各操作者的臉的位置、各操作者的指尖或其代替部件的位置作為三維信息來取得,上述距離計算部制作多個由一個臉的位置、與上述一個臉的位置建立對應的一個指尖或其代替部件的位置構(gòu)成的對,對上述對的全部計算所述距離。通過這樣做,能夠與臉和指尖或其代替部件的位置關(guān)系無關(guān)地正確取得臉和指尖或其代替部件的間的距離,并且將一個臉和一個指尖或其代替部件建立對應而制作多個對,并能根據(jù)各對決定指示者。(C)另外,在實施方式涉及的上述(b)的定位控制裝置中,也可以設置為所述指示者決定部在所述對間比較所述距離的大小,來決定所述指示者。通過這樣做,通過使臉和指尖或其代替部件的間的距離的大小變化,從而任意的操作者能夠成為指示者,且指示者的變更變得容易。(d)另外,在實施方式涉及的上述(C)的定位控制裝置中,也可以設置為所述指不者決定部在所有的對中,將所述距尚最大的對決定為所述指不者。通過這樣做,可將指尖或其代替部件從臉遠離的操作者作為指示者。(e)另外,實施方式涉及的上述(b)的定位控制裝置是同時輸出多個光標位置信息的定位控制裝置,所述指示者決定部在所述多個對間比較所述距離的大小,從所有的對中決定多個對作為指示者,所述光標位置計算部根據(jù)所述指示者的指尖或其代替部件的位置每一個計算光標位置,并輸出所述指示者各自的光標位置信息。通過這樣做,多個指示者可同時進行的定位。(f)另外,在實施方式涉及的上述(e)的定位控制裝置中,也可以設置為所述指示者決定部在所述多個對中從所述距離大的按順序決定多個指示者。通過這樣做,將指尖從臉離開的多個操作者可同時成為指示者。(g)另外,在實施方式涉及的上述(a)的定位控制裝置中,也可以設置為所述位置取得部具有取得多個照相機圖像的圖像取得部、從所述多個照相機圖像檢測操作者的臉的位置的臉位置檢測部、和從所述多個照相機圖像檢測操作者的指尖或其代替部件的位置的指尖位置檢測部。 通過這樣做,定位控制裝置根據(jù)使用多個照相機而拍攝的圖像取得臉與指尖或其代替部件的距尚,并能夠決定指不者。(h)另外,在實施方式涉及的上述(a)的定位控制裝置中,也可以設置為所述光標位置計算部保存用于確定當前的指示者的信息,并判斷所述指示者決定部決定的新的指示者與所述當前的指示者是否相同,在所述判斷的結(jié)構(gòu)相同的情況下,將所述指示者的指尖或其代替部件的位置移動的方向作為光標的移動方向來計算光標移動位置。通過這樣做,在同樣的指示者繼續(xù)定位時,因為光標的移動方向與指尖或其代替部件的移動方向一致,所以指示者能夠直觀地控制光標位置。(j)另外,在實施方式涉及的上述(h)的定位控制裝置中,也可以設置為所述光標位置計算部保存當前的光標位置,使用所述指示者的所述距離計算光標的移動距離,將從所述當前的光標位置向所述光標的移動方向移動所述光標的移動距離的位置作為新的光標位置而輸出。通過這樣做,通過將指尖或其代替部件與臉靠近或遠離,從而能夠按照指示者的意圖對指尖或其代替部件的移動距離和光標的移動距離的關(guān)系進行控制,通過將能指示者的意圖那樣調(diào)節(jié),指示者更詳細調(diào)節(jié)光標的移動的事變成可能。(k)另外,在實施方式涉及的上述(h)的定位控制裝置中,可以設置為所述光標位置計算部在所述指示者決定部決定了的新的指示者與所述當前的指示者不同樣的情況下,將初始位置作為光標位置來輸出。通過這樣做,在改變指示者的情況下,不管當前的光標位置,都能夠以新的指示者規(guī)定的光標位置作為基準來開始定位。產(chǎn)業(yè)上的利用可能性本發(fā)明涉及的定位控制裝置具有使用操作者的臉和指尖或其代替部件的間的距離,來決定指定定位對象的位置的指示者的功能,而在會議系統(tǒng)中發(fā)揮作用。另外,也能應用于個人計算機、手機、便攜信息終端、攝像機、數(shù)碼相機等的用途。標號說明100,800顯示控制裝置101定位控制裝置102顯示圖像輸入部103光標合成部
104圖像輸出部111位置取得部112臉指間距離計算部113指示者決定部114光標位置計算部121圖像輸入部
122臉檢測部123指尖檢測部200,810a,810b,810c 輸入輸出終端201照相機202顯示裝置211照相機圖像輸入部212顯示圖像輸入部
權(quán)利要求
1.一種定位控制裝置,從進行指示操作的操作者中,決定能夠指定光標位置的指示者, 其特征在于,具有位置取得部,取得各操作者的臉的位置、和各操作者的指尖或其代替部件的位置;距離計算部,將取得的各操作者的臉的位置、和各操作者的指尖或其代替部件的位置 建立對應,計算建立了對應的臉的位置和指尖或其代替部件的位置之間的距離;指示者決定部,使用所述距離決定指示者;以及光標位置計算部,使用決定的指示者的指尖或其代替部件的位置計算光標位置,并輸 出所計算的光標位置。
2.如權(quán)利要求1所述的定位控制裝置,其特征在于,所述位置取得部取得各操作者的臉的位置、和各操作者的指尖或其代替部件的位置, 作為三維信息;所述距離計算部制作多個由一個臉的位置、和與所述一個臉的位置建立了對應的一個 指尖或其代替部件的位置構(gòu)成的對,對于所述對的全部計算所述距離。
3.如權(quán)利要求2所述的定位控制裝置,其特征在于,所述指示者決定部在所述對之間比較所述距離的大小,并決定所述指示者。
4.如權(quán)利要求3所述的定位控制裝置,其特征在于,所述指示者決定部在所述全部的對中,將所述距離最大的對決定為所述指示者。
5.如權(quán)利要求2所述的定位控制裝置,其特征在于,同時輸出多個光標的位置信息,所述指示者決定部在所述多個對之間比較所述距離的大小,從所有的對中決定多個對 作為指示者,所述光標位置計算部根據(jù)所述指示者的指尖或其代替部件的位置的每一個計算光標 位置,并輸出所述指示者各自的光標位置信息。
6.如權(quán)利要求5所述的定位控制裝置,其特征在于,所述指示者決定部在所述多個對中,從所述距離大的對按順序決定多個指示者。
7.如權(quán)利要求1所述的定位控制裝置,其特征在于,所述位置取得部具有圖像取得部,取得多個照相機圖像;臉位置檢測部,從所述多個照相機圖像檢測操作者的臉的位置;以及指尖位置檢測部,從所述多個照相機圖像中檢測操作者的指尖或其代替部件的位置。
8.如權(quán)利要求1所述的定位控制裝置,其特征在于,所述光標位置計算部保存用于確定當前的指示者的信息,并判斷所述指示者決定部決 定的新的指示者與所述當前的指示者是否相同,在所述判斷的結(jié)果相同的情況下,將所述指示者的指尖或其代替部件的位置移動的方 向作為光標的位置方向來計算光標位置。
9.如權(quán)利要求8所述的定位控制裝置,其特征在于,所述光標位置計算部保存當前的光標位置,使用所述指示者的所述距離計算光標的移 動距離,將從所述當前的光標位置向所述光標的移動方向移動了所述光標的移動距離的位 置,作為新的光標位置而輸出。
10.如權(quán)利要求8所述的定位控制裝置,其特征在于,所述光標位置計算部在所述指示者決定部決定了的新的指示者與所述當前的指示者 不同的情況下,將初始位置作為光標位置而輸出。
11.一種集成電路,從進行指示操作的操作者中,決定能夠指定光標位置的指示者,其 特征在于,具有位置取得部,取得各操作者的臉的位置、和各操作者的指尖或其代替部件的位置;距離計算部,將取得了的各操作者的臉的位置、和各操作者的指尖或其代替部件的位 置建立對應,來計算建立了對應的臉的位置和指尖或其代替部件的位置之間的距離;指示者決定部,使用所述距離來決定指示者;以及光標位置計算部,使用決定了的指示者的指尖或其代替部件的位置計算光標位置,并 輸出計算的光標位置。
12.一種定位控制方法,從進行指示操作的操作者中,決定能夠指定光標位置的指示 者,其特征在于,具有位置取得步驟,取得各操作者的臉的位置、和各操作者的指尖或其代替部件的位置;距離計算步驟,將取得了的各操作者的臉的位置、和各操作者的指尖或其代替部件的 位置建立對應,計算建立了對應的臉的位置和指尖或其代替部件的位置之間的距離;指示者決定步驟,使用所述距離決定指示者;以及光標位置計算步驟,用決定的指示者的指尖或其代替部件的位置來計算光標位置,并 輸出計算的光標位置。
全文摘要
本發(fā)明提供一種定位控制裝置,該定位控制裝置在多個操作者進行定位操作的情況下,使用臉和指尖或其代替部件之間的距離,從操作者中決定指定定位對象位置的指示者。使用操作者臉的位置、和操作者的指尖或其代替部件的位置,計算臉和指尖或其代替部件之間的距離,使用所計算的距離,從操作者中決定指示者,并根據(jù)操作者的指尖或其代替部件的位置,計算用于定位操作的光標的位置。能夠操作者的數(shù)量無關(guān)地決定指示者,另外,在操作者之間能夠容易地變更指示者。
文檔編號G06F3/01GK102959491SQ201280001738
公開日2013年3月6日 申請日期2012年4月5日 優(yōu)先權(quán)日2011年4月22日
發(fā)明者山下和彥 申請人:松下電器產(chǎn)業(yè)株式會社
網(wǎng)友詢問留言 已有0條留言
  • 還沒有人留言評論。精彩留言會獲得點贊!
1