專利名稱:繪畫圖像共有裝置和數(shù)據(jù)處理方法
技術(shù)領(lǐng)域:
本發(fā)明涉及共有繪畫圖像,具體涉及能夠在不同地點共同享有繪畫圖像的繪畫圖像共有裝置以及繪畫圖像共有方法。
背景技術(shù):
現(xiàn)有技術(shù)中存在一種用于向遠距離會議等提供繪畫圖像的技術(shù),該技術(shù)用照相機等拍攝畫在各個地點的白板或黑板等繪畫對象體上的圖像,并用投影機等將該圖像投影到其他地點的繪畫對象體上,來提供多個畫在繪畫對象物上圖像。例如,專利文獻1 (JP特開2005-203886號公報)公開了一種遠距離會議援助系統(tǒng),該系統(tǒng)具備在各個遠距離地點投影投影圖像的投影機、以及向投影機發(fā)送需要投影的原圖像的服務(wù)器,各臺投影機具備攝影裝置以及送信裝置,該攝影裝置用于拍攝寫入到投影了投影圖像的屏幕上的寫入圖像,該送信裝置用于將攝影裝置拍攝的寫入圖像送往服務(wù)器,服務(wù)器具有合成裝置以及傳送裝置,該合成裝置將來自一方投影機的寫入圖像合成到原圖像上,該傳送裝置將合成裝置合成的圖像送往另一方的投影機。但是,專利文獻1公開的系統(tǒng)需要以一定的時間間隔中斷投影機的投影,用以拍攝寫入圖像,從而造成了顯示在屏幕上的圖像的視覺性能變差。而且,上述繪像共有系統(tǒng)雖然能夠共有用戶寫到未被畫上任何圖的繪畫對象體上的繪畫圖像,但此時需要用戶以PC畫面等任意圖像為背景來進行寫入以將該圖像與其他地點的用戶共有的技術(shù)。
發(fā)明內(nèi)容
本發(fā)明的目的在于解決上述問題,提供一種能夠提高顯示在繪畫對象體上的圖象的視覺性能且與其他點共有在任意圖像上重疊描寫的繪畫圖像的繪畫圖像共有裝置以及數(shù)據(jù)處理方法。本發(fā)明具體構(gòu)成如下(1)本發(fā)明的一個方面在于,提供一種用于共有繪畫圖像的繪畫圖像共有裝置,其中包括圖像加工處理部,其合成需要顯示在繪畫對象體上的背景圖像和從其他地點收到的繪畫圖像;差分圖像生成部,用于生成需要與其他地點共有的差分圖像,該差分圖像為所述加工處理部合成的圖像與本地點的繪畫對象體上的圖像之間的差分;以及,送信部,其向其他地點發(fā)送所述差分圖像。(2)本發(fā)明的另一個方面在于,提供根據(jù)(1)所述的繪畫圖像共有裝置,其中進一步包括,收信部,用于接收需要顯示在繪畫對象體上的背景圖像以及其他地點的繪畫圖像; 圖像供給部,使得所述圖像加工處理部合成的圖像顯示到所述繪畫對象體上;以及,圖像取得部,用于取得所述本地點的繪畫對象體上的圖像,所述送信部將所述差分圖像以及所述背景圖像送往所述其他地點的繪畫圖像共有裝置。(3)本發(fā)明的另一個方面在于,提供根據(jù)(1)或( 所述的繪畫圖像共有裝置,其中進一步包括,收信部,用于接收需要顯示在繪畫對象體上的背景圖像以及其他地點的繪畫圖像;圖像供給部,使得所述圖像加工處理部合成的圖像顯示到所述繪畫對象體上;以及,圖像取得部,用于取得所述本地點的繪畫對象體上的圖像,所述圖像加工部合成所述差分圖像和所述背景圖像,所述送信部將所述差分圖像和所述背景圖像的合成的圖像送往所述其他地點的繪畫圖像共有裝置。(4)本發(fā)明的另一個方面在于,提供根據(jù)( 所述的繪畫圖像共有裝置,其中,所述送信部參考所述其他地點的繪畫圖像共有裝置的簡介信息,并在所述其他地點的繪畫圖像共有裝置具備合成圖像的功能時,發(fā)送所述差分圖像以及所述背景圖像,而在所述其他地點的繪畫圖像共有裝置不具備合成圖像的功能時,則發(fā)送所述差分圖像和所述背景圖像的合成圖像。(5)本發(fā)明的另一個方面在于,提供根據(jù)( 所述的繪畫圖像共有裝置,其中,所述送信部參考所述本地點的繪畫圖像共有裝置以及所述其他地點的繪畫圖像共有裝置的簡介信息,當所述其他地點的繪畫圖像共有裝置的處理能力低于所述本地點的繪畫圖像共有裝置的處理能力時,發(fā)送所述差分圖像以及所述背景圖像的合成圖像,而當所述其他地點的繪畫圖像共有裝置的處理能力在所述本地點的繪畫圖像共有裝置的處理能力以上時, 則發(fā)送所述差分圖像和所述背景圖像。(6)本發(fā)明的另一個方面在于,提供根據(jù)( 所述的繪畫圖像共有裝置,其中,所述收信部將所述背景圖像保存到背景圖像存儲部中,并將從其他地點收到的繪畫圖像保存到繪畫圖像存儲部。(7)本發(fā)明的另一個方面在于,提供根據(jù)( 所述的繪畫圖像共有裝置,其中,所述圖像供給部將所述加工處理部合成的圖像送往顯示裝置并使得該合成的圖像顯示到繪畫對象體上,所述圖像取得部使得所述攝影裝置拍攝繪畫對象體的圖像,取得需要與其它地點共有的共有區(qū)域的圖像。(8)本發(fā)明的另一個方面在于,提供根據(jù)(7)所述的繪畫圖像共有裝置,其中,所述圖像供給部使得所述顯示裝置在繪畫對象體上顯示用于規(guī)定所述共有區(qū)域的標記圖像, 所述圖像取得部使得攝影裝置拍攝該顯示裝置進行顯示的繪畫對象體,并取得該攝影裝置拍攝的攝影圖像,從該攝影圖像中包含的標記圖像上的標記坐標來確定所述共有區(qū)域。(9)本發(fā)明的另一個方面在于,提供根據(jù)(7)所述的繪畫圖像共有裝置,其中,所述圖像供給部使得所述顯示裝置在繪畫對象體上顯示白紙圖像,所述圖像取得部使得攝影裝置拍攝該顯示裝置進行顯示的繪畫對象體,并取得該攝影裝置拍攝的攝影圖像,利用該攝影圖像中包含的白紙圖像的區(qū)域與該白紙圖像以外的區(qū)域之間的輝度差來確定所述共有區(qū)域。(10)本發(fā)明的另一個方面在于,提供根據(jù)(7)所述的繪畫圖像共有裝置,其中,所述圖像取得部對攝影圖像施加透視投影轉(zhuǎn)換。(11)本發(fā)明的另一個方面在于,提供根據(jù)(7)所述的繪畫圖像共有裝置,其中,所述差分圖像生成部對顯示圖像施加膨脹處理并生成差分圖像。(12)本發(fā)明的另一個方面在于,提供根據(jù)(7)所述的繪畫圖像共有裝置,其中,所述差分圖像生成部對所述差分圖像施加去除黃色成分的過濾處理。(13)本發(fā)明的另一個方面在于,提供根據(jù)(7)所述的繪畫圖像共有裝置,其中,所述差分圖像生成部對所述差分圖像施加提高色彩強度的補償處理。(14)本發(fā)明的另一個方面在于,提供根據(jù)( 所述的繪畫圖像共有裝置,其中,進一步包括圖像檢測部,其檢測所述收信部收到的第一背景圖像是否與所述收信部在前一次收到的第二背景圖像一致,當該第一背景圖像與該第二背景圖像不同時,所述送信部發(fā)送該第一背景圖像。(15)本發(fā)明的另一個方面在于,提供根據(jù)( 所述的繪畫圖像共有裝置,其中,所述圖像加工處理部利用從其他地點收到的與繪畫圖像有關(guān)的背景圖像的識別信息來識別該背景圖像,并合成該繪畫圖像和該背景圖像。(16)本發(fā)明的另一個方面在于,提供根據(jù)(1 所述的繪畫圖像共有裝置,其中, 所述背景圖像的識別信息為所述背景圖像的ID。(17)本發(fā)明的另一個方面在于,提供根據(jù)(1)所述的繪畫圖像共有裝置,其中,所述圖像加工部對所述背景圖像施加縮放處理。(18)本發(fā)明的另一個方面在于,提供根據(jù)(1)所述的繪畫圖像共有裝置,其中,所述圖像加工部對所述背景圖像施加改變亮度的處理。(19)本發(fā)明的另一個方面在于,提供一種用于繪畫圖像共有裝置的數(shù)據(jù)處理方法,其為通過所述繪畫圖像共有裝置實行以下步驟,即圖像加工處理步驟,合成需要顯示在繪畫對象體上的背景圖像和從其他地點收到的繪畫圖像;差分圖像生成步驟,生成需要與其他地點共有的差分圖像,該差分圖像為所述合成的圖像與本地點的繪畫對象體上的圖像之間的差分;以及,送信步驟,向其他地點發(fā)送所述差分圖像。(20)本發(fā)明的另一個方面在于,提供根據(jù)(19)所述的數(shù)據(jù)處理方法,其中,所述繪畫圖像共有裝置進一步實行以下步驟,即收信步驟,接收需要顯示在繪畫對象體上的背景圖像以及其他地點的繪畫圖像;圖像供給步驟,使得所述合成的圖像顯示到所述繪畫對象體上;以及,圖像取得步驟,取得所述本地點的繪畫對象體上的圖像,所述送信步驟包括將所述差分圖像以及所述背景圖像送往所述其他地點的繪畫圖像共有裝置的步驟。(21)本發(fā)明的另一個方面在于,提供根據(jù)(19)或00)所述的數(shù)據(jù)處理方法,其中,所述繪畫圖像共有裝置進一步包括以下步驟,即收信步驟,接收需要被顯示在繪畫對象體上的背景圖像以及其他地點的繪畫圖像;圖像供給步驟,使得所述合成的圖像顯示到所述繪畫對象體上;以及,圖像取得步驟,取得所述本地點的繪畫對象體上的圖像,在所述圖像加工處理步驟中,進一步包括合成所述差分圖像和所述背景圖像的,在所述送信部步驟中,進一步包括將所述差分圖像和所述背景圖像的合成圖像送往所述其他地點的繪畫圖像共有裝置的步驟。(22)本發(fā)明的另一個方面在于,提供根據(jù)所述的數(shù)據(jù)處理方法,其中,所述送信步驟包括參考所述其他地點的繪畫圖像共有裝置的簡介信息的步驟;以及,在所述其他地點的繪畫圖像共有裝置具備合成圖像的功能時,發(fā)送所述差分圖像以及所述背景圖像,而在所述其他地點的繪畫圖像共有裝置不具備合成圖像的功能時,則發(fā)送所述差分圖像和所述背景圖像的合成圖像的步驟。(23)本發(fā)明的另一個方面在于,提供根據(jù)所述的數(shù)據(jù)處理方法,其中,所述送信步驟包括參考所述本地點的繪畫圖像共有裝置以及所述其他地點的繪畫圖像共有裝置的簡介信息的步驟;以及,在所述其他地點的繪畫圖像共有裝置的處理能力低于所述本地點的繪畫圖像共有裝置的處理能力時,發(fā)送所述差分圖像以及所述背景圖像的合成圖像,而在所述其他地點的繪畫圖像共有裝置的處理能力為所述本地點的繪畫圖像共有裝置的處理能力以上時,則發(fā)送所述差分圖像和所述背景圖像的步驟。本發(fā)明的繪畫圖像共有裝置接收需要表示在繪畫對象體上的背景圖像以及其他地點的繪畫圖像,并向其他地點的繪畫圖像共有裝置發(fā)送背景圖像。而后將這些圖像合成后顯示在繪畫對象體上之后,取得繪畫對象體上顯示的圖像,生成該取得的圖像與合成圖像之間的差分圖像,并將該差分圖像送往其他點的繪畫圖像共有裝置。這樣,不但能夠與其他地點共有重迭描寫在任意圖像上的繪畫圖像,而且能夠避免繪畫圖像重迭所帶來的回波現(xiàn)象,進一步提高投影圖像的視覺性能。本發(fā)明提供能夠提高顯示在繪畫對象體上的圖象的視覺性能且能夠與其他點共有在任意圖像上重迭描寫的繪畫圖像的繪畫圖像共有裝置、以及數(shù)據(jù)處理方法。
圖1是本發(fā)明實施方式的繪畫圖像共有系統(tǒng)的示意圖。圖2是本實施方式的繪畫圖像共有裝置的功能結(jié)構(gòu)的示意圖。圖3是本實施方式的繪畫圖像共有裝置在以背景圖像供給模態(tài)動作時實行的處理流程圖。圖4是本實施方式的繪畫圖像共有裝置在以背景圖像供給模態(tài)動作時的處理中實行的圖像送信處理流程圖。圖5是一例以背景圖像接收模態(tài)動作的本實施方式的繪畫圖像共有裝置實行的處理的流程圖。圖6是本實施方式的另一例以背景圖像接受模態(tài)動作的繪畫圖像共有裝置實行的處理流程圖。圖7是本實施方式的差分圖像生成部實行差分圖像生成處理的流程圖。圖8是本實施方式的差分圖像生成部實行的平均比率計算處理的流程圖。圖9是另一實施方式的差分圖像生成部實行的平均差分值計算處理的流程圖。圖10是本實施方式的差分圖像生成部實行的差分計算處理的流程圖。
具體實施例方式以下說明本發(fā)明的實施方式,但是本發(fā)明并不局限于下述的實施方式。圖1顯示了本發(fā)明實施方式的繪畫圖像共有系統(tǒng)100。該繪畫圖像共有系統(tǒng)100 包括兩個地點IlOa和110b。地點IlOa和地點IlOb通過英特網(wǎng)或LAN、WAN互相連接。本實施方式為了便于說明,采用了包含兩個地點的構(gòu)成,除此之外,還可以有包括多個地點的繪畫圖像共有系統(tǒng)的實施方式,另外,繪畫圖像共有系統(tǒng)中的地點還可用專用線來連接。地點IlOa包括繪畫對象體112a、顯示裝置114a、攝影裝置116a、繪畫圖像共有裝置118a、以及背景圖像供給裝置122。除了背景圖像供給裝置122以外、地點IlOb與地點 IlOa具有相同構(gòu)成,在此省略說明。繪畫對象體11 例如有白板、黑板、或紙張等物,其不但能夠用于顯示顯示裝置 11 顯示的圖像,而且地點IlOa的用戶能夠在其上書寫文字或繪圖等。在本實施方式的繪畫對象體11 上,寫有地點IlOa的用戶描寫的繪畫圖像即繪畫文字1130,同時,還顯示了地點IlOb的用戶繪制的繪畫圖像即文字1132。本實施方式用投影機作為顯示裝置。該顯示裝置11 用于顯示需要表示在繪畫對象體11 上的背景圖像或從地點IlOb收到的地點IlOb的繪畫圖像。如圖1所示,地點 IlOb的繪畫文字1132被顯示到地點IlOa的繪畫對象體11 上。背景圖像是指在寫入繪畫文字1130或1132等時用于作為寫入對象體的背景來顯示的PC畫面等任意畫面。本實施方式利用繪畫對象體11 和顯示裝置114a來顯示圖像,除此之外,還可以用液晶顯示器或等離子顯示器等顯示裝置取而代之。此時,需要在顯示裝置上設(shè)置透射型薄膜或面板等,用戶也可以在該薄膜等上描寫文字等。攝影裝置116a用于拍攝繪畫對象體11 上描寫的繪畫圖像或者顯示圖像以及背景圖像,本實施方式采用數(shù)碼照像機、WEB相機等攝影裝置。還可以采用能夠進行動畫攝影的數(shù)碼攝像機作為攝影裝置,拍攝的動畫圖像可以作為顯示圖像。在本實施方式中,當繪畫圖像共有裝置118a收到背景圖像供給裝置122提供的背景圖像時,或者在收到地點IlOb 發(fā)送的繪畫圖像時,攝影裝置116a按照繪畫圖像共有裝置118a的指示對繪畫對象體11 進行拍攝。繪畫圖像共有裝置118a能夠從本地點即地點IlOa的繪畫圖像對象體11 的攝影圖像中抽取繪畫圖像或背景圖像,將其送往其他地點即地點110b,而且還能夠從地點 IlOb接收繪畫圖像并將該繪畫圖像顯示到繪畫對象體11 上,從而在多個地點之間共有繪畫圖像。繪畫圖像共有裝置118a將從地點IlOb收到的背景圖像以及繪畫圖像合成后顯示在繪畫對象體11 上。本實施方式中的繪畫圖像共有裝置118a采用筆記本式或臺式等電腦。本實施方式的繪畫圖像共有系統(tǒng)100中的繪畫圖像共有裝置能夠以兩種動作模態(tài)動作,其中一種為提供背景圖像的模態(tài)即背景圖像供給模態(tài),另一模態(tài)為使用被提供的背景圖像的模態(tài)即背景圖像接收模態(tài)。處于背景圖像供給模態(tài)的繪畫圖像共有裝置將背景圖像供給裝置122提供的背景圖像作為本地點的顯示圖像來顯示,同時還向其他地點的繪畫圖像共有裝置提供該背景圖像。另一方面,處于背景圖像接收模態(tài)的繪畫圖像共有裝置合成并顯示來自其他地點的繪畫圖像共有裝置的背景圖像以及繪畫圖像。本實施方式中的繪畫圖像共有裝置118a以收到背景圖像供給裝置122發(fā)出的需要顯示背景圖像以及/或者繪畫圖像的要求作為觸發(fā)點,來使得背景圖像供給模態(tài)動作。另一方面,繪畫圖像共有裝置118b以收到其他背景圖像供給裝置122發(fā)出的需要顯示背景圖像以及/或者繪畫圖像的要求作為觸發(fā)點,來使得背景圖像供給模態(tài)動作。繪畫圖像共有裝置118a中搭載PENTIUM(登錄商標)處理器或互換處理器,在 WINDOWS (登錄商標)系列、MAC(登錄商標)OS、UNIX(登錄商標)、LINUX(登錄商標)等操作系統(tǒng)的管理下,執(zhí)行以匯編語言、C、C++、Java (登錄商標)、Java Script、PERL、RUBY、 PYTHON等程序語言編制的本實施方式的程序。繪畫圖像共有裝置118a中包括RAM,用于提供執(zhí)行程序的執(zhí)行空間,還包括硬磁盤裝置(HDD),用于持續(xù)保存程序或數(shù)據(jù)等。通過該程序的執(zhí)行,該信息處理裝置上實現(xiàn)本實施方式的各種功能。進而,繪畫圖像共有裝置118a 具有顯示裝置IHa以及攝影裝置116a等周圍設(shè)施,或者具有連接網(wǎng)絡(luò)120的接口,通過該接口與周圍設(shè)施或其他地點IlOb的繪畫圖像共有裝置118b進行數(shù)據(jù)通信,如收發(fā)繪畫圖像的信息的等。背景圖像供給裝置122向繪畫圖像共有裝置118a提供需要顯示在繪畫對象體 11 上的背景圖像。背景圖像供給裝置122內(nèi)藏于繪畫圖像共有裝置118a之中,或者在提出需要顯示背景圖像要求的同時向繪畫圖像共有裝置118a提供保存在與該背景圖像供給裝置122相連接的HDD等存儲狀裝置中的背景圖像。在圖1所示的實施方式中,背景圖像供給裝置122通過LAN與繪畫圖像共有裝置相連接,通過該LAN提供背景圖像。本實施方式中的繪畫圖像共有裝置118a采用筆記本式或臺式等電腦。除此之外,還可以采用通過 LAN、WAN或英特網(wǎng)等網(wǎng)絡(luò)與繪畫圖像共有裝置118a相連的數(shù)據(jù)服務(wù)器。進而,還可以使用保存在繪畫圖像共有裝置118a的HDD中的背景圖像,而不使用背景圖像供給裝置提供的背景圖像。本實施方式的各種功能通過上述程序語言等匯編的可在裝置中實行的程序得以實現(xiàn),本發(fā)明的程序可裝入硬磁盤裝置、⑶_R0M、M0、軟磁盤、EEPR0M、EPR0M等可讀記錄介質(zhì)中出售、或者以其他裝置可讀的格式通過網(wǎng)絡(luò)傳送。在本實施方式中,繪畫圖像共有系統(tǒng)利用投影裝置和攝影裝置,但是本發(fā)明并不受此限制。圖2顯示本實施方式的繪畫圖像共有裝置118a的功能結(jié)構(gòu)200。該繪畫圖像共有裝置118a包括收信部210、判斷部212、圖像檢測部214、背景圖像緩沖部216、繪畫圖像緩沖部220、以及存儲部236。收信部210是接收背景圖像供給裝置122或其他地點的繪畫圖像供給裝置118b 發(fā)送的各種要求或圖像數(shù)據(jù)的功能部。該收信部210具體接收背景圖像供給裝置122或處于背景圖像供給模態(tài)的繪畫圖像共有裝置發(fā)送的背景圖像。另外,收信部210還接收其他地點的繪畫圖像共有裝置發(fā)送的繪畫圖像。收信部210收到這些要求后通知判斷部212。 在本實施方式中,收信部210接受背景圖像供給裝置122提供的背景圖像,此外,收信部210 還可以取得繪畫圖像共有裝置118a中的HDD等存儲裝置中保存的背景圖像。收信部210在建立與其他地點的繪畫圖像共有裝置之間的通信時,還接收其他地點的繪畫圖像共有裝置的簡介信息。在收到該簡介信息后,收信部210將該簡介信息保存到存儲部236中。存儲部236中預(yù)先存放本地點的繪畫圖像共有裝置的簡介信息。簡介信息中包含有關(guān)于繪畫圖像共有裝置的功能或處理能力以及性能的信息。具體包含表示繪畫圖像共有裝置是否能夠進行繪畫圖像與背景圖像的合成的信息,或者該關(guān)于合成處理的處理時間等等。判斷部212根據(jù)背景圖像供給裝置122或其從他地點的繪畫圖像供給裝置發(fā)送的各種要求實行處理。這些要求中包含將背景圖像作為顯示圖像顯示的要求、或者顯示繪畫圖像的要求、或者顯示背景圖像和繪畫圖像的合成圖像的要求、以及再次發(fā)送背景圖像的要求等等,同時包含用于識別發(fā)送要求的裝置的信息。當判斷部212收到背景圖像供給裝置發(fā)送的背景圖像顯示要求時,繪畫圖像共有裝置118a以背景圖像供給模態(tài)動作,使得下述的圖像檢測部214或圖像加工部218等實行背景圖像的圖像檢測或?qū)⒈尘皥D像送往其他地點。該背景圖像與該顯示要求一起收到。當判斷部212收到其他地點的繪畫圖像共有裝置發(fā)送的背景圖像的顯示要求時, 繪畫圖像共有裝置118a以背景圖像接受模態(tài)動作,將與該要求一起收到的背景圖像保存到背景圖像緩沖部216,讓圖像加工部218合成該背景圖像和其他地點的繪畫圖像,圖像供給部222在顯示裝置11 上顯示。當判斷部210在背景圖像供給模態(tài)和背景圖像接受模態(tài)的雙方均收到繪畫圖像的顯示要求時,將該繪畫圖像保存到如RAM之類的暫時保存存儲部即繪畫圖像緩沖部220。 本實施方式的繪畫圖像緩沖部220中僅保存最新的繪畫圖像。當判斷部210收到其他地點的繪畫圖像共有裝置發(fā)送的背景圖像和繪畫圖像的合成圖像時,讓下述圖像供給部222在顯示裝置11 上顯示該合成圖像。進而,當判斷部212收到其他地點的繪畫圖像共有裝置發(fā)送的再次發(fā)送背景圖像要求時,讓下述送信部234發(fā)送保存在背景圖像緩沖部216中的背景圖像。圖像檢測部214是檢測收信部210收到的背景圖像與背景圖像緩沖部216中保存的背景圖像是否相同的檢測部。繪畫圖像緩沖部220是RAM之類能夠暫時保存存儲部,是用于保存背景圖型的數(shù)據(jù)緩沖部。背景圖像緩沖部216中將作為顯示圖像正處于顯示之中的背景圖像、與該背景圖像的背景圖像識別信息一起保存。本實施方式中,以背景圖像供給模態(tài)動作的繪畫圖像共有裝置的背景圖像緩沖部216中僅保存最新的背景圖像。而以背景圖像接受模態(tài)動作的繪畫圖像共有裝置的背景圖像緩沖部216中則保存所有來自其他地點的背景圖像。在繪畫圖像共有裝置118a以背景圖像供給模態(tài)動作時,圖像檢測部214經(jīng)由判斷部212從背景圖像供給裝置122收到背景圖像顯示要求后,比較從背景圖像供給裝置122 收到的背景圖像和保存在背景圖像緩沖部216中的正處于顯示之中的背景圖像,檢測這些圖像是否相同。本實施方式的圖像檢測部214使用模板匹配或特征點抽取等方法來判斷這些圖像的相同性。如果這些圖像不同,則圖像檢測部214將從背景圖像供給裝置122收到的背景圖像保存到背景圖像緩沖部216,并向下述送信部234發(fā)送將該背景圖像送往其他地點的要求。而在繪畫圖像共有裝置118b以接收圖像供給模態(tài)動作時,圖像檢測部214經(jīng)由判斷部212從其他地點的背景圖像供給裝置122收到背景圖像顯示要求后,將受到的背景圖像保存到背景圖像緩沖部216中。繪畫圖像共有裝置118a包括圖像加工部218、圖像供給部222、以及顯示圖像緩沖部 224。圖像加工部218是對背景圖像供給裝置122提供的背景圖像以及從其他地點收到的繪畫圖像施加加工處理、生成顯示圖像的功能部。圖像加工部218取得繪畫圖像緩沖部 220中保存的繪畫圖像,并取得背景圖像緩沖部216中保存的背景圖像,進而合成繪畫圖像和背景圖像,生成顯示圖像。本實施方式采用以掩膜處理來取代背景或目標對象合成方法作為圖像合成方法。此外,還可以采用其他合成方法,如將以一定比率合成兩個需要合成的圖像的像素值的α混合值、或者需要合成的兩個圖像像素中的最小輝度值作為合成圖像的像素值。進而,還可以采用以下的合成方法,即對繪畫圖像施加加粗處理,對該圖像的輝度值為一定值以下的區(qū)域使用繪畫圖像的像素值作為輝度值,而對其他區(qū)域的輝度值使用背景圖像的像素值作為輝度值。圖像加工部218可以在上述加工處理中對需要顯示的背景圖像施加圖像補償處理。本實施方式中實行的圖像補償處理為背景圖像的縮放、以及更改背景圖像亮度。
進而,圖像加工部218還可以對顯示圖像施加縮放處理,以使得該顯示圖像的大小能夠適合于需要與繪畫圖像共有系統(tǒng)100中的其他地點共有的區(qū)域即用于顯示到繪畫對象體上的共有區(qū)域的大小(以下為共有區(qū)域大小)。圖像加工部218中的下述圖像取得部2 讀取保存在RAM等存儲裝置中的共有區(qū)域大小,并在判斷顯示圖像與共有區(qū)域大小不同時,計算顯示圖像和共有區(qū)域的比率,用該比率縮放該顯示圖像。進而,圖像加工部218在結(jié)束圖像加工處理后,將顯示圖像保存到顯示圖像緩沖部224,并像圖像供給部222發(fā)送顯示圖像的顯示要求。該顯示圖像緩沖部2M為能夠暫時保存顯示圖像的RAM之類的存儲裝置構(gòu)成的數(shù)據(jù)緩沖部。除了上述圖像補償處理以外,圖像加工部218還可以在繪畫圖像共有裝置以背景圖像接收模態(tài)動作時,判斷收到的關(guān)于其他地點的繪畫圖像的背景圖像是否被保存到背景圖像緩沖部216中。此時,圖像檢測部214將從其他地點收到的背景圖像與該背景圖像識別信息一起保存到背景圖像緩沖部216中,圖像加工部218使用該繪畫圖像的背景圖像識別信息,來判斷收到的有關(guān)繪畫圖像的背景圖像是否已被保存到背景圖像緩沖部216中。 如果判斷該背景圖像未被保存到背景圖像緩沖部216中,則圖像加工部218將用于其他地點的繪畫圖像共有裝置的背景圖像送往送信部234。此時,以背景圖像供給模態(tài)動作的繪畫圖像共有裝置收到背景圖像要求后,從背景圖像緩沖部216取出背景圖像再次發(fā)送。這樣,在背景圖像緩沖部中發(fā)生背景圖像寫入錯誤或發(fā)生網(wǎng)絡(luò)故障等時背景圖像緩沖部中未能適當保存背景圖像的情況下,也能夠保證與其他點具有統(tǒng)一的背景圖像。圖像供給部222是使得從其他地點收到的繪畫圖像顯示到繪畫對象體上的功能部。本實施方式的圖像供給部222向顯示裝置IHa提供繪畫圖像,并使得其顯示到繪畫對象體11 上。在讓顯示裝置11 顯示顯示圖像后,實行待機處理,使得繪畫圖像共有裝置 118a的處理等待一定時間。圖像供給部222從圖像加工部218收到顯示圖像顯示要求后, 取得顯示圖像緩沖部224中保存的顯示圖像,并將該顯示圖像送往顯示裝置IHa顯示。而后,圖像供給部222實行待機處理,像圖像取得部2 發(fā)送拍攝顯示圖像的要求。本實施方式中的待機處理的待機時間可以取為0 1000ms。這樣能夠確保由顯示裝置顯示到繪畫對象體上的顯示圖像的穩(wěn)定時間,提高通過拍攝繪畫對象體而得到的攝影圖像的質(zhì)量。圖像供給部222使得顯示裝置IHa顯示標記圖像,該標識圖像如圖1所示,為具有用于規(guī)定共有區(qū)域的標記1120、1122、1124、11沈的圖像數(shù)據(jù)。該標記圖像可預(yù)先保存在繪畫圖像共有裝置118a中的HDD等非易失性存儲器中,圖像供給部222從該非易失性存儲器讀取標記圖像,并將其顯示到顯示裝置IHa上。本實施方式的圖像供給部222在繪畫圖像共有裝置118a啟動時將標記圖像顯示到繪畫對象體11 上,除此之外,本發(fā)明還可以根據(jù)用戶指示顯示標記圖像,或者定期顯示標記圖像。本實施方式用青色作為標記圖像中的標記的顏色,除此之外,還可以用其他顏色作為標記顏色。另外,本實施方式的標記形狀為矩形,除此之外,還可以采用三角形或四分之一圓形等其他形狀。進而,本實施方式將標記設(shè)置在共有區(qū)域的各個角上來限定共有區(qū)域,除此方法之外,還可以在共有區(qū)域的其他邊界區(qū)域,如在共有區(qū)域邊界線上各個角之間的中點等上設(shè)置標記。進而,繪畫圖像共有裝置118a還包括圖像取得部226、攝影圖像緩沖部228、差分圖像生成部230、差分圖像緩沖部232、以及送信部234。圖象取得部2 是取得顯示在繪畫對象體上共有區(qū)域中的圖像的功能部,該圖像是需要與繪畫圖像共有系統(tǒng)中的其他地點共有的圖像。本實施方式的圖像取得部2 讓攝影裝置116a拍攝顯示在繪畫對象體11 上的繪畫圖像以及顯示圖像,并取得該攝影圖像。 圖像取得部2 對攝影裝置116a拍攝的攝影圖像施加透視投影轉(zhuǎn)換后實行圖像補償,如梯形失真補償或縱橫比補償以及轉(zhuǎn)動補償?shù)?。圖象取得部2 利用標記圖像來確定共有區(qū)域,并計算共有區(qū)域的大小。圖像取得部226收到來自下述圖像供給部222的有關(guān)標記圖像顯示結(jié)束的通知后,讓攝影裝置 116a拍攝繪畫對象體11 ,并從攝影裝置116a中取得攝影圖像,對該攝影圖像施加透視投影轉(zhuǎn)換。圖像取得部2 檢測攝影圖像中包含的各個標記的坐標值,將其作為共有區(qū)域的角點的坐標,以確定共有區(qū)域。而后,圖像取得部2 根據(jù)該共有區(qū)域的角點坐標值計算共有區(qū)域大小,并將該共有區(qū)域的角點坐標值以及該共有區(qū)域大小存入RAM或HDD等存儲裝置。此外,圖像取得部2 還可以不利用標記圖像來確定共有區(qū)域且計算該共有區(qū)域大小。此時,圖像供給部214讓顯示裝置顯示初始期存放在顯示圖像緩沖器220中的白紙圖像,圖像取得部2 利用從攝影裝置116a取得的顯示裝置的照射區(qū)域與該區(qū)域以外的區(qū)域之間的輝度差,來計算共有區(qū)域的角點坐標值。而后,圖像取得部2 根據(jù)該共有區(qū)域的角點坐標值計算共有區(qū)域大小。圖像取得部2 從圖像加工部218收到顯示圖像的顯示要求后,讓攝影裝置116a 拍攝繪畫對象體11 ,并從攝影裝置116a中取得攝影圖像。圖像取得部2 對攝影圖像施加透視投影轉(zhuǎn)換后,利用存放在存儲裝置中的共有區(qū)域的角點坐標值或共有區(qū)域大小,在攝影圖像上切割共有區(qū)域,并將其存放到攝影圖像緩沖部2 中,該攝影圖像緩沖部2 為如RAM等可以進行暫時保存的存儲裝置構(gòu)成的實裝數(shù)據(jù)緩沖部。而后,圖像取得部226向差分圖像生成部230發(fā)送差分圖像生成要求。本實施方式中,圖像取得部2 實行攝影圖像的透視投影轉(zhuǎn)換,此外,本發(fā)明還可以根據(jù)圖像取得部226的指示,用透視投影轉(zhuǎn)換電路對攝影圖像施加透視投影轉(zhuǎn)換。差分圖像生成部230是實行顯示圖像與攝影圖像之間的差分圖像生成處理的功能部。差分圖像生成部230從圖像供給部2 收到差分圖像生成要求后,從顯示圖向緩沖器224中取得顯示圖像,并用該顯示圖像以及存放在攝影圖像緩沖部228中的攝影圖像來實行差分圖像生成處理。在差分圖像生成處理中,差分圖像生成部230利用模塊匹配或特征點抽取以及對應(yīng)設(shè)置來調(diào)整顯示圖向和攝影圖像的位置。在本實施方式的差分圖像生成處理中,差分圖像生成部230利用形態(tài)操作 (morphological operations)運算中的腐蝕(erosion)或平滑過濾,來對從顯示圖像緩沖器224中取得的顯示圖像中的繪畫圖像施加膨脹處理,使該繪畫圖像膨脹。這樣便能夠排除攝影圖像和顯示圖像之間的繪畫圖像位置偏差所帶來的影響。差分圖像生成部230分離被施加了膨脹處理的投影圖像以及攝影圖像的RGB的各色成分(紅、綠、青),并對每一種色成分計算顯示圖像以及攝影圖像的各個像素的平均比率值。在此,平均比率值是指,對象像素的輝度值與對象像素周圍區(qū)域的輝度值的平均值的比率即平均比率乘以背景色彩的輝度值所得到的對象像素的輝度值的中間值。
本實施方式的平均比率值計算處理如下(1)在對象像素(x,y)的周圍,確定大小為mXn(m、n為任意整數(shù))的矩形,(2)利用某種色成分的攝影圖像的積分圖像,計算mXn區(qū)域中的輝度的平均值 AVE,(3)將攝影圖像的背景色彩的輝度值乘以平均比率,例如,繪畫對象體為白板時, 背景色彩的輝度值為20,平均比率即相對于AVE的對象像素的輝度值的比率。當AVE的值大于1時,對象像素的平均比率值與背景色的輝度值相等。背景色的輝度值為用戶預(yù)先任意指定的值。在設(shè)定背景色彩的輝度值時,可以考慮攝影圖像中包含的背景圖像的輝度值。除了上述方式之外,本發(fā)明的差分圖像生成部230還可以利用對象像素的平均差分值來生成差分圖像。在此,平均差分值是指從對象像素的輝度值中減去對象像素周圍區(qū)域的輝度值的平均值而得到的對象像素的輝度值的中間值。平均差分值計算如下(1)在對象像素(x,y)的周圍,確定大小為mXn(m、n為任意整數(shù))的矩形,(2)利用某種色成分的攝影圖像的積分圖像,計算mXn區(qū)域中的輝度的平均值 AVE,(3)從對象像素的輝度值中減去AVE。差分圖像生成部230既可利用攝影圖像的對象像素的平均比率值以及該對象像素對應(yīng)的顯示圖像的輝度值,來計算這些對象像素的差分值,也可利用攝影圖像的對象像素的平均差分值以及該對象像素對應(yīng)的顯示圖像的對象像素的平均差分值,來計算這些對象像素的差分值。差分圖像生成部230按照RGB個各色成分計算包括攝影圖像以及顯示圖像中的所有像素的上述差分值,并合成以該差分值為各色成分的值的像素,生成以RGB顏色構(gòu)成的差分圖像。進而,差分圖像生成部230對該差分圖像施加過濾處理,去除黃色成份。差分圖像生成部230將對象像素背景顏色的輝度值和紅色或綠色的輝度值之間的差分值、與該背景顏色的輝度值和青色的輝度值之間的差分值進行比較,如果青色輝度值的差分值大于紅色或綠色的輝度值的差分值,則將紅色或綠色的輝度值的差分值之中較大一方的值乘以一定數(shù)所得到定數(shù)倍的值,作為青色的輝度值。相反,如果青色輝度值的差分值小于紅色或綠色的輝度值的差分值,則保持該青色的輝度值不變。例如,背景顏色的輝度值為200,紅色的輝度值為190,綠色的輝度值為180,青色的輝度值為140,則這些顏色的輝度值與各種背景顏色的輝度值之間的差分值分別為 10 (紅色輝度值的差分值)、20 (綠色輝度值的差分值)、60(青色輝度值的差分值)。此時, 青色輝度值的差分值大于紅色或綠色的輝度值的差分值,因而將紅色和綠色的輝度值中較大一方的綠色輝度值的差分值00)的定數(shù)倍,如2倍的值00)作為青色輝度值的差分值。 即將青色輝度值的差分值設(shè)為160。本實施方式中使用的定數(shù)為任意數(shù)值,但是如果數(shù)值過大,則不能有效去除黃色成分,因此,優(yōu)選采用1 2的數(shù)值。這樣可去除顯示裝置11 的光源中包含的黃色成份,提高視覺性能。差分圖像生成部230實行上述差分圖像生成處理后,將投影圖像存入數(shù)據(jù)緩沖器 220后,并向送信部234發(fā)送差分圖像送信要求,該差分圖像緩沖部232為如RAM等可以進行暫時保存的存儲裝置構(gòu)成的實裝數(shù)據(jù)緩沖部。
送信部234是將差分圖像生成部230生成的差分圖像即本地點的繪畫圖像和背景圖像供給裝置122提供的背景圖像、以及這些圖像的合成圖像通過網(wǎng)絡(luò)送往其他地點的繪畫圖像共有裝置的功能部。送信部234在向其他地點的繪畫圖像共有裝置發(fā)送時,還同時發(fā)送送信對象即圖像數(shù)據(jù)的顯示要求,如背景圖像的顯示要求、繪畫圖像的顯示要求或者系餓圖像的合成圖像的顯示要求。本實施方式的繪畫圖像共有系統(tǒng)中,送信部234向其他地點的繪畫圖像共有裝置發(fā)送的差分圖像為從本地點的繪畫圖像中去除了他地點的繪畫圖像,因此,能夠避免繪畫圖像重疊所造成的回波(echo)現(xiàn)象,進一步提高顯示圖像的視覺性能。送信部234在僅發(fā)送差分圖像生成部230生成的差分圖像即本地點的繪畫圖像時,可將保存在背景圖像緩沖部216中的有關(guān)該繪畫圖像的繪畫圖像識別信息作為元數(shù)據(jù)附加到該差分圖像上。本實施方式利用如固有的識別數(shù)值、文字、標記、或這些組合構(gòu)成的 ID或時間戳、以及任意名稱等作為背景圖像識別信息。進而,當背景圖像緩沖部216中不存在背景圖像時,送信部234可以向以背景圖像供給模態(tài)動作的其他地點的繪畫圖像共有裝置發(fā)送背景圖像要求。進而,在建立與其他地點的繪畫圖像共有裝置之間的通信時,送信部234可發(fā)送保存在存儲部236中的本地點的繪畫圖像共有裝置的簡介信息。圖3是本實施方式的繪畫圖像共有裝置在以背景圖像供給模態(tài)動作時實行的處理流程圖。以下參考圖3說明以背景圖像供給模態(tài)動作的繪畫圖像共有裝置118a實行的處理。圖3所示的流程從步驟S300中繪畫圖像共有裝置118a的收信部210收到來自背景圖像供給裝置122或其他地點的繪畫圖像共有裝置的一定要求后開始處理。在步驟S301 中判斷部212判斷要求種類。在步驟S301的判斷中,當判斷要求種類為背景圖像的顯示要求時,進入步驟 S302。在步驟S302中,圖像檢測部214判斷背景圖像緩沖部216中是否存在背景圖像。如果步驟S302的判斷為沒有背景圖像,則處理進入步驟S304。而如果步驟S302的判斷為已有背景圖像,則處理進入步驟S303。在步驟S303中,圖像檢測部214判斷收到的背景圖像是否與背景圖像緩沖部216 中保存的背景圖像一致。如果判斷一致,則進入步驟S308。如果判斷背景圖像不一致,則處理進入步驟S304。在步驟S304中,圖像檢測部214將收到的背景圖像保存到背景圖像緩沖器中,而后在步驟S305中,圖像檢測部214將背景圖像送信旗設(shè)為表示需要發(fā)送背景圖像(ON)的表示值。該背景圖像送信旗為表示應(yīng)不應(yīng)該發(fā)送背景圖像的旗。本實施方式在圖3的處理開始時對背景圖像送信旗進行初始化設(shè)定,將其設(shè)為初始值(OFF)。另外,在步驟S301的判斷中,當判斷要求種類為其他地點的繪畫圖像顯示要求時,處理進入S306。在步驟S306中,判斷部212將該繪畫圖像保存到繪畫圖像緩沖部216 中。進而,在步驟S301的判斷中,當判斷要求種類為要求其他地點再次發(fā)送背景圖像時,處理進入S307。在步驟S307中,判斷部212將背景圖像送信旗設(shè)為表示需要發(fā)送背景圖像(ON)的表示值。
在步驟S308中,圖像加工部218對保存在背景圖像緩沖部216中的背景圖像以及繪畫圖像緩沖部220中的繪畫圖像施加加工處理并生成顯示圖像。在步驟S309中,圖像供給部222向顯示裝置發(fā)送顯示圖像并使其顯示,在步驟S310中實行待機處理。在步驟S311中,圖像取得部2 讓攝影裝置116a拍攝繪畫對象體11 并取得攝影圖像,在步驟S312中對攝影圖像施加圖像補償并切割共有區(qū)域,而后將攝影圖像和共有區(qū)域保存到攝影圖像緩沖部228。在步驟S313中,差分圖像生成部230實行下述中將參考圖7詳細說明的差分圖像生成處理。在步驟S314中,送信部234實行下述將參考圖4詳細說明的圖像送信處理,向其他地點的繪畫圖像共有裝置發(fā)送背景圖像、差分圖像或這些圖像的合成圖像,而后在步驟S315結(jié)束處理。圖4是圖3所示的步驟S312中的送信部234實行圖像送信處理的流程圖。圖4 的處理從步驟S400開始,在步驟S401中,送信部234參考存儲部236中保存的其他地點的簡介信息,判斷圖像數(shù)據(jù)將要被送往的其他地點的繪畫圖像共有裝置是否具有圖像數(shù)據(jù)合成功能。當判斷其他地點的繪畫圖像共有裝置具有合成功能時(是),處理進入步驟S402。 而當判斷其他地點的繪畫圖像共有裝置不具有合成功能時(否),處理進入步驟S403。在步驟S402中,送行部234判斷圖像數(shù)據(jù)將要被送往的其他地點的繪畫圖像共有裝置的處理能力是否低于本地點的繪畫圖像共有裝置的處理能力。本實施方式通過比較繪畫圖像共有裝置在處理背景圖像和繪畫圖像的合成時所要的時間來判斷處理能力的高低。當判斷其他地點的繪畫圖像共有裝置的處理能力低于本地點的繪畫圖像共有裝置的處理能力(是)時,處理進入步驟S403。而當判斷其他地點的繪畫圖像共有裝置的處理能力在本地點的繪畫圖像共有裝置的處理能力以上時(否),則處理進入步驟S404。在步驟S403中,送信部234不但從背景圖像緩沖部216中區(qū)的背景圖像,同時還從差分圖像緩沖部232中取得差分圖像。而后,合成這些圖像,并將合成圖像與該圖像的顯示要求一起送往其他地點的繪畫圖像共有裝置,而后到達步驟S410結(jié)束處理。在步驟S404中,送信部234判斷背景圖像送信旗是否為需要發(fā)送背景圖像值 (ON)。當背景圖像送信旗為ON時(是),處理進入步驟S405。在步驟S405中,送信部234 取得來自差分圖像緩沖部232的差分圖像,并將背景圖像緩沖部216中保存的背景圖像的背景圖像識別信息作為元數(shù)據(jù)附加到該差分圖像上。在步驟S406中,送信部234不合成本地點的繪畫圖像即該差分圖像和背景圖像,而將這些圖像與這些圖像的顯示要求一起送往其他地點的繪畫圖像共有裝置。在步驟S407中,送信部234對背景圖像送信旗初始化,而后到達步驟S410結(jié)束處理。當背景圖像送信旗不是ON時(否),處理進入步驟S408。在步驟S408中,送信部 234從差分圖像緩沖部232中取得差分圖像,并將背景圖像緩沖部216中保存的背景圖像的背景圖像識別信息作為元數(shù)據(jù)附加到該差分圖像上。在步驟S409中,送信部234將該差分圖像作為本地點的繪畫圖像,與該繪畫圖像的顯示要求一起送往其他地點的繪畫圖像共有裝置,而后到達步驟S410結(jié)束處理。圖5是一例以背景圖像接收模態(tài)動作的本實施方式的繪畫圖像共有裝置實行的處理的流程圖。以下,參考圖5說明具有圖像合成功能的繪畫圖像共有裝置118b實行的處理。
圖5的處理從繪畫圖像共有裝置118b從其他地點的繪畫圖像共有裝置118a收到各種要求后的步驟S500開始。在步驟S501中判斷部212判斷收到的要求種類。在步驟S501的判斷中,當判斷要求種類為背景圖像以及顯示圖像的顯示要求時, 進入步驟S502。在步驟S502中,判斷部212將與顯示要求一起收到的背景圖像保存到背景圖像緩沖部216中。在步驟S503中,圖像加工部218對與該顯示要求一起收到的繪畫圖像以及保存在背景圖像緩沖部216中的背景圖像施加加工處理,生成顯示圖像。在步驟S504 中,圖像供給部222將該顯示圖像送往顯示裝置114b,并使該顯示裝置114b將該顯示圖像顯示到繪畫對象體112b上。而如果在步驟S501的判斷中判斷要求種類為繪畫圖像的顯示要求時,進入步驟 S505。在步驟S505中,判斷部212判斷背景圖像緩沖部216中是否存在背景圖像。如果判斷存在背景圖像(是),則進入處理S506。在步驟S506中圖像加工部218對與該顯示要求一起收到的繪畫圖像、以及保存在背景圖像緩沖部216中與該繪畫圖像有關(guān)的背景圖像施加加工處理,生成顯示圖像。本實施方式中,圖像加工部218將收到的作為繪畫圖像的元數(shù)據(jù)付加的背景圖像識別信息與背景圖像緩沖部216中保存的背景圖像的背景圖像識別信息進行對照,以此確定背景圖像識別信息表示為一致的背景圖像即為與繪畫圖像有關(guān)且需要施加加工處理的背景圖像。而后,在步驟504中,圖像供給部222將步驟S506中生成的顯示圖向送往顯示裝置114b,使該顯示裝置114b將顯示圖像顯示到繪畫對象體11 上。另一方面,當步驟S505中判斷背景圖像緩沖部216中不存在背景圖像(否),則進入處理S507。在步驟S507中,送信部234對發(fā)送繪畫圖像顯示要求的其他地點的繪畫圖像共有裝置發(fā)送背景圖像再次發(fā)送的要求后,到達步驟S514結(jié)束處理。本實施方式在背景圖像的送信故障或保存故障等造成背景圖像緩沖部中不存在背景圖像的情況下,也能夠再次從提供背景圖像的其他地點的繪畫圖像共有裝置中取得背景圖像。進而,在步驟S501的判斷中判斷為要求種類為繪畫圖像和背景圖像的合成圖像的顯示要求時,進入步驟S508。在步驟S508中,圖像供給部222將與顯示要求一起收到的合成圖像作為顯示圖像送往顯示裝置114b,使得顯示裝置11 在繪畫對象體11 上顯示該合成圖像。在步驟S509中,圖像供給部222實行待機處理。在步驟S510中,圖像取得部2 讓攝影裝置116b拍攝繪畫對象體112a,并取得攝影圖像,而后在步驟S511中對攝影圖像施加圖像補償,并切割共有區(qū)域,而后將該攝影圖像和共有區(qū)域保存到攝影圖像緩沖部228 中。在步驟S512中,差分圖像生成部230實行將在以下參考圖7說明的差分圖像生成處理。 在步驟S513中,送信部234將步驟S512中生成的差分圖像作為本地點的繪畫圖像,與繪畫圖像顯示要求一起送往其他地點的繪畫圖像共有裝置。而后到達步驟S514結(jié)束處理。圖6是本實施方式的另一例以背景圖像接受模態(tài)動作的繪畫圖像共有裝置實行的處理流程圖。以下參考圖6說明未安裝圖像合成功能的繪畫圖像共有裝置118b實行的處理。圖6的處理從繪畫圖像共有裝置118b的收信部210從其他地點的繪畫圖像共有裝置收到背景圖像和繪畫圖像的合成圖像即圖像數(shù)據(jù)的顯示要求開始步驟S600。在步驟S601中圖像供給部222將收到的圖像數(shù)據(jù)送往顯示裝置114b,并使得顯示裝置114b將該圖像數(shù)據(jù)顯示到繪畫對象體112b上后,步驟S602實行待機處理。而后,進行步驟S603 S606,到達步驟S607結(jié)束處理。步驟S603 S606與圖5所示的步驟S510 S513相同。圖4是差分圖像生成部230實行差分圖像生成處理的流程圖。圖4所示的處理從步驟S700開始,當差分圖像生成部230從圖像取得部220收到差分圖像的生成要求時開始實行差分圖像生成處理。在步驟S701中,差分圖像生成部230取得存放在顯示圖像緩沖器 2 中的顯示圖像,并對該顯示圖像施加膨脹處理。在步驟S702中,差分圖像生成部230取得保存在攝影圖像緩沖部228中的攝影圖像,并按照RGB各色成分對該攝影圖像以及經(jīng)過膨脹處理后的顯示圖像進行分離。在步驟S703中,差分圖像生成部230生成RGB各色成分分離后的攝影圖像的積分圖像。在步驟S704中,差分圖像生成部230對攝影圖像的對象象素實行平均比率值計算處理或平均差分值計算處理。關(guān)于平均比率計算處理以及平均差分值計算處理將在以下參考圖8和圖9詳細說明。在步驟S705中,差分圖像生成部230對對象象素實行差分計算處理,算出差分圖像各色成分的輝度值。關(guān)于差分計算處理將參考圖10詳細說明。差分圖像生成部230對所有象素實行步驟S704 S705的處理,并對所有色成分(R、G、B)實行步驟 S703 S705的處理。步驟S706中,差分圖像生成部230對所有象素進行合成,合成為以步驟S705中計算的輝度值作為RGB色的各色成分的值的象素,生成以RGB色構(gòu)成的差分圖像。在步驟 S707中,差分圖像生成部230對該差分圖像施加過濾處理,去除黃色成分,而后保存到差分圖像緩沖部232,之后在步驟S708處理結(jié)束。圖8是本實施方式的差分圖像生成部230實行的平均比率計算處理的流程圖。圖 5的處理從步驟S800開始,在步驟S801中差分圖像生成部230確定以對象象素為中心且大小為mXη的矩形區(qū)域。在步驟S802中,差分圖像生成部230用積分圖像計算在步驟S801中確定的矩形區(qū)域中的輝度值的平均值。在步驟S803中,根據(jù)背景顏色輝度值、對象象素的輝度值、以及矩形區(qū)域內(nèi)的輝度值的平均值計算對象象素的平均比率值,而后在步驟S804 結(jié)束處理。圖9是另一實施方式的差分圖像生成部230實行的平均差分值計算處理的流程圖。圖9從步驟S600開始,在步驟S901中差分圖像生成部230確定以對象象素為中心且大小為mXn的矩形區(qū)域。在步驟S9602中,差分圖像生成部230用積分圖像計算在步驟S901 中確定的矩形區(qū)域中的輝度值的平均值。在步驟S903中,從對象象素的輝度值中減去矩形區(qū)域內(nèi)的輝度值的平均值,算出對象象素的平均差分值,而后在步驟S904結(jié)束處理。圖10是本實施方式的差分圖像生成部230實行的差分計算處理的流程圖。圖10 從步驟S1000開始,在步驟S701中差分圖像生成部230計算攝影圖像的對象象素與投影圖像的對象象素之間的差分值。在步驟S1002中,差分圖像生成部230判斷步驟S1001中算出的差分值是否大于繪畫閥值,如果差分值大于繪畫閥值,則進入步驟S1003。繪畫閥值可設(shè)定為任意值,本實施方式優(yōu)選將繪畫閥值適當?shù)卦O(shè)為_5。在步驟S1003中差分圖像生成部230設(shè)差分值為0。這樣可以補償差分圖像中對象象素的輝度值,而且能夠在攝影圖像比投影圖像更為明亮時,排除繪畫對象體拍攝時的反射光或照明器具等的影響。進而,差分值較小時可判斷為出自噪音影響,因此還能夠去除差分圖像上的噪音。另一方面,如果步驟S1002的判斷中,差分圖像生成部230判斷差分值在繪畫閥值以下,則處理進入步驟步驟S1004。在步驟S1004中,差分圖像生成部230實行補償處理,將差分值乘以常數(shù)以提高色彩強度。本實施方式將該常數(shù)設(shè)為1 2。這樣能夠排除攝影引起的攝影圖像的色彩強度減少的影響,提高差分圖像的視覺性能。在步驟S1005中,差分圖像生成部230在差分值上加上背景色的輝度值,而后在步驟S1006結(jié)束處理。本發(fā)明不局限于上述說明了的實施方式,只要具有本發(fā)明的作用和效果,包括本技術(shù)領(lǐng)域的人員能夠想到的其他實施方式、或上述實施方式的改良、增加、更改等任何實施方式,均屬于本發(fā)明范疇。
權(quán)利要求
1.一種用于共有繪畫圖像的繪畫圖像共有裝置,其中包括圖像加工處理部,其合成需要顯示在繪畫對象體上的背景圖像和從其他地點收到的繪畫圖像;差分圖像生成部,用于生成需要與其他地點共有的差分圖像,該差分圖像為所述加工處理部合成的圖像與本地點的繪畫對象體上的圖像之間的差分;以及,送信部,其向其他地點發(fā)送所述差分圖像。
2.根據(jù)權(quán)利要求1所述的繪畫圖像共有裝置,其中進一步包括收信部,用于接收需要顯示在繪畫對象體上的背景圖像以及其他地點的繪畫圖像;圖像供給部,使得所述圖像加工處理部合成的圖像顯示到所述繪畫對象體上;以及,圖像取得部,用于取得所述本地點的繪畫對象體上的圖像,所述送信部將所述差分圖像以及所述背景圖像送往所述其他地點的繪畫圖像共有裝置。
3.根據(jù)權(quán)利要求1或2所述的繪畫圖像共有裝置,其中進一步包括收信部,用于接收需要顯示在繪畫對象體上的背景圖像以及其他地點的繪畫圖像;圖像供給部,使得所述圖像加工處理部合成的圖像顯示到所述繪畫對象體上;以及,圖像取得部,用于取得所述本地點的繪畫對象體上的圖像,所述圖像加工部合成所述差分圖像和所述背景圖像,所述送信部將所述差分圖像和所述背景圖像的合成的圖像送往所述其他地點的繪畫圖像共有裝置。
4.根據(jù)權(quán)利要求3所述的繪畫圖像共有裝置,其中,所述送信部參考所述其他地點的繪畫圖像共有裝置的簡介信息,在所述其他地點的繪畫圖像共有裝置具備合成圖像的功能時,發(fā)送所述差分圖像以及所述背景圖像,而在所述其他地點的繪畫圖像共有裝置不具備合成圖像的功能時,則發(fā)送所述差分圖像和所述背景圖像的合成圖像。
5.根據(jù)權(quán)利要求3所述的繪畫圖像共有裝置,其中,所述送信部參考所述本地點的繪畫圖像共有裝置以及所述其他地點的繪畫圖像共有裝置的簡介信息,當所述其他地點的繪畫圖像共有裝置的處理能力低于所述本地點的繪畫圖像共有裝置的處理能力時,發(fā)送所述差分圖像以及所述背景圖像的合成圖像,而當所述其他地點的繪畫圖像共有裝置的處理能力在所述本地點的繪畫圖像共有裝置的處理能力以上時,則發(fā)送所述差分圖像和所述背景圖像。
6.根據(jù)權(quán)利要求2所述的繪畫圖像共有裝置,其中,所述收信部將所述背景圖像保存到背景圖像存儲部中,并將從其他地點收到的繪畫圖像保存到繪畫圖像存儲部。
7.根據(jù)權(quán)利要求2所述的繪畫圖像共有裝置,其中,所述圖像供給部將所述加工處理部合成的圖像送往顯示裝置并使得該合成的圖像顯示到繪畫對象體上,所述圖像取得部使得所述攝影裝置拍攝繪畫對象體的圖像,取得需要與其它地點共有的共有區(qū)域的圖像。
8.根據(jù)權(quán)利要求7所述的繪畫圖像共有裝置,其中,所述圖像供給部使得所述顯示裝置在繪畫對象體上顯示用于規(guī)定所述共有區(qū)域的標記圖像,所述圖像取得部使得攝影裝置拍攝該顯示裝置進行顯示的繪畫對象體,并取得該攝影裝置拍攝的攝影圖像,從該攝影圖像中包含的標記圖像上的標記坐標來確定所述共有區(qū)域。
9.根據(jù)權(quán)利要求7所述的繪畫圖像共有裝置,其中,所述圖像供給部使得所述顯示裝置在繪畫對象體上顯示白紙圖像,所述圖像取得部使得攝影裝置拍攝該顯示裝置進行顯示的繪畫對象體,并取得該攝影裝置拍攝的攝影圖像,利用該攝影圖像中包含的白紙圖像的區(qū)域與該白紙圖像以外的區(qū)域之間的輝度差來確定所述共有區(qū)域。
10.根據(jù)權(quán)利要求7所述的繪畫圖像共有裝置,其中,所述圖像取得部對攝影圖像施加透視投影轉(zhuǎn)換。
11.根據(jù)權(quán)利要求7所述的繪畫圖像共有裝置,其中,所述差分圖像生成部對顯示圖像施加膨脹處理并生成差分圖像。
12.根據(jù)權(quán)利要求7所述的繪畫圖像共有裝置,其中,所述差分圖像生成部對所述差分圖像施加去除黃色成分的過濾處理。
13.根據(jù)權(quán)利要求7所述的繪畫圖像共有裝置,其中,所述差分圖像生成部對所述差分圖像施加提高色彩強度的補償處理。
14.根據(jù)權(quán)利要求2所述的繪畫圖像共有裝置,其中,進一步包括圖像檢測部,其檢測所述收信部收到的第一背景圖像是否與所述收信部在前一次收到的第二背景圖像一致,當該第一背景圖像與該第二背景圖像不同時,所述送信部發(fā)送該第一背景圖像。
15.根據(jù)權(quán)利要求2所述的繪畫圖像共有裝置,其中,所述圖像加工處理部利用從其他地點收到的與繪畫圖像有關(guān)的背景圖像的識別信息來識別該背景圖像,并合成該繪畫圖像和該背景圖像。
16.根據(jù)權(quán)利要求15所述的繪畫圖像共有裝置,其中,所述背景圖像的識別信息為所述背景圖像的ID。
17.根據(jù)權(quán)利要求1所述的繪畫圖像共有裝置,其中,所述圖像加工部對所述背景圖像施加縮放處理。
18.根據(jù)權(quán)利要求1所述的繪畫圖像共有裝置,其中,所述圖像加工部對所述背景圖像施加改變亮度的處理。
19.一種用于繪畫圖像共有裝置的數(shù)據(jù)處理方法,其為通過所述繪畫圖像共有裝置實行以下步驟,即圖像加工處理步驟,合成需要顯示在繪畫對象體上的背景圖像和從其他地點收到的繪畫圖像;差分圖像生成步驟,生成需要與其他地點共有的差分圖像,該差分圖像為所述合成的圖像與本地點的繪畫對象體上的圖像之間的差分;以及,送信步驟,向其他地點發(fā)送所述差分圖像。
20.根據(jù)權(quán)利要求19所述的數(shù)據(jù)處理方法,其中,所述繪畫圖像共有裝置進一步實行以下步驟,即收信步驟,接收需要顯示在繪畫對象體上的背景圖像以及其他地點的繪畫圖像;圖像供給步驟,使得所述合成的圖像顯示到所述繪畫對象體上;以及,圖像取得步驟,取得所述本地點的繪畫對象體上的圖像,所述送信步驟包括將所述差分圖像以及所述背景圖像送往所述其他地點的繪畫圖像共有裝置的步驟。
21.根據(jù)權(quán)利要求19或20所述的數(shù)據(jù)處理方法,其中,所述繪畫圖像共有裝置進一步包括以下步驟,即收信步驟,接收需要被顯示在繪畫對象體上的背景圖像以及其他地點的繪畫圖像;圖像供給步驟,使得所述合成的圖像顯示到所述繪畫對象體上;以及,圖像取得步驟,取得所述本地點的繪畫對象體上的圖像,在所述圖像加工處理步驟中,進一步包括合成所述差分圖像和所述背景圖像的步驟,在所述送信部步驟中,進一步包括將所述差分圖像和所述背景圖像的合成圖像送往所述其他地點的繪畫圖像共有裝置步驟。
22.根據(jù)權(quán)利要求21所述的數(shù)據(jù)處理方法,其中,所述送信步驟包括參考所述其他地點的繪畫圖像共有裝置的簡介信息的步驟;以及,在所述其他地點的繪畫圖像共有裝置具備合成圖像的功能時,發(fā)送所述差分圖像以及所述背景圖像,而在所述其他地點的繪畫圖像共有裝置不具備合成圖像的功能時,則發(fā)送所述差分圖像和所述背景圖像的合成圖像的步驟。
23.根據(jù)權(quán)利要求21所述的數(shù)據(jù)處理方法,其中,所述送信步驟包括參考所述本地點的繪畫圖像共有裝置以及所述其他地點的繪畫圖像共有裝置的簡介信息的步驟;以及,在所述其他地點的繪畫圖像共有裝置的處理能力低于所述本地點的繪畫圖像共有裝置的處理能力時,發(fā)送所述差分圖像以及所述背景圖像的合成圖像,而在所述其他地點的繪畫圖像共有裝置的處理能力為所述本地點的繪畫圖像共有裝置的處理能力以上時,則發(fā)送所述差分圖像和所述背景圖像的步驟。
全文摘要
本發(fā)明涉及能夠在不同地點共有繪畫圖像的繪畫圖像共有裝置以及數(shù)據(jù)處理方法,該繪畫圖像共有裝置以及數(shù)據(jù)處理方法能夠提高繪畫對象體上顯示的圖像的視覺性能、同時能夠與其他地點共有被重迭描繪在任意圖像上的圖像。本發(fā)明的繪畫圖像共有裝置在收到需要顯示在繪畫對象體上的背景圖像以及其他地點的繪畫圖像后,將其中的背景圖像送往其他地點的繪畫圖像共有裝置。而后,在合成這些圖像并顯示到繪畫對象體上后,取得繪畫對象體上被顯示的圖像,生成該圖像與合成后的圖像之間的差分圖像,進而將該差分圖像送往其他地點的繪畫圖像共有裝置。
文檔編號H04N7/14GK102196235SQ20111006246
公開日2011年9月21日 申請日期2011年3月11日 優(yōu)先權(quán)日2010年3月15日
發(fā)明者大村慶二, 糟谷勇兒, 荒木禎史 申請人:株式會社理光