專利名稱：使用全景圖像的監(jiān)視裝置與監(jiān)視方法
技術領域：
本發(fā)明涉及一種監(jiān)視裝置與一種監(jiān)視方法，即適合于通過使用在連續(xù)改變攝影方向的同時拾取圖像所獲得的全景圖像，來監(jiān)視寬范圍狀況的監(jiān)視裝置與監(jiān)視方法。
背景技術：
到目前為止，廣泛使用的電子靜態(tài)照相機具有這樣一種功能通過透鏡，把諸如CCD(電荷耦合器件)等固體狀態(tài)圖像拾取器件所拾取的被攝物體圖像轉(zhuǎn)換成作為電信號的圖像信號，以把該圖像信號記錄在記錄媒體上，從而再現(xiàn)被記錄的圖像信號。而且，大多數(shù)電子靜態(tài)照相機都包括一個能夠顯示所拾取的靜態(tài)畫面(圖像)的監(jiān)視器，從而使其能夠選擇已經(jīng)記錄的靜態(tài)畫面(圖像)中的特定的一個，直至顯示所選定的靜態(tài)畫面(圖像)為止。在這樣的電子靜態(tài)照相機中，由于向監(jiān)視器所傳送的圖像信號相應于被攝物體的每幅畫面(幀)，所以同時顯示的圖像導致圖像處于窄范圍中。因此，不能監(jiān)視寬范圍的狀況。為了解決這樣的一個問題，提出這樣的一種監(jiān)視方法在對被攝物體進行攝影的同時連續(xù)地位移照相機的攝影方向，以合成這些被攝物體圖像，來獲得全景圖像，從而具有監(jiān)視寬范圍的狀況的能力。
特別是，近些年來，序號為1998-108163的日本專利申請公開發(fā)表物中提出了一種對多個視頻信號進行縮小/合成，使得可以提供一幀視頻信號的技術。序號為2000-243062的日本專利申請公開發(fā)表物中還提出了一種從所安裝的(所提供的)多個監(jiān)視視頻照相機中收集監(jiān)視圖像，以將它們記錄在諸如錄像帶等記錄媒體上，從而允許進行監(jiān)視的集中監(jiān)視記錄系統(tǒng)。
在通過利用記錄在這樣的記錄媒體上的圖像檢測攝影范圍內(nèi)的任何變化的情況下，監(jiān)視人(觀察者)必須從每個角落觀察每次掃描即時輸入的監(jiān)視圖像的狀況(狀態(tài))。特別是，監(jiān)視人必須總要識別精細圖像的變化與/或極小被攝物體的外觀，因此需要付出繁重的勞動與/或耗費大量的時間。而且，由于系統(tǒng)依賴于這樣的監(jiān)視人的眼睛，所以存在著可能發(fā)生漏看這樣的狀態(tài)變化的可能性。
另外，還存在著這樣的問題，在檢測攝影范圍內(nèi)的變化的情況下，要求追溯曾經(jīng)記錄的圖像數(shù)據(jù)，以參照這樣的圖像數(shù)據(jù)來分析詳細的狀況(狀態(tài))或原因，以致進一步增大了監(jiān)視人的勞動負擔。

發(fā)明內(nèi)容
本發(fā)明的一個目的是，提供一種新型監(jiān)視裝置與一種新型監(jiān)視方法、一種用于操作圖像拾取設備和監(jiān)視裝置的程序、以及一種可以解決以上所描述的傳統(tǒng)技術所存在的問題的監(jiān)視系統(tǒng)。
本發(fā)明另一個目的是，提供一種監(jiān)視裝置與一種監(jiān)視方法、一種用于操作圖像拾取設備與監(jiān)視裝置的程序、以及一種可以減輕監(jiān)視人的勞動負擔并且能夠根據(jù)寬攝影范圍迅速且精確地檢測狀況(狀態(tài))的監(jiān)視系統(tǒng)。
根據(jù)本發(fā)明的監(jiān)視裝置適合于把通過在連續(xù)改變攝影方向的同時拾取攝影范圍的圖像所獲得的每一單元圖像、全景圖像連續(xù)地記錄在記錄媒體上，然后，對從該記錄媒體所選擇的一個單元圖像與先于這一單元圖像所記錄的相同攝影方向上的單元圖像之間的每一原始顏色成份的亮度等級加以比較，以根據(jù)這一比較結果，針對構成全景圖像的每一單元圖像顯示預先確定的信息，從而引起用戶的注意。
具體地講，本發(fā)明關于一種適合于監(jiān)視通過在連續(xù)地改變攝影方向的同時拾取攝影范圍的圖像所獲得的全景圖像的監(jiān)視裝置，其中，提供了記錄裝置，用于把構成全景圖像的各單元圖像連續(xù)地記錄在記錄媒體上；比較裝置，用于對從該記錄媒體所選擇的一個單元圖像與先于這一單元圖像所記錄的相同攝影方向上的單元圖像之間的每一原始顏色成份的亮度等級加以比較；以及顯示裝置，用于根據(jù)比較裝置的比較結果，針對構成全景圖像的每一單元圖像顯示預先確定的信息。
根據(jù)本發(fā)明的監(jiān)視方法關于一種監(jiān)視通過在連續(xù)地改變攝影方向的同時拾取攝影范圍的圖像所獲得的全景圖像的監(jiān)視方法，該監(jiān)視方法包括把構成全景圖像的各單元圖像連續(xù)地記錄在記錄媒體上；對從該記錄媒體所選擇的一個單元圖像與先于這一所選擇的單元圖像所記錄的相同攝影方向上的單元圖像之間的每一原始顏色成份的亮度等級加以比較；以及根據(jù)比較結果，針對構成全景圖像的每一單元圖像顯示預先確定的信息。
根據(jù)本發(fā)明的圖像拾取設備包括圖像拾取裝置，用于在連續(xù)地改變攝影方向的同時拾取攝影范圍的圖像，從而生成全景圖像的圖像信號；記錄裝置，用于根據(jù)所生成的圖像信號把構成全景圖像的各單元圖像連續(xù)地記錄在記錄媒體上；比較裝置，用于對從該記錄媒體所選擇的一個單元圖像與先于所選擇的這一單元圖像所記錄的相同攝影方向上的單元圖像之間的每一原始顏色成份的亮度等級加以比較；以及顯示裝置，用于根據(jù)比較裝置的比較結果，針對構成全景圖像的每一單元圖像顯示預先確定的信息。
根據(jù)本發(fā)明的計算機可讀的程序，是關于用于監(jiān)視通過在連續(xù)地改變攝影方向的同時拾取攝影范圍的圖像所獲得的全景圖像的程序，該程序包括把構成全景圖像的各單元圖像連續(xù)地記錄在記錄媒體上；對從該記錄媒體所選擇的一個單元圖像與先于這一所選擇的單元圖像所記錄的相同攝影方向上的單元圖像之間的每一原始顏色成份的亮度等級加以比較；以及根據(jù)比較結果，針對構成全景圖像的每一單元圖像顯示預先確定的信息。
根據(jù)本發(fā)明的監(jiān)視系統(tǒng)包括圖像拾取單元，用于在連續(xù)地改變攝影方向的同時拾取攝影范圍的圖像，從而生成全景圖像的圖像信號；服務器，用于根據(jù)所生成的圖像信號連續(xù)地記錄構成全景圖像的各單元圖像；服務器控制裝置，用于對從服務器所選擇的一個單元圖像與先于所選擇的這一單元圖像所記錄的相同攝影方向上的單元圖像之間的每一原始顏色成份的亮度等級加以比較；以及適合的終端單元，使得服務器控制裝置所得的比較結果通過通信網(wǎng)絡發(fā)送，從而能夠根據(jù)比較結果，針對構成全景圖像的每一單元圖像顯示預先確定的信息。
通過以下參照附圖給出的實施例的描述，本發(fā)明的進一步的目的、以及通過本發(fā)明可獲得的實際的優(yōu)點，將變會得更加明顯。


圖1示意了已向其施用了本發(fā)明的監(jiān)視系統(tǒng)的配置。
圖2為照相機單元和監(jiān)視單元的框圖。
圖3解釋了照相機單元在圖像拾取角度u拾取由黑色框架所指示的攝影范圍內(nèi)的圖像的情況。
圖4示意了顯示器上顯示畫面的配置實例。
圖5解釋了一種檢測在所拾取的圖像上所產(chǎn)生的差別的方法。
圖6A～6C解釋了一種針對每一原始顏色成份設置顏色等級和差別檢測等級的方法。
圖7A和7B解釋了選擇其中可以檢測到差別的被攝物體的大小的情況。
圖8示意了在被檢測區(qū)域和參照圖像區(qū)域之間進行大小比較的一個實例。
圖9解釋了對參照塊和搜尋塊的設置。
圖10A和10B解釋了一種確定相似性的方法。
圖11A和11B解釋了一種計算分散積分值的方法。
圖12是一個流程圖，描述了用戶針對顯示在整體圖像顯示單元上的單元圖像進行的各種設置過程。
圖13是一個流程圖，描述了對于各單元圖像進行的差別檢測過程。
圖14是一個流程圖，描述了用于向操作終端單元的用戶提供與所檢測出的差別相關的信息的過程。
最佳實施方式現(xiàn)在，將參照附圖，詳細描述本發(fā)明的實施例。
如圖1中所示，已向其施用了本發(fā)明的監(jiān)視系統(tǒng)1包括照相機單元2，用于拾取被攝物體的圖像，以生成圖像信號；監(jiān)視單元5，向其發(fā)送照相機單元2所生成的圖像信號；顯示器6，連接于監(jiān)視單元5；終端單元9，允許多個用戶執(zhí)行應用；網(wǎng)絡8，用于在監(jiān)視單元5和相應的終端單元9之間發(fā)送/接收信息；終端顯示器10，分別連接于終端單元9；網(wǎng)絡服務器11，連接于網(wǎng)絡8。
在照相機單元2上，整體地構造了轉(zhuǎn)動(pan)/傾斜器部分3和照相機部分4。把轉(zhuǎn)動/傾斜器部分3構造為一個旋轉(zhuǎn)工作臺，用于自由地改變攝影方向，例如相對轉(zhuǎn)動和傾斜的兩個軸改變攝影方向。
把照相機部分4放置在構成轉(zhuǎn)動/傾斜器部分3的旋轉(zhuǎn)工作臺上，并將其用于拾取被攝物體的圖像，同時根據(jù)監(jiān)視單元5的控制，沿水平方向或沿垂直方向調(diào)整攝影方向。根據(jù)監(jiān)視單元5的控制，照相機部分4連接地改變攝影畫面角度，從而可放大或縮小拾取被攝物體圖像的攝影放大比率。針對一個監(jiān)視單元5，安裝(提供)多個照相機部分4，從而能夠針對相同被攝物體以互不相同的攝影角度執(zhí)行圖像拾取操作。
由例如個人計算機(PC)等信息處理單元構成監(jiān)視單元5，并將其用于記錄從照相機單元2所發(fā)送的圖像信號，以通過顯示器6向用戶顯示所記錄的圖像信號。在由用戶指定所希望的圖像區(qū)域或圖像位置的情況下，監(jiān)視單元5進行控制，旨在從所記錄的圖像信號中選擇最佳的一個，以顯示所選擇的圖像信號。監(jiān)視單元5還可以作為用于控制整個網(wǎng)絡8的所謂的中央控制單元，以根據(jù)來自另一個終端單元9的請求，發(fā)送圖像。
網(wǎng)絡8是能夠執(zhí)行雙向信息發(fā)送/接收的公共通信網(wǎng)絡，這種公共通信網(wǎng)絡包括例如，因特網(wǎng)，通過諸如連接于TA(終端適配器)/調(diào)制解調(diào)器等的ISDN(綜合業(yè)務數(shù)字網(wǎng)絡)/B(寬帶)-ISDN之類的電話線路連接于監(jiān)視單元5。應該加以注意的是，在監(jiān)視系統(tǒng)1操作在預先確定的窄區(qū)域中的情況下，可以通過LAN(局域網(wǎng)絡)構造網(wǎng)絡8。除了靜止圖像外，網(wǎng)絡8還可以發(fā)送MPEG(運動圖像專家組)圖像。在這樣的情況下，根據(jù)因特網(wǎng)協(xié)議(IP)從某一個終端連續(xù)地發(fā)送MPEG數(shù)據(jù)，并且在每一預先確定的時刻，從不同的通道發(fā)送靜止圖像數(shù)據(jù)。
終端單元9為PC，使得在各自的家庭或企業(yè)等中準備就緒的用戶，能夠通過網(wǎng)絡8從監(jiān)視單元5獲取圖像，從而進行所希望的處理。通過把多個終端單元9連接于網(wǎng)絡8，將能夠同時向多個用戶提供監(jiān)視系統(tǒng)1的應用。終端單元9在終端顯示器10上顯示從監(jiān)視單元5所獲得的圖像。另外，終端單元9還根據(jù)用戶所指定的操作來生成請求信號，以把該請求信號發(fā)送到監(jiān)視單元5。應該加以注意的是，將按照終端單元9的結構配置來提供以下所述的監(jiān)視單元5的配置，并將省略對其的解釋。
網(wǎng)絡服務器11對諸如因特網(wǎng)信息等進行管理，旨在接收終端單元9的請求，以把該請求存儲在網(wǎng)絡服務器11中，從而從中發(fā)送預先確定的信息。
接下來，將詳細描述構成向其施用了本發(fā)明的監(jiān)視系統(tǒng)1的照相機單元2和監(jiān)視單元5的配置。
圖2是框圖，描述了照相機單元2和監(jiān)視單元5的配置。在圖2中，把照相機單元2和監(jiān)視單元5的各個部件連接于公共控制器總線21。
構成照相機單元2的轉(zhuǎn)動/傾斜器單元3包括傾斜部分3a和轉(zhuǎn)動部分3b，它們控制用于改變攝影方向的旋轉(zhuǎn)工作臺。另外，構成照相機單元2的照相機部分4還包括透鏡控制部分23，主要用于改變透鏡部分22的畫面角度；圖像拾取部分24，設置在與透鏡部分22的光軸相垂直的位置；IEEE(電氣電子工程師協(xié)會)1394接口25，用于把圖像拾取部分24所生成的圖像信號發(fā)送到監(jiān)視單元5；GPS(全球定位系統(tǒng))接收部分28，用于檢測照相機單元2的當前位置；以及元數(shù)據(jù)生成部分29，固定(安裝)在GPS接收部分28上。應該加以注意的是，IEEE 1394接口25可以取代以太網(wǎng)(注冊商標)。
監(jiān)視單元5包括緩沖存儲器51，連接于IEEE1394接口25；編碼器52，連接于緩沖存儲器51；服務器53，用于存儲從編碼器52輸出的圖像；圖像壓縮部分54，用于壓縮已從服務器53讀出的圖像；圖形控制器55，連接于服務器53和圖像壓縮部分54，并用于準備將在顯示器6上顯示的圖像；CPU(中央處理單元)56，用于通過控制器總線21控制各個部分；鍵盤59以及鼠標器60，分別連接于I/O端口58，用于使用戶能夠根據(jù)顯示在顯示器6上的圖像來指定所希望的圖像區(qū)域與/或圖像位置；以及存儲卡61和時鐘62，連接于I/O端口58。
傾斜部分3a和轉(zhuǎn)動部分3b根據(jù)來自CPU 56的驅(qū)動信號，旋轉(zhuǎn)被構造為旋轉(zhuǎn)工作臺驅(qū)動源的步進馬達。于是，能夠沿水平方向或垂直方向改變安裝在旋轉(zhuǎn)工作臺上的照相機部分4的攝影方向。
透鏡控制部分23根據(jù)來自CPU 56的驅(qū)動信號，執(zhí)行關于透鏡部分22的自動光圈控制操作與/或自動對焦控制操作。透鏡控制部分23根據(jù)這樣的驅(qū)動信號，相對被攝物體改變攝影畫面角度。因此，照相機部分4還能夠連續(xù)地調(diào)整攝影放大倍數(shù)(放大比率)，以拾取被攝物體的圖像。
使用固體狀態(tài)圖像拾取器件，例如CCD(電荷耦合器件)等構造圖像拾取部分24，圖像拾取部分24用于在圖像拾取表面上形成通過透鏡部分22入射的被攝物體圖像，以通過光電轉(zhuǎn)換生成圖像信號，從而把該圖像信號發(fā)送到IEEE 1394接口25。
GPS接收部分28根據(jù)GPS系統(tǒng)所發(fā)射的信號，檢測照相機單元2的安裝位置與/或攝影方向。通過提供GPS接收部分28，特別是在安裝(提供)了多個照相機單元2的情況下，能夠以這樣的一種方式進行控制，以彼此互鎖兩個攝影方向。把來自GPS接收部分28的輸出信號傳送至元數(shù)據(jù)生成部分29。于是，生成由諸如緯度、經(jīng)度、方位角與/或高度等位置信息、時間以及各種參數(shù)等構成的元數(shù)據(jù)，這些元數(shù)據(jù)基于GPS位置測量結果。元數(shù)據(jù)生成部分29把已經(jīng)生成的位置信息和元數(shù)據(jù)傳送至編碼器52。應該加以注意的是，在本發(fā)明中，可以省略GPS接收部分28和元數(shù)據(jù)生成部分29的配置。
緩沖存儲器51根據(jù)來自CPU 56的控制信號，臨時存儲從IEEE 1394接口25所傳送的圖像信號。把已經(jīng)臨時存儲在緩沖存儲器51中的圖像信號傳送至編碼器52，并根據(jù)諸如JPEG(聯(lián)合攝影專家組)等標準對其進行壓縮編碼。編碼器52可以針對被壓縮編碼的圖像信號，添加從元數(shù)據(jù)生成單元29傳送的位置信息與/或元數(shù)據(jù)。編碼器52把經(jīng)壓縮編碼的圖像信號輸出到服務器53或圖像壓縮部分54。應該加以注意的是，在針對將被傳送的圖像信號沒有執(zhí)行壓縮編碼的情況下，省略在編碼器52處的處理。
服務器53以一種與位置信息或元數(shù)據(jù)相關的方式連續(xù)地記錄從編碼器52輸出的圖像信號。服務器53可以替代諸如硬盤或可拆卸盤形記錄媒體。根據(jù)CPU 56的控制，把記錄在服務器53上的圖像信號讀出到圖像壓縮部分54或圖形控制器55。在這一例子中，進行控制，以把記錄在服務器53中的圖像信號記錄到存儲卡61中，從而用戶也可以把如此拾取的圖像輸送到其它PC。另外，還進行控制，以把記錄在服務器53上的圖像信號記錄到網(wǎng)絡服務器1 1中，從而用服務器53替代網(wǎng)絡服務器11。
圖像壓縮部分54針對已經(jīng)從服務器53中讀出的JPEG形式的圖像信號，分別生成壓縮的圖像和索引(Thumbnail)圖像。圖形控制器55根據(jù)已從服務器53讀出的圖像信號或從圖像壓縮部分54輸出的圖像信號，關于顯示器6進行畫面處理。另外，圖形控制器55根據(jù)CPU 56的控制，對顯示器6上的對比度與亮度進行控制。
在用戶通過鍵盤59或鼠標器60指定圖像區(qū)域和圖像位置的情況下，CPU56通過控制器總線21發(fā)送用于驅(qū)動轉(zhuǎn)動/傾斜器部分3和透鏡控制部分23的驅(qū)動信號，以及用于控制監(jiān)視單元5中的各部件的控制信號。CPU 56進行控制，以從終端單元9接收預先確定的請求信號，從而從記錄在服務器53中的圖像中選擇最佳的一個，或選擇各種信息，以將它們發(fā)送到相應的終端單元9。
以下，將解釋向其施用了本發(fā)明的監(jiān)視系統(tǒng)1上的圖像拾取操作。
圖3描述了照相機單元2在攝影畫面角度u拾取由黑色框架所指示的攝影范圍內(nèi)的圖像的情況。為了在攝影畫面角度u整體地拾取攝影范圍的圖像，必須在將其沿水平方向或沿垂直方向連續(xù)地位移的同時拾取攝影方向的圖像。假設攝影范圍的大小由這樣的值表示該值為通過在一個任意攝影畫面角度u執(zhí)行圖像拾取操作所獲得的幀(以下將其稱為單元圖像)的大小的i×j倍，因此必須設置至少i×j種攝影維度。通過粘貼i×j個已經(jīng)在攝影畫面角度u成像的單元圖像，能夠合成代表整個攝影范圍的整體圖像。
此處，在圖3中，當假設攝影范圍的各單元圖像的坐標(M，N)相對水平方向從左端起連續(xù)地為1，2，…，M，…i，并且那些坐標(M，N)相對垂直方向從上端起連續(xù)地為1，2，…，N，…j時，CPU 56把驅(qū)動信號發(fā)送到傾斜部分3a和轉(zhuǎn)動部分3b，從而使照相機部分4的攝影方向首先變?yōu)榕c位于左上方向的坐標(1，1)相一致，以執(zhí)行圖像拾取操作。把基于作為相對于坐標(1，1)執(zhí)行圖像拾取操作的結果而生成的單元圖像的圖像信號臨時存儲在緩沖存儲器51中，并根據(jù)JPEG標準在編碼器52處對其進行壓縮編碼。另外，同時把位置信息與/或元數(shù)據(jù)添加于該圖像信號。把如此獲得的圖像信號記錄在服務器53上。
相類似地，CPU 56驅(qū)動針對傾斜部分3a和轉(zhuǎn)動部分3b的驅(qū)動信號，從而把照相機部分4的攝影方向向右側(cè)位移一個畫面幀，以按與坐標(2，1)相一致的方式執(zhí)行圖像拾取操作。把作為相對于坐標(2，1)執(zhí)行圖像拾取操作地結果而生成的圖像信號類似地記錄在服務器53中。照相機部分4沿水平方向向坐標(3，1)，(4，1)，…，(i，1)連續(xù)地改變攝影方向，以執(zhí)行圖像拾取操作。
照相機部分4完成了第一列的圖像拾取操作，此后，根據(jù)CPU 56的控制調(diào)整攝影方向，從而產(chǎn)生執(zhí)行圖像拾取操作的第二列的坐標(1，2)，接下來執(zhí)行圖像拾取操作，同時沿水平方向連續(xù)地改變攝影方向。當重復這樣的操作直至坐標(i，j)，從而完成圖像拾取操作時，服務器53處于這樣的狀態(tài)其中記錄了基于已針對每一像素拾取的i×j個單元圖像的圖像信號。
圖像壓縮部分54相應地讀出記錄在服務器53上的基于各單元圖像的圖像信號，并將它們加以壓縮，以使它們與顯示器6的顯示畫面的大小相符。經(jīng)由圖形控制器1 5把所壓縮的各單元圖像顯示在顯示器6上。通過在顯示器6上顯示所有i×j個記錄在服務器53上的單元圖像，一個整體的圖像得以合成。通過按預先確定的間隔執(zhí)行以上所描述的圖像拾取操作，能夠獲得顯示攝影范圍的最新狀態(tài)的整體圖像。
圖4描述了一個實例，其中通過粘貼所拾取的i×j個單元圖像而合成的整體圖像顯示在顯示器6的整體圖像顯示部分70上。監(jiān)視單元5可允許整體圖像顯示部分70顯示構成整體圖像的各單元圖像之間的邊界，或可允許整體圖像顯示部分70僅顯示無縫的整體圖像。另外，作為對全景整體圖像的替代，監(jiān)視裝置5還可允許整體圖像顯示部分70顯示通過在一個可以掌握整個攝影范圍的攝影畫面角度執(zhí)行圖像拾取操作而獲得的一個整體圖像。
在顯示畫面45處，還提供了放大的圖像顯示部分71，用于顯示通過放大單元圖像而獲得的放大的圖像?？梢园捶糯蟮姆绞?，把用戶在構成顯示在整體圖像顯示部分70上的整體圖像的單元圖像當中所指定的一個單元圖像顯示在放大的圖像顯示部分71上，或可以相對于這樣的一個單元圖像的攝影方向，在其上連續(xù)地顯示移動畫面。因此，用戶還可以實時地在所指定的單元圖像上沿攝影方向確認狀況(狀態(tài))。
在顯示畫面45上，顯示了WIDE按鈕72，用于在攝影放大倍數(shù)(放大率)被縮小的狀態(tài)下，顯示在放大的圖像顯示部分71上顯示的單元圖像；ZOOM按鈕73，用于在攝影放大倍數(shù)(放大率)被放大的狀態(tài)下顯示這樣的單元圖像。在顯示畫面45上，還顯示了攝影方向控制部分75，用于沿水平/垂直方向調(diào)整照相機部分4的攝影方向；以及設置按鈕76，用于進行各種模式的設置與/或允許服務器在所希望的地址處記錄基于單元圖像的圖像信號。
用戶可以通過使用鍵盤59或鼠標器60，指出相對于整體圖像顯示部分70或放大的圖像顯示部分71的所希望的圖像區(qū)域與/或圖像位置。應該加以注意的是，可以進一步把用于以與鼠標器60的移動互鎖的方式執(zhí)行以上所描述的指定操作的瞄準器(sight)與/或指針的光，顯示在相應的顯示部分70、71上。
接下來，將解釋已向其施用了本發(fā)明的監(jiān)視系統(tǒng)1檢測所拾取圖像上出現(xiàn)的差別的方法。
如以上所描述的，通過按預先確定的間隔所執(zhí)行的圖像拾取操作，把通過拾取最新狀態(tài)(狀況)的圖像所獲得的整體圖像連續(xù)地記錄在服務器53上。此處，把記錄在服務器53上的整體圖像當中的顯示攝影范圍的最新狀態(tài)的整體圖像稱為比較整體圖像，把緊接在比較整體圖像之前所拾取和記錄的整體圖像稱為基本整體圖像。
如圖5中所示，監(jiān)視系統(tǒng)1對構成比較整體圖像的各單元圖像和構成基本整體圖像的各單元圖像之間每一原始顏色成份R、G、B的亮度等級加以比較。在存在于相同坐標(M，N)上的單元圖像之間，即在存在于相同攝影方向的單元圖像之間，進行亮度等級之間的比較。因此，可以在每一攝影方向上，相對于基本整體圖像，檢測比較整體圖像的各原始成份的亮度等級的變化。
在作為針對每一單元圖像比較亮度等級的結果而檢測出差別的情況下，例如在坐標(3，2)、(5，5)、(7，6)處，顯示其中僅對這樣的單元圖像加以著色的幀，從而引起用戶的注意。此時，可以把將加以比較的兩個單元圖像顯示在顯示畫面45上，同時顯示著色幀，從而可立即告知這樣的差別之原因。
于是，用戶可以通過僅對顯示畫面45上的著色幀所顯示的單元圖像加以注意，來檢查差別的細節(jié)。因此，能夠減輕勞動負擔。
應該加以注意的是，如以上所描述的，在本發(fā)明中，可以僅針對構成比較整體圖像的部分單元圖像比較亮度等級。此時，用戶通過使用鼠標器60等指定所希望的單元圖像，從而能夠僅針對這樣指定的單元圖像識別亮度等級的差別存在/不存在。于是，將能夠?qū)D像進行高精度的和高靈敏度的差別檢測。
圖6A解釋了在原始顏色成份之間比較R(紅色)亮度等級的情況?？v坐標指出了對于將加以比較的單元圖像針對每一相應像素所計算的差別值(亮度)。圖6B描述了圖6A中所示的差別值之間水平方向的最大值，圖6C描述了圖6A中所示的差別值之間垂直方向的最大值。
差別檢測等級L1和顏色等級L2為可由用戶通過使用鍵盤59或鼠標器60自由加以設置的兩個等級。當所計算的原始成份(R)的亮度等級的差別值超過差別檢測等級L1時，則斷定已經(jīng)檢測到了差別。顏色等級L2是為提高S/N(信號/噪聲)比用于設置將加以計算的差別值的增益的等級。例如，如圖6中所示，把一個差別值放大到顏色等級L2，從而可以類似地放大其它的差別值。通過相對于所放大的各差別值設置所希望的差別檢測等級L1，將能夠?qū)崿F(xiàn)高精度的差別檢測。即，用戶能夠自由地將顏色等級L2設置為與所希望檢測到的差別值的等級相一致。另外，當可以斷定檢測出差別時，通過根據(jù)與顏色等級L2的關系設置差別檢測等級L1，能夠自由地設置引發(fā)的等級變化對于顏色等級L2的比率達到多達程度的情況下，可以斷定檢測到差別。對于其它的原始顏色成份(G，B)，也能夠類似地設置L1和L2。
對于R、G、B的每一原始顏色成份來說，可以把差別檢測等級L1和顏色等級L2設置成彼此不同的等級，并且可以針對構成比較整體圖像的每一單元圖像把它們設置成彼此不同的等級。
即，在監(jiān)視系統(tǒng)1中，在相應的差別值等級超過針對對于將加以比較的單元圖像的每一原始顏色成份所計算的亮度等級的差別值當中至少一個原始顏色成份上的差別檢測等級L1情況下，可以斷定已對于該單元圖像檢測到差別。因此，能夠地檢測每一R、G、B的差別。從而，能夠高精度地檢測在顯示畫面45上實際顯示的整體圖像上肉眼無法檢測到的微小的狀態(tài)變化。
在已向其施用了本發(fā)明的監(jiān)視系統(tǒng)1中，還能夠選擇其中可以檢測出差別的被攝物體的大小。
如圖7A中所示，用戶可以通過使用鍵盤59或鼠標器60為各單元圖像設置所希望的參照圖像區(qū)域。還可以把將加以設置的參照圖像區(qū)域設置成關于一個單元圖像的一種參照圖像區(qū)域或關于一個單元圖像的多種參照圖像區(qū)域。另外，還可以針對每一原始顏色成份設置由彼此不同大小組成的參照圖像區(qū)域。
此處，如圖7B中所示，在其中由用戶設置水平方向的長度為W且垂直方向的長度為t的參照圖像區(qū)域的情況下，CPU 56對于其中已經(jīng)設置了參照圖像區(qū)域的這樣的單元圖像，對所確定的差別值超過差別檢測等級L1的被檢測區(qū)域加以識別。CPU 56比較所識別的被檢測區(qū)域和參照圖像區(qū)域之間的大小。
例如，如圖8中所示，在其中水平方向的長度為W1和垂直方向的長度為t1的被檢測區(qū)域R1作為其中差別值超過差別檢測等級L1的被檢測區(qū)域被首先識別出的情況下，關于水平方向把參照圖像區(qū)域的長度W和W1彼此加以比較，并且關于垂直方向把參照圖像區(qū)域的長度t和t1彼此加以比較。因此，在被檢測區(qū)域R1的水平和垂直方向的大小均超過參照圖像區(qū)域的大小的情況下，斷定已經(jīng)檢測到差別。對于被檢測區(qū)域R1，在水平和垂直方向的大小中的任何一個低于參照圖像區(qū)域的大小的情況下，則斷定還沒有檢測到差別。
相類似地，在CPU 56把水平方向的長度為W2和垂直方向的長度為t2的被檢測區(qū)域R2作為其中差別值大于差別檢測等級L1的被檢測區(qū)域識別出的情況下，CPU 56關于水平方向把參照圖像區(qū)域的長度W與W2加以比較。而且CPU 56還關于垂直方向把參照圖像區(qū)域的長度t和t2加以比較。因此，CPU 56可以判斷差別的存在/不存在。
在已向其施用了本發(fā)明的監(jiān)視系統(tǒng)1中，能夠根據(jù)用戶所設置的參照圖像區(qū)域，選擇用于檢測差別的被檢測區(qū)域。特別是，能夠精細地調(diào)整參照圖像區(qū)域的大小，使得不可能對于極小的被檢測區(qū)域檢測出差別。因此，不可能對于包括被檢測區(qū)域的這樣的單元圖像按如以上所描述的方式顯示著色的幀。從而，能夠防止用戶過度關注。
另外，在希望對存在于攝影范圍內(nèi)的多個被攝物體中的一個特定被攝物體檢測差別的情況下，根據(jù)將加以檢測的大小，設置參照圖像區(qū)域的大小，因此可以實現(xiàn)這樣的希望。特別是，由于存在著許多這樣的情況通過在連續(xù)地改變攝影方向的同時拾取被攝物體的圖像而獲得的整體圖像包括不同的攝影被攝物體，所以設置由單元圖像之間彼此不同的大小構成的參照圖像區(qū)域，從而能夠?qū)崿F(xiàn)由單一的系統(tǒng)對各圖形對象所進行的差別檢測。
遠離照相機部分4的攝影被攝物體和照相機部分4附近的攝影被攝物體，即使為相同種類材料，顯示在單元圖像上的大小也是不一樣的。例如，即使遠離照相機部分4的路上的汽車和照相機部分4附近的路上的汽車為相同類型的汽車，后面這一情況的汽車也將會以較大的比例得以顯示。因此，在包括遠離照相機部分4的路的單元圖像和包括照相機部分4附近的路的單元圖像之間改變將加以設置的參照圖像區(qū)域的大小，從而能夠?qū)ο嗤愋偷钠噷崿F(xiàn)精確的差別檢測，而不管距離照相機部分4遠近與否。
應該加以注意的是，本發(fā)明并不局限于以上所描述的實施例，只要在沿水平方向和垂直方向中任意一個被檢測區(qū)域的大小大于參照圖像區(qū)域的大小情況下，就可以斷定已檢測出差別。
在已向其施用了本發(fā)明的監(jiān)視系統(tǒng)1中，還進行位置調(diào)整，以調(diào)整其中對亮度等級進行比較的單元圖像的位置位移。
CPU 56從構成基本整體圖像的單元圖像(前一個單元圖像)中抽取由預先確定個數(shù)的像素(例如16×16個像素)組成的參照塊91。以這樣的方式設置的參照塊91包括所謂的高頻區(qū)域，例如邊緣成份等，例如，如圖9中所示。
然后，CPU 56在構成比較整體圖像的單元圖像(后一個單元圖像)上設置搜尋范圍94。例如，把搜尋范圍94設置成由例如24×24個像素組成的區(qū)域，其中所述像素以參照塊91為中心，沿水平和垂直方向分別延伸了±4個像素。接下來，CPU 56還在后一個單元圖像上，在搜尋范圍94中設置搜尋塊93。設置是這樣進行的使搜尋塊93上水平和垂直方向的像素的個數(shù)分別等于以上所描述的參照塊91的水平和垂直方向的像素的個數(shù)。
然后，CPU 56用于在搜尋范圍94中沿水平和垂直方向連續(xù)地移動搜尋塊93。CPU 56還可用于針對每一個像素移動搜尋塊93，或可以用于針對每多個像素移動搜尋塊93。CPU 56確定被連續(xù)移動的搜尋塊93和參照塊91之間的相似性。另外，CPU 56還檢測表明最高相似性的搜尋塊93的位置。
在確定了相似性的情況下，CPU 56首先計算搜尋塊93的白/黑圖像信號的亮度等級和參照塊91的白/黑圖像信號的亮度等級之間的差別值RD?？梢愿鶕?jù)以下的公式(1)計算來自R、G、B的原始顏色成份的白/黑圖像信號。
白/黑圖像信號＝(R×0.30+G×0.59+B×0.11)…(1)圖10A描述了出現(xiàn)在搜尋塊93中的白/黑圖像信號的亮度等級差別。圖10A中斜線所指示的區(qū)域為由于在后一個單元圖像上發(fā)生位置位移，關于參照塊91和搜尋塊93之間的白/黑圖像信號的亮度等級出現(xiàn)差別的區(qū)域。
另外，圖10B的橫坐標相應于沿水平方向定位在圖10A中的虛線上的像素，該橫坐標表示的是由8個比特的數(shù)據(jù)表示對于定位在這樣的虛線上的像素所確定的差別值RD的一個實例。
此處，CPU 56確定由縱坐標所表示的差別值的平均值的平均差別值RA。另外，CPU 56還通過使用以下的公式(2)對于定位在虛線上的各像素確定分散積分值F，其中把所確定的平均差別值RA作為參照。
分散積分值F＝∫(差別值RD-平均差別值RA)…(2)由圖10B中的斜線區(qū)域表示公式(2)中所確定的分散積分值F。
CPU 56可以確定這樣的分散積分值F，同時沿垂直方向連續(xù)地位移虛線，如圖11A中所示。因此，如圖11B中的斜線區(qū)域所指示的，可以獲得針對每一垂直分量所確定的分散積分值F。通過使用分散積分值F，CPU 56最終確定了由以下公式(3)所指示的分散積分值F′。
分散積分值F′＝∫∫(差別值RD-平均差別值RA)…(3)
在這一方式下，CPU 56根據(jù)以上所描述的公式，在于搜尋范圍94中連續(xù)移動的搜尋塊93和參照塊91之間連續(xù)地確定分散積分值F′，以允許指示最小分散積分值F′的搜尋塊93的位置為指示最高相似性的位置。CPU 56根據(jù)對已經(jīng)對這樣的搜尋塊93加以確定的參照塊91的相對位置，對后一個單元圖像進行定位。
向其施用了本發(fā)明的監(jiān)視系統(tǒng)1可以對構成整體圖像的所有單元圖像，按以上所描述的一種的方式進行定位。因此，不可能僅根據(jù)單元圖像的位置位移進行差別檢測。特別是，在單元圖像被拾取，同時又連續(xù)地對寬攝影范圍改變攝影方向的情況下，存在著許多可能以像素為基礎發(fā)生位置位移的情況。另外，還存在著依賴于執(zhí)行圖像拾取操作的照相機部分4，沿由轉(zhuǎn)動/傾斜器部分3所控制的攝影方向，可能出現(xiàn)微小位移的情況。在這樣的情況下，還要對各單元圖像進行定位，使它們能夠處于最佳位置，從而能夠進一步提高差別檢測的精度。
盡管結合分別設置一個參照塊91和一個搜尋塊93的情況解釋了以上描述的定位過程，但也可以對各塊設置多個塊，如圖9中所示。于是，即使是在所設參照塊91的區(qū)域中出現(xiàn)差別的情況下，也能夠在另一個參照塊上精確地進行定位。
在定位過程中，可以根據(jù)普通的塊匹配方法，確定指示最高相似性的搜尋塊93的位置。
最后，將解釋已向其施用了本發(fā)明的監(jiān)視系統(tǒng)1上的操作過程的例子。
圖12是一個流程圖，描述了允許用戶針對顯示在整體圖像顯示部分70上的單元圖像進行各種設置的流程。
首先，在步驟S11，對參照塊91進行設置。對于參照塊91的設置，用戶可以通過使用鼠標器60等，對所希望的區(qū)域進行這樣的設置，或者最好令CPU 56本身來抽取邊緣部分，從而進行這樣的設置。
然后，處理過程轉(zhuǎn)向步驟S12。在提供了多個參照塊91的情況下，執(zhí)行類似于步驟S11的處理過程。
接下來，處理過程轉(zhuǎn)向步驟S13。于是，用戶對原始顏色成份(R)進行顏色等級L2的設置，并還根據(jù)所設置的顏色等級L2進行差別檢測等級L1的設置。可以針對各單元圖像進行對L1、L2的設置，或者在整體圖像對其統(tǒng)一設置。
然后，處理過程轉(zhuǎn)向步驟S14。于是，用戶對原始顏色成份(G)對顏色等級L2進行設置，并根據(jù)所設置的顏色等級L2，進行差別檢測等級L1的設置。而且在步驟S15，還對原始顏色成份(B)類似地進行對L1、L2的設置。
接下來，處理過程轉(zhuǎn)向S15，以針對各單元圖像進行以上所描述的參照圖像區(qū)域的設置。當完成了直至步驟S15的設置處理過程時，可以對構成整體圖像的各單元圖像進行差別檢測。
圖13是一個流程圖，描述對這樣的各單元圖像進行差別檢測的流程。
當執(zhí)行圖像拾取操作時，按以上所描述的方式，根據(jù)拾取圖像信號，把單元圖像連續(xù)地記錄在服務器53上。CPU 56對構成新近記錄在服務器53上的相對整體圖像的后一個單元圖像，在構成基本整體圖像的后一個單元圖像和前一個單元圖像之間進行定位(步驟S21)。
接下來，處理過程轉(zhuǎn)向步驟S22，以對原始顏色成份(R)，針對各單元圖像計算亮度等級的差別值。然后，處理過程轉(zhuǎn)向S23，判斷這樣的亮度等級的差別值是否超過差別檢測等級L1。
相類似，在步驟S24、S25，對原始顏色成份(G)，針對各單元圖像計算亮度等級的差別值，并判斷相應的差別值是否超過差別檢測等級L1。而且還在步驟S26和S27，對原始顏色成份(B)類似地進行判斷。
然后，處理過程轉(zhuǎn)向步驟S28，以判斷是否已關于作為原始顏色成份的R、G、B中的至少一種顏色檢測到差別。作為結果，在已對至少一種顏色檢測到差別的情況下，處理過程轉(zhuǎn)向S29。另一方面，當在各原始顏色成份上沒有檢測到任何差別的情況下，處理過程轉(zhuǎn)向S31，以對將加以比較的單元圖像，在不特別引起用戶注意的情況下，轉(zhuǎn)向?qū)ο乱粋€單元圖像的差別檢測。
在步驟S29，把被檢測區(qū)域和參照圖像區(qū)域的大小彼此加以比較。從而，如以上所描述的，在這些大小在沿被檢測區(qū)域的水平和垂直方向均大于參照圖像區(qū)域的大小的情況下，處理過程轉(zhuǎn)向步驟S30。在水平和垂直方向的大小中的任意一個小于參照圖像區(qū)域的大小的情況下，處理過程轉(zhuǎn)向步驟S31。在步驟S30，對將加以比較的單元圖像顯示著色的幀，從而引起用戶的注意。此后，處理過程轉(zhuǎn)向步驟S31。
對構成整體圖像的所有單元圖像執(zhí)行從步驟S21到步驟S31的操作，此后進入下一個圖像拾取操作。把在以上所描述的處理過程中的比較整體圖像按它們本來的樣子連續(xù)地記錄在服務器53中。在把基于下一個圖像拾取操作的單元圖像最新地記錄在服務器中的情況下，在差別檢測時，把這樣的單元圖像稱為基本圖像單元。由于執(zhí)行了新的圖像拾取操作，所以順序地更新了比較整體圖像和基本整體圖像。
應該加以注意的是，在向其施用了本發(fā)明的監(jiān)視系統(tǒng)1中，還可以把與差別相關的所檢測的信息通過圖14中所示的過程提供給操作終端單元9的用戶。
首先，在步驟S41，操作終端單元9的各用戶提供對連接于監(jiān)視器8的監(jiān)視單元5的訪問。
然后，處理過程轉(zhuǎn)向步驟S42。于是，監(jiān)視單元5對于在記錄于服務器53本身的整體圖像當中可以向用戶打開的圖像準備可打開的圖像列表，以將其發(fā)送至終端單元9。在這一方面，還存在著這樣一些情況其中，不僅把各整體圖像的文件名與/或文件大小而且還把所縮小的(減小的)整體圖像粘貼在可打開的圖像列表中。通過網(wǎng)絡8和終端單元9，把可打開的圖像列表顯示在終端顯示器10上。
接下來，處理過程轉(zhuǎn)向步驟S43。于是，用戶從可打開的圖像列表中選擇所希望的整體圖像。終端單元9根據(jù)用戶的選擇操作把整體圖像發(fā)送請求C1發(fā)送至監(jiān)視單元5。
在步驟S44處，監(jiān)視單元5接收這樣的整體圖像發(fā)送請求C1，以從服務器讀出用戶所選擇的整體圖像，并將所選擇的整體圖像發(fā)送至終端單元9。通過網(wǎng)絡8和終端單元9把所發(fā)送的整體圖像顯示在終端顯示器10上。
然后，處理過程轉(zhuǎn)向步驟S45。于是，用戶通過使用鼠標器60等指定點，對顯示在終端顯示器10上的整體圖像或?qū)Ω鲉卧獔D像或所希望的單元圖像，執(zhí)行步驟S11～S16中所示的各種設置。終端單元9根據(jù)用戶的這樣的指定操作，發(fā)送預先確定的請求信號C2。
接下來，處理過程轉(zhuǎn)向步驟S46。于是，監(jiān)視單元5接收這樣的請求信號C2，以執(zhí)行在步驟S21～S31處所指示的操作。另外，監(jiān)視單元5還在步驟S30向終端單元9通告引起用戶注意所必須的單元圖像的坐標。因此，在步驟S47，對其中已在連接于終端單元9的終端顯示器10上檢測出這樣的差別的單元圖像，顯示著色的幀。
通過執(zhí)行以上所解釋的過程，向其施用了本發(fā)明的監(jiān)視系統(tǒng)1除了可以向操作監(jiān)視單元5的用戶提供適當?shù)臋z測信息外，還可以向操作連接于網(wǎng)絡8的終端單元9的用戶提供適當?shù)臋z測信息。
盡管在圖14所示的例子中結合監(jiān)視單元5執(zhí)行步驟S46中所示操作的情況進行了解釋，但本發(fā)明并不局限于這樣的情況。例如，可以把所拾取的單元圖像連續(xù)地記錄在與網(wǎng)絡8相連的網(wǎng)絡服務器11上，從而終端單元5本身可提供對這樣的網(wǎng)絡服務器11的訪問，以讀出單元圖像，并執(zhí)行相應于步驟S46的操作。因此，可以減輕已從多個終端單元9對其訪問的監(jiān)視單元5的負擔。
在這一監(jiān)視系統(tǒng)1中，把過去已經(jīng)成像的基于圖像信號的整體圖像累積在服務器53上，從而能夠以事后方式對過去已出現(xiàn)的差別進行分析。在這樣的情況下，在分析詳細的狀況或原因的過程中，CPU 56比較單元圖像之間的亮度等級，從而具有對其中已出現(xiàn)差別的單元圖像加以關注的能力。因此，能夠消除用戶的勞動負擔。
應該加以注意的是，盡管已根據(jù)附圖中所說明的以及以上描述中所描述的優(yōu)選實施例對本發(fā)明進行了詳細的描述，但這一技術領域中的普通技術人員應該意識到，本發(fā)明并不局限于這些實施例，在不背離所附權利要求所闡述的本發(fā)明的范圍與構思的情況下，可以對本發(fā)明進行各種修改、結構上的變化，或等效的替換。
工業(yè)實用性如以上所描述的，針對各單元圖像把通過在連續(xù)地改變攝影方向的同時拾取攝影范圍的圖像所獲得的全景圖像連續(xù)地記錄在記錄媒體上，以比較從記錄媒體上所選擇的一個單元圖像和先于所選擇的單元圖像所記錄的相同攝影方向上的單元圖像之間的每一種原始顏色成份的亮度等級，并根據(jù)比較結果，針對構成全景圖像的每一單元圖像顯示預先確定的信息。因此，不要求用戶總是把注意力放在精細圖像的變化與/或極細微被攝物體的外觀等方面。從而，可以減輕勞動負擔。能夠縮短檢測這樣的差別所需的時間。而且，還無需依賴用戶的眼睛。因此，可以提高差別檢測的精度。
本申請要求2003年1月20日提交的、序號為2003-011614的日本專利申請的優(yōu)先權，將其全部內(nèi)容并入此處，以作參考。
權利要求
1.一種適合于監(jiān)視通過在連續(xù)地改變攝影方向的同時拾取攝影范圍的圖像所獲得的全景圖像的監(jiān)視裝置，該監(jiān)視裝置包括記錄裝置，用于把構成該全景圖像的各單元圖像連續(xù)地記錄在記錄媒體上；比較裝置，用于對在從所述記錄媒體所選擇的一個單元圖像與先于該單元圖像所記錄的相同攝影方向上的單元圖像之間的每一原始顏色成份的亮度等級加以比較；以及顯示裝置，用于根據(jù)所述比較裝置的比較結果，針對構成所述全景圖像的每一所述單元圖像顯示預先確定的信息。
2.根據(jù)權利要求1中所述的監(jiān)視裝置，還包括設置裝置，用于針對每一原始顏色成份設置所希望的閾值，其中，所述比較裝置針對每一原始顏色成份確定亮度等級的差別值，以及其中，當所述比較裝置所確定的差別值大于針對每一原始顏色成份所設置的閾值時，所述顯示裝置顯示所述預先確定的信息。
3.根據(jù)權利要求2中所述的監(jiān)視裝置，其中，所述設置裝置適合于針對每一該單元圖像設置所希望的閾值。
4.根據(jù)權利要求2中所述的監(jiān)視裝置，其中，所述比較裝置針對構成所述單元圖像的各像素確定亮度等級的差別值。
5.根據(jù)權利要求4中所述的監(jiān)視裝置，其中，所述設置裝置適合于針對每一所述單元圖像進一步設置參照圖像區(qū)域，以及其中，所述顯示裝置連續(xù)地抽取由其中由所述比較裝置所確定的差別值大于所述閾值的像素組成的圖像區(qū)域，以當所抽取的圖像區(qū)域的縱向與橫向的各最大長度分別超過在所設參照圖像區(qū)域中縱向與橫向的大小時，顯示所述預先確定的信息。
6.根據(jù)權利要求1中所述的監(jiān)視裝置，其中，所述比較裝置對在已從所述記錄媒體讀出的一個單元圖像與先于該單元圖像所記錄的相同攝影方向上的單元圖像之間的白/黑圖像信號的亮度等級加以比較，以根據(jù)這一比較結果，移動已經(jīng)讀出的所述一個單元圖像的位置，從而針對每一原始顏色成份比較亮度等級。
7.根據(jù)權利要求6中所述的監(jiān)視裝置，其中，所述比較裝置抽取至少一個構成已從所述記錄媒體讀出的單元圖像的參照塊，并從先于該單元圖像所記錄的該攝影方向上的單元圖像抽取搜尋塊，同時將其連續(xù)地移動，以對已經(jīng)抽取的所述參照塊和所述搜尋塊之間的白/黑圖像信號的亮度等級的分散積分值連續(xù)地加以計算，以及其中，所述顯示裝置根據(jù)所述比較裝置所計算的分散積分值顯示所述預先確定的信息。
8.根據(jù)權利要求1中所述的監(jiān)視裝置，還包括通信控制裝置，用于根據(jù)所述比較裝置的比較結果，通過所連接的通信網(wǎng)絡，向其它電子設備通告其中應顯示所述預先確定的信息的單元圖像。
9.一種監(jiān)視通過在連續(xù)地改變攝影方向的同時拾取攝影范圍的圖像所獲得的全景圖像的監(jiān)視方法，該監(jiān)視方法包括把構成所述全景圖像的各單元圖像連續(xù)地記錄在記錄媒體上；對在從所述記錄媒體所選擇的一個單元圖像與先于該單元圖像所記錄的相同攝影方向上的單元圖像之間的每一原始顏色成份的亮度等級加以比較；以及根據(jù)所述比較結果，針對構成所述全景圖像的每一所述單元圖像顯示預先確定的信息。
10.根據(jù)權利要求9中所述的監(jiān)視方法，其中，針對每一原始顏色成份設置所希望的閾值，以針對每一原始顏色成份確定亮度等級的差別值，從而當所確定的差別值大于針對每一原始顏色成份所設置的閾值時，顯示所述預先確定的信息。
11.根據(jù)權利要求10中所述的監(jiān)視方法，其中，針對每一所述單元圖像進一步設置所希望的閾值。
12.根據(jù)權利要求10中所述的監(jiān)視方法，其中，對構成所述單元圖像的各像素確定亮度等級的差別值。
13.根據(jù)權利要求12中所述的監(jiān)視方法，其中，針對每一所述單元圖像進一步設置參照圖像區(qū)域，以連續(xù)地抽取由其中所確定的差別值大于所述閾值的像素組成的圖像區(qū)域，從而當所抽取的圖像區(qū)域的縱向與橫向的各最大長度分別大于所設參照圖像區(qū)域中縱向與橫向的大小時，顯示所述預先確定的信息。
14.根據(jù)權利要求9中所述的監(jiān)視方法，其中，在已從所述記錄媒體讀出的一個單元圖像與先于該單元圖像所記錄的相同攝影方向上的單元圖像之間對白/黑圖像信號的亮度等級彼此加以比較，以根據(jù)該比較結果，移動已經(jīng)讀出的所述一個單元圖像的位置，以針對每一原始顏色成份比較亮度等級。
15.根據(jù)權利要求14中所述的監(jiān)視方法，其中，抽取至少一個構成已從所述記錄媒體讀出的單元圖像的參照塊，并從先于該單元圖像所記錄的相同攝影方向上的單元圖像抽取搜尋塊，同時將所述搜尋塊連續(xù)地移動，以對已經(jīng)抽取的所述參照塊和所述搜尋塊之間的白/黑圖像信號的亮度等級的分散積分值連續(xù)地加以計算，以根據(jù)所計算的分散積分值顯示所述預先確定的信息。
16.根據(jù)權利要求9中所述的監(jiān)視方法，其中，根據(jù)所述比較結果，通過所連接的通信網(wǎng)絡，向其它電子設備通告其中應顯示所述預先確定的信息的單元圖像。
17.一種圖像拾取設備，包括圖像拾取裝置，用于在連續(xù)地改變攝影方向的同時拾取攝影范圍的圖像，從而生成全景圖像的圖像信號；記錄裝置，用于根據(jù)所生成的圖像信號，把構成所述全景圖像的各單元圖像連續(xù)地記錄在記錄媒體上；比較裝置，用于對在從所述記錄媒體所選擇的一個單元圖像與先于該單元圖像所記錄的相同攝影方向上的單元圖像之間的每一原始顏色成份的亮度等級加以比較；以及顯示裝置，用于根據(jù)所述比較裝置的比較結果，針對構成所述全景圖像的每一所述單元圖像顯示預先確定的信息。
18.根據(jù)權利要求17中所述的圖像拾取設備，還包括設置裝置，用于針對每一原始顏色成份設置所希望的閾值，其中，所述比較裝置針對每一原始顏色成份確定亮度等級的差別值，以及其中，當所述比較裝置所確定的差別值大于針對其每一原始顏色成份所設置的閾值時，所述顯示裝置顯示所述預先確定的信息。
19.根據(jù)權利要求18中所述的圖像拾取設備，其中，所述設置裝置適合于針對每一所述單元圖像進一步設置所希望的閾值。
20.根據(jù)權利要求18中所述的圖像拾取設備，其中，所述比較裝置針對構成所述單元圖像的各像素確定亮度等級的差別值。
21.根據(jù)權利要求20中所述的圖像拾取設備，其中，所述設置裝置適合于針對每一所述單元圖像進一步設置參照圖像區(qū)域，以及其中，所述顯示裝置連續(xù)地抽取由其中由所述比較裝置所確定的差別值大于所述閾值的像素組成的圖像區(qū)域，從而當所抽取的圖像區(qū)域的縱向與橫向的各最大長度分別大于所設參照圖像區(qū)域中縱向與橫向的大小時，顯示所述預先確定的信息。
22.根據(jù)權利要求17中所述的圖像拾取設備，其中，所述比較裝置對在已從所述記錄媒體讀出的一個單元圖像與先于該單元圖像所記錄的相同攝影方向上的單元圖像之間的白/黑圖像信號的亮度等級加以比較，以根據(jù)該比較結果，移動已經(jīng)讀出的所述一個單元圖像，從而針對每一原始顏色成份比較亮度等級。
23.根據(jù)權利要求22中所述的圖像拾取設備，其中，所述比較裝置抽取至少一個構成已從所述記錄媒體讀出的單元圖像的參照塊，并從先于該單元圖像所記錄的相同攝影方向上的單元圖像抽取搜尋塊，同時將該搜尋塊連續(xù)地移動，以對在已經(jīng)抽取的所述參照塊和所述搜尋塊之間的白/黑圖像信號的亮度等級的分散積分值連續(xù)地加以計算，以及其中，所述顯示裝置根據(jù)所述比較裝置所計算的分散積分值顯示所述預先確定的信息。
24.根據(jù)權利要求17中所述的圖像拾取設備，還包括通信控制裝置，用于根據(jù)所述比較裝置的比較結果，通過所連接的通信網(wǎng)絡，向其它電子設備通告其中應顯示所述預先確定的信息的單元圖像。
25.一種使計算機能夠?qū)νㄟ^在連續(xù)地改變攝影方向的同時拾取圖像拾取范圍的圖像所獲得的全景圖像執(zhí)行監(jiān)視的程序，該使所述計算機能夠執(zhí)行處理的程序包括把構成所述全景圖像的各單元圖像連續(xù)地記錄在記錄媒體上；對在從所述記錄媒體所選擇的一個單元圖像與先于該單元圖像所記錄的相同攝影方向上的單元圖像之間的每一原始顏色成份的亮度等級加以比較；以及根據(jù)所述比較結果，針對構成所述全景圖像的每一所述單元圖像顯示預先確定的信息。
26.根據(jù)權利要求25中所述的程序，使計算機能夠執(zhí)行這樣的處理針對每一原始顏色成份設置所希望的閾值，以針對每一原始顏色成份確定亮度等級的差別值，從而當所確定的差別值大于針對其每一原始顏色成份所設置的閾值時，顯示所述預先確定的信息。
27.根據(jù)權利要求26中所述的程序，使計算機能夠執(zhí)行這樣的處理針對構成所述單元圖像的各像素確定亮度等級的差別值。
28.根據(jù)權利要求27中所述的程序，使計算機能夠執(zhí)行這樣的處理針對每一所述單元圖像進一步設置參照圖像區(qū)域，以連續(xù)地抽取由其中所確定的差別值大于所述閾值的像素組成的圖像區(qū)域，從而當所抽取的圖像區(qū)域的縱向與橫向的各最大長度分別大于所設參照圖像區(qū)域中縱向與橫向的大小時，顯示所述預先確定的信息。
29.根據(jù)權利要求25中所述的程序，使計算機能夠執(zhí)行這樣的處理在已從所述記錄媒體讀出的一個單元圖像與先于該單元圖像所記錄的相同攝影方向上的單元圖像之間對白/黑圖像信號的亮度等級加以比較，以根據(jù)該比較結果，移動已經(jīng)讀出的所述一個單元圖像的位置，從而針對每一原始顏色成份比較亮度等級。
30.根據(jù)權利要求29中所述的程序，使計算機能夠執(zhí)行這樣的處理抽取至少一個構成已從所述記錄媒體讀出的單元圖像的參照塊，并從先于該單元圖像所記錄的相同攝影方向上的單元圖像抽取搜尋塊，同時將該搜尋塊連續(xù)地移動，以對在已經(jīng)抽取的所述參照塊和所述搜尋塊之間的白/黑圖像信號的亮度等級的分散積分值連續(xù)地加以計算，以根據(jù)所計算的分散積分值顯示所述預先確定的信息。
31.一種監(jiān)視系統(tǒng)，包括圖像拾取單元，用于拾取攝影范圍的圖像，同時連續(xù)地改變攝影方向，從而生成全景圖像的圖像信號；服務器，用于根據(jù)所生成的圖像信號分別記錄構成所述全景圖像的各單元圖像；服務器控制裝置，用于對在從所述服務器所選擇的一個單元圖像與先于該單元圖像所記錄的相同攝影方向上的單元圖像之間的每一原始顏色成份的亮度等級加以比較；以及終端單元，其中，通過通信網(wǎng)絡發(fā)送所述服務器控制裝置的比較結果，以根據(jù)所述比較結果，針對構成所述全景圖像的每一所述單元圖像顯示預先確定的信息。
32.根據(jù)權利要求31中所述的監(jiān)視系統(tǒng)，其中，把多個終端單元作為所述終端單元提供。
全文摘要
一種用于監(jiān)視通過在連續(xù)地改變成像方向的同時對成像范圍進行成像而獲得的全景圖像的監(jiān)視裝置。根據(jù)全景圖像，每個單元圖像連續(xù)地記錄在服務器(53)上。在從服務器所選擇的一個單元圖像和早于該單元圖像所記錄的相同成像方向上的單元圖像之間比較每一原本顏色成分的亮度等級。根據(jù)比較結果，針對構成全景圖像的每一單元圖像，通過顯示器(6)顯示預先確定的信息。
文檔編號H04N5/76GK1698379SQ200480000138
公開日2005年11月16日 申請日期2004年1月14日 優(yōu)先權日2003年1月20日
發(fā)明者藤田博則, 間瀬水紀子, 浜秀樹, 長谷川裕之 申請人:索尼株式會社