本發(fā)明涉及圖像處理設(shè)備、圖像處理系統(tǒng)、圖像處理方法和程序。

背景技術(shù)：

近來(lái)，圖像監(jiān)視系統(tǒng)的發(fā)展是非常顯著的，其中分析通過(guò)諸如攝像機(jī)的成像設(shè)備記錄視頻而獲得的視頻數(shù)據(jù)，并且執(zhí)行對(duì)于物體的檢測(cè)、視頻上物體的移動(dòng)或異常的檢測(cè)等。這樣的圖像監(jiān)視系統(tǒng)例如應(yīng)用于產(chǎn)品的生產(chǎn)線等。

提供了如下的系統(tǒng)：當(dāng)這樣的圖像監(jiān)視系統(tǒng)基于圖像來(lái)檢測(cè)產(chǎn)品的異常時(shí)，該系統(tǒng)能夠在預(yù)定時(shí)刻判定是否存在異常，并且顯示ok判定或ng判定(專利文獻(xiàn)1)。

技術(shù)實(shí)現(xiàn)要素：

技術(shù)問(wèn)題

然后，專利文獻(xiàn)1所描述的技術(shù)只在預(yù)定時(shí)刻顯示判定是否存在異常的結(jié)果，因此在存在各種判定功能(例如，持續(xù)執(zhí)行檢測(cè)而不是在預(yù)定時(shí)刻的功能，只檢測(cè)圖像中的變化而不是異常的功能，等等)的情況下，無(wú)法同時(shí)呈現(xiàn)出這樣的功能如何運(yùn)行。因此，在系統(tǒng)具有多個(gè)判定功能的情況下，存在著無(wú)法同時(shí)掌握這判定功能的運(yùn)行狀態(tài)的問(wèn)題。

考慮到上述這些情況而作出本發(fā)明，并且本發(fā)明的目的在于提供圖像處理設(shè)備、圖像處理系統(tǒng)和圖像處理方法以及程序，其中能夠同時(shí)掌握多種類型的判定操作的狀態(tài)。

解決問(wèn)題的方案

一種圖像處理設(shè)備包括：顯示單元；視頻顯示控制單元，其用于在通過(guò)顯示單元進(jìn)行顯示的預(yù)定顯示區(qū)域中顯示由顯示單元成像的視頻數(shù)據(jù)；以及區(qū)域顯示控制單元，其通過(guò)將多個(gè)顯示要素以彼此不同的方式疊加視頻數(shù)據(jù)上，在顯示區(qū)域中顯示表示判定區(qū)域的多個(gè)顯示要素，其中的判定區(qū)域基于針對(duì)視頻數(shù)據(jù)的多類型的判定功能。

本發(fā)明的有益效果

根據(jù)本發(fā)明，能夠同時(shí)掌握多種類型的判定操作的狀態(tài)。

附圖說(shuō)明

圖1是示出根據(jù)實(shí)施例的圖像處理系統(tǒng)的總體配置的示例的示意圖。

圖2是示出根據(jù)實(shí)施例的信息處理設(shè)備的硬件配置的示例的示意圖。

圖3是示出根據(jù)實(shí)施例的信息處理設(shè)備的功能塊的配置的示例的示意圖。

圖4是示出根據(jù)實(shí)施例的信息處理設(shè)備中的存儲(chǔ)設(shè)備中所存儲(chǔ)的目錄結(jié)構(gòu)的信息的示例的示意圖。

圖5是示出多個(gè)實(shí)時(shí)視頻顯示在待顯示在根據(jù)本實(shí)施例的信息處理設(shè)備的顯示設(shè)備上的觀察者屏幕的示例的示意圖。

圖6是示出將視頻數(shù)據(jù)顯示在設(shè)置屏幕上的狀態(tài)的示例的示意圖，其中的設(shè)置屏幕將顯示在根據(jù)本實(shí)施例的信息處理設(shè)備的顯示設(shè)備上。

圖7是示出在設(shè)置屏幕上的設(shè)置視頻顯示單元中指明全時(shí)檢測(cè)區(qū)域的示例的示意圖，其中的設(shè)置屏幕將顯示在根據(jù)本實(shí)施例的信息處理設(shè)備的顯示設(shè)備上。

圖8是示出在設(shè)置屏幕上的設(shè)置視頻顯示單元中指明觸發(fā)區(qū)域的示例的示意圖，其中的設(shè)置屏幕將顯示在根據(jù)本實(shí)施例的信息處理設(shè)備的顯示設(shè)備上。

圖9是示出在設(shè)置屏幕上的觸發(fā)區(qū)域觀察到變化點(diǎn)的情況下標(biāo)記顯示的示例的示意圖，其中的設(shè)置屏幕將顯示在根據(jù)本實(shí)施例的信息處理設(shè)備的顯示設(shè)備上。

圖10是示出在觸發(fā)區(qū)域中檢測(cè)變化點(diǎn)的操作的示意圖。

圖11是示出在設(shè)置屏幕上的觸發(fā)區(qū)域中觀察到兩個(gè)變化點(diǎn)的情況下所顯示的對(duì)話的示例的示意圖，其中的設(shè)置屏幕將顯示在根據(jù)本實(shí)施例的信息處理設(shè)備的顯示設(shè)備上。

圖12是示出在設(shè)置屏幕上的觸發(fā)區(qū)域中未觀察到變化點(diǎn)的情況下所顯示的對(duì)話的示例的示意圖，其中的設(shè)置屏幕將顯示在根據(jù)本實(shí)施例的信息處理設(shè)備的顯示設(shè)備上。

圖13是示出在設(shè)置屏幕上的設(shè)置視頻顯示單元中指明檢測(cè)區(qū)域的示例的示意圖，其中的設(shè)置屏幕將顯示在根據(jù)本實(shí)施例的信息處理設(shè)備的顯示設(shè)備上。

圖14是示出在設(shè)置屏幕上的設(shè)置視頻顯示單元中指明第二檢測(cè)區(qū)域的示例的示意圖，其中的設(shè)置屏幕將顯示在根據(jù)本實(shí)施例的信息處理設(shè)備的顯示設(shè)備上。

圖15是示出在設(shè)置屏幕上對(duì)于設(shè)置視頻顯示單元中所指明的檢測(cè)區(qū)域的屬性信息進(jìn)行設(shè)置的示例的示意圖，其中的設(shè)置屏幕將顯示在根據(jù)本實(shí)施例的信息處理設(shè)備的顯示設(shè)備上。

圖16是示出在待顯示在根據(jù)本實(shí)施例的信息處理設(shè)備的顯示區(qū)域中的觀察者屏幕上執(zhí)行監(jiān)視操作的狀態(tài)的示例的示意圖。

圖17是示出在待顯示在根據(jù)本實(shí)施例的信息處理設(shè)備的顯示區(qū)域中的觀察者屏幕上執(zhí)行的監(jiān)視操作生成觸發(fā)之前的狀態(tài)的示例的示意圖。

圖18是示出在待顯示在根據(jù)本實(shí)施例的信息處理設(shè)備的顯示區(qū)域中的觀察者屏幕上執(zhí)行的監(jiān)視操作生成觸發(fā)的狀態(tài)的示例的示意圖。

圖19是在待顯示在根據(jù)本實(shí)施例的信息處理設(shè)備的顯示區(qū)域中的觀察者屏幕上執(zhí)行的監(jiān)視操作在監(jiān)視區(qū)域中執(zhí)行圖像判定的狀態(tài)的示例的示意圖。

圖20是示出在待顯示在根據(jù)本實(shí)施例的信息處理設(shè)備的顯示區(qū)域中的觀察者屏幕上執(zhí)行的監(jiān)視操作在監(jiān)視區(qū)域中執(zhí)行圖像判定的狀態(tài)的示例的示意圖。

圖21是示出在待顯示在根據(jù)本實(shí)施例的信息處理設(shè)備的顯示區(qū)域中的觀察者屏幕上執(zhí)行的監(jiān)視操作在監(jiān)視區(qū)域中執(zhí)行圖像判定的狀態(tài)的示例的示意圖。

圖22是示出在待顯示在根據(jù)本實(shí)施例的信息處理設(shè)備的顯示區(qū)域中的觀察者屏幕上執(zhí)行的監(jiān)視操作在監(jiān)視區(qū)域中執(zhí)行圖像判定的狀態(tài)的示例的示意圖。

圖23是示出在待顯示在根據(jù)本實(shí)施例的信息處理設(shè)備的顯示區(qū)域中的觀察者屏幕上執(zhí)行的監(jiān)視操作在監(jiān)視區(qū)域中執(zhí)行圖像判定的狀態(tài)的示例的示意圖。

圖24是示出在待顯示在根據(jù)本實(shí)施例的信息處理設(shè)備的顯示區(qū)域中的觀察者屏幕上執(zhí)行的監(jiān)視操作在監(jiān)視區(qū)域中執(zhí)行圖像判定的狀態(tài)的示例的示意圖。

圖25是示出在待顯示在根據(jù)本實(shí)施例的信息處理設(shè)備的顯示區(qū)域中的觀察者屏幕上顯示所記錄的視頻的狀態(tài)的示例的示意圖。

圖26是示出針對(duì)在待顯示在根據(jù)本實(shí)施例的信息處理設(shè)備的顯示區(qū)域中的觀察者屏幕上再現(xiàn)并且顯示的視頻進(jìn)行再現(xiàn)圖像判定的狀態(tài)的示例的示意圖。

圖27是示出在待顯示在根據(jù)本實(shí)施例的信息處理設(shè)備的顯示區(qū)域中的觀察者屏幕上顯示標(biāo)記列表屏幕的狀態(tài)的示例的示意圖。

圖28是示出在待顯示在根據(jù)本實(shí)施例的信息處理設(shè)備的顯示設(shè)備上的觀察者屏幕上進(jìn)行的監(jiān)視操作的示例的流程圖。

圖29是示出針對(duì)在待顯示在根據(jù)本實(shí)施例的信息處理設(shè)備的顯示區(qū)域中的觀察者屏幕上再現(xiàn)并且顯示的視頻進(jìn)行再現(xiàn)圖像判定的狀態(tài)的操作的示例的示意圖。

圖30是示出在待顯示在根據(jù)本實(shí)施例的變型例的信息處理設(shè)備的顯示區(qū)域中的觀察者屏幕上執(zhí)行的監(jiān)視操作生成觸發(fā)之前的狀態(tài)的示例的示意圖。

圖31是示出在待顯示在根據(jù)本實(shí)施例的變型例的信息處理設(shè)備的顯示區(qū)域中的觀察者屏幕上執(zhí)行的監(jiān)視操作生成觸發(fā)的狀態(tài)的示例的示意圖。

圖32是示出在待顯示在根據(jù)本實(shí)施例的變型例的信息處理設(shè)備的顯示區(qū)域中的觀察者屏幕上執(zhí)行的監(jiān)視操作在監(jiān)視區(qū)域中執(zhí)行圖像判定的狀態(tài)的示例的示意圖。

圖33是示出在待顯示在根據(jù)本實(shí)施例的變型例的信息處理設(shè)備的顯示區(qū)域中的觀察者屏幕上執(zhí)行的監(jiān)視操作在監(jiān)視區(qū)域中執(zhí)行圖像判定的狀態(tài)的示例的示意圖。

圖34是示出在待顯示在根據(jù)本實(shí)施例的變型例的信息處理設(shè)備的顯示區(qū)域中的觀察者屏幕上執(zhí)行的監(jiān)視操作在監(jiān)視區(qū)域中執(zhí)行圖像判定的狀態(tài)的示例的示意圖。

圖35是示出在待顯示在根據(jù)本實(shí)施例的變型例的信息處理設(shè)備的顯示區(qū)域中的觀察者屏幕上執(zhí)行的監(jiān)視操作在監(jiān)視區(qū)域中執(zhí)行圖像判定的狀態(tài)的示例的示意圖。

圖36是示出在待顯示在根據(jù)本實(shí)施例的變型例的信息處理設(shè)備的顯示區(qū)域中的觀察者屏幕上執(zhí)行的監(jiān)視操作在監(jiān)視區(qū)域中執(zhí)行圖像判定的狀態(tài)的示例的示意圖。

圖37是示出在待顯示在根據(jù)本實(shí)施例的變型例的信息處理設(shè)備的顯示區(qū)域中的觀察者屏幕上執(zhí)行的監(jiān)視操作在監(jiān)視區(qū)域中執(zhí)行圖像判定的狀態(tài)的示例的示意圖。

具體實(shí)施方式

下面將參考附圖詳細(xì)描述根據(jù)本發(fā)明的圖像處理設(shè)備、圖像處理系統(tǒng)、圖像處理方法和程序的實(shí)施例。另外，本發(fā)明不限于下面的實(shí)施例，并且下面的實(shí)施例中的構(gòu)成要素包括本領(lǐng)域技術(shù)人員能夠易于想到的構(gòu)成要素，基本相同的構(gòu)成要素，以及所謂的等同物范圍內(nèi)的構(gòu)成要素。此外，在不脫離下面的實(shí)施例的主旨的范圍內(nèi)，能夠?qū)τ跇?gòu)成要素執(zhí)行各種省略、替換、改變和組合。

(圖像處理系統(tǒng)的總體配置)

圖1是示出根據(jù)實(shí)施例的圖像處理系統(tǒng)的總體配置的示例的示意圖。將參考圖1來(lái)描述本實(shí)施例的圖像處理系統(tǒng)1的總體配置。

如圖1所示，本實(shí)施例的圖像處理系統(tǒng)1包括成像設(shè)備2a至2f(成像單元)，信息處理設(shè)備3，以及網(wǎng)絡(luò)4。

成像設(shè)備2a至2f是如下的攝像機(jī)：將來(lái)自對(duì)象的光轉(zhuǎn)換為電信號(hào)，然后對(duì)該對(duì)象進(jìn)行成像(拍攝)，并且生成視頻數(shù)據(jù)，該視頻數(shù)據(jù)是由多個(gè)幀(圖像數(shù)據(jù))形成的移動(dòng)圖像(例如，10[fps])。例如，成像設(shè)備2a至2f對(duì)生產(chǎn)產(chǎn)品的生產(chǎn)設(shè)施、生產(chǎn)線等進(jìn)行成像，并且生成視頻數(shù)據(jù)，用于檢測(cè)工件的異常，其中的工件是制造產(chǎn)品。

此外，在不需要對(duì)于成像設(shè)備2a至2f進(jìn)行相互區(qū)分的情況下，或者在成像設(shè)備2a至2f被統(tǒng)稱的情況下，成像設(shè)備2a至2f被簡(jiǎn)稱為“成像設(shè)備2”。另外，在圖1中，圖像處理系統(tǒng)1包括六個(gè)成像設(shè)備2，但是不限于此，并且可以包括其他數(shù)量的成像設(shè)備2。

信息處理設(shè)備3是個(gè)人計(jì)算機(jī)(pc)、工作站等，其用作基于成像設(shè)備2所成像的視頻數(shù)據(jù)來(lái)執(zhí)行圖像判定的圖像處理設(shè)備。另外，信息處理設(shè)備3連接到諸如生產(chǎn)設(shè)施的外部設(shè)備10從而進(jìn)行相互通信，例如通過(guò)現(xiàn)場(chǎng)總線標(biāo)準(zhǔn)。

網(wǎng)絡(luò)4例如是用于將成像設(shè)備2a至2f與信息處理設(shè)備3相互連接的以太網(wǎng)(注冊(cè)商標(biāo))標(biāo)準(zhǔn)的網(wǎng)絡(luò)。在此情況下，在網(wǎng)絡(luò)4中，通過(guò)諸如傳輸控制協(xié)議(tcp)/互聯(lián)網(wǎng)協(xié)議(ip)的協(xié)議來(lái)執(zhí)行數(shù)據(jù)通信。另外，在此情況下，在成像設(shè)備2a至2f和信息處理設(shè)備3中，提供用于利用諸如tcp/ip的協(xié)議進(jìn)行通信的媒體訪問(wèn)控制(mac)地址，并且分配諸如私人ip地址的ip地址。另外，網(wǎng)絡(luò)4的具體配置例如包括星形布線形式，在該種布線形式中，成像設(shè)備2a至2f和信息處理設(shè)備3中的每一個(gè)通過(guò)作為示例的局域網(wǎng)(lan)線纜連接到包括多個(gè)端口的交換式集線器。

此外，將描述圖1中所示的網(wǎng)絡(luò)4通過(guò)tcp/ip來(lái)執(zhí)行通信的示例，但是不限于此，并且例如可以采用如下的形式或類似形式：在信息處理設(shè)備3側(cè)，設(shè)置多個(gè)視頻圖形陣列(vga)終端或者通用串行總線(usb)端口，并且多個(gè)成像設(shè)備2通過(guò)vga線纜或usb線纜連接到信息處理設(shè)備3。

(信息處理設(shè)備的硬件配置)

圖2是示出根據(jù)本實(shí)施例的信息處理設(shè)備的硬件配置的示意圖。將參考圖2來(lái)描述本實(shí)施例的信息處理設(shè)備3的硬件配置。

如圖2中所示，信息處理設(shè)備3包括中央處理器(cpu)101、只讀存儲(chǔ)器(rom)102、隨機(jī)存取存儲(chǔ)器(ram)103、外部存儲(chǔ)設(shè)備104、顯示器105、網(wǎng)絡(luò)i/f106、鍵盤(pán)107、鼠標(biāo)108、數(shù)字多功能光盤(pán)(dvd)驅(qū)動(dòng)器109、外部設(shè)備i/f111、以及揚(yáng)聲器112。

cpu101是控制信息處理設(shè)備3的整體操作的設(shè)備。rom102是存儲(chǔ)信息處理設(shè)備3的程序的非易失性存儲(chǔ)設(shè)備。ram103是用作cpu101的工作區(qū)域的易失性存儲(chǔ)設(shè)備。

外部存儲(chǔ)設(shè)備104是存儲(chǔ)諸如成像設(shè)備2所成像的視頻數(shù)據(jù)和設(shè)置信息的存儲(chǔ)設(shè)備，諸如硬盤(pán)驅(qū)動(dòng)器(hdd)或固態(tài)驅(qū)動(dòng)器(ssd)。

顯示器105是顯示諸如光標(biāo)、菜單、窗口、字符或圖像的各種信息項(xiàng)目，或者用于執(zhí)行信息處理設(shè)備3的圖像判定處理的應(yīng)用的屏幕的顯示設(shè)備。顯示器105例如是陰極射線管(crt)顯示器、液晶顯示器、等離子體顯示器、有機(jī)電致發(fā)光(el)顯示器等。此外，顯示器105例如通過(guò)vga線纜、高清多媒體接口(hdmi：注冊(cè)商標(biāo))線纜等連接到信息處理設(shè)備3的主體，或者通過(guò)以太網(wǎng)線纜連接到信息處理設(shè)備3的主體。

網(wǎng)絡(luò)i/f106是通過(guò)被連接到網(wǎng)絡(luò)4來(lái)執(zhí)行數(shù)據(jù)通信的接口。網(wǎng)絡(luò)i/f106例如是能夠在諸如tcp/ip的協(xié)議中執(zhí)行通信的網(wǎng)絡(luò)接口卡(nic)。具體地，信息處理設(shè)備3通過(guò)網(wǎng)絡(luò)4和網(wǎng)絡(luò)i/f106從成像設(shè)備2獲取視頻信息。

鍵盤(pán)107是輸入字符、數(shù)字、各種指令的選擇、光標(biāo)的移動(dòng)、設(shè)置信息的設(shè)置等的輸入設(shè)備。此外，設(shè)置號(hào)不限于僅由數(shù)字進(jìn)行配置的設(shè)置號(hào)，并且可以是其中組合字母字符、符號(hào)等的設(shè)置號(hào)。鼠標(biāo)是用于執(zhí)行如下操作的輸入設(shè)備：各種指令的選擇和執(zhí)行，處理目標(biāo)的選擇，光標(biāo)的移動(dòng)，設(shè)置信息的設(shè)置等。

dvd驅(qū)動(dòng)器109是如下的設(shè)備：從作為可拆卸存儲(chǔ)介質(zhì)的示例的dvd10讀取數(shù)據(jù)，將數(shù)據(jù)寫(xiě)入dvd，以及從dvd刪除數(shù)據(jù)。

外部i/f111是通過(guò)連接到外部設(shè)備10來(lái)執(zhí)行數(shù)據(jù)通信的接口。外部設(shè)備i/f111例如是能夠以現(xiàn)場(chǎng)總線標(biāo)準(zhǔn)來(lái)執(zhí)行通信的接口卡。具體地，信息處理設(shè)備3通過(guò)外部設(shè)備i/f111執(zhí)行相對(duì)于外部設(shè)備10的數(shù)據(jù)通信。

揚(yáng)聲器112是根據(jù)應(yīng)用的操作來(lái)輸出聲音的設(shè)備。

上述的cpu101、rom102、ram103、外部存儲(chǔ)設(shè)備104、顯示器105、網(wǎng)絡(luò)i/f106、鍵盤(pán)107、鼠標(biāo)108、dvd驅(qū)動(dòng)器109、外部設(shè)備i/f111、以及揚(yáng)聲器112通過(guò)諸如地址總線和數(shù)據(jù)總線的總線113相互連接從而進(jìn)行相互通信。此外，在通過(guò)以太網(wǎng)線纜進(jìn)行連接的情況下，顯示器105連接到網(wǎng)絡(luò)i/f106，并且在此情況下，通過(guò)諸如tcp/ip的協(xié)議來(lái)執(zhí)行數(shù)據(jù)通信。

(信息處理設(shè)備的塊配置)

圖3是示出根據(jù)本實(shí)施例的信息處理設(shè)備的功能塊的配置的示例的示意圖。將參考圖3來(lái)描述信息處理設(shè)備3的塊配置。

如圖3中所示，信息處理設(shè)備3包括視頻接收單元301、存儲(chǔ)單元302(存儲(chǔ)單元)、輸入單元303、第一再現(xiàn)單元304、觸發(fā)區(qū)域指明單元305、變化點(diǎn)檢測(cè)單元306、檢測(cè)區(qū)域指明單元307、設(shè)置單元308、全時(shí)檢測(cè)區(qū)域指明單元309、視頻分配單元312(視頻顯示控制單元的示例)、觸發(fā)生成單元313、檢測(cè)區(qū)域判定單元314、全時(shí)檢測(cè)區(qū)域判定單元315、第一控制單元316(區(qū)域顯示控制單元的示例)、通知控制單元317、第二再現(xiàn)單元318(視頻顯示控制單元的示例)、區(qū)域顯示控制單元319(區(qū)域顯示控制單元的示例)、列表控制單元320(列表控制單元)、第二控制單元321、顯示控制單元331、外部輸出單元332、顯示單元333(顯示單元)、以及通知單元334(通知單元)。此外，在圖3中，為了簡(jiǎn)化描述，未示出網(wǎng)絡(luò)4。另外，在上述功能部的每個(gè)功能部中，觸發(fā)區(qū)域指明單元305、檢測(cè)區(qū)域指明單元307、全時(shí)檢測(cè)區(qū)域指明單元309、觸發(fā)生成單元313、檢測(cè)區(qū)域判定單元314、全時(shí)檢測(cè)區(qū)域判定單元315以及第一控制單元316對(duì)應(yīng)于本發(fā)明的“時(shí)間信息管理單元”的示例。

視頻接收單元301是通過(guò)網(wǎng)絡(luò)4執(zhí)行相對(duì)于成像設(shè)備2的數(shù)據(jù)通信并且從成像設(shè)備2接收視頻數(shù)據(jù)的功能部。視頻接收單元301將接收到的視頻數(shù)據(jù)存儲(chǔ)在存儲(chǔ)單元302中。視頻接收單元301通過(guò)圖2中所示的接口i/f106來(lái)實(shí)現(xiàn)。

存儲(chǔ)單元302是存儲(chǔ)從視頻接收單元301接收到的視頻數(shù)據(jù)、各種設(shè)置信息項(xiàng)目、上述時(shí)間信息等的存儲(chǔ)設(shè)備。存儲(chǔ)單元302通過(guò)識(shí)別視頻數(shù)據(jù)由哪個(gè)成像設(shè)備2生成，來(lái)存儲(chǔ)從視頻接收單元301接收到的視頻數(shù)據(jù)。存儲(chǔ)單元302例如由圖2中所示的ram103或外部存儲(chǔ)設(shè)備104來(lái)實(shí)現(xiàn)。

輸入單元303是執(zhí)行對(duì)于信息處理設(shè)備3所執(zhí)行的圖像判定操作等的操縱輸入的設(shè)備。輸入單元303由圖2中所示的鍵盤(pán)107和鼠標(biāo)108來(lái)實(shí)現(xiàn)。

第一再現(xiàn)單元304是如下的功能部：根據(jù)來(lái)自用戶操作的輸入單元303的操縱信號(hào)，將從存儲(chǔ)單元302獲取到的視頻數(shù)據(jù)發(fā)送到顯示控制單元331，并且針對(duì)顯示控制單元331在顯示單元333上再現(xiàn)并且顯示該視頻數(shù)據(jù)。具體地，第一再現(xiàn)單元304在設(shè)置屏幕500的設(shè)置視頻顯示單元502上再現(xiàn)并且顯示視頻數(shù)據(jù)，其中的設(shè)置屏幕500顯示在下面圖6等中所描述的顯示單元333上。第一再現(xiàn)單元304由圖2中所示的cpu101所執(zhí)行的程序來(lái)實(shí)現(xiàn)。

觸發(fā)區(qū)域指明單元305是根據(jù)來(lái)自用戶所操縱的輸入單元303的操縱信號(hào)來(lái)指明觸發(fā)區(qū)域的功能部，該觸發(fā)區(qū)域確定顯示單元333(下面圖6等中所描述的設(shè)置視頻顯示單元502)中的視頻數(shù)據(jù)的顯示區(qū)域中觸發(fā)的時(shí)刻。觸發(fā)區(qū)域指明單元305將所指明的觸發(fā)區(qū)域的信息與每個(gè)成像設(shè)備2相關(guān)聯(lián)地存儲(chǔ)在存儲(chǔ)單元302中。另外，觸發(fā)區(qū)域的信息例如是諸如表示觸發(fā)區(qū)域在視頻數(shù)據(jù)的顯示區(qū)域中的位置的坐標(biāo)和觸發(fā)區(qū)域的形狀的信息。觸發(fā)區(qū)域指明單元305所指明的觸發(fā)區(qū)域用于下面描述的閃速檢測(cè)功能。觸發(fā)區(qū)域指明單元305由圖2中所示的cpu101所執(zhí)行的程序來(lái)實(shí)現(xiàn)。

在由觸發(fā)區(qū)域指明單元305指明觸發(fā)區(qū)域的情況下，變化點(diǎn)檢測(cè)單元306是如下的功能部：獲取由第一再現(xiàn)單元304在指定時(shí)間點(diǎn)再現(xiàn)并且顯示的視頻數(shù)據(jù)的幀的時(shí)間之前和之后的預(yù)定時(shí)間的幀，并且在獲取到的幀中，針對(duì)每個(gè)幀計(jì)算該幀與緊前的幀的像素值的差異，并且基于計(jì)算出的差異來(lái)檢測(cè)觸發(fā)區(qū)域內(nèi)關(guān)于圖像的變化點(diǎn)。下面將描述變化點(diǎn)。在差異的計(jì)算方法中，例如將兩幀的觸發(fā)區(qū)域中的像素值相互比較，并且將具有彼此相差大于或等于預(yù)定靈敏度的像素值的像素總數(shù)計(jì)算為差異。此外，在幀是灰度階中的圖像的情況下，像素值與亮度值一致，并且因此，兩個(gè)幀中的觸發(fā)區(qū)域中的亮度值可以相互比較，并且具有相差大于或等于預(yù)定靈敏度的亮度值的像素值的總數(shù)被計(jì)算為差異。另外，在幀是由rgb的像素值配置而成的圖像的情況下，可以將紅(r)、綠(g)和藍(lán)(b)中的任意一個(gè)的像素值相互比較，并且如上所述，具有相差大于或等于預(yù)定靈敏度的亮度值的像素值的總數(shù)被計(jì)算為差異。另外，可以在幀的圖像中執(zhí)行邊緣檢測(cè)處理，并且邊緣部分的總數(shù)可以計(jì)算為差異。變化點(diǎn)檢測(cè)單元306由圖2中所示的cpu101所執(zhí)行的程序來(lái)實(shí)現(xiàn)。

檢測(cè)區(qū)域指明單元307是根據(jù)來(lái)自用戶所操縱的輸入單元303的操縱信號(hào)來(lái)指明檢測(cè)區(qū)域的功能部，其中的檢測(cè)區(qū)域是圖像判定操作的目標(biāo)，圖像判定操作檢測(cè)顯示單元333(設(shè)置視頻顯示單元502)中的視頻數(shù)據(jù)的顯示區(qū)域中的異常。檢測(cè)區(qū)域指明單元307將所指定的檢測(cè)區(qū)域的信息與每個(gè)成像設(shè)備2相關(guān)聯(lián)地存儲(chǔ)在存儲(chǔ)單元302中。另外，檢測(cè)區(qū)域的信息例如是諸如表示檢測(cè)區(qū)域在視頻數(shù)據(jù)的顯示區(qū)域中的位置的坐標(biāo)和檢測(cè)區(qū)域的形狀的信息。另外，如下所述，檢測(cè)區(qū)域指明單元307可以在視頻數(shù)據(jù)的顯示區(qū)域中指明多個(gè)檢測(cè)區(qū)域。檢測(cè)區(qū)域指明單元307所指明的檢測(cè)區(qū)域用于下面描述的閃速檢測(cè)功能。檢測(cè)區(qū)域指明單元307由圖2中所示的cpu101所執(zhí)行的程序來(lái)實(shí)現(xiàn)。

設(shè)置單元308是根據(jù)來(lái)自用戶所操縱的輸入單元303的操縱信號(hào)來(lái)設(shè)置各種設(shè)置信息項(xiàng)目并將設(shè)置信息存儲(chǔ)在存儲(chǔ)單元302中的功能部。另外，設(shè)置單元308從存儲(chǔ)單元302發(fā)送在設(shè)置到顯示控制單元331的設(shè)置信息中進(jìn)行所需要的信息，并且針對(duì)顯示控制單元331，將設(shè)置信息顯示在顯示單元333上。設(shè)置單元308由圖2中所示的cpu101所執(zhí)行的程序來(lái)實(shí)現(xiàn)。

全時(shí)檢測(cè)區(qū)域指明單元309是根據(jù)來(lái)自用戶所操縱的輸入單元303的操縱信號(hào)來(lái)指明全時(shí)檢測(cè)區(qū)域的功能部，其中的全時(shí)檢測(cè)區(qū)域是全時(shí)地檢測(cè)顯示單元333單元5的視頻數(shù)據(jù)的顯示區(qū)域(設(shè)置視頻顯示單元502)中的異常的圖像判定的目標(biāo)。全時(shí)檢測(cè)區(qū)域指明單元309將所指明的全時(shí)檢測(cè)區(qū)域的信息與每個(gè)成像設(shè)備2相關(guān)聯(lián)地存儲(chǔ)在存儲(chǔ)單元302中。另外，全時(shí)檢測(cè)區(qū)域的信息例如是諸如表示全時(shí)檢測(cè)區(qū)域在視頻數(shù)據(jù)的顯示區(qū)域中的位置的坐標(biāo)和全時(shí)檢測(cè)區(qū)域的形狀的信息。全時(shí)檢測(cè)區(qū)域指明單元309所指明的全時(shí)檢測(cè)區(qū)域用于下面描述的全時(shí)檢測(cè)功能。全時(shí)檢測(cè)區(qū)域指明單元309是通過(guò)圖2中所示的cpu101所執(zhí)行的程序來(lái)實(shí)現(xiàn)。

視頻分配部單元312是如下的功能部：根據(jù)來(lái)自用戶所操縱的輸入單元303的操縱信號(hào)，將從視頻接收單元301獲取到的實(shí)時(shí)視頻數(shù)據(jù)發(fā)送到顯示控制單元331，并且針對(duì)顯示控制單元331在顯示單元333上顯示該視頻數(shù)據(jù)。具體地說(shuō)，視頻分配單元312將相應(yīng)的視頻數(shù)據(jù)進(jìn)行分類并且顯示在下面圖5等中所描述的顯示在顯示單元333上的觀察者屏幕400的視頻顯示單元401a至401f上。另外，視頻分配單元312將顯示在視頻顯示單元401上的每個(gè)視頻數(shù)據(jù)項(xiàng)目存儲(chǔ)(記錄)在存儲(chǔ)單元302中。視頻分配單元312由圖2中所示的cpu101所執(zhí)行的程序來(lái)實(shí)現(xiàn)。

觸發(fā)生成單元313是如下的功能部：在監(jiān)視操作啟動(dòng)之后，將差別圖像與下面所述的圖16中的觀察者屏幕400的視頻顯示單元401a至401f的觸發(fā)區(qū)域中的視頻數(shù)據(jù)幀中的觸發(fā)區(qū)域的圖像進(jìn)行比較，并且在觸發(fā)時(shí)刻生成觸發(fā)信號(hào)。觸發(fā)生成單元313由圖2中所示的cpu101所執(zhí)行的程序來(lái)實(shí)現(xiàn)。

檢測(cè)區(qū)域判定單元314是如下的功能部：在接收到觸發(fā)生成單元313所生成的觸發(fā)信號(hào)的時(shí)刻的設(shè)置時(shí)間之前或設(shè)置時(shí)間之后，將檢測(cè)標(biāo)準(zhǔn)圖像與上述視頻顯示單元401a至401f的檢測(cè)區(qū)域中的視頻數(shù)據(jù)幀中的檢測(cè)區(qū)域的圖像進(jìn)行比較，并且判定是否存在異常。檢測(cè)區(qū)域判定單元314通過(guò)由圖2中所示的cpu101所執(zhí)行的程序來(lái)實(shí)現(xiàn)。

全時(shí)檢測(cè)區(qū)域判定單元315是如下的功能部：在監(jiān)視操作啟動(dòng)之后，將全時(shí)檢測(cè)標(biāo)準(zhǔn)圖像與視頻數(shù)據(jù)的幀的全時(shí)檢測(cè)區(qū)域中的圖像進(jìn)行比較，并且持續(xù)地執(zhí)行在下面描述的圖16中的觀察者屏幕400的視頻顯示單元401a至401f的全時(shí)檢測(cè)區(qū)域中是否存在異常的判定。全時(shí)檢測(cè)區(qū)域判定單元315通過(guò)由圖2中所示的cpu101所執(zhí)行的程序來(lái)實(shí)現(xiàn)。

第一控制單元316是如下的功能部：根據(jù)來(lái)自用戶所操縱的輸入單元303的操作信號(hào)來(lái)控制除了下面描述的圖16中的觀察者屏幕400上的監(jiān)視操作的啟動(dòng)和停止以外的觀察者屏幕400的全部操作。第一控制控制單元316通過(guò)由圖2中所示的cpu101所執(zhí)行的程序來(lái)實(shí)現(xiàn)。

通知控制單元317是基于檢測(cè)區(qū)域判定單元314進(jìn)行的判定檢測(cè)區(qū)域的結(jié)果來(lái)向通知單元334輸出聲音的功能部。通知控制單元317通過(guò)由圖2中所示的cpu101所執(zhí)行的程序來(lái)實(shí)現(xiàn)。

第二再現(xiàn)單元318是如下的功能部：根據(jù)來(lái)自用戶操作的輸入單元303的操縱信號(hào)，將從存儲(chǔ)單元302獲取到的視頻數(shù)據(jù)發(fā)送到顯示控制單元331，并且針對(duì)顯示控制單元331在顯示單元333上再現(xiàn)并且顯示該視頻數(shù)據(jù)。具體地說(shuō)，第二再現(xiàn)單元318將對(duì)應(yīng)的視頻數(shù)據(jù)進(jìn)行排序，并且將經(jīng)過(guò)排序的視頻數(shù)據(jù)再現(xiàn)和顯示在下面圖25等中所描述的顯示單元333上的觀察者屏幕700的視頻顯示單元701a至701f上。第二再現(xiàn)單元318通過(guò)由圖2中所示的cpu101所執(zhí)行的程序來(lái)實(shí)現(xiàn)。

區(qū)域顯示控制單元319是如下的功能部：基于存儲(chǔ)在輸入單元303中的每個(gè)判定區(qū)域的檢測(cè)時(shí)間的信息，顯示每個(gè)判定區(qū)域的狀態(tài)，其中的判定區(qū)域?qū)⒁B加在觀察者屏幕700的視頻顯示單元701a至701f上再現(xiàn)和顯示的視頻數(shù)據(jù)的幀上。區(qū)域顯示控制單元319通過(guò)由圖2中所示的cpu101所執(zhí)行的程序來(lái)實(shí)現(xiàn)。

列表控制單元320是如下的功能部：讀取存儲(chǔ)在存儲(chǔ)單元302上的標(biāo)記文件，并且在觀察者屏幕700上顯示下面圖27所描述的標(biāo)記列表屏幕800，在該標(biāo)記列表屏幕800上顯示標(biāo)記文件的內(nèi)容。在此，標(biāo)記文件是按順序記錄全時(shí)檢測(cè)功能檢測(cè)異常的時(shí)間、閃速檢測(cè)功能生成觸發(fā)的時(shí)間(生成觸發(fā)信號(hào))以及異常被檢測(cè)到的時(shí)間。列表控制單元320通過(guò)由圖2中所示的cpu101所執(zhí)行的程序來(lái)實(shí)現(xiàn)。

第二控制單元321是控制觀察者屏幕700的全部操作的功能部。列表控制單元321通過(guò)由圖2中所示的cpu101所執(zhí)行的程序來(lái)實(shí)現(xiàn)。

顯示控制單元331是控制顯示單元333的顯示操作的功能部。具體地，顯示控制單元331在顯示單元333上顯示：從第一再現(xiàn)單元304獲取到的視頻數(shù)據(jù)，通過(guò)設(shè)置單元308設(shè)置的設(shè)置信息，通過(guò)觸發(fā)區(qū)域指明單元305所指明的觸發(fā)區(qū)域，通過(guò)檢測(cè)區(qū)域指明單元307所指明的檢測(cè)區(qū)域等。顯示控制單元331由圖2中所示的cpu101所執(zhí)行的程序來(lái)實(shí)現(xiàn)。

外部輸出單元332是在檢測(cè)區(qū)域判定單元314或全時(shí)檢測(cè)區(qū)域判定單元315判定存在異常的情況下向外部設(shè)備10輸出異常信號(hào)的功能部。外部輸出單元332通過(guò)圖2中所示的外部設(shè)備i/f111來(lái)實(shí)現(xiàn)。此外，外部輸出單元332輸出異常信號(hào)，但是不限于此，并且可以執(zhí)行諸如通過(guò)電子郵件向外部設(shè)備10傳送用于通知異常的批處理文件，或者在觀察者屏幕400上通知異常的過(guò)程(例如，通過(guò)燈圖標(biāo)的閃爍顯示)。

顯示單元333是根據(jù)顯示控制單元331的控制來(lái)顯示各種數(shù)據(jù)項(xiàng)目的設(shè)備。在本實(shí)施例中，顯示單元333尤其通過(guò)圖2中所示的cpu101所執(zhí)行的程序(應(yīng)用)來(lái)顯示下面所描述的觀察者屏幕400、設(shè)置屏幕500、觀察者屏幕700等。顯示單元333通過(guò)圖2中所示的顯示器105來(lái)實(shí)現(xiàn)。

通知單元334是根據(jù)通知控制單元317的控制來(lái)輸出聲音的設(shè)備。通知單元334通過(guò)圖2中所示的揚(yáng)聲器112來(lái)實(shí)現(xiàn)。

此外，第一再現(xiàn)單元304、觸發(fā)區(qū)域指明單元305、變化點(diǎn)檢測(cè)單元306、檢測(cè)區(qū)域指明單元307、設(shè)置單元308、全時(shí)檢測(cè)區(qū)域指明單元309、視頻分配單元312、觸發(fā)生成單元313、檢測(cè)區(qū)域判定單元314、全時(shí)檢測(cè)區(qū)域判定單元315、第一控制單元316、通知控制單元317、第二再現(xiàn)單元318、區(qū)域顯示控制單元319、列表控制單元320、第二控制單元321以及顯示通知單元331中的一部分或者全部可以通過(guò)諸如專用集成電路(asic)或現(xiàn)場(chǎng)可編程門(mén)陣列(fpga)的硬件電路來(lái)實(shí)現(xiàn)，而不是通過(guò)作為軟件的程序。

另外，圖3中所示的每個(gè)功能單元的功能從概念上進(jìn)行描述，但不限于此。例如，作為獨(dú)立功能部的圖3中所示的多個(gè)功能部可以配置為一個(gè)功能部。另一方面，圖3中的一個(gè)功能部的功能能夠分為多個(gè)功能，因此該功能部可以配置為多個(gè)功能部。

另外，為了簡(jiǎn)化下面的描述，顯示控制單元331將接收到的數(shù)據(jù)顯示在顯示單元333上的表達(dá)將被簡(jiǎn)化為將數(shù)據(jù)發(fā)送到顯示控制單元331的功能部將數(shù)據(jù)顯示在顯示單元333上(或者顯示單元333上所顯示的屏幕上)的表達(dá)。例如，在第一再現(xiàn)單元304向顯示控制單元331發(fā)送視頻數(shù)據(jù)，并且針對(duì)顯示控制單元331在顯示單元333上再現(xiàn)并且顯示視頻數(shù)據(jù)的情況下，可以簡(jiǎn)單地表達(dá)為第一再現(xiàn)單元304在顯示單元333上再現(xiàn)并且顯示視頻數(shù)據(jù)。

(存儲(chǔ)部中存儲(chǔ)的信息的目錄結(jié)構(gòu))

圖4是示出根據(jù)實(shí)施例的信息處理設(shè)備中的存儲(chǔ)設(shè)備中所存儲(chǔ)的信息的目錄結(jié)構(gòu)的示例的示意圖。將參考圖4來(lái)描述用于管理存儲(chǔ)單元302中的信息的目錄結(jié)構(gòu)。

首先，如圖4中所示，存儲(chǔ)單元302形成“設(shè)置”文件夾和“共用”文件夾作為根文件夾。在“設(shè)置”文件夾中，形成用于存儲(chǔ)每個(gè)成像設(shè)備2相關(guān)的信息的“cam1”至“cam6”文件夾(此后，簡(jiǎn)稱和統(tǒng)稱為“相機(jī)文件夾”)?！癱am1”至“cam6”文件夾對(duì)應(yīng)于與各個(gè)成像設(shè)備2a至2f相關(guān)的文件夾。

如圖4中所示，在每個(gè)相機(jī)文件夾中，存儲(chǔ)區(qū)域信息文件、時(shí)間信息文件和圖像數(shù)據(jù)。這里，區(qū)域信息文件是包括針對(duì)對(duì)應(yīng)的成像設(shè)備2設(shè)置的每個(gè)判定區(qū)域的位置信息(諸如表示區(qū)域的形狀和位置的坐標(biāo)的信息)和下面描述的屬性信息的文件。另外，時(shí)間信息文件是包括針對(duì)對(duì)應(yīng)的成像設(shè)備2開(kāi)始和結(jié)束監(jiān)視操作的時(shí)間、指定(設(shè)置)每個(gè)判定區(qū)域的時(shí)間、以及監(jiān)視操作期間檢測(cè)每個(gè)判定區(qū)域的時(shí)間的文件。另外，圖像數(shù)據(jù)是諸如下面描述的觸發(fā)標(biāo)準(zhǔn)圖像、差異圖像、檢測(cè)標(biāo)準(zhǔn)圖像以及全時(shí)檢測(cè)標(biāo)準(zhǔn)圖像。

另外，在“共有”文件夾中，存儲(chǔ)上面描述的標(biāo)記文件夾。

此外，圖4中所示的用于管理信息的目錄結(jié)構(gòu)是示例，并且不限于此，信息可以通過(guò)其他數(shù)據(jù)結(jié)構(gòu)來(lái)管理。另外，圖4中所示的文件夾的名稱也是示例，不限于此。

(觀察者屏幕的配置)

圖5是示出多個(gè)實(shí)時(shí)視頻顯示在待顯示在根據(jù)本實(shí)施例的信息處理設(shè)備的顯示設(shè)備上的觀察者屏幕的示例的示意圖。將參考圖5來(lái)描述觀察者屏幕400的配置和顯示多個(gè)實(shí)時(shí)視頻的操作。

圖5中所示的觀察者屏幕400根據(jù)通過(guò)cpu101所執(zhí)行的程序(應(yīng)用)而顯示在顯示單元333上。在實(shí)時(shí)顯示從多個(gè)成像設(shè)備2接收到的視頻數(shù)據(jù)，并且執(zhí)行圖像判定操作(監(jiān)視操作)的情況下，觀察者屏幕400是在每個(gè)被指明的判定區(qū)域中執(zhí)行圖像判定的屏幕。具體地，在觀察者屏幕400中，在執(zhí)行圖像判定操作(監(jiān)視操作)的情況下，觸發(fā)生成單元313在觸發(fā)時(shí)刻，在觸發(fā)區(qū)域指明單元305所指明的觸發(fā)區(qū)域中生成觸發(fā)信號(hào)。另外，在觀察者屏幕400中，在通過(guò)檢測(cè)區(qū)域判定單元314接收到觸發(fā)信號(hào)的時(shí)間的設(shè)置時(shí)間之前或之后，在檢測(cè)區(qū)域指明單元307所指明的檢測(cè)區(qū)域中確定存在或不存在異常的屏幕。另外，在觀察者屏幕400中，在執(zhí)行圖像判定操作(監(jiān)視操作)的情況下，全時(shí)檢測(cè)區(qū)域判定單元315持續(xù)地判定在全時(shí)檢測(cè)區(qū)域指明單元309所指定的全時(shí)檢測(cè)區(qū)域中存在或不存在異常。

如圖5中所示，觀察者屏幕400包括視頻顯示單元401a至401f、監(jiān)視開(kāi)始按鈕411、監(jiān)視停止按鈕412、監(jiān)視設(shè)置按鈕413、以及狀態(tài)顯示單元421a至421f。

視頻顯示單元401a至401f是根據(jù)來(lái)自用戶所操縱的輸入單元303的操縱信號(hào)，分別顯示由視頻分配單元312經(jīng)過(guò)視頻接收單元301從成像設(shè)備2a至2f獲取到的實(shí)時(shí)視頻數(shù)據(jù)的顯示部。另外，在根據(jù)由用戶所操縱的輸入單元303的操縱(例如，鼠標(biāo)108的點(diǎn)擊操縱等，以下同樣適用)而被按下的情況下，視頻顯示單元401a至401f能夠處于選擇狀態(tài)。此外，在視頻顯示單元401a至401f被不加區(qū)分地提及或統(tǒng)稱的情況下，視頻顯示單元401a至401f將簡(jiǎn)稱為“視頻顯示單元401”。

當(dāng)根據(jù)用戶對(duì)于輸入單元303的操縱而按下監(jiān)視開(kāi)始按鈕411時(shí)，觸發(fā)生成單元313在觸發(fā)時(shí)刻，在觸發(fā)區(qū)域中生成觸發(fā)信號(hào)，其中的觸發(fā)區(qū)域由觸發(fā)區(qū)域指明單元305在處于顯示實(shí)時(shí)視頻數(shù)據(jù)的選擇狀態(tài)的視頻顯示單元401上進(jìn)行指明，并且在接收到觸發(fā)信號(hào)的時(shí)間的設(shè)置時(shí)間之前或設(shè)置時(shí)間之后，檢測(cè)區(qū)域判定單元314在檢測(cè)區(qū)域中開(kāi)始判定存在或不存在異常。此外，在處于顯示實(shí)時(shí)視頻數(shù)據(jù)的選擇狀態(tài)的視頻顯示單元401中，開(kāi)始判定在全時(shí)檢測(cè)區(qū)域指明部所指明的全時(shí)檢測(cè)區(qū)域中存在或不存在異常。

當(dāng)根據(jù)用戶對(duì)于輸入單元303的操縱而按下監(jiān)視停止按鈕412時(shí)，在處于選擇狀態(tài)的視頻顯示單元401中，停止如下操作：在觸發(fā)時(shí)刻生成觸發(fā)信號(hào)的觸發(fā)生成單元313的生成操作，判定檢測(cè)區(qū)域中存在或不存在異常的檢測(cè)區(qū)域判定單元314的判定操作，以及判定全時(shí)檢測(cè)區(qū)域中存在或不存在異常的全時(shí)檢測(cè)區(qū)域判定單元315的全時(shí)判定操作。

當(dāng)根據(jù)用戶對(duì)于輸入單元303的操縱而按下監(jiān)視設(shè)置按鈕413時(shí)，為了設(shè)置每個(gè)判定區(qū)域，通過(guò)第一控制單元316在顯示單元333上顯示下面描述的圖6等中所示的設(shè)置屏幕500。

狀態(tài)顯示單元421a至421f是顯示與每個(gè)視頻顯示單元401對(duì)應(yīng)的成像設(shè)備2的狀態(tài)的顯示部。例如，在狀態(tài)顯示單元421a至421f中，顯示表示成像設(shè)備2的狀態(tài)的內(nèi)容，諸如“未連接”、“未設(shè)置”、“設(shè)置完成”以及“監(jiān)視中”。“未連接”表示與視頻顯示單元401對(duì)應(yīng)的成像設(shè)備2未連接到圖像處理系統(tǒng)1的狀態(tài)，并且視頻數(shù)據(jù)未顯示在視頻顯示單元401的狀態(tài)?！拔丛O(shè)置”表示針對(duì)顯示在視頻顯示單元401上的視頻數(shù)據(jù)未設(shè)置觸發(fā)區(qū)域、檢測(cè)區(qū)域、全時(shí)檢測(cè)區(qū)域等的狀態(tài)?！霸O(shè)置完成”表示完成針對(duì)顯示在視頻顯示單元401上的視頻數(shù)據(jù)的觸發(fā)區(qū)域、檢測(cè)區(qū)域、全時(shí)檢測(cè)區(qū)域等的設(shè)置的狀態(tài)?！氨O(jiān)視中”表示基于每個(gè)被設(shè)置的判定區(qū)域的信息來(lái)執(zhí)行圖像判定操作(監(jiān)視操作)的狀態(tài)。此外，在視頻顯示單元421a至421f被不加區(qū)分地提及或統(tǒng)稱的情況下，狀態(tài)顯示單元421a至421f將被簡(jiǎn)稱為“狀態(tài)顯示單元421”。

(設(shè)置屏幕的配置)

圖6是示出將視頻數(shù)據(jù)顯示在待顯示于根據(jù)本實(shí)施例的信息處理設(shè)備的顯示設(shè)備上的設(shè)置屏幕的狀態(tài)的示例的示意圖。將參考下面描述的圖6和圖8來(lái)描述設(shè)置屏幕500的配置。

設(shè)置屏幕500是指明觸發(fā)區(qū)域、檢測(cè)區(qū)域和全時(shí)檢測(cè)區(qū)域并且在檢測(cè)區(qū)域和全時(shí)檢測(cè)區(qū)域中設(shè)置圖像判定的靈敏度、閾值等的屏幕。圖6中所示的設(shè)置屏幕500是用于設(shè)置全時(shí)檢測(cè)功能的屏幕，包括：相機(jī)選擇選項(xiàng)卡501、設(shè)置視頻顯示單元502、再現(xiàn)按鈕503a、暫停按鈕503b、快進(jìn)按鈕503c、快退按鈕503d、停止按鈕503e、搜索條503、滑塊505、時(shí)間顯示單元506、設(shè)置讀取按鈕511、設(shè)置寫(xiě)入按鈕512、設(shè)置反映按鈕513、關(guān)閉按鈕514、區(qū)域選擇標(biāo)簽551、全時(shí)檢測(cè)區(qū)域信息部分561、以及全時(shí)檢測(cè)區(qū)域按鈕組562。

相機(jī)選擇選項(xiàng)卡501是選擇將期望由用戶來(lái)指明的觸發(fā)區(qū)域、檢測(cè)區(qū)域、以及全時(shí)檢測(cè)區(qū)域的成像設(shè)備2a至2f的視頻數(shù)據(jù)項(xiàng)目中的哪個(gè)視頻數(shù)據(jù)項(xiàng)目顯示在設(shè)置視頻顯示單元502上的操縱部。例如，成像設(shè)備2a至2f所成像的視頻數(shù)據(jù)項(xiàng)目分別與“1”至“6”相關(guān)聯(lián)，并且在圖6的示例中，示出選擇“6”(即，成像設(shè)備2f的視頻數(shù)據(jù))的示例。

設(shè)置視頻顯示單元502是根據(jù)來(lái)自用戶所操縱的輸入單元303的操縱信號(hào)，通過(guò)第一再現(xiàn)單元304來(lái)再現(xiàn)并且顯示從存儲(chǔ)單元302獲取的視頻數(shù)據(jù)的顯示部。在圖6的示例中，根據(jù)用戶對(duì)輸入單元303的操縱而選擇“6”的相機(jī)選擇選項(xiàng)卡501并且通過(guò)第一再現(xiàn)單元304進(jìn)行操作，第一再現(xiàn)單元304在設(shè)置視頻顯示單元502上再現(xiàn)并且顯示成像設(shè)備2f所成像的視頻數(shù)據(jù)。

當(dāng)根據(jù)用戶對(duì)于輸入單元303的操縱而按下再現(xiàn)按鈕503時(shí)，通過(guò)第一再現(xiàn)單元304再現(xiàn)并且啟動(dòng)視頻數(shù)據(jù)在設(shè)置視頻顯示單元502上進(jìn)行顯示。當(dāng)根據(jù)用戶對(duì)于輸入單元303的操縱來(lái)按下暫停按鈕503b時(shí)，通過(guò)第一再現(xiàn)單元304再現(xiàn)并且顯示在設(shè)置視頻顯示單元502的視頻數(shù)據(jù)被暫停。當(dāng)根據(jù)用戶對(duì)于輸入單元303的操縱來(lái)按下快進(jìn)按鈕503c時(shí)，再現(xiàn)并且顯示在設(shè)置視頻顯示單元502上的視頻數(shù)據(jù)通過(guò)第一再現(xiàn)單元304經(jīng)歷快進(jìn)顯示。當(dāng)根據(jù)用戶對(duì)于輸入單元303的操縱來(lái)按下快退按鈕503d時(shí)，再現(xiàn)并且顯示在設(shè)置視頻顯示單元502上的視頻數(shù)據(jù)通過(guò)第一再現(xiàn)單元304經(jīng)歷快退顯示。當(dāng)根據(jù)用戶對(duì)于輸入單元303的操縱而按下停止按鈕503e時(shí)，再現(xiàn)并且顯示在設(shè)置視頻顯示單元502上的視頻數(shù)據(jù)通過(guò)第一再現(xiàn)單元304被停止。

搜索條504是根據(jù)設(shè)置在搜索條上的滑塊505的位置來(lái)表示視頻數(shù)據(jù)再現(xiàn)并且顯示在設(shè)置視頻顯示單元502上的時(shí)間的棒狀體。滑塊505是滑動(dòng)到搜索條504上與設(shè)置視頻顯示單元502上所再現(xiàn)和顯示的視頻數(shù)據(jù)的成像時(shí)間(使得所顯示的幀成像的時(shí)間)對(duì)應(yīng)的位置的主體和操縱部。相反，在滑塊505根據(jù)用戶對(duì)于輸入單元303的操縱進(jìn)行滑動(dòng)的情況下，通過(guò)第一再現(xiàn)單元304，在設(shè)置視頻顯示單元502上顯示與滑塊505在搜索條504上所處的位置對(duì)應(yīng)的成像時(shí)刻的視頻數(shù)據(jù)的幀。

時(shí)間顯示單元506是顯示通過(guò)第一再現(xiàn)單元304再現(xiàn)并且顯示在設(shè)置視頻顯示單元502上的視頻數(shù)據(jù)的成像日期和成像時(shí)間的顯示部。

當(dāng)根據(jù)用戶對(duì)于輸入單元303的操作而按下設(shè)置讀取按鈕511時(shí)，設(shè)置單元308讀取出存儲(chǔ)在存儲(chǔ)單元302中的諸如相機(jī)選擇選項(xiàng)卡501所選擇的圖像設(shè)備2的觸發(fā)區(qū)域、檢測(cè)區(qū)域和全時(shí)檢測(cè)區(qū)域的信息等，并且顯示在每個(gè)設(shè)置屏幕500的顯示部上。當(dāng)根據(jù)用戶對(duì)于輸入單元303的操縱而按下設(shè)置寫(xiě)入按鈕512時(shí)，設(shè)置單元308將設(shè)置在設(shè)置屏幕500上的諸如觸發(fā)區(qū)域、檢測(cè)區(qū)域和全時(shí)檢測(cè)區(qū)域的信息等與相機(jī)選擇選項(xiàng)卡501所選擇的成像設(shè)備2相關(guān)聯(lián)地存儲(chǔ)在存儲(chǔ)單元302中。當(dāng)根據(jù)用戶對(duì)于輸入單元303的操縱而按下設(shè)置反映按鈕513時(shí)，設(shè)置單元308使得設(shè)置在設(shè)置屏幕500上的觸發(fā)區(qū)域、檢測(cè)區(qū)域、全時(shí)檢測(cè)區(qū)域的信息等的設(shè)置信息生效直至觀察者屏幕400、設(shè)置屏幕500等被關(guān)閉(例如，暫時(shí)存儲(chǔ)在ram103中)。

當(dāng)根據(jù)用戶對(duì)于輸出單元303的操縱而按下關(guān)閉按鈕514時(shí)，設(shè)置單元308將設(shè)置屏幕500關(guān)閉，并且將觀察者屏幕400顯示在顯示單元333上。

區(qū)域選擇選項(xiàng)卡551由用于指明全時(shí)檢測(cè)功能中所使用的全時(shí)檢測(cè)區(qū)域的選項(xiàng)卡和用于指明閃速檢測(cè)功能中所使用的檢測(cè)區(qū)域和觸發(fā)區(qū)域的選項(xiàng)卡構(gòu)成。例如，圖6中所示的設(shè)置屏幕500表示通過(guò)用戶對(duì)于輸入單元303的操縱而選擇用于指明全時(shí)檢測(cè)區(qū)域的選項(xiàng)卡的狀態(tài)。另一方面，下面描述的圖8中所示的設(shè)置屏幕500表示根據(jù)用戶對(duì)于輸入單元303的操縱而選擇用于指明觸發(fā)區(qū)域和檢測(cè)區(qū)域的選項(xiàng)卡的狀態(tài)。

全時(shí)檢測(cè)區(qū)域信息部分561是如下的顯示部和選擇操縱部：顯示全時(shí)檢測(cè)區(qū)域指明單元309所指明的全時(shí)檢測(cè)區(qū)域的名稱、靈敏度、閾值、監(jiān)視方法(圖6中表示為“監(jiān)視”)、以及存在或不存在動(dòng)作(在圖6中，表示為“動(dòng)作”)(此后，這樣的針對(duì)全時(shí)檢測(cè)區(qū)域的信息將被稱為屬性信息)。

全時(shí)檢測(cè)區(qū)域按鈕組562是全時(shí)檢測(cè)區(qū)域指明單元309進(jìn)行指明并且編輯顯示在全時(shí)檢測(cè)區(qū)域信息部分561中的全時(shí)檢測(cè)區(qū)域有關(guān)的屬性信息的按鈕組。全時(shí)檢測(cè)區(qū)域按鈕組562包括動(dòng)作按鈕562a、刪除按鈕562c、靈敏度提高按鈕562e、靈敏度降低按鈕562f、閾值提高按鈕562g、以及閾值降低按鈕562h。下面將描述全時(shí)檢測(cè)區(qū)域按鈕組562的每個(gè)按鈕的功能。

如上所述，下面描述的圖8中所示的設(shè)置屏幕500表示如下?tīng)顟B(tài)：用于指明觸發(fā)區(qū)域和檢測(cè)區(qū)域的選項(xiàng)卡通過(guò)區(qū)域選擇選項(xiàng)卡551被選擇，并且包括觸發(fā)區(qū)域信息部分507、標(biāo)準(zhǔn)圖像顯示單元508a、差異圖像顯示單元508b、檢測(cè)區(qū)域信息部分509和檢測(cè)區(qū)域按鈕組510。

觸發(fā)區(qū)域信息部分507是如下的顯示部：顯示觸發(fā)區(qū)域指明單元305所指明的觸發(fā)區(qū)域的名稱和用于變化點(diǎn)檢測(cè)單元306檢測(cè)上述變化點(diǎn)的靈敏度和閾值。標(biāo)準(zhǔn)圖像顯示單元508a是顯示變化點(diǎn)檢測(cè)單元306提取出的觸發(fā)標(biāo)準(zhǔn)圖像的顯示部。差異圖像顯示單元508b是顯示通過(guò)變化點(diǎn)檢測(cè)單元306所提取的差異圖像(下面進(jìn)行描述)的顯示部。

檢測(cè)區(qū)域信息部分509是如下的顯示部和選擇操縱部：顯示檢測(cè)區(qū)域指明單元307所指明的檢測(cè)區(qū)域的名稱、靈敏度、閾值、檢測(cè)延遲時(shí)間(圖8中表示為“延遲時(shí)間”)、監(jiān)視方法(圖8中表示為“監(jiān)視”)、存在或不存在動(dòng)作(在圖8中，表示為“動(dòng)作”)、以及圖像判定方法(圖8中，表示為“圖像判定”)(此后，這樣的關(guān)于檢測(cè)區(qū)域的信息將被稱為屬性信息)。

檢測(cè)區(qū)域按鈕組510是由檢測(cè)區(qū)域指明單元307指明的并且編輯顯示在檢測(cè)區(qū)域信息部分509中的關(guān)于檢測(cè)區(qū)域的屬性信息的按鈕組。檢測(cè)區(qū)域按鈕組510包括動(dòng)作按鈕510a、圖像判定選擇按鈕510b、刪除按鈕510c、靈敏度提高按鈕510e、靈敏度降低按鈕510f、閾值提高按鈕510g、以及閾值降低按鈕510h。下面將描述檢測(cè)區(qū)域按鈕組510的每個(gè)按鈕的功能。

(全時(shí)檢測(cè)區(qū)域的指明)

圖7是示出在顯示在根據(jù)本實(shí)施例的信息處理設(shè)備的顯示設(shè)備上的設(shè)置屏幕上的設(shè)置視頻顯示單元中指明全時(shí)檢測(cè)區(qū)域的示例的示意圖。將參考圖7描述全時(shí)檢測(cè)區(qū)域的指明。

圖7中所示的設(shè)置屏幕500表示在通過(guò)第一再現(xiàn)單元304再現(xiàn)和顯示視頻數(shù)據(jù)的設(shè)置視頻顯示單元502中所指明全時(shí)檢測(cè)區(qū)域570的狀態(tài)。具體地，首先當(dāng)在設(shè)置視頻顯示單元502上重新并且顯示視頻數(shù)據(jù)時(shí)，在期望受到圖像判定的圖像的部分被顯示的時(shí)刻，根據(jù)用戶對(duì)于輸入單元303的操縱而按下暫停按鈕503b的情況下，第一再現(xiàn)單元304暫時(shí)停止在設(shè)置視頻顯示單元502上再現(xiàn)和顯示的視頻數(shù)據(jù)，并且將這樣的時(shí)間點(diǎn)的幀的成像日期和成像時(shí)間顯示在時(shí)間顯示單元506上。然后，在根據(jù)用戶對(duì)于輸入單元303的操縱所操縱和選擇區(qū)域選擇選項(xiàng)卡551的“全時(shí)”選項(xiàng)卡的情況下，設(shè)置單元308顯示全時(shí)檢測(cè)區(qū)域的信息。

接下來(lái)，全時(shí)區(qū)域指明單元309根據(jù)用戶對(duì)于輸入單元303的操縱(例如，鼠標(biāo)108的拖動(dòng)操縱)，在設(shè)置視頻顯示單元502上指明并顯示全時(shí)檢測(cè)區(qū)域570(判定區(qū)域)。

另外，設(shè)置單元308在全時(shí)檢測(cè)區(qū)域信息單元561上將由全時(shí)檢測(cè)區(qū)域指明單元309所指明的全時(shí)檢測(cè)區(qū)域570中命名的名稱顯示為全時(shí)檢測(cè)區(qū)域570的屬性信息，并且將下面描述的圖像判定中使用的預(yù)定靈敏度(例如，“50”)、預(yù)定閾值(例如，“20％”)、監(jiān)視方法(例如，“灰度”)、以及存在或不存在動(dòng)作(例如“不存在”)作為默認(rèn)值。如圖7中所示，例如設(shè)置單元308通過(guò)將檢測(cè)區(qū)域假設(shè)為針對(duì)成像設(shè)備“6”(成像設(shè)備2f)的視頻數(shù)據(jù)而指明的觸發(fā)區(qū)域，將“a61”命名為全時(shí)檢測(cè)區(qū)域570的名稱。另外，全時(shí)檢測(cè)區(qū)域指明單元309提取出指明全時(shí)檢測(cè)區(qū)域570時(shí)顯示在設(shè)置視頻顯示單元502上的幀(圖像)的全時(shí)檢測(cè)區(qū)域570中的圖像作為全時(shí)檢測(cè)標(biāo)準(zhǔn)圖像，并將提取出的圖像存儲(chǔ)在存儲(chǔ)單元302中，并且將所指明的全時(shí)檢測(cè)區(qū)域570的信息(諸如位置和形狀的位置信息、屬性信息等)與通過(guò)相機(jī)選擇選項(xiàng)卡501選擇的成像設(shè)備2(在圖7的示例中，成像設(shè)備2f)相關(guān)聯(lián)地存儲(chǔ)在存儲(chǔ)單元302中。此外，全時(shí)檢測(cè)區(qū)域指明單元309將指明全時(shí)檢測(cè)區(qū)域570的時(shí)刻的信息(時(shí)間信息)與通過(guò)相機(jī)選擇選項(xiàng)卡501選擇的成像設(shè)備2相關(guān)聯(lián)地存儲(chǔ)在存儲(chǔ)單元302中。此外，通過(guò)與上面描述的相同的方法，可以通過(guò)全時(shí)檢測(cè)區(qū)域指明單元309指明多個(gè)全時(shí)檢測(cè)區(qū)域。

可以對(duì)于在圖7中所示的設(shè)置屏幕500上指明全時(shí)檢測(cè)區(qū)域(在圖7中，全時(shí)檢測(cè)區(qū)域)的屬性信息進(jìn)行編輯。首先，在根據(jù)用戶對(duì)于輸入單元303的操縱而選擇屬性信息顯示在全時(shí)檢測(cè)區(qū)域信息部分561中的全時(shí)檢測(cè)區(qū)域中的任何一個(gè)全時(shí)檢測(cè)區(qū)域的情況下(在圖7中，僅顯示全時(shí)檢測(cè)區(qū)域570的屬性信息)，設(shè)置單元308相對(duì)地顯示所選擇的全時(shí)檢測(cè)區(qū)域信息部分561的全時(shí)檢測(cè)區(qū)域的屬性信息的顯示部分。此后，將描述選擇圖7中所示的全時(shí)檢測(cè)區(qū)域570(全時(shí)檢測(cè)區(qū)域名稱為“a61”)的示例。

接著，例如在根據(jù)用戶對(duì)于輸入單元303的操縱而按下動(dòng)作按鈕562a的情況下，設(shè)置單元308切換所選擇的全時(shí)檢測(cè)區(qū)域570的存在或不存在動(dòng)作的設(shè)置值。例如，在全時(shí)檢測(cè)區(qū)域570的存在或不存在動(dòng)作為“不存在”的情況下，按下動(dòng)作按鈕562a，則設(shè)置單元308將全時(shí)檢測(cè)區(qū)域570的存在或不存在動(dòng)作設(shè)置為“存在”。相反，在全時(shí)檢測(cè)區(qū)域570的存在或不存在動(dòng)作為“存在”的情況下，按下動(dòng)作按鈕562a，設(shè)置單元308將全時(shí)檢測(cè)區(qū)域570的存在或不存在動(dòng)作設(shè)置為“不存在”。如下所述，在存在或不存在動(dòng)作是“存在”的情況下，并且在全時(shí)檢測(cè)區(qū)域判定單元315根據(jù)圖像判定而判定該全時(shí)檢測(cè)區(qū)域中存在異常的情況下，外部輸出單元332輸出異常信號(hào)。

另外，例如，在根據(jù)用戶對(duì)于輸入單元303的操縱而按下刪除按鈕562c的情況下，設(shè)置單元308刪除顯示在全時(shí)檢測(cè)區(qū)域信息部分561中的全時(shí)檢測(cè)區(qū)域570的屬性信息，并且刪除存儲(chǔ)在存儲(chǔ)單元302中的全時(shí)檢測(cè)區(qū)域570的信息。另外，全時(shí)檢測(cè)區(qū)域指明單元309刪除顯示在設(shè)置視頻顯示單元502上的全時(shí)檢測(cè)區(qū)域570，并且刪除存儲(chǔ)在存儲(chǔ)單元302中的全時(shí)檢測(cè)標(biāo)準(zhǔn)圖像。

另外，例如在根據(jù)用戶對(duì)于輸入單元303的操縱而按下靈敏度提高按鈕562e的情況下，設(shè)置單元308將所選擇的全時(shí)檢測(cè)區(qū)域570的圖像判定所使用的靈敏度值提高了預(yù)定值。相反，例如在根據(jù)用戶對(duì)于輸入單元303的操縱而按下靈敏度降低按鈕562f的情況下，設(shè)置單元308將所選擇的全時(shí)檢測(cè)區(qū)域570的圖像判定所使用的靈敏度值降低預(yù)定值。

另外，例如，在根據(jù)用戶對(duì)于輸入單元303的操縱而按下閾值提高按鈕562g的情況下，設(shè)置單元308將所選擇的全時(shí)檢測(cè)區(qū)域570的圖像判定所使用的閾值提高了預(yù)定值。相反，例如在根據(jù)用戶對(duì)于輸入單元303的操縱而按下靈敏度降低按鈕562h的情況下，設(shè)置單元308將所選擇的全時(shí)檢測(cè)區(qū)域570的圖像判定所使用的閾值降低預(yù)定值。

(觸發(fā)區(qū)域的指明和變化點(diǎn)的檢測(cè))

圖8是示出在設(shè)置屏幕上的設(shè)置視頻顯示單元中指明基礎(chǔ)區(qū)域的示例的示意圖，其中的設(shè)置屏幕顯示在根據(jù)本實(shí)施例的信息處理設(shè)備的顯示設(shè)備上。圖9是示出在設(shè)置屏幕上的觸發(fā)區(qū)域觀察到變化點(diǎn)的情況下標(biāo)記顯示的示例的示意圖，其中的設(shè)置屏幕顯示在根據(jù)本實(shí)施例的信息處理設(shè)備的顯示設(shè)備上。圖10是示出在觸發(fā)區(qū)域中檢測(cè)變化點(diǎn)的操作的示意圖。圖11是示出在顯示在根據(jù)本實(shí)施例的信息處理設(shè)備的顯示設(shè)備上的設(shè)置屏幕上的觸發(fā)區(qū)域中觀察到兩個(gè)變化點(diǎn)的情況下所顯示的對(duì)話的示例的示意圖。圖12是示出在設(shè)置屏幕上的觸發(fā)區(qū)域中未觀察到變化點(diǎn)的情況下所顯示的對(duì)話的示例的示意圖，其中的設(shè)置屏幕顯示在根據(jù)本實(shí)施例的信息處理設(shè)備的顯示設(shè)備上。將參考圖8至圖12來(lái)描述觸發(fā)區(qū)域和變化點(diǎn)的檢測(cè)。

圖8中所示的設(shè)置屏幕500表示在通過(guò)第一再現(xiàn)單元304再現(xiàn)并且顯示視頻數(shù)據(jù)的設(shè)置視頻顯示單元502中指明觸發(fā)區(qū)域530的狀態(tài)。具體地，首先，在根據(jù)用戶對(duì)于輸入單元303的操縱而按下暫停按鈕503b的情況下，在顯示基于發(fā)生觸發(fā)的所期望的圖像部，同時(shí)在設(shè)置視頻顯示單元502上再現(xiàn)并且顯示視頻數(shù)據(jù)的時(shí)刻，第一再現(xiàn)單元304暫時(shí)停止在設(shè)置視頻顯示單元502上再現(xiàn)和顯示的視頻數(shù)據(jù)，并且這些時(shí)間點(diǎn)的幀的成像日期和成像時(shí)間被顯示在時(shí)間顯示單元506上。接著，在根據(jù)用戶對(duì)于輸入單元303的操縱而選擇并且操作區(qū)域選擇選項(xiàng)卡551的“閃速”選項(xiàng)卡的情況下，設(shè)置單元308顯示觸發(fā)區(qū)域和檢測(cè)區(qū)域的信息。

接著，觸發(fā)區(qū)域指明單元305根據(jù)用戶對(duì)于輸入單元303的操縱(例如，鼠標(biāo)108的拖動(dòng)操縱)，指明觸發(fā)區(qū)域530(判定區(qū)域)并且將其顯示在設(shè)置視頻顯示單元502上。

圖9所示的設(shè)置屏幕500示出變化點(diǎn)檢測(cè)單元306在由觸發(fā)區(qū)域指明單元305所指明的觸發(fā)區(qū)域530中檢測(cè)出變化點(diǎn)的狀態(tài)。具體地，首先，在由觸發(fā)區(qū)域指明單元305指明觸發(fā)區(qū)域530的情況下，變化點(diǎn)檢測(cè)單元306獲取通過(guò)第一再現(xiàn)單元304再現(xiàn)并且顯示的視頻數(shù)據(jù)的幀的成像時(shí)間之前和之后的預(yù)定時(shí)間的幀(例如，在成像時(shí)間之前和之后2分鐘)，并且在指定的時(shí)間點(diǎn)，提取由觸發(fā)區(qū)域530指明的時(shí)間的觸發(fā)區(qū)域530中的圖像作為觸發(fā)標(biāo)準(zhǔn)圖像(第一標(biāo)準(zhǔn)圖像)。這里，變化點(diǎn)是觸發(fā)區(qū)域530中的圖像的預(yù)定變化發(fā)生的時(shí)間點(diǎn)，其作為觸發(fā)生成單元313生成觸發(fā)信號(hào)的時(shí)刻的標(biāo)準(zhǔn)。以下，將描述變化點(diǎn)檢測(cè)單元306的變化點(diǎn)的具體檢測(cè)方法。

如圖10(a)中所示，變化點(diǎn)檢測(cè)單元306獲取十三個(gè)幀(幀(0)至幀(12))作為預(yù)定時(shí)間的幀。在這種情況下，通過(guò)變化點(diǎn)檢測(cè)單元306獲取作為基準(zhǔn)的幀(6)之前和之后的預(yù)定時(shí)間的幀。此外，為了簡(jiǎn)化說(shuō)明，與各幀中的觸發(fā)區(qū)域530對(duì)應(yīng)的部分的圖像也將被稱為幀(0)至幀(12)中的每一個(gè)。然后，變化點(diǎn)檢測(cè)單元306計(jì)算所獲取的幀中的每個(gè)幀和緊接在前的幀之間的像素值的差異。該差異的計(jì)算方法如上所述。變化點(diǎn)檢測(cè)單元306提取圖10(a)中所示例的幀，并且圖10(b)中所示的曲線圖是按時(shí)間順序示出針對(duì)每個(gè)幀計(jì)算出的差異的圖。在圖10(b)中，例如，幀(1)的差異表示幀(1)和作為緊接的前一幀的幀(0)之間的差異。這里，如下所述將定義作為變化點(diǎn)的in點(diǎn)和out點(diǎn)。也就是說(shuō)，將in點(diǎn)設(shè)置為觸發(fā)區(qū)域530中的圖像開(kāi)始在連續(xù)幀中發(fā)生變化的時(shí)間點(diǎn)。另外，將out點(diǎn)設(shè)置為圖像觸發(fā)區(qū)域530開(kāi)始在連續(xù)幀中發(fā)生變化的時(shí)間點(diǎn)。此外，變化點(diǎn)檢測(cè)單元306計(jì)算所獲取的幀中的每個(gè)幀和緊接在前的幀之間的差異，但不限于緊接在前的幀，例如，可以計(jì)算每個(gè)幀和在該幀之前幾幀的幀之間的差異。

變化點(diǎn)檢測(cè)單元306基于計(jì)算出的各個(gè)幀之間的差異來(lái)找出in點(diǎn)的候選和out點(diǎn)的候選。具體地說(shuō)，在所計(jì)算出的差異持續(xù)多于或等于兩幀并且大于或等于預(yù)定閾值的情況下，變化點(diǎn)檢測(cè)單元306將具有最初大于或等于預(yù)定閾值的差異的幀設(shè)置為in點(diǎn)的候選幀。在圖10(b)的示例中，幀(1)的差異小于閾值，幀(2)的差異大于或等于閾值，幀(3)的差異大于或等于閾值等于閾值，并且?guī)?2)和(3)的兩幀之間的差異大于或等于閾值，因此將具有最初大于或等于閾值的差異的幀(2)設(shè)置為in點(diǎn)的候選幀。類似地，幀(7)也被設(shè)置為in點(diǎn)的候選幀。此外，在差異沒(méi)有連續(xù)大于或等于兩幀的情況下，并且僅一幀的差異大于或等于閾值時(shí)，存在噪聲的可能性，因此不將該幀設(shè)置為in點(diǎn)的候選幀。

另一方面，在計(jì)算出的差異連續(xù)超過(guò)或等于兩幀且小于或等于預(yù)定閾值的情況下，變化點(diǎn)檢測(cè)單元306將具有最初小于預(yù)定閾值的差異的幀設(shè)置為out點(diǎn)的候選幀。在圖10(b)的示例中，幀(4)的差異大于或等于閾值，幀(5)的差異小于閾值，幀(6)的差異也小于閾值并且?guī)?5)和幀(6)兩幀之間的差異小于閾值，因此將具有最初小于閾值的差異的幀(5)設(shè)置為out點(diǎn)的候選幀。這里，幀(12)是具有小于預(yù)定閾值的差異的幀，但是后續(xù)幀(13)是除了由變化點(diǎn)檢測(cè)單元306所提取的幀以外的幀，因此不是out點(diǎn)的候選幀。此外，在差異未連續(xù)大于或等于兩幀，并且僅一幀的差異小于閾值的情況下，存在噪聲的可能性，因此該幀不是out點(diǎn)的候選幀。

如上所述，在圖10的示例中，變化點(diǎn)檢測(cè)單元306將幀(2)和(7)指明為in點(diǎn)的候選幀，并將幀(5)指明為out點(diǎn)的候選幀。因此，在指定in點(diǎn)的多個(gè)候選幀的情況下，變化點(diǎn)檢測(cè)單元306確定最靠近位于所獲取的幀的中間的幀(6)的幀，即幀(7)作為in點(diǎn)的幀。此外，在圖10的示例中，只有一幀(幀(5))被指明為out點(diǎn)的候選幀，并且與in點(diǎn)的候選一樣，存在多個(gè)幀被指明為out點(diǎn)的候選幀的情況。因此，在指明了out點(diǎn)的多個(gè)候補(bǔ)幀的情況下，變化點(diǎn)檢測(cè)單元306將最靠近位于所獲取的幀的中間的幀(6)確定為out點(diǎn)的幀，與in點(diǎn)的候選相同。在圖10的示例中，out點(diǎn)的候選幀僅為幀(5)，因此變化點(diǎn)檢測(cè)單元306將幀(5)確定為out點(diǎn)的幀。如上所述，變化點(diǎn)檢測(cè)單元306從預(yù)定時(shí)間內(nèi)獲取的幀中確定in點(diǎn)的幀和out點(diǎn)的幀，從而檢測(cè)變化點(diǎn)(in點(diǎn)和out點(diǎn))。

此外，在檢測(cè)到變化點(diǎn)的情況下，變化點(diǎn)檢測(cè)單元306可以通過(guò)使用變化點(diǎn)的幀之前的幀、變化點(diǎn)的幀之后的幀、或者前后的幀，在觸發(fā)區(qū)域530中執(zhí)行動(dòng)態(tài)體檢測(cè)，并且可以將表示動(dòng)態(tài)體的入口方向的向量信息存儲(chǔ)在存儲(chǔ)單元302中。在這種情況下，觸發(fā)生成單元313可以通過(guò)使用存儲(chǔ)在存儲(chǔ)單元302中的向量信息來(lái)確認(rèn)動(dòng)態(tài)體是否從與向量信息所表示的方向相同的方向移動(dòng)，并且可以基于確認(rèn)結(jié)果來(lái)生成觸發(fā)信號(hào)。

另外，根據(jù)變化點(diǎn)檢測(cè)單元306的觸發(fā)區(qū)域530中的變化點(diǎn)的檢測(cè)方法不限于上述方法，并且只要變化點(diǎn)是限定生成觸發(fā)的時(shí)刻就可以通過(guò)任何方法來(lái)檢測(cè)變化點(diǎn)。

另外，如上所述，在該差異連續(xù)大于或等于兩幀且大于或等于預(yù)定閾值的情況下，變化點(diǎn)檢測(cè)單元306將具有最初大于或等于預(yù)定閾值的差異的幀設(shè)置為in點(diǎn)的候選幀，但不限于此。也就是說(shuō)，可以包括差異對(duì)于大于或等于兩個(gè)幀是不連續(xù)的情況，和對(duì)于大于或等于其他數(shù)量的幀連續(xù)并且大于或等于預(yù)定閾值的情形。同樣適用于發(fā)現(xiàn)out點(diǎn)的候選幀的情況。

另外，圖10示出其中觀察到in點(diǎn)和out點(diǎn)兩者的幀的示例，但是存在通過(guò)變化點(diǎn)檢測(cè)單元306觀察到僅僅in點(diǎn)的幀或僅僅out點(diǎn)的幀的情況，在這種情況下，該in點(diǎn)或out點(diǎn)被檢測(cè)為變化點(diǎn)。在此情況下，變化點(diǎn)檢測(cè)單元306提取觸發(fā)區(qū)域530中檢測(cè)到的變化點(diǎn)的幀的圖像作為差異圖像。變化點(diǎn)檢測(cè)單元306與通過(guò)相機(jī)選擇選項(xiàng)卡501所選擇的成像設(shè)備2(在圖10的示例中，成像設(shè)備2f)相關(guān)聯(lián)地將所提取的觸發(fā)標(biāo)準(zhǔn)圖像和變化點(diǎn)的幀的差異圖像存儲(chǔ)在存儲(chǔ)單元302中，在標(biāo)準(zhǔn)圖像顯示單元508a上顯示觸發(fā)標(biāo)準(zhǔn)圖像，并且在差異圖像顯示單元508b上顯示差異圖像。此外，在搜索條504中，變化點(diǎn)檢測(cè)單元306在與檢測(cè)到的變化點(diǎn)的幀的時(shí)間相對(duì)應(yīng)的部分上顯示觸發(fā)標(biāo)記540。另外，在變化點(diǎn)檢測(cè)單元306檢測(cè)到變化點(diǎn)的情況下，觸發(fā)區(qū)域指明單元305與通過(guò)相機(jī)選擇選項(xiàng)卡501所選擇的成像設(shè)備2(在圖10的示例中，成像設(shè)備2f)相關(guān)聯(lián)地將所指明的觸發(fā)區(qū)域530的信息(諸如位置和形狀的位置信息、屬性信息等)存儲(chǔ)在存儲(chǔ)單元302中。另外，設(shè)置單元308顯示通過(guò)觸發(fā)區(qū)域指明單元305所指明的觸發(fā)區(qū)域中命名的名稱，以及信息觸發(fā)區(qū)域信息部分507上的用于檢測(cè)變化點(diǎn)檢測(cè)單元306的變化點(diǎn)所使用的預(yù)定靈敏度(例如，“50”)和預(yù)定閾值(例如，“20％”)，作為觸發(fā)區(qū)域530的屬性信息。如圖8所示，例如設(shè)置單元308通過(guò)假設(shè)觸發(fā)區(qū)域是針對(duì)成像設(shè)備“6”(成像設(shè)備2f)的視頻數(shù)據(jù)進(jìn)行指明的觸發(fā)區(qū)域，將“tr6”命名為觸發(fā)區(qū)域530的名稱。此外，觸發(fā)區(qū)域指明單元305與通過(guò)相機(jī)選擇選項(xiàng)卡501選擇的成像設(shè)備2相關(guān)聯(lián)地將指明觸發(fā)區(qū)域530的時(shí)間的信息(時(shí)間信息)存儲(chǔ)在存儲(chǔ)單元302中。

在如上所述通過(guò)變化點(diǎn)檢測(cè)單元306檢測(cè)到兩個(gè)變化點(diǎn)(in點(diǎn)和out點(diǎn))的情況下，在觸發(fā)區(qū)域指明單元305所指明的觸發(fā)區(qū)域530中，圖11中所示的設(shè)置屏幕500表示顯示變化點(diǎn)選擇對(duì)話600的狀態(tài)。因此，在檢測(cè)到大于或等于兩個(gè)變化點(diǎn)的情況下，變化點(diǎn)檢測(cè)單元306顯示變化點(diǎn)選擇對(duì)話600，用于選擇與提取觸發(fā)標(biāo)準(zhǔn)圖像以在顯示單元333上生成觸發(fā)的時(shí)間點(diǎn)最接近的兩個(gè)變化點(diǎn)(in點(diǎn)和out點(diǎn))中的任一個(gè)。變化點(diǎn)選擇對(duì)話600包括是按鈕601、否按鈕602和關(guān)閉按鈕603。關(guān)閉按鈕603是用于關(guān)閉變化點(diǎn)選擇對(duì)話600的按鈕。

在根據(jù)用戶對(duì)輸入單元303的操縱按下是按鈕601的情況下，變化點(diǎn)檢測(cè)單元306將in點(diǎn)檢測(cè)為變化點(diǎn)，并且提取觸發(fā)區(qū)域530中in點(diǎn)的幀的圖像作為差異圖像。然后，變化點(diǎn)檢測(cè)單元306與通過(guò)相機(jī)選擇選項(xiàng)卡501所選擇的成像設(shè)備2相關(guān)聯(lián)地將所提取的觸發(fā)標(biāo)準(zhǔn)圖像和in點(diǎn)所在的幀的差異圖像存儲(chǔ)在存儲(chǔ)單元302中，在標(biāo)準(zhǔn)圖像顯示單元508a上顯示觸發(fā)標(biāo)準(zhǔn)圖像，并且在差異圖像顯示單元508b上顯示差異圖像。此外，變化點(diǎn)檢測(cè)單元306在搜索條504中與檢測(cè)到的in點(diǎn)的幀的時(shí)間相對(duì)應(yīng)的部分上顯示觸發(fā)標(biāo)記540。

另一方面，在根據(jù)用戶對(duì)輸入單元303的操作按下否按鈕602的情況下，變化點(diǎn)檢測(cè)單元306檢測(cè)出out點(diǎn)作為變化點(diǎn)，并提取觸發(fā)區(qū)域530中的out點(diǎn)的幀的圖像作為差異圖像。然后，變化點(diǎn)檢測(cè)單元306與通過(guò)相機(jī)選擇選項(xiàng)卡501所選擇的成像設(shè)備2相關(guān)聯(lián)地將所提取的觸發(fā)標(biāo)準(zhǔn)圖像和out點(diǎn)所在的幀的差異圖像存儲(chǔ)在存儲(chǔ)單元302中，在標(biāo)準(zhǔn)圖像顯示單元508a上顯示觸發(fā)標(biāo)準(zhǔn)圖像，并且在差異圖像顯示單元508b上顯示差異圖像。此外，變化點(diǎn)檢測(cè)單元306在搜索條504中與檢測(cè)到的out點(diǎn)的幀的時(shí)間相對(duì)應(yīng)的部分上顯示觸發(fā)標(biāo)記540。其他操作與圖9中的上述操作相同。

因此，in點(diǎn)和out點(diǎn)由變化點(diǎn)檢測(cè)單元306檢測(cè)為變化點(diǎn)，并且用戶能夠選擇兩個(gè)變化點(diǎn)中的任何一個(gè)，并且因此用戶能夠選擇期望指明的變化點(diǎn)。

在變化點(diǎn)檢測(cè)單元306在觸發(fā)區(qū)域530中未觀察到由觸發(fā)區(qū)域指明單元305所指明的變化點(diǎn)的情況下，圖12中所示的設(shè)置屏幕500表示顯示無(wú)變化點(diǎn)通知對(duì)話610的狀態(tài)。在上述圖10中所描述的操作中，存在著由于計(jì)算出的差異不大于或等于預(yù)定閾值從而變化點(diǎn)檢測(cè)單元306不能檢測(cè)到變化點(diǎn)的情況。在這種情況下，變化點(diǎn)檢測(cè)單元306顯示表示在顯示單元333上未觀察到變化點(diǎn)的無(wú)變化點(diǎn)通知對(duì)話610。

無(wú)變化點(diǎn)通知對(duì)話610包括確定(ok)按鈕611和關(guān)閉按鈕612。關(guān)閉按鈕612是用于關(guān)閉無(wú)變化點(diǎn)通知對(duì)話610的按鈕。在根據(jù)用戶對(duì)輸入單元303的操縱而按下確定按鈕611的情況下，變化點(diǎn)檢測(cè)單元306關(guān)閉無(wú)變化點(diǎn)通知對(duì)話610，而不在存儲(chǔ)單元302中存儲(chǔ)任何信息或在標(biāo)準(zhǔn)圖像顯示單元508a和差異圖像顯示單元508b上顯示圖像。

(檢測(cè)區(qū)域的指明和檢測(cè)區(qū)域的屬性信息的設(shè)置)

圖13是示出在設(shè)置屏幕上的設(shè)置視頻顯示單元中指明檢測(cè)區(qū)域的示例的示意圖，其中的設(shè)置屏幕顯示在根據(jù)本實(shí)施例的信息處理設(shè)備的顯示設(shè)備上。圖14是示出在設(shè)置屏幕上的設(shè)置視頻顯示單元中指明第二檢測(cè)區(qū)域的示例的示意圖，其中的設(shè)置屏幕顯示在根據(jù)本實(shí)施例的信息處理設(shè)備的顯示設(shè)備上。圖15是示出在設(shè)置屏幕上對(duì)于設(shè)置視頻顯示單元中所指明的檢測(cè)區(qū)域的屬性信息進(jìn)行設(shè)置的示例的示意圖，其中的設(shè)置屏幕顯示在根據(jù)本實(shí)施例的信息處理設(shè)備的顯示設(shè)備上。將參考圖13至圖15來(lái)描述檢測(cè)區(qū)域的指明和檢測(cè)區(qū)域等的屬性信息的設(shè)置。

圖13中所示的設(shè)置屏幕500表示在通過(guò)第一再現(xiàn)單元304來(lái)再現(xiàn)和顯示視頻數(shù)據(jù)的設(shè)置視頻顯示單元502中指明檢測(cè)區(qū)域535的狀態(tài)。具體地，首先當(dāng)視頻數(shù)據(jù)在設(shè)置視頻顯示單元502中再現(xiàn)并且顯示時(shí)，在期望經(jīng)過(guò)閃速檢測(cè)功能的圖像判定的圖像的部分被顯示的時(shí)刻，根據(jù)用戶對(duì)于輸入單元303的操縱而按下暫停按鈕503b的情況下，第一再現(xiàn)單元304暫時(shí)停止在設(shè)置視頻顯示單元502上再現(xiàn)和顯示的視頻數(shù)據(jù)，并且在時(shí)間顯示單元506上顯示這樣的時(shí)間點(diǎn)的幀的成像日期和成像時(shí)間。

接著，檢測(cè)區(qū)域指明單元307根據(jù)用戶對(duì)于輸入單元303的操縱(例如，鼠標(biāo)108的拖動(dòng)操縱)，在設(shè)置視頻顯示單元502上指明并顯示檢測(cè)區(qū)域535(判定區(qū)域)。這里，為了檢測(cè)區(qū)域指明單元307指明檢測(cè)區(qū)域535，必須在觸發(fā)區(qū)域信息部分507中選擇由觸發(fā)區(qū)域指明單元305所指明的觸發(fā)區(qū)域(在圖13的示例中“tr6”)。也就是說(shuō)，由檢測(cè)區(qū)域指明單元307所指明的檢測(cè)區(qū)域535與在觸發(fā)區(qū)域信息部分507中選擇的觸發(fā)區(qū)域相關(guān)聯(lián)。

另外，設(shè)置單元308在檢測(cè)區(qū)域信息部分509上顯示由檢測(cè)區(qū)域指明單元307所指明的檢測(cè)區(qū)域535中命名的名稱作為檢測(cè)區(qū)域535的屬性信息，和下面描述的圖像判定中使用的預(yù)定靈敏度(例如，“50”)、預(yù)定閾值(例如，“20％”)、監(jiān)視方法(例如，“灰度”)、存在或不存在動(dòng)作(例如“不存在”)以及圖像判定方法(例如，“一致”)作為默認(rèn)值。如圖13所示，例如設(shè)置單元308通過(guò)將檢測(cè)區(qū)域假設(shè)為與觸發(fā)區(qū)域“tr6”相關(guān)聯(lián)的第一區(qū)域，將“k61”命名為檢測(cè)區(qū)域535的名稱。此外，設(shè)置單元308計(jì)算檢測(cè)區(qū)域指明單元307指明檢測(cè)區(qū)域535的時(shí)間點(diǎn)的幀的時(shí)間的延遲時(shí)間(圖13的示例中的“2.14”)，作為由變化點(diǎn)檢測(cè)單元306檢測(cè)到的變化點(diǎn)的時(shí)間有關(guān)的屬性信息，并將延遲時(shí)間顯示在檢測(cè)區(qū)域信息部分509上。也就是說(shuō)，在此情況下，在被命名為“k61”的檢測(cè)區(qū)域535中，將圖像判定設(shè)置為在從觸發(fā)時(shí)刻起“2.14”秒之后執(zhí)行。

另外，檢測(cè)區(qū)域指明單元307提取出在指明檢測(cè)區(qū)域535的時(shí)刻檢測(cè)區(qū)域535中的圖像作為檢測(cè)標(biāo)準(zhǔn)圖像(第二標(biāo)準(zhǔn)圖像)，并將提取出的圖像存儲(chǔ)在存儲(chǔ)單元302中，并且將所指明的檢測(cè)區(qū)域535的信息(諸如位置和形狀的位置信息、屬性信息等)與通過(guò)相機(jī)選擇選項(xiàng)卡501選擇的成像設(shè)備2(在圖13的示例中，成像設(shè)備2f)相關(guān)聯(lián)地存儲(chǔ)在存儲(chǔ)單元302中。此外，觸發(fā)區(qū)域指明單元307與通過(guò)相機(jī)選擇選項(xiàng)卡501選擇的成像設(shè)備2相關(guān)聯(lián)地將在指明檢測(cè)區(qū)域535的時(shí)刻的信息(時(shí)間信息)存儲(chǔ)在存儲(chǔ)單元302中。

圖14中所示的設(shè)置屏幕500表示在通過(guò)第一再現(xiàn)單元304來(lái)再現(xiàn)和顯示視頻數(shù)據(jù)的設(shè)置視頻顯示單元502中指明作為第二檢測(cè)區(qū)域的檢測(cè)區(qū)域536的狀態(tài)。具體地，首先，在設(shè)置視頻顯示單元502上再現(xiàn)并且顯示視頻數(shù)據(jù)(暫時(shí)被停止)時(shí)，搜索條504的滑塊505根據(jù)用戶對(duì)于輸入單元303的操縱而滑動(dòng)，并且執(zhí)行對(duì)期望經(jīng)歷閃速檢測(cè)功能的圖像判定的圖像的部分的時(shí)刻進(jìn)行調(diào)整。第一再現(xiàn)單元304在時(shí)間顯示單元506上顯示設(shè)置視頻顯示單元502中的視頻數(shù)據(jù)的幀的成像日期和成像時(shí)間。

接下來(lái)，檢測(cè)區(qū)域指明單元307根據(jù)用戶對(duì)于輸入單元303的操縱(例如，鼠標(biāo)108的拖動(dòng)操縱)，在設(shè)置視頻顯示單元502上指明并顯示作為第二檢測(cè)區(qū)域的檢測(cè)區(qū)域536(判定區(qū)域)。這里，為了使得檢測(cè)區(qū)域指明單元307指明檢測(cè)區(qū)域536，與指明檢測(cè)區(qū)域535的情況相同，必須在觸發(fā)區(qū)域信息部分507中選擇由觸發(fā)區(qū)域指明單元305指明的觸發(fā)區(qū)域(在圖14的示例中“tr6”)。也就是說(shuō)，由檢測(cè)區(qū)域指明單元307所指明的檢測(cè)區(qū)域536與在觸發(fā)區(qū)域信息部分507中被選擇的觸發(fā)區(qū)域相關(guān)聯(lián)。

另外，設(shè)置單元308在檢測(cè)區(qū)域信息部分509上顯示由檢測(cè)區(qū)域指明單元307所指明的檢測(cè)區(qū)域536中命名的名稱作為檢測(cè)區(qū)域536的屬性信息，和預(yù)定靈敏度(例如，“50”)、預(yù)定閾值(例如，“20％”)、監(jiān)視方法(例如，“灰度”)、存在或不存在動(dòng)作(例如“不存在”)以及下面描述的圖像判定中使用的圖像判定方法(例如，“一致”)作為默認(rèn)值。如圖14所示，例如設(shè)置單元308通過(guò)將檢測(cè)區(qū)域假設(shè)為與觸發(fā)區(qū)域“tr6”相關(guān)聯(lián)的第二區(qū)域，將“k62”命名為檢測(cè)區(qū)域536的名稱。此外，設(shè)置單元308計(jì)算在檢測(cè)區(qū)域指明單元307指明檢測(cè)區(qū)域536的時(shí)間點(diǎn)的幀的時(shí)間的延遲時(shí)間(圖14的示例中的“-186”)，作為由變化點(diǎn)檢測(cè)單元306檢測(cè)到的與變化點(diǎn)的時(shí)間有關(guān)的屬性信息，并將計(jì)算出的延遲時(shí)間顯示在檢測(cè)區(qū)域信息部分509上。也就是說(shuō)，在此情況下，在被命名為“k62”的檢測(cè)區(qū)域536中，將圖像判定設(shè)置為在觸發(fā)時(shí)刻之前“1.86”秒執(zhí)行。

另外，檢測(cè)區(qū)域指明單元307提取出在指明檢測(cè)區(qū)域536的時(shí)刻檢測(cè)區(qū)域536中的圖像作為檢測(cè)標(biāo)準(zhǔn)圖像，并將提取出的圖像存儲(chǔ)在存儲(chǔ)單元302中，并且將所指明的檢測(cè)區(qū)域536的信息(諸如位置和形狀的位置信息、屬性信息等)與通過(guò)相機(jī)選擇選項(xiàng)卡501選擇的成像設(shè)備2(在圖14的示例中，成像設(shè)備2f)相關(guān)聯(lián)地存儲(chǔ)在存儲(chǔ)單元302中。此外，觸發(fā)區(qū)域指明單元307與通過(guò)相機(jī)選擇選項(xiàng)卡501選擇的成像設(shè)備2相關(guān)聯(lián)地將指明檢測(cè)區(qū)域536的時(shí)刻的信息(時(shí)間信息)存儲(chǔ)在存儲(chǔ)單元302中。此外，通過(guò)與上面描述的相同的方法，能夠通過(guò)檢測(cè)區(qū)域指明單元307指明另一檢測(cè)區(qū)域。

圖15中所示的設(shè)置屏幕500表示從屬性信息被顯示在檢測(cè)區(qū)域信息部分509中的檢測(cè)區(qū)域“k61”(檢測(cè)區(qū)域535)和“k62”(檢測(cè)區(qū)域536)中選擇“k62”的狀態(tài)。將參考圖15來(lái)描述檢測(cè)區(qū)域的屬性信息的版本。

如圖15所示，首先在根據(jù)用戶對(duì)輸入單元303的操縱來(lái)選擇在檢測(cè)區(qū)域信息部分509上顯示屬性信息的檢測(cè)區(qū)域中的任何一個(gè)的情況下，設(shè)置單元308相對(duì)地顯示檢測(cè)區(qū)域信息部分509的所選擇的檢測(cè)區(qū)域的屬性信息的顯示部分。此后，如圖15中所示，將描述選擇檢測(cè)區(qū)域536(檢測(cè)區(qū)域名稱“k62”)的示例。

接著，例如在根據(jù)用戶對(duì)于輸入單元303的操作而按下動(dòng)作按鈕510a的情況下，設(shè)置單元308切換所選擇的檢測(cè)區(qū)域536的存在或不存在動(dòng)作的設(shè)置值。例如，在檢測(cè)區(qū)域536的存在或不存在動(dòng)作為“不存在”的情況下，按下動(dòng)作按鈕510a，設(shè)置單元308將檢測(cè)區(qū)域536的存在或不存在動(dòng)作設(shè)置為“存在”。相反，在檢測(cè)區(qū)域536的存在或不存在動(dòng)作為“存在”的情況下，按下動(dòng)作按鈕510a，設(shè)置單元308將檢測(cè)區(qū)域536的存在或不存在動(dòng)作設(shè)置為“不存在”。如下所述，在存在或不存在動(dòng)作是“存在”的情況下，并且檢測(cè)區(qū)域判定單元314判定該檢測(cè)區(qū)域的圖像判定存在異常，外部輸出單元332輸出異常信號(hào)。

另外，例如在根據(jù)用戶對(duì)于輸入單元303的操縱而按下圖像判定選擇按鈕510b的情況下，設(shè)置單元308切換所選擇的檢測(cè)區(qū)域536的圖像判定方法的設(shè)置值。例如，在檢測(cè)區(qū)域536的圖像判定方法是“一致”的情況下，按下圖像判定選擇按鈕510b，設(shè)置單元308將檢測(cè)區(qū)域536的圖像判定方法設(shè)置為“不一致”。相反，在檢測(cè)區(qū)域536的圖像判定方法是“不一致”的情況下，按下圖像判定選擇按鈕510b，設(shè)置單元308將檢測(cè)區(qū)域536的圖像判定方法設(shè)置為“一致”。

如下所述，在圖像判定方法是“一致”的情況下，并且所提取的圖像與檢測(cè)標(biāo)準(zhǔn)圖像之間的差異大于或等于屬性信息的閾值，檢測(cè)區(qū)域判定單元314判定存在異常。因此，圖像判定方法是“一致”的情況的示例包括如下情況：在將部件插入工件的設(shè)施中，將部件插入到工件的狀態(tài)設(shè)置為檢測(cè)標(biāo)準(zhǔn)圖像，并且在相對(duì)于工件的部件插入操作結(jié)束的時(shí)刻執(zhí)行圖像判定。在此情況下，當(dāng)相對(duì)于工件的部件插入操作失敗時(shí)，并且在部件未正常插入的狀態(tài)下由檢測(cè)區(qū)域判定單元314來(lái)執(zhí)行圖像判定，與檢測(cè)標(biāo)準(zhǔn)圖像有關(guān)的差異大于或等于屬性信息的閾值，能夠確定的是存在異常。

相反，在圖像判定方法是“不一致”的情況下，并且所提取的圖像與檢測(cè)標(biāo)準(zhǔn)圖像之間的差異小于屬性信息的閾值，檢測(cè)區(qū)域判定單元314判定存在異常。因此，圖像判定方法是“不一致”的情況的示例包括如下情況：在將部件插入到工件中的設(shè)施中，將部件未插入到工件的狀態(tài)設(shè)置為檢測(cè)標(biāo)準(zhǔn)圖像，并且在相對(duì)于工件的部件插入操作結(jié)束的時(shí)刻執(zhí)行圖像判定。在此情況下，當(dāng)相對(duì)于工件的部件插入操作失敗時(shí)，并且在部件未正常插入的狀態(tài)下由檢測(cè)區(qū)域判定單元314來(lái)執(zhí)行圖像判定，檢測(cè)參考圖像有關(guān)的差異小于屬性信息的閾值，能夠確定的是存在異常。此外，將部件未插入到工件中的狀態(tài)設(shè)置為檢測(cè)標(biāo)準(zhǔn)圖像的情況的示例包括難以準(zhǔn)備部件作為成品插入到工件的情況。

另外，例如在根據(jù)用戶對(duì)于輸入單元303的操縱而按下刪除按鈕510c的情況下，設(shè)置單元308刪除顯示在檢測(cè)區(qū)域信息部分509的檢測(cè)區(qū)域536的屬性信息，并且刪除存儲(chǔ)在存儲(chǔ)單元302中的檢測(cè)區(qū)域536的信息。另外，檢測(cè)區(qū)域指明單元307刪除顯示在設(shè)置視頻顯示單元502上的檢測(cè)區(qū)域536，并且刪除存儲(chǔ)在存儲(chǔ)單元302中的檢測(cè)區(qū)域536的檢測(cè)標(biāo)準(zhǔn)圖像。

另外，例如在根據(jù)用戶對(duì)于輸入單元303的操縱而按下靈敏度提高按鈕510e的情況下，設(shè)置單元308將所選擇的檢測(cè)區(qū)域536的圖像判定所使用的靈敏度值提高預(yù)定值。另一方面，在根據(jù)用戶對(duì)于輸入單元303的操縱而按下靈敏度降低按鈕510f的情況下，設(shè)置單元308將所選擇的檢測(cè)區(qū)域536的圖像判定所使用的靈敏度值降低預(yù)定值。

另外，例如在根據(jù)用戶對(duì)于輸入單元303的操縱而按下閾值提高按鈕510g的情況下，設(shè)置單元308將所選擇的檢測(cè)區(qū)域536的圖像判定所使用的閾值提高預(yù)定值。另一方面，在根據(jù)用戶對(duì)于輸入單元303的操縱而按下閾值降低按鈕510h的情況下，設(shè)置單元308將所選擇的檢測(cè)區(qū)域536的圖像判定所使用的閾值降低預(yù)定值。

(觀察者屏幕的圖像判定操作)

圖16是示出在顯示在根據(jù)本實(shí)施例的信息處理設(shè)備的顯示區(qū)域中的觀察者屏幕上執(zhí)行監(jiān)視操作的狀態(tài)的示例的示意圖。圖17是示出在顯示在根據(jù)本實(shí)施例的信息處理設(shè)備的顯示區(qū)域中的觀察者屏幕上執(zhí)行的監(jiān)視操作生成觸發(fā)之前的狀態(tài)的示例的示意圖。圖18是示出在顯示在根據(jù)本實(shí)施例的信息處理設(shè)備的顯示區(qū)域中的觀察者屏幕上執(zhí)行的監(jiān)視操作生成觸發(fā)的狀態(tài)的示例的示意圖。圖19至圖24是示出在顯示在根據(jù)本實(shí)施例的信息處理設(shè)備的顯示區(qū)域中的觀察者屏幕上執(zhí)行的監(jiān)視操作在監(jiān)視區(qū)域中執(zhí)行圖像判定的狀態(tài)的示例的示意圖。

首先，將參考圖16來(lái)描述觀察者屏幕400上的圖像判定操作(監(jiān)視操作)的概述。圖16中所示的觀察者屏幕400實(shí)時(shí)顯示從多個(gè)成像設(shè)備2接收到的視頻數(shù)據(jù)，并且表示在視頻顯示單元401f上指明全時(shí)檢測(cè)區(qū)域“a61”，觸發(fā)區(qū)域“tr6”，和檢測(cè)區(qū)域“k61”、“k62”、“k63”和“k64”的狀態(tài)。這里，在觀察者屏幕400的圖像判定操作中，執(zhí)行多個(gè)功能(在本實(shí)施例的情況下，全時(shí)檢測(cè)功能和閃速檢測(cè)功能)，因此為了避免外觀的復(fù)雜，并不顯示顯示在視頻顯示單元401上的每個(gè)判定區(qū)域。這里，全時(shí)檢測(cè)功能是在監(jiān)視操作期間持續(xù)地執(zhí)行全時(shí)檢測(cè)區(qū)域中的圖像是否異常的圖像判定的功能。另外，閃速檢測(cè)功能是在從觸發(fā)區(qū)域中檢測(cè)到觸發(fā)的時(shí)刻開(kāi)始的設(shè)置時(shí)間之前或設(shè)置時(shí)間之后的時(shí)刻，執(zhí)行檢測(cè)區(qū)域中的圖像是否異常的圖像判定的功能。另外，第一控制單元316從設(shè)置屏幕500過(guò)渡到觀察者屏幕400，然后針對(duì)視頻顯示單元401f完成每個(gè)判定區(qū)域的設(shè)置，并且因此在狀態(tài)顯示單元421f上顯示“設(shè)置完成”。

接著，用戶根據(jù)輸入單元303的操作按下與計(jì)劃啟動(dòng)圖像判定操作(監(jiān)視操作)的成像設(shè)備2對(duì)應(yīng)的視頻顯示單元401，并且將視頻顯示單元設(shè)置為選擇狀態(tài)。在圖16的示例中，示出視頻顯示單元401f被按下并且設(shè)置為選擇狀態(tài)的狀態(tài)。然后，在根據(jù)用戶對(duì)于輸入單元303的操作而按下監(jiān)視開(kāi)始按鈕411的情況下，針對(duì)顯示在視頻顯示單元401f上的成像設(shè)備2f的實(shí)時(shí)視頻數(shù)據(jù)開(kāi)始圖像判定操作。此時(shí)，如圖16所示，為了表示針對(duì)成像設(shè)備2f執(zhí)行圖像判定操作的效果，第一控制單元316在狀態(tài)顯示單元421f上顯示“正在監(jiān)視”。另外，第一控制單元316將開(kāi)始圖像判定操作的時(shí)間的信息(時(shí)間信息)與對(duì)應(yīng)于處于選擇狀態(tài)的視頻顯示單元401的成像設(shè)備2相關(guān)聯(lián)地存儲(chǔ)在存儲(chǔ)單元302中。此外，在根據(jù)用戶對(duì)于輸入單元303的操縱而按下監(jiān)視停止按鈕412的情況下，第一控制單元316停止處于選擇狀態(tài)的關(guān)于視頻顯示單元401的圖像判定操作，并且將停止圖像判定操作(監(jiān)視操作)的時(shí)間的信息(時(shí)間信息)與對(duì)應(yīng)于視頻顯示單元401的成像設(shè)備2相關(guān)聯(lián)地存儲(chǔ)在存儲(chǔ)單元302中。

在特定的觀察者屏幕400上的圖像判定操作中，首先，視頻分配單元312對(duì)于從視頻接收單元301接收到的實(shí)時(shí)視頻數(shù)據(jù)進(jìn)行排序，并且將其顯示在視頻顯示單元401a至401f。觸發(fā)生成單元313從存儲(chǔ)單元302獲取通過(guò)變化點(diǎn)檢測(cè)單元306檢測(cè)出的變化點(diǎn)所在的幀的差異圖像。然后，觸發(fā)生成單元313在視頻顯示單元401f所指明的觸發(fā)區(qū)域“tr6”中將差異圖像與視頻數(shù)據(jù)的幀的觸發(fā)區(qū)域進(jìn)行比較。觸發(fā)生成單元313將視頻數(shù)據(jù)的幀的觸發(fā)區(qū)域中的圖像與變化點(diǎn)的幀的差異圖像進(jìn)行比較，然后在作為像素值相差大于或等于預(yù)定靈敏度的像素總數(shù)的差值小于預(yù)定閾值的時(shí)刻生成觸發(fā)信號(hào)。然后，觸發(fā)區(qū)域指明單元313與執(zhí)行圖像判定操作的成像設(shè)備2相關(guān)聯(lián)地將圖像判定操作生成觸發(fā)信號(hào)的時(shí)間的信息(時(shí)間信息)存儲(chǔ)在存儲(chǔ)單元302中。然后，觸發(fā)生成單元313與執(zhí)行圖像判定操作針對(duì)的成像設(shè)備2相關(guān)聯(lián)地將圖像判定操作生成觸發(fā)信號(hào)的時(shí)間的信息(時(shí)間信息)存儲(chǔ)在存儲(chǔ)單元302中。

在檢測(cè)區(qū)域“k61”、“k62”、“k63”和“k64”的屬性信息項(xiàng)目中，檢測(cè)延遲時(shí)間各自設(shè)置為“1.0”秒、“2.2”秒、“2.5”秒和“4.0”秒。檢測(cè)區(qū)域判定單元314從存儲(chǔ)單元302中獲取被指明的檢測(cè)區(qū)域的屬性信息。檢測(cè)區(qū)域判定單元314在接收到觸發(fā)生成單元313生成的觸發(fā)信號(hào)時(shí)，在設(shè)置時(shí)間之前或設(shè)置時(shí)間之后，將檢測(cè)標(biāo)準(zhǔn)圖像與被指明的檢測(cè)區(qū)域中的視頻數(shù)據(jù)幀中的檢測(cè)區(qū)域的圖像進(jìn)行比較，并且執(zhí)行是否存在異常的圖像判定。

具體地，檢測(cè)區(qū)域判定單元314將從觸發(fā)生成單元313接收到的與觸發(fā)區(qū)域“tr6”對(duì)應(yīng)的觸發(fā)信號(hào)的時(shí)間點(diǎn)與觸發(fā)區(qū)域“k61”對(duì)應(yīng)的檢測(cè)延遲時(shí)間“1.0”秒之后的視頻數(shù)據(jù)的幀的檢測(cè)區(qū)域中的圖像與檢測(cè)標(biāo)準(zhǔn)圖像進(jìn)行比較，并且執(zhí)行是否存在異常的圖像判定。此時(shí)，在圖像判定中，檢測(cè)判定單元314將檢測(cè)標(biāo)準(zhǔn)圖像與檢測(cè)區(qū)域中的圖像進(jìn)行比較，并且在差異大于或等于屬性信息的閾值的情況下，確定檢測(cè)區(qū)域“k61”的圖像判定為不正常，其中的差異是像素值差別大于或等于檢測(cè)區(qū)域“k61”的屬性信息的靈敏度的像素的總數(shù)。然后，檢測(cè)區(qū)域判定單元314將通過(guò)圖像判定操作來(lái)檢測(cè)正?；虿徽５臋z測(cè)時(shí)間的信息(時(shí)間信息)與執(zhí)行圖像判定操作所針對(duì)的成像設(shè)備2關(guān)聯(lián)，并且將該信息存儲(chǔ)在存儲(chǔ)單元302中。另外，檢測(cè)區(qū)域判定單元314將通過(guò)圖像判定操作檢測(cè)出不正常的檢測(cè)時(shí)間的信息(時(shí)間信息)與執(zhí)行圖像判定操作所針對(duì)的成像設(shè)備2關(guān)聯(lián)，并且將該信息寫(xiě)入存儲(chǔ)單元302中的標(biāo)記文件。

因此，檢測(cè)區(qū)域判定單元314在接收到觸發(fā)信號(hào)的時(shí)間點(diǎn)起的之前的時(shí)刻執(zhí)行圖像判定的情況的示例包括在諸如壓配合機(jī)的設(shè)施中情況，通過(guò)使用開(kāi)始?jí)号浜喜僮鞯臅r(shí)刻作為觸發(fā)，針對(duì)壓配合后的壓配合狀態(tài)來(lái)執(zhí)行圖像判定。具體地說(shuō)，觸發(fā)發(fā)生單元313通過(guò)使用允許壓配合機(jī)相對(duì)于工件對(duì)于壓配合件進(jìn)行壓配合操作被啟動(dòng)的時(shí)刻作為觸發(fā)來(lái)生成觸發(fā)信號(hào)。之后，壓配合機(jī)相對(duì)于工件對(duì)于壓配合部件進(jìn)行壓配合，并且壓配合機(jī)的每個(gè)致動(dòng)器在壓配合操作結(jié)束后返回到原點(diǎn)位置。然后，檢測(cè)區(qū)域確定單元314對(duì)于進(jìn)行壓配合后的工件的壓配合狀態(tài)進(jìn)行圖像確定。檢測(cè)區(qū)域判定單元314的圖像判定的時(shí)刻是從接收到來(lái)自觸發(fā)產(chǎn)生單元313的觸發(fā)信號(hào)的檢測(cè)延遲時(shí)間所設(shè)定的時(shí)間之后的時(shí)刻。從生成觸發(fā)信號(hào)的壓配合操作開(kāi)始直至壓配合后的壓配合狀態(tài)的圖像判定的時(shí)間是壓配合機(jī)的自動(dòng)操作，因此是固定時(shí)間，并且將從觸發(fā)時(shí)刻到圖像判定的檢測(cè)延遲時(shí)間設(shè)定為固定時(shí)間。

另外，檢測(cè)判定單元314比較與每個(gè)檢測(cè)區(qū)域“k62”、“k63”和“k64”對(duì)應(yīng)的檢測(cè)延遲時(shí)間之后的視頻數(shù)據(jù)的幀的每個(gè)檢測(cè)區(qū)域中的圖像與每個(gè)檢測(cè)區(qū)域中的檢測(cè)標(biāo)準(zhǔn)圖像，并且執(zhí)行是否存在異常的圖像判定。圖像判定的方法與上述檢測(cè)區(qū)域“k61”的情況的相同。

然后，在檢測(cè)區(qū)域判定單元314執(zhí)行異常的判定的情況下，外部輸出單元332向外部設(shè)備10輸出異常信號(hào)。

另外，全時(shí)檢測(cè)區(qū)域判定單元315從存儲(chǔ)單元302獲取所指明的全時(shí)檢測(cè)區(qū)域的屬性信息(圖7中，全時(shí)檢測(cè)區(qū)域570)。在所指明的全時(shí)檢測(cè)區(qū)域中，全時(shí)檢測(cè)區(qū)域判定單元315比較全時(shí)檢測(cè)標(biāo)準(zhǔn)圖像與視頻數(shù)據(jù)的幀的全時(shí)檢測(cè)區(qū)域中的圖像，并且在監(jiān)視操作執(zhí)行的同時(shí)，持續(xù)地執(zhí)行是否存在異常的圖像判定。

具體地，全時(shí)檢測(cè)區(qū)域判定單元315將與全時(shí)檢測(cè)區(qū)域“a61”對(duì)應(yīng)的視頻數(shù)據(jù)的幀的檢測(cè)區(qū)域中的圖像與標(biāo)準(zhǔn)全時(shí)檢測(cè)區(qū)域比較，并且執(zhí)行是否存在異常的圖像判定。此時(shí)，在圖像判定中，全時(shí)檢測(cè)區(qū)域判定單元315比較全時(shí)檢測(cè)標(biāo)準(zhǔn)圖像與全時(shí)檢測(cè)區(qū)域中的圖像，并且在差異大于或等于屬性信息的閾值的情況下，確定全時(shí)檢測(cè)區(qū)域“a61”的圖像判定為不正常，其中的差異是像素值差別大于或等于全時(shí)檢測(cè)區(qū)域“a61”的屬性信息的預(yù)定靈敏度的像素的總數(shù)。然后，全時(shí)檢測(cè)區(qū)域判定單元315將通過(guò)圖像判定操作檢測(cè)出異常的檢測(cè)時(shí)間的信息(時(shí)間信息)與執(zhí)行圖像判定操作所針對(duì)的成像設(shè)備2關(guān)聯(lián)，并且將該信息存儲(chǔ)在存儲(chǔ)單元302中。另外，全時(shí)檢測(cè)區(qū)域判定單元315將通過(guò)圖像判定操作檢測(cè)出異常的檢測(cè)時(shí)間的信息(時(shí)間信息)與執(zhí)行圖像判定操作所針對(duì)的成像設(shè)備2關(guān)聯(lián)，并且將該信息寫(xiě)入存儲(chǔ)單元302中的標(biāo)記文件。

然后，在全時(shí)檢測(cè)區(qū)域判定單元315執(zhí)行異常判定的情況下，外部輸出單元332向外部設(shè)備10輸出異常信號(hào)。

接著，將參考圖17至圖24，通過(guò)使用觀察者屏幕400的視頻顯示單元401f作為示例詳細(xì)地描述基于閃速檢測(cè)功能進(jìn)行的針對(duì)視頻數(shù)據(jù)的圖像判定操作(監(jiān)視操作)。首先，在針對(duì)視頻顯示單元401f開(kāi)始圖像判定操作的情況下，第一控制單元316通過(guò)將幀疊加在視頻顯示單元401f的視頻數(shù)據(jù)上來(lái)顯示表示設(shè)置屏幕500所指明的每個(gè)判定區(qū)域的幀。具體地，如圖17所示，視頻顯示單元401f顯示觸發(fā)區(qū)域530、檢測(cè)區(qū)域535至538、以及全時(shí)檢測(cè)區(qū)域570。此時(shí)，第一控制單元316利用單獨(dú)的顏色來(lái)顯示表示處于正常狀態(tài)(每個(gè)判定區(qū)域未執(zhí)行檢測(cè)的狀態(tài))的每個(gè)判定圖像(顯示要素的示例)的幀。例如，第一控制單元316以“白色”顯示表示觸發(fā)區(qū)域530的幀，以“黃色”顯示表示檢測(cè)區(qū)域535至538的幀，并且以“綠色”顯示表示全時(shí)檢測(cè)區(qū)域570的幀。

接著，如圖18所示，在觸發(fā)生成單元313檢測(cè)到觸發(fā)的情況下，第一控制單元316以不同于正常狀態(tài)的顏色來(lái)顯示表示觸發(fā)區(qū)域530的幀，并且將該幀顯示為比正常狀態(tài)下的幀更粗(以下可以簡(jiǎn)稱為“粗體顯示”)。例如，第一控制單元316以“藍(lán)色”顯示表示觸發(fā)區(qū)域530的幀，并且將該幀顯示為粗體，并且將顯示狀態(tài)持續(xù)1秒。然后，第一控制單元316在1秒之后將表示觸發(fā)區(qū)域530的幀的顯示返回到正常狀態(tài)的幀的顯示。

接著，檢測(cè)區(qū)域判定單元314從觸發(fā)生成單元313接收觸發(fā)信號(hào)，然后在針對(duì)檢測(cè)區(qū)域535設(shè)置的檢測(cè)延遲時(shí)間的“1.0”秒之后，在檢測(cè)區(qū)域535中執(zhí)行圖像判定。作為判定的結(jié)果，在檢測(cè)到正常的情況下，如圖19所示，第一控制單元316以不同于正常狀態(tài)的顏色來(lái)顯示表示檢測(cè)區(qū)域535的幀，并且將該幀顯示為比正常狀態(tài)下的幀更粗。例如，為了表示檢測(cè)到正常，第一控制單元316以“藍(lán)色”顯示表示檢測(cè)區(qū)域535的幀，并且將該幀顯示為粗體，并且將顯示狀態(tài)持續(xù)1秒。然后，第一控制單元316在1秒之后將表示檢測(cè)區(qū)域535的幀的顯示返回到正常狀態(tài)的幀的顯示。

接著，檢測(cè)區(qū)域判定單元314從觸發(fā)生成單元313接收觸發(fā)信號(hào)，然后在針對(duì)檢測(cè)區(qū)域536設(shè)置的檢測(cè)延遲時(shí)間的“2.2”秒之后，在檢測(cè)區(qū)域536中執(zhí)行圖像判定。此外，檢測(cè)區(qū)域判定單元314從觸發(fā)生成單元313接收觸發(fā)信號(hào)，然后在針對(duì)檢測(cè)區(qū)域537設(shè)置的檢測(cè)延遲時(shí)間的“2.5”秒之后，在檢測(cè)區(qū)域537中執(zhí)行圖像判定。作為判定的結(jié)果，在分別檢測(cè)到正常的情況下，如圖20中所示，第一控制單元316以不同于正常狀態(tài)的顏色來(lái)顯示表示檢測(cè)區(qū)域536和檢測(cè)區(qū)域537中的每個(gè)檢測(cè)區(qū)域的幀，并且將該幀顯示為比正常狀態(tài)下的幀更粗。例如，為了表示檢測(cè)到正常，第一控制單元316以“藍(lán)色”顯示表示檢測(cè)區(qū)域536和檢測(cè)區(qū)域537中的每個(gè)檢測(cè)區(qū)域的幀，并且將該幀顯示為粗體，并且將顯示狀態(tài)持續(xù)1秒。然后，第一控制單元316在1秒之后將表示檢測(cè)區(qū)域536和檢測(cè)區(qū)域537中的每個(gè)檢測(cè)區(qū)域的幀的顯示返回到正常狀態(tài)的幀的顯示。

然后，檢測(cè)區(qū)域判定單元314從觸發(fā)生成單元313接收觸發(fā)信號(hào)，然后在針對(duì)檢測(cè)區(qū)域538設(shè)置的檢測(cè)延遲時(shí)間的“4.0”秒之后，在檢測(cè)區(qū)域538中執(zhí)行圖像判定。作為判定的結(jié)果，在檢測(cè)到正常的情況下，如圖21所示，第一控制單元316以不同于正常狀態(tài)的顏色來(lái)顯示表示檢測(cè)區(qū)域538的幀，并且將該幀顯示為比正常狀態(tài)下的幀更粗。例如，為了表示檢測(cè)到正常，第一控制單元316以“藍(lán)色”顯示表示檢測(cè)區(qū)域538的幀，并且將該幀顯示為粗體，并且將顯示狀態(tài)持續(xù)1秒。然后，第一控制單元316在1秒之后將表示檢測(cè)區(qū)域538的幀的顯示返回到正常狀態(tài)的幀的顯示。然后，在檢測(cè)區(qū)域判定單元314結(jié)束根據(jù)觸發(fā)生成單元313的觸發(fā)進(jìn)行的檢測(cè)區(qū)域的所有判定的時(shí)刻(也就是，結(jié)束檢測(cè)區(qū)域538的圖像判定的時(shí)刻)，通知控制單元317向通知單元334輸出表示檢測(cè)區(qū)域的圖像判定結(jié)束的判定結(jié)束聲音(在圖21中，表示為“嘟嘟聲(pip)”)持續(xù)預(yù)定的時(shí)間(例如，0.2秒)。如上所述，在圖19至圖21中，已經(jīng)描述了在檢測(cè)區(qū)域535至檢測(cè)區(qū)域538的所有圖像判定中檢測(cè)正常的情況。接著，將描述在檢測(cè)區(qū)域535至檢測(cè)區(qū)域538中的任一個(gè)中檢測(cè)到異常的情況。

如圖18所示，將描述觸發(fā)生成單元313檢測(cè)到觸發(fā)之后再次檢測(cè)觸發(fā)之后的操作。檢測(cè)區(qū)域判定單元314從觸發(fā)生成單元313接收觸發(fā)信號(hào)，然后在針對(duì)檢測(cè)區(qū)域535設(shè)置的檢測(cè)延遲時(shí)間的“1.0”秒之后，在檢測(cè)區(qū)域535中執(zhí)行圖像判定。作為判定的結(jié)果，在檢測(cè)到正常的情況下，如圖22所示，第一控制單元316以不同于正常狀態(tài)的顏色來(lái)顯示表示檢測(cè)區(qū)域535的幀，并且將該幀顯示為比正常狀態(tài)下的幀更粗。例如，為了表示檢測(cè)到正常，第一控制單元316以“藍(lán)色”顯示表示檢測(cè)區(qū)域535的幀，并且將該幀顯示為粗體，并且將顯示狀態(tài)持續(xù)1秒。然后，第一控制單元316在1秒之后將表示檢測(cè)區(qū)域535的幀的顯示返回到正常狀態(tài)的幀的顯示。

接著，檢測(cè)區(qū)域判定單元314從觸發(fā)生成單元313接收觸發(fā)信號(hào)，并且在針對(duì)檢測(cè)區(qū)域536設(shè)置的檢測(cè)延遲時(shí)間的“2.2”秒之后，在檢測(cè)區(qū)域536中執(zhí)行圖像判定。檢測(cè)區(qū)域判定單元314從觸發(fā)生成單元313接收觸發(fā)信號(hào)，然后在針對(duì)檢測(cè)區(qū)域537設(shè)置的檢測(cè)延遲時(shí)間的“2.5”秒之后，在檢測(cè)區(qū)域537中執(zhí)行圖像判定。作為判定的結(jié)果，在檢測(cè)區(qū)域536中檢測(cè)到正常的情況下，如圖23所示，第一控制單元316以不同于正常狀態(tài)的顏色來(lái)顯示表示檢測(cè)區(qū)域536的幀，并且將該幀顯示為比正常狀態(tài)下的幀更粗。例如，為了表示檢測(cè)到正常，第一控制單元316以“藍(lán)色”顯示表示檢測(cè)區(qū)域536的幀，并且將該幀顯示為粗體，并且將顯示狀態(tài)持續(xù)1秒。然后，第一控制單元316在1秒之后將表示檢測(cè)區(qū)域536的幀的顯示返回到正常狀態(tài)的幀的顯示。另外，作為上述判定的結(jié)果，在檢測(cè)區(qū)域537中檢測(cè)到異常的情況下，如圖23所示，第一控制單元316以不同于正常狀態(tài)的顏色來(lái)顯示表示檢測(cè)區(qū)域537的幀，并且將該幀顯示為比正常狀態(tài)下的幀更粗。例如，為了表示檢測(cè)到異常，第一控制單元316以“紅色”顯示表示檢測(cè)區(qū)域537的幀，并且將該幀顯示為粗體，并且將顯示狀態(tài)持續(xù)1秒。此時(shí)，當(dāng)檢測(cè)區(qū)域判定單元314在檢測(cè)區(qū)域537中檢測(cè)到異常的時(shí)刻，通知控制單元317向通知單元334輸出異常檢測(cè)聲音(在圖23中，表示為“噓聲(boo)”)持續(xù)預(yù)定時(shí)間(例如，1秒)，該異常檢測(cè)聲音通知檢測(cè)到異常。然后，第一控制單元316在1秒之后將表示檢測(cè)區(qū)域537的幀的顯示返回到正常狀態(tài)的幀的顯示。

然后，檢測(cè)區(qū)域判定單元314從觸發(fā)生成單元313接收觸發(fā)信號(hào)，然后在針對(duì)檢測(cè)區(qū)域538設(shè)置的檢測(cè)延遲時(shí)間的“4.0”秒之后，在檢測(cè)區(qū)域538中執(zhí)行圖像判定。作為判定的結(jié)果，在檢測(cè)到異常的情況下，如圖24所示，第一控制單元316以不同于正常狀態(tài)的顏色來(lái)顯示表示檢測(cè)區(qū)域538的幀，并且將該幀顯示為比正常狀態(tài)下的幀更粗。例如，為了表示檢測(cè)到異常，第一控制單元316以“紅色”顯示表示檢測(cè)區(qū)域538的幀，并且將該幀顯示為粗體，并且將顯示狀態(tài)持續(xù)1秒。此時(shí)，在檢測(cè)區(qū)域判定單元314在檢測(cè)區(qū)域538中檢測(cè)到異常的時(shí)刻，通知控制單元317向通知單元334輸出異常檢測(cè)聲音(在圖24中，表示為“噓聲(boo)”)持續(xù)預(yù)定時(shí)間(例如，1秒)，該異常檢測(cè)聲音通知檢測(cè)到異常。然后，第一控制單元316在1秒之后將表示檢測(cè)區(qū)域538的幀的顯示返回到正常狀態(tài)的幀的顯示。然后，在檢測(cè)區(qū)域判定單元314結(jié)束根據(jù)觸發(fā)生成單元313的觸發(fā)進(jìn)行的檢測(cè)區(qū)域的所有判定的時(shí)刻(也就是，結(jié)束檢測(cè)區(qū)域538的圖像判定的時(shí)刻)，通知控制單元317向通知單元334輸出表示檢測(cè)區(qū)域的圖像判定結(jié)束的判定結(jié)束聲音(在圖24中，表示為“嘟嘟聲(pip)”)持續(xù)預(yù)定的時(shí)間(例如，0.2秒)。在此情況下，根據(jù)檢測(cè)區(qū)域538的圖像判定，異常檢測(cè)聲音和判定結(jié)束聲音通過(guò)被重疊由通知單元334輸出，但是聲音彼此不同(例如，不同音階，或不同的波形或旋律的聲音)，因此用戶能夠差異性地區(qū)分這兩個(gè)聲音。如上所述，在圖22至圖24中，將描述通過(guò)檢測(cè)區(qū)域535至檢測(cè)區(qū)域538的圖像判定中的任何一個(gè)檢測(cè)到異常的情況。

此外，在上面的描述中，已經(jīng)描述了基于閃速檢測(cè)功能的視頻數(shù)據(jù)的圖像判定操作中每個(gè)判定區(qū)域(觸發(fā)區(qū)域530、和檢測(cè)區(qū)域535至檢測(cè)區(qū)域538)的幀的顯示操作，并且同樣適用于基于全時(shí)檢測(cè)功能的圖像判定操作中的全時(shí)檢測(cè)區(qū)域570的幀的顯示操作。例如，作為全時(shí)判定單元315持續(xù)執(zhí)行的圖像判定的結(jié)果，在全時(shí)檢測(cè)區(qū)域570中檢測(cè)到異常的情況下，第一控制單元316以不同于正常狀態(tài)的顏色來(lái)顯示表示全時(shí)檢測(cè)區(qū)域570的幀，并且將該幀顯示為比正常狀態(tài)下的幀更粗。例如，當(dāng)檢測(cè)到異常時(shí)，為了表示檢測(cè)到異常，第一控制單元316以“紅色”顯示表示全時(shí)檢測(cè)區(qū)域570的幀，并將該幀顯示為粗體，并且繼續(xù)顯示狀態(tài)。然后，在全時(shí)檢測(cè)區(qū)域570的圖像返回到正常狀態(tài)的情況下，第一控制單元316將表示全時(shí)檢測(cè)區(qū)域570的幀返回到正常狀態(tài)的幀的顯示。此外，在全時(shí)檢測(cè)區(qū)域判定單元315在全時(shí)檢測(cè)區(qū)域570中檢測(cè)到異常的情況下，通知控制單元317可以將通知檢測(cè)到異常的異常檢測(cè)聲音輸出到通知單元334。

如上所述，在以不同顏色來(lái)顯示表示每個(gè)判定區(qū)域的幀，并且在判定區(qū)域執(zhí)行每個(gè)檢測(cè)(觸發(fā)的檢測(cè)、正常的檢測(cè)、或異常的檢測(cè))的情形下，第一控制單元316以不同的顏色來(lái)顯示幀并且將幀顯示為加粗，使得能夠這些幀相互區(qū)分。因此，用戶能夠可視化地掌握任意功能的所執(zhí)行的圖像判定操作(監(jiān)視操作)和每個(gè)檢測(cè)的時(shí)刻。此外，在檢測(cè)區(qū)域中檢測(cè)到異常并且根據(jù)相同觸發(fā)的檢測(cè)區(qū)域的所有圖像判定結(jié)束的情況下，聲音被輸出。因此，用戶也能夠在聽(tīng)覺(jué)上掌握檢測(cè)到異常和結(jié)束判定的定時(shí)。

此外，在圖16中所示的觀察者屏幕400的示例中，能夠在視頻顯示單元401a至視頻顯示單元401f的六個(gè)顯示區(qū)域中執(zhí)行監(jiān)視操作，因此期望的是每個(gè)視頻顯示單元401改變判定結(jié)束聲音的音階、波形、旋律等。例如，通知控制單元317將作為音階的“哆來(lái)咪發(fā)唆拉(doremifasolla)”分配并且輸出到通知單元334作為每個(gè)視頻顯示單元401中的判定結(jié)束聲音。因此，可以區(qū)分視頻顯示單元401的監(jiān)視操作的判定結(jié)束聲音。在此情況下，“拉(la)”被分配到上述視頻顯示單元401f中的圖像判定操作的判定結(jié)束聲音。

另外，可以根據(jù)設(shè)置來(lái)改變判定結(jié)束聲音和異常檢測(cè)聲音的類型、旋律、音階等，以及顯示方面，諸如表示每個(gè)判定區(qū)域的幀的顏色。

(觀察者屏幕上的圖像判定再現(xiàn)操作)

圖25是示出在顯示在根據(jù)本實(shí)施例的信息處理設(shè)備的顯示區(qū)域中的觀察者屏幕上顯示被記錄的視頻的狀態(tài)的示例的示意圖。圖26是示出針對(duì)在顯示在根據(jù)本實(shí)施例的信息處理設(shè)備的顯示區(qū)域中的觀察者屏幕上再現(xiàn)并且顯示的視頻進(jìn)行再現(xiàn)圖像判定的狀態(tài)的示例的示意圖。將參考圖25和圖26來(lái)描述觀察者屏幕700的配置和顯示多個(gè)被記錄的視頻的操作。

圖25中所示的觀察者屏幕700根據(jù)通過(guò)cpu101所執(zhí)行的程序(應(yīng)用)而顯示在顯示單元333上。觀察者屏幕700是如下的屏幕：顯示從多個(gè)成像設(shè)備2接收到的視頻數(shù)據(jù)，該視頻數(shù)據(jù)是由視頻分配單元312存儲(chǔ)在存儲(chǔ)單元302中的過(guò)去的視頻數(shù)據(jù)，并且通過(guò)第二再現(xiàn)單元318再現(xiàn)每個(gè)指明的判定區(qū)域中的圖像判定的狀態(tài)。

如圖26所示，觀察者屏幕700包括視頻顯示單元701a至視頻顯示單元701f，再現(xiàn)按鈕703a、暫停按鈕703b、快進(jìn)按鈕703c、快退按鈕703d、停止按鈕705、時(shí)間顯示按鈕706、以及標(biāo)記列表按鈕707。

視頻顯示單元701a至視頻顯示單元701f是根據(jù)來(lái)自用戶所操縱的輸入單元303的操縱信號(hào)來(lái)分別顯示存儲(chǔ)在視頻分配單元312中的每個(gè)成像設(shè)備2的過(guò)去的視頻數(shù)據(jù)的顯示部。另外，在此，視頻顯示單元701a至視頻顯示單元701f顯示相同日期和時(shí)間的視頻數(shù)據(jù)。另外，在根據(jù)用戶對(duì)于輸入單元303的操縱(例如，鼠標(biāo)108的點(diǎn)擊操縱等，以下同樣適用)而被按下的情況下，視頻顯示單元701a至視頻顯示單元701f能夠處于選擇狀態(tài)。此外，在視頻顯示單元701a至701f被不加區(qū)分地提及或統(tǒng)稱的情況下，視頻顯示單元701a至701f將被簡(jiǎn)稱為“視頻顯示單元701”。

當(dāng)根據(jù)用戶對(duì)于輸入單元303的操縱而按下再現(xiàn)按鈕703a時(shí)，顯示在設(shè)置視頻顯示單元701上的視頻數(shù)據(jù)通過(guò)第二再現(xiàn)單元318開(kāi)始再現(xiàn)。當(dāng)根據(jù)用戶對(duì)于輸入單元303的操縱而按下暫停按鈕703b時(shí)，再現(xiàn)并且顯示在設(shè)置視頻顯示單元701上的視頻數(shù)據(jù)通過(guò)第二再現(xiàn)單元318暫時(shí)停止。當(dāng)根據(jù)用戶對(duì)于輸入單元303的操縱來(lái)按下快進(jìn)按鈕703c時(shí)，再現(xiàn)并且顯示在設(shè)置視頻顯示單元701上的視頻數(shù)據(jù)通過(guò)第二再現(xiàn)單元318經(jīng)歷快進(jìn)顯示。當(dāng)根據(jù)用戶對(duì)于輸入單元303的操縱來(lái)按下快退按鈕703d時(shí)，再現(xiàn)并且顯示在設(shè)置視頻顯示單元701上的視頻數(shù)據(jù)通過(guò)第二再現(xiàn)單元318經(jīng)歷快退顯示。當(dāng)根據(jù)用戶對(duì)于輸入單元303的操縱而按下停止按鈕703e時(shí)，再現(xiàn)并且顯示在設(shè)置視頻顯示單元701上的視頻數(shù)據(jù)通過(guò)第二再現(xiàn)單元318停止。

搜索條704是根據(jù)設(shè)置在搜索條上的滑塊705的位置來(lái)表示視頻數(shù)據(jù)再現(xiàn)并且顯示在視頻顯示單元701上的時(shí)間的棒狀體。滑塊705是滑動(dòng)到搜索條704上與再現(xiàn)和顯示在視頻顯示單元701上的視頻數(shù)據(jù)的成像時(shí)間(使得所顯示的幀成像的時(shí)間)對(duì)應(yīng)的位置的主體和操縱部。相反，在滑塊705根據(jù)用戶對(duì)于輸入單元303的操縱進(jìn)行滑動(dòng)的情況下，與滑塊705在搜索條704上所處的位置對(duì)應(yīng)的成像時(shí)間的視頻數(shù)據(jù)的幀通過(guò)第二再現(xiàn)單元318顯示在視頻顯示單元701上。

時(shí)間顯示單元706是顯示通過(guò)第二再現(xiàn)單元318再現(xiàn)并且顯示在視頻顯示單元701上的視頻數(shù)據(jù)的成像日期和成像時(shí)間的顯示部。

當(dāng)根據(jù)用戶對(duì)于輸入單元303的操作而按下標(biāo)記列表按鈕707時(shí)，列表控制單元320讀取出存儲(chǔ)在存儲(chǔ)單元302中的標(biāo)記文件，并且圖27中的下面描述的標(biāo)記列表屏幕800顯示標(biāo)記文件的內(nèi)容。

在存儲(chǔ)單元302中所存儲(chǔ)的過(guò)去的視頻數(shù)據(jù)通過(guò)第二再現(xiàn)單元318顯示在觀察者屏幕700的視頻顯示單元701上的情況下，區(qū)域顯示控制單元319讀取出存儲(chǔ)單元302中所存儲(chǔ)的如下信息：開(kāi)始和結(jié)束圖像判定操作(監(jiān)視操作)的時(shí)間的信息，指定每個(gè)判定區(qū)域的時(shí)間的信息，以及在判定區(qū)域中執(zhí)行檢測(cè)的時(shí)間的信息。如圖25所示，區(qū)域顯示控制單元319基于這樣的時(shí)間信息，通過(guò)將幀疊加在再現(xiàn)并且顯示在視頻顯示單元701上的過(guò)去的視頻數(shù)據(jù)上，來(lái)顯示表示每個(gè)判定區(qū)域的幀。例如，在根據(jù)時(shí)間信息，每個(gè)判定區(qū)域被指定的時(shí)間早于圖像判定操作開(kāi)始的時(shí)間的情況下，區(qū)域顯示控制單元319從圖像判定操作的開(kāi)始時(shí)間起，顯示表示每個(gè)被指定的判定區(qū)域的幀。另外，在視頻數(shù)據(jù)再現(xiàn)并且顯示在視頻顯示單元701上的時(shí)間是時(shí)間信息的圖像判定操作的結(jié)束時(shí)間的時(shí)間點(diǎn)，區(qū)域顯示控制單元319刪除表示每個(gè)所顯示的判定區(qū)域的幀。

另外，如圖26所示，在視頻數(shù)據(jù)再現(xiàn)并且顯示在視頻顯示單元701上的時(shí)間是時(shí)間信息的特定判定區(qū)域的觸發(fā)檢測(cè)時(shí)間或正常檢測(cè)時(shí)間的時(shí)間點(diǎn)，區(qū)域顯示控制單元319以不同于正常狀態(tài)下的顏色的顏色來(lái)顯示表示判定區(qū)域的幀，并且將該幀顯示為比正常狀態(tài)的幀更粗。具體地，與表示顯示在觀察者屏幕400上的每個(gè)判定區(qū)域的幀相同，區(qū)域顯示控制單元319例如以“藍(lán)色”顯示幀，并且將該幀顯示為加粗。

另外，如圖26所示，在視頻數(shù)據(jù)再現(xiàn)并且顯示在視頻顯示單元701上的時(shí)間是時(shí)間信息的特定判定區(qū)域的異常檢測(cè)時(shí)間的時(shí)間點(diǎn)，區(qū)域顯示控制單元319以不同于正常狀態(tài)下的顏色的顏色來(lái)顯示表示判定區(qū)域的幀，并且將該幀顯示為比正常狀態(tài)的幀更粗。具體地，與表示顯示在觀察者屏幕400上的每個(gè)判定區(qū)域的幀相同，區(qū)域顯示控制單元319例如以“紅色”顯示幀，并且將該幀顯示為加粗。

在圖26中所示的觀察者屏幕700的示例中，幀的顯示表示在視頻顯示單元701a的一個(gè)全時(shí)檢測(cè)區(qū)域中檢測(cè)到異常。另外，在視頻顯示單元701f中，幀的顯示表示檢測(cè)到正常，并且在與檢測(cè)區(qū)域536和檢測(cè)區(qū)域537對(duì)應(yīng)的檢測(cè)區(qū)域中檢測(cè)到異常。

如上所述，根據(jù)區(qū)域顯示控制單元319，基于存儲(chǔ)在存儲(chǔ)單元302中的每個(gè)時(shí)間信息項(xiàng)目來(lái)控制每個(gè)判定區(qū)域的幀的顯示狀態(tài)，因此觀察者屏幕400上的圖像判定操作(監(jiān)視操作)的狀態(tài)能夠通過(guò)過(guò)去的視頻數(shù)據(jù)進(jìn)行再現(xiàn)。因此，用戶能夠確認(rèn)針對(duì)過(guò)去的視頻數(shù)據(jù)而不是實(shí)時(shí)視頻來(lái)執(zhí)行哪個(gè)圖像判定操作。

此外，視頻顯示單元701a至視頻顯示單元701f顯示相同日期和時(shí)間的視頻數(shù)據(jù)，但是視頻數(shù)據(jù)不限于此，并且例如可以在每個(gè)視頻顯示單元701中設(shè)置搜索條、操縱按鈕等，并且不同日期和時(shí)間的視頻數(shù)據(jù)項(xiàng)目可以顯示在視頻顯示單元701上。

另外，與觀察者屏幕400上的圖像判定操作相同，即使當(dāng)圖像判定操作再現(xiàn)在觀察者屏幕700上時(shí)，基于時(shí)間信息，在檢測(cè)區(qū)域中檢測(cè)到異常的時(shí)刻和基于閃速檢測(cè)功能的與特定觸發(fā)區(qū)域?qū)?yīng)的檢測(cè)區(qū)域中的所有判定結(jié)束的時(shí)刻可以分別輸出異常檢測(cè)聲音和判定結(jié)束聲音。

圖27是示出在顯示在根據(jù)本實(shí)施例的信息處理設(shè)備的顯示區(qū)域中的觀察者屏幕上顯示標(biāo)記列表屏幕的狀態(tài)的示例的示意圖。如圖27所示，在根據(jù)用戶對(duì)于輸入單元303的操縱而按下標(biāo)記列表按鈕707的情況下，列表控制單元320讀取出存儲(chǔ)在存儲(chǔ)單元302中的標(biāo)記文件，并且顯示表示標(biāo)記文件的內(nèi)容的標(biāo)記列表屏幕800。如圖27所示，標(biāo)記列表屏幕800包括檢測(cè)選擇單元801和檢測(cè)歷史顯示單元802。

檢測(cè)選擇單元801是用于選擇以下列表的任意顯示的選擇操縱部：基于全時(shí)檢測(cè)功能在全時(shí)檢測(cè)區(qū)域的圖像判定中檢測(cè)到異常的日期和時(shí)間的列表，或者基于閃速檢測(cè)功能在觸發(fā)區(qū)域中檢測(cè)到觸發(fā)和在檢測(cè)區(qū)域中檢測(cè)到異常的日期和時(shí)間的列表。

檢測(cè)歷史顯示單元802是通過(guò)檢測(cè)選擇單元801選擇的基于全時(shí)檢測(cè)功能進(jìn)行檢測(cè)的日期和時(shí)間的列表，或者基于閃速檢測(cè)功能的檢測(cè)的日期和時(shí)間的列表的顯示部。圖27中所示的檢測(cè)歷史顯示單元802表示檢測(cè)選擇單元801選擇閃速檢測(cè)功能，并且顯示基于閃速檢測(cè)功能進(jìn)行檢測(cè)的日期和時(shí)間的列表。具體地，檢測(cè)歷史顯示單元802顯示基于閃速檢測(cè)功能的觸發(fā)區(qū)域和檢測(cè)區(qū)域的區(qū)域名稱、檢測(cè)的日期和時(shí)間、以及識(shí)別對(duì)應(yīng)的成像設(shè)備2的名稱。

在根據(jù)用戶對(duì)于輸入單元303的操縱而按下表示檢測(cè)歷史顯示單元802的任何一個(gè)判定區(qū)域的記錄的情況下，列表控制單元320允許第二再現(xiàn)單元318將該記錄所表示的日期和時(shí)間的視頻數(shù)據(jù)顯示在視頻顯示單元701上。

因此，顯示圖27中所示的標(biāo)記列表屏幕800，因此以列表來(lái)顯示每個(gè)檢測(cè)區(qū)域中進(jìn)行的檢測(cè)的日期和時(shí)間，并且可以易于指定發(fā)生問(wèn)題的時(shí)刻，異常發(fā)生的起因或趨勢(shì)等。

(觀察者屏幕的圖像判定操作的總體流程)

圖28是示出在顯示在根據(jù)本實(shí)施例的信息處理設(shè)備的顯示設(shè)備上的觀察者屏幕上進(jìn)行的監(jiān)視操作的示例的流程圖。將參考圖28來(lái)概括性地描述觀察者屏幕400上的圖像判定操作(監(jiān)視操作)的流程。此外，在圖28中，基于閃速檢測(cè)功能的圖像判定操作將被描述為示例。

<步驟s11>

視頻分配單元312根據(jù)來(lái)自用戶所操縱的輸入單元303的操縱信號(hào)，將從視頻接收單元301獲取到的實(shí)時(shí)視頻數(shù)據(jù)進(jìn)行排序，并且顯示在待顯示在顯示單元333上的觀察者屏幕400的視頻顯示單元401a至視頻顯示單元401f上。另外，視頻分配單元312將顯示在視頻顯示單元401上的每個(gè)視頻數(shù)據(jù)項(xiàng)目存儲(chǔ)(記錄)在存儲(chǔ)單元302中。然后，該過(guò)程進(jìn)行到步驟s12。

<步驟s12>

用戶根據(jù)輸入單元303的操作按下與計(jì)劃啟動(dòng)圖像判定操作(監(jiān)視操作)的成像設(shè)備2對(duì)應(yīng)的視頻顯示單元401，并且將視頻顯示單元設(shè)置為選擇狀態(tài)。然后，在根據(jù)用戶對(duì)于輸入單元303的操作而按下監(jiān)視開(kāi)始按鈕411的情況下，第一控制單元316啟動(dòng)針對(duì)成像設(shè)備2的實(shí)時(shí)視頻數(shù)據(jù)的圖像判定操作，其中成像設(shè)備2的實(shí)時(shí)視頻數(shù)據(jù)將待顯示在處于選擇狀態(tài)的視頻顯示單元401上。在針對(duì)視頻顯示單元401啟動(dòng)圖像判定操作的情況下，第一控制單元316通過(guò)將幀疊加在視頻顯示單元401的視頻數(shù)據(jù)上，來(lái)顯示表示設(shè)置屏幕500所指明的每個(gè)判定區(qū)域的幀。此時(shí)，第一控制單元316以不同的顏色來(lái)顯示表示處于正常狀態(tài)(每個(gè)判定區(qū)域未被執(zhí)行檢測(cè)的狀態(tài))的每個(gè)判定圖像的幀。例如，第一控制單元316以“白色”顯示表示觸發(fā)區(qū)域的幀，以“黃色”顯示表示檢測(cè)區(qū)域的幀，并且以“綠色”顯示表示全時(shí)檢測(cè)區(qū)域的幀。另外，第一控制單元316將啟動(dòng)圖像判定操作的時(shí)間的信息(時(shí)間信息)與對(duì)應(yīng)于處于選擇狀態(tài)的視頻顯示單元401(以下，簡(jiǎn)稱為“視頻顯示單元401”)的成像設(shè)備2相關(guān)聯(lián)地存儲(chǔ)在存儲(chǔ)單元302中。然后，該過(guò)程進(jìn)行到步驟s13。

<步驟s13>

觸發(fā)生成單元313從存儲(chǔ)單元302獲取通過(guò)變化點(diǎn)檢測(cè)單元306檢測(cè)出的變化點(diǎn)所在的幀的差異圖像。然后，觸發(fā)生成單元313將差異圖像與視頻顯示單元401所指明的觸發(fā)區(qū)域中的視頻數(shù)據(jù)的幀的觸發(fā)區(qū)域中的圖像相比較。觸發(fā)生成單元313將視頻數(shù)據(jù)的幀的觸發(fā)區(qū)域中的圖像與變化點(diǎn)所在的幀的差異圖像比較，并且在作為像素值相差大于或等于預(yù)定靈敏度的像素總數(shù)的差值小于預(yù)定閾值的情況下，生成(輸出)觸發(fā)信號(hào)(檢測(cè)到觸發(fā))(步驟s13：是)。然后，觸發(fā)生成單元313將圖像判定操作生成觸發(fā)信號(hào)的時(shí)間的信息(時(shí)間信息)與執(zhí)行圖像判定操作的成像設(shè)備2相關(guān)聯(lián)地存儲(chǔ)在存儲(chǔ)單元302中。然后，該過(guò)程進(jìn)行到步驟s14。

另外，在差值不小于預(yù)定閾值的情況下(步驟s13：否)，觸發(fā)生成單元313繼續(xù)針對(duì)差值的判定。

<步驟s14>

在觸發(fā)生成單元313檢測(cè)到觸發(fā)的情況下，第一控制單元316以不同于正常狀態(tài)下的顏色的顏色來(lái)顯示表示觸發(fā)區(qū)域的幀，并且將該幀顯示為比正常狀態(tài)下的幀更粗。例如，第一控制單元316以“藍(lán)色”顯示表示觸發(fā)區(qū)域的幀，并且將該幀顯示為加粗，并且將顯示狀態(tài)持續(xù)1秒。然后，第一控制單元316在1秒之后將表示觸發(fā)區(qū)域的幀的顯示返回到正常狀態(tài)的幀的顯示。然后，該過(guò)程進(jìn)行到步驟s15。

<步驟s15>

在從觸發(fā)生成單元313接收到觸發(fā)信號(hào)，然后存在針對(duì)檢測(cè)區(qū)域設(shè)置的檢測(cè)延遲時(shí)間之后的檢測(cè)區(qū)域的情況下(步驟s15：是)，該過(guò)程進(jìn)行到步驟s16，在相反的情況下(步驟s15：否)，該過(guò)程進(jìn)行到步驟s21。

<步驟s16>

檢測(cè)區(qū)域判定單元314從觸發(fā)生成單元313接收觸發(fā)信號(hào)，然后在針對(duì)檢測(cè)區(qū)域設(shè)置的檢測(cè)延遲時(shí)間之后，將檢測(cè)標(biāo)準(zhǔn)圖像與視頻數(shù)據(jù)的幀的檢測(cè)區(qū)域中的圖像比較，并且執(zhí)行在指定的檢測(cè)區(qū)域中是否存在異常的圖像判定。具體地，從觸發(fā)生成單元313接收到與觸發(fā)區(qū)域?qū)?yīng)的觸發(fā)信號(hào)的時(shí)間點(diǎn)開(kāi)始，檢測(cè)區(qū)域判定單元314將與檢測(cè)區(qū)域?qū)?yīng)的檢測(cè)延遲時(shí)間之后的視頻數(shù)據(jù)的幀的檢測(cè)區(qū)域中的圖像與檢測(cè)標(biāo)準(zhǔn)圖像進(jìn)行比較，并且執(zhí)行是否存在異常的圖像判定。此時(shí)，在圖像判定中，檢測(cè)區(qū)域判定單元314將檢測(cè)標(biāo)準(zhǔn)圖像與檢測(cè)區(qū)域中的圖像進(jìn)行比較，并且在差異大于或等于屬性信息的閾值的情況下，通過(guò)檢測(cè)區(qū)域的圖像判定來(lái)判定存在異常，其中的差異是像素值差別超出或等于檢測(cè)區(qū)域的屬性信息的預(yù)定靈敏度的像素的總數(shù)。然后，檢測(cè)區(qū)域判定單元314將圖像判定操作檢測(cè)到異?；驒z測(cè)到正常的檢測(cè)時(shí)間的信息(時(shí)間信息)與執(zhí)行圖像判定操作的成像設(shè)備2相關(guān)聯(lián)地存儲(chǔ)在存儲(chǔ)單元302中。然后，該過(guò)程進(jìn)行到步驟s17。

<步驟s17>

作為檢測(cè)區(qū)域判定單元314的圖像判定的結(jié)果，在檢測(cè)到異常的情況下(步驟s17：是)，該過(guò)程進(jìn)行到步驟s18，并且在檢測(cè)到正常的情況下(步驟s17：否)，該過(guò)程進(jìn)行到步驟s20。

<步驟s18>

在圖像判定檢測(cè)到異常的情況下，檢測(cè)區(qū)域判定單元314將異常檢測(cè)時(shí)間的信息(時(shí)間信息)與執(zhí)行圖像判定的成像設(shè)備2相關(guān)聯(lián)地存儲(chǔ)在存儲(chǔ)單元302中。另外，在檢測(cè)區(qū)域中檢測(cè)到異常的情況下，第一控制單元316以不同于正常狀態(tài)下的顏色的顏色來(lái)顯示表示檢測(cè)區(qū)域的幀，并且將該幀顯示為比正常狀態(tài)下的幀更粗。例如，為了表示檢測(cè)到異常，第一控制單元316以“紅色”顯示表示檢測(cè)區(qū)域的幀，并且將該幀顯示為粗體，并且將顯示狀態(tài)持續(xù)1秒。此時(shí)，在檢測(cè)區(qū)域判定單元314在檢測(cè)區(qū)域中檢測(cè)到異常的時(shí)刻，通知控制單元317向通知單元334輸出異常檢測(cè)聲音持續(xù)預(yù)定時(shí)間(例如，1秒)，該異常檢測(cè)聲音通知檢測(cè)到異常。然后，第一控制單元316在1秒之后將表示觸發(fā)區(qū)域的幀的顯示返回到正常狀態(tài)的幀的顯示。然后，該過(guò)程進(jìn)行到步驟s19。

<步驟s19>

在檢測(cè)區(qū)域判定單元314執(zhí)行異常的判定的情況下，外部輸出單元332向外部設(shè)備10輸出異常信號(hào)。然后，該過(guò)程返回到步驟s15。

<步驟s20>

在圖像判定操作檢測(cè)到正常的情況下，檢測(cè)區(qū)域判定單元314將正常檢測(cè)時(shí)間的信息(時(shí)間信息)與執(zhí)行圖像判定操作的成像設(shè)備2相關(guān)聯(lián)地存儲(chǔ)在存儲(chǔ)單元302中。另外，在檢測(cè)區(qū)域中檢測(cè)到正常的情況下，第一控制單元316以不同于正常狀態(tài)下的顏色的顏色來(lái)顯示表示檢測(cè)區(qū)域的幀，并且將該幀顯示為比正常狀態(tài)下的幀更粗。例如，為了表示檢測(cè)到正常，第一控制單元316以“藍(lán)色”顯示表示檢測(cè)區(qū)域的幀，將該幀顯示為粗體，并且將顯示狀態(tài)持續(xù)1秒。然后，第一控制單元316在1秒之后將表示觸發(fā)區(qū)域的幀的顯示返回到正常狀態(tài)的幀的顯示。然后，該過(guò)程返回到步驟s15。

<步驟s21>

在保留根據(jù)觸發(fā)生成單元313的觸發(fā)的檢測(cè)區(qū)域的情況下(步驟s21：是)，該過(guò)程返回到步驟s15，并且在相反的情況下(步驟s21：否)，該過(guò)程進(jìn)行到步驟s22。

<步驟s22>

在檢測(cè)區(qū)域判定單元314結(jié)束根據(jù)觸發(fā)生成單元313的觸發(fā)進(jìn)行的檢測(cè)區(qū)域的所有判定的時(shí)刻，通知控制單元317向通知單元334輸出表示檢測(cè)區(qū)域的圖像判定結(jié)束的判定結(jié)束聲音持續(xù)預(yù)定的時(shí)間(例如，0.2秒)。

如上所述，通過(guò)重復(fù)上述的步驟s13至步驟s22來(lái)執(zhí)行基于閃速檢測(cè)功能的圖像判定操作。

(觀察者屏幕的圖像判定操作的總體流程)

圖29是示出針對(duì)在顯示在根據(jù)本實(shí)施例的信息處理設(shè)備的顯示區(qū)域中的觀察者屏幕上再現(xiàn)并且顯示的視頻進(jìn)行再現(xiàn)圖像判定的狀態(tài)的操作的示例的示意圖。將參考圖29來(lái)概括性地描述再現(xiàn)觀察者屏幕700上的圖像判定的操作的流程。

<步驟s31>

用戶根據(jù)對(duì)于輸入單元303的操縱來(lái)設(shè)置期望的再現(xiàn)時(shí)間(時(shí)間)。然后，該過(guò)程進(jìn)行到步驟s32。

<步驟s32>

第二再現(xiàn)單元318根據(jù)來(lái)自用戶所操縱的輸入單元303的操作信號(hào)，從存儲(chǔ)單元302獲取從再現(xiàn)時(shí)間(時(shí)間)開(kāi)始的被設(shè)置的過(guò)去的視頻數(shù)據(jù)。在此情況下，在獲取到視頻數(shù)據(jù)的情況下(也就是，存在待再現(xiàn)的視頻數(shù)據(jù)的下一幀的情況下)(步驟s32：是)，該過(guò)程進(jìn)行到步驟s33，并且在無(wú)法獲取過(guò)去的視頻數(shù)據(jù)的情況下(也就是，不存在待再現(xiàn)的視頻數(shù)據(jù)的下一幀的情況下)(步驟s32：否)，再現(xiàn)圖像判定的狀態(tài)的操作結(jié)束。

<步驟s33>

第二再現(xiàn)單元318將顯示從存儲(chǔ)單元302獲取到的過(guò)去視頻數(shù)據(jù)的觀察者屏幕700的視頻顯示單元701a至701f上的對(duì)應(yīng)的視頻數(shù)據(jù)進(jìn)行排序，并且在顯示單元333上進(jìn)行再現(xiàn)和顯示。此時(shí)，第二再現(xiàn)單元318根據(jù)來(lái)自用戶所操縱的輸入單元303的操縱信號(hào)，從用戶的期望再現(xiàn)時(shí)間(時(shí)間)的幀開(kāi)始，再現(xiàn)并且顯示視頻數(shù)據(jù)。然后，該過(guò)程進(jìn)行到步驟s34。

<步驟s34>

在存儲(chǔ)單元302中所存儲(chǔ)的過(guò)去的視頻數(shù)據(jù)通過(guò)第二再現(xiàn)單元318顯示在視頻顯示單元701上的情況下，區(qū)域顯示控制單元319讀取出存儲(chǔ)單元302中所存儲(chǔ)的如下信息：開(kāi)始和結(jié)束圖像判定操作(監(jiān)視操作)的時(shí)間的信息，指定每個(gè)判定區(qū)域的時(shí)間的信息，以及在每個(gè)判定區(qū)域中執(zhí)行檢測(cè)的時(shí)間的信息?；谶@樣的時(shí)間信息，區(qū)域顯示控制單元319通過(guò)將幀疊加在重現(xiàn)并且顯示在視頻顯示單元701上的過(guò)去的視頻數(shù)據(jù)上，來(lái)顯示表示每個(gè)判定區(qū)域的幀。例如，在根據(jù)時(shí)間信息，每個(gè)判定區(qū)域被指定的時(shí)間早于圖像判定操作開(kāi)始的時(shí)間的情況下，區(qū)域顯示控制單元319從圖像判定操作的開(kāi)始時(shí)間起，顯示表示每個(gè)判定區(qū)域的指定幀。然后，該過(guò)程進(jìn)行到步驟s35。

<步驟s35>

在視頻數(shù)據(jù)再現(xiàn)且顯示在視頻顯示單元701上的時(shí)間是時(shí)間信息的特定判定區(qū)域的檢測(cè)時(shí)間的情況下(步驟s35：是)，該過(guò)程進(jìn)行到步驟s36，并且該時(shí)間不是檢測(cè)時(shí)間的情況下(步驟s35：否)，持續(xù)地執(zhí)行該時(shí)間是否為檢測(cè)時(shí)間的確認(rèn)。

<步驟s36>

在視頻數(shù)據(jù)再現(xiàn)并且顯示在視頻顯示單元701上的時(shí)間是時(shí)間信息的特定判定區(qū)域的檢測(cè)時(shí)間的時(shí)間點(diǎn)，區(qū)域顯示控制單元319以不同于正常狀態(tài)下的顏色的顏色來(lái)顯示表示判定區(qū)域的幀，并且將該幀顯示為比正常狀態(tài)的幀更粗。然后，該過(guò)程返回到步驟s32。

如上所述，通過(guò)重復(fù)上述步驟s32至步驟s36來(lái)執(zhí)行再現(xiàn)圖像判定的狀態(tài)的操作。

如上所述，表示多個(gè)類型的判定區(qū)域(在上述實(shí)施例中，觸發(fā)區(qū)域、檢測(cè)區(qū)域和全時(shí)檢測(cè)區(qū)域中的任何一個(gè))的幀通過(guò)疊加在視頻數(shù)據(jù)上顯示在顯示單元333(視頻顯示單元401和視頻顯示單元701)的顯示區(qū)域。因此，用戶能夠掌握每個(gè)判定區(qū)域中執(zhí)行檢測(cè)(觸發(fā)的檢測(cè)、正常的檢測(cè)、異常的檢測(cè)等)的時(shí)刻以及檢測(cè)的內(nèi)容，然后可以同時(shí)掌握多個(gè)類型的判定操作的狀態(tài)。

另外，在顯示在顯示單元333的顯示區(qū)域中的多個(gè)類型的判定區(qū)域中，至少任意一個(gè)判定區(qū)域以不同的顏色進(jìn)行顯示。因此，可以可視化地掌握判定區(qū)域是基于何種判定功能(閃速檢測(cè)功能和全時(shí)檢測(cè)功能)。

另外，在檢測(cè)時(shí)刻，表示顯示在顯示單元333的顯示區(qū)域中的多個(gè)類型的判定區(qū)域的幀以不同于正常狀態(tài)下的顯示方式進(jìn)行顯示。因此，可以可視地掌握在判定區(qū)域執(zhí)行哪一檢測(cè)。

另外，可以針對(duì)顯示單元333的視頻顯示單元401上所顯示的實(shí)時(shí)視頻數(shù)據(jù)，來(lái)表示如上所述的圖像判定操作的每個(gè)判定區(qū)域中的操作的狀態(tài)。因此，用戶可以實(shí)時(shí)掌握每個(gè)判定區(qū)域中的操作的狀態(tài)。

另外，通過(guò)實(shí)時(shí)視頻數(shù)據(jù)的圖像判定操作來(lái)存儲(chǔ)每個(gè)時(shí)間信息項(xiàng)目，諸如開(kāi)始和結(jié)束圖像判定操作(監(jiān)視操作)的時(shí)間的信息，指定每個(gè)判定區(qū)域的時(shí)間的信息，以及在每個(gè)判定區(qū)域中執(zhí)行檢測(cè)的時(shí)間的信息。因此，基于時(shí)間信息可以再現(xiàn)針對(duì)已記錄的過(guò)去視頻數(shù)據(jù)的圖像判定操作的狀態(tài)。因此，用戶確認(rèn)被再現(xiàn)的圖像判定操作，因而能夠易于指定發(fā)生問(wèn)題的時(shí)刻，異常發(fā)生的起因或趨勢(shì)等。

另外，顯示基于上述時(shí)間信息的標(biāo)記文件，并且按時(shí)間順序顯示每個(gè)判定區(qū)域中的檢測(cè)時(shí)間。因此，可以按時(shí)間順序確認(rèn)每個(gè)檢測(cè)區(qū)域中進(jìn)行檢測(cè)的日期和時(shí)間，并且能夠易于指定發(fā)生問(wèn)題的時(shí)刻，異常發(fā)生的起因或趨勢(shì)等。

另外，在多個(gè)顯示區(qū)域中顯示關(guān)于多個(gè)成像設(shè)備2中的每個(gè)成像設(shè)備2的實(shí)時(shí)視頻數(shù)據(jù)或過(guò)去視頻數(shù)據(jù)的圖像判定的狀態(tài)。因此，可以同時(shí)確認(rèn)通過(guò)每個(gè)成像設(shè)備2進(jìn)行成像的視頻數(shù)據(jù)的圖像判定的狀態(tài)。

另外，在判定區(qū)域檢測(cè)到異常的時(shí)刻和基于閃速檢測(cè)功能的與特定的觸發(fā)區(qū)域?qū)?yīng)的檢測(cè)區(qū)域中的所有判定結(jié)束的時(shí)刻分別輸出異常檢測(cè)聲音和判定結(jié)束聲音。因此，可以從聽(tīng)覺(jué)上識(shí)別出發(fā)生異常的時(shí)刻和檢測(cè)結(jié)束的時(shí)刻。

此外，在本實(shí)施例中，已將基于閃速檢測(cè)功能的觸發(fā)區(qū)域和檢測(cè)區(qū)域，和基于全時(shí)檢測(cè)功能的全時(shí)檢測(cè)區(qū)域描述為判定區(qū)域的示例，但是判定區(qū)域不限于此。例如，圖像判定操作可以根據(jù)如下的判定區(qū)域來(lái)執(zhí)行：基于在生產(chǎn)過(guò)程中檢測(cè)一組操作是否按順序執(zhí)行的功能的判定區(qū)域，或者基于用于檢測(cè)產(chǎn)品中所描述的字符、條碼等的光學(xué)字符識(shí)別(ocr)功能的判定區(qū)域。

另外，如上所述，通過(guò)劃分屏幕使得實(shí)時(shí)視頻數(shù)據(jù)顯示在觀察者屏幕400并且過(guò)去的視頻數(shù)據(jù)顯示在觀察者屏幕700來(lái)執(zhí)行顯示，但是不限于此。也就是，可以在公用的屏幕上實(shí)現(xiàn)觀察者屏幕400和觀察者屏幕700的功能。

另外，在每個(gè)顯示區(qū)域(視頻顯示單元401和視頻顯示單元701)中，幀被用作表示每個(gè)判定區(qū)域的顯示要素，但是顯示要素不限于此，并且只要顯示要素能夠表示每個(gè)判定區(qū)域可以顯示任意的顯示要素。

另外，在上述實(shí)施例中，觸發(fā)生成單元313生成的觸發(fā)信號(hào)被用作檢測(cè)區(qū)域判定單元314的圖像判定的時(shí)刻的標(biāo)準(zhǔn)，但是標(biāo)準(zhǔn)不限于此。例如，觸發(fā)信號(hào)可以用作在生產(chǎn)設(shè)施側(cè)執(zhí)行預(yù)定處理的時(shí)刻的標(biāo)準(zhǔn)，并且在此情況下，可以在生成觸發(fā)信號(hào)的時(shí)間點(diǎn)將觸發(fā)信號(hào)發(fā)送到生產(chǎn)設(shè)施。

<變型例>

圖30是示出在顯示在根據(jù)本實(shí)施例的變型例的信息處理設(shè)備的顯示區(qū)域中的觀察者屏幕上執(zhí)行的監(jiān)視操作生成觸發(fā)之前的狀態(tài)的示例的示意圖。圖31是示出在顯示在根據(jù)本實(shí)施例的變型例的信息處理設(shè)備的顯示區(qū)域中的觀察者屏幕上執(zhí)行的監(jiān)視操作生成觸發(fā)的狀態(tài)的示例的示意圖。圖32至圖37是示出在顯示在根據(jù)本實(shí)施例的變型例的信息處理設(shè)備的顯示區(qū)域中的觀察者屏幕上執(zhí)行的監(jiān)視操作在監(jiān)視區(qū)域中執(zhí)行圖像判定的狀態(tài)的示例的示意圖。將參考圖30至圖37，通過(guò)使用觀察者屏幕400的視頻顯示單元401f作為示例來(lái)詳細(xì)地描述基于閃速檢測(cè)功能進(jìn)行的針對(duì)視頻數(shù)據(jù)的圖像判定操作(監(jiān)視操作)。在該變型例中，將描述如下操作：在觸發(fā)生成單元313檢測(cè)到與觸發(fā)區(qū)域相關(guān)聯(lián)的一個(gè)或多個(gè)檢測(cè)區(qū)域的觸發(fā)的情況下，表示所有檢測(cè)區(qū)域的幀持續(xù)處于表示圖像判定的結(jié)果的顯示狀態(tài)，直至與觸發(fā)區(qū)域相關(guān)聯(lián)的所有檢測(cè)區(qū)域中的全部圖像判定結(jié)束為止。另外，將描述在檢測(cè)區(qū)域535至檢測(cè)區(qū)域538的屬性信息項(xiàng)目中，將檢測(cè)延遲時(shí)間設(shè)置為“1.0”秒、“2.2”秒、“2.5”秒、“4.0”秒中的每一個(gè)。

首先，在針對(duì)視頻顯示單元401f啟動(dòng)圖像判定操作的情況下，第一控制單元316通過(guò)將幀疊加在視頻顯示單元401f的視頻數(shù)據(jù)上來(lái)顯示表示設(shè)置屏幕500上指明的每個(gè)判定區(qū)域的幀。具體地，如圖30所示，視頻顯示單元401f顯示觸發(fā)區(qū)域530、檢測(cè)區(qū)域535至538、以及全時(shí)檢測(cè)區(qū)域570。此時(shí)，第一控制單元316以不同的顏色來(lái)顯示表示處于正常狀態(tài)(每個(gè)判定區(qū)域未執(zhí)行檢測(cè)的狀態(tài))的每個(gè)判定圖像(顯示要素的示例)的幀。例如，第一控制單元316以“白色”顯示表示觸發(fā)區(qū)域530的幀，以“黃色”顯示表示檢測(cè)區(qū)域535至538的幀，并且以“綠色”顯示表示全時(shí)檢測(cè)區(qū)域570的幀。

接著，如圖31所示，在觸發(fā)生成單元313檢測(cè)到觸發(fā)的情況下，第一控制單元316以不同于正常狀態(tài)下的顏色的顏色來(lái)顯示表示觸發(fā)區(qū)域的幀，并且將該幀顯示為比正常狀態(tài)下的幀更粗。例如，第一控制單元316以“藍(lán)色”顯示表示觸發(fā)區(qū)域530的幀，并且將該幀顯示為粗體，并且將顯示狀態(tài)持續(xù)1秒。然后，第一控制單元316在1秒之后將表示觸發(fā)區(qū)域530的幀的顯示返回到正常狀態(tài)的幀的顯示。

接著，檢測(cè)區(qū)域判定單元314從觸發(fā)生成單元313接收觸發(fā)信號(hào)，然后在針對(duì)檢測(cè)區(qū)域535設(shè)置的檢測(cè)延遲時(shí)間的“1.0”秒之后，在檢測(cè)區(qū)域535中執(zhí)行圖像判定。作為判定的結(jié)果，在檢測(cè)到正常的情況下，如圖32所示，第一控制單元316以不同于正常狀態(tài)下的顏色的顏色來(lái)顯示表示檢測(cè)區(qū)域535的幀，并且將該幀顯示為比正常狀態(tài)下的幀更粗。例如，為了表示檢測(cè)到正常，第一控制單元316以“藍(lán)色”顯示表示檢測(cè)區(qū)域535的幀，并且將該幀顯示為粗體，并且持續(xù)顯示狀態(tài)。

接著，檢測(cè)區(qū)域判定單元314從觸發(fā)生成單元313接收觸發(fā)信號(hào)，然后在針對(duì)檢測(cè)區(qū)域536設(shè)置的檢測(cè)延遲時(shí)間的“2.2”秒之后，在檢測(cè)區(qū)域536中執(zhí)行圖像判定。檢測(cè)區(qū)域判定單元314從觸發(fā)生成單元313接收觸發(fā)信號(hào)，然后在針對(duì)檢測(cè)區(qū)域537設(shè)置的檢測(cè)延遲時(shí)間的“2.5”秒之后，在檢測(cè)區(qū)域537中執(zhí)行圖像判定。作為判定的結(jié)果，在分別檢測(cè)到正常的情況下，如圖33所示，第一控制單元316以不同于正常狀態(tài)的顏色來(lái)顯示表示檢測(cè)區(qū)域536和檢測(cè)區(qū)域537中的每個(gè)檢測(cè)區(qū)域的幀，并且將該幀顯示為比正常狀態(tài)下的幀更粗。例如，為了表示檢測(cè)到正常，第一控制單元316以“藍(lán)色”顯示表示檢測(cè)區(qū)域536和檢測(cè)區(qū)域537的幀，并且將幀顯示為粗體，并且持續(xù)顯示狀態(tài)。在這樣的時(shí)間點(diǎn)，如圖33所示，檢測(cè)區(qū)域535至檢測(cè)區(qū)域537兩者都處于檢測(cè)到正常的顯示狀態(tài)(幀以“藍(lán)色”來(lái)顯示并且顯示為加粗的狀態(tài))。

然后，檢測(cè)區(qū)域判定單元314從觸發(fā)生成單元313接收觸發(fā)信號(hào)，并且在針對(duì)檢測(cè)區(qū)域538設(shè)置的檢測(cè)延遲時(shí)間的“4.0”秒之后，在檢測(cè)區(qū)域538中執(zhí)行圖像判定。作為判定的結(jié)果，在檢測(cè)到正常的情況下，如圖34所示，第一控制單元316以不同于正常狀態(tài)的顏色來(lái)顯示表示檢測(cè)區(qū)域538的幀，并且將該幀顯示為比正常狀態(tài)下的幀更粗。例如，為了表示檢測(cè)到正常，第一控制單元316以“藍(lán)色”顯示表示檢測(cè)區(qū)域538的幀，并且將該幀顯示為粗體。當(dāng)這樣的時(shí)間點(diǎn)時(shí)，如圖34所示，檢測(cè)區(qū)域535至檢測(cè)區(qū)域538全都處于檢測(cè)到正常的顯示狀態(tài)(幀以“藍(lán)色”來(lái)顯示并且顯示為加粗的狀態(tài))。

然后，在與觸發(fā)區(qū)域530相關(guān)聯(lián)的檢測(cè)區(qū)域中，在待經(jīng)歷圖像判定的檢測(cè)區(qū)域538中的圖像判定結(jié)束于最后時(shí)刻之后，第一控制單元316將檢測(cè)到正常的檢測(cè)區(qū)域536至檢測(cè)區(qū)域538的顯示狀態(tài)持續(xù)預(yù)定時(shí)間(例如，持續(xù)1秒)。然后，第一控制單元316在預(yù)定時(shí)間之后將表示檢測(cè)區(qū)域535至檢測(cè)區(qū)域538的每個(gè)幀的顯示返回到正常狀態(tài)下的幀的顯示。

另外，在檢測(cè)區(qū)域判定單元314結(jié)束根據(jù)觸發(fā)生成單元313的觸發(fā)進(jìn)行的檢測(cè)區(qū)域的所有圖像判定的時(shí)刻(也就是，結(jié)束檢測(cè)區(qū)域538中的圖像判定的時(shí)刻)，通知控制單元317向通知單元334輸出預(yù)定時(shí)間(例如，0.2秒)的表示檢測(cè)區(qū)域的圖像判定結(jié)束的判定結(jié)束聲音(在圖34中，表示為“嘟嘟聲(pip)”)。如上所述，在圖32至圖34中，將描述在檢測(cè)區(qū)域535至檢測(cè)區(qū)域538的所有圖像判定中檢測(cè)正常的情況。接著，將描述在檢測(cè)區(qū)域535至檢測(cè)區(qū)域538中的任一個(gè)中檢測(cè)到異常的情況。

如圖31所示，將描述觸發(fā)生成單元313檢測(cè)到觸發(fā)之后再次檢測(cè)觸發(fā)的操作。然后，檢測(cè)區(qū)域判定單元314從觸發(fā)生成單元313接收觸發(fā)信號(hào)，然后在針對(duì)檢測(cè)區(qū)域535設(shè)置的檢測(cè)延遲時(shí)間的“1.0”秒之后，在檢測(cè)區(qū)域535中執(zhí)行圖像判定。作為判定的結(jié)果，在檢測(cè)到正常的情況下，如圖35所示，第一控制單元316以不同于正常狀態(tài)的顏色來(lái)顯示表示檢測(cè)區(qū)域535的幀，并且將該幀顯示為比正常狀態(tài)下的幀更粗。例如，為了表示檢測(cè)到正常，第一控制單元316以“藍(lán)色”顯示表示檢測(cè)區(qū)域535的幀，并且將該幀顯示為粗體，并且持續(xù)顯示狀態(tài)。

接著，檢測(cè)區(qū)域判定單元314從觸發(fā)生成單元313接收觸發(fā)信號(hào)，然后在針對(duì)檢測(cè)區(qū)域536設(shè)置的檢測(cè)延遲時(shí)間的“2.2”秒之后，在檢測(cè)區(qū)域536中執(zhí)行圖像判定。此外，檢測(cè)區(qū)域判定單元314從觸發(fā)生成單元313接收觸發(fā)信號(hào)，然后在針對(duì)檢測(cè)區(qū)域537設(shè)置的檢測(cè)延遲時(shí)間的“2.5”秒之后，在檢測(cè)區(qū)域537中執(zhí)行圖像判定。作為判定的結(jié)果，在檢測(cè)區(qū)域536中檢測(cè)到正常的情況下，如圖36所示，第一控制單元316以不同于正常狀態(tài)的顏色來(lái)顯示表示檢測(cè)區(qū)域536的幀，并且將該幀顯示為比正常狀態(tài)下的幀更粗。例如，為了表示檢測(cè)到正常，第一控制單元316以“藍(lán)色”顯示表示檢測(cè)區(qū)域536的幀，并且將該幀顯示為粗體，并且持續(xù)顯示狀態(tài)。另外，作為上述判定的結(jié)果，在檢測(cè)區(qū)域537中檢測(cè)到異常的情況下，如圖36所示，第一控制單元316以不同于正常狀態(tài)下的顏色的顏色來(lái)顯示表示檢測(cè)區(qū)域537的幀，并且將該幀顯示為比正常狀態(tài)下的幀更粗。例如，為了表示檢測(cè)到異常，第一控制單元316以“紅色”顯示表示檢測(cè)區(qū)域537的幀，并且將該幀顯示為粗體，并且持續(xù)顯示狀態(tài)。此時(shí)，在檢測(cè)區(qū)域判定單元314在檢測(cè)區(qū)域537中檢測(cè)到異常的時(shí)刻，通知控制單元317向通知單元334輸出異常檢測(cè)聲音(在圖36中，表示為“噓聲(boo)”)持續(xù)預(yù)定時(shí)間(例如，1秒)，該異常檢測(cè)聲音通知檢測(cè)到異常。在這樣的時(shí)間點(diǎn)，如圖36所示，檢測(cè)區(qū)域535和檢測(cè)區(qū)域536兩者都處于檢測(cè)到正常的顯示狀態(tài)(幀以“藍(lán)色”進(jìn)行顯示并且顯示為加粗的狀態(tài))，并且檢測(cè)區(qū)域537處于檢測(cè)到異常的顯示狀態(tài)(幀以“紅色”來(lái)顯示并且顯示為加粗的狀態(tài))。

然后，檢測(cè)區(qū)域判定單元314從觸發(fā)生成單元313接收觸發(fā)信號(hào)，然后在針對(duì)檢測(cè)區(qū)域538設(shè)置的檢測(cè)延遲時(shí)間的“4.0”秒之后，在檢測(cè)區(qū)域538中執(zhí)行圖像判定。作為判定的結(jié)果，在檢測(cè)到異常的情況下，如圖37所示，第一控制單元316以不同于正常狀態(tài)下的顏色的顏色來(lái)顯示表示檢測(cè)區(qū)域538的幀，并且將該幀顯示為比正常狀態(tài)下的幀更粗。例如，為了表示檢測(cè)到異常，第一控制單元316以“紅色”顯示表示檢測(cè)區(qū)域538的幀，并且將該幀顯示為粗體。此時(shí)，在檢測(cè)區(qū)域判定單元314在檢測(cè)區(qū)域538中檢測(cè)到異常的時(shí)刻，通知控制單元317向通知單元334輸出持續(xù)預(yù)定時(shí)間(例如，1秒)的異常檢測(cè)聲音(在圖37中，表示為“噓聲(boo)”)，該異常檢測(cè)聲音通知檢測(cè)到異常。在這樣的時(shí)間點(diǎn)，如圖37所示，檢測(cè)區(qū)域535和檢測(cè)區(qū)域536兩者都處于檢測(cè)到正常的顯示狀態(tài)(幀以“藍(lán)色”進(jìn)行顯示并且顯示為加粗的狀態(tài))，并且檢測(cè)區(qū)域537處于檢測(cè)到異常的顯示狀態(tài)(幀以“紅色”來(lái)顯示并且顯示為加粗的狀態(tài))。

然后，在與觸發(fā)區(qū)域530相關(guān)聯(lián)的檢測(cè)區(qū)域535至檢測(cè)區(qū)域538中，在待經(jīng)歷圖像判定的檢測(cè)區(qū)域538中的圖像判定結(jié)束于最后時(shí)刻之后，第一控制單元316將檢測(cè)到正常的檢測(cè)區(qū)域535和檢測(cè)區(qū)域536的顯示狀態(tài)持續(xù)預(yù)定時(shí)間(例如，持續(xù)1秒)，并且將檢測(cè)到異常的檢測(cè)區(qū)域537和檢測(cè)區(qū)域538的顯示狀態(tài)持續(xù)預(yù)定時(shí)間(例如，持續(xù)1秒)。然后，第一控制單元316在預(yù)定時(shí)間之后將表示檢測(cè)區(qū)域535至檢測(cè)區(qū)域538的每個(gè)幀的顯示返回到正常狀態(tài)下的幀的顯示。

另外，在檢測(cè)區(qū)域判定單元314結(jié)束根據(jù)觸發(fā)生成單元313的觸發(fā)進(jìn)行的檢測(cè)區(qū)域中的所有圖像判定的時(shí)刻(也就是，結(jié)束檢測(cè)區(qū)域538中的圖像判定的時(shí)刻)，通知控制單元317向通知單元334輸出預(yù)定時(shí)間(例如，0.2秒)的表示檢測(cè)區(qū)域中的圖像判定結(jié)束的判定結(jié)束聲音(在圖37中，表示為“嘟嘟聲(pip)”)。在此情況下，根據(jù)檢測(cè)區(qū)域538的圖像判定，異常檢測(cè)聲音和判定結(jié)束聲音通過(guò)通知單元334進(jìn)行重疊并輸出，但是這些聲音彼此不同(例如，不同音階，或不同的波形或旋律的聲音)，因此用戶能夠差異性地區(qū)分這兩個(gè)聲音。如上所述，在圖35至圖37中，將描述在檢測(cè)區(qū)域535至檢測(cè)區(qū)域538的所有圖像判定中檢測(cè)到異常的情況。

與上述變型例相同，第一控制單元316繼續(xù)顯示狀態(tài)直至根據(jù)觸發(fā)生成單元313的觸發(fā)的檢測(cè)區(qū)域的所有圖像判定結(jié)束為止，其中的顯示狀態(tài)表示基于閃速檢測(cè)區(qū)域的圖像判定區(qū)域中的每個(gè)檢測(cè)區(qū)域的判定結(jié)果。因此，用戶可以立即掌握根據(jù)觸發(fā)生成單元313的觸發(fā)進(jìn)行的檢測(cè)區(qū)域中的所有圖像判定的結(jié)果，因而改進(jìn)便利性。

另外，在本實(shí)施例的第一再現(xiàn)單元304、觸發(fā)區(qū)域指明單元305、變化點(diǎn)檢測(cè)單元306、檢測(cè)區(qū)域指明單元307、設(shè)置單元308、全時(shí)檢測(cè)區(qū)域指明單元309、視頻分配單元312、觸發(fā)生成單元313、檢測(cè)區(qū)域判定單元314、全時(shí)檢測(cè)判定單元315、第一控制單元316、通知控制部單元317、第二再現(xiàn)單元318、區(qū)域顯示控制單元319、列表控制單元320、第二控制單元321、以及顯示控制單元331中的功能單元的至少任意一個(gè)是通過(guò)執(zhí)行程序來(lái)實(shí)現(xiàn)的情況下，該程序是通過(guò)被預(yù)先并入到rom等中來(lái)提供的。另外，要在本實(shí)施例的信息處理設(shè)備3中執(zhí)行的程序可以用于通過(guò)以下方式來(lái)提供：以可安裝格式或可執(zhí)行格式的文件記錄在通過(guò)計(jì)算機(jī)可讀取的記錄介質(zhì)，諸如cd-rom、軟盤(pán)(fd)、cd-r、以及dvd。另外，本實(shí)施例的信息處理設(shè)備3中執(zhí)行的程序可以用于存儲(chǔ)在連接到諸如互聯(lián)網(wǎng)的網(wǎng)絡(luò)的計(jì)算機(jī)上并且通過(guò)經(jīng)過(guò)網(wǎng)絡(luò)進(jìn)行下載的方式來(lái)提供。另外，本實(shí)施例的信息處理設(shè)備3中執(zhí)行的程序可以用于通過(guò)諸如互聯(lián)網(wǎng)的網(wǎng)絡(luò)進(jìn)行提供或分發(fā)。本實(shí)施例的信息處理設(shè)備3中執(zhí)行的程序具有包括上述功能部的至少任意一個(gè)功能部的模塊配置，并且cpu從作為實(shí)際硬件的上述rom讀取出程序并且執(zhí)行，因而上述的每個(gè)部可以通過(guò)被加載在主存儲(chǔ)設(shè)備上來(lái)生成。

附圖標(biāo)記列表

1圖像處理系統(tǒng)

2、2a至2f成像設(shè)備

3信息處理設(shè)備

4網(wǎng)絡(luò)

10外部設(shè)備

101cpu

102rom

103ram

104外部存儲(chǔ)設(shè)備

105顯示器

106網(wǎng)絡(luò)i/f

107鍵盤(pán)

108鼠標(biāo)

109dvd驅(qū)動(dòng)器

110dvd

111外部設(shè)備i/f

112揚(yáng)聲器

113總線

301視頻接收單元

302存儲(chǔ)單元

303輸入單元

304第一再現(xiàn)單元

305觸發(fā)區(qū)域指明單元

306變化點(diǎn)檢測(cè)單元

307檢測(cè)區(qū)域指明單元

308設(shè)置單元

309全時(shí)檢測(cè)區(qū)域指明單元

312視頻分配單元

313觸發(fā)生成單元

314檢測(cè)區(qū)域判定單元

315全時(shí)檢測(cè)區(qū)域確定單元

316第一控制單元

317通知控制單元

318第二再現(xiàn)單元

319區(qū)域顯示控制單元

320列表控制單元

321第二控制單元

331顯示控制單元

332外部輸出單元

333顯示單元

334通知單元

400觀察者屏幕

401、401a至401f視頻顯示單元

411監(jiān)視開(kāi)始按鈕

412監(jiān)視停止按鈕

413監(jiān)視設(shè)置按鈕

421、421a至421f狀態(tài)顯示單元

500設(shè)置屏幕

501相機(jī)選擇選項(xiàng)卡

502設(shè)置視頻顯示單元

503a再現(xiàn)按鈕

503b暫停按鈕

503c快進(jìn)按鈕

503d快退按鈕

503e停止按鈕

504搜索條

505滑塊

506時(shí)間顯示單元

507觸發(fā)區(qū)域信息部分

508a標(biāo)準(zhǔn)圖像顯示單元

508a差異圖像顯示單元509檢測(cè)區(qū)域信息部分

510檢測(cè)區(qū)域按鈕組

510a動(dòng)作按鈕

510b圖像判定選擇按鈕

510c刪除按鈕

510e靈敏度提高按鈕

510e靈敏度降低按鈕

510g閾值提高按鈕

510h閾值降低按鈕

511設(shè)置讀取按鈕

512設(shè)置寫(xiě)入按鈕

513設(shè)置反映按鈕

514關(guān)閉按鈕

530觸發(fā)區(qū)域

535至538檢測(cè)區(qū)域

540觸發(fā)標(biāo)記

551區(qū)域選擇選項(xiàng)卡

561全時(shí)檢測(cè)區(qū)域信息部分

562全時(shí)檢測(cè)區(qū)域按鈕組

562a動(dòng)作按鈕

562c刪除按鈕

562e靈敏度提高按鈕

562f靈敏度降低按鈕

562g閾值提高按鈕

562h閾值降低按鈕

570全時(shí)檢測(cè)區(qū)域

600變化點(diǎn)選擇對(duì)話

601是按鈕

602否按鈕

603關(guān)閉按鈕

610無(wú)變化點(diǎn)通知對(duì)話

611確定按鈕

612關(guān)閉按鈕

700觀察者屏幕

701、701a至701f視頻顯示單元

703a再現(xiàn)按鈕

703b暫停按鈕

703c快進(jìn)按鈕

703d快退按鈕

703e停止按鈕

704搜索條

705滑塊

706時(shí)間顯示單元

707標(biāo)記列表按鈕

800標(biāo)記列表屏幕

801檢測(cè)選擇單元

802檢測(cè)歷史顯示單元

參考文獻(xiàn)列表

專利文獻(xiàn)

專利文獻(xiàn)1：jp2006-78381a