本發(fā)明涉及圖像處理技術(shù)。

背景技術(shù)：

監(jiān)視設(shè)施等的方法包括通過觀看從捕捉設(shè)施等的圖像的監(jiān)視相機(jī)獲得的圖像來執(zhí)行監(jiān)視的方法。已經(jīng)開發(fā)了用于促進(jìn)使用監(jiān)視相機(jī)來進(jìn)行監(jiān)視的技術(shù)。

專利文獻(xiàn)1公開了一種檢測(cè)異常行為的異常行為檢測(cè)裝置。這一裝置將擁擠程度分成多個(gè)階段，并基于擁擠程度來獲得正常運(yùn)動(dòng)模式。是否為異常行為的確定通過基于此時(shí)的擁塞程度確定目標(biāo)對(duì)象的運(yùn)動(dòng)模式是否與正常運(yùn)動(dòng)模式匹配而被執(zhí)行。

專利文獻(xiàn)2公開了一種具有在被顯示在監(jiān)視器上的圖像上呈現(xiàn)監(jiān)視目標(biāo)的狀態(tài)的功能的監(jiān)視系統(tǒng)。具體地，在通過捕捉人群的圖像而獲得的圖像上呈現(xiàn)人群的移動(dòng)方向的共同程度和指示人群的移動(dòng)方向的數(shù)值。

相關(guān)文獻(xiàn)

專利文獻(xiàn)

[專利文獻(xiàn)1]日本未審查專利申請(qǐng)公開no.2010-072782

[專利文獻(xiàn)2]日本未審查專利申請(qǐng)公開no.2012-022370

技術(shù)實(shí)現(xiàn)要素：

在現(xiàn)有技術(shù)中公開的技術(shù)中，可能難以立即查明監(jiān)視目標(biāo)的當(dāng)前狀況。例如，當(dāng)觀察者想要查明由監(jiān)視相機(jī)捕捉的人是經(jīng)過該地方的人還是在該地方徘徊的人時(shí)，觀察者需要繼續(xù)觀看由監(jiān)視相機(jī)捕捉的圖像一段時(shí)間。

本發(fā)明鑒于上述問題而被設(shè)計(jì)，并且其目的在于提供一種對(duì)監(jiān)視相機(jī)進(jìn)行監(jiān)視的人可以用來立即查明監(jiān)視目標(biāo)的當(dāng)前狀況的技術(shù)。

提供了一種第一圖像處理裝置，其包括：指標(biāo)值計(jì)算單元，其使用多個(gè)捕捉的圖像來計(jì)算指標(biāo)值，捕捉的圖像由相機(jī)在不同時(shí)間捕捉，該指標(biāo)值指示在捕捉的圖像中監(jiān)視目標(biāo)的狀態(tài)的變化程度；以及呈現(xiàn)單元，其在由所述相機(jī)捕捉的第一捕捉的圖像上呈現(xiàn)基于指標(biāo)值的指示。

提供了一種第二圖像處理裝置，其包括：計(jì)算單元，其使用多個(gè)捕捉的圖像來計(jì)算在捕捉的圖像中監(jiān)視目標(biāo)的狀態(tài)的變化程度，捕捉的圖像由相機(jī)在不同時(shí)間捕捉；以及呈現(xiàn)單元，其將捕捉的圖像的區(qū)域的顏色改變?yōu)榛谟?jì)算出的變化程度的顏色，區(qū)域示出監(jiān)視目標(biāo)。

提供了一種第三圖像處理裝置，其包括：計(jì)算單元，其使用多個(gè)捕捉的圖像來計(jì)算在捕捉的圖像中監(jiān)視目標(biāo)的狀態(tài)的變化程度，捕捉的圖像由相機(jī)在不同時(shí)間捕捉；以及呈現(xiàn)單元，其強(qiáng)調(diào)捕捉的圖像的區(qū)域，區(qū)域示出監(jiān)視目標(biāo)。

提供了一種監(jiān)視系統(tǒng)，其包括相機(jī)，圖像處理裝置和顯示屏。

圖像處理裝置是本發(fā)明的上述圖像處理裝置。此外，顯示屏顯示由呈現(xiàn)單元在其上呈現(xiàn)基于指標(biāo)值的指示的第一捕捉的圖像。

提供了一種由計(jì)算機(jī)執(zhí)行的圖像處理方法。該方法包括：使用多個(gè)捕捉的圖像來計(jì)算指標(biāo)值，捕捉的圖像由相機(jī)在不同時(shí)間捕捉，該指標(biāo)值指示監(jiān)視目標(biāo)在捕捉的圖像中的狀態(tài)的變化程度；以及在由相機(jī)捕捉的第一捕捉的圖像上呈現(xiàn)基于指標(biāo)值的指示。

提供了一種程序，其通過使得計(jì)算機(jī)具有包括在本發(fā)明的圖像處理裝置中的功能組件的功能來使得計(jì)算機(jī)具有作為本發(fā)明的圖像處理裝置操作的功能。

根據(jù)本發(fā)明，提供了一種對(duì)監(jiān)視相機(jī)進(jìn)行監(jiān)視的人可以用來立即查明監(jiān)視目標(biāo)的當(dāng)前狀況的技術(shù)。

附圖說明

通過將在下面描述的合適的實(shí)施例和下面的附圖，上述對(duì)象以及其他目的、特征和優(yōu)點(diǎn)進(jìn)一步變得更加明顯。

圖1是圖示了根據(jù)第一示例性實(shí)施例的圖像處理裝置的框圖。

圖2是概念性地圖示了針對(duì)每個(gè)呈現(xiàn)目標(biāo)圖像計(jì)算監(jiān)視目標(biāo)的指標(biāo)值的處理的示圖。

圖3是概念性地圖示了呈現(xiàn)多個(gè)呈現(xiàn)目標(biāo)圖像所共有的指示的處理的示圖。

圖4是圖示了圖像處理裝置的硬件配置的框圖。

圖5是圖示了由第一示例性實(shí)施例的圖像處理裝置執(zhí)行的處理的流程的流程圖。

圖6是概念性地圖示了以動(dòng)畫的格式來呈現(xiàn)基于指標(biāo)值的指示的處理的示圖。

圖7是圖示了人被留下的狀態(tài)的示圖。

圖8是圖示了根據(jù)第二示例性實(shí)施例的圖像處理裝置的框圖。

圖9是圖示了其中黑色基于指標(biāo)值而變得更深的顏色圖的示圖。

圖10是圖示了彩虹色的顏色圖的示圖。

圖11是概念性地圖示了監(jiān)視目標(biāo)及其周圍的顏色被改變?yōu)榕c指示監(jiān)視目標(biāo)的位置的改變程度的指標(biāo)值對(duì)應(yīng)的顏色的示圖。

圖12是概念性地圖示了通過在監(jiān)視目標(biāo)周圍呈現(xiàn)框來執(zhí)行強(qiáng)調(diào)的示圖。

圖13是概念性例地圖示了通過在監(jiān)視目標(biāo)周圍呈現(xiàn)具有與指標(biāo)值對(duì)應(yīng)的顏色和寬度的框來執(zhí)行強(qiáng)調(diào)的示圖。

圖14是圖示了根據(jù)第四示例性實(shí)施例的圖像處理裝置的框圖。

圖15是概念性地圖示了在確定基準(zhǔn)密度時(shí)基于發(fā)散程度來確定指示顏色的密度的方法的示圖。

圖16是概念性地圖示了由多個(gè)相機(jī)捕捉的圖像以時(shí)分方式被顯示在顯示屏上的示圖。

圖17是圖示了根據(jù)第六示例性實(shí)施例的指標(biāo)值計(jì)算單元用來計(jì)算指標(biāo)值的方法的示圖。

圖18是圖示了根據(jù)第六示例性實(shí)施例的由圖像處理裝置執(zhí)行的處理的流程的流程圖。

圖19是圖示了用戶的眼睛注視方向與部分區(qū)域之間的關(guān)系的示圖。

圖20是以表格格式圖示了其中與觀察者的眼睛注視方向?qū)?yīng)的部分區(qū)域和觀察者的眼睛注視方向已經(jīng)改變的時(shí)間的信息的示圖。

具體實(shí)施方式

在下文中，將參照附圖描述本發(fā)明的示例性實(shí)施例。在所有附圖中，相似的標(biāo)號(hào)表示相似的組件，并且將不重復(fù)其描述。

第一示例性實(shí)施例

圖1是圖示了根據(jù)第一示例性實(shí)施例的圖像處理裝置2000的框圖。在圖1中，箭頭指示信息流。另外，在圖1中，每個(gè)框指示基于功能的配置而不是基于硬件的配置。

圖像處理裝置2000包括指標(biāo)值計(jì)算單元2020和呈現(xiàn)單元2040。指標(biāo)值計(jì)算單元2020獲取由相機(jī)3000捕捉的多個(gè)圖像(以下被稱為捕捉的圖像)。相機(jī)3000的示例是監(jiān)視相機(jī)。此外，這多個(gè)捕捉的圖像在不同時(shí)間被捕捉。例如，這多個(gè)捕捉的圖像是構(gòu)成相機(jī)3000捕捉的電影的幀。

另外，指標(biāo)值計(jì)算單元2020使用捕捉的圖像來計(jì)算指標(biāo)值，該指標(biāo)值指示獲取的捕捉的圖像中的監(jiān)視目標(biāo)的狀態(tài)的變化程度。

呈現(xiàn)單元2040在相機(jī)3000捕捉的圖像上呈現(xiàn)基于由指標(biāo)值計(jì)算單元2020計(jì)算出的指標(biāo)值的指示。這里，捕捉的圖像可以是用于計(jì)算指標(biāo)值的圖像，或者可以是未用于計(jì)算指標(biāo)值的圖像。在前一種情況下，例如，呈現(xiàn)單元2040在第n個(gè)捕捉的圖像上呈現(xiàn)基于使用第1至第n個(gè)捕捉的圖像計(jì)算出的指標(biāo)值的指示。此外，在后一種情況下，例如，呈現(xiàn)單元2040在第(n+1)個(gè)捕捉的圖像上呈現(xiàn)基于使用第1至第n個(gè)捕捉的圖像計(jì)算出的指標(biāo)值的指示。在下文中，還將呈現(xiàn)單元2040在其上呈現(xiàn)基于指標(biāo)值的指示的目標(biāo)的捕捉的圖像寫為呈現(xiàn)目標(biāo)圖像。

例如，呈現(xiàn)單元2040針對(duì)每個(gè)呈現(xiàn)目標(biāo)圖像計(jì)算監(jiān)視目標(biāo)的指標(biāo)值。圖2是概念性地圖示了針對(duì)每個(gè)呈現(xiàn)目標(biāo)圖像計(jì)算監(jiān)視目標(biāo)的指標(biāo)值的處理的示圖。在圖2中，呈現(xiàn)單元2040在第(n+1)個(gè)捕捉的圖像上呈現(xiàn)基于使用第1至第n個(gè)捕捉的圖像計(jì)算出的指標(biāo)值的指示。類似地，呈現(xiàn)單元2040在第(n+2)個(gè)捕捉的圖像上呈現(xiàn)基于使用第2至第(n+1)個(gè)捕捉的圖像計(jì)算出的指標(biāo)值的指示，并且在第(n+3)個(gè)捕捉的圖像上呈現(xiàn)基于使用第3至第(n+2)個(gè)捕捉的圖像計(jì)算出的指標(biāo)值的指示。

此外，例如，呈現(xiàn)單元2040可使用如下指標(biāo)值，該指標(biāo)值使用多個(gè)呈現(xiàn)目標(biāo)圖像所共有的多個(gè)捕捉的圖像被計(jì)算出。圖3是概念性地圖示了呈現(xiàn)多個(gè)呈現(xiàn)目標(biāo)圖像所共有的指示的處理的示圖。在圖3中，呈現(xiàn)單元2040在第(n+1)至第2n個(gè)捕捉的圖像中的每一個(gè)上呈現(xiàn)基于使用第1至第n個(gè)捕捉的圖像計(jì)算出的指標(biāo)值的指示。類似地，呈現(xiàn)單元2040在第(2n+1)至第3n個(gè)捕捉的圖像中的每一個(gè)上呈現(xiàn)基于使用第(n+1)至第2n個(gè)捕捉的圖像計(jì)算出的指標(biāo)值的指示。

<硬件配置的示例>

圖像處理裝置2000的每個(gè)功能組件可以用實(shí)現(xiàn)每個(gè)功能組件的硬件組成元件(例如，硬接線電子電路等)來實(shí)現(xiàn)，或者可以通過硬件組成元件和硬件構(gòu)成元件的組合(例如，電子電路和用于控制電子電路的程序的組合等)來實(shí)現(xiàn)。

圖4是圖示了圖像處理裝置2000的硬件配置的框圖。圖像處理裝置2000包括總線1020、處理器1040、存儲(chǔ)器1060、存儲(chǔ)裝置1080和輸入輸出接口1100。總線1020是用于允許處理器1040、存儲(chǔ)器1060、存儲(chǔ)裝置1080和輸入輸出接口1100彼此傳輸和接收數(shù)據(jù)的數(shù)據(jù)傳輸通道。這里，將處理器1040等彼此連接的方法不限于總線連接。處理器1040是算術(shù)處理設(shè)備，諸如例如中央處理單元(cpu)或圖形處理單元(gpu)。存儲(chǔ)器1060是諸如例如隨機(jī)存取存儲(chǔ)器(ram)或只讀存儲(chǔ)器(rom)的存儲(chǔ)器。存儲(chǔ)裝置1080是諸如例如硬盤、固態(tài)驅(qū)動(dòng)器(ssd)或存儲(chǔ)卡的存儲(chǔ)設(shè)備。此外，存儲(chǔ)裝置1080可以是諸如ram或rom的存儲(chǔ)器。輸入輸出接口1100是用于允許圖像處理裝置2000向外部裝置等傳輸數(shù)據(jù)和從外部裝置等接收數(shù)據(jù)的輸入輸出接口。例如，圖像處理裝置2000通過輸入輸出接口1100獲取捕捉的圖像。此外，例如，圖像處理裝置2000通過輸入輸出接口1100來輸出上面呈現(xiàn)有基于指標(biāo)值的指示的捕捉的圖像。

存儲(chǔ)裝置1080包括作為用于實(shí)現(xiàn)圖像處理裝置2000的功能的程序的指標(biāo)值計(jì)算模塊1220和呈現(xiàn)模塊1240。處理器1040通過執(zhí)行這些模塊來實(shí)現(xiàn)指標(biāo)值計(jì)算單元2020和呈現(xiàn)單元2040的功能。模塊。這里，當(dāng)上述模塊被執(zhí)行時(shí)，處理器1040可以在讀取存儲(chǔ)器1060上的模塊之后執(zhí)行這些模塊，或者可以在未讀取存儲(chǔ)器1060上的模塊的情況下執(zhí)行這些模塊。

圖像處理裝置2000的硬件配置不限于圖4中所示的配置。例如，每個(gè)模塊可被存儲(chǔ)在存儲(chǔ)器1060中。在這種情況下，圖像處理裝置2000可以不包括存儲(chǔ)裝置1080。

<處理的流程>

圖5是圖示了第一示例性實(shí)施例的圖像處理裝置2000執(zhí)行的處理的流程的流程圖。在步驟s102中，指標(biāo)值計(jì)算單元2020獲取捕捉的圖像。在步驟s104中，呈現(xiàn)單元2040計(jì)算如下指標(biāo)值，該指標(biāo)值指示捕捉的圖像中監(jiān)視目標(biāo)的狀態(tài)的變化程度。在步驟s106中，呈現(xiàn)單元2040在相機(jī)3000捕捉的圖像(呈現(xiàn)目標(biāo)圖像)上呈現(xiàn)基于指標(biāo)值的指示。

<操作優(yōu)點(diǎn)>

當(dāng)觀察者等想要查明由監(jiān)視相機(jī)捕捉的監(jiān)視目標(biāo)的狀態(tài)在何種程度上已改變時(shí)，觀察者需要連續(xù)地觀看監(jiān)視相機(jī)的對(duì)象。即使當(dāng)僅通過在短時(shí)間段(例如，大約一秒)內(nèi)觀看圖像就能查明此時(shí)的監(jiān)視目標(biāo)的狀態(tài)時(shí)，也難以查明監(jiān)視目標(biāo)的狀態(tài)在何種程度上已改變。

另一方面，根據(jù)本示例性實(shí)施例的圖像處理裝置2000，在呈現(xiàn)目標(biāo)圖像上呈現(xiàn)指示監(jiān)視目標(biāo)的狀態(tài)的變化程度的指示。假設(shè)在顯示屏4000上顯示由相機(jī)3000捕捉的圖像。在這種情況下，顯示屏4000顯示其上疊加有基于指標(biāo)值的指示的圖像。因此，觀察者等可以在短時(shí)間段內(nèi)容易地查明監(jiān)視目標(biāo)的狀態(tài)已經(jīng)在何種程度上改變。因此，觀察者等可以立即且容易地查明監(jiān)視目標(biāo)的當(dāng)前狀況。

在下文中，將更詳細(xì)地描述本示例性實(shí)施例。

<獲取捕捉的圖像的方法>

指標(biāo)值計(jì)算單元2020的用來獲取捕捉的圖像的方法是任意的。例如，指標(biāo)值計(jì)算單元2020從相機(jī)3000獲取捕捉的圖像。此外，指標(biāo)值計(jì)算單元2020可以獲取存儲(chǔ)在位于相機(jī)3000外部的存儲(chǔ)設(shè)備中的捕捉的圖像。在這種情況下，相機(jī)3000被配置為將捕捉的圖像存儲(chǔ)在存儲(chǔ)設(shè)備中。存儲(chǔ)設(shè)備可以被提供在圖像處理裝置2000內(nèi)，或者可以被提供在圖像處理裝置2000的外部。

另外，獲取捕捉的圖像的處理可以是其中指標(biāo)值計(jì)算單元2020接收相機(jī)3000或上述存儲(chǔ)設(shè)備輸出的捕捉的圖像的處理，或者可以是其中指標(biāo)值計(jì)算單元2020從相機(jī)3000或上述存儲(chǔ)設(shè)備讀出捕捉的圖像的處理。

<監(jiān)視目標(biāo)的細(xì)節(jié)>

存在圖像處理裝置2000處理的各種監(jiān)視目標(biāo)。例如，圖像處理裝置2000將對(duì)象(人、事物等)或一組對(duì)象(人群等)作為監(jiān)視目標(biāo)來處理。注意，指示事物的對(duì)象可以包括地方。換句話說，圖像處理裝置2000可以將捕捉的圖像中的地方(區(qū)域)作為監(jiān)視目標(biāo)來處理。

例如，指標(biāo)值計(jì)算單元2020將捕捉的圖像中包括的區(qū)域劃分為前景區(qū)域和背景區(qū)域，并且將前景區(qū)域作為對(duì)象來處理。這里，從圖像提取諸如人或事物之類的對(duì)象的方法不限于上述方法。從圖像提取諸如人和事物之類的對(duì)象的技術(shù)是已知的，并且指標(biāo)值計(jì)算單元2020可以使用已知的技術(shù)。這里，將不描述已知的技術(shù)。

<確定監(jiān)視目標(biāo)的方法>

圖像處理裝置2000可以將從捕捉的圖像提取的所有對(duì)象設(shè)置為監(jiān)視目標(biāo)，或者可以僅將特定對(duì)象設(shè)置為監(jiān)視目標(biāo)。例如，圖像處理裝置2000僅將一個(gè)人或一組人(人群)作為監(jiān)視目標(biāo)來處理。此外，圖像處理裝置2000可以僅將特定人或人群設(shè)置為監(jiān)視目標(biāo)。在這種情況下，圖像處理裝置2000獲取指示監(jiān)視目標(biāo)的信息(例如，黑名單)，并且基于該信息來確定監(jiān)視目標(biāo)。指示監(jiān)視目標(biāo)的信息指示例如每個(gè)監(jiān)視目標(biāo)的特征值。此外，指示監(jiān)視目標(biāo)的信息可以是指示要被監(jiān)視的人的特征的信息，諸如“戴著帽子”或“戴著墨鏡”。這里，由于從包括在圖像中的對(duì)象確定具有特定特征的對(duì)象的技術(shù)是已知技術(shù)，因此將不描述詳細(xì)的方法。

<呈現(xiàn)單元2040的細(xì)節(jié)>

如上所述，呈現(xiàn)單元2040在由相機(jī)3000捕捉的圖像(呈現(xiàn)目標(biāo)圖像)上呈現(xiàn)基于指標(biāo)值的指示。例如，在呈現(xiàn)目標(biāo)圖像上呈現(xiàn)基于指標(biāo)值的指示的處理是呈現(xiàn)針對(duì)呈現(xiàn)目標(biāo)圖像中的監(jiān)視目標(biāo)附近的監(jiān)視目標(biāo)計(jì)算出的指標(biāo)值的處理。將在稍后的示例性實(shí)施例等中描述“在呈現(xiàn)目標(biāo)圖像上呈現(xiàn)基于指標(biāo)值的指示的處理”的其他示例。

這里，短語“在呈現(xiàn)目標(biāo)圖像上呈現(xiàn)指示”是指例如將指示組合到呈現(xiàn)目標(biāo)圖像中或者將該指示重疊到呈現(xiàn)目標(biāo)圖像上的處理。在這種情況下，呈現(xiàn)單元2040可以將具有被組合到其中的指示的呈現(xiàn)目標(biāo)圖像輸出到諸如顯示屏4000等的輸出設(shè)備，或者可以將呈現(xiàn)目標(biāo)圖像存儲(chǔ)在被提供在圖像處理裝置2000內(nèi)部或外部的存儲(chǔ)設(shè)備中。在后一種情況下，顯示屏4000或另一設(shè)備讀取被存儲(chǔ)在存儲(chǔ)設(shè)備中的呈現(xiàn)目標(biāo)圖像，并將該圖像輸出給顯示屏4000。注意，顯示屏4000例如是被安裝在觀察者的工作室等中的監(jiān)視器，在場(chǎng)景中進(jìn)行觀察的保安的移動(dòng)電話的監(jiān)視器等。

另外，呈現(xiàn)單元2040可以單獨(dú)地生成指示基于指標(biāo)值的指示的圖像數(shù)據(jù)，而不將指示組合到呈現(xiàn)目標(biāo)圖像中。在這種情況下，通過將圖像數(shù)據(jù)與呈現(xiàn)目標(biāo)數(shù)據(jù)一起顯示來在呈現(xiàn)目標(biāo)圖像上呈現(xiàn)指示。

此外，呈現(xiàn)單元2040可以通過使用其中安裝有相機(jī)3000的設(shè)施的地圖數(shù)據(jù)來在地圖上呈現(xiàn)基于指標(biāo)值的指示。地圖數(shù)據(jù)被顯示在顯示屏4000或保安的移動(dòng)電話的監(jiān)視器等上?？梢曰谙鄼C(jī)3000的各種參數(shù)(所安裝的相機(jī)的位置、朝向等)和捕捉的圖像上的監(jiān)視目標(biāo)的位置來計(jì)算地圖上的監(jiān)視目標(biāo)的位置。在這種情況下，呈現(xiàn)單元2040獲取并使用其中安裝有相機(jī)3000的設(shè)施的地圖數(shù)據(jù)和與相機(jī)3000有關(guān)的各種參數(shù)。注意，相機(jī)3000的各種參數(shù)與相機(jī)在地圖上的位置之間的關(guān)系通過執(zhí)行諸如校準(zhǔn)之類的處理被預(yù)先定義。

此外，呈現(xiàn)單元2040可以按照動(dòng)畫的格式(逐幀回放)來呈現(xiàn)針對(duì)監(jiān)視目標(biāo)計(jì)算出的基于指標(biāo)值的指示。圖6是概念性地圖示了以動(dòng)畫的格式呈現(xiàn)基于指標(biāo)值的指示的處理的示圖。在圖6(a)中，指標(biāo)值計(jì)算單元2020計(jì)算指示第1至第n個(gè)捕捉的圖像中的監(jiān)視目標(biāo)的狀態(tài)的變化程度的指標(biāo)值，并且基于指標(biāo)值來生成指示1。類似地，指標(biāo)值計(jì)算單元2020使用第(n+1)至第2n個(gè)捕捉的圖像來生成指示2，并使用第(2n+1)至第3n個(gè)捕捉的圖像來生成指示3。

在圖6(b)中，呈現(xiàn)單元2040在第3n個(gè)捕捉的圖像上呈現(xiàn)指示1，在第(3n+1)個(gè)捕捉的圖像上呈現(xiàn)指示2，并且在第(3n+2)個(gè)捕捉的圖像上呈現(xiàn)指示3。通過這樣做，以動(dòng)畫的格式呈現(xiàn)指示1至3。另外，呈現(xiàn)單元2040還可以為隨后的捕捉的圖像重復(fù)諸如“顯示1、顯示2和顯示3”的顯示。以這種方式，由指示1至指示3構(gòu)成的動(dòng)畫被重復(fù)地呈現(xiàn)在捕捉的圖像上。

<計(jì)算指標(biāo)值的方法>

如上所述，指標(biāo)值計(jì)算單元2020計(jì)算指示捕捉的圖像中監(jiān)視目標(biāo)的狀態(tài)的變化程度的指標(biāo)值。這里，存在圖像處理裝置2000作為監(jiān)視目標(biāo)來處理的各種“監(jiān)視目標(biāo)的狀態(tài)”，并且計(jì)算指標(biāo)值的方法取決于作為監(jiān)視目標(biāo)被處理的內(nèi)容。結(jié)果，在下文中，將描述由圖像處理裝置2000處理的監(jiān)視目標(biāo)的狀態(tài)和計(jì)算指示監(jiān)視目標(biāo)的狀態(tài)的變化程度的指標(biāo)值的方法。

<<監(jiān)視目標(biāo)的位置>>

例如，指標(biāo)值計(jì)算單元2020處理監(jiān)視目標(biāo)的位置作為監(jiān)視目標(biāo)的狀態(tài)。例如，當(dāng)在人們經(jīng)過的路徑處存在長(zhǎng)時(shí)間站立的人時(shí)，認(rèn)為應(yīng)當(dāng)密切地監(jiān)視該人。因此，指標(biāo)值計(jì)算單元2020處理監(jiān)視目標(biāo)的位置的變化程度作為監(jiān)視目標(biāo)的狀態(tài)的變化程度。監(jiān)視目標(biāo)的位置的變化程度可以按照另一種方式被描述為監(jiān)視目標(biāo)的停留程度。觀察者等可以通過基于監(jiān)視目標(biāo)的停留程度計(jì)算指標(biāo)值并且在呈現(xiàn)目標(biāo)捕捉的圖像上呈現(xiàn)基于指標(biāo)值的指示，來立即查明每個(gè)監(jiān)視目標(biāo)的停留程度。

例如，監(jiān)視目標(biāo)的位置的變化程度由在捕捉的圖像中看到某一監(jiān)視目標(biāo)(相同的人、人群等)的時(shí)間長(zhǎng)度表示。這里，例如根據(jù)以時(shí)間序列捕捉的捕捉的圖像(構(gòu)成電影的幀)中的多少捕捉的圖像示出監(jiān)視目標(biāo)，可以表示捕捉的圖像中的監(jiān)視目標(biāo)的時(shí)間長(zhǎng)度。

此外，例如，指標(biāo)值計(jì)算單元2020可以通過監(jiān)視目標(biāo)的移動(dòng)范圍的大小來表示監(jiān)視目標(biāo)的位置的變化程度。例如，監(jiān)視目標(biāo)的移動(dòng)范圍的大小由包括每個(gè)捕捉的圖像中的監(jiān)視目標(biāo)的所有位置的區(qū)域(圓形形狀、矩形形狀等)的大小表示。這里，區(qū)域的大小由區(qū)域的面積或區(qū)域的邊的長(zhǎng)度或直徑表示。

另外，指標(biāo)值計(jì)算單元2020可以還考慮諸如監(jiān)視目標(biāo)的身體的一部分的移動(dòng)之類的空間移動(dòng)的程度來計(jì)算監(jiān)視目標(biāo)的位置的變化程度。

<<在捕捉的圖像中捕捉監(jiān)視目標(biāo)的頻率>>

此外，例如，指標(biāo)值計(jì)算單元2020處理在捕捉的圖像中看到某一監(jiān)視目標(biāo)的頻率，作為監(jiān)視目標(biāo)的狀態(tài)。換句話說，指標(biāo)值計(jì)算單元2020處理在捕捉的圖像中看到某一監(jiān)視目標(biāo)的頻率的變化程度(在捕捉的圖像中看到物體的時(shí)間長(zhǎng)度)作為監(jiān)視目標(biāo)的狀態(tài)的變化程度。假設(shè)某一監(jiān)視目標(biāo)在前三十分鐘內(nèi)在捕捉的圖像中未被檢測(cè)到，在接下來的三十分鐘內(nèi)在捕捉的圖像中被檢測(cè)到一次，并且在三十分鐘的另一個(gè)隨后的時(shí)間段內(nèi)在捕捉的圖像中被檢測(cè)到五次。在這種情況下，捕捉的圖像中的監(jiān)視目標(biāo)的頻率增加。出于這一原因，監(jiān)視目標(biāo)的狀態(tài)的變化程度為高。

例如，在這種情況下，由于監(jiān)視目標(biāo)在該地方中的頻率逐漸增加，所以還認(rèn)為對(duì)象行為不自然。例如，可以執(zhí)行在犯罪之前對(duì)場(chǎng)景的習(xí)慣性徘徊或預(yù)覽。出于這一原因，通過觀看捕捉的圖像進(jìn)行監(jiān)視的觀察者等優(yōu)選注意地監(jiān)視這樣的監(jiān)視目標(biāo)。因此，圖像處理裝置2000基于捕捉的圖像中的監(jiān)視目標(biāo)的頻率的變化程度來計(jì)算指標(biāo)值，并且在呈現(xiàn)目標(biāo)圖像上呈現(xiàn)基于指標(biāo)值的指示。由此，觀看呈現(xiàn)目標(biāo)圖像的觀察者等可以立即查明在捕捉的圖像中示出每個(gè)了監(jiān)視目標(biāo)的頻率的變化程度。

例如，指標(biāo)值計(jì)算單元2020對(duì)每個(gè)預(yù)定時(shí)間段對(duì)在捕捉的圖像中檢測(cè)到每個(gè)監(jiān)視目標(biāo)的次數(shù)進(jìn)行計(jì)數(shù)。指標(biāo)值計(jì)算單元使用針對(duì)每個(gè)預(yù)定時(shí)間段計(jì)算出的監(jiān)視目標(biāo)的檢測(cè)次數(shù)來計(jì)算在捕捉的圖像中檢測(cè)到監(jiān)視目標(biāo)的頻率的變化程度。備選地，可以獲得檢測(cè)之間的時(shí)間間隔，并且可以計(jì)算檢測(cè)之間的時(shí)間間隔的長(zhǎng)度的變化程度。

<<監(jiān)視目標(biāo)的擁擠程度>>

例如，指標(biāo)值計(jì)算單元2020處理監(jiān)視目標(biāo)的擁擠程度作為監(jiān)視目標(biāo)的狀態(tài)。例如，當(dāng)將人們作為監(jiān)視目標(biāo)來處理時(shí)，監(jiān)視目標(biāo)的擁擠程度是人們擁擠的程度，并且也以另一種方式被描述為擁塞程度。例如，當(dāng)狹窄的路徑被人們擠滿時(shí)，存在人群激增的風(fēng)險(xiǎn)。在這種情況下，由于需要諸如由保安進(jìn)行適當(dāng)引導(dǎo)的動(dòng)作，因此優(yōu)選的是觀看由監(jiān)視相機(jī)提供的圖像的觀察者可以立即查明這種情況。圖像處理裝置2000在呈現(xiàn)目標(biāo)圖像上呈現(xiàn)基于監(jiān)視目標(biāo)的擁擠程度的變化程度的指示。因此，觀看呈現(xiàn)目標(biāo)圖像的觀察者可以立即識(shí)別出甚至在時(shí)間過去之后仍未消除其擁塞的監(jiān)視目標(biāo)。

監(jiān)視目標(biāo)的擁擠程度可以使用例如監(jiān)視目標(biāo)的大小和在監(jiān)視目標(biāo)中包括的對(duì)象的數(shù)量被表示。這里，監(jiān)視目標(biāo)的大小由指示監(jiān)視目標(biāo)的區(qū)域的大小表示。表示區(qū)域的大小的方法如上所述。例如，指標(biāo)值計(jì)算單元2020使用表達(dá)式(1)來計(jì)算監(jiān)視目標(biāo)的擁擠程度。在表達(dá)式(1)中，“d”表示擁擠程度，“n”表示包括在監(jiān)視目標(biāo)中包括的對(duì)象的數(shù)量，并且“a”表示指示監(jiān)視目標(biāo)的區(qū)域的面積。

[表達(dá)式1]

這里，n可以是通過單獨(dú)地對(duì)對(duì)象計(jì)數(shù)而計(jì)算出的對(duì)象的數(shù)量，或者可以是通過共同地識(shí)別多個(gè)對(duì)象的組而估計(jì)出的對(duì)象的數(shù)量。

例如，指標(biāo)值計(jì)算單元2020通過針對(duì)每個(gè)預(yù)定時(shí)間段計(jì)算上述擁擠程度來計(jì)算擁擠程度的變化程度。

<<監(jiān)視目標(biāo)的隊(duì)列的長(zhǎng)度或速度>>

例如，指標(biāo)值計(jì)算單元2020處理監(jiān)視目標(biāo)的隊(duì)列的長(zhǎng)度或其行進(jìn)的速度作為監(jiān)視目標(biāo)的狀態(tài)。假設(shè)在具有多個(gè)寄存器計(jì)數(shù)器的存儲(chǔ)器中，在每個(gè)寄存器計(jì)數(shù)器的隊(duì)列中存在其長(zhǎng)度在長(zhǎng)時(shí)間內(nèi)不改變(隊(duì)列的行進(jìn)速度低)的寄存器計(jì)數(shù)器的隊(duì)列。在這種情況下，認(rèn)為在寄存器計(jì)數(shù)器處發(fā)生某種故障。

因此，指標(biāo)值計(jì)算單元2020基于監(jiān)視目標(biāo)的隊(duì)列的長(zhǎng)度的變化程度或其行進(jìn)速度來計(jì)算指標(biāo)值。監(jiān)視目標(biāo)的隊(duì)列的長(zhǎng)度可以由指示隊(duì)列的區(qū)域的大小表示，或者可以由被包括在監(jiān)視目標(biāo)的隊(duì)列中的對(duì)象的數(shù)目表示。這里，假設(shè)區(qū)域的邊的長(zhǎng)度或直徑表示“指示隊(duì)列的區(qū)域的大小”。在這種情況下，例如，指標(biāo)值計(jì)算單元2020基于隊(duì)列的長(zhǎng)度變化的方向、被包括在隊(duì)列中的對(duì)象的朝向等來計(jì)算隊(duì)列的方向，并且“指示隊(duì)列的區(qū)域的長(zhǎng)度”使用在指示隊(duì)列的區(qū)域中的方向上的邊的長(zhǎng)度或直徑而被表示。

注意，可以與相機(jī)3000相關(guān)聯(lián)地預(yù)先給出隊(duì)列的方向。例如，當(dāng)相機(jī)3000的朝向固定并且寄存器計(jì)數(shù)器等的位置也固定時(shí)，可以預(yù)先確定隊(duì)列的朝向。

另外，指標(biāo)值計(jì)算單元2020根據(jù)隊(duì)列的長(zhǎng)度的變化程度來計(jì)算隊(duì)列的前進(jìn)速度。備選地，也可以通過關(guān)注隊(duì)列中的特定對(duì)象來計(jì)算隊(duì)列的速度。

<<留下的程度>>

例如，指標(biāo)值計(jì)算單元2020將通過捕捉車站等的平臺(tái)而獲得的圖像中的人、行李等設(shè)置為監(jiān)視目標(biāo)。指標(biāo)值計(jì)算單元2020計(jì)算人數(shù)、多件行李等的變化程度或人或多件行李的隊(duì)列的長(zhǎng)度的變化程度(人或多件行李的多少行李被留下多少)，作為監(jiān)視目標(biāo)的狀態(tài)的變化程度。

圖7是圖示了人被留下的狀態(tài)的示圖。圖7(a)圖示了通過捕捉緊接在火車的車門打開之后的狀態(tài)而獲得的捕捉的圖像10-1，圖7(b)圖示了通過捕捉緊接在火車的車門關(guān)閉之前的狀態(tài)而獲得的捕捉的圖像10-2。將兩個(gè)捕捉的圖像相互比較，許多人未上去火車，并且留在前面的門的前面，而在后面的門處沒有人被留下。當(dāng)被留下的程度根據(jù)如上所述的上客位置而變化很大時(shí)，認(rèn)為在平臺(tái)或列車內(nèi)存在一些麻煩。呈現(xiàn)單元2040在呈現(xiàn)目標(biāo)圖像上呈現(xiàn)基于被留下的程度的指示，因此觀看呈現(xiàn)目標(biāo)圖像的觀察者能夠立即查明多少人、行李等被留下。

<<監(jiān)視目標(biāo)的不滿意程度>>

指標(biāo)值計(jì)算單元2020不僅可以確定通過分析捕捉的圖像而被直接獲得的監(jiān)視目標(biāo)的狀態(tài)(例如，監(jiān)視目標(biāo)的上述位置)，而且也可以基于以下內(nèi)容來確定監(jiān)視目標(biāo)的狀態(tài)：通過將狀態(tài)應(yīng)用于模型等而被獲得的指標(biāo)。

例如，指標(biāo)值計(jì)算單元2020處理監(jiān)視目標(biāo)的不滿意程度作為監(jiān)視目標(biāo)的狀態(tài)。這里，假設(shè)監(jiān)視目標(biāo)是人群。指標(biāo)值計(jì)算單元2020根據(jù)擁擠程度和關(guān)于人群的流動(dòng)的信息來計(jì)算人群的不滿意程度。例如，可以認(rèn)為具有高擁塞程度或緩慢流動(dòng)的人群通常趨向于變得越來越不滿意。

因此，使用擁擠程度“u”和速度“v”基于函數(shù)f(u，v)對(duì)人群的不滿意程度進(jìn)行建模。這里，例如，f(u，v)是“u”的單調(diào)非遞減函數(shù)和“v”的單調(diào)非遞增函數(shù)。當(dāng)來自“u”和“v”的影響彼此獨(dú)立時(shí)，其被描述為f(u，v)＝f(u)g(v)，其中f(u)被設(shè)置為“u”的單調(diào)非遞減函數(shù)并且g(v)被設(shè)置為“v”的單調(diào)非遞增函數(shù)。

注意，當(dāng)人群的速度低時(shí)，不滿意的程度增加，并且甚至當(dāng)人群的速度過高時(shí)，不滿意的程度也可能增加。這是因?yàn)槿巳褐械娜烁械接捎陔y以跟隨人群的流動(dòng)而產(chǎn)生的壓力。因此，g(v)可以通過當(dāng)“v”增加到一定程度時(shí)增加的函數(shù)而被建模。

此外，在隊(duì)列中排列的情況下，如果人們所在的隊(duì)列不行進(jìn)而其他隊(duì)列行進(jìn)，則人們將變得更不滿意。因此，將各隊(duì)列的行進(jìn)速度彼此進(jìn)行比較。當(dāng)某一隊(duì)列的行進(jìn)速度低于其他隊(duì)列的行進(jìn)速度時(shí)，可以增加不滿意程度，從而使得其等于或高于用“v”的值確定的不滿意程度。換句話說，當(dāng)將δv被設(shè)置為其自身的行與相鄰行之間的速度的差(通過從相鄰行的速度減去其自身行的速度而獲得的值)時(shí)，可以使用g2(v，δv)來執(zhí)行建模，g2(v，δv)相對(duì)于δv而不是g(v)而言是單調(diào)非遞減函數(shù)。這里，假設(shè)當(dāng)其自身隊(duì)列的速度相對(duì)低時(shí)δv具有正值。并且，假設(shè)滿足關(guān)系g2(v，0)＝g(v)。

該方法還可以應(yīng)用于除了構(gòu)成隊(duì)列的人群之外的對(duì)象。假設(shè)由于障礙物或具有行走障礙的人的存在，某一人群的流動(dòng)變得比周圍流動(dòng)更慢。在這種情況下，可以對(duì)人群進(jìn)行建模，從而使得不滿意的程度增加。就是說，當(dāng)將“v”的梯度設(shè)置為▽v時(shí)，流的速度的影響可以由g2(v，▽v)建模。此外，不滿意程度可以基于屬于同一人群的人在行中的位置(人多么遠(yuǎn)離前方)以及直到人到達(dá)行的前方的估計(jì)時(shí)間而被計(jì)算。這是因?yàn)檎J(rèn)為靠近前方的人會(huì)更早地完成排隊(duì)行動(dòng)，并且因此將對(duì)不滿意更加耐心。

注意，由于其他外部因素，函數(shù)可能會(huì)變化。其他外部因素包括溫度、濕度、天氣、亮度等。例如，當(dāng)與適當(dāng)溫度的情況相比溫度過高或過低時(shí)，可以認(rèn)為不滿意的程度趨于增加。因此，可以使用其中不滿意程度在適當(dāng)溫度下降低并且在在適當(dāng)溫度范圍外的溫度下升高的模型。類似地，認(rèn)為與晴天的情況相比，在下雨的情況下不滿意程度趨于增加。因此，可以使用其中與晴天的情況相比不滿意程度在下雨的情況下趨于增加的模型。此外，當(dāng)使用相機(jī)3000進(jìn)行監(jiān)視的設(shè)施是進(jìn)行比賽等的體育場(chǎng)時(shí)，比賽的獲勝和失敗等可能是外部因素。例如，當(dāng)人群中的人是已經(jīng)比賽失敗或幾乎失敗的團(tuán)隊(duì)的支持者時(shí)，執(zhí)行建模以使得不滿意程度進(jìn)一步增加。

<<監(jiān)視目標(biāo)的風(fēng)險(xiǎn)程度>>

例如，指標(biāo)值計(jì)算單元2020計(jì)算當(dāng)在監(jiān)視目標(biāo)附近發(fā)生任何事件時(shí)(例如，當(dāng)可疑物質(zhì)爆炸時(shí)或當(dāng)具有武器的人出現(xiàn)時(shí))可能發(fā)生多嚴(yán)重的損害(即，監(jiān)視目標(biāo)附近的風(fēng)險(xiǎn)程度)，作為監(jiān)視目標(biāo)的風(fēng)險(xiǎn)程度。

具體地說，由于當(dāng)在擠滿人的地方發(fā)生事件時(shí)會(huì)有很多受害者，所以風(fēng)險(xiǎn)程度高。此外，即使當(dāng)?shù)胤轿磾D滿人時(shí)，在發(fā)生事故時(shí)，由于建筑物的結(jié)構(gòu)的特性，人群變得恐慌并且難以逃跑的地方的風(fēng)險(xiǎn)程度高。具體地，其可以是出口的數(shù)量小或出口的寬度相對(duì)于能夠容納在該場(chǎng)所中的人數(shù)為小或者遠(yuǎn)離出口的具有高風(fēng)險(xiǎn)程度的地方。

這樣的風(fēng)險(xiǎn)程度由建筑物的結(jié)構(gòu)特性和人群的狀態(tài)決定。并且，可以通過相對(duì)于人群的各種狀態(tài)預(yù)先對(duì)人群的行為進(jìn)行模擬來生成用于計(jì)算風(fēng)險(xiǎn)程度的模型。指標(biāo)值計(jì)算單元2020將在捕捉的圖像中實(shí)際顯示的某一地方的人群的狀態(tài)的特征值(密度或流量)應(yīng)用于上述模型，從而計(jì)算出該地方的風(fēng)險(xiǎn)程度。注意，能夠利用捕捉示出人群的捕捉的圖像的相機(jī)3000來確定人群存在的地方。例如，當(dāng)相機(jī)3000的視線固定或在窄范圍內(nèi)變化時(shí)，能夠通過使用已經(jīng)捕捉了捕捉的圖像的相機(jī)3000的id等來指定在某一捕捉的圖像中示出的監(jiān)視目標(biāo)所存在于的地方。此外，當(dāng)相機(jī)3000在改變其朝向的同時(shí)監(jiān)視寬范圍時(shí)，能夠例如通過使用相機(jī)3000的id等以及相機(jī)3000在圖像捕捉時(shí)的朝向來指定在某一捕捉的圖像中示出的監(jiān)視目標(biāo)所存在于的位置。

注意，指標(biāo)值計(jì)算單元2020可以考慮要監(jiān)視的人群的特性來計(jì)算風(fēng)險(xiǎn)程度。例如，指標(biāo)值計(jì)算單元2020將計(jì)算高風(fēng)險(xiǎn)程度的模型用于需要時(shí)間來進(jìn)行移動(dòng)的人群(例如，包括一組老人的人群、具有行走殘障的人的人群，等等)。另外，指標(biāo)值計(jì)算單元2020可以使用考慮諸如天氣的外部因素來計(jì)算風(fēng)險(xiǎn)程度的模型。具體地，指標(biāo)值計(jì)算單元2020使用其中當(dāng)環(huán)境光由于惡劣天氣而為弱時(shí)或當(dāng)?shù)孛嬗捎谙掠甓鵀闈駮r(shí)風(fēng)險(xiǎn)程度變高的模型。此外，當(dāng)可以獲取諸如老年人、兒童或具有行走障礙的人的人群的屬性時(shí)，也可以考慮屬性的信息來計(jì)算風(fēng)險(xiǎn)程度。

<<監(jiān)視的程度>>

圖像處理裝置2000可以將監(jiān)視目標(biāo)未被監(jiān)視的程度(在下文中，不足監(jiān)視程度)設(shè)置為監(jiān)視目標(biāo)的狀態(tài)。這里，假設(shè)場(chǎng)景中的保安在安裝有相機(jī)3000的設(shè)施中進(jìn)行監(jiān)視。場(chǎng)景中的保安可能需要由自己負(fù)責(zé)大范圍，或者可能需要在監(jiān)視期間應(yīng)對(duì)訪問者。由于該原因，監(jiān)視目標(biāo)被保安監(jiān)視的程度可能變化。

因此，指標(biāo)值計(jì)算單元2020處理監(jiān)視目標(biāo)的不足監(jiān)視程度作為監(jiān)視目標(biāo)的狀態(tài)。例如，可以基于監(jiān)視目標(biāo)與監(jiān)視目標(biāo)附近的保安之間的距離來計(jì)算不足監(jiān)視程度。具體地，提供了如下配置：隨著監(jiān)視目標(biāo)和保安之間的距離增加，不足監(jiān)視的程度變得更高。

作為具體示例，可以通過單調(diào)非遞減函數(shù)f(d)對(duì)不足監(jiān)視程度進(jìn)行建模，f(d)隨著與保安的距離d的增加而增加。此時(shí)，也可以考慮到保安的朝向來對(duì)不足監(jiān)視程度進(jìn)行建模。具體地，通過由上述距離d和保安的朝向與到監(jiān)視目標(biāo)的位置的方向之間的間隙的角度的絕對(duì)值θ(指示從保安的位置到監(jiān)視目標(biāo)的方向的矢量和指示保安的朝向的矢量之間的角度)確定的函數(shù)f(d，θ)來對(duì)不足監(jiān)視程度進(jìn)行建模。這里，f(d，θ)被設(shè)置為θ的單調(diào)非遞減函數(shù)。當(dāng)在假設(shè)距離的影響和方向的影響彼此獨(dú)立的情況下進(jìn)行建模時(shí)，g(d)和h(θ)被分別設(shè)置為距離d的單調(diào)非遞減函數(shù)和角度的間隙的絕對(duì)值θ的單調(diào)非遞減函數(shù)，并且可以像f(d，θ)＝g(d)h(θ)那樣執(zhí)行建模。

此外，保安對(duì)保護(hù)的聚焦程度(在下文中，對(duì)保護(hù)的聚焦程度)可以用于計(jì)算不足監(jiān)視程度。例如，通過保安的狀態(tài)、姿勢(shì)等來確定對(duì)保護(hù)的聚焦程度。例如，當(dāng)應(yīng)當(dāng)環(huán)視周圍執(zhí)行保護(hù)的保安面向下或面向上時(shí)，可以認(rèn)為聚焦于保安的保護(hù)的程度低。此外，當(dāng)保安執(zhí)行除了保護(hù)以外的操作時(shí)，即使當(dāng)保安的姿勢(shì)面向前方時(shí)，也可以認(rèn)為保安對(duì)保護(hù)的聚焦程度低。除了保護(hù)之外的操作包括例如與客戶打交道的操作、通過移動(dòng)電話進(jìn)行聯(lián)系的操作以及安裝桿的操作。

這里，存在指標(biāo)值計(jì)算單元2020用來查明保安的狀態(tài)和姿勢(shì)的各種方法。例如，指標(biāo)值計(jì)算單元2020分析捕捉的圖像中的保安的狀態(tài)和姿勢(shì)。此外，例如，指標(biāo)值計(jì)算單元2020可以通過從保安具有的移動(dòng)電話獲取移動(dòng)電話的姿勢(shì)信息來確定保安的姿勢(shì)。例如，移動(dòng)電話的姿勢(shì)信息是關(guān)于由包括在移動(dòng)電話中的加速度傳感器測(cè)量的關(guān)于每個(gè)三維方向的加速度的信息。

指標(biāo)值計(jì)算單元2020根據(jù)上述保安的狀態(tài)等來計(jì)算指示例如大于等于0并且小于等于1的值的對(duì)保護(hù)的聚焦程度。指標(biāo)值計(jì)算單元2020使用諸如上述f(d，θ)之類的模型來計(jì)算不足監(jiān)視的程度，并通過將保安對(duì)保護(hù)的聚焦程度乘以計(jì)算出的值來計(jì)算不足監(jiān)視的最終程度。

另外，指標(biāo)值計(jì)算單元2020可以考慮上述風(fēng)險(xiǎn)程度來計(jì)算不足監(jiān)視程度。具體地，可以認(rèn)為監(jiān)視目標(biāo)因?yàn)轱L(fēng)險(xiǎn)程度更高而是要被監(jiān)視的目標(biāo)。因此，即使使用上述方法計(jì)算出的不足監(jiān)視程度彼此相同，也使具有較高風(fēng)險(xiǎn)程度的監(jiān)視目標(biāo)具有最終計(jì)算出的較高程度的不足監(jiān)視。例如，指標(biāo)值計(jì)算單元2020使用上述方法來計(jì)算針對(duì)某一監(jiān)視目標(biāo)的風(fēng)險(xiǎn)程度和不足監(jiān)視程度，并且將通過將這些程度相乘而獲得的值設(shè)置為最終計(jì)算出的不足監(jiān)視程度。

注意，當(dāng)存在多個(gè)保安時(shí)，指標(biāo)值計(jì)算單元2020可以使用為每個(gè)保安計(jì)算出的不足監(jiān)視的程度來計(jì)算某一監(jiān)視目標(biāo)的不足監(jiān)視的程度。例如，指標(biāo)值計(jì)算單元2020將某一監(jiān)視目標(biāo)的不足監(jiān)視程度計(jì)算為針對(duì)每個(gè)保安計(jì)算出的監(jiān)視目標(biāo)的不足監(jiān)視程度的統(tǒng)計(jì)值(最小值、最大值、平均值等)。

這里，指標(biāo)值計(jì)算單元2020可以將上述的對(duì)保護(hù)的聚焦程度設(shè)置為不足監(jiān)視程度的值。

第二示例性實(shí)施例

圖8是圖示了根據(jù)第二示例性實(shí)施例的圖像處理裝置2000的框圖。在圖8中，箭頭指示信息流。另外，在圖8中，每個(gè)框指示基于功能的配置，而不是基于硬件的配置。

根據(jù)第二示例性實(shí)施例的圖像處理裝置2000包括指示顏色確定單元2060。根據(jù)第二示例性實(shí)施例的指示顏色確定單元2060基于為監(jiān)視目標(biāo)計(jì)算出的指標(biāo)值來確定監(jiān)視目標(biāo)的指示顏色目標(biāo)。呈現(xiàn)單元2040將呈現(xiàn)目標(biāo)圖像中的監(jiān)視目標(biāo)的顏色和監(jiān)視目標(biāo)周圍的顏色改變?yōu)獒槍?duì)監(jiān)視目標(biāo)而確定的指示顏色。

例如，指示顏色確定單元2060根據(jù)監(jiān)視目標(biāo)的指標(biāo)值的大小來改變監(jiān)視目標(biāo)的顏色的密度，并且由此確定監(jiān)視目標(biāo)的指示顏色。例如，隨著指標(biāo)值更大，指示顏色確定單元2060增加監(jiān)視目標(biāo)的顏色的密度。另一方面，指示顏色確定單元2060可以隨著指標(biāo)值更小而增加監(jiān)視目標(biāo)的顏色的密度。

另外，例如，指示顏色確定單元2060通過一種顏色來表示監(jiān)視目標(biāo)，并且基于指標(biāo)值的大小來確定該顏色的密度，并且由此確定監(jiān)視目標(biāo)的指示顏色。例如，指示顏色確定單元2060將監(jiān)視目標(biāo)的指示顏色設(shè)置為具有基于監(jiān)視目標(biāo)的指標(biāo)值的密度的黑色。圖9是圖示了顏色圖的示圖，其中黑色基于指標(biāo)值的大小而變得更深。在圖9的顏色圖中，所表示的黑色隨著點(diǎn)變得更大(向右移動(dòng))而更深。此外，指示顏色確定單元2060可以使用rgb顏色中的任一個(gè)來表示監(jiān)視目標(biāo)的指示顏色，并且可以根據(jù)指標(biāo)值的大小來確定顏色的密度。例如，指示顏色確定單元2060將監(jiān)視目標(biāo)的指示顏色設(shè)置為紅色，并且隨著監(jiān)視目標(biāo)的指標(biāo)值變大而使紅色更深。

此外，例如，指示顏色確定單元2060使用特定顏色圖，并且利用該顏色圖來確定與監(jiān)視目標(biāo)的指標(biāo)值對(duì)應(yīng)的顏色，并且將該顏色設(shè)置為監(jiān)視目標(biāo)的指示顏色。所使用的顏色圖的一個(gè)示例包括用于熱力圖等的彩虹色的顏色圖。代表性的彩虹色顏色圖由紅色、橙色、黃色、綠色、藍(lán)色、靛藍(lán)和紫羅蘭色的漸變構(gòu)成，如圖10中所示。在圖10中，按照指標(biāo)值的降序來設(shè)置紅色、橙色、黃色、綠色、藍(lán)色、靛藍(lán)和紫羅蘭色。然而，指示顏色確定單元2060所使用的顏色圖不限于圖10中所示的顏色圖。指示顏色確定單元2060可以使用任何顏色圖。注意，指示顏色確定單元2060所使用的顏色圖被存儲(chǔ)在被提供在圖像處理裝置2000內(nèi)部或外部的存儲(chǔ)單元中。

注意，呈現(xiàn)單元2040可以僅改變監(jiān)視目標(biāo)的顏色的一部分，而不是監(jiān)視目標(biāo)的整體顏色。例如，當(dāng)監(jiān)視目標(biāo)是人時(shí)，呈現(xiàn)單元2040僅改變監(jiān)視目標(biāo)的面部的顏色。

<具體示例>

圖11是概念性地圖示了將監(jiān)視目標(biāo)的顏色和監(jiān)視目標(biāo)周圍的顏色改變?yōu)榛谥甘颈O(jiān)視目標(biāo)的位置的變化程度的指標(biāo)值的顏色的示圖。圖11中示出的捕捉的圖像10-1和10-2是通過在不同時(shí)間捕捉相同路徑而獲得的圖像。圖11(a)中示出的捕捉的圖像10-1是在圖11(b)中示出的捕捉的圖像10-2之前捕捉的圖像。將捕捉的圖像10-1和10-2彼此進(jìn)行比較，人20的位置未顯著改變，并且其他人的位置正顯著改變。這里，認(rèn)為停留的人是應(yīng)該被注意地監(jiān)視的人。

從而，指示顏色確定單元2060確定指示顏色，從而使得隨著指標(biāo)值變得更小，監(jiān)視目標(biāo)(人)具有更深的顏色。呈現(xiàn)單元2040將捕捉的圖像10-2中的監(jiān)視目標(biāo)的顏色和監(jiān)視目標(biāo)周圍的顏色改變?yōu)樗_定的指示顏色。作為結(jié)果，人20的顏色和人周圍的顏色為暗，并且其他人的顏色和其他人周圍的顏色為淺。這里，類似于圖9的情況，圖11示出了，隨著點(diǎn)的大小變得更大，顏色更深。此外，圖11(b)中繪制的箭頭用于示出人正在移動(dòng)，并且不必在真實(shí)的捕捉的圖像上繪制箭頭。

<操作優(yōu)點(diǎn)>

根據(jù)本示例性實(shí)施例的圖像處理裝置2000，基于監(jiān)視目標(biāo)的狀態(tài)的變化程度來確定捕捉的圖像的指示顏色，并且使用指示顏色的指示被呈現(xiàn)在呈現(xiàn)目標(biāo)圖像上。因此，根據(jù)本示例性實(shí)施例的圖像處理裝置2000，與在呈現(xiàn)目標(biāo)圖像上原樣指示指標(biāo)值的方法相比，可以直觀地確定監(jiān)視目標(biāo)的狀態(tài)的變化程度。因此，觀看呈現(xiàn)目標(biāo)圖像的觀察者等更容易查明監(jiān)視目標(biāo)的當(dāng)前狀況。

第三示例性實(shí)施例

根據(jù)第三示例性實(shí)施例的圖像處理裝置2000具有與根據(jù)第一或第二示例性實(shí)施例的圖像處理裝置2000相同的配置。

根據(jù)第三示例性實(shí)施例的呈現(xiàn)單元2040基于監(jiān)視目標(biāo)的指標(biāo)值在呈現(xiàn)目標(biāo)圖像上呈現(xiàn)用于強(qiáng)調(diào)監(jiān)視目標(biāo)的指示。例如，呈現(xiàn)單元2040隨著其指標(biāo)值變得更大而呈現(xiàn)用于更加強(qiáng)調(diào)監(jiān)視目標(biāo)的指示，或者隨著其指標(biāo)值變得更小而在呈現(xiàn)目標(biāo)圖像上呈現(xiàn)用于更加強(qiáng)調(diào)監(jiān)視目標(biāo)的指示。

<使用框進(jìn)行強(qiáng)調(diào)>

例如，呈現(xiàn)單元2040在監(jiān)視目標(biāo)周圍呈現(xiàn)具有取決于指標(biāo)值的大小的厚度的框。在這種情況下，例如，呈現(xiàn)單元2040使用以下表達(dá)式(2)來計(jì)算框的厚度b。這里，“b0”表示厚度的初始值，“i”表示由指標(biāo)值計(jì)算單元2020計(jì)算出的指標(biāo)值，并且“α”表示比例常數(shù)。注意，呈現(xiàn)單元2040呈現(xiàn)的框的形狀是任意的。

[表達(dá)式2]

b＝b0+α·i…(2)

當(dāng)監(jiān)視目標(biāo)隨著監(jiān)視目標(biāo)具有更大的指標(biāo)值而被更加強(qiáng)調(diào)時(shí)，呈現(xiàn)單元2040隨著其指標(biāo)值變得更大而使框更厚。在這種情況下，“b0”表示厚度的下限，并且“α”表示正實(shí)數(shù)。另一方面，當(dāng)監(jiān)視目標(biāo)隨著其指標(biāo)值變得更大而被更加強(qiáng)調(diào)時(shí)，呈現(xiàn)單元2040隨著其指標(biāo)值變得更小而使框更厚。在這種情況下，“b0”表示厚度的上限，并且“α”表示負(fù)實(shí)數(shù)。

注意，呈現(xiàn)單元2040可以使用與在監(jiān)視目標(biāo)周圍呈現(xiàn)框的方法相同的方法來改變監(jiān)視目標(biāo)的輪廓的粗細(xì)。具體地，呈現(xiàn)單元2040呈現(xiàn)要強(qiáng)調(diào)的監(jiān)視目標(biāo)的輪廓。

此外，呈現(xiàn)單元2040可以通過以基于監(jiān)視目標(biāo)的指標(biāo)值的頻率使框閃爍來執(zhí)行強(qiáng)調(diào)。例如，在呈現(xiàn)單元2040隨著其指標(biāo)值變得更大而更加強(qiáng)調(diào)監(jiān)視目標(biāo)的情況下，呈現(xiàn)單元隨著為之呈現(xiàn)框的監(jiān)視目標(biāo)的指標(biāo)值變得更大而進(jìn)一步增加每單位時(shí)間的閃爍次數(shù)(縮短閃爍間隔)。類似地，當(dāng)呈現(xiàn)單元2040隨著其指標(biāo)值變得更小而更加強(qiáng)調(diào)監(jiān)視目標(biāo)時(shí)，呈現(xiàn)單元隨著為之呈現(xiàn)框的監(jiān)視目標(biāo)的指標(biāo)值變得更小而進(jìn)一步增加每單位時(shí)間的閃爍次數(shù)(縮短閃爍間隔)。

<<具體示例>>

圖12是概念性地圖示了通過在監(jiān)視目標(biāo)周圍呈現(xiàn)框來執(zhí)行強(qiáng)調(diào)的示圖。圖12中示出的捕捉的圖像10-1和10-2是通過在相同地方在不同時(shí)間捕捉人的隊(duì)列而得到的圖像。類似于圖11的情況，捕捉的圖像10-1是在捕捉的圖像10-2之前捕捉的圖像。將捕捉的圖像10-1和10-2彼此比較，上部隊(duì)列30-1的長(zhǎng)度未改變，并且下部隊(duì)列30-2的長(zhǎng)度顯著改變。這里，優(yōu)選的是隊(duì)列的長(zhǎng)度隨著時(shí)間減少，并且認(rèn)為應(yīng)當(dāng)仔細(xì)地觀察具有小的長(zhǎng)度變化程度的隊(duì)列。

因此，呈現(xiàn)單元2040圍繞監(jiān)視目標(biāo)(人)呈現(xiàn)框，從而使得框的厚度隨著其指標(biāo)值變得更小而變得更大。在圖12中，在隊(duì)列30-1周圍呈現(xiàn)更厚的框，并且在隊(duì)列30-2周圍呈現(xiàn)更薄的框。

<使用顏色進(jìn)行強(qiáng)調(diào)>

此外，使用在第二示例性實(shí)施例中描述的指示顏色確定單元2060，根據(jù)第三示例性實(shí)施例的圖像處理裝置2000可以通過將監(jiān)視目標(biāo)的顏色或監(jiān)視目標(biāo)周圍的顏色改變?yōu)獒槍?duì)監(jiān)視目標(biāo)而被確定的指示顏色來呈現(xiàn)用于強(qiáng)調(diào)監(jiān)視目標(biāo)的指示。例如，指標(biāo)值計(jì)算單元2020通過增加監(jiān)視目標(biāo)的指示顏色的密度來強(qiáng)調(diào)監(jiān)視目標(biāo)。此外，指示顏色確定單元2060使用由顏色構(gòu)成的顏色圖來構(gòu)成監(jiān)視目標(biāo)的指示顏色，該顏色隨著顏色更接近地對(duì)應(yīng)于要強(qiáng)調(diào)的監(jiān)視目標(biāo)的指標(biāo)值而更加明顯。例如，當(dāng)監(jiān)視目標(biāo)隨著其指標(biāo)值變得更大而被更加強(qiáng)調(diào)時(shí)，指示顏色確定單元2060使用具有如下顏色的顏色圖：該顏色隨著顏色對(duì)應(yīng)于更大的指標(biāo)值而更加明顯(紅色等)值，并且隨著顏色對(duì)應(yīng)于更小的指標(biāo)值而較不明顯(灰色等)。

這里，還可以通過在監(jiān)視目標(biāo)附近呈現(xiàn)具有顏色的框來實(shí)現(xiàn)將監(jiān)視目標(biāo)周圍的顏色改變?yōu)槟骋活伾?。在這種情況下，呈現(xiàn)單元2040可以無論指標(biāo)值如何都使得框的厚度恒定，或者可以使得框的厚度根據(jù)指標(biāo)值而變化。根據(jù)指標(biāo)值確定框的厚度的方法如上所述。

<<具體示例>>

圖13是概念性地圖示了通過在監(jiān)視目標(biāo)周圍呈現(xiàn)具有基于指標(biāo)值的顏色和大小的框來執(zhí)行強(qiáng)調(diào)的示圖。圖13中示出的捕捉的圖像10-1和10-2是通過在不同時(shí)間在相同地方捕捉人群而獲得的圖像。類似于圖11以及圖12的情況，捕捉的圖像10-1是在捕捉的圖像10-2之前捕捉的圖像。將捕捉的圖像10-1和10-2彼此進(jìn)行比較，包括在右上方人群40-1中的人數(shù)增加，并且包括在左下方人群40-2中的人數(shù)減少。

在這種情況下，指示顏色確定單元2060確定指示顏色，從而使得人群的顏色隨著人群中的人數(shù)增加而變得更深。此外，呈現(xiàn)單元2040確定框的厚度，從而使得框隨著人群的人數(shù)的增加程度變得更高而變得更厚。作為結(jié)果，呈現(xiàn)單元2040在人數(shù)顯著增加的人群40-1周圍呈現(xiàn)粗且暗的框，并且在人數(shù)未顯著增加的人群40-2周圍呈現(xiàn)細(xì)且淺的框。

<操作優(yōu)點(diǎn)>

根據(jù)本示例性實(shí)施例的圖像處理裝置2000，在呈現(xiàn)目標(biāo)圖像上呈現(xiàn)用于在基于監(jiān)視目標(biāo)的指標(biāo)值的程度上強(qiáng)調(diào)監(jiān)視目標(biāo)的指示。因此，觀看呈現(xiàn)目標(biāo)圖像的觀察者等可以立即查明每個(gè)監(jiān)視目標(biāo)的變化程度，并且可以立即查明應(yīng)該在什么程度上注意地監(jiān)視每個(gè)監(jiān)視目標(biāo)。

第四示例性實(shí)施例

圖14是圖示了根據(jù)第四示例性實(shí)施例的圖像處理裝置2000的框圖。在圖14中，箭頭指示信息流。另外，在圖14中，每個(gè)框指示基于功能的配置，而不是基于硬件的配置。

根據(jù)第四示例性實(shí)施例的圖像處理裝置2000基于監(jiān)視目標(biāo)的狀態(tài)的變化程度偏離基準(zhǔn)變化程度多少而在第一圖像上呈現(xiàn)指示。因此，根據(jù)第四示例性實(shí)施例的圖像處理裝置2000包括發(fā)散程度計(jì)算單元2080。

發(fā)散程度計(jì)算單元2080計(jì)算由指標(biāo)值計(jì)算單元2020計(jì)算出的指標(biāo)值與基準(zhǔn)變化程度之間的發(fā)散程度。根據(jù)第四示例性實(shí)施例的呈現(xiàn)單元2040在監(jiān)視目標(biāo)上呈現(xiàn)用于隨著其發(fā)散程度變得更高而更加強(qiáng)調(diào)監(jiān)視目標(biāo)的指示。

這里，發(fā)散程度計(jì)算單元2080從被提供在圖像處理裝置2000內(nèi)部或外部的存儲(chǔ)單元獲取基準(zhǔn)變化程度。這里，基準(zhǔn)變化程度可根據(jù)什么被處理作為監(jiān)視目標(biāo)的狀態(tài)而變化。在這種情況下，存儲(chǔ)單元可以存儲(chǔ)監(jiān)視目標(biāo)的每個(gè)狀態(tài)的基準(zhǔn)變化程度。

<計(jì)算發(fā)散程度的方法>

存在發(fā)散程度計(jì)算單元2080用來計(jì)算發(fā)散程度的各種方法。例如，發(fā)散程度計(jì)算單元2080使用以下表達(dá)式(3)來計(jì)算發(fā)散程度k。這里，“i”表示針對(duì)監(jiān)視目標(biāo)計(jì)算的指標(biāo)值，并且“ibase(i基)”表示基準(zhǔn)變化程度。然而，計(jì)算發(fā)散程度的方法不限于以下方法。

[表達(dá)式3]

<使用顏色進(jìn)行強(qiáng)調(diào)>

例如，根據(jù)第四示例性實(shí)施例的圖像處理裝置2000基于發(fā)散程度來改變監(jiān)視目標(biāo)的顏色。在這種情況下，根據(jù)第四示例性實(shí)施例的圖像處理裝置2000包括指示顏色確定單元2060。

根據(jù)第四示例性實(shí)施例的指示顏色確定單元2060使用與第二示例性實(shí)施例中所述的指示顏色確定單元2060所使用的方法相同的方法來確定監(jiān)視目標(biāo)的顏色和監(jiān)視目標(biāo)周圍的顏色。例如，指示顏色確定單元2060基于針對(duì)監(jiān)視目標(biāo)計(jì)算出的發(fā)散程度來確定監(jiān)視目標(biāo)的顏色的密度。在這種情況下，指示顏色確定單元2060在發(fā)散程度為0時(shí)使密度最小化，并且隨著發(fā)散程度變得更高而使監(jiān)視目標(biāo)的顏色更深。注意，當(dāng)使用這種方法時(shí)，如果對(duì)于指標(biāo)值可以取負(fù)值，則發(fā)散程度由指標(biāo)值和基準(zhǔn)值之間的發(fā)散的絕對(duì)值來表示。例如，發(fā)散程度由使用表達(dá)式(3)計(jì)算的值的絕對(duì)值來表示。

此外，指示顏色確定單元2060將發(fā)散程度為0時(shí)的監(jiān)視目標(biāo)的顏色的密度設(shè)置為基準(zhǔn)密度。指示顏色確定單元隨著發(fā)散程度在正方向上變得更高(變得大于基準(zhǔn)值)而使監(jiān)視目標(biāo)的顏色更深，并且隨著發(fā)散程度在負(fù)方向上變得更高(變得小于基準(zhǔn)值)而使監(jiān)視目標(biāo)的顏色更淺。圖15是概念性地圖示了當(dāng)基準(zhǔn)密度被確定時(shí)基于發(fā)散程度確定指示顏色的密度的方法的示圖。例如，指示顏色確定單元2060將與基準(zhǔn)變化程度對(duì)應(yīng)的顏色的密度設(shè)置為監(jiān)視目標(biāo)的原始顏色的密度。換句話說，當(dāng)發(fā)散程度為0時(shí)，監(jiān)視目標(biāo)的顏色的密度不改變。當(dāng)指標(biāo)值大于基準(zhǔn)變化程度時(shí)(當(dāng)發(fā)散程度具有正值時(shí))，指示顏色確定單元2060使監(jiān)視目標(biāo)的顏色比原始顏色更深，并且當(dāng)指標(biāo)值小于基準(zhǔn)變化程度時(shí)(當(dāng)發(fā)散程度具有負(fù)值時(shí))使監(jiān)視目標(biāo)的顏色比原始顏色更淺。

注意，當(dāng)使用在第二示例性實(shí)施例中描述的rgb顏色中的任何一種的密度或者使用特定顏色圖時(shí)，基于發(fā)散程度確定指示顏色的方法也與基于上述發(fā)散程度改變監(jiān)視目標(biāo)的顏色的密度的方法相同。

<用于強(qiáng)調(diào)的指示>

使用與第三示例性實(shí)施例中所述的方法相同的方法，呈現(xiàn)單元2040可以基于針對(duì)監(jiān)視目標(biāo)計(jì)算的發(fā)散程度來呈現(xiàn)用于強(qiáng)調(diào)監(jiān)視目標(biāo)的指示。

<使用框進(jìn)行強(qiáng)調(diào)>

例如，與第三示例性實(shí)施例的情況一樣，呈現(xiàn)單元2040使用框和顏色來執(zhí)行強(qiáng)調(diào)。在這種情況下，例如，呈現(xiàn)單元2040根據(jù)表達(dá)式(4)確定監(jiān)視目標(biāo)的框的厚度b'。這里，“k”表示上述發(fā)散程度。例如，當(dāng)α被設(shè)置為正實(shí)數(shù)時(shí)，框隨著發(fā)散程度變得更高而變得更厚。

[表達(dá)式4]

b′＝b0+α·k…(4)

此外，與第三示例性實(shí)施例的情況一樣，呈現(xiàn)單元2040可以通過根據(jù)發(fā)散程度改變監(jiān)視目標(biāo)的輪廓的粗細(xì)來進(jìn)行強(qiáng)調(diào)，或者通過按照基于發(fā)散程度的頻率使框閃爍來進(jìn)行強(qiáng)調(diào)。

<使用顏色進(jìn)行強(qiáng)調(diào)>

類似于根據(jù)第三示例性實(shí)施例的指示顏色確定單元2060，根據(jù)第四示例性實(shí)施例的指示顏色確定單元2060可以通過改變監(jiān)視目標(biāo)的指示顏色來呈現(xiàn)用于強(qiáng)調(diào)監(jiān)視目標(biāo)的指示。具體地，當(dāng)指示顏色確定單元2060隨著其發(fā)散程度變得更高而更加強(qiáng)調(diào)監(jiān)視目標(biāo)時(shí)，指示顏色確定單元通過隨著發(fā)散程度變得更高而使指示顏色更深來確定指示顏色，或者通過使用由以下顏色構(gòu)成的顏色圖來確定指示顏色：該顏色隨著監(jiān)視目標(biāo)的發(fā)散程度變得更高而更加明顯。類似地，當(dāng)指示顏色確定單元2060隨著其發(fā)散程度變得更低而更加強(qiáng)調(diào)監(jiān)視目標(biāo)時(shí)，指示顏色確定單元通過隨著發(fā)散程度變得更低而使指示顏色更深來確定指示顏色，或者通過使用由以下顏色構(gòu)成的顏色圖來確定指示顏色：該顏色隨著顏色對(duì)應(yīng)于更低的發(fā)散程度而更加明顯。

<操作優(yōu)點(diǎn)>

根據(jù)本示例性實(shí)施例，基于監(jiān)視目標(biāo)的狀態(tài)的變化程度偏離基準(zhǔn)變化程度多少，在呈現(xiàn)目標(biāo)圖像上呈現(xiàn)用于強(qiáng)調(diào)監(jiān)視目標(biāo)的指示。通過引入基準(zhǔn)變化度，可以更準(zhǔn)確地獲得監(jiān)視目標(biāo)應(yīng)該被強(qiáng)調(diào)的程度。因此，觀察者等可以針對(duì)每個(gè)監(jiān)視目標(biāo)來更準(zhǔn)確地查明應(yīng)當(dāng)注意地執(zhí)行監(jiān)視的程度。

第五示例性實(shí)施例

與第一示例性實(shí)施例的情況一樣，根據(jù)第五示例性實(shí)施例的圖像處理裝置2000的配置由圖1示出。

根據(jù)第五示例性實(shí)施例的指標(biāo)值計(jì)算單元2020基于計(jì)算出的監(jiān)視目標(biāo)的狀態(tài)的變化程度來計(jì)算在用于計(jì)算的每個(gè)圖像被捕捉的時(shí)間之時(shí)和之后的監(jiān)視目標(biāo)的狀態(tài)的變化程度的預(yù)測(cè)值。指標(biāo)值計(jì)算單元2020將針對(duì)監(jiān)視目標(biāo)計(jì)算出的預(yù)測(cè)值設(shè)置為監(jiān)視目標(biāo)的指標(biāo)值。

例如，指標(biāo)值計(jì)算單元2020通過使用在從時(shí)間t起的過去的預(yù)定時(shí)間段內(nèi)捕捉的多個(gè)圖像，來計(jì)算在預(yù)定時(shí)間t之后監(jiān)視目標(biāo)的狀態(tài)的變化程度的預(yù)測(cè)值?；陬A(yù)測(cè)值的指示被呈現(xiàn)在呈現(xiàn)目標(biāo)圖像上，該呈現(xiàn)目標(biāo)圖像在時(shí)間t被呈現(xiàn)在顯示屏上。

例如，指標(biāo)值計(jì)算單元2020使用所獲取的多個(gè)捕捉的圖像來生成用于預(yù)測(cè)監(jiān)視目標(biāo)的狀態(tài)的模型。注意，由于根據(jù)樣本值生成預(yù)測(cè)模型的方法是已知的方法，因此這里將不再描述其詳細(xì)描述。指標(biāo)值計(jì)算單元2020使用根據(jù)所獲取的多個(gè)捕捉的圖像生成的用于預(yù)測(cè)監(jiān)視目標(biāo)的狀態(tài)的模型，來計(jì)算在捕捉用于生成模型的圖像的時(shí)間之時(shí)和之后的監(jiān)視目標(biāo)的狀態(tài)的變化程度的預(yù)測(cè)值。

假設(shè)用于預(yù)測(cè)監(jiān)視目標(biāo)的狀態(tài)的模型由f(t)表達(dá)。這里，“t”表示時(shí)間，并且“f(t)”表示時(shí)間t處的監(jiān)視目標(biāo)的狀態(tài)的預(yù)測(cè)值。在這種情況下，例如，指標(biāo)值計(jì)算單元2020使用以下表達(dá)式(5)來計(jì)算在時(shí)間t1和將來的時(shí)間t2之間的監(jiān)視目標(biāo)的狀態(tài)的變化程度。這里，“a”表示監(jiān)視目標(biāo)的狀態(tài)的變化程度的預(yù)測(cè)值。注意，以下表達(dá)式(5)僅僅是示例，并且計(jì)算預(yù)測(cè)值的方法不限于使用表達(dá)式(5)的方法。

[表達(dá)式5]

注意，“t1”可以是將來的時(shí)間，可以是當(dāng)前時(shí)間，或者可以是過去的時(shí)間。當(dāng)t1是當(dāng)前時(shí)間或過去的時(shí)間時(shí)，可以基于測(cè)量值來計(jì)算f(t)的值，而不是使用預(yù)測(cè)模型來計(jì)算f(t)的值。

此外，指標(biāo)值計(jì)算單元2020可以使用預(yù)先提供的預(yù)測(cè)模型來計(jì)算監(jiān)視目標(biāo)的狀態(tài)的變化程度的預(yù)測(cè)值。在這種情況下，指標(biāo)值計(jì)算單元2020使用獲取的捕捉的圖像中的每個(gè)監(jiān)視目標(biāo)的狀態(tài)作為對(duì)預(yù)測(cè)模型的輸入。預(yù)測(cè)模型可以被存儲(chǔ)在指標(biāo)值計(jì)算單元2020的內(nèi)部或外部。

另外，當(dāng)基于預(yù)測(cè)值的指示被呈現(xiàn)在由某一相機(jī)3000-1捕捉的圖像上時(shí)，指標(biāo)值計(jì)算單元2020可以使用由位于相機(jī)3000-1周圍的另一相機(jī)3000捕捉的圖像。例如，指標(biāo)值計(jì)算單元2020分析由與相機(jī)3000-1相鄰的相機(jī)3000-2捕捉的圖像。結(jié)果，假設(shè)人群正朝向相機(jī)3000-1的成像范圍內(nèi)的地方前進(jìn)。在這種情況下，呈現(xiàn)單元2040在由相機(jī)3000-1捕捉的圖像中的預(yù)計(jì)人群將移動(dòng)到的區(qū)域中呈現(xiàn)基于針對(duì)人群計(jì)算的狀態(tài)的變化程度的預(yù)測(cè)值的指示。具體地，呈現(xiàn)單元2040執(zhí)行改變?cè)谟上鄼C(jī)3000-1捕捉的圖像中的預(yù)計(jì)人群將流入的區(qū)域的顏色的處理或者用框圍繞該區(qū)域的處理。

<操作優(yōu)點(diǎn)>

根據(jù)本示例性實(shí)施例，基于監(jiān)視目標(biāo)的狀態(tài)的變化程度的預(yù)測(cè)值的指示被呈現(xiàn)在呈現(xiàn)目標(biāo)圖像上。因此，觀察者等可以立即查明應(yīng)當(dāng)仔細(xì)觀察監(jiān)視目標(biāo)的未來動(dòng)作。

第六示例性實(shí)施例

在第六示例性實(shí)施例中，關(guān)于由某一相機(jī)3000(在下文中為相機(jī)3000-1)捕捉的圖像，存在它們被顯示在顯示屏4000上的時(shí)間段，以及它們未被顯示在其上的另一時(shí)間段。例如，存在由多個(gè)相機(jī)3000捕捉的圖像被以時(shí)分方式顯示在一個(gè)顯示屏4000上的情況。

這里，當(dāng)由相機(jī)3000-1捕捉的圖像在一時(shí)間段期間未被顯示并且在該時(shí)間段之后被顯示在顯示屏4000上時(shí)，根據(jù)第六示例性實(shí)施例的指標(biāo)值計(jì)算單元2020基于在該時(shí)間段之前和之后的監(jiān)視目標(biāo)的狀態(tài)的變化程度來計(jì)算監(jiān)視目標(biāo)的指標(biāo)值。

圖16是概念性地圖示了由多個(gè)相機(jī)3000捕捉的圖像以時(shí)分方式顯示在顯示屏4000上的示圖。在圖16的情況下，在時(shí)間段p1和p3期間顯示由相機(jī)3000-1捕捉的圖像，并且在時(shí)間段p2期間顯示由另一相機(jī)3000-2捕捉的圖像。在這種情況下，指標(biāo)值計(jì)算單元2020基于在時(shí)間段p2之前的監(jiān)視目標(biāo)的狀態(tài)和在時(shí)間段p2之后的監(jiān)視目標(biāo)的狀態(tài)之間的變化程度來計(jì)算指標(biāo)值。在下文中，將由相機(jī)3000-1捕捉的圖像不顯示在顯示屏4000上的時(shí)間段(圖16中的p2等)被描述為非顯示時(shí)段。

例如，指標(biāo)值計(jì)算單元2020使用在非顯示時(shí)段之前被呈現(xiàn)在顯示屏4000上的預(yù)定數(shù)量的捕捉的圖像和在非顯示時(shí)段之后被呈現(xiàn)在顯示屏4000上的預(yù)定時(shí)間內(nèi)的捕捉的圖像(預(yù)定數(shù)量的捕捉的圖像)，來計(jì)算用于在非顯示時(shí)段過去之后的呈現(xiàn)的指標(biāo)值。圖17是圖示了根據(jù)第六示例性實(shí)施例的指標(biāo)值計(jì)算單元2020用來計(jì)算指標(biāo)值的方法的示圖。時(shí)間段p1、p2和p3與圖16中的那些相同。指標(biāo)值計(jì)算單元2020使用在作為時(shí)間段p1的一部分的時(shí)間段p4期間被顯示在顯示屏4000上的捕捉的圖像和在作為時(shí)間段p3的一部分的時(shí)間段p5期間被顯示在顯示屏4000上的捕捉的圖像來計(jì)算監(jiān)視目標(biāo)的指標(biāo)值。呈現(xiàn)單元2040在當(dāng)時(shí)間t時(shí)被顯示在顯示屏4000上的呈現(xiàn)目標(biāo)圖像上呈現(xiàn)基于計(jì)算出的指標(biāo)值的指示。注意，時(shí)間段p4的長(zhǎng)度和時(shí)間段p5的長(zhǎng)度可以彼此相同，或者可以彼此不同。

例如，呈現(xiàn)單元2040在從時(shí)間t起的預(yù)定時(shí)間段內(nèi)(例如，在十秒內(nèi))在捕捉的圖像上繼續(xù)呈現(xiàn)基于時(shí)間段p4和時(shí)間段p5之間的監(jiān)視目標(biāo)的狀態(tài)的變化程度的指示，以便觀察者等能夠充分查明在時(shí)間p2之前和之后的監(jiān)視目標(biāo)的狀態(tài)的變化程度。

圖18是圖示了由根據(jù)第六示例性實(shí)施例的圖像處理裝置2000執(zhí)行的處理的流程的流程圖。在步驟s202中，顯示屏4000顯示由相機(jī)3000-1捕捉的圖像。在步驟s204中，顯示屏4000的指示目標(biāo)從相機(jī)3000-1切換到相機(jī)3000-2。在步驟s206中，顯示屏4000顯示由相機(jī)3000-2捕捉的圖像。在步驟s208中，顯示屏4000的顯示目標(biāo)從相機(jī)3000-2切換到相機(jī)3000-1。

在步驟s210中，指標(biāo)值計(jì)算單元2020計(jì)算指示在s202中顯示的監(jiān)視目標(biāo)的狀態(tài)與將從現(xiàn)在開始顯示的監(jiān)視目標(biāo)的狀態(tài)之間的變化程度的指標(biāo)值。在步驟s212中，指標(biāo)值計(jì)算單元2020在由相機(jī)3000-1捕捉的圖像上呈現(xiàn)基于計(jì)算出的指標(biāo)值的指示。在其上呈現(xiàn)指示的捕捉的圖像被顯示在顯示屏4000上。

注意，如果由相機(jī)3000-1捕捉的圖像未被顯示在顯示屏4000上的時(shí)間段比預(yù)定時(shí)間段更短，則指標(biāo)值計(jì)算單元2020可以將其視為“由相機(jī)3000-1捕捉的圖像正被連續(xù)地顯示在顯示屏4000上”。這是因?yàn)?，如果將顯示目標(biāo)的相機(jī)僅在短時(shí)間段(諸如大約一秒)內(nèi)切換到另一相機(jī)，則例如認(rèn)為觀察者可被看作一直連續(xù)地觀看同一相機(jī)的圖像。

<操作優(yōu)點(diǎn)>

根據(jù)本示例性實(shí)施例，當(dāng)由相機(jī)3000-1捕捉的圖像在一時(shí)間段期間不被顯示并且在該時(shí)間段之后被顯示在顯示屏4000上時(shí)，指示監(jiān)視目標(biāo)之前和之后的監(jiān)視目標(biāo)的狀態(tài)的變化程度的指標(biāo)值被計(jì)算出。以這種方式，例如，當(dāng)在顯示屏4000的頻道從相機(jī)3000-1的圖像切換到相機(jī)3000-2的圖像之后，顯示屏4000的頻道再次切換到相機(jī)3000-1的圖像時(shí)，與上次觀看相機(jī)3000-1的圖像時(shí)相比，相機(jī)3000-2、觀察者等可以立即查明每個(gè)監(jiān)視目標(biāo)的狀態(tài)已經(jīng)改變了多少。因此，即使在難以僅繼續(xù)監(jiān)視由特定相機(jī)3000捕捉的圖像時(shí)，也可以在觀看由相機(jī)3000捕捉的圖像時(shí)立即查明由某一相機(jī)3000捕捉的監(jiān)視目標(biāo)的狀態(tài)的變化程度。

第七示例性實(shí)施例

類似于根據(jù)第一示例性實(shí)施例的圖像處理裝置2000，根據(jù)第七示例性實(shí)施例的圖像處理裝置2000由圖1示出。

例如，存在觀看顯示屏4000的觀察者等無法一次仔細(xì)地觀察整個(gè)顯示屏4000的情況，諸如顯示屏4000具有大尺寸的情況。因此，根據(jù)第七示例性實(shí)施例的指標(biāo)值計(jì)算單元2020針對(duì)顯示在某一部分區(qū)域(在下文中為第一部分區(qū)域)中的監(jiān)視目標(biāo)來計(jì)算指示在如下時(shí)間段之前和之后的監(jiān)視目標(biāo)的狀態(tài)的變化程度的指標(biāo)值：在該時(shí)間段期間，顯示屏4000的第一部分區(qū)域與用戶(觀察者等)的眼睛注視的方向不對(duì)應(yīng)。根據(jù)第七示例性實(shí)施例的呈現(xiàn)單元2040在上述時(shí)間段之后顯示的捕捉的圖像中的第一部分區(qū)域中顯示的區(qū)域上呈現(xiàn)基于計(jì)算出的指標(biāo)值的指示。

圖19是圖示了用戶的眼睛注視方向與部分區(qū)域之間的關(guān)系的示圖。在圖19中，眼睛注視方向50-1對(duì)應(yīng)于部分區(qū)域60-1，并且眼睛注視方向50-2對(duì)應(yīng)于部分區(qū)域60-2。注意，為了簡(jiǎn)化附圖，通過一個(gè)箭頭示出對(duì)應(yīng)于部分區(qū)域的眼睛注視方向，但是對(duì)應(yīng)于部分區(qū)域的眼睛注視方向?qū)嶋H上具有一定程度的寬度。例如，眼睛注視方向50-1可以是用來將部分區(qū)域60-1包括在用戶的視力中的眼睛注視方向，從而使得用戶可以仔細(xì)地觀察包括在部分區(qū)域60-1中的監(jiān)視目標(biāo)。

根據(jù)第七示例性實(shí)施例的指標(biāo)值計(jì)算單元2020所執(zhí)行的處理的基本原理與根據(jù)第六示例性實(shí)施例的指標(biāo)值計(jì)算單元2020所執(zhí)行的處理的原理相同。具體地，指標(biāo)值計(jì)算單元2020以與第六示例性實(shí)施例中的“由相機(jī)3000-1捕捉的圖像被顯示在顯示屏4000上的時(shí)間段”相同的方式來處理“部分區(qū)域被包括在與用戶的眼睛注視方向?qū)?yīng)的區(qū)域中的時(shí)間段”。此外，指標(biāo)值計(jì)算單元2020以與第六示例性實(shí)施例中的“由相機(jī)3000-1捕捉的圖像未被顯示在顯示屏4000上的時(shí)間段”相同的方式來處理“通過以下方式捕捉的圖像的時(shí)間段”相同的方式來處理“部分區(qū)域未被包括在與用戶的眼睛注視方向?qū)?yīng)的區(qū)域中的時(shí)間段”。

<用戶的眼睛注視方向的獲取>

指標(biāo)值計(jì)算單元2020獲取用戶的眼睛注視方向。例如，通過“水平方向上的角度和垂直方向上的角度”的組合來表示眼睛注視方向。這里，水平方向上的角度和垂直方向上的角度中的每一個(gè)的基準(zhǔn)(用于設(shè)置0度的方向)是任意的。

例如，通過使用相機(jī)等捕捉用戶的面部和眼睛并分析捕捉的圖像來計(jì)算用戶的眼睛注視方向。捕捉用戶的面部和眼睛的相機(jī)被安裝在例如顯示屏4000附近。由于捕捉用戶的面部和眼睛的圖像并由此檢測(cè)眼睛注視方向的技術(shù)是已知技術(shù)，因此其詳細(xì)描述在這里將不被描述。注意，檢測(cè)用戶的眼睛注視方向的處理單元(以下稱為眼睛注視方向檢測(cè)單元)可被設(shè)置在圖像處理裝置2000的內(nèi)部或外部。

<具體方法>

例如，指標(biāo)值計(jì)算單元2020通過將顯示屏劃分為預(yù)定數(shù)量的部分區(qū)域來處理顯示屏4000。指標(biāo)值計(jì)算單元2020從眼睛注視方向檢測(cè)單元獲取觀察者的眼睛注視方向，并且確定該眼睛注視方向?qū)?yīng)于哪個(gè)部分區(qū)域。當(dāng)確定的部分區(qū)域不同于上次確定的部分區(qū)域時(shí)，確定與用戶的眼睛注視方向?qū)?yīng)的部分區(qū)域已經(jīng)改變。

圖20是以表格格式圖示了與觀察者的眼睛注視方向?qū)?yīng)的部分區(qū)域和當(dāng)觀察者的眼睛注視方向已經(jīng)改變時(shí)的時(shí)間的信息的示圖。該表格被命名為眼睛注視信息表100。眼睛注視信息表100包括兩列，即時(shí)間102和部分區(qū)域id104。在眼睛注視信息表100的每個(gè)記錄中，從時(shí)間點(diǎn)102所示的時(shí)間起包括在用戶的眼睛注視方向中的部分區(qū)域的id被顯示在部分區(qū)域id104中。

在圖20中，在時(shí)間t1和時(shí)間t4處，對(duì)應(yīng)于觀察者的眼睛注視方向的區(qū)域是部分區(qū)域1。因此，指標(biāo)值計(jì)算單元2020計(jì)算指示在時(shí)間t1和時(shí)間t2之間的時(shí)間段(部分區(qū)域1對(duì)應(yīng)于用戶的眼睛注視方向的時(shí)間段)期間的監(jiān)視目標(biāo)的狀態(tài)與在時(shí)間t4之時(shí)和之后(在當(dāng)部分區(qū)域1再一次對(duì)應(yīng)于用戶的眼睛注視方向的時(shí)間之時(shí)和之后)的監(jiān)視目標(biāo)的狀態(tài)之間的變化程度的指標(biāo)值，作為監(jiān)視目標(biāo)的指標(biāo)值。

注意，如果用戶的眼睛注視方向改變到另一部分區(qū)域側(cè)的時(shí)間段比預(yù)定時(shí)間段更短，則指標(biāo)值計(jì)算單元2020可以將其視為“用戶已經(jīng)連續(xù)觀看相同部分區(qū)域”。這是因?yàn)?，如果觀察者在短時(shí)間段(諸如大約一秒)內(nèi)將他/她的眼睛從部分區(qū)域移開，則認(rèn)為例如“觀察者可被看作一直連續(xù)觀看某一部分區(qū)域”。

此外，指標(biāo)值計(jì)算單元2020可以使用用戶面部的朝向，而不是用戶的眼睛注視方向。獲取并使用用戶的面部的朝向的方法與檢測(cè)并使用用戶的眼睛注視方向的方法相同。

<操作優(yōu)點(diǎn)>

根據(jù)本示例性實(shí)施例，當(dāng)存在某一區(qū)域未被監(jiān)視的時(shí)間段時(shí)，其呈現(xiàn)指示每個(gè)監(jiān)視目標(biāo)的狀態(tài)從上次在顯示屏4000上觀看該區(qū)域的時(shí)間到當(dāng)再一次觀看該區(qū)域時(shí)的變化程度的指示。因此，即使當(dāng)無法一次監(jiān)視顯示屏4000的整個(gè)區(qū)域時(shí)，觀察者等也可以立即查明每個(gè)區(qū)域中的監(jiān)視目標(biāo)的狀態(tài)的變化程度。

<修改示例7-1>

根據(jù)下面描述的修改示例7-1的圖像處理裝置2000可以被實(shí)現(xiàn)為具有與根據(jù)第七示例性實(shí)施例的圖像處理裝置2000相同的配置。在根據(jù)修改示例7-1的圖像處理裝置2000中，顯示屏4000包括多個(gè)小屏幕4100。由不同相機(jī)3000捕捉的圖像被顯示在各個(gè)小屏幕4100上。

根據(jù)修改示例7-1的指標(biāo)值計(jì)算單元2020針對(duì)在小屏幕4100-1上顯示的監(jiān)視目標(biāo)來計(jì)算指示監(jiān)視目標(biāo)的狀態(tài)在如下時(shí)間段之前和之后的變化程度的指標(biāo)值：在該時(shí)間段期間某一小屏幕4100-1未被包括在與用戶的眼睛注視方向?qū)?yīng)的區(qū)域中。根據(jù)修改示例7-1的呈現(xiàn)單元2040在該時(shí)間段之后在小屏幕4100-1上顯示的捕捉的圖像上呈現(xiàn)基于計(jì)算出的指標(biāo)值的指示。

小屏幕4100可以按照與第七示例性實(shí)施例中的部分區(qū)域相同的方式來處理。因此，根據(jù)修改示例7-1的指標(biāo)值計(jì)算單元2020所執(zhí)行的處理的基本原理與根據(jù)第七示例性實(shí)施例的指標(biāo)值計(jì)算單元2020所執(zhí)行的處理的原理相同。具體地，指標(biāo)值計(jì)算單元2020以與第七示例性實(shí)施例中的“部分區(qū)域被包括在用戶的眼睛注視方向中的時(shí)間段”相同的方式來處理“小屏幕4100-1被包括在用戶的眼睛注視方向中的時(shí)間段”。此外，指標(biāo)值計(jì)算單元2020以與第七示例性實(shí)施例中的“部分區(qū)域未被包括在用戶的眼睛注視方向中的時(shí)間段”相同的方式來處理“小屏幕4100-1未被觀察者觀看的時(shí)間段”。

到此為止參照附圖描述了本發(fā)明的示例性實(shí)施例。然而，示例性實(shí)施例僅僅是對(duì)本發(fā)明的說明，也可以采用其他各種配置。

在下文中，參考配置的示例將被添加。

(1)一種圖像處理裝置，包括：

指標(biāo)值計(jì)算單元，該指標(biāo)值計(jì)算單元使用多個(gè)捕捉的圖像來計(jì)算指標(biāo)值，該捕捉的圖像由相機(jī)在不同時(shí)間捕捉，該指標(biāo)值指示在捕捉的圖像中監(jiān)視目標(biāo)的狀態(tài)的變化程度；以及

呈現(xiàn)單元，該呈現(xiàn)單元在由所述相機(jī)捕捉的第一捕捉的圖像上呈現(xiàn)基于所述指標(biāo)值的指示。

(2)根據(jù)(1)所述的圖像處理裝置，還包括第一指示顏色確定單元，該第一指示顏色確定單元針對(duì)監(jiān)視目標(biāo)、基于指標(biāo)值來確定指示顏色，

其中呈現(xiàn)單元在第一捕捉的圖像中將監(jiān)視目標(biāo)的顏色或監(jiān)視目標(biāo)周圍的顏色改變?yōu)獒槍?duì)監(jiān)視目標(biāo)被確定的指示顏色。

(3)根據(jù)(1)或(2)所述的圖像處理裝置，其中呈現(xiàn)單元隨著監(jiān)視目標(biāo)的指標(biāo)值變得更大來呈現(xiàn)用于更加強(qiáng)調(diào)監(jiān)視目標(biāo)的指示，或者隨著監(jiān)視目標(biāo)的指標(biāo)值變得更小來呈現(xiàn)用于更加強(qiáng)調(diào)監(jiān)視目標(biāo)的指示。

(4)根據(jù)(1)所述的圖像處理裝置，還包括發(fā)散程度計(jì)算單元，該發(fā)散程度計(jì)算單元計(jì)算指標(biāo)值與基準(zhǔn)變化程度之間的發(fā)散程度，

其中呈現(xiàn)單元在第一捕捉的圖像中隨著監(jiān)視目標(biāo)的發(fā)散程度變得更高來呈現(xiàn)用于更加強(qiáng)調(diào)監(jiān)視目標(biāo)的指示，或者隨著監(jiān)視目標(biāo)的發(fā)散程度變得更低來呈現(xiàn)用于更加強(qiáng)調(diào)監(jiān)視目標(biāo)的指示。

(5)根據(jù)(4)所述的圖像處理裝置，還包括第二指示顏色確定單元，該第二指示顏色確定單元針對(duì)監(jiān)視目標(biāo)、基于針對(duì)監(jiān)視目標(biāo)計(jì)算出的發(fā)散程度來確定指示顏色，

其中呈現(xiàn)單元在第一捕捉的圖像中將監(jiān)視目標(biāo)的顏色或監(jiān)視目標(biāo)周圍的顏色改變?yōu)獒槍?duì)監(jiān)視目標(biāo)確定的指示顏色。

(6)根據(jù)(1)至(5)中的任一項(xiàng)所述的圖像處理裝置，

其中指標(biāo)值計(jì)算單元使用計(jì)算出的監(jiān)視目標(biāo)的狀態(tài)的變化程度，在用于計(jì)算的每個(gè)圖像被捕捉的時(shí)間之時(shí)和之后計(jì)算監(jiān)視目標(biāo)的狀態(tài)的變化程度的預(yù)測(cè)值，并且

其中指標(biāo)值計(jì)算單元將預(yù)測(cè)值設(shè)置為指標(biāo)值。

(7)根據(jù)(1)至(6)中的任一項(xiàng)所述的圖像處理裝置，

其中當(dāng)由相機(jī)捕捉的圖像在某一時(shí)間段期間、在用于顯示捕捉的圖像的顯示屏上未被顯示時(shí)，指標(biāo)值計(jì)算單元計(jì)算指示在該時(shí)間段之前呈現(xiàn)的監(jiān)視目標(biāo)的狀態(tài)與在該時(shí)間段之后顯示的監(jiān)視目標(biāo)的狀態(tài)之間的變化程度的指標(biāo)值，并且

其中呈現(xiàn)單元使用在該時(shí)間段之后顯示的捕捉的圖像作為第一捕捉的圖像。

(8)根據(jù)(1)至(7)中的任一項(xiàng)所述的圖像處理裝置，

其中，當(dāng)用于顯示捕捉的圖像的顯示屏的第一部分區(qū)域在某一時(shí)間段期間未被包括在與觀看該顯示屏的用戶的眼睛注視方向或面部方向?qū)?yīng)的屏幕區(qū)域中時(shí)，指標(biāo)值計(jì)算單元計(jì)算指示在該時(shí)間段之前被呈現(xiàn)在第一部分區(qū)域上的監(jiān)視目標(biāo)的狀態(tài)與在該時(shí)間段之后被呈現(xiàn)在第一部分區(qū)域中的監(jiān)視目標(biāo)的狀態(tài)之間的變化程度的指標(biāo)值，并且

其中呈現(xiàn)單元使用在該時(shí)間段之后呈現(xiàn)的捕捉的圖像作為第一捕捉的圖像，在被呈現(xiàn)在第一捕捉的圖像中的第一部分區(qū)域中的區(qū)域上呈現(xiàn)基于針對(duì)第一部分區(qū)域計(jì)算出的指標(biāo)值的指示。

(9)根據(jù)(1)至(8)中的任一項(xiàng)所述的圖像處理裝置，其中指標(biāo)值計(jì)算單元計(jì)算指示監(jiān)視目標(biāo)的位置的變化程度的指標(biāo)值。

(10)根據(jù)(1)至(9)中的任一項(xiàng)所述的圖像處理裝置，其中指標(biāo)值計(jì)算單元計(jì)算指示在圖像中示出監(jiān)視目標(biāo)的頻率的變化程度的指標(biāo)值。

(11)根據(jù)(1)至(10)中的任一項(xiàng)所述的圖像處理裝置，其中指標(biāo)值計(jì)算單元計(jì)算指示被包括在監(jiān)視目標(biāo)中的多個(gè)對(duì)象的擁擠程度的變化程度的指標(biāo)值。

(12)根據(jù)(1)至(11)中的任一項(xiàng)所述的圖像處理裝置，

其中監(jiān)視目標(biāo)包括對(duì)象的隊(duì)列，并且

其中指標(biāo)值計(jì)算單元計(jì)算指示隊(duì)列的長(zhǎng)度或速度的變化程度的指標(biāo)值。

(13)根據(jù)(1)至(12)中的任一項(xiàng)所述的圖像處理裝置，其中指標(biāo)值計(jì)算單元計(jì)算指示被包括在監(jiān)視目標(biāo)中的對(duì)象的數(shù)量的變化程度的指標(biāo)值。

(14)根據(jù)(1)至(13)中的任一項(xiàng)所述的圖像處理裝置，

其中監(jiān)視目標(biāo)包括人，并且

其中指標(biāo)值計(jì)算單元計(jì)算指示監(jiān)視目標(biāo)的不滿意程度的變化程度的指標(biāo)值，作為監(jiān)視目標(biāo)的指標(biāo)值。

(15)根據(jù)(1)至(14)中的任一項(xiàng)所述的圖像處理裝置，

其中監(jiān)視目標(biāo)包括人或地方，并且

其中，指標(biāo)值計(jì)算單元計(jì)算指示監(jiān)視目標(biāo)的風(fēng)險(xiǎn)程度的變化程度的指標(biāo)值，作為監(jiān)視目標(biāo)的指標(biāo)值。

(16)根據(jù)(1)至(15)中的任一項(xiàng)所述的圖像處理裝置，

其中監(jiān)視目標(biāo)包括人或地方，并且

其中指標(biāo)值計(jì)算單元計(jì)算指示監(jiān)視目標(biāo)被監(jiān)視的程度的變化程度的指標(biāo)值，作為監(jiān)視目標(biāo)的指標(biāo)值。

(17)一種監(jiān)視系統(tǒng)，包括：

相機(jī)；

顯示屏；以及

根據(jù)(1)至(16)中的任一項(xiàng)所述的圖像處理裝置，

其中相機(jī)通過在不同時(shí)間執(zhí)行圖像捕捉來生成多個(gè)捕捉的圖像，

其中顯示屏顯示第一捕捉的圖像，呈現(xiàn)單元在第一捕捉的圖像上呈現(xiàn)基于指標(biāo)值的指示。

(18)一種由計(jì)算機(jī)執(zhí)行的圖像處理方法，該方法包括：

使用多個(gè)捕捉的圖像來計(jì)算指標(biāo)值，所述捕捉的圖像由相機(jī)在不同時(shí)間捕捉，該指標(biāo)值指示在捕捉的圖像中監(jiān)視目標(biāo)的狀態(tài)的變化程度；以及

在由相機(jī)捕捉的第一捕捉的圖像上呈現(xiàn)基于指標(biāo)值的指示。

(19)根據(jù)(18)所述的圖像處理方法，還包括針對(duì)監(jiān)視目標(biāo)、基于指標(biāo)值來確定指示顏色，

其中呈現(xiàn)指示的步驟包括在第一捕捉的圖像中將監(jiān)視目標(biāo)的顏色或監(jiān)視目標(biāo)周圍的顏色改變?yōu)獒槍?duì)監(jiān)視目標(biāo)被確定的指示顏色。

(20)根據(jù)(18)或(19)所述的圖像處理方法，其中，呈現(xiàn)指示的步驟包括隨著監(jiān)視目標(biāo)的指標(biāo)值變得更大來呈現(xiàn)用于更加強(qiáng)調(diào)監(jiān)視目標(biāo)的指示，或者隨著監(jiān)視目標(biāo)的指標(biāo)值變得更小來呈現(xiàn)用于更加強(qiáng)調(diào)監(jiān)視目標(biāo)的指示。

(21)根據(jù)(18)所述的圖像處理方法，還包括計(jì)算指標(biāo)值與基準(zhǔn)變化程度之間的發(fā)散程度，

其中呈現(xiàn)指示的步驟包括在第一捕捉的圖像中隨著監(jiān)視目標(biāo)的發(fā)散程度變得更高來呈現(xiàn)用于更加強(qiáng)調(diào)監(jiān)視目標(biāo)的指示，或者隨著監(jiān)視目標(biāo)的發(fā)散程度變得更低來呈現(xiàn)用于更加強(qiáng)調(diào)監(jiān)視目標(biāo)的指示。

(22)根據(jù)(21)所述的圖像處理方法，還包括針對(duì)監(jiān)視目標(biāo)、基于針對(duì)監(jiān)視目標(biāo)計(jì)算出的發(fā)散程度來確定指示顏色，

其中呈現(xiàn)指示的步驟包括在第一捕捉的圖像中將監(jiān)視目標(biāo)的顏色或監(jiān)視目標(biāo)周圍的顏色改變?yōu)獒槍?duì)監(jiān)視目標(biāo)確定的指示顏色。

(23)根據(jù)(18)至(22)中的任一項(xiàng)所述的圖像處理方法，

其中計(jì)算指標(biāo)值的步驟包括計(jì)算在用于計(jì)算的每個(gè)圖像被捕捉的時(shí)間之時(shí)和之后監(jiān)視目標(biāo)的狀態(tài)的變化程度的預(yù)測(cè)值，預(yù)測(cè)值的計(jì)算是使用監(jiān)視目標(biāo)的狀態(tài)的計(jì)算出的變化程度而被執(zhí)行，并且

其中計(jì)算指標(biāo)值的步驟包括將預(yù)測(cè)值設(shè)置為指標(biāo)值。

(24)根據(jù)(18)至(23)中的任一項(xiàng)所述的圖像處理方法，

其中當(dāng)由相機(jī)捕捉的圖像在某一時(shí)間段期間、在用于顯示捕捉的圖像的顯示屏上未被顯示時(shí)，計(jì)算指標(biāo)值的步驟包括計(jì)算指示在該時(shí)間段之前呈現(xiàn)的監(jiān)視目標(biāo)的狀態(tài)與在該時(shí)間段之后顯示的監(jiān)視目標(biāo)的狀態(tài)之間的變化程度的指標(biāo)值，并且

其中呈現(xiàn)指示的步驟包括使用在該時(shí)間段之后顯示的捕捉的圖像作為第一捕捉的圖像。

(25)根據(jù)(18)至(24)中的任一項(xiàng)所述的圖像處理方法，

其中當(dāng)用于顯示捕捉的圖像的顯示屏的第一部分區(qū)域在某一時(shí)間段期間未被包括在與觀看該顯示屏的用戶的眼睛注視方向或面部方向?qū)?yīng)的屏幕區(qū)域中時(shí)，計(jì)算指標(biāo)值的步驟包括計(jì)算指示在該時(shí)間段之前被呈現(xiàn)在第一部分區(qū)域上的監(jiān)視目標(biāo)的狀態(tài)與在該時(shí)間段之后被呈現(xiàn)在第一部分區(qū)域中的監(jiān)視目標(biāo)的狀態(tài)之間的變化程度的指標(biāo)值，并且

其中呈現(xiàn)指示的步驟包括使用在該時(shí)間段之后呈現(xiàn)的捕捉的圖像作為第一捕捉的圖像，在被呈現(xiàn)在第一捕捉的圖像中的第一部分區(qū)域中的區(qū)域上呈現(xiàn)基于針對(duì)第一部分區(qū)域計(jì)算出的指標(biāo)值的指示。

(26)根據(jù)(18)至(25)中的任一項(xiàng)所述的圖像處理方法，其中計(jì)算指標(biāo)值的步驟包括計(jì)算指示監(jiān)視目標(biāo)的位置的變化程度的指標(biāo)值。

(27)根據(jù)(18)至(26)中的任一項(xiàng)所述的圖像處理方法，其中計(jì)算指標(biāo)值的步驟包括計(jì)算指示在圖像中示出監(jiān)視目標(biāo)的頻率的變化程度的指標(biāo)值。

(28)根據(jù)(18)至(27)中的任一項(xiàng)所述的圖像處理方法，其中計(jì)算指標(biāo)值的步驟包括計(jì)算指示被包括在監(jiān)視目標(biāo)中的多個(gè)對(duì)象的擁擠程度的變化程度的指標(biāo)值。

(29)根據(jù)(18)至(28)中的任一項(xiàng)所述的圖像處理方法，

其中監(jiān)視目標(biāo)包括對(duì)象的隊(duì)列，并且

其中計(jì)算指標(biāo)值的步驟包括計(jì)算指示隊(duì)列的長(zhǎng)度或速度的變化程度的指標(biāo)值。

(30)根據(jù)(18)至(29)中的任一項(xiàng)所述的圖像處理方法，其中計(jì)算指標(biāo)值的步驟包括計(jì)算指示被包括在監(jiān)視目標(biāo)中的對(duì)象的數(shù)量的變化程度的指標(biāo)值。

(31)根據(jù)(18)至(30)中的任一項(xiàng)所述的圖像處理方法，

其中監(jiān)視目標(biāo)包括人，并且

其中計(jì)算指標(biāo)值的步驟包括計(jì)算指示監(jiān)視目標(biāo)的不滿意程度的變化程度的指標(biāo)值，作為監(jiān)視目標(biāo)的指標(biāo)值。

(32)根據(jù)(18)至(31)中的任一項(xiàng)所述的圖像處理方法，

其中監(jiān)視目標(biāo)包括人或地方，并且

其中計(jì)算指標(biāo)值的步驟包括計(jì)算指示監(jiān)視目標(biāo)的風(fēng)險(xiǎn)程度的變化程度的指標(biāo)值，作為監(jiān)視目標(biāo)的指標(biāo)值。

(33)根據(jù)(18)至(32)中的任一項(xiàng)所述的圖像處理方法，

其中監(jiān)視目標(biāo)包括人或地方，并且

其中計(jì)算指標(biāo)值的步驟包括計(jì)算指示監(jiān)視目標(biāo)被監(jiān)視的程度的變化程度的指標(biāo)值，作為監(jiān)視目標(biāo)的指標(biāo)值。

(34)一種使計(jì)算機(jī)作為根據(jù)(1)至(16)中的任一項(xiàng)所述的圖像處理裝置進(jìn)行操作的程序。

(35)一種圖像處理裝置，包括：

計(jì)算單元，該計(jì)算單元使用多個(gè)捕捉的圖像來計(jì)算在捕捉的圖像中監(jiān)視目標(biāo)的狀態(tài)的變化程度，所述捕捉的圖像由相機(jī)在不同時(shí)間捕捉；以及

呈現(xiàn)單元，該呈現(xiàn)單元將捕捉的圖像的區(qū)域的顏色改變?yōu)榛谟?jì)算出的變化程度的顏色，所述區(qū)域示出所述監(jiān)視目標(biāo)。

(36)一種圖像處理裝置，包括：

計(jì)算單元，該計(jì)算單元使用多個(gè)捕捉的圖像來計(jì)算在捕捉的圖像中監(jiān)視目標(biāo)的狀態(tài)的變化程度，所述捕捉的圖像是由相機(jī)在不同時(shí)間捕捉；以及

呈現(xiàn)單元，該呈現(xiàn)單元強(qiáng)調(diào)所述捕捉的圖像的區(qū)域，所述區(qū)域示出所述監(jiān)視目標(biāo)。

(37)一種使計(jì)算機(jī)作為根據(jù)(35)所述的圖像處理裝置進(jìn)行操作的程序。

(38)一種圖像處理裝置，包括：

計(jì)算單元，該計(jì)算單元使用多個(gè)捕捉的圖像來計(jì)算在捕捉的圖像中監(jiān)視目標(biāo)的狀態(tài)的變化程度，所述捕捉的圖像由相機(jī)在不同時(shí)間捕捉；以及

呈現(xiàn)單元，該呈現(xiàn)單元基于改變程度來強(qiáng)調(diào)由所述相機(jī)捕捉的所述捕捉的圖像上的所述監(jiān)視目標(biāo)。

(39)一種由計(jì)算機(jī)執(zhí)行的圖像處理方法，該方法包括：

使用多個(gè)捕捉的圖像來計(jì)算在捕捉的圖像中監(jiān)視目標(biāo)的狀態(tài)的變化程度的計(jì)算步驟，所述捕捉的圖像由相機(jī)在不同時(shí)間捕捉；以及

基于改變程度來強(qiáng)調(diào)由所述相機(jī)捕捉的所述捕捉的圖像上的所述監(jiān)視目標(biāo)的呈現(xiàn)步驟。

(40)一種使計(jì)算機(jī)作為根據(jù)(39)所述的圖像處理裝置進(jìn)行操作的程序。

本申請(qǐng)要求于2014年6月30日提交的日本專利申請(qǐng)no.2004-134786的優(yōu)先權(quán)，其全部?jī)?nèi)容并入本文。