影像監(jiān)視系統(tǒng)、監(jiān)視裝置的制造方法
【技術(shù)領(lǐng)域】
[0001]本發(fā)明涉及一種使用影像來對監(jiān)視對象進行監(jiān)視的技術(shù)。
【背景技術(shù)】
[0002]近年來，兇惡犯罪增加而安全性的意識提高。隨之，在店鋪、機場等人員聚集的場所設(shè)置有大量的監(jiān)視攝像機。通過這些監(jiān)視攝像機拍攝的影像信息被保存在監(jiān)視記錄器等儲存裝置中并根據(jù)需要進行瀏覽。
[0003]在下述專利文獻1中記載了使用多個監(jiān)視攝像機的監(jiān)視系統(tǒng)。在該文獻中，提取監(jiān)視對象的運動信息，將所提取的運動信息在多個攝像機之間進行比較，得到監(jiān)視對象的
?目息。
[0004]現(xiàn)有技術(shù)文獻
[0005]專利文獻
[0006]專利文獻1:日本特開2011-193187號公報
[0007]非專利文獻
[0008]非專利文獻1:Michalis Rapt is and Stefano Soatto, “Tracklet Descriptorsfor Act1n Modeling and Video Analysis”，In Proceedings of the EuropeanConference on Computer Vis1n, September 2010.
[0009]非專利文獻2:S.Baker and 1.Matthews “Lucas-kande 20years on:A unifyingframework，，，Internat1nal Journal of Computer Vis1n, vol.53，n0.3，2004.。

【發(fā)明內(nèi)容】

[0010]發(fā)明要解決的問題
[0011 ] 在具備多個監(jiān)視攝像機的監(jiān)視系統(tǒng)中，在將由多個監(jiān)視攝像機得到的運動信息在攝像機之間進行比較的情況下，需要考慮各攝像機的設(shè)置條件的差異。例如，在構(gòu)建從多個監(jiān)視攝像機提取運動信息并尋找進行著相同的運動的人員的系統(tǒng)的情況下，如果多個攝像機以相同的條件被設(shè)置，則能夠通過上述非專利文獻1等的方式來實現(xiàn)。但是，在各攝像機的設(shè)置條件不同，例如相對于地面水平地設(shè)置的攝像機與朝向地面設(shè)置的攝像機等混合存在的情況下，由各攝像機拍攝對象的方式不同，因此即使進行相同的運動也成為不同的運動信息，難以進行攝像機間的運動信息的比較。
[0012]針對該問題，在上述專利文獻1中，將從某攝像機得到的運動信息變換為比較對象的攝像機的坐標系之后進行比較。但是，在該方式中，由于將位置信息變換為比較對象攝像機的坐標位置后進行比較，因此如果進行比較的攝像機的視野無重疊，則無法進行比較。
[0013]本發(fā)明是為了解決如上所述的問題而完成的，其目的在于提供一種即使在攝像機的設(shè)置條件不同的情況下也能夠?qū)亩鄠€監(jiān)視攝像機得到的運動信息進行比較的影像監(jiān)視技術(shù)。
[0014]用于解決問題的方案
[0015]本發(fā)明所涉及的影像監(jiān)視系統(tǒng)的特征在于，具有:提取部，接收來自多個攝像機的影像，從構(gòu)成影像的多個幀提取運動特征量；存儲部，儲存來自提取部的提取結(jié)果；變換部，對所提取的運動特征量進行變換；以及分析部，對變換后的運動特征量進行分析，變換部保持與多個攝像機的坐標軸不同的虛擬坐標軸，通過計算虛擬坐標軸系中的虛擬視點來對特征量進行變換。
[0016]發(fā)明效果
[0017]根據(jù)本發(fā)明所涉及的影像監(jiān)視裝置，能夠?qū)脑O(shè)置條件不同的多個監(jiān)視攝像機得到的監(jiān)視對象的運動信息適當?shù)剡M行分析。
【附圖說明】
[0018]圖1是實施例1所涉及的監(jiān)視系統(tǒng)的示意圖。
[0019]圖2是實施例1所涉及的監(jiān)視系統(tǒng)所具備的影像監(jiān)視裝置200的功能框圖。
[0020]圖3是表示虛擬視點生成部203和變換方法決定部204的結(jié)構(gòu)例的功能框圖。
[0021]圖4是表示虛擬視點生成部203的處理例的圖。
[0022]圖5是表示特征量變換部207的結(jié)構(gòu)例的功能框圖。
[0023]圖6是虛擬視點生成部203的處理流程圖。
[0024]圖7是特征量變換部207的處理流程圖。
[0025]圖8是表示實施例1所涉及的影像監(jiān)視裝置的結(jié)構(gòu)例的圖。
[0026]圖9是表示實施例1所涉及的監(jiān)視系統(tǒng)的結(jié)構(gòu)例的圖。
[0027]圖10是表示虛擬設(shè)置狀態(tài)信息設(shè)定客戶端907的一例的圖。
[0028]圖11是實施例2所涉及的影像監(jiān)視裝置200的功能框圖。
[0029]圖12是表示實施例3所涉及的影像監(jiān)視裝置的結(jié)構(gòu)例的圖。
[0030]圖13是表示實施例4所涉及的虛擬視點生成部203的處理例的圖。
【具體實施方式】
[0031]實施例1
[0032]圖1是本發(fā)明的實施例1所涉及的監(jiān)視系統(tǒng)的示意圖。在圖1中，由多個監(jiān)視攝像機(102、103)對位于監(jiān)視區(qū)域內(nèi)的監(jiān)視對象101進行監(jiān)視。
[0033]通過圖像處理在從各監(jiān)視攝像機得到的影像中提取監(jiān)視對象的運動特征量(104、105)。運動特征量是能夠表現(xiàn)對象的運動量的特征量。例如，使用將在某固定時間內(nèi)監(jiān)視對象在畫面內(nèi)移動的坐標的移動量排列而成的運動矢量等。另外，在對象的移動量的計算中使用如非專利文獻2所記載的那樣的方法等即可。
[0034]從各攝像機得到的運動特征量(104、105)由于攝像機的設(shè)置狀態(tài)不同而難以進行比較。在此，攝像機的設(shè)置狀態(tài)例如是攝像機相對于地面的設(shè)置高度、相對于地面的設(shè)置角度、攝像機的朝向(視線的方位)、攝像機的視角、攝像機的焦距等。因此，提供在監(jiān)視系統(tǒng)整體上統(tǒng)一的虛擬設(shè)置狀態(tài)106，對各攝像機設(shè)定攝像機的設(shè)置狀態(tài)與虛擬設(shè)置狀態(tài)106的攝像機的設(shè)置狀態(tài)一致的虛擬視點(107、108)。按照所設(shè)定的各虛擬視點，分別決定從各攝像機的圖像坐標系向各虛擬視點的坐標系的變換方法。按照該變換方法，對運動特征量(104、105)進行變換，得到變換后的運動特征量(109、110)。坐標系的變換方法例如使用通過使用旋轉(zhuǎn)矩陣的坐標變換對運動矢量的坐標位置進行變換的方法等即可。變換后的運動特征量(109、110)是所有攝像機為相同的設(shè)置狀態(tài)的運動特征量，因此比較變得容易。將得到的運動特征量(109、110)保存到數(shù)據(jù)庫111等中來用于分析。
[0035]圖2是本實施例1所涉及的監(jiān)視系統(tǒng)所具備的影像監(jiān)視裝置200的功能框圖。影像監(jiān)視裝置200具備虛擬視點生成部203、變換方法決定部204、運動特征量提取部206、特征量變換部207、特征量分析部208、分析結(jié)果提示部209。
[0036]虛擬視點生成部203接收預先提供的虛擬設(shè)置狀態(tài)信息201和多臺監(jiān)視攝像機設(shè)置信息。在虛擬視點生成部203中，基于接收到的虛擬設(shè)置狀態(tài)信息201和多臺監(jiān)視攝像機設(shè)置信息，來生成針對各監(jiān)視攝像機的虛擬視點信息210。所生成的虛擬視點信息210被輸入到變換方法決定部204。在變換方法決定部204中，基于被輸入的虛擬視點信息210來決定特征量的變換方法。所決定的變換方法211被輸入到特征量變換部207。
[0037]運動特征量提取部206接收多臺監(jiān)視攝像機的影像205。在運動特征量提取部206中，對接收到的來自監(jiān)視攝像機的影像205進行圖像處理，提取監(jiān)視對象的運動特征量。在運動特征量的提取中使用非專利文獻2的方法等即可。運動特征量由提取了特征量的圖像上的位置信息和表示運動的特征量構(gòu)成。作為表示運動的特征量，例如有將圖像坐標上的移動量(二維矢量)在時間方向上排列而成的特征量等。所提取的運動特征量被輸入到特征量變換部207。特征量變換部208接收運動特征量和特征量的變換方法211，按照特征量的變換方法，對運動特征量進行變換。變換后的運動特征量被輸入到特征量分析部208。
[0038]在特征量分析部208中對變換后的運動特征量進行分析。分析得到的結(jié)果被輸入到分析結(jié)果提示部209。在分析結(jié)果提示部209中，將分析結(jié)果變換為能夠提示給監(jiān)視者的狀態(tài)并進行提示。作為特征量分析部208的例子，例如可考慮從過去的運動特征量中找出進行著同樣的運動的對象并按