臉軌跡單元服務(wù)器轉(zhuǎn)發(fā)過來的前端單元子系統(tǒng)的網(wǎng)絡(luò)攝像機(jī)視頻流后，通過調(diào)用本系統(tǒng)的解碼中間件實(shí)現(xiàn)本系統(tǒng)支持的各類視頻編碼協(xié)議的解碼與渲染顯示。
[0016]進(jìn)一步地，在步驟3中，所述請求視頻實(shí)時流的點(diǎn)播請求采用TCP/IP協(xié)議TCPSocket套接字方式發(fā)起。
[0017]采用上述技術(shù)方案后，本發(fā)明至少具有如下有益效果:本發(fā)明可以在大型專用網(wǎng)絡(luò)或互聯(lián)網(wǎng)環(huán)境下，構(gòu)建分布式人臉軌跡搜索引擎，實(shí)現(xiàn)由眾多的由人臉識別儀和網(wǎng)絡(luò)攝像機(jī)組成的前端單元子系統(tǒng)在前端進(jìn)行流水性人臉抓拍，并提交到分布式的人臉軌跡數(shù)據(jù)單元服務(wù)器集群進(jìn)行特征提取與收錄，然后由后端中心服務(wù)器分布式搜索引擎服務(wù)模塊提供人臉軌跡查詢服務(wù)接口，實(shí)現(xiàn)由提交一張或多張人臉圖片為搜索條件，搜索該人經(jīng)過了系統(tǒng)內(nèi)的哪些攝像機(jī)的軌跡信息，成為“智慧城市”建設(shè)中視頻與生特識別“大數(shù)據(jù)”重要信息資源，為“平安城市”、“天網(wǎng)”、“反恐”、“大情報”等信息工程建設(shè)中圖像偵查應(yīng)用提供有效技術(shù)手段。
【附圖說明】
[0018]圖1為本發(fā)明分布式人臉識別軌跡搜索系統(tǒng)的總體結(jié)構(gòu)示意圖。
[0019]圖2為本發(fā)明分布式人臉識別軌跡搜索系統(tǒng)的前端單元子系統(tǒng)的示意圖。
[0020]圖3為本發(fā)明分布式人臉識別軌跡搜索系統(tǒng)的人臉軌跡數(shù)據(jù)單元服務(wù)器內(nèi)的特征庫存取結(jié)構(gòu)示意圖。
[0021]圖4為本發(fā)明分布式人臉識別軌跡搜索系統(tǒng)的搜索引擎示意圖。
[0022]圖5為本發(fā)明分布式人臉識別軌跡搜索系統(tǒng)的客戶端發(fā)起查詢請求到獲得結(jié)果的UML序列圖。
【具體實(shí)施方式】
[0023]需要說明的是，在不沖突的情況下，本申請中的實(shí)施例及實(shí)施例中的特征可以相互結(jié)合，下面結(jié)合附圖和具體實(shí)施例對本發(fā)明作進(jìn)一步詳細(xì)說明。
[0024]如圖1至圖5所示，本發(fā)明提供一種分布式人臉識別軌跡搜索系統(tǒng)，包括前端單元子系統(tǒng)1、人臉軌跡數(shù)據(jù)單元服務(wù)器集群2、中心服務(wù)器3以及客戶端4，其中，所述人臉軌跡數(shù)據(jù)單元服務(wù)器集群2是由多臺人臉軌跡數(shù)據(jù)單元服務(wù)器20集合而成。
[0025]圖1闡述了本發(fā)明分布式人臉識別軌跡搜索系統(tǒng)的總體架構(gòu)和部署方式，可劃分為四層結(jié)構(gòu):即前端單元子系統(tǒng)1為終端采集層；人臉軌跡數(shù)據(jù)單元服務(wù)器集群2代表人臉軌跡特征大數(shù)據(jù)資源層；中心服務(wù)器3代表中心搜索引擎與服務(wù)層；客戶端4代表應(yīng)用層。
[0026]所述前端單元子系統(tǒng)1用于采集人臉特征，通常會設(shè)置多套所述前端單元子系統(tǒng)1，并分散布置于各地，例如:城市各街道、交通路口、主要公共場所、寫字樓等場合。所述前端單元子系統(tǒng)1具體包括網(wǎng)絡(luò)攝像機(jī)10和人臉識別儀12，人臉識別儀12平時全天候與網(wǎng)絡(luò)攝像機(jī)10建立連接，并獲取視頻流和解碼及人臉探測等工作，并與上級人臉軌跡數(shù)據(jù)單元服務(wù)器20建立終端通訊會話通道并主動注冊至人臉軌跡數(shù)據(jù)單元服務(wù)器20。從而，所述前端單元子系統(tǒng)1可通過網(wǎng)絡(luò)攝像機(jī)10攝取人臉圖像再經(jīng)人臉識別儀12進(jìn)行識別處理，并將識別處理后的人臉數(shù)據(jù)通過互聯(lián)網(wǎng)或者專網(wǎng)上傳給人臉軌跡數(shù)據(jù)單元服務(wù)器集群2。為提升人臉識別儀12對網(wǎng)絡(luò)攝像機(jī)10的兼容性，可在人臉識別儀12內(nèi)部內(nèi)置有各主要視頻源接入組件，例如:0NVIF接入組件、海康私有協(xié)議組件、大華私有協(xié)議組件、雄邁私有協(xié)議組件、海芯威視私有協(xié)議組件、天視通私有協(xié)議組件，從而，人臉識別儀12可以配套使用的網(wǎng)絡(luò)攝像機(jī)10可以是支持符合0NVIF規(guī)范協(xié)議的產(chǎn)品，也還可以采用其他廠家的接入?yún)f(xié)議組件的產(chǎn)品。所述人臉識別儀12可采用X86架構(gòu)的高性能低功耗的處理器，還可配置存儲裝置，例如:固態(tài)SSD硬盤，以提供存儲錄像功能，可便于在需要取證時調(diào)閱人臉抓拍時的相關(guān)錄像。
[0027]圖2示出了人臉識別儀12的主要工作功能特征，其工作步驟如下:
步驟1:人臉識別儀12采用組件化模式連接網(wǎng)絡(luò)攝像機(jī)10，視頻源組件化采用面向?qū)ο蟮膶?shí)現(xiàn)方法，通過建立基礎(chǔ)父類，設(shè)置連接、斷開、視頻流回調(diào)事件等幾個常用虛函數(shù)，實(shí)例類組件對象繼承基礎(chǔ)父類，重載實(shí)現(xiàn)父類的相關(guān)虛函數(shù)方法，實(shí)現(xiàn)具有面向?qū)ο蟮亩鄳B(tài)性的插件式中間件組件特性；
步驟2:通過插件式接入組件獲得視頻流回調(diào)后，取得H264或H265標(biāo)準(zhǔn)視頻流，同樣實(shí)現(xiàn)具有多態(tài)性的解碼組件，實(shí)現(xiàn)0NVIF接入組件回調(diào)的標(biāo)準(zhǔn)視頻流或由私有協(xié)議接入組件回調(diào)的廠家私有視頻流解碼輸出，最終解碼輸出格式為RGB24原始位圖圖像流；
步驟3:取得RGB24原始位圖圖像流后，采用Open CV開源庫編譯的人臉檢測庫進(jìn)行人臉抓拍，Open CV是基于開源發(fā)行的跨平臺計算機(jī)視覺庫，具有輕量級且高效的特點(diǎn)，實(shí)現(xiàn)了圖像處理和計算機(jī)視覺方面的很多通用算法，本發(fā)明采用Open CV提供的Haar分類器和基于LBP特征的人臉檢測器用于人臉探測，連續(xù)幀之間實(shí)現(xiàn)了人臉跟蹤方法，以便丟棄一些冗余的人臉圖片，合理提取捕獲的更有效的人臉圖片；
步驟4:提取到人臉圖片后，將圖片輸入到人臉識別儀12的注冊通訊部件，上傳到人臉軌跡數(shù)據(jù)單元服務(wù)器集群2中進(jìn)行人臉圖像及特征收錄。
[0028]所述人臉軌跡數(shù)據(jù)單元服務(wù)器集群2包括有多臺并行運(yùn)算的人臉軌跡數(shù)據(jù)單元服務(wù)器20，如圖1所示，為N臺人臉軌跡數(shù)據(jù)單元服務(wù)器分別依序編號為1、2.......N以示區(qū)別。所述人臉軌跡數(shù)據(jù)單元服務(wù)器20負(fù)責(zé)接受前端單元子系統(tǒng)注冊連接、人臉上報、特征收錄、流媒體轉(zhuǎn)發(fā)服務(wù)。每臺人臉軌跡數(shù)據(jù)單元服務(wù)器20內(nèi)置有人臉特征數(shù)據(jù)庫。在具體實(shí)施時，如果要支持快速搜索，人臉特征數(shù)據(jù)庫容量必須有所限制，而為支持快速對比搜索，又需使特征庫容量達(dá)到實(shí)用大小，為此，本發(fā)明對人臉軌跡數(shù)據(jù)單元服務(wù)器20的人臉特征數(shù)據(jù)庫采用了多子庫并行運(yùn)算模式，從而實(shí)現(xiàn)每臺人臉軌跡數(shù)據(jù)單元服務(wù)器20內(nèi)人臉特征數(shù)據(jù)庫容量的上百倍的增加。優(yōu)選地，每臺人臉軌跡數(shù)據(jù)單元服務(wù)器20的人臉特征數(shù)據(jù)庫建立100個子庫，每個子庫存放20000張人臉，從而使本發(fā)明的人臉特征數(shù)據(jù)庫既具備了高速訪問特性又具備了百萬級大容量特性，而再通過部署眾多的人臉軌跡數(shù)據(jù)單元服務(wù)器20，即可形成具有實(shí)戰(zhàn)價值的人臉特征軌跡“大數(shù)據(jù)”，配合中心服務(wù)器3提供的中心搜索引擎服務(wù)即可提供給用戶進(jìn)行“以圖搜圖”方式的人臉軌跡快速查詢應(yīng)用。人臉軌跡數(shù)據(jù)單元服務(wù)器20還內(nèi)置有聚合及排序器22以便對搜索出來的人臉特征數(shù)據(jù)進(jìn)行聚合和排序。
[0029]人臉軌跡數(shù)據(jù)單元服務(wù)器20中的人臉特征數(shù)據(jù)庫的各子庫優(yōu)選采用SQlite數(shù)據(jù)庫，SQLite是一款輕型的數(shù)據(jù)庫，是遵守ACID的關(guān)系型數(shù)據(jù)庫管理系統(tǒng)，其包含在一個相對小的C庫中，相比于MysqUPostgreSQL這兩款開源的數(shù)據(jù)庫管理系統(tǒng)，SQlite數(shù)據(jù)庫處理速度更快，適合用于進(jìn)行快速的人臉匹配運(yùn)算應(yīng)用。
[0030]所述中心服務(wù)器3內(nèi)部建立搜索引擎服務(wù)模塊及接口，搜索引擎服務(wù)模塊主要包含搜索引擎池和聚合排序器32。搜索引