本實(shí)用新型涉及監(jiān)控系統(tǒng)技術(shù)領(lǐng)域，具體為一種基于大數(shù)據(jù)架構(gòu)的人臉識別監(jiān)控系統(tǒng)。

背景技術(shù)：

當(dāng)談及分布式處理時，我們往往會把它與并行處理加以區(qū)分。并行處理是通過多個功能部件或多個處理機(jī)同時工作的方式，來提高系統(tǒng)性能和可靠性。而分布式處理是指將不同地點(diǎn)或具有不同功能或擁有不同數(shù)據(jù)的多臺服務(wù)器通過通信網(wǎng)絡(luò)連接起來，在控制系統(tǒng)的統(tǒng)一調(diào)度下，完成大規(guī)模信息處理任務(wù)。每臺服務(wù)器作為一個節(jié)點(diǎn)獨(dú)立運(yùn)行，因此某個節(jié)點(diǎn)的故障不會影響系統(tǒng)的整體運(yùn)行。大數(shù)據(jù)解決方案即是基于分布式的架構(gòu)，它的相關(guān)技術(shù)涵蓋了數(shù)據(jù)采集、傳輸、存儲、處理、應(yīng)用等各個環(huán)節(jié)。并且具有可存儲巨大量信息、可快速分析處理多類型數(shù)據(jù)兩大特點(diǎn)。目前大數(shù)據(jù)解決架構(gòu)已經(jīng)被應(yīng)用到多個領(lǐng)域和機(jī)構(gòu)，實(shí)際應(yīng)用效用較高。

視頻監(jiān)控領(lǐng)域便是其中一個，通過多方面的研究和實(shí)踐，基于大數(shù)據(jù)架構(gòu)的智能監(jiān)控系統(tǒng)更符合市場需求，也是未來監(jiān)控系統(tǒng)發(fā)展的一大趨勢。首先，方案解決了視頻監(jiān)控數(shù)據(jù)快速增長而帶來的難以存儲和很難統(tǒng)一管理的問題。其次，它具有的更強(qiáng)的數(shù)據(jù)處理和分析能力，使系統(tǒng)盡管加入了運(yùn)算量巨大的智能分析技術(shù)也不會大幅降低其實(shí)時性。由此，視頻監(jiān)控正式進(jìn)入大數(shù)據(jù)時代。

在大數(shù)據(jù)時代下，將人臉識別技術(shù)加入監(jiān)控系統(tǒng)中的方案其實(shí)早有出現(xiàn)。然而很少能真正應(yīng)用到實(shí)踐中，一方面礙于人臉識別算法本身局限性，在應(yīng)用場景條件相對較差的情況下，很難收集到準(zhǔn)確的人臉信息，導(dǎo)致人臉識別的成功率會大幅下降；另一方面，在場景比較復(fù)雜，場景內(nèi)人數(shù)較多時，會出現(xiàn)錯漏識別的情況。造成目前人臉識別技術(shù)更多地只能運(yùn)用在單個人臉的識別場景中，如支付寶中的人臉支付。為此，我們提出一種基于大數(shù)據(jù)架構(gòu)的人臉識別監(jiān)控系統(tǒng)。

技術(shù)實(shí)現(xiàn)要素：

本實(shí)用新型的目的在于提供一種基于大數(shù)據(jù)架構(gòu)的人臉識別監(jiān)控系統(tǒng)，以解決上述背景技術(shù)中提出的問題。

為實(shí)現(xiàn)上述目的，本實(shí)用新型提供如下技術(shù)方案：

一種基于大數(shù)據(jù)架構(gòu)的人臉識別監(jiān)控系統(tǒng)，包括若干數(shù)據(jù)采集系統(tǒng)，所述數(shù)據(jù)采集系統(tǒng)分別電性連接有網(wǎng)絡(luò)攝像頭管理系統(tǒng)和不同類型的攝像頭，所述網(wǎng)絡(luò)攝像頭管理系統(tǒng)分別電性連接有數(shù)據(jù)消息系統(tǒng)和存儲系統(tǒng)，所述數(shù)據(jù)消息系統(tǒng)電性連接有數(shù)據(jù)處理系統(tǒng)，所述數(shù)據(jù)處理系統(tǒng)分別電性連接有存儲系統(tǒng)和管理系統(tǒng)客戶端。

優(yōu)選的，所述數(shù)據(jù)采集系統(tǒng)包括FFmpeg、警報裝置、管理系統(tǒng)、數(shù)據(jù)庫和一些便捷的API，所述FFmpeg通過API電性連接管理系統(tǒng)，所述管理系統(tǒng)分別電性連接警報裝置、數(shù)據(jù)庫和網(wǎng)絡(luò)攝像頭管理系統(tǒng)。

優(yōu)選的，所述數(shù)據(jù)消息系統(tǒng)為Kafka消息系統(tǒng)。

優(yōu)選的，所述數(shù)據(jù)處理系統(tǒng)為Spark實(shí)時數(shù)據(jù)處理平臺。

優(yōu)選的，所述存儲系統(tǒng)由Hive和HBase組成，所述HBase進(jìn)行短期的元數(shù)據(jù)存儲，所述Hive進(jìn)行長期的元數(shù)據(jù)存儲。

優(yōu)選的，所述網(wǎng)絡(luò)攝像頭管理系統(tǒng)電性連接有HDFS。

與現(xiàn)有技術(shù)相比，本實(shí)用新型的有益效果是：本實(shí)用新型具有識別速度快，精度高的特點(diǎn)。

系統(tǒng)引用FFmpeg這一套開源計算機(jī)工具，該組件可以完成視頻采集、視頻編解碼、視頻格式轉(zhuǎn)換、視頻截圖、視頻標(biāo)準(zhǔn)化等任務(wù)。在本系統(tǒng)的源數(shù)據(jù)支持結(jié)構(gòu)中，它發(fā)揮著統(tǒng)一圖像規(guī)格、色彩標(biāo)準(zhǔn)化、視頻解碼、視頻標(biāo)準(zhǔn)化的作用。一方面它可以對IP Camera獲得的實(shí)時數(shù)據(jù)進(jìn)行編解碼等工作，另一方面它也可以拉取NVR的歷史數(shù)據(jù)進(jìn)行標(biāo)準(zhǔn)化，保證實(shí)時產(chǎn)生的數(shù)據(jù)和歷史數(shù)據(jù)的不丟失。

系統(tǒng)引入Kafka消息系統(tǒng)進(jìn)行數(shù)據(jù)緩存，Kafka是一種高吞吐量的分布式發(fā)布訂閱消息系統(tǒng)，具有良好的容錯能力。它將數(shù)據(jù)流進(jìn)行平峰，保障系統(tǒng)的持續(xù)可用性，并且緩存機(jī)制保證了傳輸過來的數(shù)據(jù)每一幀都不會丟失，確保數(shù)據(jù)完整無誤。

系統(tǒng)采用Spark實(shí)時數(shù)據(jù)處理平臺，能夠快速實(shí)現(xiàn)應(yīng)用，有更簡潔的代碼，安裝部署也無需復(fù)雜的配置，減輕系統(tǒng)的開發(fā)壓力。

系統(tǒng)分別使用Hive和HBase進(jìn)行存儲，Hive本身支持HBase文件，所以轉(zhuǎn)存時不用做任何修改。相較于以往的監(jiān)控系統(tǒng)存儲，Hive集群的搭建更為廉價，同時它支持索引，將元數(shù)據(jù)保存在關(guān)系數(shù)據(jù)庫中，對于壓縮數(shù)據(jù)的讀取更加便捷快速。

設(shè)置有HDFS，HDFS能提供高吞吐量的數(shù)據(jù)訪問，并且HDFS有著高容錯性的特點(diǎn)。

附圖說明

圖1為本實(shí)用新型結(jié)構(gòu)示意圖；

圖2為本實(shí)用新型數(shù)據(jù)采集系統(tǒng)結(jié)構(gòu)示意圖；

圖3為本實(shí)用新型數(shù)據(jù)消息系統(tǒng)工作示意圖；

圖4為本實(shí)用新型數(shù)據(jù)處理系統(tǒng)工作示意圖。

具體實(shí)施方式

下面將結(jié)合本實(shí)用新型實(shí)施例中的附圖，對本實(shí)用新型實(shí)施例中的技術(shù)方案進(jìn)行清楚、完整地描述，顯然，所描述的實(shí)施例僅僅是本實(shí)用新型一部分實(shí)施例，而不是全部的實(shí)施例?；诒緦?shí)用新型中的實(shí)施例，本領(lǐng)域普通技術(shù)人員在沒有做出創(chuàng)造性勞動前提下所獲得的所有其他實(shí)施例，都屬于本實(shí)用新型保護(hù)的范圍。

請參閱圖1-4，本實(shí)用新型提供一種技術(shù)方案：

一種基于大數(shù)據(jù)架構(gòu)的人臉識別監(jiān)控系統(tǒng)，包括若干數(shù)據(jù)采集系統(tǒng)，所述數(shù)據(jù)采集系統(tǒng)分別電性連接有網(wǎng)絡(luò)攝像頭管理系統(tǒng)和不同類型的攝像頭，網(wǎng)絡(luò)攝像頭管理系統(tǒng)電性連接有HDFS，所述網(wǎng)絡(luò)攝像頭管理系統(tǒng)分別電性連接有數(shù)據(jù)消息系統(tǒng)和存儲系統(tǒng)，存儲系統(tǒng)由Hive和HBase組成，所述HBase進(jìn)行短期的元數(shù)據(jù)存儲，所述Hive進(jìn)行長期的元數(shù)據(jù)存儲，數(shù)據(jù)消息系統(tǒng)為Kafka消息系統(tǒng)，所述數(shù)據(jù)消息系統(tǒng)電性連接有數(shù)據(jù)處理系統(tǒng)，數(shù)據(jù)處理系統(tǒng)為Spark實(shí)時數(shù)據(jù)處理平臺，所述數(shù)據(jù)處理系統(tǒng)分別電性連接有存儲系統(tǒng)和管理系統(tǒng)客戶端，所述數(shù)據(jù)采集系統(tǒng)包括FFmpeg、警報裝置、管理系統(tǒng)、數(shù)據(jù)庫和一些便捷的API，所述FFmpeg通過API電性連接管理系統(tǒng)，所述管理系統(tǒng)分別電性連接警報裝置、數(shù)據(jù)庫和網(wǎng)絡(luò)攝像頭管理系統(tǒng)。本實(shí)用新型具有識別速度快，精度高的特點(diǎn)。

系統(tǒng)引用FFmpeg這一套開源計算機(jī)工具，該組件可以完成視頻采集、視頻編解碼、視頻格式轉(zhuǎn)換、視頻截圖、視頻標(biāo)準(zhǔn)化等任務(wù)。在本系統(tǒng)的源數(shù)據(jù)支持結(jié)構(gòu)中，它發(fā)揮著統(tǒng)一圖像規(guī)格、色彩標(biāo)準(zhǔn)化、視頻解碼、視頻標(biāo)準(zhǔn)化的作用。一方面它可以對IP Camera獲得的實(shí)時數(shù)據(jù)進(jìn)行編解碼等工作，另一方面它也可以拉取NVR的歷史數(shù)據(jù)進(jìn)行標(biāo)準(zhǔn)化，保證實(shí)時產(chǎn)生的數(shù)據(jù)和歷史數(shù)據(jù)的不丟失。

系統(tǒng)引入Kafka消息系統(tǒng)進(jìn)行數(shù)據(jù)緩存，Kafka是一種高吞吐量的分布式發(fā)布訂閱消息系統(tǒng)，具有良好的容錯能力。它將數(shù)據(jù)流進(jìn)行平峰，保障系統(tǒng)的持續(xù)可用性，并且緩存機(jī)制保證了傳輸過來的數(shù)據(jù)每一幀都不會丟失，確保數(shù)據(jù)完整無誤。

系統(tǒng)采用Spark實(shí)時數(shù)據(jù)處理平臺，能夠快速實(shí)現(xiàn)應(yīng)用，有更簡潔的代碼，安裝部署也無需復(fù)雜的配置，減輕系統(tǒng)的開發(fā)壓力。

系統(tǒng)分別使用Hive和HBase進(jìn)行存儲，Hive本身支持HBase文件，所以轉(zhuǎn)存時不用做任何修改。相較于以往的監(jiān)控系統(tǒng)存儲，Hive集群的搭建更為廉價，同時它支持索引，將元數(shù)據(jù)保存在關(guān)系數(shù)據(jù)庫中，對于壓縮數(shù)據(jù)的讀取更加便捷快速。

設(shè)置有HDFS，HDFS能提供高吞吐量的數(shù)據(jù)訪問，并且HDFS有著高容錯性的特點(diǎn)。

盡管已經(jīng)示出和描述了本實(shí)用新型的實(shí)施例，對于本領(lǐng)域的普通技術(shù)人員而言，可以理解在不脫離本實(shí)用新型的原理和精神的情況下可以對這些實(shí)施例進(jìn)行多種變化、修改、替換和變型，本實(shí)用新型的范圍由所附權(quán)利要求及其等同物限定。