本發(fā)明涉及視頻管理
技術(shù)領(lǐng)域:
,特別是涉及一種視頻特征結(jié)構(gòu)化管理方法。
背景技術(shù):
:目前視頻分析管理主要針對固定式視頻,視頻來源包括卡口監(jiān)控、交通監(jiān)控、安防固定攝像頭等,針對執(zhí)法記錄儀視頻分析管理應(yīng)用基本空白。國家發(fā)文指出,2017年底前,所有執(zhí)法人員需配備執(zhí)法記錄儀。執(zhí)法記錄儀的廣泛使用,將產(chǎn)生大量視頻數(shù)據(jù)。同時,由于執(zhí)法記錄儀視頻是移動監(jiān)控視頻錄像,在采集后統(tǒng)一存儲,如何對海量視頻內(nèi)容進(jìn)行分析管理,提取其中特征數(shù)據(jù)進(jìn)行進(jìn)一步處理,是一個艱巨的任務(wù)。針對執(zhí)法記錄儀視頻管理的特點(diǎn),面向公安系統(tǒng)視頻管理平臺,采用專有技術(shù),設(shè)計專有算法,發(fā)明執(zhí)法記錄儀視頻分析管理系統(tǒng),實(shí)現(xiàn)對大量移動視頻高效、快速、準(zhǔn)確的分析挖掘,輸出結(jié)構(gòu)化數(shù)據(jù)并與現(xiàn)有平臺連接,提供高質(zhì)有效的管理應(yīng)用手段。現(xiàn)有警用執(zhí)法記錄儀視頻管理還是基于人員、地點(diǎn)、日期、等特征(或車、人、案件號等特征)為主要依據(jù),將視頻歸類管理。同時根據(jù)這些屬性進(jìn)行存儲、檢索。現(xiàn)有技術(shù)只對視頻文件進(jìn)行歸檔管理,并未針對視頻的內(nèi)容進(jìn)行分析管理。當(dāng)前技術(shù)無法獲取視頻內(nèi)容特征并根據(jù)視頻內(nèi)容特征加以利用和管理。技術(shù)實(shí)現(xiàn)要素:為了解決如何實(shí)現(xiàn)對視頻特征結(jié)構(gòu)化管理的技術(shù)問題,本發(fā)明提出一種視頻特征結(jié)構(gòu)化管理方法。本發(fā)明的技術(shù)問題通過以下的技術(shù)方案予以解決:一種視頻特征結(jié)構(gòu)化管理方法,包括以下步驟:s1:視頻分析服務(wù)器獲取視頻,分析所述視頻的特征,所述特征包括車牌特征、人臉特征、車輛特征、人體特征、車輛行為特征、人行為特征中的一種或多種;s2:將步驟s1中所述特征與所述視頻關(guān)聯(lián),構(gòu)成視頻結(jié)構(gòu)化數(shù)據(jù);s3:將步驟s2中所述視頻結(jié)構(gòu)化數(shù)據(jù)存儲到所述視頻分析服務(wù)器的內(nèi)部數(shù)據(jù)庫供請求端使用。優(yōu)選地,還包括步驟s4:所述視頻分析服務(wù)器接收到來自所述請求端的特征檢索、特征監(jiān)控或插入視頻請求。進(jìn)一步地,在步驟s4之后還包括:所述視頻分析服務(wù)器發(fā)送所述視頻結(jié)構(gòu)化數(shù)據(jù)至所述請求端。更進(jìn)一步地,所述請求的形式包括文字請求或圖片請求。優(yōu)選地,在步驟s2中所述視頻結(jié)構(gòu)化數(shù)據(jù)包括特征值、特征坐標(biāo)、特征區(qū)域截圖、視頻幀截圖、視頻幀號、時間戳、視頻文件、視頻源中的一種或多種。優(yōu)選地,在步驟s1中對所述特征的處理包括特征檢測、特征提取和特征比較。優(yōu)選地,通過圖像檢測算法進(jìn)行所述特征檢測;和/或通過圖像特征提取算法進(jìn)行所述特征提取。優(yōu)選地,還包括對步驟s1中所述特征的區(qū)域進(jìn)行打馬賽克、失焦或圈定處理。本發(fā)明還提出一種采用視頻特征結(jié)構(gòu)化管理方法的裝置,包括:處理器和存儲器,所述存儲器存儲有計算機(jī)程序,所述處理器運(yùn)行所述存儲器中的計算機(jī)程序使所述裝置執(zhí)行上述任一所述的視頻特征結(jié)構(gòu)化管理方法。同時,本發(fā)明還提出一種計算機(jī)可讀存儲介質(zhì),其上存儲有計算機(jī)程序,該程序被處理器執(zhí)行時實(shí)現(xiàn)上述任一所述方法的步驟。本發(fā)明與現(xiàn)有技術(shù)對比的有益效果包括:視頻分析服務(wù)器獲取視頻,分析所述視頻的特征,所述特征包括車牌特征、人臉特征、車輛特征、人體特征、車輛行為特征、人行為特征中的一種或多種;特征與所述視頻建立關(guān)聯(lián),構(gòu)成視頻結(jié)構(gòu)化數(shù)據(jù),并保存在內(nèi)部數(shù)據(jù)庫供請求端使用,在請求端發(fā)起請求時,只要輸入任一特征的特征值就可以獲取與該特征相關(guān)的視頻結(jié)構(gòu)化數(shù)據(jù),實(shí)現(xiàn)了對視頻特征的結(jié)構(gòu)化管理。附圖說明圖1是本發(fā)明具體實(shí)施方式中視頻特征結(jié)構(gòu)化管理方法流程圖。圖2是本發(fā)明具體實(shí)施方式中視頻特征結(jié)構(gòu)管理系統(tǒng)結(jié)構(gòu)示意圖。圖3是本發(fā)明具體實(shí)施方式中視頻存儲服務(wù)器存儲文件示意圖。圖4是本發(fā)明具體實(shí)施方式中視頻特征結(jié)構(gòu)管理系統(tǒng)運(yùn)行流程示意圖。圖5是本發(fā)明具體實(shí)施方式中視頻特征結(jié)構(gòu)管理系統(tǒng)功能示意圖。圖6是本發(fā)明具體實(shí)施方式中視頻特征結(jié)構(gòu)管理系統(tǒng)工作流程示意圖。具體實(shí)施方式下面對照附圖并結(jié)合優(yōu)選的實(shí)施方式對本發(fā)明作進(jìn)一步說明。一種視頻特征結(jié)構(gòu)化管理方法,如圖1所示,包括以下步驟:101:視頻分析服務(wù)器獲取視頻,分析所述視頻的特征,所述特征包括車牌特征、人臉特征、車輛特征、人體特征、車輛行為特征、人行為特征中的一種或多種;其中,處理所述視頻的特征包括特征檢測、特征提取和特征比較。有些時候還需要對所述特征的區(qū)域進(jìn)行打馬賽克、失焦或圈定處理。此外,通過圖像檢測算法進(jìn)行所述特征檢測;和/或通過圖像特征提取算法進(jìn)行所述特征提取。特征比較包括車牌搜索時進(jìn)行車牌號碼比較計算號碼匹配度、人臉?biāo)阉鲿r進(jìn)行人臉特征向量比較計算人臉匹配度,車型搜索時進(jìn)行車型特征比較列出符合條件車輛等。102:將步驟101中所述特征與所述視頻關(guān)聯(lián),構(gòu)成視頻結(jié)構(gòu)化數(shù)據(jù)。視頻結(jié)構(gòu)化數(shù)據(jù)包括特征值、特征坐標(biāo)、特征區(qū)域截圖、視頻幀截圖、視頻幀號、時間戳、視頻文件、視頻源中的一種或多種。在內(nèi)部數(shù)據(jù)庫內(nèi)查找到特征值時,可以獲取對應(yīng)的特征區(qū)域截圖、視頻幀截圖、視頻幀號和時間戳、視頻文件或視頻源。103:將步驟102中所述視頻結(jié)構(gòu)化數(shù)據(jù)存儲到所述視頻分析服務(wù)器的內(nèi)部數(shù)據(jù)庫供請求端使用。在本具體實(shí)施方式中,還包括步驟104:所述視頻分析服務(wù)器接收到來自所述請求端的特征檢索、特征監(jiān)控或插入視頻請求;優(yōu)選地,所述請求的形式包括文字請求或圖片請求,請求端可以在數(shù)據(jù)庫服務(wù)器中的外部數(shù)據(jù)庫的請求表中填寫文字或輸入圖片,其中,在進(jìn)行圖片檢索時,例如可以輸入某人的肖像圖片,之后視頻分析服務(wù)器接受到所述請求表。在步驟104之后還包括步驟105:所述視頻分析服務(wù)器發(fā)送所述視頻結(jié)構(gòu)化數(shù)據(jù)至所述請求端,配合播放器可以將相關(guān)特征定位到該視頻文件中該特征出現(xiàn)的畫面,另外請求結(jié)果也會表的形式記錄并保存到外部數(shù)據(jù)庫。本發(fā)明還包括一種采用視頻特征結(jié)構(gòu)化管理方法的裝置,包括:處理器和存儲器,所述存儲器存儲有計算機(jī)程序,所述處理器運(yùn)行所述存儲器中的計算機(jī)程序使所述裝置執(zhí)行上述任一所述的視頻特征結(jié)構(gòu)化管理方法。同時,本發(fā)明還包括一種計算機(jī)可讀存儲介質(zhì),其上存儲有計算機(jī)程序,該程序被處理器執(zhí)行時實(shí)現(xiàn)上述任一所述方法的步驟。傳統(tǒng)非結(jié)構(gòu)化視頻數(shù)據(jù)管理向結(jié)構(gòu)化數(shù)據(jù)管理轉(zhuǎn)變是一個飛躍,改變了視頻偵查手段主要依賴人力的傳統(tǒng)模式,視頻特征結(jié)構(gòu)化更進(jìn)一步提高工作效率。在具體實(shí)施方式中,如圖2所示,采用上述視頻特征結(jié)構(gòu)化管理方法的系統(tǒng)也可以包括數(shù)據(jù)庫服務(wù)器、視頻特征分析服務(wù)器、視頻存儲服務(wù)器,三個服務(wù)器通過路由器與請求端連接,如圖3所示,視頻存儲服務(wù)器存儲視頻文件和視頻文件對應(yīng)的特征數(shù)據(jù)如視頻截圖等數(shù)據(jù);如圖4所示,數(shù)據(jù)庫服務(wù)器存儲如表1所示的配置表、如表2所示的視頻文件記錄表(視頻文件列表)、如表3所示的內(nèi)部視頻記錄表、檢索請求表、檢索結(jié)果表、如表4所示的特征值記錄表、如表5所示的特征點(diǎn)記錄表等;其中,視頻文件列表包括的內(nèi)容有:記錄id、視頻文件名稱、視頻存儲服務(wù)器名稱、視頻文件存儲路徑、視頻文件處理狀態(tài)(處理特征標(biāo)記),視頻文件列表保存視頻文件信息,供視頻特征分析服務(wù)器查詢使用;配置表包括id、外部數(shù)據(jù)庫地址、特征檢測線程數(shù)、特征檢測開關(guān),用來保存系統(tǒng)配置;檢索請求表用來保存請求記錄,供視頻特征分析服務(wù)器查詢處理;檢索結(jié)果表保存檢索結(jié)果記錄,由視頻特征分析服務(wù)器返回,供請求端查詢;特征值記錄表包括id、特征id、特征值;特征點(diǎn)記錄表包括featureid、fileid、幀號/時間戳、特征區(qū)域、特征截圖名、特征類別;視頻特征分析服務(wù)器分析視頻存儲服務(wù)器內(nèi)視頻文件特征,并將特征、結(jié)構(gòu)化數(shù)據(jù)(視頻文件索引、特征索引、特征值等)保存入內(nèi)部數(shù)據(jù)庫,根據(jù)特征存儲路徑(根據(jù)視頻文件名創(chuàng)建目錄)上傳特征截圖(文件名:特征簡寫_幀號_坐標(biāo).jpg);其中,坐標(biāo)是指矩形框(目標(biāo)框)坐標(biāo)左上角和高寬(x,y,height,width)。表1配置表id外部數(shù)據(jù)庫地址特征檢測線程數(shù)特征檢測開關(guān)表2視頻文件記錄表表3內(nèi)部視頻記錄表表4特征值記錄表表5特征點(diǎn)記錄表其中,表2到表5的作用包括:特征值記錄表:保存特征值,比較特征值,通過特征點(diǎn)id,取得特征點(diǎn)記錄。特征點(diǎn)記錄表:保存特征點(diǎn)信息,通過fileid獲取內(nèi)部視頻記錄。內(nèi)部視頻記錄表:保存已處理視頻的記錄,通過視頻名稱獲取視頻文件記錄、讀取視頻文件、獲取特征截圖路徑。視頻文件記錄表:保存視頻文件記錄,根據(jù)視頻文件記錄獲取文件存儲地址、處理狀態(tài)、獲取視頻特征保存路徑。如圖5-6所示,系統(tǒng)啟動時,由數(shù)據(jù)庫服務(wù)器讀取外部數(shù)據(jù)庫內(nèi)的配置表,并將配置數(shù)據(jù)傳輸給視頻特征分析服務(wù)器,由視頻特征分析服務(wù)器完成系統(tǒng)配置。正常啟動后,數(shù)據(jù)庫服務(wù)器定時掃描外部數(shù)據(jù)庫視頻文件列表,讀取視頻文件記錄后傳遞給視頻特征分析服務(wù)器,視頻特征服務(wù)器根據(jù)視頻文件信息通過視頻存儲服務(wù)器讀取視頻。在對視頻幀進(jìn)行特征分析時,檢測出視頻幀內(nèi)的特征(配置文件設(shè)定的需要分析的特征),然后將特征結(jié)構(gòu)化數(shù)據(jù)存儲到內(nèi)部數(shù)據(jù)庫,截圖存儲到視頻存儲服務(wù)器內(nèi)與視頻文件對應(yīng)的文件夾。當(dāng)視頻文件特征分析結(jié)束,視頻特征分析服務(wù)器傳遞消息給數(shù)據(jù)庫服務(wù)器,數(shù)據(jù)庫服務(wù)器對外部數(shù)據(jù)庫內(nèi)視頻文件列表記錄進(jìn)行標(biāo)記,表征視頻文件已做特征分析(某幾類特征)。與此同時數(shù)據(jù)庫服務(wù)器也在監(jiān)測外部數(shù)據(jù)庫請求表,一旦檢測到有新的請求,將立刻傳遞給視頻特征分析服務(wù)器進(jìn)行處理,視頻特征分析服務(wù)器處理結(jié)束后發(fā)送消息給數(shù)據(jù)庫服務(wù)器,數(shù)據(jù)庫服務(wù)器將改變請求表的請求狀態(tài),并在結(jié)果表內(nèi)插入請求處理結(jié)果記錄。請求分三種:特征檢索,如搜車牌、人臉等,返回的是包含這些特征的視頻文件信息,截圖等,配合播放器可以定位到該視頻文件中該特征出現(xiàn)的畫面。b.特征監(jiān)控,是視頻存儲服務(wù)器內(nèi)將要進(jìn)行視頻特征分析的視頻,在特征分析的時候?qū)崟r比較該特征,并將滿足條件的特征信息輸出到結(jié)果表。c.插入視頻文件,有些需要優(yōu)先分析的視頻可以通過插入視頻文件的方式優(yōu)先進(jìn)行視頻特征分析。以上內(nèi)容是結(jié)合具體的優(yōu)選實(shí)施方式對本發(fā)明所作的進(jìn)一步詳細(xì)說明,不能認(rèn)定本發(fā)明的具體實(shí)施只局限于這些說明。對于本發(fā)明所屬
技術(shù)領(lǐng)域:
的技術(shù)人員來說,在不脫離本發(fā)明構(gòu)思的前提下,還可以做出若干等同替代或明顯變型,而且性能或用途相同,都應(yīng)當(dāng)視為屬于本發(fā)明的保護(hù)范圍。當(dāng)前第1頁12