基于內(nèi)容的視頻檢索系統(tǒng)的制作方法
【專利摘要】一種基于內(nèi)容的視頻檢索系統(tǒng)，屬于計算機互聯(lián)網(wǎng)【技術(shù)領(lǐng)域】。本發(fā)明針對國外視頻檢索技術(shù)進(jìn)行了深入的研究和改進(jìn)，提供了一種檢索質(zhì)量與效率更高的基于內(nèi)容的視頻檢索系統(tǒng)，所述視頻檢索系統(tǒng)包括采集、發(fā)布、檢索三個子系統(tǒng)。本系統(tǒng)通過結(jié)合MPEG-4和MPEG-7標(biāo)準(zhǔn)來同時從內(nèi)容和語言上描述一個視頻流，實現(xiàn)針對視頻流的快速檢索。一方面幫助用戶有效的在浩瀚的互聯(lián)網(wǎng)中檢索和瀏覽互聯(lián)網(wǎng)視頻片段，另一方面，對于視頻內(nèi)容的發(fā)布商以及監(jiān)管者而言，能夠起到有效的監(jiān)管視頻作用，并且控制視頻內(nèi)容不被非法復(fù)制與傳播。
【專利說明】基于內(nèi)容的視頻檢索系統(tǒng)

【技術(shù)領(lǐng)域】
[0001] 本發(fā)明屬于計算機互聯(lián)網(wǎng)【技術(shù)領(lǐng)域】，涉及一種視頻檢索系統(tǒng)。

【背景技術(shù)】
[0002] 隨著計算機技術(shù)和網(wǎng)絡(luò)技術(shù)的發(fā)展，信息高速公路的建設(shè)，以及多媒體的推廣應(yīng) 用，各種視頻資料源源不斷的產(chǎn)生，隨之建立起了越來越多的視頻數(shù)據(jù)庫，出現(xiàn)了數(shù)字圖書 館、數(shù)字電視、視頻點播、遠(yuǎn)程教育等許多新的服務(wù)形式和信息交流手段。視頻檢索技術(shù)作 為人們獲取視頻信息的重要手段越來越受到重視，大大促進(jìn)了視頻搜索行業(yè)的發(fā)展，國內(nèi) 的視頻搜索市場起步相對較晚，視頻搜索引擎支撐技術(shù)主要來源于國外視頻檢索技術(shù)。
[0003] 隨著網(wǎng)絡(luò)流媒體技術(shù)以及社會化網(wǎng)絡(luò)的發(fā)展，網(wǎng)絡(luò)帶寬不斷的提高，越來越多的 信息通過視頻等多媒體的的形式展現(xiàn)在互聯(lián)網(wǎng)中，互聯(lián)網(wǎng)視頻應(yīng)用己逐漸成為信息發(fā)布與 娛樂的主流。隨之而來的是，互聯(lián)網(wǎng)中視頻片段數(shù)目越來越繁多，并呈現(xiàn)幾何級數(shù)的增長方 式，這其中，存在著大量冗余、重復(fù)甚至非法的視頻片段。近年來，以提供視頻分享為主要業(yè) 務(wù)的視頻網(wǎng)站也蓬勃的發(fā)展，國外知名的視頻分享提供商包括Y〇uTube、Hulu、YahooVideo、 AOLvideo等，而國內(nèi)也有包括優(yōu)酷網(wǎng)、土豆網(wǎng)、CNTV等大小數(shù)百家視頻分享網(wǎng)站。數(shù)目眾 多的視頻分享網(wǎng)站極大的豐富了人們的視聽娛樂等活動。根據(jù)國際權(quán)威機構(gòu)的統(tǒng)計數(shù)據(jù)， 2009年1月份，美國網(wǎng)民瀏覽過的在線視頻總數(shù)量達(dá)到324億個，共計1.3億獨立訪問用 戶，平均每個用戶瀏覽超過了 187個視頻，YouTube每天的視頻上傳量達(dá)到了 200多萬分鐘。
[0004] 而在國內(nèi)，僅2009年4月份，國內(nèi)主要視頻分享網(wǎng)站的有效瀏覽時間超過1500萬 小時。整個2009年度，國內(nèi)視頻分享服務(wù)月度覆蓋人數(shù)從1月份的1. 6億人增長至12月 份的2. 1億人，增長率達(dá)32. 4%，并且呈現(xiàn)持續(xù)增長之勢。
[0005] 近年來，隨著優(yōu)酷網(wǎng)、土豆網(wǎng)、CNTV等大小數(shù)百家視頻分享網(wǎng)站紛紛建立，訪問者 對于網(wǎng)站的服務(wù)要求也越來越高，傳統(tǒng)的檢索系統(tǒng)已經(jīng)不能勝任目前的需求，另一方面，網(wǎng) 絡(luò)上充斥了一些違法、盜版等不利于網(wǎng)絡(luò)視頻健康發(fā)展的內(nèi)容，而如何有效的過濾上述視 頻資料也顯得尤為重要。綜上所述，能夠滿足當(dāng)前需求的視頻檢索系統(tǒng)對于各大視頻網(wǎng)站、 視頻發(fā)布商、網(wǎng)絡(luò)監(jiān)管機構(gòu)是十分重要的。


【發(fā)明內(nèi)容】

[0006] 本發(fā)明針對國外視頻檢索技術(shù)進(jìn)行了深入的研究和改進(jìn)，提供了一種檢索質(zhì)量與 效率更高的基于內(nèi)容的視頻檢索系統(tǒng)，一方面幫助用戶有效的在浩瀚的互聯(lián)網(wǎng)中檢索和瀏 覽互聯(lián)網(wǎng)視頻片段，另一方面，對于視頻內(nèi)容的發(fā)布商以及監(jiān)管者而言，能夠起到有效的監(jiān) 管視頻作用，并且控制視頻內(nèi)容不被非法復(fù)制與傳播。
[0007] 本發(fā)明的目的是通過以下技術(shù)方案實現(xiàn)的： 一種基于內(nèi)容的視頻檢索系統(tǒng)，主要包括采集、發(fā)布、檢索三個子系統(tǒng)，其中： 所述采集子系統(tǒng)通過直接接駁視頻監(jiān)控系統(tǒng)或手工批量導(dǎo)入的方式，快速導(dǎo)入視頻 流，然后對不同格式的視頻流進(jìn)行格式轉(zhuǎn)換，統(tǒng)一轉(zhuǎn)換為MPEG-4格式，并對視頻流進(jìn)行壓 縮，過濾掉監(jiān)控類視頻中大量無活動內(nèi)容部分，大幅度縮減視頻流尺寸； 所述發(fā)布子系統(tǒng)通過智能提取視頻關(guān)鍵幀，輔助人工標(biāo)簽標(biāo)注的方式，實現(xiàn)針對視頻 的語義描述，并使得描述定義符合MPEG-7格式，并經(jīng)過可自定義的審核流程，發(fā)布經(jīng)審核 通過的入庫視頻文件； 所述檢索子系統(tǒng)對入庫的視頻文件自動提取底層圖像特征，提供豐富的查詢接口，允 許通過語義標(biāo)簽或視頻低層特征聯(lián)合檢索，檢索結(jié)果采用圖像列表形式展現(xiàn)，方便用戶選 擇瀏覽。
[0008] 本系統(tǒng)通過結(jié)合MPEG-4和MPEG-7標(biāo)準(zhǔn)來同時從內(nèi)容和語言上描述一個視頻流， 實現(xiàn)針對視頻流的快速檢索。
[0009] MPEG-7全稱為"多媒體內(nèi)容描述接口"，由動態(tài)圖像專家組于1998年10月提出， 為各類多媒體信息提供一種標(biāo)準(zhǔn)化的描述，這種描述將與內(nèi)容本身有關(guān)，并且可以同時描 述低級特征和高級特征。MPEG7文件本身是一種XML格式的文件，可以由視頻處理軟件生 成。MPEG-7規(guī)定了一套標(biāo)準(zhǔn)描述子來描述各種多媒體信息，并且預(yù)先定義了描述子的結(jié) 構(gòu)以及它們之間的關(guān)系。與視頻相關(guān)的常用描述子分為顏色（Color)，紋理（Texture)、形 狀（Shape)和動作（Motion)等類型，每一類包含若干種描述子，以不同的方式和結(jié)構(gòu)來描 述視覺信息。同時，MPEG-7還提供了描述定義語言，用戶可以自定義新的描述模式。
[0010] 本發(fā)明的視頻檢索系統(tǒng)通過對所有入庫視頻進(jìn)行預(yù)處理，包括自動方式和人工方 式，允許在入庫前對視頻資源進(jìn)行編輯、壓縮、格式轉(zhuǎn)換和人工分類標(biāo)簽標(biāo)注，結(jié)合視頻低 層特征和語義標(biāo)注，預(yù)先生成存儲視頻資源的目標(biāo)數(shù)據(jù)庫。并且預(yù)處理過程允許自定義審 批流程，通過完善的權(quán)限控制，保證視頻資源的安全性。系統(tǒng)提供多種檢索方式，快速檢索 目標(biāo)結(jié)果集，并允許對目標(biāo)結(jié)果集查看、復(fù)制。
[0011] 本發(fā)明以互聯(lián)網(wǎng)視頻的檢索為基礎(chǔ)，分別從基于文本的方法和基于視頻內(nèi)容的方 法出發(fā)，研究包括視頻網(wǎng)頁的識別和視頻文本特征提取、視頻的視覺特征表示、基于視覺特 征的相似度計算以及大規(guī)模視頻數(shù)據(jù)處理等視頻檢索系統(tǒng)中的關(guān)鍵技術(shù)和問題。具有如下 優(yōu)點： 1、幫助用戶有效的在浩瀚的互聯(lián)網(wǎng)中檢索和瀏覽互聯(lián)網(wǎng)視頻片段，主要面向各大視頻 網(wǎng)站、數(shù)字電視媒體以及遠(yuǎn)程教育網(wǎng)絡(luò)等機構(gòu)。
[0012] 2、通過盜版視頻檢測，可自動檢測網(wǎng)絡(luò)上的色情、暴力等有害視頻，可面向政府機 構(gòu)提供監(jiān)測服務(wù)，也可用于視頻網(wǎng)站自檢、有害視頻過濾，即以委托人提供的視頻或視頻片 斷為搜索源，自動搜索和監(jiān)控涉嫌盜版的在線視頻。
[0013] 3、改進(jìn)了結(jié)合SIFT特征匹配及時序特征的視頻相似度度量方法，直接對視頻進(jìn) 行分析，從中抽取內(nèi)容特征，然后利用這些內(nèi)容特征建立索引進(jìn)行檢索。從內(nèi)容中提取線索 并進(jìn)行相似性檢索，提高了檢索的有效性。這樣用戶只需給出特定內(nèi)容的例子或視頻的特 征描述，系統(tǒng)就能自動找到所需的視頻片斷。并且視頻分析過程采用一種近似匹配或局部 匹配的方法和技術(shù)逐步求精來獲得查詢和檢索結(jié)果，摒棄了傳統(tǒng)的精確匹配技術(shù)，避免了 采用傳統(tǒng)檢索方法所帶來的不確定性，擴(kuò)大了檢索結(jié)果的范圍。

【專利附圖】

【附圖說明】
[0014] 圖1為視頻檢索系統(tǒng)邏輯框圖； 圖2為視頻檢索系統(tǒng)的網(wǎng)絡(luò)結(jié)構(gòu)圖； 圖3為視頻檢索系統(tǒng)的功能結(jié)構(gòu)圖。

【具體實施方式】
[0015] 下面結(jié)合附圖對本發(fā)明的技術(shù)方案作進(jìn)一步的說明，但并不局限如此，凡是對本 發(fā)明技術(shù)方案進(jìn)行修改或者等同替換，而不脫離本發(fā)明技術(shù)方案的精神和范圍，均應(yīng)涵蓋 在本發(fā)明的保護(hù)范圍中。
[0016] 如圖1-3所示，本發(fā)明提供了一種基于內(nèi)容的視頻檢索系統(tǒng)，主要包括采集、發(fā) 布、檢索三個子系統(tǒng)，具體要求如下： 一、采集管理 1、自動采集 自動采集功能是通過攝像頭進(jìn)行自動采集，連接一個或多個攝像頭進(jìn)行自動采集。設(shè) 置單個或多個視頻的清晰度、視頻自動上傳、視頻回放等功能。通過一定的時間進(jìn)行自動化 采集、編輯處理等操作，通過手動設(shè)置采集時間、采集標(biāo)準(zhǔn)、采集清晰度等功能進(jìn)行自動采 集。采集視頻格式統(tǒng)一化，時間長度統(tǒng)一化等統(tǒng)一信息。
[0017] 2、手動采集 手動采集主要是對已存在的視頻進(jìn)行編輯、修改、優(yōu)化、對當(dāng)前頁面進(jìn)行截圖、分離場 景、分離音頻等操作。手動采集的功能主要實現(xiàn)對視頻的剪切，觀看，色彩修正，回放速度調(diào) 整，修改視頻主顏色，修改視頻中已存在字體的字體，形狀，大小等操作。
[0018] 3、手動采集視頻格式轉(zhuǎn)換 手動采集視頻格式轉(zhuǎn)換主要是用來對視頻格式統(tǒng)一化，對視頻進(jìn)行剪輯、去聲、修改視 頻輸出清晰度等功能。該功能主要是用來對視頻格式的轉(zhuǎn)換，可以把任何格式的視頻進(jìn)行 轉(zhuǎn)換成自己所需要的視頻。
[0019] 二、發(fā)布管理 1、編輯視頻 視頻編輯管理主要是針對視頻未編輯庫的視頻進(jìn)行操作，主要對視頻進(jìn)行編輯、修改、 藝術(shù)化處理、視頻合成、視音頻合成、視頻優(yōu)化處理等操作。
[0020] 2、添加人工標(biāo)注 添加人工標(biāo)注主要實現(xiàn)對視頻的標(biāo)注功能。標(biāo)注就是對視頻進(jìn)行分類，視頻的運動方 向，視頻中是否出現(xiàn)了人和物，出現(xiàn)的地點，視頻中主要的顏色，視頻開始時間結(jié)束時間、平 行線，參考線設(shè)置等操作。
[0021] 三、視頻審核 1、設(shè)置審核流程 設(shè)置審核流程主要用于審核視頻審核流程的添加。
[0022] 2、審核視頻 審核視頻主要是對已編輯完成后的視頻進(jìn)行審核并提交到視頻庫中。
[0023] 3、已審核視頻 已審核視頻主要實現(xiàn)對已審核的視頻進(jìn)行查看。查看已經(jīng)審核通過的視頻，如發(fā)現(xiàn)審 核有誤的信息則可退回該信息并重新審核。
[0024] 四、視頻檢索管理 1、視頻檢索 視頻檢索主要用于顯示視頻檢索出來的信息。
【權(quán)利要求】
1. 一種基于內(nèi)容的視頻檢索系統(tǒng)，其特征在于所述視頻檢索系統(tǒng)包括采集、發(fā)布、檢索 三個子系統(tǒng)，其中： 所述采集子系統(tǒng)通過直接接駁視頻監(jiān)控系統(tǒng)或手工批量導(dǎo)入的方式導(dǎo)入視頻流，然后 對不同格式的視頻流進(jìn)行格式轉(zhuǎn)換，統(tǒng)一轉(zhuǎn)換為MPEG-4格式，并對視頻流進(jìn)行壓縮，過濾 掉監(jiān)控類視頻中大量無活動內(nèi)容部分，縮減視頻流尺寸； 所述發(fā)布子系統(tǒng)通過智能提取視頻關(guān)鍵幀，輔助人工標(biāo)簽標(biāo)注的方式，實現(xiàn)針對視頻 的語義描述，使得描述定義符合MPEG-7格式，并經(jīng)過可自定義的審核流程，發(fā)布經(jīng)審核通 過的入庫視頻文件； 所述檢索子系統(tǒng)對入庫的視頻文件自動提取底層圖像特征，提供查詢接口，允許通過 語義標(biāo)簽或視頻低層特征聯(lián)合檢索，檢索結(jié)果采用圖像列表形式展現(xiàn)，方便用戶選擇瀏覽。
【文檔編號】G06F17/30GK104217000SQ201410463096
【公開日】2014年12月17日 申請日期:2014年9月12日 優(yōu)先權(quán)日:2014年9月12日
【發(fā)明者】吳彥波, 孟廣仕, 黃鶴, 姜娜, 左宇明 申請人:黑龍江斯迪克信息科技有限公司