一種多媒體多信息同步重現(xiàn)的系統(tǒng)的制作方法
【技術(shù)領(lǐng)域】
[0001]本發(fā)明涉及一種不同類型信息同步重現(xiàn)的方法所用裝置，特別是一種多媒體多信息同步重現(xiàn)的系統(tǒng)。
【背景技術(shù)】
[0002]在對同時涉及聲音、圖像與文字和行蹤、行為這些信息在內(nèi)的多媒體信息的集合進(jìn)行存儲、回放和檢索、查詢時，目前需要使用多種軟、硬件設(shè)備系統(tǒng)以及手段和方法才能達(dá)到目的。
[0003]一、常見的多媒體信息集合包括:
(一)、公安部關(guān)于機(jī)動車駕駛證領(lǐng)、考過程的所包含信息:
1.1、不少于兩個通道的實(shí)時視頻信息；
1.2、考車駕駛室內(nèi)的實(shí)時音頻信息；
1.3、監(jiān)控中心考試員與考生的實(shí)時對話信息；
1.4、考車行駛過程的實(shí)時位置信息；
1.5、考生考試時所使用的考試車輛即考車的信息；
1.6、負(fù)責(zé)監(jiān)考某個考生的考試員的信息；
1.7、正在進(jìn)行考試的考生信息；
1.8、考生的考試成績及其評判依據(jù)；
1.9、對考生進(jìn)行扣分評定時必須記錄的實(shí)時視頻信息、考車即時所處位置、當(dāng)時即時時刻等實(shí)時信息。
[0004]1.10、其它的國家標(biāo)準(zhǔn)沒有明確規(guī)定的并在某些考場認(rèn)為又需要附加的某些信息，如考生考試的安排信息。
[0005]1.101、對報名學(xué)習(xí)機(jī)動車駕駛技能的人員以及駕駛員和其他人員的體檢過程進(jìn)行監(jiān)督所要記錄的信息:
1.102、監(jiān)督體檢過程的音頻、視頻信息；
1.103、體檢人與被體檢人的信息；
1.104、體檢單位的信息；
1.105、體檢結(jié)果的信息。
[0006](二)、對機(jī)動車的安全、技術(shù)性能的檢測過程進(jìn)行監(jiān)督所要記錄的信息:
2.1、監(jiān)督年檢過程的音頻、視頻信息；
2.2、機(jī)動車年檢時需提供的相關(guān)信息；
2.3、年檢單位及檢驗(yàn)員、引車員的信息；
2.4、檢測結(jié)果的信息。
[0007](三)、各種事故現(xiàn)場的處理需要涉及到的信息:
3.1、現(xiàn)場勘探過程的音頻、視頻信息；
3.2、勘探測量產(chǎn)生的現(xiàn)場信息； 3.3、現(xiàn)場處理單位和負(fù)責(zé)當(dāng)時現(xiàn)場處理的人員的信息；
3.4、現(xiàn)場處理結(jié)果的信息。
[0008](四)、各種實(shí)時監(jiān)控需要涉及到的信息:
4.1、對運(yùn)鈔車、危險物品運(yùn)輸車等執(zhí)行特種任務(wù)的車輛的日常監(jiān)督、實(shí)時跟蹤過程產(chǎn)生音頻、視頻和實(shí)時時間、行駛軌跡及相關(guān)的調(diào)度、管理等信息；
4.2、需要用聲音、圖像等手段嚴(yán)把產(chǎn)品監(jiān)督檢驗(yàn)過程各相應(yīng)階段的相關(guān)信息；
4.3、車輛上牌及4S店服務(wù)監(jiān)督；
4.4、為用于作憑證使用的音、像、圖片及其對應(yīng)的所有其它資料；
4.5、銀行業(yè)務(wù)流程監(jiān)控。
[0009]二、現(xiàn)有多媒體信息同步重現(xiàn)的方法:
在對同時涉及聲音、圖像與文字和行蹤、行為這些信息在內(nèi)的多媒體信息的集合進(jìn)行存儲、回放和檢索、查詢時，目前是采用下列眾多技術(shù)進(jìn)行集成的:
1、通過音頻、視頻采集與記錄系統(tǒng)來對聲音、圖像進(jìn)行采集與記錄；
2、通過電腦數(shù)據(jù)庫系統(tǒng)來對非聲音、圖像的信息進(jìn)行記錄；
3、在對多媒體信息進(jìn)行朔源時，對非聲音、圖像信息則使用相應(yīng)聲音、圖像播放器進(jìn)行回放或復(fù)原的，對非聲音、圖像的信息則是通過數(shù)據(jù)庫查詢系統(tǒng)進(jìn)行搜索、查詢與顯示的，對被監(jiān)控對象當(dāng)時所對應(yīng)的即時時刻所處位置是綜合應(yīng)用數(shù)據(jù)庫查詢系統(tǒng)和虛擬技術(shù)進(jìn)行模擬顯示和還原的。
[0010]三、現(xiàn)有多媒體信息同步重現(xiàn)的方法的缺點(diǎn):
(一)在對過程信息進(jìn)行朔源時，同時須要使用多種沒有在時間問題上存在有能夠同時一一對應(yīng)關(guān)聯(lián)的系統(tǒng)作手段，因此不管理論上還是實(shí)踐都無法解決回放時聲音、圖像、圖片等信息與對應(yīng)的非聲音、圖像、圖片信息等其它多種信息的同步問題，如:
記錄駕駛?cè)笋{駛技能考試過程時需要多個信息文件，當(dāng)需要重現(xiàn)視頻和行駛軌跡時，不同步現(xiàn)象尤為明顯突出，只能異步地描繪出來的行駛軌跡與考試車輛實(shí)時記錄下來的視頻信號之間的時間差是不確定的，根本無法控制，這樣很容易引起視覺誤差，在有評判扣分點(diǎn)時，使觀察者認(rèn)為是一種評判錯誤，甚至?xí)?dǎo)致對正確性產(chǎn)生懷疑或糾紛；
在對需要報名學(xué)習(xí)機(jī)動車駕駛技能的人進(jìn)行報名前的體檢時，為了杜絕不正之風(fēng)、防止弄虛作假和確保公平、公證，新標(biāo)準(zhǔn)規(guī)定了不允許在受到車管所民警實(shí)時監(jiān)管下的指定設(shè)置在車管所內(nèi)部的體檢機(jī)構(gòu)進(jìn)行相應(yīng)的工作，而是讓不能受車管所直接干預(yù)的具有體檢資質(zhì)的中立醫(yī)院作為第三方進(jìn)行體檢的，這時為了確保體檢結(jié)果的真實(shí)性并實(shí)施有效的過程監(jiān)督，需要結(jié)合音、像信息作佐證，這時就會出現(xiàn)在進(jìn)行監(jiān)督檢查時重現(xiàn)的這些信息存在明顯的時間異步問題。
[0011](二)用目前的數(shù)據(jù)庫技術(shù)對即時時刻等靜態(tài)信息及動態(tài)信息進(jìn)行存儲時，由于接口的通用性和技術(shù)的開放性問題，使得其安全性得不到保障，會很容易地被不法份子篡改，從而破壞了信息數(shù)據(jù)的真實(shí)性。
[0012](三)用目前的數(shù)據(jù)庫技術(shù)對與時間無關(guān)的靜態(tài)信息及與時間存在著一一對應(yīng)關(guān)系的動態(tài)信息進(jìn)行存儲時，分別保存于多個不同類型的文件當(dāng)中，因此要查找起來就很麻煩，比較費(fèi)工、費(fèi)時，若要同步重現(xiàn)就更加困難，有時時差甚至超過了 10分鐘。

【發(fā)明內(nèi)容】

[0013]本發(fā)明的目的在于提供一種多媒體多信息同步重現(xiàn)的系統(tǒng)，利用該系統(tǒng)及其同步重現(xiàn)方法能做到:
①將多媒體信息文件被實(shí)時地同時保存在同一個文件當(dāng)中，因此可以保證在查詢時和回放時能夠高度地得到同步，避免了同一時刻發(fā)生的事件和現(xiàn)象不能在同一時刻重現(xiàn)回放的非實(shí)時性問題；
②將存儲多媒體信息的多個相關(guān)文件數(shù)量適當(dāng)合并在一起，并可減少存儲空間的占用量;
③優(yōu)化傳統(tǒng)的多媒體信息文件的存儲保存方法，在減少存儲空間的同時也提高了篡改信息的難度；
④提高查詢多媒體信息的便利性和速度，減少時間的浪費(fèi)。
[0014]為解決上述問題，本發(fā)明采用的技術(shù)方案是:一種多媒體多信息同步重現(xiàn)的系統(tǒng)，該系統(tǒng)是實(shí)施一種多媒體信息同步重現(xiàn)的方法的系統(tǒng)，該系統(tǒng)包括多信息調(diào)制單元，多信息同步重現(xiàn)單元即多信息解調(diào)單元，系統(tǒng)的硬件平臺；
所述多信息調(diào)制單元是用于將具有關(guān)聯(lián)信息關(guān)系的多個相關(guān)信息合并在一起的部件，即將“非音頻、非視頻信息”插入到“音頻、視頻流或其文件”中，形成在通用的多媒體播放器上看來仍然是之前格式的音頻、視頻流或其文件的“多媒體多信息音頻、視頻流CMSAV或其多媒體多信息文件CMSAVF ；
所述多信息同步重現(xiàn)單元是將承載有“非音頻、非視頻信息”的對于通用的多媒體播放器看來仍然是之前格式的音頻、視頻文件的“多媒體多信息文件CMSAVF”經(jīng)過“多信息文件解調(diào)”后，”同步重現(xiàn)回放出來的部件；
所述系統(tǒng)的硬件平臺是用于產(chǎn)生“多媒體多信息文件CMSAVF”和還原“多媒體多信息文件CMSAVF”中存在的各種信息的調(diào)制解調(diào)器的軟硬件平臺，所述系統(tǒng)的硬件平臺包括了可運(yùn)行產(chǎn)生讓通用的多媒體播放器看來仍然是之前格式的音頻、視頻文件的“多媒體多信息文件CMSAVF”和播放“多媒體多信息文件CMSAVF”所需的全部部件；
此平臺包括以兼容于x86系列CPU為中央處理器的通用PC電腦、以兼容于ARM系列MCU為中央控制器的平板電腦及目前常見的智能手機(jī)之類移動終端、定制專用于運(yùn)行產(chǎn)生讓通用的多媒體播放器看來仍然是之前格式的音頻、視頻文件的“多媒體多信息文件CMSAVF”和播放“多媒體多信息文件CMSAVF”時所需的全部部件以及擴(kuò)展功能用部件；此處的部件包括硬件設(shè)備和嵌入在硬件設(shè)備中的軟件；
該所述系統(tǒng)的硬件平臺包括硬件平臺核心模塊、硬件平臺的接口底板；
硬件平臺核心模塊是能夠完成數(shù)據(jù)處理的軟硬件的集合，一種是以x86或與其兼容的CPU為中央處理器的PC電腦系統(tǒng)，另一種是以ARM及其兼容的微控制器MCU為核心的嵌入式平臺、移動終端設(shè)備、平板電腦、智能電視、智能手機(jī)、定制專用于運(yùn)行產(chǎn)生讓通用的多媒體播放器看來仍然是之前格式的音頻、視頻文件的“多媒體多信息文件CMSAVF”和播放“多媒體多信息文件CMSAVF”時所需的全部部件以及擴(kuò)展功能用部件；
硬件平臺的接口底板是為硬件平臺核心模塊提供信號輸入、輸出以及聯(lián)機(jī)所需的各種服務(wù)的接口設(shè)備；
所述硬件平臺的核心模塊包括: 核心模塊上的各種總線，用于讓CPU或MCU或DSP能夠獲得運(yùn)行時所需的數(shù)據(jù)和訪問與底板連接的所有設(shè)備的公共通道；
中央處理器CPU或微型控制器MCU，采用“x86系列或與其兼容的中央處理器CPU”或“ARM系列或與其兼容的微型控制器MCU”，用于運(yùn)行產(chǎn)生“多媒體多信息文件CMSAVF文件”和播放“多媒體多信息文件CMSAVF”所需的全部軟件；
數(shù)字信號處理器DSP是為了加快數(shù)據(jù)處理速度而根據(jù)需要而添加的部件；
大規(guī)?？删幊踢壿嬰娐菲骷﨔PGA或CPLD用于產(chǎn)生專用的硬件電路或代替一些通用的硬件電路，協(xié)助CPU或MCU和/或DSP工作，加快系統(tǒng)運(yùn)行速度，降低軟硬件開銷；
程序存儲器用于保存運(yùn)行產(chǎn)生“多媒體多信息文件CMSAVF”和播放“多媒體多信息文件CMSAVF”所需的全部軟件的硬件載體；
動態(tài)數(shù)據(jù)存儲器，是軟件運(yùn)行過程中所需要用到的用于保存運(yùn)行產(chǎn)生“多媒體多信息文件CMSAVF”和播放“多媒體多信息文件CMSAVF”所需的全部軟件時提供所需的數(shù)據(jù)緩沖區(qū)和動態(tài)或臨時的數(shù)據(jù)存儲空間；
中央處理器CPU或微型控制器MCU、數(shù)字信號處理器DSP、大規(guī)模可編程邏輯電路器件FPGA或CPLD、程序存儲器和動態(tài)數(shù)據(jù)存儲器之間通過各種總線相互連接；
硬件平臺的接口底板是軟硬件平臺的接口模塊或功能模塊，用于獲取“音頻、視頻流”和“非音頻、視頻信息”并形成讓通用的多媒體播放器看來仍然是之前格式的音頻、視頻文件的“多媒體多信息文件CMSAVF”的多信息調(diào)制單元和播放“多媒體多信息文件CMSAVF”的多信息同步重現(xiàn)單元所需的全部信號的輸出、輸入接口電路及連接器和工作電源；
所述硬件平臺的接口底板包括:
模擬視頻信號輸入接口模塊:是用于把模擬視頻數(shù)據(jù)送到核心板的軟、硬件接口 ； 數(shù)字視頻信號輸入接口模塊:是用于把數(shù)字視頻數(shù)據(jù)送到核心板的軟、硬件接口 ； 模擬音頻信號輸入接口模塊:是用于把模擬音頻信號送到核心板的軟、硬件接口 ； 數(shù)字音頻信號輸入接口模塊:是用于把數(shù)字音頻數(shù)據(jù)送到核心板的軟、硬件接口 ； 非音頻、非視頻信息的輸入接口模塊:是讓核心板獲得非實(shí)時信號的軟硬件接口 ；
視頻信息輸出接口:是播放“多媒體多信息文件CMSAVF”時產(chǎn)生的視頻信息的輸出接
P ;
音頻信息輸出接口:是播放“多媒體多信息文件CMSAVF”時產(chǎn)生的音頻信息的輸出接
P ;
非音頻、非視頻信息的輸出接口:是播放“多媒體多信息文件CMSAVF”時產(chǎn)生的非音頻、非視頻信息的輸出接口 ；
鍵盤、指示燈等人機(jī)界面接口模塊:是運(yùn)行產(chǎn)生“多媒體多信息文件CMSAVF”和播放“多媒體多信息文件CMSAVF”的調(diào)制解調(diào)器為操作人服務(wù)而設(shè)置的必需的鍵盤、指示燈接口及其處理模塊；
聯(lián)機(jī)通訊接口模塊:是用于本專利申請所述的裝置與外界其它系統(tǒng)或設(shè)備進(jìn)行連接的軟硬件接口；
大容量存儲器:是用于存儲“多媒體多信息文件” CMSAVF和一些軟件程序文件及為軟件運(yùn)行時提供必須的虛擬內(nèi)存而必需附加的外部存儲器硬件，包括但不局限于電腦硬盤、固態(tài)存儲器、USB磁盤、SD卡或TF卡之中的一種或多種組合； 電源適配器:用于為整個硬件平臺提供其運(yùn)行時所需的全部電能；
多信息調(diào)制單元和多信息同步重現(xiàn)單元通過所述硬件平臺的接口底板與硬件平臺的核心模塊連接，多信息調(diào)制單元和多信息同步重現(xiàn)單元通過所述硬件平臺的接口底板與硬件平臺的核心模塊，實(shí)現(xiàn)讓多信息調(diào)制單元把具有關(guān)聯(lián)信息關(guān)系的多個相關(guān)文件或多種信息流合并在一起形成多媒體多信息音頻、視頻流CMSAV和/或多媒體多信息文件CMSAVF并在需要時能夠讓多信息同步重現(xiàn)單元來同步再現(xiàn)出多媒體多信息音頻、視頻流CMSAV和/或多媒體多信息文件CMSAVF所承載的部分信息或全部信息。
[0015]其進(jìn)一步技術(shù)方案是:它還包括一個數(shù)據(jù)采集單元，所述數(shù)據(jù)采集單元由采集視頻信息的部件和采集音頻信息的部件組成；所述采集視頻信息的部件包括:
h臺模擬視頻攝像機(jī)或k臺數(shù)字視頻攝像機(jī)，用于進(jìn)行視頻監(jiān)視并記錄提供現(xiàn)場的視頻信息；
h個視頻數(shù)字化采集器或模塊，該h個視頻數(shù)字化采集器分別與h臺模擬視頻攝像機(jī)對應(yīng)連接，用于將模擬視頻攝像機(jī)采集到的模擬視頻信息分別轉(zhuǎn)換成數(shù)字視頻信息；
視頻數(shù)字混合器或模塊，該視頻數(shù)字混合器分別與h個視頻數(shù)字化采集器或模塊和k臺數(shù)字視頻攝像機(jī)連接，用于將h+k個輸入通道的數(shù)字視頻信息轉(zhuǎn)換成單一通道的數(shù)字視頻信息CVS輸出；上述h、k的取值范圍是:h=0，l，2，……，24，k=0，l，2，……，24，h+k=l，
2，3，......24 ；
所述數(shù)據(jù)采集單元之采集音頻信息的部件包括:
m只模擬音頻拾音器或η只數(shù)字音頻拾音器，用于進(jìn)行音頻監(jiān)聽并記錄現(xiàn)場的音頻信號，m、n 的取值范圍是:m=0，l，2，……，24，n=0，l，2，……，24，m+n=l，2，3，……24;
模擬音頻信號混合器，用于把m通道的模擬音頻拾音器的輸出信號混合成單一通道的模擬音頻信號HAS的模擬音頻信號混合電路；
音頻數(shù)字化采集器或模塊，用于將m個模擬音頻拾音器采集到的m通道模擬音頻信息經(jīng)混合成單一通道的模擬音頻信號HAS換成數(shù)字音頻信息；
音頻數(shù)字混合器或模塊，該音頻數(shù)字混合器或模塊分別與音頻數(shù)字化采集器或模塊和η只數(shù)字音頻拾音器連接，用于將m+n個輸入通道的數(shù)字音頻信息轉(zhuǎn)換成單一通道的數(shù)字音頻信息DAS輸出；上述m、n的取值范圍是:m=0，1，2，......，24，n=0，l，2，......，24，m+n=l，
2,3,......24。
[0016]其更進(jìn)一步技術(shù)方案是:所述多信息調(diào)制單元是多信息調(diào)制單元A，該多信息調(diào)制單元A包括順次連接的數(shù)字音頻、視頻同步采集器、多信息混合器A、數(shù)字信息壓縮器A和多信息文件記錄器，以及同時與數(shù)字音頻、視頻同步采集器相連接的數(shù)字音頻接收器和數(shù)字視頻接收器、同時與多信息混合器A相連接的非實(shí)時信息NRS接收器和實(shí)時非音頻、非視頻信息RN