1.一種基于虛擬現(xiàn)實下的圖像識別系統(tǒng),其特征在于,包括攝像頭、控制器和智能電腦;
其中:
攝像頭,所述攝像頭同控制器相通信連接;
控制器,所述控制器中包括著圖形預處理模塊,所述控制器同智能電腦相控制連接;
智能電腦,所述智能電腦中包括著識別模塊和分類器。
2.根據(jù)權利要求1所述的基于虛擬現(xiàn)實下的圖像識別系統(tǒng),其特征在于所述攝像頭為全景攝像頭;所述智能電腦為監(jiān)控中心計算機,所述監(jiān)控中心計算機通過無線通信模塊與控制器通信連接。
3.根據(jù)權利要求1所述的基于虛擬現(xiàn)實下的圖像識別系統(tǒng),其特征在于所述圖形預處理模塊用來對視頻流建立背景,當前幀與背景作差得到前景圖像,然后對前景圖像進行糾偏;用來把糾偏后的前景圖像發(fā)送到智能電腦中。
4.根據(jù)權利要求1所述的基于虛擬現(xiàn)實下的圖像識別系統(tǒng),其特征在于所述識別模塊用來在糾偏后的前景圖像中提取膚色塊;用來計算提取到的膚色塊的深度信息,并根據(jù)膚色塊的深度信息對臉部區(qū)域進行定位;用來根據(jù)膚色塊的深度信息對手部進行定位并提取關鍵幀,并對關鍵幀的手部區(qū)域膚色塊進行修補填充,所述關鍵幀為手部在一個區(qū)域內停留達到預設幀數(shù)的幀;用來提取關鍵幀的一種或多種手型特征。
5.根據(jù)權利要求1所述的基于虛擬現(xiàn)實下的圖像識別系統(tǒng),其特征在于所述分類器用來進行投票表決,得到靜態(tài)手勢識別結果。
6.根據(jù)權利要求1所述的基于虛擬現(xiàn)實下的圖像識別系統(tǒng)的方法,其特征在于,具體如下:
步驟1:通過攝像頭采集手語者的動作視頻,然后把動作視頻發(fā)送到控制器中,預處理模塊對視頻流建立背景,當前幀與背景作差得到前景圖像,然后對前景圖像進行糾偏;
步驟2:糾偏后通過控制器運行預處理模塊把糾偏后的前景圖像發(fā)送到智能電腦中,啟動識別模塊在糾偏后的前景圖像中提取膚色塊;
步驟3:接著計算提取到的膚色塊的深度信息,并根據(jù)膚色塊的深度信息對臉部區(qū)域進行定位;
步驟4:根據(jù)膚色塊的深度信息對手部進行定位并提取關鍵幀,并對關鍵幀的手部區(qū)域膚色塊進行修補填充,所述關鍵幀為手部在一個區(qū)域內停留達到預設幀數(shù)的幀;
步驟5:提取關鍵幀的一種或多種手型特征;
步驟6:根據(jù)提取的手型特征,使用單個分類器進行分類或者使用多個分類器進行投票表決,得到靜態(tài)手勢識別結果;
步驟7:對手勢的運動軌跡進行識別,得到軌跡識別結果;
步驟8:對靜態(tài)手勢識別結果和軌跡識別結果進行糾錯與拼接,得到手語的識別翻譯結果。
7.根據(jù)權利要求6所述的基于虛擬現(xiàn)實下的圖像識別系統(tǒng)的方法,其特征在于所述對前景圖像進行糾偏的方法包括所述基于高斯分布的自動白平衡算法或基于 HSV 顏色空間的自動白平衡算法。
8.根據(jù)權利要求7所述的基于虛擬現(xiàn)實下的圖像識別系統(tǒng)的方法,其特征在于所述提取關鍵幀是通過分析動作特征的變化曲線來自動提取動作序列的關鍵幀,提取關鍵幀的特征并結合視頻序列的全局特征來作為分類器的輸入。
9.根據(jù)權利要求8所述的基于虛擬現(xiàn)實下的圖像識別系統(tǒng)的方法,其特征在于所述手型特征基于形狀區(qū)域內部距離和傅立葉變換,能有效偵測形狀輪廓的細微變化,并且同樣具有旋轉、平移不變性;
所述手勢特征提取包括有:顏色和紋理特征、運動特征、形狀幾何特征或局部特征。
10.根據(jù)權利要求9所述的基于虛擬現(xiàn)實下的圖像識別系統(tǒng)的方法,其特征在于另外所述糾偏后通過控制器運行預處理模塊把糾偏后的前景圖像發(fā)送到智能電腦中的方式的方式為首先預設控制器和網(wǎng)絡,所述網(wǎng)絡包括接入實現(xiàn)裝置,所述接入實現(xiàn)裝置包括3G無線單元,所述3G無線單元完成3G無線網(wǎng)絡接入,建立3G無線數(shù)據(jù)鏈路,智能電腦同3G無線網(wǎng)絡相連接,所述控制器包括處理器,所述處理器同3G模塊和觸摸屏相連接,接著控制器將用戶的操作動作通過網(wǎng)絡發(fā)送給智能電腦的步驟如下:
步驟1:事先針對智能電腦的識別碼進行標記后運行并啟動至其第二增速發(fā)送程序,控制器獲取到糾偏后的前景圖像后,運行并啟動至第一增速發(fā)送程序;
步驟2:當控制器處在第一增速發(fā)送程序的運行狀態(tài)下后,向所述控制器本身的識別碼執(zhí)行標記,所述標記同智能電腦的識別碼進的標記一致,另外還探測3G無線網(wǎng)絡內的智能電腦的識別碼,分辨3G無線網(wǎng)絡內的智能電腦的識別碼有沒有一樣的標記;
步驟3:如果3G無線網(wǎng)絡內的智能電腦的識別碼有一樣的標記,就讓所述控制器同智能電腦建立信息鏈路來把所述糾偏后的前景圖像發(fā)送給智能電腦;
于這樣的步驟中,所述當控制器處在第一增速發(fā)送程序的運行狀態(tài)下后,向所述控制器本身的識別碼執(zhí)行標記,讓所述控制器本身的識別碼帶有獨一標記,由此在智能電腦亦同步執(zhí)行了第二增速發(fā)送程序后,所述控制器即探測3G無線網(wǎng)絡內的智能電腦的識別碼,分辨3G無線網(wǎng)絡內的智能電腦的識別碼有沒有一樣的標記,如果3G無線網(wǎng)絡內的智能電腦的識別碼有一樣的標記,就讓所述控制器就同智能電腦建立信息鏈路來把所述糾偏后的前景圖像發(fā)送給智能電腦;
就算若所述控制器未處在第一增速發(fā)送程序的運行狀態(tài),通過3G模塊與3G無線單元相連接,也能夠同步向所述控制器本身的識別碼執(zhí)行標記,所述標記同智能電腦的識別碼進的標記一致,另外還探測3G無線網(wǎng)絡內的智能電腦的識別碼,分辨3G無線網(wǎng)絡內的智能電腦的識別碼有沒有一樣的標記;如果3G無線網(wǎng)絡內的智能電腦的識別碼有一樣的標記,就讓所述控制器同智能電腦建立信息鏈路來把所述糾偏后的前景圖像發(fā)送給智能電腦把所述糾偏后的前景圖像發(fā)送給智能電腦;
所述步驟2內,所述向所述控制器本身的識別碼執(zhí)行標記的方式為:
于所述控制器本身的識別碼上增加獨特的符碼和時長的標記,也就是于執(zhí)行標記之際,于所述控制器本身的識別碼上增加獨特的符碼和時長的標記,所述獨特的符碼為執(zhí)行者來設置,能夠為同智能電腦的識別碼的標記采用同樣的密文來作為所述獨特的符碼;
所述控制器的時長的標記為表示運行并啟動至第一增速發(fā)送程序的時長,所述智能電腦的時長的標記為表示運行并啟動至第二增速發(fā)送程序的時長;這樣來進一步根據(jù)設定的時長范圍保證僅僅在時長范圍內的所述個人集成控器才可以實現(xiàn)認定并發(fā)送所述糾偏后的前景圖像給智能電腦;
由此在所述控制器與智能電腦間采用同樣的轉化方式后,所述控制器與智能電腦就帶有一樣的獨特的符碼的轉化方式;
也能夠在3G無線網(wǎng)絡內其他需要發(fā)送所述糾偏后的前景圖像的智能電腦上也設置同樣的所述轉化方式;
所述第一增速發(fā)送程序與第二增速發(fā)送程序均采用任務級程序執(zhí)行;
所述時長的標記還能夠為啟動3G模塊的時長;
還能辨別3G無線網(wǎng)絡內的智能電腦的識別碼是不是同步帶有和所述控制器一樣的獨特的符碼,并且辨別3G無線網(wǎng)絡內的智能電腦的時長的標記和所述控制器的時長的標記是不是在設定的時長范疇中;
所述控制器同智能電腦建立信息鏈路來把所述糾偏后的前景圖像發(fā)送給智能電腦期間,在觸摸屏上顯現(xiàn)一個按鈕,在所述執(zhí)行者須把所述糾偏后的前景圖像發(fā)送給智能電腦之際,觸碰該按鈕就開始發(fā)送;
若建立的信息鏈路不止一個的條件下,就在觸摸屏上顯現(xiàn)出供選用的智能電腦的識別碼,讓執(zhí)行者做出對的選用;
所述糾偏后的前景圖像發(fā)送給智能電腦期間,在觸摸屏上顯現(xiàn)一個表示發(fā)送信息的標記,以此來說明現(xiàn)在正在發(fā)送信息;在所述糾偏后的前景圖像發(fā)送結束后,就在觸摸屏上顯現(xiàn)一個表示發(fā)送信息的標記結束的標記;以此來說明發(fā)送信息已經(jīng)結束,就此終止第一增速發(fā)送程序與第二增速發(fā)送程序;
在步驟3執(zhí)行結束后,所述控制器就終止第一增速發(fā)送程序,在終止第一增速發(fā)送程序期間,把控制器的識別碼上的標記移除,同步把智能電腦的識別碼同所述糾偏后的前景圖像存放到一個映射表內;
所述把智能電腦的識別碼同所述糾偏后的前景圖像存放到一個映射表內后,在控制器再次獲取到糾偏后的前景圖像后,運行并啟動至第一增速發(fā)送程序之際,在控制器的觸摸屏上列出映射表中記錄的智能電腦的識別碼同發(fā)送過的所述糾偏后的前景圖像。