1.一種基于手勢識別的手語會議系統(tǒng),其特征是,包括:
手勢采集子系統(tǒng):采用手勢識別傳感器以幀跟蹤的方式采集手勢信息,將手勢打包成幀數(shù)據(jù)發(fā)給手勢處理子系統(tǒng)處理;
手勢處理子系統(tǒng):將采集的手勢數(shù)據(jù)進行處理,轉(zhuǎn)化成開放式樹形手勢詞典中存儲的數(shù)據(jù)類型;
手勢對照校驗子系統(tǒng):將手勢處理子系統(tǒng)處理后的數(shù)據(jù)與開放式樹形手勢詞典中的數(shù)據(jù)進行對比,自動匹配手勢數(shù)據(jù)一致的手勢文字,如果在開放式樹形手勢詞典中有相應(yīng)手勢信息,則將該數(shù)據(jù)信息交由手勢轉(zhuǎn)換子系統(tǒng)來處理,如果沒有,則采取模糊匹配算法,然后再交由手勢轉(zhuǎn)換子系統(tǒng)來處理;
手勢轉(zhuǎn)換子系統(tǒng):將手勢對照校驗子系統(tǒng)發(fā)來的數(shù)據(jù)轉(zhuǎn)換成相應(yīng)的文字信息,輸送給多媒體子系統(tǒng);
多媒體子系統(tǒng):將手勢代表的文字信息顯示在大屏幕上。
2.如權(quán)利要求1所述的一種基于手勢識別的手語會議系統(tǒng),其特征是,所述手勢處理子系統(tǒng)采用PC端,會議系統(tǒng)中央處理器與PC端相連,以便PC端實現(xiàn)對整個會議系統(tǒng)的控制把握,此外,會議系統(tǒng)中央處理器還與手語會議系統(tǒng)音頻系統(tǒng)、手語會議系統(tǒng)電動屏幕系統(tǒng)、手語會議系統(tǒng)視頻系統(tǒng)、手語會議系統(tǒng)投影系統(tǒng)、手語會議系統(tǒng)語音系統(tǒng)相連。
3.如權(quán)利要求1所述的一種基于手勢識別的手語會議系統(tǒng),其特征是,所述手語識別傳感器采集手語手勢的手勢信息包括位移、旋轉(zhuǎn)、深度。
4.如權(quán)利要求1所述的一種基于手勢識別的手語會議系統(tǒng),其特征是,所述手語識別傳感器采用Leap公司的leapmotion作為手勢數(shù)據(jù)采集傳感器,leapmotion檢測到手、手指或桿狀物體時,給它分配一個唯一的ID標(biāo)識符,并持續(xù)跟蹤,當(dāng)一個手勢結(jié)束時,leapmotion會將一幀數(shù)據(jù)發(fā)送給PC,一幀數(shù)據(jù)包含一個基本的跟蹤數(shù)據(jù)列表、手勢以及幀運動信息。
5.如權(quán)利要求1所述的一種基于手勢識別的手語會議系統(tǒng),其特征是,所述開放式樹形手勢詞典為用戶提供自主錄入手勢的功能,任何人都可以通過自定義加入校準(zhǔn)手勢信息提高識別的準(zhǔn)確率,開放式樹形手勢詞典中每個文字或者詞匯對應(yīng)的手勢都會提前采集設(shè)定個人的不同手勢作為區(qū)分不同手型的依據(jù),并將采集的手型轉(zhuǎn)化為數(shù)據(jù)存儲在開放式樹形手勢詞典中。
6.一種基于手勢識別的手語會議方法,其特征是,包括:
步驟1:任意聾啞人進行手語表達;
步驟2:手勢識別傳感器采集聾啞人的手語手勢信息;
步驟3:手勢識別傳感器將手勢信息經(jīng)芯片處理后傳遞給PC端電腦;
步驟4:PC端電腦中的手將該手勢在手勢詞典中進行搜索對照;
步驟5:該手勢在手勢詞典中是否有對應(yīng)的文字含義,若是,進行步驟7,否則進行步驟6;
步驟6:啟動模糊匹配算法,將手勢詞典中的類似手勢轉(zhuǎn)換為文字;
步驟7:將手勢轉(zhuǎn)換為文字;
步驟8:手語會議系統(tǒng)中央處理器將文字信息輸出到電動屏幕;
步驟9:結(jié)束。