亚洲成年人黄色一级片,日本香港三级亚洲三级,黄色成人小视频,国产青草视频,国产一区二区久久精品,91在线免费公开视频,成年轻人网站色直接看

一種閉合式言語測聽詞表的設(shè)計(jì)方法與應(yīng)用與流程

文檔序號:12663953閱讀:605來源:國知局
一種閉合式言語測聽詞表的設(shè)計(jì)方法與應(yīng)用與流程

本發(fā)明涉及言語測聽的技術(shù)領(lǐng)域,特別是涉及閉合式言語測聽詞表的設(shè)計(jì)方法與應(yīng)用。



背景技術(shù):

漢語言語聽力評估是基于受試者對聲韻調(diào)、音節(jié)、詞匯或語句的聽辨能力,評估出受試者的聽力水平。在日常生活中,音節(jié)是最基本的言語交流與理解單元,因此基于音節(jié)做言語聽力評估是最常用的測聽方式。

基于音節(jié)的言語聽力評估,包括由音節(jié)構(gòu)成的測聽材料和與其對應(yīng)的測聽系統(tǒng)與測聽方法,并且分為開放式與閉合式。目前漢語言語測聽中多數(shù)采用開放式測聽方法,較少使用閉合式。開放式言語測聽中,受試者無法獨(dú)立完成測聽流程,需要測試人員的介入,影響言語測聽的效率。閉合式言語測聽由受試者與測聽系統(tǒng)以交互形式進(jìn)行,無需測試人員的輔助,受試者可以獨(dú)立自主完成,這樣可以提高漢語言語測聽的效率,特別是測聽系統(tǒng)在可觸摸平臺上運(yùn)行時(shí),測聽效率將得到極大提高。

閉合式漢語言語測聽方法所使用的測聽詞表中,混淆項(xiàng)的設(shè)計(jì)方法是關(guān)鍵技術(shù)。目前的混淆項(xiàng)設(shè)計(jì),遵循音位平衡和表間等價(jià)性的原則。這種設(shè)計(jì)方法是從音素層面編制混淆項(xiàng),卻沒有考慮各語音單元在音節(jié)層面的感知特性。且漢語言語測聽中使用的測聽詞表,目前多通過人工編制,優(yōu)質(zhì)的測聽詞表制作周期長,很難做到全局最優(yōu)。

因此希望有一種閉合式言語測聽詞表的設(shè)計(jì)方法與應(yīng)用可以解決現(xiàn)有技術(shù)的上述缺陷。



技術(shù)實(shí)現(xiàn)要素:

本發(fā)明的目的在于提供一種閉合式言語測聽詞表的設(shè)計(jì)方法與應(yīng)用來解決現(xiàn)有技術(shù)中存在的上述問題。

為實(shí)現(xiàn)上述目的,本發(fā)明提供一種閉合式言語測聽詞表的設(shè)計(jì)方法與應(yīng)用,所述閉合式言語測聽詞表的設(shè)計(jì)方法包括以下步驟:

(1)設(shè)定閉合式言語測聽詞表中包含有K張?jiān)~表,每張?jiān)~表內(nèi)含H個(gè)測試組,測試組包括測試項(xiàng)和混淆項(xiàng),詞表的長度為H,且H為任意正整數(shù);

(2)依據(jù)簡短、音位平衡、常用、覆蓋何等價(jià)性的原則,編制步驟(1)中的K張?jiān)~表;

(3)計(jì)算閉合式言語測聽詞表;

(4)受試者在相對安靜環(huán)境下進(jìn)行言語測聽;

(5)測試結(jié)束;

(6)言語測聽系統(tǒng)進(jìn)行測聽結(jié)果計(jì)算。

優(yōu)選地,所述步驟(3)計(jì)算閉合式言語測聽詞表包括以下具體步驟:

步驟(3.1)提取音節(jié)聲學(xué)特征,獲取人耳主觀感知特性,調(diào)整特征向量權(quán)重系數(shù),獲得以加權(quán)聲學(xué)特征描述的聽覺感知距離,計(jì)算音節(jié)間的感知距離;

步驟(3.2)與測試項(xiàng)對應(yīng),設(shè)置混淆受試者聽辨的候選項(xiàng)音節(jié)為混淆項(xiàng),從測試項(xiàng)的聲韻調(diào)所屬的感知分類中分別提取聲母、韻母和聲調(diào)并組合成單音節(jié)作為候選項(xiàng),并選取混淆項(xiàng);

步驟(3.3)生成全局最優(yōu)的測聽詞表。

優(yōu)選地,所述步驟(3.1)計(jì)算音節(jié)間感知距離的具體步驟包括:

步驟(3.1.1),提取聲母的聲學(xué)特征參數(shù)包括:5維聲母過零率參數(shù)ZCR、12維聲母MFCC參數(shù)Mu、和21維聲母Bark頻帶能量比率參數(shù)Bi,由此得到一個(gè)38維特征向量,作為聲母的特征向量;提取韻母聲學(xué)特征參數(shù)包括:9維LPC譜曲線積分作為韻母的特征向量;提取聲調(diào)的聲學(xué)特征參數(shù)包括:基頻包絡(luò)f0中均值、最小值、前置最大值、后置最大值、前置斜率和后置斜率6維向量,作為聲調(diào)的感知特征向量;

步驟(3.1.2),對步驟(3.1.1)中得到的聲母的聲學(xué)特征參數(shù)、韻母聲學(xué)特征參數(shù)和聲調(diào)的聲學(xué)特征參數(shù)按下式進(jìn)行歸一化處理:

其中,xnew是歸一化處理后的包括ZCR、Mu、Bi、LPC、f0在內(nèi)的各聲學(xué)特征參數(shù),xsource是歸一化處理之前的聲學(xué)特征參數(shù),Xsource為同一維度i的未處理時(shí)的聲學(xué)特征參數(shù)集合;

步驟(3.1.3),由聲母感知特征向量C、韻母感知特征向量V、聲調(diào)感知特征向量T和權(quán)重,計(jì)算單音節(jié)的聲學(xué)特征感知向量:

S=αC+βV+γT (2)

其中,α,β,γ分別為聲韻調(diào)的特征權(quán)重,C為包括ZCR、Mu、Bi的38維特征向量,V為9維LPC譜曲線積分系數(shù),T為6維基頻包絡(luò)組成的特征向量;

步驟(3.1.4),計(jì)算任意兩個(gè)單音節(jié)的聲學(xué)特征感知向量的歐氏距離,作為任意兩個(gè)單音節(jié)之間的感知距離:

步驟(3.1.5),計(jì)算單音節(jié)特征向量的權(quán)重系數(shù)。

優(yōu)選地,所述步驟(3.2)選取混淆項(xiàng)的具體步驟包括:

步驟(3.2.1)對于每一個(gè)語音聽感分類C(Class),類中項(xiàng)總數(shù)為|C|,類中各項(xiàng)I(Items)按照漢語拼音順序循環(huán)排序:I1,I2,...,I|C|,I|C+1|,I|C+2|,...(I|C+1|=I1);

步驟(3.2.2),生成隨機(jī)種子矩陣:

其中rsi,1、rsi,2、rsi,3分別表示第i個(gè)混淆項(xiàng)的聲母、韻母和聲調(diào)的起始選擇位置(i=1,2,3)。rsi,j為[1,100]區(qū)間內(nèi)的隨機(jī)整數(shù)(i,j=1,2,3)。

步驟(3.2.3),計(jì)算候選項(xiàng)與測試項(xiàng)間的感知距離:

其中,Si=αCi+βVi+γTi為各混淆項(xiàng)的單音節(jié)特征向量,S0=αC0+βV0+γT0為該測試組內(nèi)測試項(xiàng)的單音節(jié)特征向量;

若滿足約束條件,即該測試項(xiàng)的混淆項(xiàng)計(jì)算完畢,約束條件為:

其中,pi為每個(gè)混淆項(xiàng)與其對應(yīng)的測試項(xiàng)的感知距離;為pi的平均值;consMTRX為感知距離約束矩陣;ε,δ分別為兩個(gè)約束標(biāo)定參數(shù)。約束矩陣consMTRX從音節(jié)的感知距離角度出發(fā),約束聲母、韻母、聲調(diào)組合在主觀聽覺特性間的差異性;ε與δ約束混淆項(xiàng)之間的方差;

若不滿足約束條件,按以下步驟進(jìn)行:

步驟(3.2.4),保持聲母和聲調(diào)不變,將rsj,1+1,返回步驟(3.2.2)重新確定韻母,再進(jìn)行步驟(3.2.3);

步驟(3.2.5),若韻母類中遍歷一遍仍選不出符合條件(存在且不重復(fù))的備選項(xiàng),則保持聲調(diào)不變,將rsj,2+1,返回步驟(3.2.2)重新確定聲母后繼續(xù)循環(huán)執(zhí)行步驟(3.2.3)至步驟(3.2.4);

步驟(3.2.6),若聲韻母類中各種組合遍歷一遍仍選不出符合條件的備選項(xiàng),則保持聲調(diào)不變,選擇相鄰類中的聲母繼續(xù)循環(huán)執(zhí)行步驟(3.2.3)至步驟(3.2.5)。

優(yōu)選地,所述步驟(3.1.5)計(jì)算單音節(jié)特征向量的權(quán)重系數(shù)的具體步驟包括:

步驟(3.1.5.1),單音節(jié)中聲母、韻母和聲調(diào)均有重要意義,α,β,γ初始賦值為一個(gè)同樣的系數(shù)φ;

步驟(3.1.5.2),招募一定數(shù)量的聽力水平正常的志愿者,選用已經(jīng)被臨床驗(yàn)證過的言語測聽詞表,設(shè)定合適的測聽聲強(qiáng),在合適的環(huán)境下做測聽實(shí)驗(yàn),獲取人耳主觀聽覺感知特性;

步驟(3.1.5.3),使用公式(2)和步驟(3.1.5.1)中的賦值,計(jì)算步驟(3.1.5.2)中測聽詞表內(nèi)各測試項(xiàng)與其混淆項(xiàng)間的感知距離;

步驟(3.1.5.4),分析步驟(3.1.5.2)中所得實(shí)驗(yàn)結(jié)果,統(tǒng)計(jì)受試者誤聽的測試項(xiàng)與其混淆項(xiàng)具體內(nèi)容;

步驟(3.1.5.5),感知距離描述音節(jié)間區(qū)分程度,距離越遠(yuǎn)越易區(qū)分,因此距離越遠(yuǎn)混淆概率越低,對比步驟(3.1.5.3)中所得感知距離與步驟(3.1.5.4)中所得誤聽情況,計(jì)算其中誤聽項(xiàng)與其測試項(xiàng)的感知距離,以及該項(xiàng)誤聽項(xiàng)被誤聽的概率,統(tǒng)計(jì)兩者不成反比的項(xiàng)目總數(shù),記為E;

步驟(3.1.5.6),計(jì)算步驟(3.1.5.5)中所得項(xiàng)目總數(shù)E中,聲母混淆占有項(xiàng)數(shù)A,及其比例a=A/E,韻母混淆占有項(xiàng)數(shù)B,及其比例b=B/E,聲調(diào)混淆占有項(xiàng)C,及其比例c=C/E;

步驟(3.1.5.7),調(diào)整α,β,γ,使得滿足:

即:

由此,得到代表單音節(jié)特征向量的加權(quán)矢量,繼而得到音節(jié)間感知距離。

優(yōu)選地,所述約束矩陣A依次按照以下步驟獲?。?/p>

步驟(3.2.6.1),對步驟(3.2.1)中每一個(gè)聽感分類,計(jì)算其類內(nèi)各聲母、韻母、聲調(diào)間的感知距離,并計(jì)算其平均值;

步驟(3.2.6.2),計(jì)算步驟(3.2.1)中每兩個(gè)聽感分類間各聲母、韻母、聲調(diào)的感知距離,并取其平均值作為對應(yīng)兩個(gè)聽感分類間的感知距離;

步驟(3.2.6.3),對每一個(gè)聲母、韻母聽感分類,該類的約束值初始賦值為步驟(3.2.6.1)中所得類內(nèi)平均距離與步驟(3.2.6.2)中所得類間平均距離的線性關(guān)系擬合結(jié)果;對每一個(gè)聲調(diào)的約束值初始賦值為

步驟(3.2.6.4),將聲母、韻母、聲調(diào)的聽感分類約束值的初始賦值代入步驟(3.1.3)中單音節(jié)感知加權(quán)矢量公式中,計(jì)算出不同聽感分類(聲韻調(diào))搭配所對應(yīng)的約束值,組成初始約束矩陣A;

步驟(3.2.6.5),使用初始約束矩陣A,計(jì)算混淆項(xiàng),構(gòu)成校正測聽詞表;

步驟(3.2.6.6),對比步驟(3.2.6.5)中所得詞表與已被臨床驗(yàn)證的測聽詞表,分析兩者在混淆項(xiàng)中聲母、韻母、聲調(diào)混淆所占比例;

步驟(3.2.6.7),調(diào)整步驟(3.2.6.3)中的線性關(guān)系與重復(fù)步驟(3.2.6.4)至步驟(3.2.6.6),使得步驟(3.2.6.6)中兩者比例一致,各測試項(xiàng)的混淆項(xiàng)計(jì)算完畢。

優(yōu)選地,所述步驟(3.3)生成全局最優(yōu)的測聽詞表具體包括以下步驟:

步驟(3.3.1),計(jì)算步驟(3.2)中所得每個(gè)測試組的感知距離平均值記為Pj,計(jì)算方法如步驟(3.2.3)所述:

其中,pi為各混淆項(xiàng)與測試項(xiàng)間的感知距離,i為每個(gè)測試組中混淆項(xiàng)個(gè)數(shù);

步驟(3.3.2),計(jì)算步驟(3.3.1)中所得Pj的平均值:

其中,H為詞表長度,即此表內(nèi)測試組的個(gè)數(shù);

步驟(3.3.3),設(shè)定步驟(3.2)中所得單張?jiān)~表內(nèi)各測試組感知距離之間差值閾值ΔPj≤ε',其中,ε'為約束參數(shù);

步驟(3.3.4),比較步驟(3.3.1)中所得各組Pj,與步驟(3.3.2)中所得若ΔPj≤ε',則不必對該測試組進(jìn)行調(diào)整,否則:

若則刪掉該測試組中Pj較小的混淆項(xiàng),用步驟(3.2)計(jì)算替換項(xiàng);

若則刪掉該測試組中Pj較大的混淆項(xiàng),用步驟(3.2)計(jì)算替換項(xiàng);

步驟(3.3.5),設(shè)定各詞表的平均感知距離PDk為各測試組平均距離的平均值:

步驟(3.3.6),計(jì)算詞表集的感知距離平均值:

其中,K為詞表集內(nèi)詞表的張數(shù);

步驟(3.3.7),設(shè)定步驟(3.2)中所得詞表每兩張?jiān)~表間感知距離差值閾值為其中,ε"為約束參數(shù);

步驟(3.3.8),比較步驟(3.3.5)中所得各組PDk,與步驟(3.3.6)中所得若則不必對該詞表進(jìn)行調(diào)整,否則:

若則刪掉該詞表中PDk較小的測試組混淆項(xiàng),用步驟(3.2)計(jì)算替換項(xiàng);

若則刪掉該詞表中PDk較大的測試組混淆項(xiàng),用步驟(3.2)計(jì)算替換項(xiàng);

步驟(3.3.9),重復(fù)執(zhí)行步驟(3.3.8),直至步驟(3.3.8)中各詞表感知距離平均值與詞表集感知距離平均值之差小于預(yù)先設(shè)定的閾值ε",從而計(jì)算出一個(gè)全局最優(yōu)的閉合式測聽詞表;

至此,全局最優(yōu)的閉合式漢語言語測聽詞表已經(jīng)構(gòu)建完畢。

優(yōu)選地,所述步驟(4)的受試者在相對安靜環(huán)境下進(jìn)行言語測聽具體包括以下步驟:

步驟(4.1),選定言語測聽運(yùn)行的系統(tǒng)平臺,選定閉合式言語測聽系統(tǒng),并將步驟(1)至步驟(3)的閉合式言語測聽詞表自動(dòng)生成算法嵌入至該系統(tǒng);

步驟(4.2),系統(tǒng)根據(jù)步驟(4.1)中所得,生成一套閉合式言語測聽詞表,以及與其對應(yīng)的測試項(xiàng)語音文件;

步驟(4.3),由受試者選擇信號聲強(qiáng),系統(tǒng)隨機(jī)選擇一張?jiān)~表;

步驟(4.4),若該詞表內(nèi)所有測試組都已經(jīng)被測試過,則轉(zhuǎn)步驟(4.3),否則隨機(jī)選擇詞表內(nèi)一個(gè)未測組進(jìn)行測試,并標(biāo)記該組為已測;

步驟(4.5),言語測聽系統(tǒng)向受試者播放一個(gè)測試項(xiàng),同時(shí)在可視化界面上向受試者展示該測試項(xiàng)所在的測試組(測試項(xiàng)+混淆項(xiàng));

步驟(4.6),受試者根據(jù)每一個(gè)信號音,從由測試項(xiàng)和混淆項(xiàng)組成的一個(gè)測試組中選出自己判斷的單音節(jié),作為測聽反饋;

步驟(4.7),系統(tǒng)自動(dòng)記錄受試者的反饋,記錄信息包括聽辨正誤,測試項(xiàng)聲母、韻母、聲調(diào),以及受試者選擇項(xiàng)目的聲母、韻母、聲調(diào);

步驟(4.8),循環(huán)重復(fù)步驟(4.5)至步驟(4.7),直至測試集中測試項(xiàng)均測試完畢。

優(yōu)選地,所述步驟(6)言語測聽系統(tǒng)進(jìn)行測聽結(jié)果計(jì)算具體包括以下步驟:

步驟(6.1),將步驟(4)中得到的測聽反饋信息,即受試者選擇的單音節(jié),與詞表中的測試項(xiàng)做對比;

步驟(6.2),計(jì)算步驟(6.1)中聲母測聽正確項(xiàng)數(shù),記為RC,韻母測聽正確項(xiàng)數(shù),記為RV,聲調(diào)測聽正確項(xiàng)數(shù),記為RT;

步驟(6.3),計(jì)算測聽積分R:

其中,α,β,γ為步驟(3.1)中單音節(jié)感知向量的權(quán)重系數(shù),由此可得此次聽力測試的評估結(jié)果。

本發(fā)明提出了一種閉合式言語測聽詞表的設(shè)計(jì)方法與應(yīng)用,所述閉合式言語測聽詞表的設(shè)計(jì)方法與應(yīng)用具有以下技術(shù)效果:

1)構(gòu)建言語信號的聲學(xué)特征與人耳主觀感知特性之間的可計(jì)算模型,提出音節(jié)層面的感知距離計(jì)算方法;

2)基于感知距離計(jì)算閉合式測聽中混淆項(xiàng),從音節(jié)層面度量各候選項(xiàng)間的聽感關(guān)系,使測聽詞表具有更高的等價(jià)性;

3)閉合式言語測聽詞表自動(dòng)生成算法,自動(dòng)實(shí)現(xiàn)測聽詞表的全局最優(yōu),具有更高的效率、測試信度與等價(jià)性;

4)漢語言語測聽系統(tǒng)的測試方法可自動(dòng)生成閉合式測聽詞表,并設(shè)計(jì)了一套基于多維特征的計(jì)分規(guī)則,能提高測試結(jié)果的信度。

所述閉合式言語測聽詞表的設(shè)計(jì)方法與應(yīng)用克服了已有言語測聽中測試周期與詞表長度之間難以平衡的矛盾以及測試信度偏低的缺陷,同時(shí)通過評估詞表清晰度及測聽過程中受試者對混淆項(xiàng)的判斷,提高測試結(jié)果的信度。

附圖說明

圖1是本發(fā)明實(shí)施例的計(jì)算機(jī)系統(tǒng)結(jié)構(gòu)示意圖。

圖2是本發(fā)明實(shí)施例的閉合式測聽詞表的計(jì)算流程圖。

圖3是本發(fā)明實(shí)施例的音節(jié)間感知距離計(jì)算流程圖。

圖4是本發(fā)明實(shí)施例的混淆項(xiàng)選取流程圖。

圖5是本發(fā)明實(shí)施例的閉合式言語測聽流程。

具體實(shí)施方式

為使本發(fā)明實(shí)施的目的、技術(shù)方案和優(yōu)點(diǎn)更加清楚,下面將結(jié)合本發(fā)明實(shí)施例中的附圖,對本發(fā)明實(shí)施例中的技術(shù)方案進(jìn)行更加詳細(xì)的描述。在附圖中,自始至終相同或類似的標(biāo)號表示相同或類似的元件或具有相同或類似功能的元件。所描述的實(shí)施例是本發(fā)明一部分實(shí)施例,而不是全部的實(shí)施例。下面通過參考附圖描述的實(shí)施例是示例性的,旨在用于解釋本發(fā)明,而不能理解為對本發(fā)明的限制。基于本發(fā)明中的實(shí)施例,本領(lǐng)域普通技術(shù)人員在沒有作出創(chuàng)造性勞動(dòng)前提下所獲得的所有其他實(shí)施例,都屬于本發(fā)明保護(hù)的范圍。下面結(jié)合附圖對本發(fā)明的實(shí)施例進(jìn)行詳細(xì)說明。

如圖1所示,計(jì)算機(jī)系統(tǒng)包括中央處理器(CPU)、視頻圖像顯示設(shè)備、聲音輸出設(shè)備,也包括點(diǎn)擊/觸摸采集設(shè)備。實(shí)施本發(fā)明的軟件存儲(chǔ)在內(nèi)存中,CPU可以對內(nèi)存進(jìn)行存取,并進(jìn)行相應(yīng)的指令,以獲得本發(fā)明的實(shí)施結(jié)果。

如圖2所示,一種閉合式測聽詞表計(jì)算流程,輸入為單音節(jié),輸出即為全局最優(yōu)的閉合式測聽詞表,步驟包括:

步驟(1),設(shè)定一套詞表中含有20張?jiān)~表,每張?jiān)~表內(nèi)含20個(gè)測試組(1個(gè)測試項(xiàng)+3個(gè)混淆項(xiàng)),亦即,詞表長度為20;

步驟(2),按照已有技術(shù)[1],依據(jù)簡短、音位平衡、常用、覆蓋、等價(jià)性等原則,編制20張?jiān)~表中的20個(gè)測試項(xiàng);

步驟(3),依次按以下步驟計(jì)算閉合式測聽詞表:

步驟(3.1),依次按以下步驟計(jì)算音節(jié)間的感知距離:

步驟(3.1.1),提取聲母聲學(xué)特征參數(shù):聲母過零率參數(shù)ZCR(5維)、聲母MFCC參數(shù)M(12維)、以及聲母Bark頻帶能量比率參數(shù)B(21維)。由此得到一個(gè)38維特征向量,作為聲母的特征向量;提取韻母聲學(xué)特征參數(shù):LPC譜曲線積分(9維),作為韻母的特征向量;提取聲調(diào)的聲學(xué)特征參數(shù):基頻包絡(luò)f0中均值、最小值、前置最大值、后置最大值、前置斜率、后置斜率6維向量,作為聲調(diào)的感知特征向量;

步驟(3.1.2),對步驟(3.1.1)中得到的聲學(xué)特征參數(shù)按下式進(jìn)行歸一化處理:

其中,xnew是歸一化處理后的包括ZCR、Mu、Bi、LPC、f0在內(nèi)的各聲學(xué)特征參數(shù),xsource是歸一化處理之前的聲學(xué)特征參數(shù),Xsource為同一維度i的未處理時(shí)的聲學(xué)特征參數(shù)集合;

步驟(3.1.3),由聲母感知特征向量C,韻母感知特征向量V,聲調(diào)感知特征向量T,以及權(quán)重,計(jì)算單音節(jié)的聲學(xué)特征感知向量:

S=αC+βV+γT

其中,α,β,γ分別為聲韻調(diào)的特征權(quán)重。α=0.1,β=0.65,γ=0.25。C為包括ZCR、Mu、Bi在內(nèi)的38維特征向量;V為9維LPC譜曲線積分系數(shù);T為6維基頻包絡(luò)組成的特征向量。

步驟(3.1.4),計(jì)算任意兩個(gè)單音節(jié)的聲學(xué)特征感知向量的歐氏距離,作為任意兩個(gè)單音節(jié)之間的感知距離:

步驟(3.2),從測試項(xiàng)的聲韻調(diào)所屬的感知分類中,分別提取聲母、韻母、聲調(diào)并組合成單音節(jié),作為候選項(xiàng),計(jì)算出混淆項(xiàng),流程如圖3所示:

步驟(3.2.1),對于每一個(gè)語音聽感分類C(Class),類中項(xiàng)總數(shù)為|C|,類中各項(xiàng)I(Items)按照漢語拼音順序循環(huán)排序:I1,I2,...,I|C|,I|C+1|,I|C+2|,...(I|C+1|=I1);

步驟(3.2.2),生成隨機(jī)種子矩陣:

其中rsi,1、rsi,2、rsi,3分別表示第i個(gè)混淆項(xiàng)的聲母、韻母、聲調(diào)的起始選位置(i=1,2,3)。rsi,j為[1,100]區(qū)間內(nèi)的隨機(jī)整數(shù)(i,j=1,2,3)。

步驟(3.2.3),計(jì)算候選項(xiàng)與測試項(xiàng)間的感知距離:

其中,Si=αCi+βVi+γTi為各混淆項(xiàng)的單音節(jié)特征向量,S0=αC0+βV0+γT0為該測試組內(nèi)測試項(xiàng)的單音節(jié)特征向量;

若滿足約束條件,即該測試項(xiàng)的混淆項(xiàng)計(jì)算完畢,約束條件為:

其中,pi為每個(gè)混淆項(xiàng)與其對應(yīng)的測試項(xiàng)的感知距離;為pi的平均值;consMTRX為感知距離約束矩陣;ε=0.1,δ=0.1。約束矩陣consMTRX詳見下表。

若不滿足約束條件,按以下步驟進(jìn)行:

步驟(3.2.4),保持聲母和聲調(diào)不變,將rsj,1+1,返回步驟(3.2.2)重新確定韻母,再進(jìn)行步驟(3.2.3);

步驟(3.2.5),若韻母類中遍歷一遍仍選不出符合條件(存在且不重復(fù))的備選項(xiàng),則保持聲調(diào)不變,將rsi,2+1,返回步驟(3.2.2)重新確定聲母后繼續(xù)循環(huán)執(zhí)行步驟(3.2.3)至步驟(3.2.4);

步驟(3.2.6),若聲韻母類中各種組合遍歷一遍仍選不出符合條件的備選項(xiàng),則保持聲調(diào)不變,選擇相鄰類中的聲母繼續(xù)循環(huán)執(zhí)行步驟(3.2.3)至步驟(3.2.5)。

至此,各測試項(xiàng)的混淆項(xiàng)計(jì)算完畢;

步驟(3.3),依次按照以下步驟生成全局最優(yōu)的測聽詞表:

步驟(3.3.1),計(jì)算步驟(3.2)中所得每個(gè)測試組的感知距離平均值記為Pj,計(jì)算方法如步驟(3.2.3)所述:

其中,pi為各混淆項(xiàng)與測試項(xiàng)間的感知距離,i=3為每個(gè)測試組中混淆項(xiàng)個(gè)數(shù);

步驟(3.3.2),計(jì)算步驟(3.3.1)中所得Pj的平均值:

其中,H=20為詞表長度,即此表內(nèi)測試組的個(gè)數(shù);

步驟(3.3.3),設(shè)定步驟(3.2)中所得單張?jiān)~表內(nèi)各測試組感知距離之間差值閾值ΔPj≤ε',其中,ε'=0.1為約束參數(shù);

步驟(3.3.4),比較步驟(3.3.1)中所得各組Pj,與步驟(3.3.2)中所得若ΔPj≤ε',則不必對該測試組進(jìn)行調(diào)整,否則:

若則刪掉該測試組中Pj較小的混淆項(xiàng),用步驟(3.2)計(jì)算替換項(xiàng);

若則刪掉該測試組中Pj較大的混淆項(xiàng),用步驟(3.2)計(jì)算替換項(xiàng);

步驟(3.3.5),設(shè)定各詞表的平均感知距離PDk為各測試組平均距離的平均值:

其中,H=20為詞表長度;

步驟(3.3.6),計(jì)算詞表集的感知距離平均值:

其中,K=20為詞表集內(nèi)詞表的張數(shù);

步驟(3.3.7),設(shè)定步驟(3.2)中所得詞表每兩張?jiān)~表間感知距離差值閾值為其中,ε"=0.1為約束參數(shù);

步驟(3.3.8),比較步驟(3.3.5)中所得各組PDk,與步驟(3.3.6)中所得若則不必對該詞表進(jìn)行調(diào)整,否則:

若則刪掉該詞表中PDk較小的測試組混淆項(xiàng),用步驟(3.2)計(jì)算替換項(xiàng);

若則刪掉該詞表中PDk較大的測試組混淆項(xiàng),用步驟(3.2)計(jì)算替換項(xiàng);

步驟(3.3.9),重復(fù)執(zhí)行步驟(3.3.8),直至步驟(3.3.8)中各詞表感知距離平均值與詞表集感知距離平均值之差小于預(yù)先設(shè)定的閾值ε",從而計(jì)算出一個(gè)全局最優(yōu)的閉合式測聽詞表;

至此,全局最優(yōu)的閉合式漢語言語測聽詞表已經(jīng)構(gòu)建完畢;

步驟(4),受試者在相對安靜環(huán)境下按以下步驟進(jìn)行言語測聽,流程如圖5所示:

步驟(4.1),選定言語測聽運(yùn)行的系統(tǒng)平臺為iPad2,選定閉合式言語測聽系統(tǒng)為“漢語言語測聽系統(tǒng)”,并將步驟(1)至步驟(3)的閉合式言語測聽詞表自動(dòng)生成算法潛入至該系統(tǒng);

步驟(4.2),系統(tǒng)根據(jù)步驟(4.1)中所得,生成一套閉合式言語測聽詞表,以及與其對應(yīng)的測試項(xiàng)語音文件;

步驟(4.3),由受試者選擇信號聲強(qiáng),系統(tǒng)隨機(jī)選擇一張?jiān)~表;

步驟(4.4),若該詞表內(nèi)所有測試組都已經(jīng)被測試過,則轉(zhuǎn)步驟(4.3),否則隨機(jī)選擇詞表內(nèi)一個(gè)未測組進(jìn)行測試,并標(biāo)記該組為已測;

步驟(4.5),言語測聽系統(tǒng)向受試者播放一個(gè)測試項(xiàng),同時(shí)在可視化界面上向受試者展示該測試項(xiàng)所在的測試組(測試項(xiàng)+混淆項(xiàng));

步驟(4.6),受試者根據(jù)每一個(gè)信號音,從由測試項(xiàng)和混淆項(xiàng)組成的一個(gè)測試組中選出自己判斷的單音節(jié),作為測聽反饋;

步驟(4.7),系統(tǒng)自動(dòng)記錄受試者的反饋,記錄信息包括聽辨正誤,測試項(xiàng)聲母、韻母、聲調(diào),以及受試者選擇項(xiàng)目的聲母、韻母、聲調(diào);

步驟(4.8),循環(huán)重復(fù)步驟(4.5)至步驟(4.7),直至測試集中測試項(xiàng)均測試完畢;

步驟(5),測試結(jié)束;

步驟(6),言語測聽系統(tǒng)按以下步驟進(jìn)行測聽結(jié)果計(jì)算:

步驟(6.1),將步驟(4)中得到的測聽反饋信息,即受試者選擇的單音節(jié),與詞表中的測試項(xiàng)做對比;

步驟(6.2),計(jì)算步驟(6.1)中聲母測聽正確項(xiàng)數(shù),記為RC,韻母測聽正確項(xiàng)數(shù),記為RV,聲調(diào)測聽正確項(xiàng)數(shù),記為RT;

步驟(6.3),計(jì)算測聽積分R:

其中,α,β,γ為步驟(3.1)中單音節(jié)感知向量的權(quán)重系數(shù),即α=0.1,β=0.65,γ=0.25,由此可得此次聽力測試的評估結(jié)果;

至此,本發(fā)明中閉合式漢語言語測聽詞表的應(yīng)用已經(jīng)構(gòu)建完畢。

最后需要指出的是:以上實(shí)施例僅用以說明本發(fā)明的技術(shù)方案,而非對其限制。盡管參照前述實(shí)施例對本發(fā)明進(jìn)行了詳細(xì)的說明,本領(lǐng)域的普通技術(shù)人員應(yīng)當(dāng)理解:其依然可以對前述各實(shí)施例所記載的技術(shù)方案進(jìn)行修改,或者對其中部分技術(shù)特征進(jìn)行等同替換;而這些修改或者替換,并不使相應(yīng)技術(shù)方案的本質(zhì)脫離本發(fā)明各實(shí)施例技術(shù)方案的精神和范圍。

當(dāng)前第1頁1 2 3 
網(wǎng)友詢問留言 已有0條留言
  • 還沒有人留言評論。精彩留言會(huì)獲得點(diǎn)贊!
1