技術(shù)編號(hào):6478643
提示:您尚未登錄,請(qǐng)點(diǎn) 登 陸 后下載,如果您還沒(méi)有賬戶請(qǐng)點(diǎn) 注 冊(cè) ,登陸完成后,請(qǐng)刷新本頁(yè)查看技術(shù)詳細(xì)信息。本發(fā)明通常涉及詞匯的獲取以及識(shí)別未分段文本的詞(word)邊界,并且尤其涉及使用統(tǒng)計(jì)方法自動(dòng)地分段中文文本的方法和系統(tǒng)。背景技術(shù) 與西方的歐洲語(yǔ)言不同,亞洲語(yǔ)言,尤其是中國(guó)語(yǔ)言,通常沒(méi)有明確的詞邊界標(biāo)記在正常的句子中。為輸入句子找到詞邊界的任務(wù)被稱為分段化。傳統(tǒng)的分段化算法依賴于基于規(guī)則的知識(shí),包括預(yù)定義的字典,以便尋找詞邊界。這些方案的缺點(diǎn)是對(duì)新詞的處理能力很差,并且在存在歧義時(shí)缺乏用于選擇最佳邊界序列的數(shù)學(xué)模型。另外,已經(jīng)提出了各種基于統(tǒng)計(jì)的分段化算法...
注意:該技術(shù)已申請(qǐng)專利,請(qǐng)尊重研發(fā)人員的辛勤研發(fā)付出,在未取得專利權(quán)人授權(quán)前,僅供技術(shù)研究參考不得用于商業(yè)用途。
該專利適合技術(shù)人員進(jìn)行技術(shù)研發(fā)參考以及查看自身技術(shù)是否侵權(quán),增加技術(shù)思路,做技術(shù)知識(shí)儲(chǔ)備,不適合論文引用。
請(qǐng)注意,此類技術(shù)沒(méi)有源代碼,用于學(xué)習(xí)研究技術(shù)思路。