技術(shù)編號(hào)：6372630
提示：您尚未登錄，請(qǐng)點(diǎn) 登 陸 后下載，如果您還沒(méi)有賬戶請(qǐng)點(diǎn) 注 冊(cè) ，登陸完成后，請(qǐng)刷新本頁(yè)查看技術(shù)詳細(xì)信息。本發(fā)明涉及搜索引擎中的文本消重，特別涉及。背景技術(shù)文本消重是搜索引擎中基本需求之一。目前常用的消重方法有基于中心詞的消重方法，和針對(duì)全部文本或部分文本進(jìn)行哈希計(jì)算消重等。目前常用的手段是基于中心詞的消重方法。提取文本中的中心詞，然后利用中心詞進(jìn)行消重，這樣文本中即使進(jìn)行了一定內(nèi)容的修改，只要中心詞沒(méi)有改變，就可以發(fā)現(xiàn)是重復(fù)內(nèi)容。 但是基于中心詞的消重方法缺點(diǎn)是明顯的，很容易把原本無(wú)關(guān)的文章判定為重復(fù)比如在一些專業(yè)類的文章中，中心詞消重往往錯(cuò)誤率比較高。如體...
注意：該技術(shù)已申請(qǐng)專利，請(qǐng)尊重研發(fā)人員的辛勤研發(fā)付出，在未取得專利權(quán)人授權(quán)前，僅供技術(shù)研究參考不得用于商業(yè)用途。
該專利適合技術(shù)人員進(jìn)行技術(shù)研發(fā)參考以及查看自身技術(shù)是否侵權(quán)，增加技術(shù)思路，做技術(shù)知識(shí)儲(chǔ)備，不適合論文引用。
請(qǐng)注意，此類技術(shù)沒(méi)有源代碼，用于學(xué)習(xí)研究技術(shù)思路。