一種基于屏幕顯示的助讀方法及裝置制造方法
【專(zhuān)利摘要】本發(fā)明涉及輔助教學(xué)【技術(shù)領(lǐng)域】，尤其涉及一種基于屏幕顯示的助讀方法及裝置。本發(fā)明所述的方法，只要獲取到文字圖像，即可在本發(fā)明所述的裝置上顯示文字圖像和文字圖像中的文字對(duì)應(yīng)的第一助讀信息；當(dāng)本發(fā)明所述的裝置的顯示模塊被觸碰時(shí)，能展示文字圖像中的文字對(duì)應(yīng)的第二助讀信息；本發(fā)明不需要專(zhuān)門(mén)的助讀設(shè)備，不需要隨時(shí)準(zhǔn)備課本，利用用戶(hù)現(xiàn)有的電子設(shè)備即可實(shí)現(xiàn)隨時(shí)隨地的助讀，使用戶(hù)的助讀不再受限于專(zhuān)門(mén)的助讀設(shè)備和課本，降低了用戶(hù)的使用門(mén)檻，能滿足用戶(hù)隨時(shí)隨地隨心的使用需求。
【專(zhuān)利說(shuō)明】—種基于屏幕顯示的助讀方法及裝置【技術(shù)領(lǐng)域】
[0001]本發(fā)明涉及輔助教學(xué)【技術(shù)領(lǐng)域】，尤其涉及一種基于屏幕顯示的助讀方法及裝置?！颈尘凹夹g(shù)】
[0002]學(xué)齡前和小學(xué)階段的孩子認(rèn)字不多，同時(shí)標(biāo)注有拼音的書(shū)本相對(duì)較少，這種情況對(duì)孩子的海量閱讀造成障礙；因?yàn)楹⒆铀J(rèn)知的詞語(yǔ)量少，在閱讀的中途碰到生詞時(shí)，只能通過(guò)問(wèn)父母或者查字典的方式來(lái)解決，但是問(wèn)父母或者查字典的方式卻打斷了孩子閱讀的連貫性，使孩子的閱讀效率大大降低。除了閱讀會(huì)遭遇生詞，學(xué)齡前和小學(xué)階段的孩子也會(huì)遭遇朗讀上的障礙，眾所周知，有感情地朗讀文章是語(yǔ)文學(xué)習(xí)的重要的要求，而書(shū)本上只有文字，孩子在朗讀時(shí)，遇到不理解的句子，無(wú)法準(zhǔn)確地停頓、斷句，不會(huì)正確地運(yùn)用升降調(diào)、輕重音富有感情地朗讀，導(dǎo)致朗讀表現(xiàn)平庸。
[0003]現(xiàn)有的幫助孩子閱讀和朗讀的方法，采用投影的方式。采用投影方式的方法，必須依靠投影裝置，而且在使用投影裝置時(shí)，必須要用課本配合才可以。這種投影助讀的方法，需要專(zhuān)門(mén)的投影裝置和隨時(shí)準(zhǔn)備著的課本，無(wú)法滿足孩子隨時(shí)隨地隨心的使用需求。

【發(fā)明內(nèi)容】

[0004]鑒于此，本發(fā)明提出一種基于屏幕顯示的助讀方法及裝置，該方法不需要專(zhuān)門(mén)的助讀設(shè)備，不需要隨時(shí)準(zhǔn)備課本，利用用戶(hù)現(xiàn)有的電子設(shè)備即可實(shí)現(xiàn)隨時(shí)隨地的助讀。
[0005]本發(fā)明技術(shù)方案: [0006]一種基于屏幕顯示的助讀方法，包括:
[0007]獲取文字圖像，識(shí)別所述文字圖像中的文字，調(diào)取所述文字對(duì)應(yīng)的第一助讀信息；
[0008]將所述文字圖像與所述第一助讀信息合成新圖像，在屏幕上顯示所述新圖像；
[0009]判斷用戶(hù)是否通過(guò)觸屏操作對(duì)顯示的新圖像中的內(nèi)容有點(diǎn)選；
[0010]若有，則識(shí)別出被點(diǎn)選的內(nèi)容，展示所述內(nèi)容對(duì)應(yīng)的第二助讀信息。
[0011]進(jìn)一步地，所述文字圖像包括行文字圖像、段文字圖像、章節(jié)文字圖像、頁(yè)文字圖像中的一種或多種，當(dāng)所述文字圖像為頁(yè)文字圖像時(shí)，所述獲取文字圖像包括獲取一頁(yè)文字圖像或連續(xù)獲取多頁(yè)文字圖像。
[0012]進(jìn)一步地，若所述多頁(yè)文字圖像包括順序頁(yè)碼，則多頁(yè)文字圖像按所述順序頁(yè)碼排序并存儲(chǔ)；若所述多頁(yè)文字圖像不包括順序頁(yè)碼，則獲取用戶(hù)對(duì)不包括順序頁(yè)碼的多頁(yè)文字圖像所編輯的順序頁(yè)碼，以使多頁(yè)文字圖像具有對(duì)應(yīng)的順序頁(yè)碼，多頁(yè)文字圖像按所述順序頁(yè)碼排序并保存。
[0013]進(jìn)一步地，將所述文字圖像與所述第一助讀信息合成新圖像包括:
[0014]若所述多頁(yè)文字圖像包括順序頁(yè)碼，則將多頁(yè)文字圖像與所述第一助讀信息合成新圖像，所述新圖像按所述順序頁(yè)碼排序并存儲(chǔ)；
[0015]若所述多頁(yè)文字圖像不包括順序頁(yè)碼，則將多頁(yè)文字圖像與所述第一助讀信息合成新圖像，并獲取用戶(hù)對(duì)不包括順序頁(yè)碼的多頁(yè)文字圖像所編輯的順序頁(yè)碼，所述新圖像按所述順序頁(yè)碼排序并存儲(chǔ)。
[0016]進(jìn)一步地，所述文字對(duì)應(yīng)的第一助讀信息為文字拼音信息；
[0017]所述將所述文字圖像與所述第一助讀信息合成新圖像，具體為:在所述文字圖像中文字行距間空白處合成所述文字拼音信息，以得到新圖像。
[0018]進(jìn)一步地，所述展示所述內(nèi)容對(duì)應(yīng)的第二助讀信息，包括:在屏幕上所述內(nèi)容的旁邊位置處顯示所述內(nèi)容的釋義和用法，播放所述釋義和用法的語(yǔ)音信息。
[0019]進(jìn)一步地，所述文字對(duì)應(yīng)的第一助讀信息為所述文字的升降調(diào)、輕重音和停頓斷句的標(biāo)記符號(hào)；
[0020]所述將所述文字圖像與所述第一助讀信息合成新圖像，具體為:在所述文字圖像中文字行距間空白處合成所述文字的升降調(diào)、輕重音和停頓斷句的標(biāo)記符號(hào)，以得到新圖像。
[0021]進(jìn)一步地，所述展示所述內(nèi)容對(duì)應(yīng)的第二助讀信息，包括:播放所述內(nèi)容的標(biāo)準(zhǔn)語(yǔ)音信息，并根據(jù)所述標(biāo)準(zhǔn)語(yǔ)音信息的節(jié)奏，在屏幕上逐字地顯示出所述內(nèi)容的播報(bào)進(jìn)度標(biāo)記。
[0022]進(jìn)一步地，所述播報(bào)進(jìn)度標(biāo)記為文字下劃線、文字底圖顏色或者文字自身的顏色改變。
[0023]進(jìn)一步地,所述方法還包括:
[0024]實(shí)時(shí)采集外部聲音；
[0025]判斷所述外部聲音是否為朗讀發(fā)聲，如果是，則判斷所述朗讀發(fā)聲是否正確；否貝U，繼續(xù)實(shí)時(shí)采集外部聲音；
[0026]判斷所述朗讀發(fā)聲是否正確，如果是，則在屏幕上顯示朗讀正確的符號(hào)；否則，顯示朗讀錯(cuò)誤的符號(hào)，并對(duì)朗讀錯(cuò)誤的文字進(jìn)行標(biāo)記；
[0027]判斷朗讀錯(cuò)誤的文字的標(biāo)記是否被點(diǎn)選，若是，則播放所述朗讀錯(cuò)誤的文字對(duì)應(yīng)的標(biāo)準(zhǔn)語(yǔ)首/[目息。
[0028]進(jìn)一步地，所述判斷所述朗讀發(fā)聲是否正確，具體為:將朗讀發(fā)聲的發(fā)音、升降調(diào)、輕重音和停頓斷句與預(yù)置數(shù)據(jù)庫(kù)中相應(yīng)的標(biāo)準(zhǔn)內(nèi)容進(jìn)行比對(duì)，當(dāng)所述朗讀發(fā)聲的發(fā)音、升降調(diào)、輕重音和停頓斷句均與預(yù)置數(shù)據(jù)庫(kù)中相應(yīng)的標(biāo)準(zhǔn)內(nèi)容相同時(shí)，則所述朗讀發(fā)聲正確；否則，所述朗讀發(fā)聲不正確。
[0029]一種基于屏幕顯示的助讀裝置，包括:
[0030]拍攝模塊，用于獲取文字圖像；
[0031]數(shù)據(jù)處理模塊，用于識(shí)別所述文字圖像中的文字，調(diào)取所述文字對(duì)應(yīng)的第一助讀信息；用于將所述文字圖像與所述第一助讀信息合成新圖像；
[0032]顯示模塊，用于顯示所述新圖像；
[0033]數(shù)據(jù)處理模塊，用于判斷用戶(hù)是否通過(guò)觸屏操作對(duì)顯示的新圖像中的內(nèi)容有點(diǎn)選;
[0034]展示模塊，用于當(dāng)判斷用戶(hù)通過(guò)觸屏操作對(duì)顯示的新圖像中的內(nèi)容有點(diǎn)選時(shí)，展示所述內(nèi)容對(duì)應(yīng)的第二助讀信息。
[0035]進(jìn)一步地，所述文字對(duì)應(yīng)的第一助讀信息為文字拼音信息；[0036]所述將所述文字圖像與所述第一助讀信息合成新圖像，具體為:在所述文字圖像中文字行距間空白處合成所述文字拼音信息，以得到新圖像。
[0037]進(jìn)一步地，所述展示所述內(nèi)容對(duì)應(yīng)的第二助讀信息，包括:在顯示模塊上所述內(nèi)容的旁邊位置處顯示所述內(nèi)容的釋義和用法，播放所述釋義和用法的語(yǔ)音信息。
[0038]進(jìn)一步地，所述文字對(duì)應(yīng)的第一助讀信息為所述文字的升降調(diào)、輕重音和停頓斷句的標(biāo)記符號(hào)；
[0039]所述將所述文字圖像與所述第一助讀信息合成新圖像，具體為:在所述文字圖像中文字行距間空白處合成所述文字的升降調(diào)、輕重音和停頓斷句的標(biāo)記符號(hào)，以得到新圖像。
[0040]進(jìn)一步地，所述展示所述內(nèi)容對(duì)應(yīng)的第二助讀信息，包括:播放所述內(nèi)容的標(biāo)準(zhǔn)語(yǔ)音信息，并根據(jù)所述標(biāo)準(zhǔn)語(yǔ)音信息的節(jié)奏，在顯示模塊上逐字地顯示出所述內(nèi)容的播報(bào)進(jìn)度標(biāo)記。
[0041]進(jìn)一步地，所述播報(bào)進(jìn)度標(biāo)記為文字下劃線、文字底圖顏色或者文字自身的顏色改變。
[0042]進(jìn)一步地，所述裝置還包括:
[0043]收音模塊，用于實(shí)時(shí)采集外部聲音；
[0044]數(shù)據(jù)處理模塊，用于判斷所述外部聲音是否為朗讀發(fā)聲，如果是，則判斷所述朗讀發(fā)聲是否正確；否則，繼續(xù)實(shí)時(shí)采集外部聲音；
[0045]顯示模塊，用于如果判斷所述朗讀發(fā)聲正確，則顯示朗讀正確的符號(hào)；如果判斷所述朗讀發(fā)聲不正確，則顯示朗讀錯(cuò)誤的符號(hào)，并對(duì)朗讀錯(cuò)誤的文字進(jìn)行標(biāo)記；
[0046]數(shù)據(jù)處理模塊，用于判斷朗讀錯(cuò)誤的文字的標(biāo)記是否被點(diǎn)選；
[0047]發(fā)音模塊，用于當(dāng)判斷朗讀錯(cuò)誤的文字的標(biāo)記被觸碰，則播放所述朗讀錯(cuò)誤的文字對(duì)應(yīng)的標(biāo)準(zhǔn)語(yǔ)音信息。
[0048]進(jìn)一步地，所述判斷所述朗讀發(fā)聲是否正確，具體為:將朗讀發(fā)聲的發(fā)音、升降調(diào)、輕重音和停頓斷句與預(yù)置數(shù)據(jù)庫(kù)中相應(yīng)的標(biāo)準(zhǔn)內(nèi)容進(jìn)行比對(duì)，當(dāng)所述朗讀發(fā)聲的發(fā)音、升降調(diào)、輕重音和停頓斷句均與預(yù)置數(shù)據(jù)庫(kù)中相應(yīng)的標(biāo)準(zhǔn)內(nèi)容相同時(shí)，則所述朗讀發(fā)聲正確；否則，所述朗讀發(fā)聲不正確。
[0049]本發(fā)明有益效果:
[0050]本發(fā)明所述的方法包括獲取文字圖像，識(shí)別所述文字圖像中的文字，調(diào)取所述文字對(duì)應(yīng)的第一助讀信息；將所述文字圖像與所述第一助讀信息合成新圖像，在屏幕上顯示所述新圖像；判斷用戶(hù)是否通過(guò)觸屏操作對(duì)顯示的新圖像中的內(nèi)容有點(diǎn)選；若有，則識(shí)別出被點(diǎn)選的內(nèi)容，展示所述內(nèi)容對(duì)應(yīng)的第二助讀信息。本發(fā)明所述的方法，只要獲取到文字圖像，即可在本發(fā)明所述的裝置上顯示文字圖像和文字圖像中的文字對(duì)應(yīng)的第一助讀信息；當(dāng)本發(fā)明所述的裝置的顯示模塊被觸碰時(shí)，能展示文字圖像中的文字對(duì)應(yīng)的第二助讀信息；本發(fā)明不需要專(zhuān)門(mén)的助讀設(shè)備，不需要隨時(shí)準(zhǔn)備課本，利用用戶(hù)現(xiàn)有的電子設(shè)備即可實(shí)現(xiàn)隨時(shí)隨地的助讀，使用戶(hù)的助讀不再受限于專(zhuān)門(mén)的助讀設(shè)備和課本，降低了用戶(hù)的使用門(mén)檻，能滿足用戶(hù)隨時(shí)隨地隨心的使用需求。
【專(zhuān)利附圖】

【附圖說(shuō)明】[0051]圖1是本發(fā)明一種基于屏幕顯示的助讀方法的第一流程圖。
[0052]圖2是本發(fā)明一種基于屏幕顯示的助讀方法的第二流程圖。
[0053]圖3是本發(fā)明一種基于屏幕顯示的助讀方法的第三流程圖。
[0054]圖4是本發(fā)明一種基于屏幕顯示的助讀方法的第四流程圖。
[0055]圖5是本發(fā)明一種基于屏幕顯示的助讀裝置的第一框圖。
[0056]圖6是本發(fā)明一種基于屏幕顯示的助讀裝置的第二框圖。
[0057]圖7是本發(fā)明一種助讀方法實(shí)施例中的注釋說(shuō)明A示意圖。
[0058]圖8是本發(fā)明一種助讀方法實(shí)施例中的注釋說(shuō)明B示意圖。
[0059]圖9是本發(fā)明一種助讀方法實(shí)施例中的注釋說(shuō)明C示意圖。
[0060]圖10是本發(fā)明一種助讀方法實(shí)施例中的注釋說(shuō)明D示意圖。
[0061]圖11是本發(fā)明一種助讀方法實(shí)施例中的注釋說(shuō)明E示意圖。
[0062]圖12是本發(fā)明一種助讀方法實(shí)施例中的注釋說(shuō)明F示意圖。
[0063]圖13是本發(fā)明一種助讀方法實(shí)施例中的注釋說(shuō)明G示意圖。
[0064]圖14是本發(fā)明一種助讀方法實(shí)施例中的注釋說(shuō)明H示意圖。
[0065]圖15是本發(fā)明一種助讀方法實(shí)施例中的注釋說(shuō)明I示意圖。
[0066]圖16是本發(fā)明一種助讀方法實(shí)施例中的注釋說(shuō)明J示意圖。
[0067]圖17是本發(fā)明一種助讀方法實(shí)施例中的注釋說(shuō)明K示意圖。
【具體實(shí)施方式】
[0068]為了更清楚地說(shuō)明本發(fā)明的技術(shù)方案，下面結(jié)合附圖，對(duì)本發(fā)明的技術(shù)方案做進(jìn)一步詳細(xì)的說(shuō)明。
[0069]本發(fā)明所述的方法不需要專(zhuān)門(mén)的助讀設(shè)備，不需要隨時(shí)準(zhǔn)備課本，利用用戶(hù)現(xiàn)有的電子設(shè)備即可實(shí)現(xiàn)隨時(shí)隨地的助讀，現(xiàn)有的電子設(shè)備包括各種智能終端，包括智能手機(jī)、平板電腦、移動(dòng)互聯(lián)網(wǎng)設(shè)備(MID, Mobile Internet Device)、圖書(shū)閱讀器、MP4 (MovingPicture Experts Group Audio Layer IV,動(dòng)態(tài)影像專(zhuān)家壓縮標(biāo)準(zhǔn)音頻層面4)播放器、筆記本電腦等。下面分別以閱讀模式和朗讀模式對(duì)本發(fā)明做詳細(xì)的說(shuō)明。
[0070]一、閱讀模式
[0071]閱讀模式下，根據(jù)用戶(hù)的使用習(xí)慣，有三種不同情況的實(shí)施例，分別為:1、“觸碰屏幕點(diǎn)選+不發(fā)聲”的閱讀；2、“不觸碰屏幕+發(fā)聲”的閱讀；3、“觸碰屏幕點(diǎn)選+發(fā)聲”的閱讀；以下就這三種方式分別做一說(shuō)明。
[0072]實(shí)施例一
[0073]參見(jiàn)圖1，圖1為閱讀模式下，用戶(hù)“觸碰屏幕點(diǎn)選+不發(fā)聲”的閱讀時(shí)，本發(fā)明方法的流程圖。
[0074]S101、獲取文字圖像，識(shí)別所述文字圖像中的文字，調(diào)取所述文字對(duì)應(yīng)的文字拼音信息。步驟SlOl中，獲取文字圖像的方式可以為通過(guò)用戶(hù)終端上的攝像頭拍攝課本上的文字圖像，或通過(guò)互聯(lián)網(wǎng)獲取選擇的文字圖像；所述文字圖像包括以行為單位的文字圖像、以段為單位的文字圖像、以章節(jié)為單位的文字圖像、以頁(yè)為單位的文字圖像中的一種或多種，當(dāng)所述文字圖像為以頁(yè)為單位的文字圖像時(shí)，所述獲取文字圖像包括獲取一頁(yè)文字圖像或連續(xù)獲取多頁(yè)文字圖像；當(dāng)獲取文字圖像為連續(xù)獲取多頁(yè)文字圖像時(shí):若所獲取到的多頁(yè)文字圖像包括順序頁(yè)碼，則多頁(yè)文字圖像按所述順序頁(yè)碼排序并存儲(chǔ)，即將獲取到的多頁(yè)文字圖像匯編成電子書(shū)；若所述多頁(yè)文字圖像不包括順序頁(yè)碼，則獲取用戶(hù)對(duì)不包括順序頁(yè)碼的多頁(yè)文字圖像所編輯的順序頁(yè)碼，以使多頁(yè)文字圖像具有對(duì)應(yīng)的順序頁(yè)碼，多頁(yè)文字圖像按所述順序頁(yè)碼排序并保存，即按用戶(hù)對(duì)多頁(yè)文字圖像編輯的順序頁(yè)碼將多頁(yè)文字圖像匯編成電子書(shū)；待多頁(yè)文字圖像匯編成電子書(shū)之后，識(shí)別所述文字圖像中的文字，從預(yù)先存儲(chǔ)有文字對(duì)應(yīng)的助讀信息(所述助讀信息包括第一助讀信息和第二助讀信息)的數(shù)據(jù)庫(kù)中調(diào)取所述文字對(duì)應(yīng)的文字拼音信息；該數(shù)據(jù)庫(kù)可以為本地?cái)?shù)據(jù)庫(kù)，也可以為通過(guò)有線或無(wú)線網(wǎng)絡(luò)連接的網(wǎng)絡(luò)數(shù)據(jù)庫(kù)。
[0075]例如，拍攝到的文字圖像為“
[0076]白日依山盡
[0077]黃河入海流”，則從預(yù)先存儲(chǔ)有文字對(duì)應(yīng)的助讀信息的數(shù)據(jù)庫(kù)中調(diào)取所述文字對(duì)應(yīng)的文字拼音信息，為“
[0078]bai ri yi shan jin
[0079]huang he ru hai liu，，。
[0080]S102、在所述文字圖像中文字行距間空白處合成所述文字拼音信息，以得到新圖像，在屏幕上顯示所述新圖像。
[0081]步驟S102中，將步驟SlOl中獲取的文字圖像與調(diào)取得到的文字拼音信息合成新圖像，在屏幕上顯示該新圖像。
[0082]例如，將
[0083]文字圖像“
[0084]白日依山盡
[0085]黃河入海流”
[0086]與
[0087]文字拼音信息“
[0088]bai ri yi shan jin
[0089]huang he ru hai liu，，合成新圖像，得到
[0090]新圖像
[0091]“bai ri yi shan jin
[0092]白日依山盡
[0093]huang he ru hai Iiu
[0094]黃河入海流”。在屏幕上顯示該新圖像。
[0095]本發(fā)明中，當(dāng)獲取文字圖像為連續(xù)獲取多頁(yè)文字圖像時(shí)，可排序并存儲(chǔ)多頁(yè)文字圖像，即將多頁(yè)文字圖像匯編成電子書(shū)，排序并存儲(chǔ)形成的電子書(shū)可包括兩種:1、如步驟SlOl中所述的“多頁(yè)文字圖像”的電子書(shū)；2、多頁(yè)文字圖像合成第一助讀信息得到新圖像，排序并存儲(chǔ)“新圖像”的電子書(shū)。
[0096]當(dāng)為排序并存儲(chǔ)“新圖像”的電子書(shū)時(shí)，步驟S102中，將所述文字圖像中文字行距間空白處合成所述文字拼音信息包括:
[0097]若所述多頁(yè)文字圖像包括順序頁(yè)碼，則將多頁(yè)文字圖像與所述文字拼音信息合成新圖像，所述新圖像按所述順序頁(yè)碼排序并存儲(chǔ)，即將合成了第一助讀信息的多頁(yè)文字圖像匯編成電子書(shū)；
[0098]若所述多頁(yè)文字圖像不包括順序頁(yè)碼，則將多頁(yè)文字圖像與所述文字拼音信息合成新圖像，并獲取用戶(hù)對(duì)不包括順序頁(yè)碼的多頁(yè)文字圖像所編輯的順序頁(yè)碼以使所述新圖像按所述順序頁(yè)碼排序并存儲(chǔ)，即將合成了第一助讀信息的多頁(yè)文字圖像匯編成電子書(shū)。
[0099]本發(fā)明中，當(dāng)獲取文字圖像為連續(xù)獲取多頁(yè)文字圖像時(shí)，可通過(guò)多頁(yè)文字圖像自身的順序頁(yè)碼或者通過(guò)用戶(hù)對(duì)不包括順序頁(yè)碼的多頁(yè)文字圖像所編輯的順序頁(yè)碼，將多頁(yè)文字圖像按順序頁(yè)碼排序并存儲(chǔ)，匯編成電子書(shū)；所述按順序頁(yè)碼排序并存儲(chǔ)的電子書(shū)包括:1、多頁(yè)文字圖像的電子書(shū)；2、多頁(yè)文字圖像合成第一助讀信息的新圖像的電子書(shū)。
[0100]S103、判斷用戶(hù)是否通過(guò)觸屏操作對(duì)顯示的新圖像中的內(nèi)容有點(diǎn)選。
[0101]步驟S103中，判斷用戶(hù)是否通過(guò)觸屏操作對(duì)顯示的新圖像中的內(nèi)容有點(diǎn)選，本發(fā)明中所述的屏幕為可觸碰屏幕，用戶(hù)通過(guò)觸碰屏幕實(shí)現(xiàn)對(duì)屏幕上顯示的圖像的選擇和控制。
[0102]S104、若有，則識(shí)別出被點(diǎn)選處的內(nèi)容，在屏幕上所述內(nèi)容的旁邊位置處顯示所述內(nèi)容的釋義和用法，播放所述釋義和用法的語(yǔ)音信息。
[0103]步驟S104中，當(dāng)判斷出屏幕被觸碰時(shí)，識(shí)別出被點(diǎn)選處的內(nèi)容，在屏幕上所述內(nèi)容的旁邊位置處顯示所述內(nèi)容的釋義和用法，播放所述釋義和用法的語(yǔ)音信息。其中，被點(diǎn)選處的內(nèi)容包括文字圖像中的文字和所述文字對(duì)應(yīng)的文字拼音信息。
[0104]例如，被點(diǎn)選處的內(nèi)容(即被被點(diǎn)選處的內(nèi)容為文字“日”)為:
[0105]“如圖7所示，其是本發(fā)明一種助讀方法實(shí)施例中的注釋說(shuō)明A示意圖?！眲t
[0106]按本發(fā)明所述的方法后，被點(diǎn)選后，屏幕的顯示效果為:
[0107]“如圖8所示，其是本發(fā)明一種助讀方法實(shí)施例中的注釋說(shuō)明B示意圖?！?br> [0108]且播放“日為太陽(yáng)的意思”的語(yǔ)音。
[0109]再例如，被點(diǎn)選處的內(nèi)容(即被觸碰屏幕處的內(nèi)容為文字拼音“ri”)為:
[0110]“如圖9所示，其是本發(fā)明一種助讀方法實(shí)施例中的注釋說(shuō)明C示意圖?！眲t
[0111]按本發(fā)明所述的方法后，被點(diǎn)選后，屏幕的顯示效果為:
[0112]“如圖10所示，其是本發(fā)明一種助讀方法實(shí)施例中的注釋說(shuō)明D示意圖。”
[0113]且播放“日為太陽(yáng)的意思”的語(yǔ)音。
[0114]本發(fā)明所述的方法，只要用戶(hù)獲取到文字圖像，即可得到文字圖像中的文字的文字拼音信息，使用戶(hù)的助讀不再受限于專(zhuān)門(mén)的助讀設(shè)備和課本，降低了用戶(hù)的使用門(mén)檻，能滿足用戶(hù)隨時(shí)隨地隨心的使用需求；比如，用戶(hù)在外出旅游時(shí)，只要提前用手機(jī)/平板電腦通過(guò)網(wǎng)絡(luò)下載或拍攝并保存了課本或各類(lèi)讀物上的文字圖像，那么在旅游的間隙，只要拿出手機(jī)/平板電腦即可享受到文字圖像的助讀信息，實(shí)現(xiàn)了隨時(shí)隨地的助讀。
[0115]實(shí)施例二
[0116]參見(jiàn)圖2，圖2為閱讀模式下，用戶(hù)“不觸碰屏幕+發(fā)聲”的閱讀時(shí)，本發(fā)明方法的流程圖。
[0117]S201、獲取文字圖像，識(shí)別所述文字圖像中的文字，調(diào)取所述文字對(duì)應(yīng)的文字拼音信息。
[0118]S202、在所述文字圖像中文字行距間空白處合成所述文字拼音信息，以得到新圖像，在屏幕上顯示所述新圖像。[0119]S203、實(shí)時(shí)采集外部聲音。
[0120]步驟S203中，可以用MIC實(shí)時(shí)采集外部聲音。
[0121]S204、判斷所述外部聲音是否為朗讀發(fā)聲，如果是，則執(zhí)行S205 ;否則，返回S203。
[0122]步驟S204為，對(duì)步驟S203中采集到的聲音做一判斷，看采集到的聲音是否為用戶(hù)的朗讀發(fā)聲，避免對(duì)采集到的環(huán)境中的雜音進(jìn)行誤判。
[0123]S205、判斷所述朗讀發(fā)聲是否正確，如果是，則執(zhí)行S206 ;否則執(zhí)行S207。
[0124]步驟S205為，對(duì)用戶(hù)的朗讀發(fā)聲的發(fā)音判斷，看用戶(hù)是否有讀錯(cuò)的文字。具體為:將用戶(hù)朗讀發(fā)聲的發(fā)音與預(yù)置數(shù)據(jù)庫(kù)中相應(yīng)的標(biāo)準(zhǔn)內(nèi)容進(jìn)行比對(duì)，當(dāng)所述朗讀發(fā)聲的發(fā)音與預(yù)置數(shù)據(jù)庫(kù)中相應(yīng)的標(biāo)準(zhǔn)內(nèi)容相同時(shí)，則所述朗讀發(fā)聲正確；否則，所述朗讀發(fā)聲不正確。
[0125]例如，合成的新圖像在屏幕上顯示效果為:
[0126]“bai mao fu Iv shui
[0127]白毛浮綠水
[0128]hong zhang bo qing bo
[0129]紅掌撥清波”
[0130]如果用戶(hù)朗讀時(shí)，將“bo撥”讀為“ba”，則
[0131]通過(guò)將用戶(hù)朗讀發(fā)聲的發(fā)音“ba”與預(yù)置數(shù)據(jù)庫(kù)中相應(yīng)的標(biāo)準(zhǔn)內(nèi)容“bo撥”進(jìn)行比對(duì)時(shí)，發(fā)現(xiàn)所述朗讀發(fā)聲的發(fā)音與預(yù)置數(shù)據(jù)庫(kù)中相應(yīng)的標(biāo)準(zhǔn)內(nèi)容不相同，則判斷為所述朗讀發(fā)聲不正確。
[0132]S206、在屏幕上顯示朗讀正確的符號(hào)。
[0133]步驟S206，若所述朗讀發(fā)聲正確，則在所讀文字段落的頁(yè)邊處顯示“V”。
[0134]S207、顯示朗讀錯(cuò)誤的符號(hào)，并對(duì)朗讀錯(cuò)誤的文字進(jìn)行標(biāo)記。
[0135]步驟S207中，若所述朗讀發(fā)聲不正確，則在所讀文字段落的頁(yè)邊處顯示“ ！ ”，并對(duì)朗讀錯(cuò)誤的文字進(jìn)行標(biāo)記。
[0136]例如，S205中所例，所述朗讀發(fā)聲不正確時(shí)，屏幕上顯示效果為:
[0137]如圖13所示，其是本發(fā)明一種助讀方法實(shí)施例中的注釋說(shuō)明G示意圖。
[0138] 其中，“ ! ”表示朗讀發(fā)聲不正確，“―”對(duì)朗讀錯(cuò)誤的“撥”進(jìn)行標(biāo)記。
[0139]S208、判斷朗讀錯(cuò)誤的文字的標(biāo)記是否被點(diǎn)選。
[0140]步驟S208中，在步驟S207中對(duì)朗讀錯(cuò)誤的文字進(jìn)行標(biāo)記，步驟S208中，若用戶(hù)觸碰該標(biāo)記，則播放所述朗讀錯(cuò)誤的文字的標(biāo)準(zhǔn)語(yǔ)音信息，以糾正用戶(hù)錯(cuò)誤的朗讀。
[0141]例如，判斷朗讀錯(cuò)誤的“撥”的標(biāo)記是否被點(diǎn)選，若用戶(hù)點(diǎn)選該標(biāo)記則播放“撥”的標(biāo)準(zhǔn)語(yǔ)音信息“bo”，以糾正用戶(hù)錯(cuò)誤的朗讀。
[0142]S209、若是，則播放所述朗讀錯(cuò)誤的文字對(duì)應(yīng)的標(biāo)準(zhǔn)語(yǔ)音信息。
[0143]本發(fā)明所述的方法，只要用戶(hù)獲取到文字圖像，即可得到文字圖像中的文字的文字拼音信息，使用戶(hù)的助讀不再受限于專(zhuān)門(mén)的助讀設(shè)備和課本，降低了用戶(hù)的使用門(mén)檻，能滿足用戶(hù)隨時(shí)隨地隨心的使用需求；比如，用戶(hù)在外出旅游時(shí)，只要提前用手機(jī)/平板電腦通過(guò)網(wǎng)絡(luò)下載或拍攝并保存了課本或讀物上的文字圖像，那么在旅游的間隙，拿出手機(jī)/平板電腦即可享受到文字圖像的文字拼音信息，實(shí)現(xiàn)了隨時(shí)隨地的助讀。
[0144]實(shí)施例三[0145]實(shí)施例三為用戶(hù)“觸碰屏幕點(diǎn)選+發(fā)聲”的閱讀時(shí)的實(shí)施例。
[0146]本實(shí)施例中，用戶(hù)“觸碰屏幕點(diǎn)選”將觸發(fā)實(shí)施例一種的S104，與此同時(shí)，用戶(hù)“發(fā)聲”將觸發(fā)實(shí)施例二中的S204-S209。S104與S204-S209均涉及顯示相關(guān)內(nèi)容和播放相關(guān)語(yǔ)音信息，即S104與S204-S209存在沖突。
[0147]在這種情況下，優(yōu)先地選擇S204-S209，即當(dāng)用戶(hù)“觸碰屏幕+發(fā)聲”的閱讀時(shí)，以“發(fā)聲糾正”為優(yōu)先。
[0148]有兩種方式可實(shí)現(xiàn)優(yōu)先選擇“發(fā)聲糾正”以解決該沖突。
[0149]兩種方式分別為:
[0150]1、定向收音,錄音時(shí)的處理,例如,位置關(guān)系是:音響一> 麥克風(fēng)一> 用戶(hù)，麥克風(fēng)優(yōu)先處理正對(duì)范圍內(nèi)的聲音。
[0151]2、錄音后的處理，把收音模塊收音到的內(nèi)容，與剛才機(jī)器發(fā)聲的聲音進(jìn)行匹配并過(guò)濾，分離出用戶(hù)的發(fā)聲。
[0152]這種情況下的流程為實(shí)施例二的流程，即本實(shí)施例的流程圖參見(jiàn)圖2。
[0153]二、朗讀模式 [0154]朗讀模式下，根據(jù)用戶(hù)的使用習(xí)慣，有三種不同情況的實(shí)施例，分別為:1、“觸碰屏幕點(diǎn)選+不發(fā)聲”的朗讀；2、“不觸碰屏幕+發(fā)聲”的朗讀；3、“觸碰屏幕點(diǎn)選+發(fā)聲”的朗讀；以下就這三種方式分別做一說(shuō)明。
[0155]實(shí)施例四
[0156]參見(jiàn)圖3，圖3為朗讀模式下，用戶(hù)“觸碰屏幕+不發(fā)聲”的朗讀時(shí)，本發(fā)明方法的流程圖。
[0157]S301、獲取文字圖像，識(shí)別所述文字圖像中的文字，調(diào)取所述文字對(duì)應(yīng)的升降調(diào)、輕重音和停頓斷句的標(biāo)記符號(hào)。
[0158]步驟S301中，獲取文字圖像的方式可以為通過(guò)攝像頭拍攝課本上的文字圖像，識(shí)別所述文字圖像中的文字，從預(yù)先存儲(chǔ)有文字對(duì)應(yīng)的助讀信息的數(shù)據(jù)庫(kù)中調(diào)取所述文字對(duì)應(yīng)的升降調(diào)、輕重音和停頓斷句的標(biāo)記符號(hào)，該數(shù)據(jù)庫(kù)可以為本地?cái)?shù)據(jù)庫(kù)，也可以為通過(guò)有線或無(wú)線網(wǎng)絡(luò)連接的網(wǎng)絡(luò)數(shù)據(jù)庫(kù)。
[0159]例如，拍攝到的文字圖像為:
[0160]“我家門(mén)口有一棵小樹(shù)。冬天到了，爺爺給小樹(shù)穿上暖和的衣裳。小樹(shù)不冷了。夏天到了，小樹(shù)給爺爺撐開(kāi)綠色的小傘。爺爺不熱了。，，(這段文字是以孩子的口吻寫(xiě)的，朗讀時(shí)，要用輕快的語(yǔ)氣去讀，感受爺爺美好的心靈，感悟人與樹(shù)之間的和諧關(guān)系，要表達(dá)出人和樹(shù)互相關(guān)心的溫馨之情。)
[0161]則，從預(yù)先存儲(chǔ)有文字對(duì)應(yīng)的助讀信息的數(shù)據(jù)庫(kù)中調(diào)取所述文字對(duì)應(yīng)的升降調(diào)、輕重音和停頓斷句的標(biāo)記符號(hào)，為:
[0162]如圖14所示，其是本發(fā)明一種助讀方法實(shí)施例中的注釋說(shuō)明H示意圖。
[0163]其中，“ ?”表示重音，“ I ”表示停頓斷句，“ / ”表示升調(diào)，“ \ ”表示降調(diào)。
[0164]再例如，拍攝到的文字圖像為:
[0165]“科利亞丟下鏟子，坐在臺(tái)階上，用手摸著腦門(mén)想。突然他笑起來(lái)，對(duì)小伙伴們說(shuō):“我知道是怎么回事啦！木匣是我四年前埋的，那時(shí)候我還小，步子也小。我現(xiàn)在九歲啦，步子比那時(shí)候大了一倍，所以應(yīng)該量的不是十步，而是五步。你們看，我馬上會(huì)找到我的木匣子。”(朗讀這段文字時(shí)，注意做好埋木匣----挖木匣----得到啟示的轉(zhuǎn)換處的停頓；語(yǔ)調(diào)起伏較大；語(yǔ)氣中有肯定、有疑惑、有思考、有自信?！坝檬置X門(mén)想”語(yǔ)調(diào)下滑，語(yǔ)速稍慢；而“我知道是怎么回事啦”語(yǔ)速稍快，語(yǔ)調(diào)上揚(yáng)。這段文字中，很多對(duì)比性的詞語(yǔ)要重讀，總體語(yǔ)氣要肯定而充滿自信，語(yǔ)調(diào)上揚(yáng)。)
[0166]則，從預(yù)先存儲(chǔ)有文字對(duì)應(yīng)的助讀信息的數(shù)據(jù)庫(kù)中調(diào)取所述文字對(duì)應(yīng)的升降調(diào)、輕重音和停頓斷句的標(biāo)記符號(hào)，為:
[0167]“如圖11所示，其是本發(fā)明一種助讀方法實(shí)施例中的注釋說(shuō)明E示意圖?！?br> [0168]其中，起伏的曲線表示語(yǔ)調(diào)的升降、“.”表示重音，“/”表示停頓斷句。
[0169]S302、在所述文字圖像中文字行距間空白處合成所述文字的升降調(diào)、輕重音和停頓斷句的標(biāo)記符號(hào)，以得到新圖像，在屏幕上顯示所述新圖像。 [0170]步驟S302中，將步驟S301中獲取的文字圖像與調(diào)取得到的文字的升降調(diào)、輕重音和停頓斷句的標(biāo)記符號(hào)合成新圖像，在屏幕上顯示該新圖像。
[0171]例如，新圖像:
[0172]如圖15所示，其是本發(fā)明一種助讀方法實(shí)施例中的注釋說(shuō)明I示意圖。
[0173]在屏幕上顯示該新圖像。
[0174]再例如，新圖像:
[0175]為:“如圖12所示，其是本發(fā)明一種助讀方法實(shí)施例中的注釋說(shuō)明F示意圖。”
[0176]S303、判斷用戶(hù)是否通過(guò)觸屏操作對(duì)顯示的新圖像中的內(nèi)容有點(diǎn)選。
[0177]步驟S303中，判斷用戶(hù)是否通過(guò)觸屏操作對(duì)顯示的新圖像中的內(nèi)容有點(diǎn)選，本發(fā)明中所述的屏幕為可觸碰屏幕，用戶(hù)通過(guò)觸碰屏幕實(shí)現(xiàn)對(duì)屏幕上顯示的圖像的選擇和控制。
[0178]S304、若有，則識(shí)別出被點(diǎn)選的內(nèi)容，播放所述內(nèi)容的標(biāo)準(zhǔn)語(yǔ)音信息，并根據(jù)所述標(biāo)準(zhǔn)語(yǔ)音信息的節(jié)奏，在屏幕上逐字地顯示出所述內(nèi)容的播報(bào)進(jìn)度標(biāo)記，所述播報(bào)進(jìn)度標(biāo)記為文字下劃線、文字底圖顏色或者文字自身的顏色改變。
[0179]步驟S304中，當(dāng)判斷出用戶(hù)點(diǎn)選新圖像中的內(nèi)容時(shí)，識(shí)別出被點(diǎn)選的內(nèi)容，播放所述內(nèi)容的標(biāo)準(zhǔn)語(yǔ)音信息，并根據(jù)所述標(biāo)準(zhǔn)語(yǔ)音信息的節(jié)奏，在屏幕上逐字地顯示出所述內(nèi)容的播報(bào)進(jìn)度標(biāo)記，所述播報(bào)進(jìn)度標(biāo)記為文字下劃線、文字底圖顏色或者文字自身的顏色改變。其中，被觸碰屏幕處的內(nèi)容包括文字圖像中的文字和所述文字對(duì)應(yīng)的文字的升降調(diào)、輕重音和停頓斷句的標(biāo)記符號(hào)。
[0180]例如，被觸碰的屏幕位置為:
[0181]如圖16所示，其是本發(fā)明一種助讀方法實(shí)施例中的注釋說(shuō)明J示意圖。
[0182]則按本發(fā)明所述的方法，發(fā)音模塊將按文字的升降調(diào)、輕重音和停頓斷句的標(biāo)記符號(hào)，播放“我家門(mén)口有一棵小樹(shù)。冬天到了，爺爺給小樹(shù)穿上暖和的衣裳。小樹(shù)不冷了。夏天到了，小樹(shù)給爺爺撐開(kāi)綠色的小傘。爺爺不熱了?！钡臉?biāo)準(zhǔn)語(yǔ)音信息，并根據(jù)所述標(biāo)準(zhǔn)語(yǔ)音信息的節(jié)奏，在屏幕上逐字地顯示出所述內(nèi)容的播報(bào)進(jìn)度標(biāo)記，所述播報(bào)進(jìn)度標(biāo)記為文字下劃線、文字底圖顏色或者文字自身的顏色，如語(yǔ)音播放到“冬”時(shí)，“冬”字變成紅色；語(yǔ)音播放到“天”時(shí)，“天”字變成紅色，以此類(lèi)推。如如語(yǔ)音播放到“冬”時(shí)，“冬”字出現(xiàn)底圖顏色；語(yǔ)音播放到“天”時(shí)，“天”字出現(xiàn)底圖顏色，以此類(lèi)推。
[0183]本發(fā)明所述的方法，只要用戶(hù)獲取到文字圖像，即可得到文字圖像中的文字的文字的升降調(diào)、輕重音和停頓斷句的標(biāo)記符號(hào)，使用戶(hù)的助讀不再受限于專(zhuān)門(mén)的助讀設(shè)備和課本，降低了用戶(hù)的使用門(mén)檻，能滿足用戶(hù)隨時(shí)隨地隨心的使用需求；比如，用戶(hù)在外出旅游時(shí)，只要提前用手機(jī)/平板電腦拍攝并保存了課本上的文字圖像，那么在旅游的間隙，拿出手機(jī)/平板電腦即可享受到文字圖像的文字拼音信息，實(shí)現(xiàn)了隨時(shí)隨地的助讀。
[0184]實(shí)施例五
[0185]參見(jiàn)圖4，圖4為朗讀模式下，用戶(hù)“不觸碰屏幕+發(fā)聲”的朗讀時(shí)，本發(fā)明方法的流程圖。
[0186]實(shí)施例五與實(shí)施例二類(lèi)似，所以類(lèi)似步驟的說(shuō)明此處不再贅述。
[0187]S401、獲取文字圖像，識(shí)別所述文字圖像中的文字，調(diào)取所述文字對(duì)應(yīng)的升降調(diào)、輕重音和停頓斷句的標(biāo)記符號(hào)。
[0188]S402、在所述文字圖像中文字行距間空白處合成所述文字的升降調(diào)、輕重音和停頓斷句的標(biāo)記符號(hào)，以得到新圖像，在屏幕上顯示所述新圖像。
[0189]S403、實(shí)時(shí)采集外部聲音。
[0190]S404、判斷所述外部聲音是否為朗讀發(fā)聲，如果是，則執(zhí)行S405 ;否則，返回S403。
[0191]S405、判斷所述朗讀發(fā)聲是否正確，如果是，則執(zhí)行S406 ;否則執(zhí)行S407。
[0192]步驟S405與步驟S205不同之處在于:步驟S205只對(duì)朗讀發(fā)聲的發(fā)音做判斷；步驟S405對(duì)朗讀發(fā)聲的發(fā)音、升降調(diào)、輕重音和停頓斷句綜合判斷。
[0193]步驟S405具體為:將朗讀發(fā)聲的發(fā)音、升降調(diào)、輕重音和停頓斷句與預(yù)置數(shù)據(jù)庫(kù)中相應(yīng)的標(biāo)準(zhǔn)內(nèi)容進(jìn)行比對(duì)，當(dāng)所述朗讀發(fā)聲的發(fā)音、升降調(diào)、輕重音和停頓斷句均與預(yù)置數(shù)據(jù)庫(kù)中相應(yīng)的標(biāo)準(zhǔn)內(nèi)容相同時(shí)，則所述朗讀發(fā)聲正確；否則，所述朗讀發(fā)聲不正確。
[0194]S406、在屏幕上顯示朗讀正確的符號(hào)。
[0195]S407、顯示朗讀錯(cuò)誤的符號(hào)，并對(duì)朗讀錯(cuò)誤的文字進(jìn)行標(biāo)記。
[0196]S408、判斷朗讀錯(cuò)誤的文字的標(biāo)記是否被點(diǎn)選。
[0197]S409、若是，則播放所述朗讀錯(cuò)誤的文字對(duì)應(yīng)的標(biāo)準(zhǔn)語(yǔ)音信息。
[0198]步驟S409與步驟S209不同之處在于:步驟S209播放所述朗讀錯(cuò)誤的文字對(duì)應(yīng)的標(biāo)準(zhǔn)語(yǔ)音信息中的標(biāo)準(zhǔn)語(yǔ)音信息只包含朗讀的發(fā)音，例如播放“撥”的標(biāo)準(zhǔn)語(yǔ)音信息“bo” ；步驟S409中的標(biāo)準(zhǔn)語(yǔ)音信息包含朗讀發(fā)聲的發(fā)音、升降調(diào)、輕重音和停頓斷句，例如播放“冬天到了，爺爺給小樹(shù)穿上暖和的衣裳的標(biāo)準(zhǔn)語(yǔ)音信息為:
[0199]如圖17所示，其是本發(fā)明一種助讀方法實(shí)施例中的注釋說(shuō)明K示意圖。
[0200]本發(fā)明所述的方法，只要用戶(hù)獲取到文字圖像，即可得到文字圖像中的文字的文字的升降調(diào)、輕重音和停頓斷句的標(biāo)記符號(hào)，使用戶(hù)的助讀不再受限于專(zhuān)門(mén)的助讀設(shè)備和課本，降低了用戶(hù)的使用門(mén)檻，能滿足用戶(hù)隨時(shí)隨地隨心的使用需求；比如，用戶(hù)在外出旅游時(shí)，只要提前用手機(jī)/平板電腦拍攝并保存了課本上的文字圖像，那么在旅游的間隙，拿出手機(jī)/平板電腦即可享受到文字圖像的文字拼音信息，實(shí)現(xiàn)了隨時(shí)隨地的助讀。
[0201]實(shí)施例六
[0202]實(shí)施例六為用戶(hù)“觸碰屏幕點(diǎn)選+發(fā)聲”的朗讀時(shí)的實(shí)施例。
[0203]本實(shí)施例中，用戶(hù)“觸碰屏幕點(diǎn)選”將觸發(fā)實(shí)施例一種的S304，與此同時(shí)，用戶(hù)“發(fā)聲”將觸發(fā)實(shí)施例二中的S404-S409。S304與S404-S409均涉及顯示相關(guān)內(nèi)容和播放相關(guān)語(yǔ)音信息，即S304與S404-S409存在沖突。[0204]在這種情況下，優(yōu)先地選擇S404-S409，即當(dāng)用戶(hù)“觸碰屏幕點(diǎn)選+發(fā)聲”的朗讀時(shí)，以“發(fā)聲糾正”為優(yōu)先。
[0205]有兩種方式可實(shí)現(xiàn)優(yōu)先選擇“發(fā)聲糾正”以解決該沖突。
[0206]兩種方式分別為:
[0207]1、定向收音,錄音時(shí)的處理,例如,位置關(guān)系是:音響一> 麥克風(fēng)一> 用戶(hù)，麥克風(fēng)優(yōu)先處理正對(duì)范圍內(nèi)的聲音。
[0208]2、錄音后的處理，把收音模塊收音到的內(nèi)容，與剛才機(jī)器發(fā)聲的聲音進(jìn)行匹配并過(guò)濾，分離出用戶(hù)的發(fā)聲。
[0209]這種情況下的流程為實(shí)施例五的流程，即本實(shí)施例的流程圖參見(jiàn)圖4。
[0210]本發(fā)明所述的方法，只要用戶(hù)獲取到文字圖像，即可得到文字圖像中的文字的文字的升降調(diào)、輕重音和停頓斷句的標(biāo)記符號(hào)，使用戶(hù)的助讀不再受限于專(zhuān)門(mén)的助讀設(shè)備和課本，降低了用戶(hù)的使用門(mén)檻，能滿足用戶(hù)隨時(shí)隨地隨心的使用需求；比如，用戶(hù)在外出旅游時(shí)，只要提前用手機(jī)/平板電腦拍攝并保存了課本上的文字圖像，那么在旅游的間隙，拿出手機(jī)/平板電腦即可享受到文字圖像的文字拼音信息，實(shí)現(xiàn)了隨時(shí)隨地的助讀。
[0211]實(shí)施例七
[0212]參見(jiàn)圖5，一種基于屏幕顯示的助讀裝置，包括:
[0213]拍攝模塊501，用于獲取文字圖像。
[0214]數(shù)據(jù)處理模塊502，用于識(shí)別所述文字圖像中的文字，調(diào)取所述文字對(duì)應(yīng)的第一助讀信息；用于將所述文字圖像與所述第一助讀信息合成新圖像；用于判斷用戶(hù)是否通過(guò)觸屏操作對(duì)顯示的新圖像中的內(nèi)容有點(diǎn)選。
[0215]顯示模塊503，用于顯示所述新圖像。
[0216]展示模塊504，用于當(dāng)判斷用戶(hù)通過(guò)觸屏操作對(duì)顯示的新圖像中的內(nèi)容有點(diǎn)選時(shí)，展示所述內(nèi)容對(duì)應(yīng)的第二助讀信息。
[0217]實(shí)施例八
[0218]參見(jiàn)圖6，一種基于屏幕顯示的助讀裝置，包括:
[0219]拍攝模塊601，用于獲取文字圖像。
[0220]數(shù)據(jù)處理模塊602，用于識(shí)別所述文字圖像中的文字，調(diào)取所述文字對(duì)應(yīng)的第一助讀信息；用于將所述文字圖像與所述第一助讀信息合成新圖像；用于判斷用戶(hù)是否通過(guò)觸屏操作對(duì)顯示的新圖像中的內(nèi)容有點(diǎn)選；用于判斷所述外部聲音是否為朗讀發(fā)聲，如果是，則判斷所述朗讀發(fā)聲是否正確；否則，繼續(xù)實(shí)時(shí)采集外部聲音；用于判斷朗讀錯(cuò)誤的文字的標(biāo)記是否被點(diǎn)選。
[0221]顯示模塊603，用于顯示所述新圖像；用于如果判斷所述朗讀發(fā)聲正確，則顯示朗讀正確的符號(hào)；如果判斷所述朗讀發(fā)聲不正確，則顯示朗讀錯(cuò)誤的符號(hào)，并對(duì)朗讀錯(cuò)誤的文字進(jìn)行標(biāo)記。
[0222]展示模塊604，用于當(dāng)判斷用戶(hù)通過(guò)觸屏操作對(duì)顯示的新圖像中的內(nèi)容有點(diǎn)選時(shí)，展示所述內(nèi)容對(duì)應(yīng)的第二助讀信息。
[0223]收音模塊605，用于實(shí)時(shí)采集外部聲音。
[0224]發(fā)音模塊606，用于當(dāng)判斷朗讀錯(cuò)誤的文字的標(biāo)記被點(diǎn)選，則播放所述朗讀錯(cuò)誤的文字對(duì)應(yīng)的標(biāo)準(zhǔn)語(yǔ)音信息。[0225]實(shí)施例七和實(shí)施例八中:
[0226]當(dāng)為閱讀模式時(shí)，所述文字對(duì)應(yīng)的第一助讀信息為文字拼音信息；所述將所述文字圖像與所述第一助讀信息合成新圖像，具體為:在所述文字圖像中文字行距間空白處合成所述文字拼音信息，以得到新圖像；所述展示所述內(nèi)容對(duì)應(yīng)的第二助讀信息，包括:在屏幕上所述內(nèi)容的旁邊位置處顯示所述內(nèi)容的釋義和用法，播放所述釋義和用法的語(yǔ)音信
肩、O
[0227]當(dāng)為朗讀模式時(shí)，所述文字對(duì)應(yīng)的第一助讀信息為所述文字的升降調(diào)、輕重音和停頓斷句的標(biāo)記符號(hào)；所述將所述文字圖像與所述第一助讀信息合成新圖像，具體為:在所述文字圖像中文字行距間空白處合成所述文字的升降調(diào)、輕重音和停頓斷句的標(biāo)記符號(hào)，以得到新圖像；所述展示所述內(nèi)容對(duì)應(yīng)的第二助讀信息，包括:播放所述內(nèi)容的標(biāo)準(zhǔn)語(yǔ)音信息，并根據(jù)所述標(biāo)準(zhǔn)語(yǔ)音信息的節(jié)奏，在屏幕上逐字地顯示出所述內(nèi)容的播報(bào)進(jìn)度標(biāo)記，所述播報(bào)進(jìn)度標(biāo)記為文字下劃線、文字底圖顏色或者文字自身的顏色改變。
[0228]當(dāng)為閱讀模式時(shí)，只對(duì)朗讀發(fā)聲的發(fā)音做判斷。
[0229]當(dāng)為朗讀模式時(shí)，對(duì)朗讀發(fā)聲的發(fā)音、升降調(diào)、輕重音和停頓斷句綜合判斷。具體為:將朗讀發(fā)聲的發(fā)音、升降調(diào)、輕重音和停頓斷句與預(yù)置數(shù)據(jù)庫(kù)中相應(yīng)的標(biāo)準(zhǔn)內(nèi)容進(jìn)行比對(duì)，當(dāng)所述朗讀發(fā)聲的發(fā)音、升降調(diào)、輕重音和停頓斷句均與預(yù)置數(shù)據(jù)庫(kù)中相應(yīng)的標(biāo)準(zhǔn)內(nèi)容相同時(shí)，則所述朗讀發(fā)聲正確；否則，所述朗讀發(fā)聲不正確。
[0230]本發(fā)明所述的裝置，只要獲取到文字圖像，即可顯示文字圖像和文字圖像中的文字對(duì)應(yīng)的第一助讀信息；當(dāng)本發(fā)明所述的裝置的顯示模塊被觸碰時(shí)，能展示文字圖像中的文字對(duì)應(yīng)的第二助讀信息；只要有本發(fā)明所述的裝置即可實(shí)現(xiàn)隨時(shí)隨地的助讀，使用戶(hù)的助讀不再受限于專(zhuān)門(mén)的助讀設(shè)備和課本，降低了用戶(hù)的使用門(mén)檻，本發(fā)明所述的裝置能滿足用戶(hù)隨時(shí)隨地隨心的使用需求。
[0231]以上結(jié)合具體實(shí)施例描述了本發(fā)明的技術(shù)原理。這些描述只是為了解釋本發(fā)明的原理，而不能以任何方式解釋為對(duì)本發(fā)明保護(hù)范圍的限制?；诖颂幍慕忉?zhuān)绢I(lǐng)域的技術(shù)人員不需要付出創(chuàng)造性的勞動(dòng)即可聯(lián)想到本發(fā)明的其它【具體實(shí)施方式】，這些方式都將落入本發(fā)明的保護(hù)范圍之內(nèi)。
【權(quán)利要求】
1.一種基于屏幕顯示的助讀方法，其特征在于，包括: 獲取文字圖像，識(shí)別所述文字圖像中的文字，調(diào)取所述文字對(duì)應(yīng)的第一助讀信息； 將所述文字圖像與所述第一助讀信息合成新圖像，在屏幕上顯示所述新圖像； 判斷用戶(hù)是否通過(guò)觸屏操作對(duì)顯示的新圖像中的內(nèi)容有點(diǎn)選； 若有，則識(shí)別出被點(diǎn)選的內(nèi)容，展示所述內(nèi)容對(duì)應(yīng)的第二助讀信息。
2.根據(jù)權(quán)利要求1所述的一種基于屏幕顯示的助讀方法，其特征在于，所述文字圖像包括行文字圖像、段文字圖像、章節(jié)文字圖像、頁(yè)文字圖像中的一種或多種，當(dāng)所述文字圖像為頁(yè)文字圖像時(shí)，所述獲取文字圖像包括獲取一頁(yè)文字圖像或連續(xù)獲取多頁(yè)文字圖像。
3.根據(jù)權(quán)利要求2所述的一種基于屏幕顯示的助讀方法，其特征在于，若所述多頁(yè)文字圖像包括順序頁(yè)碼，則多頁(yè)文字圖像按所述順序頁(yè)碼排序并存儲(chǔ)；若所述多頁(yè)文字圖像不包括順序頁(yè)碼，則獲取用戶(hù)對(duì)不包括順序頁(yè)碼的多頁(yè)文字圖像所編輯的順序頁(yè)碼，以使多頁(yè)文字圖像具有對(duì)應(yīng)的順序頁(yè)碼，多頁(yè)文字圖像按所述順序頁(yè)碼排序并保存。
4.根據(jù)權(quán)利要求2所述的一種基于屏幕顯示的助讀方法，其特征在于，將所述文字圖像與所述第一助讀信息合成新圖像包括: 若所述多頁(yè)文字圖像包括順序頁(yè)碼，則將多頁(yè)文字圖像與所述第一助讀信息合成新圖像，所述新圖像按所述順序頁(yè)碼排序并存儲(chǔ)； 若所述多頁(yè)文字圖像不包括順序頁(yè)碼，則將多頁(yè)文字圖像與所述第一助讀信息合成新圖像，并獲取用戶(hù)對(duì)不包括順序頁(yè)碼的多頁(yè)文字圖像所編輯的順序頁(yè)碼，所述新圖像按所述順序頁(yè)碼排序并存儲(chǔ)。
5.根據(jù)權(quán)利要求1所述的一種基于屏幕顯示的助讀方法，其特征在于，所述文字對(duì)應(yīng)的第一助讀信息為文字拼音信息； 所述將所述文字圖像與所述第一助讀信息合成新圖像，具體為:在所述文字圖像中文字行距間空白處合成所述文字拼音信息，以得到新圖像。
6.根據(jù)權(quán)利要求5所述的一種基于屏幕顯示的助讀方法，其特征在于，所述展示所述內(nèi)容對(duì)應(yīng)的第二助讀信息，包括:在屏幕上所述內(nèi)容的旁邊位置處顯示所述內(nèi)容的釋義和用法，播放所述釋義和用法的語(yǔ)音信息。
7.根據(jù)權(quán)利要求1所述的一種基于屏幕顯示的助讀方法，其特征在于，所述文字對(duì)應(yīng)的第一助讀信息為所述文字的升降調(diào)、輕重音和停頓斷句的標(biāo)記符號(hào)； 所述將所述文字圖像與所述第一助讀信息合成新圖像，具體為:在所述文字圖像中文字行距間空白處合成所述文字的升降調(diào)、輕重音和停頓斷句的標(biāo)記符號(hào)，以得到新圖像。
8.根據(jù)權(quán)利要求7所述的一種基于屏幕顯示的助讀方法，其特征在于，所述展示所述內(nèi)容對(duì)應(yīng)的第二助讀信息，包括:播放所述內(nèi)容的標(biāo)準(zhǔn)語(yǔ)音信息，并根據(jù)所述標(biāo)準(zhǔn)語(yǔ)音信息的節(jié)奏，在屏幕上逐字地顯示出所述內(nèi)容的播報(bào)進(jìn)度標(biāo)記。
9.根據(jù)權(quán)利要求8所述的一種基于屏幕顯示的助讀方法，其特征在于，所述播報(bào)進(jìn)度標(biāo)記為文字下劃線、文字底圖顏色或者文字自身的顏色改變。
10.根據(jù)權(quán)利要求1所述的一種基于屏幕顯示的助讀方法，其特征在于，所述方法還包括: 實(shí)時(shí)米集外部聲音； 判斷所述外部聲音是否為朗讀發(fā)聲，如果是，則判斷所述朗讀發(fā)聲是否正確；否則，繼續(xù)實(shí)時(shí)采集外部聲音； 判斷所述朗讀發(fā)聲是否正確，如果是，則在屏幕上顯示朗讀正確的符號(hào)；否則，顯示朗讀錯(cuò)誤的符號(hào)，并對(duì)朗讀錯(cuò)誤的文字進(jìn)行標(biāo)記； 判斷朗讀錯(cuò)誤的文字的標(biāo)記是否被點(diǎn)選，若是，則播放所述朗讀錯(cuò)誤的文字對(duì)應(yīng)的標(biāo)準(zhǔn)語(yǔ)首?目息。
11.根據(jù)權(quán)利要求10所述的一種基于屏幕顯示的助讀方法，其特征在于，所述判斷所述朗讀發(fā)聲是否正確，具體為:將朗讀發(fā)聲的發(fā)音、升降調(diào)、輕重音和停頓斷句與預(yù)置數(shù)據(jù)庫(kù)中相應(yīng)的標(biāo)準(zhǔn)內(nèi)容進(jìn)行比對(duì)，當(dāng)所述朗讀發(fā)聲的發(fā)音、升降調(diào)、輕重音和停頓斷句均與預(yù)置數(shù)據(jù)庫(kù)中相應(yīng)的標(biāo)準(zhǔn)內(nèi)容相同時(shí)，則所述朗讀發(fā)聲正確；否則，所述朗讀發(fā)聲不正確。
12.一種基于屏幕顯示的助讀裝置，其特征在于，包括: 拍攝模塊，用于獲取文字圖像； 數(shù)據(jù)處理模塊，用于識(shí)別所述文字圖像中的文字，調(diào)取所述文字對(duì)應(yīng)的第一助讀信息；用于將所述文字圖像與所述第一助讀信息合成新圖像； 顯示模塊，用于顯示所述新圖像； 數(shù)據(jù)處理模塊，用于判斷用戶(hù)是否通過(guò)觸屏操作對(duì)顯示的新圖像中的內(nèi)容有點(diǎn)選； 展示模塊，用于當(dāng)判斷用戶(hù)通過(guò)觸屏操作對(duì)顯示的新圖像中的內(nèi)容有點(diǎn)選時(shí)，展示所述內(nèi)容對(duì)應(yīng)的第二助讀信息。
13.根據(jù)權(quán)利要求12所述的一種基于屏幕顯示的助讀裝置，其特征在于，所述文字對(duì)應(yīng)的第一助讀信息為文字拼音信息； 所述將所述文字圖像與所述第一助讀信息合成新圖像，具體為:在所述文字圖像中文字行距間空白處合成所述文字拼音信息，以得到新圖像。
14.根據(jù)權(quán)利要求13所述的一種基于屏幕顯示的助讀裝置，其特征在于，所述展示所述內(nèi)容對(duì)應(yīng)的第二助讀信息，包括:在顯示模塊上所述內(nèi)容的旁邊位置處顯示所述內(nèi)容的釋義和用法，播放所述釋義和用法的語(yǔ)音信息。
15.根據(jù)權(quán)利要求12所述的一種基于屏幕顯示的助讀裝置，其特征在于，所述文字對(duì)應(yīng)的第一助讀信息為所述文字的升降調(diào)、輕重音和停頓斷句的標(biāo)記符號(hào)； 所述將所述文字圖像與所述第一助讀信息合成新圖像，具體為:在所述文字圖像中文字行距間空白處合成所述文字的升降調(diào)、輕重音和停頓斷句的標(biāo)記符號(hào)，以得到新圖像。
16.根據(jù)權(quán)利要求15所述的一種基于屏幕顯示的助讀裝置，其特征在于，所述展示所述內(nèi)容對(duì)應(yīng)的第二助讀信息，包括:播放所述內(nèi)容的標(biāo)準(zhǔn)語(yǔ)音信息，并根據(jù)所述標(biāo)準(zhǔn)語(yǔ)音信息的節(jié)奏，在顯示模塊上逐字地顯示出所述內(nèi)容的播報(bào)進(jìn)度標(biāo)記。
17.根據(jù)權(quán)利要求16所述的一種基于屏幕顯示的助讀裝置，其特征在于，所述播報(bào)進(jìn)度標(biāo)記為文字下劃線、文字底圖顏色或者文字自身的顏色改變。
18.根據(jù)權(quán)利要求12所述的一種基于屏幕顯示的助讀裝置，其特征在于，所述裝置還包括: 收音模塊，用于實(shí)時(shí)米集外部聲音； 數(shù)據(jù)處理模塊，用于判斷所述外部聲音是否為朗讀發(fā)聲，如果是，則判斷所述朗讀發(fā)聲是否正確；否則，繼續(xù)實(shí)時(shí)采集外部聲音； 顯 示模塊，用于如果判斷所述朗讀發(fā)聲正確，則顯示朗讀正確的符號(hào)；如果判斷所述朗讀發(fā)聲不正確，則顯示朗讀錯(cuò)誤的符號(hào)，并對(duì)朗讀錯(cuò)誤的文字進(jìn)行標(biāo)記； 數(shù)據(jù)處理模塊，用于判斷朗讀錯(cuò)誤的文字的標(biāo)記是否被點(diǎn)選； 發(fā)音模塊，用于當(dāng)判斷朗讀錯(cuò)誤的文字的標(biāo)記被觸碰，則播放所述朗讀錯(cuò)誤的文字對(duì)應(yīng)的標(biāo)準(zhǔn)語(yǔ)首/[目息。
19.根據(jù)權(quán)利要求18所述的一種基于屏幕顯示的助讀裝置，其特征在于，所述判斷所述朗讀發(fā)聲是否正確，具體為:將朗讀發(fā)聲的發(fā)音、升降調(diào)、輕重音和停頓斷句與預(yù)置數(shù)據(jù)庫(kù)中相應(yīng)的標(biāo)準(zhǔn)內(nèi)容進(jìn)行比對(duì)，當(dāng)所述朗讀發(fā)聲的發(fā)音、升降調(diào)、輕重音和停頓斷句均與預(yù)置數(shù)據(jù)庫(kù)中相 應(yīng)的標(biāo)準(zhǔn)內(nèi)容相同時(shí)，則所述朗讀發(fā)聲正確；否則，所述朗讀發(fā)聲不正確。
【文檔編號(hào)】G06F17/27GK104008088SQ201410026131
【公開(kāi)日】2014年8月27日 申請(qǐng)日期:2014年1月20日 優(yōu)先權(quán)日:2014年1月20日
【發(fā)明者】簡(jiǎn)文杰 申請(qǐng)人:廣東小天才科技有限公司