本發(fā)明屬于電子終端技術(shù)領(lǐng)域,尤其涉及一種應(yīng)用于電子終端的搜題方法及裝置。
背景技術(shù):
目前,市面上的很多電子教育產(chǎn)品都可以實(shí)現(xiàn)拍照搜題功能,通過拍攝單詞或詞組以搜索對應(yīng)的釋義,或者通過拍攝題目以搜索對應(yīng)的答案?,F(xiàn)有拍照搜題功能的實(shí)現(xiàn)大都需要經(jīng)過以下步驟:啟動(dòng)攝像頭-點(diǎn)擊拍照-在圖像中截取搜索對象-通過OCR技術(shù)將搜索對象轉(zhuǎn)換成文本-服務(wù)器搜索并匹配搜索結(jié)果-服務(wù)器將搜索結(jié)果反饋給電子終端。
從上述可以看出,現(xiàn)有的拍照搜題方法步驟較多,操作繁瑣且方式單一(例如手動(dòng)點(diǎn)擊、手動(dòng)框選試題)。故,有必要提出一種新的技術(shù)方案,以解決上述技術(shù)問題。
技術(shù)實(shí)現(xiàn)要素:
鑒于此,本發(fā)明實(shí)施例提供一種應(yīng)用于電子終端的搜題方法及裝置,以通過眼動(dòng)感應(yīng)控制電子終端搜索試題,減少搜題的步驟,提高搜題的效率。
第一方面,本發(fā)明實(shí)施例提供了一種應(yīng)用于電子終端的搜題方法,所述搜題方法包括:
當(dāng)接收到搜題觸發(fā)指令時(shí),啟動(dòng)電子終端的后置攝像頭;
在所述電子終端的屏幕上顯示所述后置攝像頭拍攝到的預(yù)覽畫面;
啟動(dòng)電子終端的前置攝像頭,通過所述前置攝像頭捕捉用戶瞳孔的運(yùn)動(dòng)軌跡;
將捕捉到的所述運(yùn)動(dòng)軌跡映射到屏幕的對應(yīng)位置,截取所述屏幕對應(yīng)位置內(nèi)的預(yù)覽畫面;
將截取的預(yù)覽畫面上傳至服務(wù)器進(jìn)行識別以及試題匹配;
接收并顯示所述服務(wù)器反饋的與本次匹配到的試題對應(yīng)的解題結(jié)果。
第二方面,本發(fā)明實(shí)施例提供了一種應(yīng)用于電子終端的搜題裝置,所述搜題裝置包括:
啟動(dòng)模塊,用于當(dāng)接收到搜題觸發(fā)指令時(shí),啟動(dòng)電子終端的后置攝像頭;
第一顯示模塊,用于在所述電子終端的屏幕上顯示所述后置攝像頭拍攝到的預(yù)覽畫面;
捕捉模塊,用于啟動(dòng)電子終端的前置攝像頭,通過所述前置攝像頭捕捉用戶瞳孔的運(yùn)動(dòng)軌跡;
截取模塊,用于將捕捉到的所述運(yùn)動(dòng)軌跡映射到屏幕的對應(yīng)位置,截取所述屏幕對應(yīng)位置內(nèi)的預(yù)覽畫面;
上傳模塊,用于將截取的預(yù)覽畫面上傳至服務(wù)器進(jìn)行識別以及試題匹配;
第二顯示模塊,用于接收并顯示所述服務(wù)器反饋的與本次匹配到的試題對應(yīng)的解題結(jié)果。
本發(fā)明實(shí)施例與現(xiàn)有技術(shù)相比存在的有益效果是:本發(fā)明實(shí)施例在啟動(dòng)攝像頭后,通過捕捉用戶瞳孔的運(yùn)動(dòng)軌跡直接在預(yù)覽界面進(jìn)行截圖操作,不需等拍攝圖片后再截取試題,簡化了操作流程,提高了搜題效率。而且,采用眼動(dòng)感應(yīng)控制電子終端搜索試題,解決了現(xiàn)有搜題方式單一的問題,滿足了用戶的個(gè)性化需求,且具有較強(qiáng)的易用性和實(shí)用性。
附圖說明
為了更清楚地說明本發(fā)明實(shí)施例中的技術(shù)方案,下面將對實(shí)施例或現(xiàn)有技術(shù)描述中所需要使用的附圖作簡單地介紹,顯而易見地,下面描述中的附圖僅僅是本發(fā)明的一些實(shí)施例,對于本領(lǐng)域普通技術(shù)人員來講,在不付出創(chuàng)造性勞動(dòng)性的前提下,還可以根據(jù)這些附圖獲得其他的附圖。
圖1是本發(fā)明實(shí)施例提供的應(yīng)用于電子終端的搜題方法的實(shí)現(xiàn)流程示意圖;
圖2是本發(fā)明實(shí)施例提供的應(yīng)用于電子終端的搜題裝置的組成結(jié)構(gòu)示意圖。
具體實(shí)施方式
以下描述中,為了說明而不是為了限定,提出了諸如特定系統(tǒng)結(jié)構(gòu)、技術(shù)之類的具體細(xì)節(jié),以便透切理解本發(fā)明實(shí)施例。然而,本領(lǐng)域的技術(shù)人員應(yīng)當(dāng)清楚,在沒有這些具體細(xì)節(jié)的其它實(shí)施例中也可以實(shí)現(xiàn)本發(fā)明。在其它情況中,省略對眾所周知的系統(tǒng)、裝置、電路以及方法的詳細(xì)說明,以免不必要的細(xì)節(jié)妨礙本發(fā)明的描述。
為了說明本發(fā)明所述的技術(shù)方案,下面通過具體實(shí)施例來進(jìn)行說明。
請參閱圖1,為本發(fā)明實(shí)施例提供的應(yīng)用于電子終端的搜題方法的實(shí)現(xiàn)流程,其主要包括以下步驟:
步驟S101,當(dāng)接收到搜題觸發(fā)指令時(shí),啟動(dòng)電子終端的后置攝像頭。
本發(fā)明實(shí)施例中,為電子終端配置“搜題觸發(fā)指令”的輸入接口,以便用戶可以通過該輸入接口輸入上述搜題觸發(fā)指令。示例性的,該輸入接口可以表現(xiàn)為一實(shí)體按鍵,以便通過該實(shí)體按鍵輸入上述搜題觸發(fā)指令;或者該輸入接口可以表現(xiàn)為一特定的觸摸操作,例如在監(jiān)測到用戶在屏幕上的觸摸動(dòng)作為兩點(diǎn)觸摸且滑動(dòng)軌跡為縱向相對滑動(dòng)后,判斷兩觸摸點(diǎn)縱向相對滑動(dòng)的位移是否同時(shí)大于預(yù)設(shè)的第一閾值、所述兩觸摸點(diǎn)最終落點(diǎn)的距離差是否小于預(yù)設(shè)的第二閾值、且所述兩觸摸點(diǎn)滑動(dòng)的速度是否同時(shí)大于預(yù)設(shè)的第三閾值,若是,則判定為搜題觸發(fā)指令。又或者,該輸入接口還可以表現(xiàn)為應(yīng)用程序(如搜題類App)的啟動(dòng)接口,當(dāng)用戶啟動(dòng)該搜題類App時(shí),即相當(dāng)于輸入上述搜題觸發(fā)指令。本發(fā)明實(shí)施例中不對上述搜題觸發(fā)指令的具體輸入方式進(jìn)行限定。
在本發(fā)明實(shí)施例中,當(dāng)接收到上述搜題觸發(fā)指令時(shí),啟動(dòng)電子終端的后置攝像頭(該后置攝像頭可以為上述電子終端的內(nèi)置攝像頭,也可以為上述電子終端的外置攝像頭),進(jìn)一步,還可以在上述后置攝像頭啟動(dòng)后,在上述電子終端的屏幕上加載上述后置攝像頭的預(yù)覽界面,以便用戶可通過該預(yù)覽界面瀏覽到上述后置攝像頭的取景范圍,控制對所述取景范圍內(nèi)搜索對象的拍攝。其中,所述搜索對象包括但不限于單詞、詞組、試題等。
步驟S102,在所述電子終端的屏幕上顯示所述后置攝像頭拍攝到的預(yù)覽畫面。
步驟S103,啟動(dòng)電子終端的前置攝像頭,通過所述前置攝像頭捕捉用戶瞳孔的運(yùn)動(dòng)軌跡。
在本發(fā)明實(shí)施例中,該前置攝像頭可以為上述電子終端的內(nèi)置攝像頭,也可以為上述電子終端的外置攝像頭??蛇x的是,所述前置攝像頭也可以采用眼動(dòng)儀,通過眼動(dòng)儀捕捉用戶瞳孔的運(yùn)動(dòng)軌跡。
步驟S104,將捕捉到的所述運(yùn)動(dòng)軌跡映射到屏幕的對應(yīng)位置,截取所述屏幕對應(yīng)位置內(nèi)的預(yù)覽畫面。
例如,當(dāng)所述運(yùn)動(dòng)軌跡為一圓形或橢圓形時(shí),則映射到屏幕對應(yīng)位置的軌跡也為一圓形或橢圓形。
較佳的,所述將捕捉到的所述運(yùn)動(dòng)軌跡映射到屏幕的對應(yīng)位置,截取所述屏幕對應(yīng)位置內(nèi)的預(yù)覽畫面包括:
將捕捉到的所述運(yùn)動(dòng)軌跡映射到屏幕的對應(yīng)位置,并在映射到屏幕對應(yīng)位置的軌跡形成一閉環(huán)時(shí),截取所述閉環(huán)內(nèi)的預(yù)覽畫面。
較佳的,所述將捕捉到的所述運(yùn)動(dòng)軌跡映射到屏幕的對應(yīng)位置,截取所述屏幕對應(yīng)位置內(nèi)的預(yù)覽畫面還可以包括:
將捕捉到的所述運(yùn)動(dòng)軌跡映射到屏幕的對應(yīng)位置,并在接收到拍照指令時(shí),截取所述屏幕對應(yīng)位置內(nèi)的預(yù)覽畫面。其中,所述拍照指令具體可以為在所述前置攝像頭捕捉到用戶的眨眼動(dòng)作(例如在預(yù)定時(shí)間內(nèi)連續(xù)眨眼兩次以上)時(shí),觸發(fā)拍照指令。示例性的,可以是在接收到拍照指令后,對當(dāng)前的預(yù)覽畫面進(jìn)行拍照,再截取拍照后的所述屏幕對應(yīng)位置內(nèi)的圖片。
步驟S105,將截取的預(yù)覽畫面上傳至服務(wù)器進(jìn)行識別以及試題匹配。
在本發(fā)明實(shí)施例中,文字識別技術(shù)包括但不限于光學(xué)字符識別(OCR,Optical Character Recognition)技術(shù)、場景文本識別(STR,Scene Text Recognition)技術(shù)等。在通過所述文字識別技術(shù)對截取的預(yù)覽畫面進(jìn)行文字識別后,將識別后的文字放入題庫進(jìn)行搜索匹配,并將匹配后的結(jié)果反饋給所述電子終端。
步驟S106,接收并顯示所述服務(wù)器反饋的與本次匹配到的試題對應(yīng)的解題結(jié)果。
例如,當(dāng)本次匹配到的試題數(shù)量為1時(shí),接收并顯示與匹配到的試題對應(yīng)的一個(gè)或多個(gè)結(jié)果。其中,所述解題結(jié)果可以包括:解題過程和答案。
較佳的,由于傳統(tǒng)的搜題類App采用單一的呈現(xiàn)方式直接顯示解題結(jié)果,使學(xué)生容易形成依賴思想,直接搜題和抄襲答案,缺乏過程思考及參與感,很難激發(fā)解題興趣。因此,可選的,本發(fā)明實(shí)施例在顯示解題結(jié)果的同時(shí)使用非透明蒙層遮擋該解題結(jié)果,只有在通過輸入蒙層消除指令消除該非透明蒙層后才能查看到相應(yīng)的解題結(jié)果,從而為學(xué)生提供更多的思考時(shí)間。
其中,所述顯示所述服務(wù)器反饋的與本次匹配到的試題對應(yīng)的解題結(jié)果可以包括:
顯示所述服務(wù)器反饋的與本次匹配到的試題對應(yīng)的解題過程并使用預(yù)設(shè)的第一非透明蒙層遮擋所述解題過程;
顯示所述服務(wù)器反饋的與本次匹配到的試題對應(yīng)的答案并使用預(yù)設(shè)的第二非透明蒙層遮擋所述答案;
在顯示所述服務(wù)器反饋的與本次匹配到的試題對應(yīng)的解題結(jié)果之后,還可以包括:
當(dāng)接收到第一蒙層消除指令時(shí),在所述第一蒙層消除指令的指示下消除所述第一非透明蒙層;
當(dāng)接收到第二蒙層消除指令時(shí),在所述第二蒙層消除指令的指示下消除所述第二非透明蒙層。
具體地,用戶可以分別通過預(yù)設(shè)的不同的實(shí)體按鍵輸入上述第一蒙層消除指令和上述第一蒙層消除指令,或者,也可以通過觸摸操作輸入該第一蒙層消除指令和該第二蒙層消除指令。對于上述觸摸操作,可以設(shè)定當(dāng)檢測到用戶觸摸上述第一非透明蒙層(或上述第二非透明蒙層)所在的區(qū)域時(shí),即判定接收到上述第一蒙層消除指令(或上述第二蒙層消除指令),并可以在上述第一蒙層消除指令(或上述第二蒙層消除指令)的指示下,消除上述第一非透明蒙層(或上述第一非透明蒙層)的全部區(qū)域或者被觸摸區(qū)域(消除上述第一非透明蒙層(或上述第二非透明蒙層)的被觸摸區(qū)域類似于刮獎(jiǎng)形式)。
本發(fā)明實(shí)施例通過后置攝像頭拍攝預(yù)覽畫面,前置攝像頭捕捉用戶瞳孔的運(yùn)動(dòng)軌跡,并將捕捉到的所述運(yùn)動(dòng)軌跡映射到屏幕的對應(yīng)位置,以截取所述對應(yīng)位置內(nèi)的預(yù)覽畫面。本發(fā)明實(shí)施例不需等拍攝圖片后再截取試題,簡化了操作流程,提高了搜題效率。而且,采用眼動(dòng)感應(yīng)控制電子終端搜索試題,解決了現(xiàn)有搜題方式單一的問題,滿足了用戶的個(gè)性化需求。
請參閱圖2,為本發(fā)明實(shí)施例提供的應(yīng)用于電子終端的搜題裝置的組成結(jié)構(gòu)示意圖。為了便于說明,僅示出了與本發(fā)明實(shí)施例相關(guān)的部分。
所述應(yīng)用于電子終端的搜題裝置可以是內(nèi)置于電子終端(例如手機(jī)、平板電腦等)內(nèi)的軟件單元、硬件單元或者是軟硬結(jié)合的單元,也可以作為獨(dú)立的掛件集成到所述電子終端中。
所述應(yīng)用于電子終端的搜題裝置包括:
啟動(dòng)模塊21,用于當(dāng)接收到搜題觸發(fā)指令時(shí),啟動(dòng)電子終端的后置攝像頭;
第一顯示模塊22,用于在所述電子終端的屏幕上顯示所述后置攝像頭拍攝到的預(yù)覽畫面;
捕捉模塊23,用于啟動(dòng)電子終端的前置攝像頭,通過所述前置攝像頭捕捉用戶瞳孔的運(yùn)動(dòng)軌跡;
截取模塊24,用于將捕捉到的所述運(yùn)動(dòng)軌跡映射到屏幕的對應(yīng)位置,截取所述屏幕對應(yīng)位置內(nèi)的預(yù)覽畫面;
上傳模塊25,用于將截取的預(yù)覽畫面上傳至服務(wù)器進(jìn)行識別以及試題匹配;
第二顯示模塊26,用于接收并顯示所述服務(wù)器反饋的與本次匹配到的試題對應(yīng)的解題結(jié)果。
可選的,所述截取模塊24具體用于:
將捕捉到的所述運(yùn)動(dòng)軌跡映射到屏幕的對應(yīng)位置,并在映射到屏幕對應(yīng)位置的軌跡形成一閉環(huán)時(shí),截取所述閉環(huán)內(nèi)的預(yù)覽畫面。
可選的,所述截取模塊24具體用于:
將捕捉到的所述運(yùn)動(dòng)軌跡映射到屏幕的對應(yīng)位置,并在接收到拍照指令時(shí),截取所述屏幕對應(yīng)位置內(nèi)的預(yù)覽畫面。
可選的,所述截取模塊24具體用于:
將捕捉到的所述運(yùn)動(dòng)軌跡映射到屏幕的對應(yīng)位置,并在所述前置攝像頭捕捉到用戶的眨眼動(dòng)作時(shí),觸發(fā)拍照指令,截取所述屏幕對應(yīng)位置內(nèi)的預(yù)覽畫面。
可選的,所述解題結(jié)果包括:解題過程和答案;
所述第二顯示模塊26具體用于,顯示所述服務(wù)器反饋的與本次匹配到的試題對應(yīng)的解題過程并使用預(yù)設(shè)的第一非透明蒙層遮擋所述解題過程,以及顯示所述服務(wù)器反饋的與本次匹配到的試題對應(yīng)的答案并使用預(yù)設(shè)的第二非透明蒙層遮擋所述答案;
所述裝置還包括:
消除模塊27,用于在顯示所述服務(wù)器反饋的與本次匹配到的試題對應(yīng)的解題結(jié)果之后,當(dāng)接收到第一蒙層消除指令時(shí),在所述第一蒙層消除指令的指示下消除所述第一非透明蒙層;當(dāng)接收到第二蒙層消除指令時(shí),在所述第二蒙層消除指令的指示下消除所述第二非透明蒙層。
綜上所述,本發(fā)明實(shí)施例通過后置攝像頭拍攝預(yù)覽畫面,前置攝像頭捕捉用戶瞳孔的運(yùn)動(dòng)軌跡,并將捕捉到的所述運(yùn)動(dòng)軌跡映射到屏幕的對應(yīng)位置,以截取所述對應(yīng)位置內(nèi)的預(yù)覽畫面。本發(fā)明實(shí)施例不需等拍攝圖片后再截取試題,簡化了操作流程,提高了搜題效率。而且,采用眼動(dòng)感應(yīng)控制電子終端搜索試題,解決了現(xiàn)有搜題方式單一的問題,滿足了用戶的個(gè)性化需求,具有較強(qiáng)的易用性和實(shí)用性。
所屬領(lǐng)域的技術(shù)人員可以清楚地了解到,為了描述的方便和簡潔,僅以上述各功能模塊的劃分進(jìn)行舉例說明,實(shí)際應(yīng)用中,可以根據(jù)需要而將上述功能分配由不同的功能單元、模塊完成,即將所述裝置的內(nèi)部結(jié)構(gòu)劃分成不同的功能單元或模塊,以完成以上描述的全部或者部分功能。實(shí)施例中的各功能模塊可以集成在一個(gè)處理單元中,也可以是各個(gè)單元單獨(dú)物理存在,也可以兩個(gè)或兩個(gè)以上單元集成在一個(gè)單元中,上述集成的單元既可以采用硬件的形式實(shí)現(xiàn),也可以采用軟件功能單元的形式實(shí)現(xiàn)。另外,各功能模塊的具體名稱也只是為了便于相互區(qū)分,并不用于限制本申請的保護(hù)范圍。上述裝置中模塊的具體工作過程,可以參考前述方法實(shí)施例中的對應(yīng)過程,在此不再贅述。
本領(lǐng)域普通技術(shù)人員可以意識到,結(jié)合本文中所公開的實(shí)施例描述的各示例的模塊及算法步驟,能夠以電子硬件、或者計(jì)算機(jī)軟件和電子硬件的結(jié)合來實(shí)現(xiàn)。這些功能究竟以硬件還是軟件方式來執(zhí)行,取決于技術(shù)方案的特定應(yīng)用和設(shè)計(jì)約束條件。專業(yè)技術(shù)人員可以對每個(gè)特定的應(yīng)用來使用不同方法來實(shí)現(xiàn)所描述的功能,但是這種實(shí)現(xiàn)不應(yīng)認(rèn)為超出本發(fā)明的范圍。
在本發(fā)明所提供的實(shí)施例中,應(yīng)該理解到,所揭露的裝置和方法,可以通過其它的方式實(shí)現(xiàn)。例如,以上所描述的裝置實(shí)施例僅僅是示意性的,例如,所述模塊或單元的劃分,僅僅為一種邏輯功能劃分,實(shí)際實(shí)現(xiàn)時(shí)可以有另外的劃分方式,例如多個(gè)單元或組件可以結(jié)合或者可以集成到另一個(gè)系統(tǒng),或一些特征可以忽略,或不執(zhí)行。另一點(diǎn),所顯示或討論的相互之間的耦合或直接耦合或通訊連接可以是通過一些接口,裝置或單元的間接耦合或通訊連接,可以是電性,機(jī)械或其它的形式。
所述作為分離部件說明的單元可以是或者也可以不是物理上分開的,作為單元顯示的部件可以是或者也可以不是物理單元,即可以位于一個(gè)地方,或者也可以分布到多個(gè)網(wǎng)絡(luò)單元上??梢愿鶕?jù)實(shí)際的需要選擇其中的部分或者全部單元來實(shí)現(xiàn)本實(shí)施例方案的目的。
另外,在本發(fā)明各個(gè)實(shí)施例中的各功能單元可以集成在一個(gè)處理單元中,也可以是各個(gè)單元單獨(dú)物理存在,也可以兩個(gè)或兩個(gè)以上單元集成在一個(gè)單元中。上述集成的單元既可以采用硬件的形式實(shí)現(xiàn),也可以采用軟件功能單元的形式實(shí)現(xiàn)。
所述集成的單元如果以軟件功能單元的形式實(shí)現(xiàn)并作為獨(dú)立的產(chǎn)品銷售或使用時(shí),可以存儲在一個(gè)計(jì)算機(jī)可讀取存儲介質(zhì)中?;谶@樣的理解,本發(fā)明實(shí)施例的技術(shù)方案本質(zhì)上或者說對現(xiàn)有技術(shù)做出貢獻(xiàn)的部分或者該技術(shù)方案的全部或部分可以以軟件產(chǎn)品的形式體現(xiàn)出來,該計(jì)算機(jī)軟件產(chǎn)品存儲在一個(gè)存儲介質(zhì)中,包括若干指令用以使得一臺計(jì)算機(jī)設(shè)備(可以是個(gè)人計(jì)算機(jī),服務(wù)器,或者網(wǎng)絡(luò)設(shè)備等)或處理器(processor)執(zhí)行本發(fā)明實(shí)施例各個(gè)實(shí)施例所述方法的全部或部分步驟。而前述的存儲介質(zhì)包括:U盤、移動(dòng)硬盤、只讀存儲器(ROM,Read-Only Memory)、隨機(jī)存取存儲器(RAM,Random Access Memory)、磁碟或者光盤等各種可以存儲程序代碼的介質(zhì)。
以上所述實(shí)施例僅用以說明本發(fā)明的技術(shù)方案,而非對其限制;盡管參照前述實(shí)施例對本發(fā)明進(jìn)行了詳細(xì)的說明,本領(lǐng)域的普通技術(shù)人員應(yīng)當(dāng)理解:其依然可以對前述各實(shí)施例所記載的技術(shù)方案進(jìn)行修改,或者對其中部分技術(shù)特征進(jìn)行等同替換;而這些修改或者替換,并不使相應(yīng)技術(shù)方案的本質(zhì)脫離本發(fā)明實(shí)施例各實(shí)施例技術(shù)方案的精神和范圍。