本發(fā)明涉及電子技術(shù)領(lǐng)域,尤其涉及一種語音操作事件添加方法及終端。
背景技術(shù):
隨著智能手機(jī)、平板電腦等終端的快速發(fā)展與普及,終端上的功能日益豐富,例如,終端可以實現(xiàn)語音控制拍照、語音控制撥打電話以及語音控制應(yīng)用啟動等。目前,用戶可以在終端上添加語音操作事件,具體是,用戶在終端上執(zhí)行一系列操作后,終端可以將輸入的語音與這一系列操作綁定,用戶后續(xù)在輸入對應(yīng)的語音后,終端會模擬用戶執(zhí)行對應(yīng)的操作。
在實踐中發(fā)現(xiàn),如果通過上述方式添加語音操作事件,終端后續(xù)在進(jìn)行語音控制時,只能執(zhí)行設(shè)定好的操作步驟,如果用戶需要更改操作步驟中的其中一個,就需要修改或者重新添加語音操作事件??梢?,現(xiàn)有的語音操作事件添加方式不夠靈活。
技術(shù)實現(xiàn)要素:
本發(fā)明實施例提供了一種語音控制方法及終端,可以提高對終端的語音操作事件添加的靈活度。
第一方面,本發(fā)明實施例提供了一種語音操作事件添加方法,該方法包括:
接收語音操作事件添加指令,所述語音操作事件添加指令用于指示添加語音操作事件;
響應(yīng)所述語音操作事件添加指令,生成編輯界面,所述編輯界面包括終端的當(dāng)前界面的至少一個操作對象;
檢測在所述編輯界面針對目標(biāo)操作對象輸入的操作和語音信息,所述至少一個操作對象包括所述目標(biāo)操作對象;
根據(jù)所述語音信息和所述操作,生成所述目標(biāo)操作對象的第一語音操作事件;
將所述第一語音操作事件與所述當(dāng)前界面的所述目標(biāo)操作對象綁定。
另一方面,本發(fā)明實施例提供了一種終端,該終端包括:
接收單元,用于接收語音操作事件添加指令,所述語音操作事件添加指令用于指示添加語音操作事件;
生成單元,用于響應(yīng)所述語音操作事件添加指令,生成編輯界面,所述編輯界面包括終端的當(dāng)前界面的至少一個操作對象;
檢測單元,用于檢測在所述編輯界面針對目標(biāo)操作對象輸入的操作和語音信息,所述至少一個操作對象包括所述目標(biāo)操作對象;
所述生成單元,還用于根據(jù)所述語音信息和所述操作,生成所述目標(biāo)操作對象的第一語音操作事件;
綁定單元,用于將所述第一語音操作事件與所述當(dāng)前界面的所述目標(biāo)操作對象綁定。
本發(fā)明實施例可以對終端各個顯示界面中的操作對象添加語音操作事件,用戶后續(xù)在該顯示界面輸入語音信息時,終端即可根據(jù)添加的語音操作事件對該顯示界面的操作對象進(jìn)行語音控制,不僅能夠提高語音操作事件添加的靈活度,還能提高后續(xù)進(jìn)行語音控制的靈活度。
附圖說明
為了更清楚地說明本發(fā)明實施例中的技術(shù)方案,下面將對實施例描述中所需要使用的附圖作簡單地介紹,顯而易見地,下面描述中的附圖是本發(fā)明的一些實施例,對于本領(lǐng)域普通技術(shù)人員來講,在不付出創(chuàng)造性勞動的前提下,還可以根據(jù)這些附圖獲得其他的附圖。
圖1是本發(fā)明實施例提供的一種語音控制方法的流程示意圖;
圖2是本發(fā)明另一實施例提供的一種語音操作事件添加方法的流程示意圖;
圖3是本發(fā)明實施例提供的一種編輯界面的示意圖;
圖4是本發(fā)明實施例提供的另一種編輯界面的示意圖;
圖5是本發(fā)明實施例提供的一種終端的示意性框圖;
圖6是本發(fā)明另一實施例提供的一種終端的示意性框圖;
圖7是本發(fā)明又一實施例提供的一種終端的示意性框圖。
具體實施方式
下面將結(jié)合本發(fā)明實施例中的附圖,對本發(fā)明實施例中的技術(shù)方案進(jìn)行清楚、完整地描述,顯然,所描述的實施例是本發(fā)明一部分實施例,而不是全部的實施例?;诒景l(fā)明中的實施例,本領(lǐng)域普通技術(shù)人員在沒有作出創(chuàng)造性勞動前提下所獲得的所有其他實施例,都屬于本發(fā)明保護(hù)的范圍。
應(yīng)當(dāng)理解,當(dāng)在本說明書和所附權(quán)利要求書中使用時,術(shù)語“包括”和“包含”指示所描述特征、整體、步驟、操作、元素和/或組件的存在,但并不排除一個或多個其它特征、整體、步驟、操作、元素、組件和/或其集合的存在或添加。
還應(yīng)當(dāng)理解,在此本發(fā)明說明書中所使用的術(shù)語僅僅是出于描述特定實施例的目的而并不意在限制本發(fā)明。如在本發(fā)明說明書和所附權(quán)利要求書中所使用的那樣,除非上下文清楚地指明其它情況,否則單數(shù)形式的“一”、“一個”及“該”意在包括復(fù)數(shù)形式。
還應(yīng)當(dāng)進(jìn)一步理解,在本發(fā)明說明書和所附權(quán)利要求書中使用的術(shù)語“和/或”是指相關(guān)聯(lián)列出的項中的一個或多個的任何組合以及所有可能組合,并且包括這些組合。
如在本說明書和所附權(quán)利要求書中所使用的那樣,術(shù)語“如果”可以依據(jù)上下文被解釋為“當(dāng)...時”或“一旦”或“響應(yīng)于確定”或“響應(yīng)于檢測到”。類似地,短語“如果確定”或“如果檢測到[所描述條件或事件]”可以依據(jù)上下文被解釋為意指“一旦確定”或“響應(yīng)于確定”或“一旦檢測到[所描述條件或事件]”或“響應(yīng)于檢測到[所描述條件或事件]”。
具體實現(xiàn)中,本發(fā)明實施例中描述的終端包括但不限于諸如具有觸摸敏感表面(例如,觸摸屏顯示器和/或觸摸板)的移動電話、膝上型計算機(jī)或平板計算機(jī)之類的其它便攜式設(shè)備。還應(yīng)當(dāng)理解的是,在某些實施例中,所述設(shè)備并非便攜式通信設(shè)備,而是具有觸摸敏感表面(例如,觸摸屏顯示器和/或觸摸板)的臺式計算機(jī)。
在接下來的討論中,描述了包括顯示器和觸摸敏感表面的終端。然而,應(yīng)當(dāng)理解的是,終端可以包括諸如物理鍵盤、鼠標(biāo)和/或控制桿的一個或多個其它物理用戶接口設(shè)備。
終端支持各種應(yīng)用程序,例如以下中的一個或多個:繪圖應(yīng)用程序、演示應(yīng)用程序、文字處理應(yīng)用程序、網(wǎng)站創(chuàng)建應(yīng)用程序、盤刻錄應(yīng)用程序、電子表格應(yīng)用程序、游戲應(yīng)用程序、電話應(yīng)用程序、視頻會議應(yīng)用程序、電子郵件應(yīng)用程序、即時消息收發(fā)應(yīng)用程序、鍛煉支持應(yīng)用程序、照片管理應(yīng)用程序、數(shù)碼相機(jī)應(yīng)用程序、數(shù)字?jǐn)z影機(jī)應(yīng)用程序、web瀏覽應(yīng)用程序、數(shù)字音樂播放器應(yīng)用程序和/或數(shù)字視頻播放器應(yīng)用程序。
可以在終端上執(zhí)行的各種應(yīng)用程序可以使用諸如觸摸敏感表面的至少一個公共物理用戶接口設(shè)備??梢栽趹?yīng)用程序之間和/或相應(yīng)應(yīng)用程序內(nèi)調(diào)整和/或改變觸摸敏感表面的一個或多個功能以及終端上顯示的相應(yīng)信息。這樣,終端的公共物理架構(gòu)(例如,觸摸敏感表面)可以支持具有對用戶而言直觀且透明的用戶界面的各種應(yīng)用程序。
請參閱圖1,圖1是本發(fā)明實施例提供的一種語音控制方法的流程示意圖。如圖1所示,該方法可以包括以下步驟:
101、終端接收輸入的語音信息,并查找與該語音信息對應(yīng)的語音操作事件。
本發(fā)明實施例中,終端可以預(yù)先創(chuàng)建語音控制數(shù)據(jù)庫,該語音控制數(shù)據(jù)庫包括有語音信息(也可以是控制指令,該控制指令需要終端對用戶輸入的語音信息進(jìn)行文字解析得出),以及與其對應(yīng)的語音操作事件,語音操作事件包括有被操作的對象以及模擬用戶實際操作的動作,進(jìn)一步還可以包括被操作對象所屬界面的信息,例如,該操作對象具體是哪個應(yīng)用的哪個功能界面,等等。
舉例來說,語音控制數(shù)據(jù)庫中,存儲有“解鎖”的控制指令,該控制指令可以是以語音形式存在,也可以是以文字形式存在,如果該控制指令為文字,那么需要語音觸發(fā),該解鎖的控制指令對應(yīng)的語音操作事件為從左至右滑動鎖屏界面。
本發(fā)明實施例中,該語音控制數(shù)據(jù)庫中的語音操作事件可以是從服務(wù)器同步的,也可以是用戶自定義的,本發(fā)明實施例不做限定。終端在開機(jī)后可以自動與服務(wù)器進(jìn)行通信,同步服務(wù)器中最新的語音操作事件,例如,當(dāng)前的語音控制數(shù)據(jù)庫中未存儲的,或者語音操作事件與語音信息之間的對應(yīng)關(guān)系有修改的,同時也會加載用戶自定義的語音操作事件到語音控制數(shù)據(jù)庫中。
本發(fā)明實施例中,終端可以是在啟動后自動同步各個系統(tǒng)界面的語音操作事件,也可以是在進(jìn)入某一界面時同步該界面的語音操作事件,還可以是在打開某一應(yīng)用程序后,通過該應(yīng)用程序的部分或全部的語音操作事件,本發(fā)明實施例不做限定。
以android系統(tǒng)為例,Android系統(tǒng)定位一個操作對象,需要先獲取當(dāng)前Activity的rootview,方法是:
View rootView=activity.getWindow().getDecorView().getRootView();
然后遍歷語音控制事件列表,用每個語音控制事件中操作對象的唯一標(biāo)識去匹配rootview中的內(nèi)容,匹配規(guī)則:
viewClassName&&id&&tag&&contentDescription
當(dāng)符合條件時,就給當(dāng)前的view添加一個AccessibilityDelegate對象
View.AccessibilityDelegate ret=null;
本發(fā)明實施例中,用戶當(dāng)需要對終端的當(dāng)前界面進(jìn)行操作時,可以對著終端說出對應(yīng)的語音,該終端就可以通過麥克風(fēng)模塊接收到用戶輸入的語音信息,從而可以從語音控制數(shù)據(jù)庫中查找與該語音信息對應(yīng)的語音操作事件。
進(jìn)一步的,終端在接收到用戶輸入的語音信息后,還可以對該語音信息進(jìn)行解析,解析出對應(yīng)的操作指令,從而從語音控制數(shù)據(jù)庫中查找與該操作指令對應(yīng)的語音操作事件。
102、終端判斷該終端的當(dāng)前界面是否存在該語音操作事件的操作對象,如果存在,執(zhí)行步驟103;如果不存在,結(jié)束本流程。
本發(fā)明實施例中,如果終端在語音控制數(shù)據(jù)庫中查找到與該語音信息對應(yīng)的語音操作事件,那么終端可以進(jìn)一步判斷該語音操作事件所指示的操作對象是否存在于該終端當(dāng)前的顯示界面中。也就是說,不同的語音信息所對應(yīng)的語音操作事件不同,且每個語音操作事件的操作對象都是針對不同的顯示界面的,這樣給每個顯示界面中的可操作對象關(guān)聯(lián)語音操作事件,從而可以提高通過語音控制終端的靈活度以及精準(zhǔn)度。
舉例來說,如果用戶輸入的語音信息用于指示需要啟動某一應(yīng)用的某一功能,但終端當(dāng)前所在的界面處于桌面,即該應(yīng)用并沒有啟動,那么終端即使查找到語音控制數(shù)據(jù)庫中存在與用戶輸入的語音信息對應(yīng)的語音操作事件,也不會響應(yīng)用戶輸入的語音信息。
103、終端對該操作對象執(zhí)行該語音操作事件所指示的操作,并結(jié)束本流程。
本發(fā)明實施例中,當(dāng)終端判斷出語音操作事件的操作對象為該終端當(dāng)前界面中的可操作對象時,該終端就可以根據(jù)該語音操作事件對該操作對象執(zhí)行器所指示的操作。當(dāng)終端判斷出該語音操作事件的操作對象并不為該終端當(dāng)前界面中的可操作對象時,終端可以不對該語音信息做任何響應(yīng),也可以輸出提示信息以提示用戶輸入有誤,本發(fā)明實施例不做限定。
舉例來說,當(dāng)用戶說出“購物車”時,終端對該購物車進(jìn)行解析,得到需要打開購物車的功能界面,從而可以查找到打開購物車的功能界面的方式為點擊“購物車”三個字,那么終端會進(jìn)一步獲取當(dāng)前所在界面的界面信息。如果當(dāng)前所在的界面為網(wǎng)購應(yīng)用的首頁,該首頁有“購物車”字樣的控件,那么終端就可以模擬用戶點擊“購物車”字樣,從而打開購物車的功能界面。如果當(dāng)前所在的界面為社交應(yīng)用的聊天界面,終端檢測出當(dāng)前界面并沒有“購物車”字樣的控件,從而可以提示輸入有誤的提示信息,從而不觸發(fā)任何操作。
需要說明的是,終端可以對操作系統(tǒng)的界面進(jìn)行語音控制,也可以對某些應(yīng)用程序的界面進(jìn)行語音控制,本發(fā)明實施例不做限定。當(dāng)終端對操作系統(tǒng)的界面進(jìn)行語音控制時,需要開發(fā)一個獨立的具有語音控制功能的應(yīng)用程序,操作系統(tǒng)在對該應(yīng)用程序授權(quán)通過后,該應(yīng)用程序即可通過語音對操作系統(tǒng)的界進(jìn)行控制;當(dāng)終端對某些應(yīng)用程序的界面進(jìn)行語音控制時,可以將具有語音控制功能的語音控制模塊嵌入這些應(yīng)用程序中,這樣用戶在輸入語音信息時,即可通過語音對這些應(yīng)用程序的界面進(jìn)行控制。
作為一種可行的實施方式,終端在接收輸入的語音信息之前,還可以執(zhí)行以下操作:
11)終端獲取該終端的控制模式,其中,該終端的控制模塊包括觸屏控制模式和語音控制模式中的至少一種;
12)在該控制模式包括語音控制模式時,接收輸入的語音信息。
具體實現(xiàn)中,如果終端需要對操作系統(tǒng)的界面進(jìn)行語音控制,需要開發(fā)一個獨立的具有語音控制功能的應(yīng)用程序,操作系統(tǒng)需要對該應(yīng)用程序進(jìn)行授權(quán),如果授權(quán)通過,那么用戶就可以通過兩種方式實現(xiàn)對終端的控制,即觸屏控制和語音控制。也就是說,如果操作系統(tǒng)對該具有語音控制功能的應(yīng)用程序授權(quán)通過,那么該終端即存在觸屏控制和語音控制這兩種控制模式。
因此,終端在開機(jī)之后,可以獲取其控制模式,即檢測語音控制模式是否開啟,如果開啟,就可以啟動語音接收模塊,如麥克風(fēng),從而通過語音接收模塊接收用戶輸入的語音信息,再可以根據(jù)語音信息對操作系統(tǒng)的界面進(jìn)行語音控制。如果沒有開啟語音控制模式,那么可以不用開啟語音接收模塊,這樣可以避免語音接收模塊長期處于工作狀態(tài),從而在一定程度上可以減少終端硬件的損耗以及減少終端的電能消耗。
作為另一種可行的實施方式,終端判斷終端的當(dāng)前界面是否存在該語音操作事件的操作對象的具體方式可以為:
判斷終端的當(dāng)前界面是否為預(yù)設(shè)應(yīng)用程序的操作界面;
在該當(dāng)前界面為預(yù)設(shè)應(yīng)用程序的操作界面時,獲取該當(dāng)前界面的操作對象集合;
判斷該操作對象集合中是否存在該語音操作事件的操作對象;
在該操作對象集合中存在該語音操作事件的操作對象時,確定該終端的當(dāng)前界面存在該語音操作事件的操作對象。
具體實現(xiàn)中,可以開發(fā)一個具有語音控制功能的語音控制模塊,如果某些應(yīng)用程序的需要添加語音控制功能,這些應(yīng)用程序可以添加該語音控制模塊。也即是說,可以在需要語音控制的應(yīng)用程序中集成語音控制模塊。當(dāng)終端啟動該應(yīng)用程序時,用戶可以通過語音對該應(yīng)用程序的各個界面進(jìn)行控制。
因此,終端在從語音控制數(shù)據(jù)庫中查找到與該語音信息對應(yīng)的語音操作事件后,可以判斷該終端的當(dāng)前界面是否為應(yīng)用程序的操作界面。其中,該預(yù)設(shè)應(yīng)用程序即為具有語音控制功能的應(yīng)用程序,即集成有語音控制模塊的應(yīng)用程序。如果該終端的當(dāng)前界面為預(yù)設(shè)應(yīng)用程序的操作界面,則可以獲取該當(dāng)前界面的操作對象集合。其中,該操作對象集合可以包括該當(dāng)前界面的所有操作對象,也可以包括該當(dāng)前界面的部分操作對象,如只添加有語音操作事件的操作對象,本發(fā)明實施例不做限定。
進(jìn)一步的,終端可以判斷該操作對象集合中是否存在該語音操作事件的操作對象,如果存在,則確定該終端的當(dāng)前界面存在該語音操作事件的操作對象。
作為又一種可行的實施方式,該語音信息可以包括聲紋信息,那么終端在接收用戶輸入的語音信息后,還可以執(zhí)行以下操作:
判斷該聲紋信息是否與預(yù)設(shè)聲紋信息匹配,如果該聲紋信息與預(yù)設(shè)聲紋信息匹配,再執(zhí)行查找與該語音信息對應(yīng)的語音操作事件的操作;如果不匹配,則忽略該語音信息,從而結(jié)束本流程。
具體實現(xiàn)中,預(yù)設(shè)聲紋信息可以是終端語音存儲的用戶的聲紋信息。通過對聲紋信息的認(rèn)證,可以提高對終端進(jìn)行語音控制的安全性。
作為又一種可行的實施方式,該語音信息可以包括音量值,那么終端在接收用戶輸入的語音信息后,還可以執(zhí)行以下操作:
判斷該音量值是否在預(yù)設(shè)音量范圍內(nèi),如果該音量值在預(yù)設(shè)音量范圍內(nèi),再執(zhí)行查找與該語音信息對應(yīng)的語音操作事件的操作;如果不在,則忽略該語音信息,從而結(jié)束本流程。
通過對輸入的語音信息的音量設(shè)定范圍,可以避免用戶的誤操作。例如,用戶在與朋友聊天的場景中,可能會出現(xiàn)某詞語或者句子與終端當(dāng)前界面的操作對象綁定的語音操作事件匹配,如果不對音量值進(jìn)行認(rèn)證,會誤觸發(fā)終端執(zhí)行對應(yīng)的操作,從而會增加終端的電量消耗。
可見,在圖1所描述的方法中,用戶輸入語音信息后,終端可以查找與該語音信息對應(yīng)的語音操作事件,如果該語音信息對應(yīng)的語音操作事件的操作對象存在于該終端的當(dāng)前界面中,終端才會對當(dāng)前界面中的該操作對象執(zhí)行該語音操作事件所指示的操作。通過本發(fā)明實施例,終端可以實現(xiàn)通過語音對終端各個界面的控制,不僅可以提高對終端進(jìn)行語音控制的精準(zhǔn)度,還可以提高語音控制終端的靈活度。
請參閱圖2,圖2是本發(fā)明另一實施例提供的一種語音控制方法的流程示意圖。如圖2所示,該方法可以包括以下步驟:
201、終端接收語音操作事件添加指令。
本發(fā)明實施例中,終端可以設(shè)置懸浮窗,該懸浮窗可以懸浮于終端的各個顯示界面上,也可以懸浮于終端指定的顯示界面上,該懸浮窗設(shè)置有用于添加終端界面中的語音操作事件的功能按鈕,用戶可以通過輸入語音而控制終端模擬用戶點擊該功能按鈕,也可以手動點擊該功能按鈕,當(dāng)點擊該功能按鈕時,終端會生成操作事件添加指令。
本發(fā)明實施例中,該語音操作事件添加指令用于指示添加語音操作事件,具體可以用于指示為該終端的當(dāng)前界面添加語音操作事件。當(dāng)用戶在終端的當(dāng)前界面點擊懸浮窗中用于添加語音操作事件的功能按鈕時,終端會接收到針對該當(dāng)前界面的語音操作事件添加指令。
202、終端響應(yīng)該語音操作事件添加指令,生成編輯界面。
本發(fā)明實施例中,該編輯界面區(qū)別于該終端當(dāng)前的顯示界面,包括了該終端當(dāng)前的顯示界面中的至少一個操作對象。終端在接收到語音操作事件添加指令后,可以根據(jù)該終端的當(dāng)前界面生成編輯界面。
具體的,終端在接收到語音操作事件添加指令后,首先可以獲取終端當(dāng)前界面的所有視覺view屬性,該視覺屬性包括位置相關(guān)的,如坐標(biāo)信息、寬度、高度以及偏移等;唯一性相關(guān)的,如識別碼、類名等;繪制相關(guān)的,如隱藏屬性、灰度通道等,本發(fā)明實施例不做限定。以android系統(tǒng)為例,終端在獲取到當(dāng)前界面的所有view屬性后,可以通過函數(shù)“void android.graphics.Canvas.draw Bitmap(bitmap bitmap,float left,float top,Paint paint);”來繪制當(dāng)前界面的副本(即編輯界面),具體是打開一個新界面,在新界面中繪制出該終端當(dāng)前界面中至少一個可操作的對象(也可以稱為控件),然后可以按照這些可操作對象在原始界面的位置在新界面中進(jìn)行排列。如圖3所示,圖3是本發(fā)明實施例提供的一種編輯界面的示意圖,在圖3中,終端生成的編輯界面中的操作對象與終端的當(dāng)前界面中的操作對象相同,位置可以是相同,也可以不同,本發(fā)明實施例不做限定。
需要說明的是,終端可以將當(dāng)前界面中所有的可操作對象繪制在編輯界面中,也可以將當(dāng)前界面中的部分可操作對象繪制在編輯界面中,也即是說,該編輯界面可以包括已經(jīng)綁定有語音操作事件的操作對象,也可以包括未綁定語音操作事件的操作對象,本發(fā)明實施例不做限定。
作為一種可行的實施方式,終端響應(yīng)該語音操作事件添加指令,生成編輯界面的具體方式可以為:
響應(yīng)該語音操作事件添加指令,獲取終端當(dāng)前界面的界面信息,其中,該界面信息包括當(dāng)前界面中的至少一個操作對象以及該至少一個操作對象的屬性信息;
根據(jù)該至少一個操作對象的屬性信息生成包括該至少一個操作對象的編輯界面。
具體實現(xiàn)中,該屬性信息可以是指操作對象在當(dāng)前界面的坐標(biāo)位置以及尺寸大小等,終端在接收到語音操作事件添加指令后,即可獲取終端當(dāng)前界面的界面信息中的至少一個操作對象,以及其位置和尺寸大小,從而根據(jù)操作對象在當(dāng)前界面的位置和尺寸大小將其繪制在編輯界面中。
進(jìn)一步的,終端在繪制編輯界面時,可以對編輯界面中的每個操作對象繪制邊框,這樣用戶在添加語音操作事件時可以更加容易區(qū)分需要操作的操作對象;當(dāng)然,也可以不繪制邊框,這樣在用戶操作某一操作對象時,終端可以輸出該操作對象,以便用戶確認(rèn)是否操作錯誤。
作為另一種可行的實施方式,終端在接收到語音操作事件添加指令之后,還可以執(zhí)行以下操作:
獲取終端當(dāng)前界面中未綁定語音操作事件的操作對象集合。
那么終端響應(yīng)該語音操作事件添加指令,生成的編輯界面,具體可以包括:
響應(yīng)該語音操作事件添加指令,生成的編輯界面,該編輯界面包括該操作對象集合中的至少一個操作對象。
具體實現(xiàn)中,終端在接收到語音操作事件添加指令之后,可以獲取當(dāng)前界面中未包括綁定語音操作事件的所有操作對象,從而組成操作對象集合。那么終端生成的編輯界面中包括的操作對象即為操作對象集合中的部分或全部,本發(fā)明實施例不做限定。
通過本發(fā)明實施例,用戶可以只針對未綁定語音操作事件的操作對象添加對象的語音操作事件,這樣終端就可以在編輯界面中減少不必要的操作對象繪制,從而在一定程度上可以減少終端的功耗。
203、終端檢測在該編輯界面針對目標(biāo)操作對象輸入的操作和語音信息。
本發(fā)明實施例中,目標(biāo)操作對象可以是指編輯界面中的操作對象中一個或者幾個。終端生成編輯界面后,用戶可以針對編輯界面中的操作對象輸入操作,如點擊其中某一個操作對象,那么該終端就可以生成該操作對象的操作事件,該操作事件包括用戶所執(zhí)行的操作,例如,點擊操作對象,滑動觸控顯示屏等,本發(fā)明實施例不做限定。如圖4所示,圖4是本發(fā)明實施例提供的另一種編輯界面的示意圖,在圖4中,用戶可以對編輯界面中的所有的操作對象進(jìn)行操作。
進(jìn)一步的,當(dāng)終端生成該操作對象的操作事件后,可以彈出提示框,用于提示用戶輸入語音信息,并且還可以指示輸入語音的事件。例如:“請輸入語音,剩余10秒鐘”。
需要說明的是,用戶可以先輸入操作,再輸入語音信息,也可以先輸入語音信息,再輸入操作,先后順序本發(fā)明實施例不做限定。
作為又一種可行的實施方式,終端在檢測到用戶在編輯界面針對目標(biāo)操作對象輸入的操作和語音信息之后,還可以執(zhí)行以下操作:
判斷終端的當(dāng)前界面的目標(biāo)操作對象是否綁定第二語音操作事件;
如果綁定,則判斷該第二語音操作事件是否為預(yù)設(shè)語音操作事件,如果不為預(yù)設(shè)語音操作事件,才執(zhí)行根據(jù)該語音信息和該操作,生成該目標(biāo)操作對象的第一語音操作事件的操作。
具體實現(xiàn)中,預(yù)設(shè)語音操作事件可以是指終端從服務(wù)器同步或者更新的語音操作事件。終端在檢測到編輯界面中用戶針對目標(biāo)操作對象輸入的操作和語音信息之后,可以先確定在原始界面中該目標(biāo)操作對象是否綁定有第二語音操作事件,如果綁定,則說明該目標(biāo)操作對象之前存在語音操作事件,那么終端可以進(jìn)一步確定目標(biāo)操作對象之前綁定的語音操作事件是否是從服務(wù)器同步或者更新的,如果是,則可以設(shè)定對服務(wù)器處同步或更新的語音操作事件不可修改,那么該終端就不會響應(yīng)本次針對該目標(biāo)操作對象添加的語音操作事件。
反而,如果目標(biāo)操作對象之前綁定的語音操作事件是用戶以前自定義的操作事件,即該第二語音操作事件不為預(yù)設(shè)語音操作事件,那么終端才會響應(yīng)針對編輯界面輸入的語音信息和操作,生成該目標(biāo)操作對象的新的語音操作事件。
204、終端根據(jù)該語音信息和該操作,生成該目標(biāo)操作對象的第一語音操作事件。
本發(fā)明實施例中,用戶在該編輯界面針對該提示框輸入語音信息后,終端可以接收到該語音信息,從而可以創(chuàng)建根據(jù)該語音信息和輸入的操作生成該目標(biāo)操作對象的第一語音操作事件,即該第一語音操作事件包括了輸入的操作,和觸發(fā)該操作的語音信息。
進(jìn)一步的,終端在接收到語音信息后,還可以對該語音信息進(jìn)行解析,得到文字信息,然后在終端的當(dāng)前界面輸出,以供便用戶確認(rèn)是否有誤。當(dāng)用戶確認(rèn)無誤時,終端即可生成該文字信息與操作的語音操作事件。
作為又一種可行的實施方式,終端根據(jù)該語音信息和該操作,生成該目標(biāo)操作對象的第一語音操作事件之后,還可以執(zhí)行以下操作:
判斷是否接收到針對編輯界面輸入的語音操作事件添加完成指令;
如果未接收到,則在預(yù)設(shè)時間段內(nèi)檢測編輯界面中是否存在針對除目標(biāo)操作對象之外的操作對象輸入的操作和語音信息;如果不存在,才將該第一語音操作事件與該終端的當(dāng)前界面的該目標(biāo)操作對象綁定。
具體實現(xiàn)中,終端根據(jù)該語音信息和該操作,生成該目標(biāo)操作對象的第一語音操作事件之后,如果用戶點擊了“完成”、“保存”或者“添加”,終端則會接收到語音操作事件添加完成指令,從而會將生成的第一語音操作事件與其對應(yīng)的在當(dāng)前界面中的操作對象綁定。如果用戶未點擊“完成”、“保存”或者“添加”,則表示終端還會對其他操作對象添加語音操作事件,這樣終端可以檢測在預(yù)設(shè)時間段內(nèi)用戶是否有添加語音操作事件的操作,如果有,則繼續(xù)添加,如果沒有,則在過了預(yù)設(shè)時間段后,自動將之前添加的語音操作事件與當(dāng)前界面對應(yīng)的操作對象綁定。
其中,該預(yù)設(shè)時間段可以是1分鐘,也可以2分鐘,設(shè)置預(yù)設(shè)時間段一方面是為了防止用戶在忘記保存當(dāng)前添加的語音操作事件時,如果意外斷電,后續(xù)用戶則需重新添加的問題發(fā)生,另一方面是為了防止在用戶忘記保存當(dāng)前添加的語音操作事件后,終端一直停留在編輯界面,增加了終端的功耗。
205、終端將該第一語音操作事件與該終端的當(dāng)前界面的該目標(biāo)操作對象綁定。
本發(fā)明實施例中,終端在生成目標(biāo)操作對象的第一語音操作事件之后,就可以將該第一語音操作事件與原始界面中對應(yīng)的目標(biāo)操作對象綁定,那么后續(xù)用戶在打開該界面時,終端即可根據(jù)輸入的語音模擬用戶執(zhí)行相應(yīng)的操作。
需要說明的是,用戶在編輯界面中,可以按照上述方式對每個可操作對象添加語音操作事件,并且可以在編輯界面中對所有需要添加語音操作事件的操作對象完成語音操作事件的添加后,將編輯界面中的所有語音操作事件關(guān)聯(lián)至終端當(dāng)前界面對應(yīng)的操作對象,也可以在編輯界面中對某一操作對象完成語音操作事件的添加后,即關(guān)聯(lián)至終端當(dāng)前界面對應(yīng)的操作對象,本發(fā)明實施例不做限定。
本發(fā)明實施例中,在對操作對象添加新的語音操作事件時,生成另一個與當(dāng)前界面view屬性相同的編輯界面,用戶在編輯界面上操作,這樣可以在添加語音操作事件的同時能夠避免觸發(fā)到終端當(dāng)前界面的業(yè)務(wù)。另外,編輯界面中所有操作對象完成語音操作事件添加后,統(tǒng)一關(guān)聯(lián)至終端當(dāng)前界面,可以提高添加操作事件的效率。
可見,在圖2所描述的方法中,終端在接收到語音操作事件添加指令后,可以生成包括終端的當(dāng)前界面的至少一個操作對象的編輯界面,并在檢測到用戶在編輯界面針對目標(biāo)操作對象輸入的操作和語音信息時,可以根據(jù)該語音信息和操作,生成該目標(biāo)操作對象的語音操作事件,從而將該語音操作事件與當(dāng)前界面的目標(biāo)操作對象綁定,其中,該至少一個操作對象包括該目標(biāo)操作對象。通過本發(fā)明實施例,終端可以對各個界面中的操作對象實現(xiàn)語音操作事件的添加,從而能夠提高語音操作事件添加的靈活度。
請參閱圖5,圖5是本發(fā)明實施例提供的一種終端的示意性框圖。如圖5所示,該終端500可以包括:
接收單元501,用于接收輸入的語音信息。
查找單元502,用于查找與該語音信息對應(yīng)的語音操作事件。
判斷單元503,用于判斷終端500的當(dāng)前界面是否存在該語音操作事件的操作對象。
控制單元504,用于在上述判斷單元503判斷出存在該操作對象時,對該操作對象執(zhí)行語音操作事件所指示的操作。
作為一種可行的實施方式,該終端500還可以包括:
獲取單元505,用于獲取終端500的控制模式,其中,該控制模式包括觸屏控制模式和語音控制模式中的至少一種,并在該控制模塊包括語音控制模式時,觸發(fā)接收單元501執(zhí)行接收輸入的語音信息的操作。
作為另一種可行的實施方式,該語音信息可以包括聲紋信息,那么判斷單元503,還用于判斷該聲紋信息是否與預(yù)設(shè)聲紋信息匹配,如果該聲紋信息與預(yù)設(shè)聲紋信息匹配,再觸發(fā)查找單元502查找與該語音信息對應(yīng)的語音操作事件。
作為又一種可行的實施方式,該語音信息還可以包括音量值,那么判斷單元503,還用于判斷該音量值是否在預(yù)設(shè)音量范圍內(nèi),如果該音量值在預(yù)設(shè)音量范圍內(nèi),再觸發(fā)查找單元502查找與該語音信息對應(yīng)的語音操作事件。
作為又一種可行的實施方式,判斷單元503判斷終端500的當(dāng)前界面是否存在該語音操作事件的操作對象的具體方式可以為:
判斷終端500的當(dāng)前界面是否為預(yù)設(shè)應(yīng)用程序的操作界面;
在該當(dāng)前界面為預(yù)設(shè)應(yīng)用程序的操作界面時,獲取該當(dāng)前界面的操作對象集合;
判斷該操作對象集合中是否存在該語音操作事件的操作對象;
在該操作對象集合中存在該語音操作事件的操作對象時,確定該終端500的當(dāng)前界面存在該語音操作事件的操作對象。
可見,在圖5所描述的終端中,用戶輸入語音信息后,終端可以查找與該語音信息對應(yīng)的語音操作事件,如果該語音信息對應(yīng)的語音操作事件的操作對象存在于該終端的當(dāng)前界面中,終端才會對當(dāng)前界面中的該操作對象執(zhí)行該語音操作事件所指示的操作。通過本發(fā)明實施例,終端可以實現(xiàn)通過語音對終端各個界面的控制,不僅可以提高對終端進(jìn)行語音控制的精準(zhǔn)度,還可以提高語音控制終端的靈活度。
請參閱圖6,圖6是本發(fā)明另一實施例公開的一種終端的示意性框圖。如圖6所示,該終端600可以包括:
接收單元601,用于接收語音操作事件添加指令,其中,該語音操作事件添加指令用于指示添加語音操作事件。
生成單元602,用于響應(yīng)該語音操作事件添加指令,生成編輯界面,其中,該編輯界面包括終端600的當(dāng)前界面的至少一個操作對象。
檢測單元603,用于檢測在編輯界面針對目標(biāo)操作對象輸入的操作和語音信息,其中,該至少一個操作對象包括該目標(biāo)操作對象。
生成單元602,還用于根據(jù)該語音信息和該操作,生成目標(biāo)操作對象的第一語音操作事件。
綁定單元604,用于將該第一語音操作事件與終端600的當(dāng)前界面的目標(biāo)操作對象綁定。
作為一種可行的實施方式,該終端還可以包括:
判斷單元605,用于判斷當(dāng)前界面的目標(biāo)操作對象是否綁定第二語音操作事件;如果綁定,則判斷第二語音操作事件是否為預(yù)設(shè)語音操作事件,如果不為預(yù)設(shè)語音操作事件,則觸發(fā)生成單元602執(zhí)行根據(jù)該語音信息和該操作,生成目標(biāo)操作對象的第一語音操作事件的操作。
作為另一種可行的實施方式,生成單元602響應(yīng)該語音操作事件添加指令,生成編輯界面的具體方式可以為:
響應(yīng)該語音操作事件添加指令,獲取終端600的當(dāng)前界面的界面信息,其中,該界面信息包括當(dāng)前界面中的至少一個操作對象以及該至少一個操作對象的屬性信息;
根據(jù)該至少一個操作對象的屬性信息生成包括該至少一個操作對象的編輯界面。
作為又一種可行的實施方式,該終端600還可以包括:
獲取單元606,用于獲取終端600的當(dāng)前界面中未綁定語音操作事件的操作對象集合。
那么生成單元602響應(yīng)該語音操作事件添加指令,生成編輯界面的具體方式可以為:
響應(yīng)該語音操作事件添加指令,生成編輯界面,其中,該編輯界面包括該操作對象集合中的至少一個操作對象。
作為又一種可行的實施方式,接收單元601,還用于接收針對編輯界面輸入的語音操作事件添加完成指令。
判斷單元605,還用于判斷接收單元601是否接收到語音操作事件添加完成指令。
檢測單元603,還用于在判斷單元65判斷出接收單元601未接收到語音操作事件添加完成指令時,在預(yù)設(shè)時間段內(nèi)檢測編輯界面中是否存在針對除目標(biāo)操作對象之外的操作對象輸入的操作和語音信息,如果不存在,則觸發(fā)綁定單元604將該第一語音操作事件與該終端600的當(dāng)前界面的該目標(biāo)操作對象綁定。
可見,在圖6所描述的終端中,終端在接收到語音操作事件添加指令后,可以生成包括終端的當(dāng)前界面的至少一個操作對象的編輯界面,并在檢測到用戶在編輯界面針對目標(biāo)操作對象輸入的操作和語音信息時,可以根據(jù)該語音信息和操作,生成該目標(biāo)操作對象的語音操作事件,從而將該語音操作事件與當(dāng)前界面的目標(biāo)操作對象綁定,其中,該至少一個操作對象包括該目標(biāo)操作對象。通過本發(fā)明實施例,終端可以對各個界面中的操作對象實現(xiàn)語音操作事件的添加,從而能夠提高語音操作事件添加的靈活度。
請參閱圖7,圖7是本發(fā)明又一實施例公開的一種終端的示意性框圖。如圖7所示,該終端700可以包括:一個或多個處理器701;一個或多個輸入設(shè)備702,一個或多個輸出設(shè)備703和存儲器704。上述處理器701、輸入設(shè)備702、輸出設(shè)備703和存儲器704通過總線705連接。存儲器702用于存儲指令,處理器701用于執(zhí)行存儲器702存儲的指令。其中:
輸入設(shè)備702,用于接收輸入的第一語音信息。
處理器701,用于查找與該第一語音信息對應(yīng)的第一操作事件。
處理器701,還用于判斷終端700當(dāng)前界面是否存在第一操作事件的操作對象。
處理器701,還用于在存在該操作對象時,對該操作對象執(zhí)行第一操作事件所指示的操作。
作為一種可行的實施方式,輸入設(shè)備702,還用于接收操作事件添加指令,其中,該操作事件添加指令用于指示為終端700當(dāng)前界面的操作對象添加操作事件。
處理器701,還用于響應(yīng)該操作事件添加指令,生成編輯界面,其中,該編輯界面包括終端700當(dāng)前界面的至少一個操作對象。
處理器701,還用于根據(jù)在編輯界面針對該至少一個操作對象輸入的操作,生成第二操作事件。
輸入設(shè)備702,還用于接收在該編輯界面針對第二操作事件輸入的第二語音信息。
處理器701,還用于創(chuàng)建第二語音信息與第二操作事件的對應(yīng)關(guān)系,并將該對應(yīng)關(guān)系與終端700當(dāng)前界面的該至少一個操作對象綁定。
作為另一種可行的實施方式,處理器701,還用于獲取終端700當(dāng)前界面中未綁定操作事件的操作對象。
處理器701響應(yīng)該操作事件添加指令,生成編輯界面的具體方式可以為:
響應(yīng)該操作事件添加指令,生成編輯界面,其中,該編輯界面包括該未綁定操作事件的操作對象中的至少一個操作對象。
作為又一種可行的實施方式,第一語音信息可以包括聲紋信息,那么處理器701,還用于判斷該聲紋信息是否與預(yù)設(shè)聲紋信息匹配,如果該聲紋信息與預(yù)設(shè)聲紋信息匹配,再執(zhí)行查找與第一語音信息對應(yīng)的第一操作事件的操作。
作為又一種可行的實施方式,第一語音信息還可以包括音量值,那么處理器701,還用于判斷該音量值是否在預(yù)設(shè)音量范圍內(nèi),如果該音量值在預(yù)設(shè)音量范圍內(nèi),再執(zhí)行查找與第一語音信息對應(yīng)的第一操作事件的操作。
可見,在圖7所描述的終端中,用戶輸入語音信息后,終端可以查找與該語音信息對應(yīng)的操作事件,如果該語音信息對應(yīng)的操作事件的操作對象存在于該終端的當(dāng)前界面中,終端才會對當(dāng)前界面中的該操作對象執(zhí)行該操作事件所指示的操作。并且,用戶可以對終端各個界面中的可操作對象添加對應(yīng)的操作事件,這樣可以通過語音實現(xiàn)對終端的全面控制。通過本發(fā)明實施例,終端可以通過語音實現(xiàn)對終端各個界面的控制,不僅可以提高終端對語音控制的精準(zhǔn)度,還可以提高語音控制終端的靈活度。
應(yīng)當(dāng)理解,在本發(fā)明實施例中,所稱處理器701可以是中央處理單元(Central Processing Unit,CPU),該處理器還可以是其他通用處理器、數(shù)字信號處理器(Digital Signal Processor,DSP)、專用集成電路(Application Specific Integrated Circuit,ASIC)、現(xiàn)成可編程門陣列(Field-Programmable Gate Array,F(xiàn)PGA)或者其他可編程邏輯器件、分立門或者晶體管邏輯器件、分立硬件組件等。通用處理器可以是微處理器或者該處理器也可以是任何常規(guī)的處理器等。
輸入設(shè)備702可以包括觸控板、指紋采傳感器(用于采集用戶的指紋信息和指紋的方向信息)、麥克風(fēng)等,輸出設(shè)備703可以包括顯示器(LCD等)、揚聲器等。
該存儲器704可以包括只讀存儲器和隨機(jī)存取存儲器,并向處理器701提供指令和數(shù)據(jù)。存儲器704的一部分還可以包括非易失性隨機(jī)存取存儲器。例如,存儲器704還可以存儲設(shè)備類型的信息。
具體實現(xiàn)中,本發(fā)明實施例中所描述的處理器701、輸入設(shè)備702、輸出設(shè)備703可執(zhí)行本發(fā)明實施例提供的相機(jī)應(yīng)用啟動方法的第一實施例和第二實施例中所描述的實現(xiàn)方式,也可執(zhí)行本發(fā)明實施例所描述的終端的實現(xiàn)方式,在此不再贅述。
本領(lǐng)域普通技術(shù)人員可以意識到,結(jié)合本文中所公開的實施例描述的各示例的單元及算法步驟,能夠以電子硬件、計算機(jī)軟件或者二者的結(jié)合來實現(xiàn),為了清楚地說明硬件和軟件的可互換性,在上述說明中已經(jīng)按照功能一般性地描述了各示例的組成及步驟。這些功能究竟以硬件還是軟件方式來執(zhí)行,取決于技術(shù)方案的特定應(yīng)用和設(shè)計約束條件。專業(yè)技術(shù)人員可以對每個特定的應(yīng)用來使用不同方法來實現(xiàn)所描述的功能,但是這種實現(xiàn)不應(yīng)認(rèn)為超出本發(fā)明的范圍。
所屬領(lǐng)域的技術(shù)人員可以清楚地了解到,為了描述的方便和簡潔,上述描述的終端和單元的具體工作過程,可以參考前述方法實施例中的對應(yīng)過程,在此不再贅述。
在本申請所提供的幾個實施例中,應(yīng)該理解到,所揭露的終端和方法,可以通過其它的方式實現(xiàn)。例如,以上所描述的裝置實施例僅僅是示意性的,例如,所述單元的劃分,僅僅為一種邏輯功能劃分,實際實現(xiàn)時可以有另外的劃分方式,例如多個單元或組件可以結(jié)合或者可以集成到另一個系統(tǒng),或一些特征可以忽略,或不執(zhí)行。另外,所顯示或討論的相互之間的耦合或直接耦合或通信連接可以是通過一些接口、裝置或單元的間接耦合或通信連接,也可以是電的,機(jī)械的或其它的形式連接。
所述作為分離部件說明的單元可以是或者也可以不是物理上分開的,作為單元顯示的部件可以是或者也可以不是物理單元,即可以位于一個地方,或者也可以分布到多個網(wǎng)絡(luò)單元上??梢愿鶕?jù)實際的需要選擇其中的部分或者全部單元來實現(xiàn)本發(fā)明實施例方案的目的。
另外,在本發(fā)明各個實施例中的各功能單元可以集成在一個處理單元中,也可以是各個單元單獨物理存在,也可以是兩個或兩個以上單元集成在一個單元中。上述集成的單元既可以采用硬件的形式實現(xiàn),也可以采用軟件功能單元的形式實現(xiàn)。
所述集成的單元如果以軟件功能單元的形式實現(xiàn)并作為獨立的產(chǎn)品銷售或使用時,可以存儲在一個計算機(jī)可讀取存儲介質(zhì)中?;谶@樣的理解,本發(fā)明的技術(shù)方案本質(zhì)上或者說對現(xiàn)有技術(shù)做出貢獻(xiàn)的部分,或者該技術(shù)方案的全部或部分可以以軟件產(chǎn)品的形式體現(xiàn)出來,該計算機(jī)軟件產(chǎn)品存儲在一個存儲介質(zhì)中,包括若干指令用以使得一臺計算機(jī)設(shè)備(可以是個人計算機(jī),服務(wù)器,或者網(wǎng)絡(luò)設(shè)備等)執(zhí)行本發(fā)明各個實施例所述方法的全部或部分步驟。而前述的存儲介質(zhì)包括:U盤、移動硬盤、只讀存儲器(ROM,Read-Only Memory)、隨機(jī)存取存儲器(RAM,Random Access Memory)、磁碟或者光盤等各種可以存儲程序代碼的介質(zhì)。
以上所述,僅為本發(fā)明的具體實施方式,但本發(fā)明的保護(hù)范圍并不局限于此,任何熟悉本技術(shù)領(lǐng)域的技術(shù)人員在本發(fā)明揭露的技術(shù)范圍內(nèi),可輕易想到各種等效的修改或替換,這些修改或替換都應(yīng)涵蓋在本發(fā)明的保護(hù)范圍之內(nèi)。因此,本發(fā)明的保護(hù)范圍應(yīng)以權(quán)利要求的保護(hù)范圍為準(zhǔn)。