屏幕按鍵控制方法及系統(tǒng)的制作方法
【技術(shù)領(lǐng)域】
[0001] 本發(fā)明涉及一種按鍵控制方法及系統(tǒng)，尤其是涉及一種控制電子裝置的顯示屏幕 上的按鍵的方法及系統(tǒng)。
【背景技術(shù)】
[0002] 目前手機、平板電腦等電子裝置，越來越多的使用顯示屏幕(例如觸摸屏）作為接 收用戶輸入的操作接口。當(dāng)用戶需要控制顯示屏幕上的某個按鍵時，該按鍵需要用戶以手 指按壓顯示屏幕來選定，電子裝置才能執(zhí)行該按鍵所對應(yīng)的操作。然而當(dāng)用戶的手指使用 不方便時，例如手指沾水或手指受傷的情況下，按鍵的控制則無法實現(xiàn)，因此造成電子裝置 使用上的不便利。此外，通過語音識別軟件識別用戶的語音指令，可以實現(xiàn)電子裝置的某些 功能，例如翻頁等操作，但是顯示屏幕上按鍵的控制則無法實現(xiàn)。

【發(fā)明內(nèi)容】

[0003] 鑒于以上內(nèi)容，有必要提供一種屏幕按鍵控制方法及系統(tǒng)，可以通過用戶眼睛的 聚焦及語音信息的輸入來控制電子裝置的顯示屏幕上的按鍵。
[0004] 一種屏幕按鍵控制方法，應(yīng)用于電子裝置中，該方法包括步驟：（a)在偵測到用戶 眼睛聚焦于顯示屏幕上的按鍵后，拍攝用戶的人臉圖像，并根據(jù)該人臉圖像確定用戶需要 操作的按鍵；（b)接收用戶所輸入的語音信息，并利用語音識別軟件識別該語音信息所對 應(yīng)的操作指令；及（c )根據(jù)所述操作指令執(zhí)行所述需要操作的按鍵所對應(yīng)的動作。
[0005] -種屏幕按鍵控制系統(tǒng)，運行于電子裝置中，該系統(tǒng)包括：按鍵確定模塊，用于在 偵測到用戶眼睛聚焦于顯示屏幕上的按鍵后，拍攝用戶的人臉圖像，并根據(jù)該人臉圖像確 定用戶需要操作的按鍵；指令識別模塊，用于接收用戶所輸入的語音信息，并利用語音識別 軟件識別該語音信息所對應(yīng)的操作指令；及控制模塊，用于根據(jù)所述操作指令執(zhí)行所述需 要操作的按鍵所對應(yīng)的動作。
[0006] 相較于現(xiàn)有技術(shù)，利用本發(fā)明所提供的屏幕按鍵控制方法及系統(tǒng)，可以在用戶眼 睛聚焦于顯示屏幕上的按鍵后，通過電子裝置的攝像單元所拍攝的人臉圖像確定在顯示屏 幕上需要操作的按鍵，并在接收到用戶所輸入的語音信息后，根據(jù)該語音信息執(zhí)行該需要 操作的按鍵所對應(yīng)的動作，從而實現(xiàn)了顯示屏幕上按鍵的控制，增加了按鍵控制的便利性。
【附圖說明】
[0007] 圖1是本發(fā)明屏幕按鍵控制系統(tǒng)較佳實施例的硬件架構(gòu)圖。
[0008] 圖2是本發(fā)明屏幕按鍵控制系統(tǒng)較佳實施例的功能模塊圖。
[0009] 圖3是本發(fā)明屏幕按鍵控制方法較佳實施例的作業(yè)流程圖。
[0010] 圖4是本發(fā)明屏幕按鍵控制方法較佳實施例的控制顯示屏幕上按鍵的示例圖。 [0011] 主要元件符號說明
【主權(quán)項】
1. 一種屏幕按鍵控制方法，應(yīng)用于電子裝置中，其特征在于，該方法包括： 按鍵確定步驟：在偵測到用戶眼睛聚焦于顯示屏幕上的按鍵后，拍攝用戶的人臉圖像， 并根據(jù)該人臉圖像確定用戶需要操作的按鍵； 指令識別步驟：接收用戶所輸入的語音信息，并利用語音識別軟件識別該語音信息所 對應(yīng)的操作指令；及 控制步驟：根據(jù)所述操作指令執(zhí)行所述需要操作的按鍵所對應(yīng)的動作。
2. 如權(quán)利要求1所述的屏幕按鍵控制方法，其特征在于，在所述按鍵確定步驟前還包 括存儲步驟： 拍攝用戶眼睛聚焦于顯示屏幕上不同的按鍵時的人臉圖像，并將該拍攝的人臉圖像、 及該拍攝的人臉圖像與用戶眼睛所聚焦的按鍵的對應(yīng)關(guān)系存儲至電子裝置的存儲單元中。
3.如權(quán)利要求2所述的屏幕按鍵控制方法，其特征在于，所述按鍵確定步驟通過以下 方式確定用戶需要操作的按鍵： 將所述拍攝的人臉圖像與存儲單元中存儲的人臉圖像進行比對； 在所述存儲單元中尋找與所述拍攝的人臉圖像相似度最高的人臉圖像；及 確定該與所述拍攝的人臉圖像相似度最高的人臉圖像所對應(yīng)的按鍵為用戶需要操作 的按鍵。
4. 如權(quán)利要求1所述的屏幕按鍵控制方法，其特征在于，在所述按鍵確定步驟后還包 括： 以一個預(yù)設(shè)方式標(biāo)識所述需要操作的按鍵，以提示用戶已確定該需要操作的按鍵。
5. 如權(quán)利要求1所述的屏幕按鍵控制方法，其特征在于，所述按鍵確定步驟通過判斷 用戶眼睛是否在一個預(yù)設(shè)時間內(nèi)沒有變化，或通過用戶眼睛的預(yù)設(shè)動作是否發(fā)生，來偵測 用戶眼睛是否聚焦于顯示屏幕上的按鍵。
6. -種屏幕按鍵控制系統(tǒng)，運行于電子裝置中，其特征在于，該系統(tǒng)包括： 按鍵確定模塊，用于在偵測到用戶眼睛聚焦于顯示屏幕上的按鍵后，拍攝用戶的人臉 圖像，并根據(jù)該人臉圖像確定用戶需要操作的按鍵； 指令識別模塊，用于接收用戶所輸入的語音信息，并利用語音識別軟件識別該語音信 息所對應(yīng)的操作指令；及 控制模塊，用于根據(jù)所述操作指令執(zhí)行所述需要操作的按鍵所對應(yīng)的動作。
7.如權(quán)利要求6所述的屏幕按鍵控制系統(tǒng)，其特征在于，該系統(tǒng)還包括： 存儲模塊，用于拍攝用戶眼睛聚焦于顯示屏幕上不同的按鍵時的人臉圖像，并將該拍 攝的人臉圖像、及該拍攝的人臉圖像與用戶眼睛所聚焦的按鍵的對應(yīng)關(guān)系存儲至電子裝置 的存儲單元中。
8.如權(quán)利要求7所述的屏幕按鍵控制系統(tǒng)，其特征在于，所述按鍵確定模塊通過以下 步驟確定用戶需要操作的按鍵： 將所述拍攝的人臉圖像與存儲單元中存儲的人臉圖像進行比對； 在所述存儲單元中尋找與所述拍攝的人臉圖像相似度最高的人臉圖像；及 確定該與所述拍攝的人臉圖像相似度最高的人臉圖像所對應(yīng)的按鍵為用戶需要操作 的按鍵。
9.如權(quán)利要求6所述的屏幕按鍵控制系統(tǒng)，其特征在于，所述按鍵確定模塊還用于，以 一個預(yù)設(shè)方式標(biāo)識所述需要操作的按鍵，以提示用戶已確定該需要操作的按鍵。
10.如權(quán)利要求6所述的屏幕按鍵控制系統(tǒng)，其特征在于，所述按鍵確定模塊通過判斷 用戶眼睛是否在一個預(yù)設(shè)時間內(nèi)沒有變化，或通過用戶眼睛的預(yù)設(shè)動作是否發(fā)生，來偵測 用戶眼睛是否聚焦于顯示屏幕上的按鍵。
【專利摘要】本發(fā)明提供一種屏幕按鍵控制方法，包括：在偵測到用戶眼睛聚焦于顯示屏幕上的按鍵后，拍攝用戶的人臉圖像，并根據(jù)該人臉圖像確定用戶需要操作的按鍵；接收用戶所輸入的語音信息，并利用語音識別軟件識別該語音信息所對應(yīng)的操作指令；及根據(jù)所述操作指令執(zhí)行所述需要操作的按鍵所對應(yīng)的動作。本發(fā)明還提供一種屏幕按鍵控制系統(tǒng)。本發(fā)明通過用戶眼睛的聚焦及語音信息的輸入可以方便地控制顯示屏幕上的按鍵。
【IPC分類】G06F3-0487, G10L15-26, G06F3-01
【公開號】CN104598009
【申請?zhí)枴緾N201310521040
【發(fā)明人】洪建宏, 李光曜, 敖山甲
【申請人】鴻富錦精密工業(yè)(武漢)有限公司, 鴻海精密工業(yè)股份有限公司
【公開日】2015年5月6日
【申請日】2013年10月30日
【公告號】US20150116209