本發(fā)明涉及增強(qiáng)現(xiàn)實(shí)技術(shù)領(lǐng)域,特別涉及一種顯示控制菜單的方法和裝置。
背景技術(shù):
隨著計(jì)算機(jī)技術(shù)的發(fā)展,增強(qiáng)現(xiàn)實(shí)技術(shù)(Augmented Reality,簡(jiǎn)稱AR)越來越吸引人們的關(guān)注。增強(qiáng)現(xiàn)實(shí)技術(shù)是通過計(jì)算機(jī)系統(tǒng)提供的信息增加用戶對(duì)現(xiàn)實(shí)世界感知的技術(shù),是將計(jì)算機(jī)生成的虛擬畫面(虛擬物體、場(chǎng)景或系統(tǒng)提示信息等)疊加到真實(shí)場(chǎng)景中,從而實(shí)現(xiàn)對(duì)現(xiàn)實(shí)的“增強(qiáng)”。
在現(xiàn)有技術(shù)中,終端中安裝有AR應(yīng)用程序,用戶可以打開AR應(yīng)用程序的圖像拍攝功能,并使用攝像頭對(duì)準(zhǔn)某智能設(shè)備,此時(shí)取景圖像中包含該智能設(shè)備,終端可以識(shí)別取景圖像中的智能設(shè)備,然后確定預(yù)先存儲(chǔ)的智能設(shè)備對(duì)應(yīng)的預(yù)設(shè)尺寸的控制菜單,將控制菜單顯示在取景圖像的上層,用戶可以通過觸碰控制菜單中的虛擬按鍵操控智能設(shè)備。例如,終端的取景圖像中包含的智能設(shè)備是智能燈,終端可以對(duì)智能燈進(jìn)行識(shí)別,然后可以獲取智能燈對(duì)應(yīng)的預(yù)設(shè)尺寸的控制菜單,將智能燈對(duì)應(yīng)的控制菜單顯示在取景圖像的上層,用戶可以點(diǎn)擊控制菜單中的開啟按鍵,觸發(fā)智能燈開啟。
在實(shí)現(xiàn)本發(fā)明的過程中,發(fā)明人發(fā)現(xiàn)現(xiàn)有技術(shù)至少存在以下問題:
如果終端的取景圖像中包含有多個(gè)智能設(shè)備,終端則會(huì)識(shí)別多個(gè)智能設(shè)備,進(jìn)而會(huì)在終端界面中顯示各個(gè)智能設(shè)備對(duì)應(yīng)的控制菜單,然而終端界面的顯示尺寸、各個(gè)智能設(shè)備對(duì)應(yīng)的控制菜單的尺寸都是固定的,這樣,如果各個(gè)智能設(shè)備之間的距離比較近,多個(gè)智能設(shè)備對(duì)應(yīng)的控制菜單在終端的屏幕中顯示時(shí)會(huì)出現(xiàn)重疊,從而影響控制菜單的顯示。
技術(shù)實(shí)現(xiàn)要素:
為了解決現(xiàn)有技術(shù)的問題,本發(fā)明實(shí)施例提供了一種顯示控制菜單的方法和裝置。所述技術(shù)方案如下:
第一方面,提供了一種顯示控制菜單的方法,所述方法包括:
當(dāng)終端當(dāng)前的取景圖像中包含目標(biāo)設(shè)備時(shí),確定所述目標(biāo)設(shè)備在所述取景圖像中所占的第一圖像比例;
根據(jù)預(yù)先存儲(chǔ)的所述目標(biāo)設(shè)備的圖像比例與控制菜單的對(duì)應(yīng)關(guān)系,確定所述第一圖像比例對(duì)應(yīng)的第一控制菜單,其中,在所述對(duì)應(yīng)關(guān)系中,圖像比例越小,對(duì)應(yīng)的控制菜單的內(nèi)容復(fù)雜度越低;
根據(jù)所述目標(biāo)設(shè)備在所述取景圖像中的尺寸,在所述取景圖像中所述目標(biāo)設(shè)備的位置處,顯示所述第一控制菜單。
可選的,所述目標(biāo)設(shè)備的圖像比例與控制菜單的對(duì)應(yīng)關(guān)系為所述目標(biāo)設(shè)備的圖像比例范圍與控制菜單的對(duì)應(yīng)關(guān)系;
所述根據(jù)預(yù)先存儲(chǔ)的所述目標(biāo)設(shè)備的圖像比例與控制菜單的對(duì)應(yīng)關(guān)系,確定所述第一圖像比例對(duì)應(yīng)的第一控制菜單,包括:
根據(jù)預(yù)先存儲(chǔ)的所述目標(biāo)設(shè)備的圖像比例范圍與控制菜單的對(duì)應(yīng)關(guān)系,確定所述第一圖像比例所屬的圖像比例范圍對(duì)應(yīng)的第一控制菜單。
可選的,所述根據(jù)所述目標(biāo)設(shè)備在所述取景圖像中的尺寸,在所述取景圖像中所述目標(biāo)設(shè)備的位置處,顯示所述第一控制菜單,包括:
根據(jù)所述目標(biāo)設(shè)備在所述取景圖像中的尺寸,在所述取景圖像中所述目標(biāo)設(shè)備的位置處,通過半透明顯示方式,顯示所述第一控制菜單。
這樣,可以使用戶可以識(shí)別目標(biāo)設(shè)備。
可選的,所述確定所述目標(biāo)設(shè)備在所述取景圖像中所占的第一圖像比例,包括:
確定所述目標(biāo)設(shè)備在所述取景圖像中所占的區(qū)域?qū)?yīng)的像素點(diǎn)的數(shù)目,以及所述取景圖像中的像素點(diǎn)的總數(shù)目;
將所述目標(biāo)設(shè)備在所述取景圖像中所占的區(qū)域?qū)?yīng)的像素點(diǎn)的數(shù)目與所述取景圖像中的像素點(diǎn)的總數(shù)目的比例,確定為所述目標(biāo)設(shè)備在所述取景圖像中所占的第一圖像比例。
這樣,可以快速的確定目標(biāo)設(shè)備在取景圖像中所占的比例。
可選的,所述第一控制菜單中包括至少一個(gè)控制按鍵;
所述方法還包括:
當(dāng)檢測(cè)到所述第一控制菜單中第一控制按鍵的觸發(fā)指令時(shí),向所述目標(biāo)設(shè)備發(fā)送所述第一控制按鍵對(duì)應(yīng)的控制請(qǐng)求。
這樣,可以準(zhǔn)確的控制目標(biāo)設(shè)備。
第二方面,提供了一種顯示控制菜單的裝置,所述裝置包括:
第一確定模塊,用于當(dāng)終端當(dāng)前的取景圖像中包含目標(biāo)設(shè)備時(shí),確定所述目標(biāo)設(shè)備在所述取景圖像中所占的第一圖像比例;
第二確定模塊,用于根據(jù)預(yù)先存儲(chǔ)的所述目標(biāo)設(shè)備的圖像比例與控制菜單的對(duì)應(yīng)關(guān)系,確定所述第一圖像比例對(duì)應(yīng)的第一控制菜單,其中,在所述對(duì)應(yīng)關(guān)系中,圖像比例越小,對(duì)應(yīng)的控制菜單的內(nèi)容復(fù)雜度越低;
顯示模塊,用于根據(jù)所述目標(biāo)設(shè)備在所述取景圖像中的尺寸,在所述取景圖像中所述目標(biāo)設(shè)備的位置處,顯示所述第一控制菜單。
可選的,所述目標(biāo)設(shè)備的圖像比例與控制菜單的對(duì)應(yīng)關(guān)系為所述目標(biāo)設(shè)備的圖像比例范圍與控制菜單的對(duì)應(yīng)關(guān)系;
所述第二確定模塊,用于:
根據(jù)預(yù)先存儲(chǔ)的所述目標(biāo)設(shè)備的圖像比例范圍與控制菜單的對(duì)應(yīng)關(guān)系,確定所述第一圖像比例所屬的圖像比例范圍對(duì)應(yīng)的第一控制菜單。
可選的,所述顯示模塊,用于:
根據(jù)所述目標(biāo)設(shè)備在所述取景圖像中的尺寸,在所述取景圖像中所述目標(biāo)設(shè)備的位置處,通過半透明顯示方式,顯示所述第一控制菜單。
可選的,所述第二確定模塊,用于:
確定所述目標(biāo)設(shè)備在所述取景圖像中所占的區(qū)域?qū)?yīng)的像素點(diǎn)的數(shù)目,以及所述取景圖像中的像素點(diǎn)的總數(shù)目;
將所述目標(biāo)設(shè)備在所述取景圖像中所占的區(qū)域?qū)?yīng)的像素點(diǎn)的數(shù)目與所述取景圖像中的像素點(diǎn)的總數(shù)目的比例,確定為所述目標(biāo)設(shè)備在所述取景圖像中所占的第一圖像比例。
可選的,所述第一控制菜單中包括至少一個(gè)控制按鍵;
所述裝置還包括:
發(fā)送模塊,用于當(dāng)檢測(cè)到所述第一控制菜單中第一控制按鍵的觸發(fā)指令時(shí),向所述目標(biāo)設(shè)備發(fā)送所述第一控制按鍵對(duì)應(yīng)的控制請(qǐng)求。
本發(fā)明實(shí)施例提供的技術(shù)方案帶來的有益效果是:
本發(fā)明實(shí)施例中,當(dāng)終端當(dāng)前的取景圖像中包含目標(biāo)設(shè)備時(shí),終端可以確定目標(biāo)設(shè)備在取景圖像中所占的第一圖像比例,然后根據(jù)預(yù)先存儲(chǔ)的目標(biāo)設(shè)備的圖像比例與控制菜單的對(duì)應(yīng)關(guān)系,可以確定第一圖像比例對(duì)應(yīng)的第一控制菜單,其中,在對(duì)應(yīng)關(guān)系中,圖像比例越小,對(duì)應(yīng)的控制菜單的內(nèi)容復(fù)雜度越低,根據(jù)目標(biāo)設(shè)備在取景圖像中的尺寸,在取景圖像中目標(biāo)設(shè)備的位置處,顯示第一控制菜單。這樣,控制菜單的顯示尺寸,是根據(jù)智能設(shè)備在取景圖像中的尺寸確定的,即使取景圖像中包含多個(gè)相距比較近的智能設(shè)備,各個(gè)智能設(shè)備對(duì)應(yīng)的控制菜單也不會(huì)重疊,而且控制菜單的內(nèi)容復(fù)雜程度,也是根據(jù)智能設(shè)備在取景圖像中所占的圖像比例確定的,從而可以清楚的顯示控制菜單。
附圖說明
為了更清楚地說明本發(fā)明實(shí)施例中的技術(shù)方案,下面將對(duì)實(shí)施例描述中所需要使用的附圖作簡(jiǎn)單地介紹,顯而易見地,下面描述中的附圖僅僅是本發(fā)明的一些實(shí)施例,對(duì)于本領(lǐng)域普通技術(shù)人員來講,在不付出創(chuàng)造性勞動(dòng)的前提下,還可以根據(jù)這些附圖獲得其他的附圖。
圖1是本發(fā)明實(shí)施例提供的一種顯示控制菜單的方法流程圖;
圖2是本發(fā)明實(shí)施例提供的一種顯示控制菜單的界面示意圖;
圖3是本發(fā)明實(shí)施例提供的一種顯示控制菜單的界面示意圖;
圖4是本發(fā)明實(shí)施例提供的一種顯示控制菜單的界面示意圖;
圖5是本發(fā)明實(shí)施例提供的一種顯示控制菜單的界面示意圖;
圖6是本發(fā)明實(shí)施例提供的一種顯示控制菜單的界面示意圖;
圖7是本發(fā)明實(shí)施例提供的一種顯示控制菜單的裝置的結(jié)構(gòu)示意圖;
圖8是本發(fā)明實(shí)施例提供的一種顯示控制菜單的裝置的結(jié)構(gòu)示意圖;
圖9是本發(fā)明實(shí)施例提供的一種終端的結(jié)構(gòu)示意圖。
具體實(shí)施方式
為使本發(fā)明的目的、技術(shù)方案和優(yōu)點(diǎn)更加清楚,下面將結(jié)合附圖對(duì)本發(fā)明實(shí)施方式作進(jìn)一步地詳細(xì)描述。
本發(fā)明實(shí)施例提供了一種顯示控制菜單的方法,該方法的執(zhí)行主體可以是終端。示例的,終端可以是智能手機(jī)、平板電腦等,終端中可以安裝有AR應(yīng)用程序。其中,示例的,終端中可以設(shè)置有處理器、存儲(chǔ)器、收發(fā)器等。處理器可以用于顯示控制菜單的過程進(jìn)行處理,存儲(chǔ)器可以用于存儲(chǔ)在顯示控制菜單的過程中需要存儲(chǔ)的數(shù)據(jù),收發(fā)器可以用于接發(fā)消息。終端中還可以包括屏幕,屏幕可以用于顯示取景圖像、以及智能設(shè)備對(duì)應(yīng)的控制菜單等,可以是觸控式的屏幕。本實(shí)施例中,以終端為手機(jī)為例,進(jìn)行方案的詳細(xì)說明,其它情況與之類似,本實(shí)施例不再累述。
如圖1所示,該方法的處理流程可以包括如下的步驟:
步驟101,當(dāng)終端當(dāng)前的取景圖像中包含目標(biāo)設(shè)備時(shí),確定目標(biāo)設(shè)備在取景圖像中所占的第一圖像比例。
其中,目標(biāo)設(shè)備是任意一個(gè)智能設(shè)備,如智能電視、智能空調(diào)、智能燈、智能洗衣機(jī)等。
在實(shí)施中,用戶可以在終端中安裝AR應(yīng)用程序,然后觸發(fā)開啟AR應(yīng)用程序,AR應(yīng)用程序可以調(diào)用開啟終端的攝像頭,用戶可以將終端的攝像頭對(duì)準(zhǔn)智能設(shè)備(后續(xù)稱為目標(biāo)設(shè)備),此時(shí)終端的顯示界面中顯示有取景圖像,終端可以根據(jù)預(yù)先設(shè)置的神經(jīng)網(wǎng)絡(luò)訓(xùn)練算法、Sift(Scale Invariant Feature Transform,尺度不變特征轉(zhuǎn)換算法)、Surf(Speeded Up Robust Feature,加速穩(wěn)健特征轉(zhuǎn)換算法),檢測(cè)圖像中是否包含有目標(biāo)設(shè)備。如果終端確定當(dāng)前的取景圖像中包含目標(biāo)設(shè)備,則可以將目標(biāo)設(shè)備在取景圖像中的尺寸,除以取景圖像的尺寸(可以為終端的屏幕的尺寸),得到的數(shù)值,確定為目標(biāo)設(shè)備在取景圖像中所占的第一圖像比例。例如,終端的顯示界面中顯示有取景圖像,取景圖像中包含一個(gè)智能燈,則終端可以確定當(dāng)前的取景圖像中包含有目標(biāo)設(shè)備,進(jìn)而可以確定智能設(shè)備在取景圖像中所占的第一圖像比例。
可選的,終端可以根據(jù)目標(biāo)設(shè)備在取景圖像中對(duì)應(yīng)的像素點(diǎn)數(shù)目,確定目標(biāo)設(shè)備在取景圖像中所占的圖像比例,相應(yīng)的步驟101的處理可以如下:
確定目標(biāo)設(shè)備在取景圖像中所占的區(qū)域?qū)?yīng)的像素點(diǎn)的數(shù)目,以及取景圖像中的像素點(diǎn)的總數(shù)目;將目標(biāo)設(shè)備在取景圖像中所占的區(qū)域?qū)?yīng)的像素點(diǎn)的數(shù)目與取景圖像中的像素點(diǎn)的總數(shù)目的比例,確定為目標(biāo)設(shè)備在取景圖像中所占的第一圖像比例。
在實(shí)施中,終端確定當(dāng)前的取景圖像中包含目標(biāo)設(shè)備后,可以確定目標(biāo)設(shè)備在取景圖像中所占的區(qū)域(如矩形區(qū)域、三角形區(qū)域、圓形區(qū)域等),該區(qū)域可以是取景圖像中能夠包含目標(biāo)設(shè)備的最小矩形區(qū)域(或最小三角形區(qū)域、最小圓形區(qū)域等),然后可以確定該區(qū)域中包含的所有像素點(diǎn)的數(shù)目,也就是目標(biāo)設(shè)備在取景圖像中所占的區(qū)域?qū)?yīng)的像素點(diǎn)的數(shù)目。例如,確定目標(biāo)設(shè)備在取景圖像中所占的區(qū)域?yàn)榫匦螀^(qū)域,該矩形區(qū)域是以目標(biāo)設(shè)備在取景圖像中的高度與寬度為矩形的長(zhǎng)與寬組成的矩形區(qū)域,該矩形區(qū)域中的像素點(diǎn)的數(shù)目,即為目標(biāo)設(shè)備在取景圖像中所占的區(qū)域?qū)?yīng)的像素點(diǎn)的數(shù)目。并且可以確定取景圖像中的像素點(diǎn)的總數(shù)目,取景圖像中的像素點(diǎn)的總數(shù)目可以是終端的屏幕的分辨率(如終端的屏幕的分辨率是1920*1080,則可以確定取景圖像中的像素點(diǎn)的總數(shù)目是1920*1080)。終端可以將目標(biāo)設(shè)備在取景圖像中所占的區(qū)域?qū)?yīng)的像素點(diǎn)數(shù)目除以取景圖像中的像素點(diǎn)的總數(shù)目,得到的值,確定為目標(biāo)設(shè)備在取景圖像中所占的第一圖像比例。
步驟102,根據(jù)預(yù)先存儲(chǔ)的目標(biāo)設(shè)備的圖像比例與控制菜單的對(duì)應(yīng)關(guān)系,確定第一圖像比例對(duì)應(yīng)的第一控制菜單,其中,在對(duì)應(yīng)關(guān)系中,圖像比例越小,對(duì)應(yīng)的控制菜單的內(nèi)容復(fù)雜度越低。
其中,控制菜單包括至少一個(gè)控制按鍵,每個(gè)智能設(shè)備都對(duì)應(yīng)有控制菜單,用戶可以點(diǎn)擊控制菜單中的控制按鍵,控制對(duì)應(yīng)的智能設(shè)備。在圖像比例與控制菜單的對(duì)應(yīng)關(guān)系中,圖像比例越小,控制菜單的內(nèi)容復(fù)雜程度越低,例如,對(duì)于目標(biāo)設(shè)備,圖像比例為1/5,對(duì)應(yīng)的控制菜單中僅包含一個(gè)控制按鍵,圖像比例為1/2,對(duì)應(yīng)的控制菜單中包含三個(gè)控制按鍵等。
在實(shí)施中,如表一所示,技術(shù)人員可以設(shè)置目標(biāo)設(shè)備的圖像比例與控制菜單的對(duì)應(yīng)關(guān)系,并且存儲(chǔ)至AR應(yīng)用程序的安裝包中,或AR應(yīng)用程序的后臺(tái)服務(wù)器(后續(xù)簡(jiǎn)稱為服務(wù)器)中,例如,目標(biāo)設(shè)備是智能燈,對(duì)應(yīng)有控制菜單1、控制菜單2、控制菜單3等,目標(biāo)設(shè)備是智能電視,對(duì)應(yīng)有控制菜單4、控制菜單5、控制菜單6等,智能設(shè)備與智能設(shè)備對(duì)應(yīng)的控制菜單都可以存儲(chǔ)至服務(wù)器,或AR應(yīng)用程序的安裝包中。
表一
AR應(yīng)用程序的安裝包中有目標(biāo)設(shè)備的圖像比例與控制菜單的對(duì)應(yīng)關(guān)系,終端中安裝了AR應(yīng)用程序,終端中存儲(chǔ)了目標(biāo)設(shè)備的圖像比例與控制菜單的對(duì)應(yīng)關(guān)系。終端確定目標(biāo)設(shè)備在取景圖像中所占的第一圖像比例后,可以從終端中預(yù)先存儲(chǔ)的目標(biāo)設(shè)備的圖像比例與控制菜單的對(duì)應(yīng)關(guān)系中,查找目標(biāo)設(shè)備對(duì)應(yīng)的控制菜單,然后在查找到的目標(biāo)設(shè)備對(duì)應(yīng)的控制菜單中,確定第一圖像比例對(duì)應(yīng)的第一控制菜單。
或者,終端確定目標(biāo)設(shè)備在取景圖像中所占的第一圖像比例后,可以向服務(wù)器發(fā)送控制菜單的獲取請(qǐng)求,該獲取請(qǐng)求中攜帶有目標(biāo)設(shè)備的標(biāo)識(shí),服務(wù)器接收到終端發(fā)送的控制菜單的獲取請(qǐng)求后,可以根據(jù)目標(biāo)設(shè)備的標(biāo)識(shí),查找目標(biāo)設(shè)備的圖像比例與控制菜單的對(duì)應(yīng)關(guān)系,然后將目標(biāo)設(shè)備的圖像比例與控制菜單的對(duì)應(yīng)關(guān)系發(fā)送至終端。終端接收到服務(wù)器發(fā)送的目標(biāo)設(shè)備的圖像比例與控制菜單的對(duì)應(yīng)關(guān)系后,可以從中查找目標(biāo)設(shè)備的第一圖像比例對(duì)應(yīng)的控制菜單為第一控制菜單。
另外,終端的取景圖像包含多個(gè)智能設(shè)備時(shí),由于各個(gè)智能設(shè)備的實(shí)際尺寸不相同,各個(gè)智能設(shè)備與終端的距離也有可能不相同,各個(gè)智能設(shè)備在取景圖像中所占的圖像比例有可能不一樣,終端根據(jù)預(yù)先存儲(chǔ)的目標(biāo)設(shè)備的圖像比例與控制菜單的對(duì)應(yīng)關(guān)系,確定出的各個(gè)智能設(shè)備對(duì)應(yīng)的控制菜單內(nèi)容復(fù)雜度不一樣。例如,如圖2所示,終端的取景圖像中包含兩個(gè)智能設(shè)備(智能電視與智能燈),終端確定智能燈在取景圖像中所占的圖像比例為1/4,智能電視在取景圖像中所占的圖像比例為1/2,終端確定智能燈的圖像比例1/4對(duì)應(yīng)的控制菜單中包含一個(gè)控制按鍵(開關(guān)按鍵),智能電視的圖像比例1/2對(duì)應(yīng)的控制菜單中包含三個(gè)控制按鍵(開關(guān)按鍵、頻道音量按鍵、靜音按鍵)。
可選的,目標(biāo)設(shè)備的圖像比例與控制菜單的對(duì)應(yīng)關(guān)系為目標(biāo)設(shè)備的圖像比例范圍與控制菜單的對(duì)應(yīng)關(guān)系;相應(yīng)的,步驟102的步驟可以如下:
根據(jù)預(yù)先存儲(chǔ)的目標(biāo)設(shè)備的圖像比例范圍與控制菜單的對(duì)應(yīng)關(guān)系,確定第一圖像比例所屬的圖像比例范圍對(duì)應(yīng)的第一控制菜單。
在實(shí)施中,技術(shù)人員預(yù)設(shè)的目標(biāo)設(shè)備的圖像比例與控制菜單的對(duì)應(yīng)關(guān)系,為目標(biāo)設(shè)備的圖像比例范圍與控制菜單的對(duì)應(yīng)關(guān)系,例如,如表二所示,智能燈的圖像比例范圍為0~1/4,對(duì)應(yīng)的控制菜單為控制菜單1,控制菜單1中的內(nèi)容比較簡(jiǎn)單(如控制按鍵的數(shù)目為1個(gè)),智能燈的圖像比例范圍為1/4~1/2,對(duì)應(yīng)的控制菜單為控制菜單2,控制菜單2中的內(nèi)容比控制菜單1中的內(nèi)容復(fù)雜(控制按鍵的數(shù)目比控制菜單1中的控制按鍵數(shù)目多),智能燈的圖像比例范圍為1/2~1,對(duì)應(yīng)的控制菜單為控制菜單3,控制菜單3中的內(nèi)容比控制菜單2中的內(nèi)容復(fù)雜(控制按鍵的數(shù)目比控制菜單2中的控制按鍵數(shù)目多)。
表二
AR應(yīng)用程序的安裝包中有目標(biāo)設(shè)備的圖像比例范圍與控制菜單的對(duì)應(yīng)關(guān)系,終端中安裝了AR應(yīng)用程序,終端中存儲(chǔ)了目標(biāo)設(shè)備的圖像比例范圍與控制菜單的對(duì)應(yīng)關(guān)系。終端確定目標(biāo)設(shè)備在取景圖像中所占的第一圖像比例后,可以從終端中預(yù)先存儲(chǔ)的目標(biāo)設(shè)備的圖像比例范圍與控制菜單的對(duì)應(yīng)關(guān)系中,查找目標(biāo)設(shè)備對(duì)應(yīng)的控制菜單,然后在查找到的目標(biāo)設(shè)備對(duì)應(yīng)的控制菜單中,確定第一圖像比例所屬的圖像比例范圍對(duì)應(yīng)的第一控制菜單。
或者,終端確定目標(biāo)設(shè)備在取景圖像中所占的第一圖像比例后,可以向服務(wù)器發(fā)送控制菜單的獲取請(qǐng)求,該獲取請(qǐng)求中攜帶有目標(biāo)設(shè)備的標(biāo)識(shí),服務(wù)器接收到終端發(fā)送的控制菜單的獲取請(qǐng)求后,可以根據(jù)目標(biāo)設(shè)備的標(biāo)識(shí),查找目標(biāo)設(shè)備的圖像比例范圍與控制菜單的對(duì)應(yīng)關(guān)系,然后將目標(biāo)設(shè)備的圖像比例范圍與控制菜單的對(duì)應(yīng)關(guān)系發(fā)送至終端。終端接收到服務(wù)器發(fā)送的目標(biāo)設(shè)備的圖像比例范圍與控制菜單的對(duì)應(yīng)關(guān)系后,可以從中查找目標(biāo)設(shè)備的第一圖像比例所屬的圖像比例范圍,然后確定該圖像比例范圍對(duì)應(yīng)的控制菜單為第一控制菜單。
可選的,本發(fā)明實(shí)施例中,不同圖像比例對(duì)應(yīng)的控制菜單可以基于實(shí)際需求任意設(shè)置,下面給出了一個(gè)可行的示例:
如果第一圖像比例小于第一預(yù)設(shè)閾值,第一控制菜單中的控制按鍵是使用頻率最高的控制按鍵;如果第一圖像比例大于第一預(yù)設(shè)閾值,且小于第二預(yù)設(shè)閾值,第一控制菜單中的控制按鍵是使用頻率最高的控制按鍵,以及使用頻率大于第一預(yù)設(shè)頻率閾值的控制按鍵;如果第一圖像比例大于第二預(yù)設(shè)閾值,第一控制菜單中的控制按鍵是使用頻率最高的控制按鍵,以及使用頻率大于第二預(yù)設(shè)頻率閾值的控制按鍵,其中,第一預(yù)設(shè)頻率閾值大于第二預(yù)設(shè)頻率閾值。
在實(shí)施中,如果第一圖像比例小于第一預(yù)設(shè)閾值,則確定的第一控制菜單中的控制按鍵可以是使用頻率最高的控制按鍵。這樣,目標(biāo)設(shè)備在取景圖像中所占的比例比較小,控制按鍵的數(shù)目比較少,用戶也可以清楚的看到控制菜單中的控制按鍵。例如,如圖3所示,智能燈的第一圖像比例等于1/6,小于第一預(yù)設(shè)閾值1/4,第一控制菜單中的控制按鍵是使用頻率最高的開關(guān)按鍵。
另外,如果第一圖像比例小于第一預(yù)設(shè)閾值,則確定的第一控制菜單中的控制按鍵可以是主菜單控制按鍵,用戶可以點(diǎn)擊主菜單控制按鍵,終端則會(huì)接收到主菜單控制按鍵的點(diǎn)擊指令,然后終端會(huì)顯示目標(biāo)設(shè)備對(duì)應(yīng)的全部控制按鍵。
如果第一圖像比例大于第一預(yù)設(shè)閾值,且小于第二預(yù)設(shè)閾值,則確定的第一控制菜單中的控制按鍵可以是使用頻率最高的控制按鍵,以及使用頻率大于第一預(yù)設(shè)頻率閾值的控制按鍵。這樣,目標(biāo)設(shè)備在取景圖像中所占的比例比第一預(yù)設(shè)閾值大,即使設(shè)置稍微多一點(diǎn)的控制按鍵,用戶也可以清楚的看到控制菜單中的控制按鍵。例如,如圖4所示,智能燈的第一圖像比例等于1/3,大于第一預(yù)設(shè)閾值1/4,小于第二預(yù)設(shè)閾值1/2,第一控制菜單中的控制按鍵可以是開關(guān)按鍵、亮度按鍵(亮度按鍵的使用頻率大于第一預(yù)設(shè)頻率閾值)。
另外,如果第一圖像比例大于第一預(yù)設(shè)閾值,且小于第二預(yù)設(shè)閾值,則確定的第一控制菜單中的控制按鍵可以是使用頻率最高的控制按鍵,以及主菜單控制按鍵,用戶可以點(diǎn)擊主菜單控制按鍵,終端則會(huì)接收到主菜單控制按鍵的點(diǎn)擊指令,然后終端會(huì)顯示目標(biāo)設(shè)備除使用頻率最高的控制按鍵之外的控制按鍵。
如果第一圖像比例大于第二預(yù)設(shè)閾值,第一控制菜單中的控制按鍵可以是使用頻率最高的控制按鍵,以及使用頻率大于第二預(yù)設(shè)頻率閾值的控制按鍵。這樣,目標(biāo)設(shè)備在取景圖像中所占的比例大于第二預(yù)設(shè)閾值,即使設(shè)置比較多的控制按鍵,用戶也可以清楚的看到控制菜單中的控制按鍵。例如,如圖5所示,智能燈的第一圖像比例等于2/3,大于第二預(yù)設(shè)閾值1/2,第一控制菜單中的控制按鍵可以是開關(guān)按鍵、亮度按鍵(亮度按鍵的使用頻率大于第一預(yù)設(shè)頻率閾值)、顏色按鍵(顏色按鍵的使用頻率大于第二預(yù)設(shè)頻率閾值)。
另外,如果第一圖像比例大于第二預(yù)設(shè)閾值,第一控制菜單中的控制按鍵可以是目標(biāo)設(shè)備對(duì)應(yīng)的全部控制按鍵。這樣,目標(biāo)設(shè)備在取景圖像中所占的比例大于第二預(yù)設(shè)閾值,即使控制菜單中設(shè)置了目標(biāo)設(shè)備對(duì)應(yīng)的全部控制按鍵,用戶也可以清楚的看到控制菜單中的每個(gè)控制按鍵。
對(duì)于不同圖像比例對(duì)應(yīng)的控制菜單,本發(fā)明實(shí)施例還有很多設(shè)置方式,此處不再一一例舉。
步驟103,根據(jù)目標(biāo)設(shè)備在取景圖像中的尺寸,在取景圖像中目標(biāo)設(shè)備的位置處,顯示第一控制菜單。
在實(shí)施中,終端在確定第一控制菜單后,可以在取景圖像中目標(biāo)設(shè)備的位置處,以目標(biāo)設(shè)備在取景圖像中的尺寸(也就是以目標(biāo)設(shè)備在取景圖像中,所占的最小矩形區(qū)域的尺寸),顯示第一控制菜單,即顯示第一控制菜單時(shí),第一控制菜單可以恰好覆蓋目標(biāo)設(shè)備。例如,目標(biāo)設(shè)備為智能燈,智能燈在取景圖像中,所占的最小矩形區(qū)域中的尺寸為2英寸(矩形區(qū)域的對(duì)角線長(zhǎng)度),則第一控制菜單的尺寸為2英寸(第一控制菜單的對(duì)角線長(zhǎng)度)。
可選的,終端可以以半透明顯示方式,顯示第一控制菜單,相應(yīng)的,步驟103的處理可以如下:
根據(jù)目標(biāo)設(shè)備在取景圖像中的尺寸,在取景圖像中目標(biāo)設(shè)備的位置處,通過半透明顯示方式,顯示第一控制菜單。
在實(shí)施中,終端在確定第一控制菜單后,可以在取景圖像中目標(biāo)設(shè)備的位置處,以目標(biāo)設(shè)備在取景圖像中的尺寸,將第一控制菜單的背景顯示為半透明的。這樣,用戶可以確定該控制菜單對(duì)應(yīng)的智能設(shè)備。例如,如圖6所示,目標(biāo)設(shè)備為智能燈,第一控制菜單的背景的透明度為50%。
或者,終端以目標(biāo)設(shè)備在取景圖像中的尺寸,將第一控制菜單的背景顯示為全透明的,第一控制菜單可以恰好覆蓋目標(biāo)設(shè)備。
或者,終端以目標(biāo)設(shè)備在取景圖像中的尺寸,將第一控制菜單的背景顯示為全透明的,第一控制菜單中的控制按鍵顯示為半透明的,第一控制菜單可以恰好覆蓋目標(biāo)設(shè)備。
本發(fā)明實(shí)施例,還提供了用戶使用控制菜單控制智能設(shè)備的方法,相應(yīng)的處理可以如下:
第一控制菜單中包括至少一個(gè)控制按鍵;當(dāng)檢測(cè)到第一控制菜單中第一控制按鍵的觸發(fā)指令時(shí),向目標(biāo)設(shè)備發(fā)送第一控制按鍵對(duì)應(yīng)的控制請(qǐng)求。
在實(shí)施中,第一控制菜單中至少包含一個(gè)控制按鍵,用戶可以點(diǎn)擊第一控制菜單中的第一控制按鍵,終端則會(huì)檢測(cè)到第一控制按鍵的觸發(fā)指令,然后終端確定第一控制按鍵對(duì)應(yīng)的控制請(qǐng)求,并將該控制請(qǐng)求發(fā)送至目標(biāo)設(shè)備。目標(biāo)設(shè)備接收到該控制請(qǐng)求后,可以執(zhí)行該控制請(qǐng)求對(duì)應(yīng)的操作。例如,目標(biāo)設(shè)備為智能燈,第一控制按鍵為開關(guān)按鍵,用戶點(diǎn)擊開關(guān)按鍵,終端確定第一控制按鍵對(duì)應(yīng)的控制請(qǐng)求為開啟請(qǐng)求,然后向智能燈發(fā)送開啟請(qǐng)求,智能燈接收到開啟請(qǐng)求后,可以發(fā)光?;蛘?,第一控制按鍵為顏色按鍵,用戶可以點(diǎn)擊顏色按鍵,觸發(fā)終端顯示可選取的多種顏色,用戶可以選擇某個(gè)顏色,然后點(diǎn)擊確定按鍵,觸發(fā)終端向目標(biāo)設(shè)備發(fā)送控制請(qǐng)求,該控制請(qǐng)求中攜帶有用戶選取的顏色,目標(biāo)接收到控制請(qǐng)求后,可以更換智能燈的發(fā)光顏色。
另外,本發(fā)明實(shí)施例還提供了技術(shù)人員根據(jù)控制按鍵的使用頻率,設(shè)定不同的圖像比例對(duì)應(yīng)的控制菜單中的控制按鍵的方法,相應(yīng)的處理可以如下:
技術(shù)人員可以在終端的AR應(yīng)用程序中設(shè)置,只要檢測(cè)到控制按鍵的點(diǎn)擊指令,終端則向服務(wù)器上報(bào)對(duì)應(yīng)該控制按鍵的使用操作。服務(wù)器接收到對(duì)應(yīng)該控制按鍵的使用操作后,可以將存儲(chǔ)的該控制按鍵的使用頻率增加1次。技術(shù)人員可以從服務(wù)器查找到預(yù)設(shè)時(shí)長(zhǎng)內(nèi),對(duì)應(yīng)目標(biāo)設(shè)備的各個(gè)控制按鍵的使用頻率,然后根據(jù)各個(gè)控制按鍵的使用頻率,從高到低進(jìn)行排序。圖像比例小于第一預(yù)設(shè)閾值時(shí),則說明目標(biāo)設(shè)備在取景圖像中的尺寸比較小,控制菜單的內(nèi)容應(yīng)該比較簡(jiǎn)單,對(duì)應(yīng)設(shè)置的控制菜單中的控制按鍵是使用頻率最高的控制按鍵,圖像比例大于第一預(yù)設(shè)閾值,且小于第二預(yù)設(shè)閾值時(shí),則說明目標(biāo)設(shè)備在取景圖像中所占的比例適中,第一控制菜單中的內(nèi)容應(yīng)該稍微復(fù)雜一點(diǎn),對(duì)應(yīng)設(shè)置的控制菜單中的控制按鍵是使用頻率最高的控制按鍵,以及使用頻率大于第一預(yù)設(shè)頻率閾值的控制按鍵,圖像比例大于第二預(yù)設(shè)閾值時(shí),則說明目標(biāo)設(shè)備在取景圖像中所占的比例比較大,控制菜單中的內(nèi)容應(yīng)該最復(fù)雜,對(duì)應(yīng)設(shè)置的控制菜單中的控制按鍵是使用頻率最高的控制按鍵,以及使用頻率大于第二預(yù)設(shè)頻率閾值的控制按鍵,其中,第一預(yù)設(shè)頻率閾值大于第二預(yù)設(shè)頻率閾值。
另外,技術(shù)人員可以在控制菜單中設(shè)置主菜單按鍵,用戶可以點(diǎn)擊主菜單按鍵,觸發(fā)終端顯示目標(biāo)設(shè)備對(duì)應(yīng)的所有控制按鍵,用戶可以點(diǎn)擊任一控制按鍵,觸發(fā)終端向目標(biāo)設(shè)備發(fā)送該控制按鍵對(duì)應(yīng)的控制請(qǐng)求,目標(biāo)設(shè)備可以執(zhí)行該控制請(qǐng)求對(duì)應(yīng)的操作。
本發(fā)明實(shí)施例中,當(dāng)終端當(dāng)前的取景圖像中包含目標(biāo)設(shè)備時(shí),終端可以確定目標(biāo)設(shè)備在取景圖像中所占的第一圖像比例,然后根據(jù)預(yù)先存儲(chǔ)的目標(biāo)設(shè)備的圖像比例與控制菜單的對(duì)應(yīng)關(guān)系,可以確定第一圖像比例對(duì)應(yīng)的第一控制菜單,其中,在對(duì)應(yīng)關(guān)系中,圖像比例越小,對(duì)應(yīng)的控制菜單的內(nèi)容復(fù)雜度越低,根據(jù)目標(biāo)設(shè)備在取景圖像中的尺寸,在取景圖像中目標(biāo)設(shè)備的位置處,顯示第一控制菜單。這樣,控制菜單的顯示尺寸,是根據(jù)智能設(shè)備在取景圖像中的尺寸確定的,即使取景圖像中包含多個(gè)相距比較近的智能設(shè)備,各個(gè)智能設(shè)備對(duì)應(yīng)的控制菜單也不會(huì)重疊,而且控制菜單的內(nèi)容復(fù)雜程度,也是根據(jù)智能設(shè)備在取景圖像中所占的圖像比例確定的,從而可以清楚的顯示控制菜單。
基于相同的技術(shù)構(gòu)思,本發(fā)明實(shí)施例還提供了一種顯示控制菜單的裝置,如圖7所示,該裝置包括:
第一確定模塊710,用于當(dāng)終端當(dāng)前的取景圖像中包含目標(biāo)設(shè)備時(shí),確定所述目標(biāo)設(shè)備在所述取景圖像中所占的第一圖像比例;
第二確定模塊720,用于根據(jù)預(yù)先存儲(chǔ)的所述目標(biāo)設(shè)備的圖像比例與控制菜單的對(duì)應(yīng)關(guān)系,確定所述第一圖像比例對(duì)應(yīng)的第一控制菜單,其中,在所述對(duì)應(yīng)關(guān)系中,圖像比例越小,對(duì)應(yīng)的控制菜單的內(nèi)容復(fù)雜度越低;
顯示模塊730,用于根據(jù)所述目標(biāo)設(shè)備在所述取景圖像中的尺寸,在所述取景圖像中所述目標(biāo)設(shè)備的位置處,顯示所述第一控制菜單。
可選的,所述目標(biāo)設(shè)備的圖像比例與控制菜單的對(duì)應(yīng)關(guān)系為所述目標(biāo)設(shè)備的圖像比例范圍與控制菜單的對(duì)應(yīng)關(guān)系;
所述第二確定模塊720,用于:
根據(jù)預(yù)先存儲(chǔ)的所述目標(biāo)設(shè)備的圖像比例范圍與控制菜單的對(duì)應(yīng)關(guān)系,確定所述第一圖像比例所屬的圖像比例范圍對(duì)應(yīng)的第一控制菜單。
可選的,所述顯示模塊730,用于:
根據(jù)所述目標(biāo)設(shè)備在所述取景圖像中的尺寸,在所述取景圖像中所述目標(biāo)設(shè)備的位置處,通過半透明顯示方式,顯示所述第一控制菜單。
可選的,所述第一確定模塊710,用于:
確定所述目標(biāo)設(shè)備在所述取景圖像中所占的區(qū)域?qū)?yīng)的像素點(diǎn)的數(shù)目,以及所述取景圖像中的像素點(diǎn)的總數(shù)目;
將所述目標(biāo)設(shè)備在所述取景圖像中所占的區(qū)域?qū)?yīng)的像素點(diǎn)的數(shù)目與所述取景圖像中的像素點(diǎn)的總數(shù)目的比例,確定為所述目標(biāo)設(shè)備在所述取景圖像中所占的第一圖像比例。
可選的,所述第一控制菜單中包括至少一個(gè)控制按鍵;
如圖8所示,所述裝置還包括:
發(fā)送模塊740,用于當(dāng)檢測(cè)到所述第一控制菜單中第一控制按鍵的觸發(fā)指令時(shí),向所述目標(biāo)設(shè)備發(fā)送所述第一控制按鍵對(duì)應(yīng)的控制請(qǐng)求。
本發(fā)明實(shí)施例中,當(dāng)終端當(dāng)前的取景圖像中包含目標(biāo)設(shè)備時(shí),終端可以確定目標(biāo)設(shè)備在取景圖像中所占的第一圖像比例,然后根據(jù)預(yù)先存儲(chǔ)的目標(biāo)設(shè)備的圖像比例與控制菜單的對(duì)應(yīng)關(guān)系,可以確定第一圖像比例對(duì)應(yīng)的第一控制菜單,其中,在對(duì)應(yīng)關(guān)系中,圖像比例越小,對(duì)應(yīng)的控制菜單的內(nèi)容復(fù)雜度越低,根據(jù)目標(biāo)設(shè)備在取景圖像中的尺寸,在取景圖像中目標(biāo)設(shè)備的位置處,顯示第一控制菜單。這樣,控制菜單的顯示尺寸,是根據(jù)智能設(shè)備在取景圖像中的尺寸確定的,即使取景圖像中包含多個(gè)相距比較近的智能設(shè)備,各個(gè)智能設(shè)備對(duì)應(yīng)的控制菜單也不會(huì)重疊,而且控制菜單的內(nèi)容復(fù)雜程度,也是根據(jù)智能設(shè)備在取景圖像中所占的圖像比例確定的,從而可以清楚的顯示控制菜單。
需要說明的是:上述實(shí)施例提供的顯示控制菜單的裝置在顯示控制菜單時(shí),僅以上述各功能模塊的劃分進(jìn)行舉例說明,實(shí)際應(yīng)用中,可以根據(jù)需要而將上述功能分配由不同的功能模塊完成,即將裝置的內(nèi)部結(jié)構(gòu)劃分成不同的功能模塊,以完成以上描述的全部或者部分功能。另外,上述實(shí)施例提供的顯示控制菜單的裝置與顯示控制菜單的方法實(shí)施例屬于同一構(gòu)思,其具體實(shí)現(xiàn)過程詳見方法實(shí)施例,這里不再贅述。
請(qǐng)參考圖9,其示出了本發(fā)明實(shí)施例所涉及的終端的結(jié)構(gòu)示意圖,該終端可以用于實(shí)施上述實(shí)施例中提供的顯示控制菜單的方法。具體來講:
終端900可以包括RF(Radio Frequency,射頻)電路110、包括有一個(gè)或一個(gè)以上計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)的存儲(chǔ)器120、輸入單元130、顯示單元140、傳感器150、音頻電路160、WiFi(wireless fidelity,無線保真)模塊170、包括有一個(gè)或者一個(gè)以上處理核心的處理器180、以及電源190等部件。本領(lǐng)域技術(shù)人員可以理解,圖9中示出的終端結(jié)構(gòu)并不構(gòu)成對(duì)終端的限定,可以包括比圖示更多或更少的部件,或者組合某些部件,或者不同的部件布置。其中:
RF電路110可用于收發(fā)信息或通話過程中,信號(hào)的接收和發(fā)送,特別地,將基站的下行信息接收后,交由一個(gè)或者一個(gè)以上處理器180處理;另外,將涉及上行的數(shù)據(jù)發(fā)送給基站。通常,RF電路110包括但不限于天線、至少一個(gè)放大器、調(diào)諧器、一個(gè)或多個(gè)振蕩器、用戶身份模塊(SIM)卡、收發(fā)信機(jī)、耦合器、LNA(Low Noise Amplifier,低噪聲放大器)、雙工器等。此外,RF電路110還可以通過無線通信與網(wǎng)絡(luò)和其他設(shè)備通信。所述無線通信可以使用任一通信標(biāo)準(zhǔn)或協(xié)議,包括但不限于GSM(Global System of Mobile communication,全球移動(dòng)通訊系統(tǒng))、GPRS(General Packet Radio Service,通用分組無線服務(wù))、CDMA(Code Division Multiple Access,碼分多址)、WCDMA(Wideband Code Division Multiple Access,寬帶碼分多址)、LTE(Long Term Evolution,長(zhǎng)期演進(jìn))、電子郵件、SMS(Short Messaging Service,短消息服務(wù))等。
存儲(chǔ)器120可用于存儲(chǔ)軟件程序以及模塊,處理器180通過運(yùn)行存儲(chǔ)在存儲(chǔ)器120的軟件程序以及模塊,從而執(zhí)行各種功能應(yīng)用以及數(shù)據(jù)處理。存儲(chǔ)器120可主要包括存儲(chǔ)程序區(qū)和存儲(chǔ)數(shù)據(jù)區(qū),其中,存儲(chǔ)程序區(qū)可存儲(chǔ)操作系統(tǒng)、至少一個(gè)功能所需的應(yīng)用程序(比如聲音播放功能、圖像播放功能等)等;存儲(chǔ)數(shù)據(jù)區(qū)可存儲(chǔ)根據(jù)終端900的使用所創(chuàng)建的數(shù)據(jù)(比如音頻數(shù)據(jù)、電話本等)等。此外,存儲(chǔ)器120可以包括高速隨機(jī)存取存儲(chǔ)器,還可以包括非易失性存儲(chǔ)器,例如至少一個(gè)磁盤存儲(chǔ)器件、閃存器件、或其他易失性固態(tài)存儲(chǔ)器件。相應(yīng)地,存儲(chǔ)器120還可以包括存儲(chǔ)器控制器,以提供處理器180和輸入單元130對(duì)存儲(chǔ)器120的訪問。
輸入單元130可用于接收輸入的數(shù)字或字符信息,以及產(chǎn)生與用戶設(shè)置以及功能控制有關(guān)的鍵盤、鼠標(biāo)、操作桿、光學(xué)或者軌跡球信號(hào)輸入。具體地,輸入單元130可包括觸敏表面131以及其他輸入設(shè)備132。觸敏表面131,也稱為觸摸顯示屏或者觸控板,可收集用戶在其上或附近的觸摸操作(比如用戶使用手指、觸筆等任何適合的物體或附件在觸敏表面131上或在觸敏表面131附近的操作),并根據(jù)預(yù)先設(shè)定的程式驅(qū)動(dòng)相應(yīng)的連接裝置??蛇x的,觸敏表面131可包括觸摸檢測(cè)裝置和觸摸控制器兩個(gè)部分。其中,觸摸檢測(cè)裝置檢測(cè)用戶的觸摸方位,并檢測(cè)觸摸操作帶來的信號(hào),將信號(hào)傳送給觸摸控制器;觸摸控制器從觸摸檢測(cè)裝置上接收觸摸信息,并將它轉(zhuǎn)換成觸點(diǎn)坐標(biāo),再送給處理器180,并能接收處理器180發(fā)來的命令并加以執(zhí)行。此外,可以采用電阻式、電容式、紅外線以及表面聲波等多種類型實(shí)現(xiàn)觸敏表面131。除了觸敏表面131,輸入單元130還可以包括其他輸入設(shè)備132。具體地,其他輸入設(shè)備132可以包括但不限于物理鍵盤、功能鍵(比如音量控制按鍵、開關(guān)按鍵等)、軌跡球、鼠標(biāo)、操作桿等中的一種或多種。
顯示單元140可用于顯示由用戶輸入的信息或提供給用戶的信息以及終端900的各種圖形用戶接口,這些圖形用戶接口可以由圖形、文本、圖標(biāo)、視頻和其任意組合來構(gòu)成。顯示單元140可包括顯示面板141,可選的,可以采用LCD(Liquid Crystal Display,液晶顯示器)、OLED(Organic Light-Emitting Diode,有機(jī)發(fā)光二極管)等形式來配置顯示面板141。進(jìn)一步的,觸敏表面131可覆蓋顯示面板141,當(dāng)觸敏表面131檢測(cè)到在其上或附近的觸摸操作后,傳送給處理器180以確定觸摸事件的類型,隨后處理器180根據(jù)觸摸事件的類型在顯示面板141上提供相應(yīng)的視覺輸出。雖然在圖9中,觸敏表面131與顯示面板141是作為兩個(gè)獨(dú)立的部件來實(shí)現(xiàn)輸入和輸入功能,但是在某些實(shí)施例中,可以將觸敏表面131與顯示面板141集成而實(shí)現(xiàn)輸入和輸出功能。
終端900還可包括至少一種傳感器150,比如光傳感器、運(yùn)動(dòng)傳感器以及其他傳感器。具體地,光傳感器可包括環(huán)境光傳感器及接近傳感器,其中,環(huán)境光傳感器可根據(jù)環(huán)境光線的明暗來調(diào)節(jié)顯示面板141的亮度,接近傳感器可在終端900移動(dòng)到耳邊時(shí),關(guān)閉顯示面板141和/或背光。作為運(yùn)動(dòng)傳感器的一種,重力加速度傳感器可檢測(cè)各個(gè)方向上(一般為三軸)加速度的大小,靜止時(shí)可檢測(cè)出重力的大小及方向,可用于識(shí)別手機(jī)姿態(tài)的應(yīng)用(比如橫豎屏切換、相關(guān)游戲、磁力計(jì)姿態(tài)校準(zhǔn))、振動(dòng)識(shí)別相關(guān)功能(比如計(jì)步器、敲擊)等;至于終端900還可配置的陀螺儀、氣壓計(jì)、濕度計(jì)、溫度計(jì)、紅外線傳感器等其他傳感器,在此不再贅述。
音頻電路160、揚(yáng)聲器161,傳聲器162可提供用戶與終端900之間的音頻接口。音頻電路160可將接收到的音頻數(shù)據(jù)轉(zhuǎn)換后的電信號(hào),傳輸?shù)綋P(yáng)聲器161,由揚(yáng)聲器161轉(zhuǎn)換為聲音信號(hào)輸出;另一方面,傳聲器162將收集的聲音信號(hào)轉(zhuǎn)換為電信號(hào),由音頻電路160接收后轉(zhuǎn)換為音頻數(shù)據(jù),再將音頻數(shù)據(jù)輸出處理器180處理后,經(jīng)RF電路110以發(fā)送給比如另一終端,或者將音頻數(shù)據(jù)輸出至存儲(chǔ)器120以便進(jìn)一步處理。音頻電路160還可能包括耳塞插孔,以提供外設(shè)耳機(jī)與終端900的通信。
WiFi屬于短距離無線傳輸技術(shù),終端900通過WiFi模塊170可以幫助用戶收發(fā)電子郵件、瀏覽網(wǎng)頁(yè)和訪問流式媒體等,它為用戶提供了無線的寬帶互聯(lián)網(wǎng)訪問。雖然圖9示出了WiFi模塊170,但是可以理解的是,其并不屬于終端900的必須構(gòu)成,完全可以根據(jù)需要在不改變發(fā)明的本質(zhì)的范圍內(nèi)而省略。
處理器180是終端900的控制中心,利用各種接口和線路連接整個(gè)手機(jī)的各個(gè)部分,通過運(yùn)行或執(zhí)行存儲(chǔ)在存儲(chǔ)器120內(nèi)的軟件程序和/或模塊,以及調(diào)用存儲(chǔ)在存儲(chǔ)器120內(nèi)的數(shù)據(jù),執(zhí)行終端900的各種功能和處理數(shù)據(jù),從而對(duì)手機(jī)進(jìn)行整體監(jiān)控。可選的,處理器180可包括一個(gè)或多個(gè)處理核心;優(yōu)選的,處理器180可集成應(yīng)用處理器和調(diào)制解調(diào)處理器,其中,應(yīng)用處理器主要處理操作系統(tǒng)、用戶界面和應(yīng)用程序等,調(diào)制解調(diào)處理器主要處理無線通信。可以理解的是,上述調(diào)制解調(diào)處理器也可以不集成到處理器180中。
終端900還包括給各個(gè)部件供電的電源190(比如電池),優(yōu)選的,電源可以通過電源管理系統(tǒng)與處理器180邏輯相連,從而通過電源管理系統(tǒng)實(shí)現(xiàn)管理充電、放電、以及功耗管理等功能。電源190還可以包括一個(gè)或一個(gè)以上的直流或交流電源、再充電系統(tǒng)、電源故障檢測(cè)電路、電源轉(zhuǎn)換器或者逆變器、電源狀態(tài)指示器等任意組件。
盡管未示出,終端900還可以包括攝像頭、藍(lán)牙模塊等,在此不再贅述。具體在本實(shí)施例中,終端900的顯示單元是觸摸屏顯示器,終端900還包括有存儲(chǔ)器,以及一個(gè)或者一個(gè)以上的程序,其中一個(gè)或者一個(gè)以上程序存儲(chǔ)于存儲(chǔ)器中,且經(jīng)配置以由一個(gè)或者一個(gè)以上處理器執(zhí)行述一個(gè)或者一個(gè)以上程序包含用于進(jìn)行以下操作的指令:
當(dāng)終端當(dāng)前的取景圖像中包含目標(biāo)設(shè)備時(shí),確定所述目標(biāo)設(shè)備在所述取景圖像中所占的第一圖像比例;
根據(jù)預(yù)先存儲(chǔ)的所述目標(biāo)設(shè)備的圖像比例與控制菜單的對(duì)應(yīng)關(guān)系,確定所述第一圖像比例對(duì)應(yīng)的第一控制菜單,其中,在所述對(duì)應(yīng)關(guān)系中,圖像比例越小,對(duì)應(yīng)的控制菜單的內(nèi)容復(fù)雜度越低;
根據(jù)所述目標(biāo)設(shè)備在所述取景圖像中的尺寸,在所述取景圖像中所述目標(biāo)設(shè)備的位置處,顯示所述第一控制菜單。
可選的,所述目標(biāo)設(shè)備的圖像比例與控制菜單的對(duì)應(yīng)關(guān)系為所述目標(biāo)設(shè)備的圖像比例范圍與控制菜單的對(duì)應(yīng)關(guān)系;
所述根據(jù)預(yù)先存儲(chǔ)的所述目標(biāo)設(shè)備的圖像比例與控制菜單的對(duì)應(yīng)關(guān)系,確定所述第一圖像比例對(duì)應(yīng)的第一控制菜單,包括:
根據(jù)預(yù)先存儲(chǔ)的所述目標(biāo)設(shè)備的圖像比例范圍與控制菜單的對(duì)應(yīng)關(guān)系,確定所述第一圖像比例所屬的圖像比例范圍對(duì)應(yīng)的第一控制菜單。
可選的,所述根據(jù)所述目標(biāo)設(shè)備在所述取景圖像中的尺寸,在所述取景圖像中所述目標(biāo)設(shè)備的位置處,顯示所述第一控制菜單,包括:
根據(jù)所述目標(biāo)設(shè)備在所述取景圖像中的尺寸,在所述取景圖像中所述目標(biāo)設(shè)備的位置處,通過半透明顯示方式,顯示所述第一控制菜單。
可選的,所述確定所述目標(biāo)設(shè)備在所述取景圖像中所占的第一圖像比例,包括:
確定所述目標(biāo)設(shè)備在所述取景圖像中所占的區(qū)域?qū)?yīng)的像素點(diǎn)的數(shù)目,以及所述取景圖像中的像素點(diǎn)的總數(shù)目;
將所述目標(biāo)設(shè)備在所述取景圖像中所占的區(qū)域?qū)?yīng)的像素點(diǎn)的數(shù)目與所述取景圖像中的像素點(diǎn)的總數(shù)目的比例,確定為所述目標(biāo)設(shè)備在所述取景圖像中所占的第一圖像比例。
可選的,所述第一控制菜單中包括至少一個(gè)控制按鍵;
所述方法還包括:
當(dāng)檢測(cè)到所述第一控制菜單中第一控制按鍵的觸發(fā)指令時(shí),向所述目標(biāo)設(shè)備發(fā)送所述第一控制按鍵對(duì)應(yīng)的控制請(qǐng)求。
本發(fā)明實(shí)施例中,當(dāng)終端當(dāng)前的取景圖像中包含目標(biāo)設(shè)備時(shí),終端可以確定目標(biāo)設(shè)備在取景圖像中所占的第一圖像比例,然后根據(jù)預(yù)先存儲(chǔ)的目標(biāo)設(shè)備的圖像比例與控制菜單的對(duì)應(yīng)關(guān)系,可以確定第一圖像比例對(duì)應(yīng)的第一控制菜單,其中,在對(duì)應(yīng)關(guān)系中,圖像比例越小,對(duì)應(yīng)的控制菜單的內(nèi)容復(fù)雜度越低,根據(jù)目標(biāo)設(shè)備在取景圖像中的尺寸,在取景圖像中目標(biāo)設(shè)備的位置處,顯示第一控制菜單。這樣,控制菜單的顯示尺寸,是根據(jù)智能設(shè)備在取景圖像中的尺寸確定的,即使取景圖像中包含多個(gè)相距比較近的智能設(shè)備,各個(gè)智能設(shè)備對(duì)應(yīng)的控制菜單也不會(huì)重疊,而且控制菜單的內(nèi)容復(fù)雜程度,也是根據(jù)智能設(shè)備在取景圖像中所占的圖像比例確定的,從而可以清楚的顯示控制菜單。
本領(lǐng)域普通技術(shù)人員可以理解實(shí)現(xiàn)上述實(shí)施例的全部或部分步驟可以通過硬件來完成,也可以通過程序來指令相關(guān)的硬件完成,的程序可以存儲(chǔ)于一種計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)中,上述提到的存儲(chǔ)介質(zhì)可以是只讀存儲(chǔ)器,磁盤或光盤等。
以上僅為本發(fā)明的較佳實(shí)施例,并不用以限制本發(fā)明,凡在本發(fā)明的精神和原則之內(nèi),所作的任何修改、等同替換、改進(jìn)等,均應(yīng)包含在本發(fā)明的保護(hù)范圍之內(nèi)。