一種遠(yuǎn)程操控方法及裝置的制造方法
【技術(shù)領(lǐng)域】
[0001] 本發(fā)明涉及多媒體技術(shù)領(lǐng)域，尤其涉及一種遠(yuǎn)程操控方法及裝置。
【背景技術(shù)】
[0002]當(dāng)前，電子設(shè)備種類及功能越來越多，給人們生活帶來了極大的便利。當(dāng)設(shè)計(jì)了終 端產(chǎn)品，在不方便將產(chǎn)品直接呈現(xiàn)給參觀者的情況下，可以遠(yuǎn)程演示給參觀者。演示者一般 需要一邊介紹產(chǎn)品的使用，一邊讓用戶操控終端，進(jìn)行切身體驗(yàn)。
[0003] 已有的遠(yuǎn)程操控方式中，控制端需要通過與被控端建立起連接，獲得對(duì)被控端的 控制權(quán)限，并在控制端的顯示屏幕上顯示被控端的顯示屏幕內(nèi)容。這種遠(yuǎn)程操控方式雖然 可以實(shí)現(xiàn)遠(yuǎn)程控制，但卻無法滿足終端演示的需求。比如，采用這種方式，用戶無法在控制 端看到終端（也即被控端）的屏幕內(nèi)容之外的信息（比如終端的外殼），并且，被控端在將 終端控制權(quán)交給控制端后，演示者將無法在被控端演示終端使用過程，顯然，這種遠(yuǎn)程操控 方式影響了終端的遠(yuǎn)程演示的效果。

【發(fā)明內(nèi)容】

[0004] 本發(fā)明實(shí)施例提供一種遠(yuǎn)程操控方法及裝置，用以在能夠呈現(xiàn)終端的屏幕內(nèi)容之 外的信息及演示者演示內(nèi)容的情況下，實(shí)現(xiàn)對(duì)終端的遠(yuǎn)程操控。
[0005] 第一方面，提供一種遠(yuǎn)程操控方法，包括：
[0006] 獲得演示圖像，所述演示圖像為用于演示終端操作的圖像；
[0007] 根據(jù)終端的檢測(cè)參數(shù)信息，在所述演示圖像中檢測(cè)演示屏幕畫面，所述演示屏幕 畫面為所述演示圖像中所述終端的屏幕畫面；
[0008] 根據(jù)所述演示屏幕畫面的參數(shù)信息和所述終端的屏幕參數(shù)信息，確定所述演示屏 幕畫面上的像素點(diǎn)與所述終端的顯示屏幕上的像素點(diǎn)之間的映射關(guān)系；
[0009] 根據(jù)用戶對(duì)所述演示屏幕畫面的操作信息，以及所述映射關(guān)系，操控所述終端。 [0010] 結(jié)合第一方面，在第一種可能的實(shí)現(xiàn)方式中，所述操作信息包括操作動(dòng)作信息和 第一操作位置信息，所述第一操作位置信息包括所述演示屏幕畫面上的被操作的第一像素 點(diǎn)集合的信息；
[0011] 根據(jù)用戶對(duì)所述演示屏幕畫面的操作信息，以及所述映射關(guān)系，操控所述終端，包 括：
[0012] 根據(jù)所述第一像素點(diǎn)集合的信息，以及所述映射關(guān)系，獲得所述第一像素點(diǎn)集合 對(duì)應(yīng)在所述終端的顯示屏幕上第二像素點(diǎn)集合的信息；
[0013] 根據(jù)所述第二像素點(diǎn)集合的信息和所述操作動(dòng)作信息，操控所述終端。
[0014] 結(jié)合第一方面，在第二種可能的實(shí)現(xiàn)方式中，所述操作信息包括第一操作位置信 息，所述第一操作位置信息包括所述演示屏幕畫面上的被操作的第一像素點(diǎn)集合的信息；
[0015] 根據(jù)用戶對(duì)所述演示屏幕畫面的操作信息，以及所述映射關(guān)系，操控所述終端，包 括：
[0016] 根據(jù)所述第一像素點(diǎn)集合的信息，以及所述映射關(guān)系，獲得所述第一像素點(diǎn)集合 對(duì)應(yīng)在所述終端的顯示屏幕上第二像素點(diǎn)集合的信息；
[0017] 在所述終端的顯示屏幕上，將軌跡圖標(biāo)移動(dòng)至所述第二像素點(diǎn)集合的位置處。
[0018] 結(jié)合第一方面，或第一方面的第一或第二種可能的實(shí)現(xiàn)方式，在第三種可能的實(shí) 現(xiàn)方式中，所述演示屏幕畫面的參數(shù)信息包括以下信息中的至少一項(xiàng)：演示屏幕畫面的寬 度值、所述演示屏幕畫面的高度值以及所述演示屏幕畫面上的參考像素點(diǎn)在所述演示圖像 中的坐標(biāo)值，所述屏幕參數(shù)信息包括所述終端的屏幕分辨率；
[0019] 根據(jù)所述演示屏幕畫面的參數(shù)信息和所述終端的屏幕參數(shù)信息，確定所述演示屏 幕畫面上的像素點(diǎn)與所述終端的顯示屏幕上的像素點(diǎn)之間的映射關(guān)系，包括：根據(jù)所述演 示屏幕畫面的寬度值、所述演示屏幕畫面的高度值、所述演示屏幕畫面上的參考像素點(diǎn)在 所述演示圖像中的坐標(biāo)值、以及所述終端的屏幕分辨率，確定所述演示屏幕畫面上的像素 點(diǎn)與所述顯示屏幕上的像素點(diǎn)之間的映射關(guān)系。
[0020] 結(jié)合第一方面的第三種可能的實(shí)現(xiàn)方式，在第四種可能的實(shí)現(xiàn)方式中，根據(jù)以下 公式確定所述演示屏幕畫面上的像素點(diǎn)與所述終端的顯示屏幕上的像素點(diǎn)之間的映射關(guān) 系：
[0023] 其中，（X，Y)為所述演示屏幕畫面上的像素點(diǎn)的坐標(biāo)值，（Gx，Gy)為與（X，Y)對(duì)應(yīng) 的所述顯示屏幕上的像素點(diǎn)的坐標(biāo)值，TrX為所述顯示屏幕的寬度值，TrY為所述顯示屏幕 的高度值，CW為所述演示屏幕畫面的寬度值，CH為所述演示屏幕畫面的高度值，（PtX，PtY) 為所述參考像素點(diǎn)在所述演示圖像中的坐標(biāo)值，所述參考像素點(diǎn)對(duì)應(yīng)于所述顯示屏幕上的 坐標(biāo)原點(diǎn)。
[0024] 結(jié)合第一方面，或第一方面的第一或第二種可能的實(shí)現(xiàn)方式，在第五種可能的實(shí) 現(xiàn)方式中，所述終端的屏幕參數(shù)信息包括所述終端的放置狀態(tài)信息、所述終端的屏幕分辨 率，所述演示屏幕畫面的參數(shù)信息包括演示屏幕畫面的寬度值、所述演示屏幕畫面的高度 值、和所述演示屏幕畫面上的參考像素點(diǎn)在所述演示圖像中的坐標(biāo)值；
[0025] 根據(jù)所述演示屏幕畫面的參數(shù)信息和所述終端的屏幕參數(shù)信息，確定所述演示屏 幕畫面上的像素點(diǎn)與所述終端的顯示屏幕上的像素點(diǎn)之間的映射關(guān)系，包括：
[0026] 根據(jù)所述演示屏幕畫面的寬度值、所述演示屏幕畫面的高度值、所述參考像素點(diǎn) 在所述演示圖像中的坐標(biāo)值、所述終端的屏幕分辨率、以及所述終端的放置狀態(tài)信息，確定 所述演示屏幕畫面上的像素點(diǎn)與所述顯示屏幕上的像素點(diǎn)之間的映射關(guān)系。
[0027] 結(jié)合第一方面的第五種可能的實(shí)現(xiàn)方式，在第六種可能的實(shí)現(xiàn)方式中，所述放置 狀態(tài)信息包括所述終端的放置狀態(tài)相對(duì)參考狀態(tài)的傾斜角，其中，所述傾斜角為在所述演 示圖像上，所述終端的放置狀態(tài)相對(duì)參考狀態(tài)沿逆時(shí)針方向旋轉(zhuǎn)的角度，在所述終端的放 置狀態(tài)為所述參考狀態(tài)時(shí)，所述顯示屏幕的頂邊所在的方向?yàn)樗椒较颍鲲@示屏幕的 側(cè)邊所在的方向?yàn)榇怪狈较?，根?jù)以下公式確定所述演示屏幕畫面上的像素點(diǎn)與所述終端 的顯示屏幕上的像素點(diǎn)之間的映射關(guān)系：
[0030] 其中，（X，Y)為所述演示屏幕畫面上的像素點(diǎn)的坐標(biāo)值，（Gx，Gy)為與（X，Y)對(duì)應(yīng) 的所述顯示屏幕上的像素點(diǎn)的坐標(biāo)值，TrX所述顯示屏幕的寬度值，TrY為所述顯示屏幕的 高度值，CW為所述演示屏幕畫面的寬度值，CH為所述演示屏幕畫面的高度值，（PtX，PtY)為 所述參考像素點(diǎn)在所述演示圖像中的坐標(biāo)值，所述參考像素點(diǎn)對(duì)應(yīng)于所述顯示屏幕上的坐 標(biāo)原點(diǎn)，9為基于所述傾斜角的角度值0確定的角度值，，9為像素點(diǎn)（X，Y)與參考像素 點(diǎn)（PtX，PtY)之間的連線與所述顯示屏幕的頂邊所在的方向之間的第一銳角夾角的角度 值。
[0031] 結(jié)合第一方面的第六種可能的實(shí)現(xiàn)方式，在第七種可能的實(shí)現(xiàn)方式中，基于所述 傾斜角的角度值0確定所述第一銳角夾角的角度值0包括：
[0032]當(dāng)所述傾斜角的角度值0為0時(shí)，確定所述第一銳角夾角的角度值0為a，其 中，a為像素點(diǎn)（X，Y)與參考像素點(diǎn)（PtX，PtY)之間的連線與水平方向的第二銳角夾角的 角度值；或者
[0033] 當(dāng)所述傾斜角的角度值0大于0、且所述傾斜角的角度值0小于JT時(shí)，確定所述 第一銳角夾角的角度值0為所述傾斜角的角度值0減去角度值a后的差值；或者
[0034]當(dāng)所述傾斜角的角度值0大于或等于、且所述傾斜角的角度值0小于3JT/2 時(shí)，確定所述第一銳角夾角的角度值9為所述傾斜角的角度值0與角度值a相加、再減 去n后的值；或者
[0035] 當(dāng)所述傾斜角的角度值0大于或等于3JT/2、且所述傾斜角的角度值0小于2JT 時(shí)，確定所述第一銳角夾角的角度值9為所述傾斜角的角度值0減去角度值a、再減去 n后的值。
[0036] 結(jié)合第一方面，或第一方面的第一至第七種可能的實(shí)現(xiàn)方式中的任意一種，在第 八種可能的實(shí)現(xiàn)方式中，所述根據(jù)終端的檢測(cè)參數(shù)信息，在所述演示圖像中檢測(cè)演示屏幕 畫面，包括：
[0037] 在所述演示圖像中檢測(cè)所有具有四邊形輪廓的物體；
[0038] 在檢測(cè)到的所述所有具有四邊形輪廓的物體中，查找出具有終端四邊形輪廓的所 述演示屏幕畫面，所述終端四邊形輪廓與所述終端的檢測(cè)參數(shù)信息匹配。
[0039] 結(jié)合第一方面的第八種可能的實(shí)現(xiàn)方式，在第九種可能的實(shí)現(xiàn)方式中，在所述演 示圖像中檢測(cè)所有具有四邊形輪廓的物體，包括：
[0040] 在所述演示圖像的確定的圖像檢測(cè)范圍內(nèi)檢測(cè)所有具有四邊形輪廓的物體。
[0041] 結(jié)合第一方面的第九種可能的實(shí)現(xiàn)方式，在第十種可能的實(shí)現(xiàn)方式中，根據(jù)包括 以下信息中的至少一種確定所述圖像檢測(cè)范圍：所述演示屏幕畫面的在所述演示圖像中的 移動(dòng)信息、所述演示圖像中的演示所述終端操作的演示者手部位置信息、預(yù)設(shè)的區(qū)域范圍 信息。
[0042] 第二方面，提供一種遠(yuǎn)程操控裝置，包括：
[0043] 獲取模塊，用于獲得演示圖像，所述演示圖像為用于演示終端操作的圖像；
[0044] 檢測(cè)模塊，用于根據(jù)終端的檢測(cè)參數(shù)信息，在所述獲取模塊獲取到的所述演示圖 像中檢測(cè)演示屏幕畫面，所述演示屏幕畫面為所述演示圖像中所述終端的屏幕畫面；
[0045] 確定模塊，用于根據(jù)所述檢測(cè)模塊檢測(cè)出的所述演示屏幕畫面的參數(shù)信息和所述 終端的屏幕參數(shù)信息，確定所述演示屏幕畫面上的像素點(diǎn)與所述終端的顯示屏幕上的像素 點(diǎn)之間的映射關(guān)系；
[0046] 操控模塊，用于根據(jù)用戶對(duì)所述演示屏幕畫面的操作信息，以及所述確定模塊確 定的所述映射關(guān)系，操控所述終端。
[0047] 結(jié)合第二方面，在第一種可能的實(shí)現(xiàn)方式中，所述第一操作位置信息包括所述演 示屏幕畫面上的被操作的第一像素點(diǎn)集合的信息；
[0048] 所述操控模塊具體用于：
[0049] 根據(jù)所述第一像素點(diǎn)集合的信息，以及所述映射關(guān)系，獲得所述第一像素點(diǎn)集合 對(duì)應(yīng)在所述終端的顯示屏幕上第二像素點(diǎn)集合的信息；根據(jù)所述第二像素點(diǎn)集合的信息和 所述操作動(dòng)作信息，操控所述終端。
[0050] 結(jié)合第二方面，在第二種可能的實(shí)現(xiàn)方式中，所述操作信息包括第一操作位置信 息，所述第一操作位置信息包括所述演示屏幕畫面上的被操作的第一像素點(diǎn)集合的信息；
[0051] 所述操控模塊具體用于：
[0052] 根據(jù)所述第一像素點(diǎn)集合的信息，以及所述映射關(guān)系，獲得所述第一像素點(diǎn)集合 對(duì)應(yīng)在所述終端的顯示屏幕上第二像素點(diǎn)集合的信息；在所述終端的顯示屏幕上，將軌跡 圖標(biāo)移動(dòng)至所述第二像素點(diǎn)集合的位置處。
[0053] 結(jié)合第二方面，或第二方面的第一或第二種可能的實(shí)現(xiàn)方式，在第三種可能的實(shí) 現(xiàn)方式中，所述演示屏幕畫面的參數(shù)信息包括以下信息中的至少一項(xiàng)：演示屏幕畫面的寬 度值、所述演示屏幕畫面的高度值以及所述演示屏幕畫面上的參考像素點(diǎn)在所述演示圖像 中的坐標(biāo)值，所述屏幕參數(shù)信息包括所述終端的屏幕分辨率；
[0054] 所述確定模塊具體用于：
[0055] 根據(jù)所述演示屏幕畫面的寬度值、所述演示屏幕畫面的高度值、所述演示屏幕畫 面上的參考像素點(diǎn)在所述演示圖像中的坐標(biāo)值、以及所述終端的屏幕分辨率，確定所述演 示屏幕畫面上的像素點(diǎn)與所述顯示屏幕上的像素點(diǎn)之間的映射關(guān)系。
[0056] 結(jié)合第二方面的第三種可能的實(shí)現(xiàn)方式，在第四種可能的實(shí)現(xiàn)方式中，所述確定 模塊具體用于根據(jù)以下公式確定所述演示屏幕畫面上的像素點(diǎn)與所述終端的顯示屏幕上 的像素點(diǎn)之間的映射關(guān)系：
[0059] 其中，（X，Y)為所述演示屏幕畫面上的像素點(diǎn)的坐標(biāo)值，（Gx，Gy)為與（X，Y)對(duì)應(yīng) 的所述顯示屏幕上的像素點(diǎn)的坐標(biāo)值，TrX所述顯示屏幕的寬度值，TrY為所述顯示屏幕的 高度值，CW為所述演示屏幕畫面的寬度值，CH為所述演示屏幕畫面的高度值，（PtX，PtY)為 所述參考像素點(diǎn)在所述演示圖像中的坐標(biāo)值，所述參考像素點(diǎn)對(duì)應(yīng)于所述顯示屏幕上的坐 標(biāo)原點(diǎn)。
[0060] 結(jié)合第二方面，或第二方面的第一或第二種可能的實(shí)現(xiàn)方式，在第五種可能的實(shí) 現(xiàn)方式中，所述終端的屏幕參數(shù)信息包括所述終端的放置狀態(tài)信息、所述終端的屏幕分辨 率，所述演示屏幕畫面的參數(shù)信息包括演示屏幕畫面的寬度值、所述演示屏幕畫面的高度 值、和所述演示屏幕畫面上的參考像素點(diǎn)在所述演示圖像中的坐標(biāo)值；
[0061] 所述確定模塊具體用于：
[0062] 根據(jù)所述演示屏幕畫面的寬度值、所述演示屏幕畫面的高度值、所述參考像素點(diǎn) 在所述演示圖像中的坐標(biāo)值、所述終端的屏幕分辨率、以及所述終端的放置狀態(tài)信息，確定 所述演示屏幕畫面上的像素點(diǎn)與所述顯示屏幕上的像素點(diǎn)之間的映射關(guān)系。
[0063] 結(jié)合第二方面的第五種可能的實(shí)現(xiàn)方式，在第六種可能的實(shí)現(xiàn)方式中，所述放置 狀態(tài)信息包括所述終端的放置狀態(tài)相對(duì)參考狀態(tài)的傾斜角，其中，所述傾斜角為在所述演 示圖像上，所述終端的放置狀態(tài)相對(duì)參考狀態(tài)沿逆時(shí)針方向旋轉(zhuǎn)的角度，在所述終端的放 置