專利名稱：一種終端及其顯示方法
技術領域：
本發(fā)明涉及電子設備，特別是一種終端及其顯示方法。
背景技術：
現(xiàn)實工作生活中，用戶經常會遇到需要通過無線/有線終端對別人進行遠程協(xié)助或者接受別人遠程協(xié)助的情況，同時還有直觀遠程溝通互動進行內容演示，問題討論的需要。比如遠程醫(yī)療診斷、軟件安裝以及技能培訓等?，F(xiàn)有的遠程協(xié)助方法中，可以通過特定的協(xié)議建立網絡連接，遠程控制被協(xié)助人的終端進行直接協(xié)助，然而上述方法依賴于操作系統(tǒng)的相關功能，其在操作系統(tǒng)本身出現(xiàn)問題，或者真實世界中需要進行協(xié)助時就無法應用。而另外一種遠程協(xié)助方法是通過語音或視頻來進行遠程協(xié)助，然而該方案由于語音或視頻方式都存在的不直觀的局限性，不管視頻還是音頻，用于都需要在實際操作面上對照以找到視頻或音頻中指示的位置，而如果采用視頻，視頻畫面一般在顯示屏上顯示，所以用戶需要在顯示屏和真實操作面之間進行視線的轉換，因此存在效率低，不直接的問題。

發(fā)明內容
本發(fā)明的目的是提供一種終端及其顯示方法，為用戶提供直觀的協(xié)助畫面，提高遠程協(xié)助的效率。為了實現(xiàn)上述目的，本發(fā)明實施例提供了一種第一終端，包括主板；與所述主板連接的顯示屏；與所述主板連接的圖像采集裝置，用于采集一原始圖像；與所述主板連接的第一通信裝置，用于利用一通信協(xié)議將所述原始圖像發(fā)送到第二終端，并通過所述通信協(xié)議接收所述第二終端返回的第一數(shù)據；所述第一數(shù)據用于描述對所述第二終端接收到的所述原始圖像執(zhí)行的標記操作；與所述主板連接的圖像生成裝置，用于根據所述第一數(shù)據生成至少包括一標記的
第一圖像；與所述主板連接的投影裝置，用于投影所述第一圖像，以顯示所述標記操作。上述的第一終端，其中，所述圖像采集裝置的圖像采集區(qū)域的至少一部分被所述投影裝置的投影區(qū)域所
覆蓋；所述圖像采集裝置用于從第一區(qū)域采集所述原始圖像；所述第一數(shù)據包括用于描述所述標記的形狀信息的第二數(shù)據和用于描述所述標記的位置信息的第三數(shù)據；所述圖像生成裝置具體用于根據所述第二數(shù)據和第三數(shù)據生成所述第一圖像。上述的第一終端，其中，所述第一數(shù)據具體為根據對第二終端的展現(xiàn)所述原始圖像的觸摸屏執(zhí)行的指點操作生成的數(shù)據。上述的第一終端，其中，所述第一數(shù)據具體為根據第二圖像中記錄的所述標記操作生成的數(shù)據，所述第二圖像為所述第二終端將所述原始圖像投影后，拍攝到的記錄有對投影后的原始圖像執(zhí)行的所述標記操作的圖像。上述的第一終端，其中，所述圖像生成裝置具體包括第一圖像生成模塊，用于根據所述第一數(shù)據生成一待校準圖像；校準模塊，用于根據所述第一終端在采集原始圖像時至投影第一圖像時的運動信息生成一校準數(shù)據，并利用所述校準數(shù)據對所述待校準圖像進行校準，得到所述第一圖像。上述的第一終端，其中，所述第一數(shù)據為第二圖像的圖像數(shù)據，所述第二圖像為所述第二終端將所述原始圖像投影后，拍攝到的記錄有對投影后的原始圖像執(zhí)行的標記操作的圖像；所述圖像生成裝置具體用于解析所述第二圖像的圖像數(shù)據，得到所述第一圖像。為了實現(xiàn)上述目的，本發(fā)明實施例還提供了一種第二終端，包括主板；與所述主板連接的顯示屏；與所述主板連接的第二通信裝置，用于利用一通信協(xié)議從第一終端接收第一終端采集的原始圖像；與所述主板連接的數(shù)據生成裝置，用于生成一第一數(shù)據，所述第一數(shù)據用于描述對所述第二通信裝置接收到的所述原始圖像執(zhí)行的標記操作；與所述主板連接的第三通信裝置，用于通過所述通信協(xié)議向所述第一終端返回所述第一數(shù)據，使所述第一終端能根據所述第一數(shù)據生成至少包括一標記的第一圖像后，投影所述第一圖像，以顯示所述標記操作。上述的第二終端，其中，所述第一數(shù)據包括用于描述所述標記的形狀信息的第二數(shù)據和用于描述所述標記的位置信息的第三數(shù)據。上述的第二終端，其中，還包括與所述主板連接的觸摸屏；所述數(shù)據生成裝置具體用于根據對展現(xiàn)所述原始圖像的所述觸摸屏執(zhí)行的指點操作生成所述第一數(shù)據。上述的第二終端，其中，還包括與所述主板連接的投影裝置，用于投影所述原始圖像；與所述主板連接的拍攝裝置，用于拍攝記錄有對投影后的原始圖像執(zhí)行的所述標記操作的第二圖像；所述數(shù)據生成裝置具體用于根據所述第二圖像中記錄的所述標記操作生成所述
第一數(shù)據。上述的第二終端，其中，還包括與所述主板連接的投影裝置，用于投影所述原始圖像；與所述主板連接的拍攝裝置，用于拍攝記錄有對投影后的原始圖像執(zhí)行的所述標記操作的第二圖像；所述數(shù)據生成裝置具體用于將所述第二圖像的圖像數(shù)據作為所述第一數(shù)據。
為了實現(xiàn)上述目的，本發(fā)明實施例還提供了一種顯示方法，包括第一終端采集一原始圖像；第一終端利用一通信協(xié)議將所述原始圖像發(fā)送到第二終端；第一終端通過所述通信協(xié)議接收所述第二終端返回的第一數(shù)據；所述第一數(shù)據用于描述對所述第二終端接收到的所述原始圖像執(zhí)行的標記操作；第一終端根據所述第一數(shù)據生成至少包括一標記的第一圖像；第一終端投影所述第一圖像，以顯示所述標記操作。本發(fā)明實施例具有以下的有益效果本發(fā)明實施例中，第一終端采集一原始圖像后，將所述原始圖像發(fā)送到第二終端， 并在通過所述通信協(xié)議接收所述第二終端返回的第一數(shù)據后，根據所述第一數(shù)據生成至少包括一標記的第一圖像，并投影所述第一圖像，以顯示所述標記操作，通過以上方式，使得第一終端的用戶可以直觀的了解對端用戶的標記操作，快速確定對方所指示的目標所在的位置，通過為用戶提供直觀的協(xié)助畫面，提高了遠程協(xié)助的效率。


圖1為本發(fā)明實施例的第一終端和第二終端的結構示意圖；圖2為本發(fā)明實施例的一種情況下下如何得到第一數(shù)據的示意圖；圖3為本發(fā)明實施例的另一種情況下如何得到第一數(shù)據的示意圖；圖4為本發(fā)明實施例的方法的流程示意圖；圖fe到圖5d為本發(fā)明實施例的一種具體實現(xiàn)過程舉例的示意圖。
具體實施例方式本發(fā)明實施例的終端及其顯示方法中，由第一終端將原始圖像發(fā)送到第二終端， 第二終端根據用戶對該原始圖像進行的標記操作，向第一終端返回用于描述對所述第二終端接收到的所述原始圖像執(zhí)行的標記操作的第一數(shù)據，并根據該第一數(shù)據形成遠程協(xié)助圖像后投影，使用戶能夠直觀的看到對端用戶所指示的具體位置，提高遠程協(xié)助的效率。如圖1所示，本發(fā)明實施例的第一終端，包括主板A ；與所述主板A連接的顯示屏；與所述主板A連接的圖像采集裝置，用于采集一原始圖像；與所述主板A連接的第一通信裝置，用于利用一通信協(xié)議將所述原始圖像發(fā)送到第二終端，并通過所述通信協(xié)議接收所述第二終端返回的第一數(shù)據；所述第一數(shù)據用于描述對所述第二終端接收到的所述原始圖像執(zhí)行的標記操作；與所述主板A連接的圖像生成裝置，用于根據所述第一數(shù)據生成至少包括一標記的第一圖像；與所述主板A連接的投影裝置，用于投影所述第一圖像，以顯示所述標記操作。而本發(fā)明實施例的第二終端，如圖1所示，包括主板B ；與所述主板B連接的顯示屏；
與所述主板B連接的第二通信裝置，用于利用一通信協(xié)議從第一終端(第一通信裝置)接收第一終端采集的原始圖像；與所述主板B連接的數(shù)據生成裝置，用于生成一第一數(shù)據，所述第一數(shù)據用于描述對所述第二通信裝置接收到的所述原始圖像執(zhí)行的標記操作；與所述主板B連接的第三通信裝置，用于通過所述通信協(xié)議向所述第一終端返回所述第一數(shù)據，使所述第一終端能根據所述第一數(shù)據生成至少包括一標記的第一圖像后， 投影所述第一圖像，以顯示所述標記操作。當然，應當了解的是，雖然在圖1中，第二通信裝置和第三通信裝置分別用于數(shù)據接收和發(fā)送，但第二通信裝置和第三通信裝置僅僅是功能上的區(qū)分，其完全可以由一個模塊來實現(xiàn)。同時，第一終端和第二終端在圖中的通信裝置直接連接，其僅僅表示二者之間可以進行數(shù)據傳輸，而不表示二者之間一定有直接的物理連接，第一終端和第二終端通過一定的通信協(xié)議進行數(shù)據傳輸，該通信協(xié)議可以采用任何現(xiàn)有的可以用于數(shù)據傳輸?shù)耐ㄐ艆f(xié)議，如應用于互聯(lián)網傳輸?shù)耐ㄐ艆f(xié)議、應用于移動通信網絡傳輸?shù)耐ㄐ艆f(xié)議、應用于無線局域網傳輸?shù)耐ㄐ艆f(xié)議，甚至可以是自定義的協(xié)議，只要其能實現(xiàn)數(shù)據傳輸即可。在本發(fā)明的具體實施例中，第二終端需要生成用于描述對接收到的原始圖像執(zhí)行的標記操作的第一數(shù)據，并由第一終端根據該第一數(shù)據還原該標記操作，在此，對第一數(shù)據以及標記操作還原的具體實現(xiàn)方式進行詳細說明。< 方式一 >在實現(xiàn)方式一中，該第一圖像中僅包括一標記。該第一數(shù)據中包括兩部分信息標記的形狀以及標記在圖像中的位置，因此，在實現(xiàn)方式一中，該第一數(shù)據包括用于描述所述標記的形狀信息的第二數(shù)據和用于描述所述標記的位置信息的第三數(shù)據，舉例說明如下假定該標記為一個圓圈，則該第二數(shù)據記錄標記形狀為圓，而第二部分則可以記錄圓的圓心坐標和半徑。假定該標記為一個對勾，則該第二數(shù)據記錄標記形狀為對勾，而第二部分則可以記錄對勾的起點、轉折點和終點的坐標。假定該標記為一條線段，則該第二數(shù)據記錄標記形狀為線段，而第二部分則可以記錄線段的起點和終點的坐標。假定該標記為一個四邊形，則該第二數(shù)據記錄標記形狀為方框，而第二部分則可以記錄4個頂點的坐標。假定該標記為一三角形，則該第二數(shù)據記錄標記形狀為三角形，而第二部分則可以記錄該三角形3個頂點的坐標。以上僅僅是舉例說明，該標記也可以是其它的形狀，在此不一一列舉。第一終端可以根據第二數(shù)據和第三數(shù)據得到僅包括標記的第一圖像，說明如下。假定該標記為一個圓圈，則該第二數(shù)據記錄標記形狀為圓，而第二部分則可以記錄圓的圓心坐標和半徑。此時，第一終端首先獲取形狀信息，發(fā)現(xiàn)是圓，則知道第三數(shù)據中記錄的是圓心坐標和半徑，在圓心坐標和半徑已知的情況下，則可以唯一確定該圓，并得到包括該圓的第一圖像。對于其它形狀的標記，同樣可以采用上述方式來確定第一圖像，在此不再詳細說明。當然，具體使用何種數(shù)據結構來保存該第一數(shù)據，第一終端如何解析該第一數(shù)據， 只要第一終端和第二終端預先定義好即可，其具體實現(xiàn)方式多種多樣，在此不詳細舉例說明。以上描述了第一圖像中僅包括一標記的情況下，第一數(shù)據應該包括哪些部分的內容，下面具體描述如何得到以上的第二數(shù)據和第三數(shù)據。在第二終端是觸摸屏的情況下，所述第一數(shù)據可以根據對第二終端的展現(xiàn)所述原始圖像的觸摸屏執(zhí)行的指點操作來生成，說明如下。第二終端包括與所述主板連接的觸摸屏；第二終端利用觸摸屏顯示收到的原始圖像，用戶在觸摸屏上對原始圖像進行標記操作，此時，觸摸屏記錄了指點物在標記操作過程中的軌跡，由數(shù)據生成裝置根據該原始軌跡選擇與之最接近的圖形(如圓、對勾、三角形、方框等)，并確定該選擇得到的圖形的在圖像中的位置。具體如何得到描述所述標記的位置信息的第三數(shù)據的一種實現(xiàn)方式說明如下。假定如圖2所示，指點物的原始軌跡為近似的圓形(如實線所示)，則可以取左端點和右端點，并將二者的連線作為直徑，得到虛線所示的圓，并可以得到圓的圓心坐標和半徑。假定如圖3所示，指點物的原始軌跡為近似的三角形(如實線所示)，則可以取上端點左端點和右端點，得到虛線所示的三角形，并可以得到三角形的3個頂點。對于其它形狀在此不再一一舉例說明。在第二終端不包括觸摸屏，但包括投影裝置和圖像采集裝置的情況下，可以通過如下方式得到該第一數(shù)據。該第二終端還包括與所述主板連接的投影裝置，用于投影接收到的所述原始圖像；與所述主板連接的拍攝裝置，用于拍攝記錄有對投影后的原始圖像執(zhí)行的所述標記操作的第二圖像；如用戶利用激光筆在投影的原始圖像上進行操作，又或者用戶利用手指在投影的原始圖像上進行指畫操作。該第二圖像被記錄后，利用特征提取技術，即可得到標記操作的軌跡，進而根據該原始軌跡選擇與之最接近的圖形(如圓、對勾、三角形、方框等)，并確定該選擇得到的圖形的在圖像中的位置。這種方式與之前描述方式的不同之處在于，需要得到激光筆、用戶手指在投影圖像上的軌跡，而如何利用拍攝到的一系列連續(xù)圖像得到物體軌跡已經有成熟的算法，在此不作詳細描述。而原始軌跡得到后，具體如何根據該原始軌跡選擇與之最接近的圖形(如圓、對勾、三角形、方框等)，并確定該選擇得到的圖形在圖像中的位置與之前的觸摸屏方式的差別僅在于，原始軌跡的來源不同，因此在此不再贅述。上面提到的各種是實現(xiàn)方式中，第二數(shù)據和第三數(shù)據屬于兩組數(shù)據，而且不管從形狀還是位置上來看，得到的第一數(shù)據中記錄的標記與原始標記有所不同，同時，在標記形狀不規(guī)范時，識別率可能有所降低，因此，本發(fā)明實施例中還提供另外一種實現(xiàn)方式，使用同一組數(shù)據來描述該標記操作。這種方式下，該第一數(shù)據為一個坐標序列，該坐標序列中的每一個坐標對應于原始標記上的一個采樣點，第一終端利用所有坐標序列即可形成該標記，同時其位置也唯一確定，至于該坐標序列中點的個數(shù)可以根據需要來確定，如果需要顯示精細一些，則點可以多一些，否則可以少一些。第二終端包括與所述主板連接的觸摸屏時，該坐標序列即觸摸屏采集到的指點物在標記操作過程中的在觸摸屏上的操作點。而該第二終端包括投影裝置和拍攝裝置，該坐標序列即激光點或手指(當然還可能是其它操作物)在第二圖像中的坐標。下面對實現(xiàn)方式一(該第一圖像中僅包括一標記)的應用場景舉例說明如下。假定用戶A當前在修理一機器，需要遠程協(xié)助，但對方無法通過語音詳細解釋當前需要處理的部件具體在哪個位置，此時，用戶A利用第一終端拍攝機器的原始圖像，并傳回給第二終端，第二終端展現(xiàn)該原始圖像(如在觸摸屏上顯示，又或者投影)，用戶B對該原始圖像進行標記操作，如在原始圖像的X區(qū)域畫一個圈，則第二終端根據用戶的標記操作生成第一數(shù)據并返回給第一終端，該第一數(shù)據描述了一個圓以及圓的位置；第一終端接收到第一數(shù)據后解析，得到包括該圓的圖像后投影，該圓投影后，會在機器表面形成一個圈，用戶就知道需要處理的部件在這個圓圈內，極大地提高了效率。假定用戶A當前在對患者進行診治，需要遠程協(xié)助，但對方無法通過語音詳細解釋當前需要處理的部位具體在腹部的哪個位置，此時，用戶A利用第一終端拍攝患者腹部的圖像，并傳回給第二終端，第二終端展現(xiàn)該圖像(如在觸摸屏上顯示，又或者投影)，用戶 B對該腹部圖像進行標記操作，如在圖像的X區(qū)域畫一個圈，則第二終端根據用戶的標記操作生成第一數(shù)據并返回給第一終端，該第一數(shù)據描述了一個圓以及圓的位置；第一終端接收到第一數(shù)據后解析，得到包括該圈的圖像后投影，該圈投影后，會在患者的腹部形成一個圈，用戶就知道需要處理的部位在這個圓圈內，極大地提高了效率。假定用戶A當前在學習烹飪，需要遠程協(xié)助，但對方無法通過語音詳細解釋當前需要拿取哪一樣食材，此時，用戶A利用第一終端拍攝包括所有食材的圖像，并傳回給第二終端，第二終端展現(xiàn)該圖像(如在觸摸屏上顯示，又或者投影)，用戶B對該圖像進行標記操作，如在圖像的X區(qū)域畫一個箭頭，則第二終端根據用戶的標記操作生成第一數(shù)據并返回給第一終端，該第一數(shù)據描述了一個箭頭以及箭頭的位置；第一終端接收到第一數(shù)據后解析，得到包括該箭頭的圖像后投影，該箭頭投影后， 會指向其中一個食材，用戶就知道需要取用這種食材，極大地提高了效率。對于上述的圓圈、箭頭等如何形成、如何解析已經在前面詳細說明。對于上述的過程，要求使用第一終端的用戶保持第一終端的位置不變，以保證將標記投影到正確的位置，對于如何保證標記投影合適的位置具體說明如下。由于所述圖像采集裝置的圖像采集區(qū)域的至少一部分被所述投影裝置的投影區(qū)域所覆蓋，下面以完全覆蓋且第二終端在觸摸屏上顯示為例進行說明。假定第一終端采集一原始圖像，如圖^!所示，假定分辨率為AXB，并將分辨率為AXB原始圖像發(fā)送到第二終端；圖fe中，外圍的點劃線形成的框為投影區(qū)域。第二終端在觸摸屏上顯示該原始圖像，分辨率為AXB ；用戶利用指點物在原始圖像上進行指點操作，第二終端記錄指點物在標記操作過程中的軌跡(如圖恥中的箭頭)，由數(shù)據生成裝置根據該原始軌跡選擇與之最接近的圖形 (如圓、對勾、三角形、方框等)，并確定該選擇得到的圖形的在分辨率為AXB圖像中的位置。然后第二終端返回上述的圖形及圖形的在分辨率為AXB圖像中的位置。第一終端根據上述的信息重構一個圖像A，分辨率也是AXB，如圖5c所示。然后進一步生成另外一個圖像B (即第一圖像)如圖5d所示，該圖像B中，圖像B 投影后，圖像B的外圍(在此假設為矩形，當然還可能是其他形狀，這與實際的投影設備相關)正好與投影區(qū)域重合，而內部的包括箭頭的矩形框被投影后，位于圖像采集區(qū)域。為了保證這一點，應該保證以下關系投影區(qū)域與圖像采集區(qū)域按相對位置關系按比例縮放后，圖像A與縮放后的投影區(qū)域重合，而圖像B與縮放后的圖像采集區(qū)域重合。依據上述的過程，該箭頭能夠投影到實際工作面的中間的圓圈上，給用戶非常直觀的指示。當然，第一終端拍攝原始圖像時的位置與投影該圖像時的位置不同時，該圓圈投影的位置會發(fā)生一定的錯位，因此，要求用戶A保持第一終端的位置不變，直至投影完成， 但實際情況下，這很難保證，對于這種情況，本發(fā)明實施例中，對于這種情況提供如下的解決方案，所述圖像生成裝置具體包括第一圖像生成模塊，用于根據所述第一數(shù)據生成一待校準圖像；校準模塊，用于根據終端運動信息生成一校準數(shù)據，并利用所述校準數(shù)據對所述待校準圖像進行校準，得到所述第一圖像。舉例說明如下，假定用戶拍攝原始圖像時，第一終端處于第一位置，而投影時，第一終端處于第二位置，在投影前，第一終端拍攝一個圖像，根據原始圖像與當前拍攝的圖像差異可以計算得到終端的位移，并根據該位移對待校準圖像進行校準，得到所述第一圖像。假定移動終端向左移動了，則應該將所述待校準圖像中的標記向右移動，得到所述第一圖像，由于標記向右移動，可以彌補終端向左移動帶來的位置偏差，使標記投影到正確的位置。當然，對于實施方式一，所述圖像采集裝置的圖像采集區(qū)域的至少一部分被所述投影裝置的投影區(qū)域所覆蓋，最理想的情況應該是圖像采集裝置的圖像采集區(qū)域完全被所述投影裝置的投影區(qū)域所覆蓋?！磳嵤┓绞蕉翟谏鲜龅膶嵤┓绞揭恢校际且酝队皹擞洖槔M行的詳細說明。而在實現(xiàn)方式二中，所述第一數(shù)據為第二圖像的圖像數(shù)據，所述第二圖像為所述第二終端將所述原始圖像投影后，拍攝到的記錄有對投影后的原始圖像執(zhí)行的標記操作的圖像；所述圖像生成裝置具體用于解析所述第二圖像的圖像數(shù)據，得到所述第一圖像。說明如下
該第二終端還包括與所述主板連接的投影裝置，用于投影接收到的所述原始圖像；與所述主板連接的拍攝裝置，用于拍攝記錄有對投影后的原始圖像執(zhí)行的所述標記操作的第二圖像；如用戶利用激光筆在投影的圖像上進行操作，又或者用戶利用手指在投影的圖像上進行指畫操作。該第二圖像被記錄后，即被發(fā)送到第一終端，第一終端解析第二圖像的圖像數(shù)據， 并將解析得到的圖象投影，即可還原用戶的標記操作，即投影后圖像不但包括原始圖像，還包括在原始圖像上的某一位置畫的圈，或者標記的箭頭等等。在上面的所有說明中，都是以圖像為例進行的說明，但應當理解的是，該圖像可以是靜態(tài)的圖片，也可以是動態(tài)的視頻。對于動態(tài)的視頻而言，只不過是對每一幀圖像都進行上述處理，而在第一終端這一端就會看到標記的動態(tài)變化過程，舉例說明如下。如用戶將拍攝鋼琴鍵盤的圖像，傳送給遠端，而遠端協(xié)助者在圖像上進行一系列操作如手指按照預定順序放置到鍵盤圖像(如第一時間手指指點第一鍵位，在第二時間手指指點第一鍵位，當然指示第一鍵位可以依據觸摸屏上顯示的圖像進行指示，也可以依據投影后的圖像進行指示)上，而遠端協(xié)助端分別記錄這些操作后按照順序利用第一數(shù)據返回第一終端，第一終端可以將該一系列的手指動作投影到鍵盤，也可以是投影記錄有手指動作和原始鍵盤圖像的圖像，此時，第一終端投影的圖像即為一個動態(tài)的過程，用戶即可逐步跟隨學習。本發(fā)明實施例的顯示方法，如圖4所示，包括步驟41，第一終端采集一原始圖像；步驟42，第一終端利用一通信協(xié)議將所述原始圖像發(fā)送到第二終端；步驟43，第一終端通過所述通信協(xié)議接收所述第二終端返回的第一數(shù)據；所述第一數(shù)據用于描述對所述第二終端接收到的所述原始圖像執(zhí)行的標記操作；步驟44，第一終端根據所述第一數(shù)據生成至少包括一標記的第一圖像；步驟45，第一終端投影所述第一圖像，以顯示所述標記操作。以上所述僅是本發(fā)明的優(yōu)選實施方式，應當指出，對于本技術領域的普通技術人員來說，在不脫離本發(fā)明原理的前提下，還可以作出若干改進和潤飾，這些改進和潤飾也應視為本發(fā)明的保護范圍。
權利要求
1.一種第一終端，其特征在于，包括主板；與所述主板連接的顯示屏；與所述主板連接的圖像采集裝置，用于采集一原始圖像；與所述主板連接的第一通信裝置，用于利用一通信協(xié)議將所述原始圖像發(fā)送到第二終端，并通過所述通信協(xié)議接收所述第二終端返回的第一數(shù)據；所述第一數(shù)據用于描述對所述第二終端接收到的所述原始圖像執(zhí)行的標記操作；與所述主板連接的圖像生成裝置，用于根據所述第一數(shù)據生成至少包括一標記的第一圖像；與所述主板連接的投影裝置，用于投影所述第一圖像，以顯示所述標記操作。
2.根據權利要求1所述的第一終端，其特征在于所述圖像采集裝置的圖像采集區(qū)域的至少一部分被所述投影裝置的投影區(qū)域所覆蓋；所述圖像采集裝置用于從第一區(qū)域采集所述原始圖像；所述第一數(shù)據包括用于描述所述標記的形狀信息的第二數(shù)據和用于描述所述標記的位置信息的第三數(shù)據；所述圖像生成裝置具體用于根據所述第二數(shù)據和第三數(shù)據生成所述第一圖像。
3.根據權利要求2所述的第一終端，其特征在于，所述第一數(shù)據具體為根據對第二終端的展現(xiàn)所述原始圖像的觸摸屏執(zhí)行的指點操作生成的數(shù)據。
4.根據權利要求2所述的第一終端，其特征在于，所述第一數(shù)據具體為根據第二圖像中記錄的所述標記操作生成的數(shù)據，所述第二圖像為所述第二終端將所述原始圖像投影后，拍攝到的記錄有對投影后的原始圖像執(zhí)行的所述標記操作的圖像。
5.根據權利要求2、3或4所述的第一終端，其特征在于，所述圖像生成裝置具體包括第一圖像生成模塊，用于根據所述第一數(shù)據生成一待校準圖像；校準模塊，用于根據所述第一終端在采集原始圖像時至投影第一圖像時的運動信息生成一校準數(shù)據，并利用所述校準數(shù)據對所述待校準圖像進行校準，得到所述第一圖像。
6.根據權利要求1所述的第一終端，其特征在于，所述第一數(shù)據為第二圖像的圖像數(shù)據，所述第二圖像為所述第二終端將所述原始圖像投影后，拍攝到的記錄有對投影后的原始圖像執(zhí)行的標記操作的圖像；所述圖像生成裝置具體用于解析所述第二圖像的圖像數(shù)據，得到所述第一圖像。
7.—種第二終端，其特征在于，包括主板；與所述主板連接的顯示屏；與所述主板連接的第二通信裝置，用于利用一通信協(xié)議從第一終端接收第一終端采集的原始圖像；與所述主板連接的數(shù)據生成裝置，用于生成一第一數(shù)據，所述第一數(shù)據用于描述對所述第二通信裝置接收到的所述原始圖像執(zhí)行的標記操作；與所述主板連接的第三通信裝置，用于通過所述通信協(xié)議向所述第一終端返回所述第一數(shù)據，使所述第一終端能根據所述第一數(shù)據生成至少包括一標記的第一圖像后，投影所述第一圖像，以顯示所述標記操作。
8.根據權利要求7所述的第二終端，其特征在于，所述第一數(shù)據包括用于描述所述標記的形狀信息的第二數(shù)據和用于描述所述標記的位置信息的第三數(shù)據。
9.根據權利要求8所述的第二終端，其特征在于，還包括與所述主板連接的觸摸屏；所述數(shù)據生成裝置具體用于根據對展現(xiàn)所述原始圖像的所述觸摸屏執(zhí)行的指點操作生成所述第一數(shù)據。
10.根據權利要求8所述的第二終端，其特征在于，還包括與所述主板連接的投影裝置，用于投影所述原始圖像；與所述主板連接的拍攝裝置，用于拍攝記錄有對投影后的原始圖像執(zhí)行的所述標記操作的第二圖像；所述數(shù)據生成裝置具體用于根據所述第二圖像中記錄的所述標記操作生成所述第一數(shù)據。
11.根據權利要求8所述的第二終端，其特征在于，還包括與所述主板連接的投影裝置，用于投影所述原始圖像；與所述主板連接的拍攝裝置，用于拍攝記錄有對投影后的原始圖像執(zhí)行的所述標記操作的第二圖像；所述數(shù)據生成裝置具體用于將所述第二圖像的圖像數(shù)據作為所述第一數(shù)據。
12.—種顯示方法，其特征在于，包括第一終端采集一原始圖像；第一終端利用一通信協(xié)議將所述原始圖像發(fā)送到第二終端；第一終端通過所述通信協(xié)議接收所述第二終端返回的第一數(shù)據；所述第一數(shù)據用于描述對所述第二終端接收到的所述原始圖像執(zhí)行的標記操作；第一終端根據所述第一數(shù)據生成至少包括一標記的第一圖像；第一終端投影所述第一圖像，以顯示所述標記操作。
全文摘要
本發(fā)明提供一種終端及其顯示方法，該終端包括主板；與所述主板連接的顯示屏；與所述主板連接的圖像采集裝置，用于采集一原始圖像；與所述主板連接的第一通信裝置，用于利用一通信協(xié)議將所述原始圖像發(fā)送到第二終端，并通過所述通信協(xié)議接收所述第二終端返回的第一數(shù)據；所述第一數(shù)據用于描述對所述第二終端接收到的所述原始圖像執(zhí)行的標記操作；與所述主板連接的圖像生成裝置，用于根據所述第一數(shù)據生成至少包括一標記的第一圖像；與所述主板連接的投影裝置，用于投影所述第一圖像，以顯示所述標記操作。本發(fā)明提高了遠程協(xié)助的效率。
文檔編號H04N7/14GK102238361SQ201010159119
公開日2011年11月9日 申請日期2010年4月22日 優(yōu)先權日2010年4月22日
發(fā)明者陸游龍 申請人:聯(lián)想(北京)有限公司