移動互聯(lián)網(wǎng)網(wǎng)絡(luò)環(huán)境下的新型通話輔助系統(tǒng)研究方法
【專利摘要】本發(fā)明涉及一種移動互聯(lián)網(wǎng)網(wǎng)絡(luò)環(huán)境下的新型通話輔助系統(tǒng)研究方法，主要是在兩個移動終端建立通話過程中，配合網(wǎng)絡(luò)傳輸步驟，綜合利用了拍照、繪圖、情境模擬步驟，分別實(shí)現(xiàn)圖像輔助功能、實(shí)時動態(tài)交互圖形繪制、情境模擬，由此以填補(bǔ)用戶在語音視頻通話過程中無法完全表達(dá)雙方語意的空白，有助于彼此的溝通與互動。
【專利說明】
移動互聯(lián)網(wǎng)網(wǎng)絡(luò)環(huán)境下的新型通話輔助系統(tǒng)研究方法
技術(shù)領(lǐng)域
[0001]本發(fā)明涉及一種移動通話技術(shù)，尤指一種應(yīng)用于移動互聯(lián)網(wǎng)網(wǎng)絡(luò)環(huán)境下的新型通話輔助系統(tǒng)研究方法。
【背景技術(shù)】
[0002]目前，手機(jī)的應(yīng)用已經(jīng)深入千家萬戶，成為多數(shù)人與人之間聯(lián)絡(luò)的必備工具，利用手機(jī)，人們不僅可以進(jìn)行語音通話，而且隨著通信技術(shù)的不斷發(fā)展，特別是4G時代的到來，人們亦可通過智能終端手機(jī)進(jìn)行語音視頻通話，如此，使得人與人之間的交流聯(lián)系愈來愈方便。
[0003]然而，當(dāng)用戶遇到相關(guān)的問題難以用聲音或簡單的視頻完整描述時，采用語音視頻通訊即有它的弊端存在，如此，則有必要提出一種有助于溝通與互動的圖形化輔助通話方法，以解決現(xiàn)有技術(shù)所帶來的種種問題。

【發(fā)明內(nèi)容】

[0004]鑒于上述現(xiàn)有技術(shù)的缺點(diǎn)，本發(fā)明目的在于提供一種移動互聯(lián)網(wǎng)網(wǎng)絡(luò)環(huán)境下的新型通話輔助方法，以彌補(bǔ)用戶在語音視頻通話過程中無法完全表達(dá)雙方語意的空白，有助于彼此的溝通與互動。
[0005]為達(dá)到上述目的，本發(fā)明給出的技術(shù)方案表征為:
[0006]—種移動互聯(lián)網(wǎng)網(wǎng)絡(luò)環(huán)境下的新型通話輔助方法，應(yīng)用于支持互聯(lián)網(wǎng)網(wǎng)絡(luò)的移動終端中，其特征在于，包括如下步驟:
[0007]步驟I，拍照:攝取圖像數(shù)據(jù)，并在攝取之后將獲取到的圖像數(shù)據(jù)予以輸出，且產(chǎn)生第一觸發(fā)信號；
[0008]步驟2，繪圖:接收步驟I中輸出的圖像數(shù)據(jù)，以基于所述圖像數(shù)據(jù)進(jìn)行繪制或調(diào)整處理，或用以直接提供圖形的繪制，而形成圖片數(shù)據(jù)，并產(chǎn)生第二觸發(fā)信號，所述繪制采用雙緩沖繪圖技術(shù)，以實(shí)現(xiàn)動態(tài)交互圖形繪制；
[0009]步驟3，情境模擬:采用多個情境元素庫，以提供進(jìn)行所需情境的模擬處理，而形成特定情境模擬數(shù)據(jù)，并產(chǎn)生第二觸發(fā)信號，其中，所述情境元素庫中包含符合該情境的各種不同的物理元素，當(dāng)選擇其中一個情境元素庫時，則提供自所選擇的情境元素庫中提取所需要的元素，組合添加到移動終端的屏幕上，以畫出所需的動態(tài)模型，而得到特定的情境模擬數(shù)據(jù)；以及
[0010]步驟4，網(wǎng)絡(luò)傳輸:通過第一傳輸協(xié)議與第二傳輸協(xié)議，用以在2個移動終端建立通話過程中；接收到第一觸發(fā)信號時，依據(jù)第一傳輸協(xié)議并通過所述移動互聯(lián)網(wǎng)網(wǎng)絡(luò)將所述圖像數(shù)據(jù)同步發(fā)送到對方移動終端，而在接收到第二觸發(fā)信號時，依據(jù)第二傳輸協(xié)議并通過所述移動互聯(lián)網(wǎng)網(wǎng)絡(luò)將相應(yīng)的圖片數(shù)據(jù)或特定情境模擬數(shù)據(jù)同步發(fā)送到對方移動終端。
[0011]所述第一傳輸協(xié)議與第二傳輸協(xié)議均采用超時重傳和捎帶確認(rèn)機(jī)制。
[0012]其中，該第一傳輸協(xié)議與第二傳輸協(xié)議均采用超時重傳和捎帶確認(rèn)機(jī)制，而該第一傳輸協(xié)議為TCP協(xié)議，該第二傳輸協(xié)議為UDP協(xié)議。
[0013]此外，該2個移動終端建立通話的工作模式可為全雙工工作模式，或者半雙工工作模式。
[0014]以下結(jié)合上述技術(shù)方案，說明本發(fā)明的有益技術(shù)效果。
[0015]相比于現(xiàn)有技術(shù)，本發(fā)明主要是在2個移動終端建立通話過程中，在網(wǎng)絡(luò)傳輸步驟中，利用圖像輔助、實(shí)時動態(tài)交互圖形繪制、情境模擬，由此以填補(bǔ)用戶在語音視頻通話過程中無法完全表達(dá)雙方語意的空白，有助于彼此的溝通與互動。
【附圖說明】
[0016]圖1為本發(fā)明研究方法示意圖。
【具體實(shí)施方式】
[0017]以下通過特定的具體實(shí)例說明本發(fā)明的實(shí)施方式，所屬領(lǐng)域的普通技術(shù)人員可由本說明書所揭示的內(nèi)容輕易地了解本發(fā)明的其他優(yōu)點(diǎn)與功效。本發(fā)明亦可通過其他不同的具體實(shí)例加以施行或應(yīng)用，本說明書中的各項(xiàng)細(xì)節(jié)亦可基于不同觀點(diǎn)與應(yīng)用，在不背離本發(fā)明的精神下進(jìn)行各種修飾與變更。
[0018]請參閱圖1，其為顯示本發(fā)明的方法示意圖。如圖所示，本發(fā)明方法應(yīng)用于支持互聯(lián)網(wǎng)網(wǎng)絡(luò)的移動終端中，其中，該移動終端可例如為智能手機(jī)或個人數(shù)字助理(PDA)。
[0019]本發(fā)明方法中涉及的繪圖步驟，一方面可用以接收拍照后所輸出的圖像數(shù)據(jù)，以基于該圖像數(shù)據(jù)進(jìn)行繪制或調(diào)整處理，而形成圖片數(shù)據(jù)，例如，當(dāng)移動終端使用者欲描述自己當(dāng)前所處的地理位置，可以使用該拍照步驟攝取當(dāng)前所處地理位置附近的圖像數(shù)據(jù)，然后，通過繪圖步驟在該圖像數(shù)據(jù)基礎(chǔ)上重點(diǎn)圈出自己所處的位置，以形成圖片數(shù)據(jù)；
[0020]或者，另一方面，繪圖步驟中也可用以在沒有其他圖像數(shù)據(jù)來源的前提下，直接提供圖形的繪制，以形成圖片數(shù)據(jù);且在形成圖片數(shù)據(jù)后即產(chǎn)生第二觸發(fā)信號。于本實(shí)施例中，圖片的繪制是指繪制自由線條，如直線、任意矩形、任意圓等，以及橡皮擦等操作；圖片的調(diào)整是指對圖片的放大縮小、拖動等操作，或者是實(shí)現(xiàn)兩塊畫布切換過程中的動畫特效。優(yōu)選地，該繪圖模塊12是采用雙緩沖繪圖技術(shù)，以實(shí)現(xiàn)動態(tài)交互圖形繪制。
[0021]該情境模擬模塊14具有多個情境元素庫，以提供進(jìn)行所需情境的模擬處理，而形成特定情境模擬數(shù)據(jù)，并產(chǎn)生第二觸發(fā)信號。在本實(shí)施例中，該情境模擬模塊14是利用例如Box2D的物理引擎與例如Qt的Graphics View的圖形視圖框架結(jié)合實(shí)現(xiàn)的，每個情境元素庫中包含符合該情境的各種不同的物理元素，當(dāng)移動終端使用者選擇某一個情境元素庫時，即可自該情境元素庫中提取自己所需要的元素，組合添加到移動終端屏幕上，以畫出所需的動態(tài)模型，而得到特定的情境模擬數(shù)據(jù)，如此，當(dāng)用戶在遇到相關(guān)的問題難以用聲音描述完整時，可以使用情境模擬來幫助彼此的溝通。
[0022]此處需予以說明的是，前述2個移動終端建立通話的工作模式可例如為全雙工工作模式，在該工作模式下，移動終端的通訊雙方能同時在圖片或文本上進(jìn)行操作，這樣可以使通訊雙方之間的溝通更加方便，交流更加隨心所欲。但不以此為限，在其他實(shí)施例中，亦可采用半雙工工作模式，例如在某一時刻只允許通訊一方載入圖片，以為了防止產(chǎn)生混亂。
[0023]為更詳盡了解應(yīng)用本發(fā)明如何使用拍照、繪圖方法以實(shí)現(xiàn)輔助通話的功效，以下配合圖1，以移動終端通訊雙方A與B在建立通話過程中討論A所處地理位置為例進(jìn)行說明。當(dāng)通訊雙方A與B在建立通話過程中，A無法用語音明確界定其所處地理位置時，A則可通過拍照攝取A所處地理位置周邊的圖像，在攝取之后將獲取到的圖像數(shù)據(jù)分別予以輸出進(jìn)行后續(xù)的繪圖，同時產(chǎn)生第一觸發(fā)信號，并將該第一觸發(fā)信號傳輸予網(wǎng)絡(luò)傳輸步驟，消息分發(fā)步驟41接收到該第一觸發(fā)信號后，即對應(yīng)產(chǎn)生并輸出第一控制信號，而控制網(wǎng)絡(luò)通訊步驟42依據(jù)TCP協(xié)議并通過移動互聯(lián)網(wǎng)網(wǎng)絡(luò)將相應(yīng)的圖像數(shù)據(jù)同步發(fā)送到B的移動終端，于此同時，A通過繪圖步驟在該圖像數(shù)據(jù)基礎(chǔ)上重點(diǎn)圈出自己所處的位置，以形成比較形象的圖片數(shù)據(jù)，并產(chǎn)生第二觸發(fā)信號，消息分發(fā)步驟41接收到該第二觸發(fā)信號后，即對應(yīng)產(chǎn)生并輸出第二控制信號，而控制網(wǎng)絡(luò)通訊步驟42是依據(jù)UDP協(xié)議并通過移動互聯(lián)網(wǎng)網(wǎng)絡(luò)將相應(yīng)的圖像數(shù)據(jù)同步發(fā)送到B的移動終端，如此，B即可結(jié)合A同步傳輸?shù)膱D片而明確A所要表達(dá)的地理位置，進(jìn)而填補(bǔ)通訊雙方在語音視頻通話過程中無法完全表達(dá)雙方語意的空白。而且A通過繪圖步驟在圖像數(shù)據(jù)上添置的任一筆，都會通過第二觸發(fā)信號，及時觸發(fā)網(wǎng)絡(luò)傳輸同步傳輸予B的移動終端，實(shí)現(xiàn)即拍即繪即傳即享的效果。
[0024]此外，為更詳盡了解應(yīng)用本發(fā)明方法如何使用情境模擬步驟以實(shí)現(xiàn)輔助通話的功效，以下以移動終端通訊雙方C與D在建立通話過程中討論某個電路圖的布局為例進(jìn)行說明。當(dāng)通訊雙方C與D在建立通話過程中，(:與0無法明確敘明該電路圖中的某一布局時，C或D任一方(以下以C為例)可通過情境模擬選擇電子元器件這一個情境元素庫，該情境元素庫中包含有屬于電子元器件的各種元件，則C可自該情境元素庫中提取自己所需要的元件，組合添加到移動終端屏幕上，以畫出自己所要表達(dá)的電路布局，并產(chǎn)生第二觸發(fā)信號，消息分發(fā)步驟接收到該第二觸發(fā)信號后，即對應(yīng)產(chǎn)生并輸出第二控制信號，而控制網(wǎng)絡(luò)通訊步驟依據(jù)UDP協(xié)議并通過移動互聯(lián)網(wǎng)網(wǎng)絡(luò)將相應(yīng)的電路布局同步發(fā)送到D的移動終端，D若對C所描述的電路布局持不同意見，也通過前述方式利用情境模擬繪制自己所要表達(dá)的電路布局，如此，即可利用圖形很好的輔助通話雙方的溝通能力。
【主權(quán)項(xiàng)】
1.一種移動互聯(lián)網(wǎng)網(wǎng)絡(luò)環(huán)境下的新型通話輔助系統(tǒng)研究方法，其應(yīng)用于支持移動互聯(lián)網(wǎng)網(wǎng)絡(luò)的移動終端中，其特征在于，包括如下步驟: 步驟I，拍照:攝取圖像數(shù)據(jù)，并在攝取之后將獲取到的圖像數(shù)據(jù)予以輸出，且產(chǎn)生第一觸發(fā)信號； 步驟2，繪圖:接收步驟I中輸出的圖像數(shù)據(jù)，以基于所述圖像數(shù)據(jù)進(jìn)行繪制或調(diào)整處理，或用以直接提供圖形的繪制，而形成圖片數(shù)據(jù)，并產(chǎn)生第二觸發(fā)信號，所述繪制采用雙緩沖繪圖技術(shù)，以實(shí)現(xiàn)動態(tài)交互圖形繪制； 步驟3，情境模擬:采用多個情境元素庫，以提供進(jìn)行所需情境的模擬處理，而形成特定情境模擬數(shù)據(jù)，并產(chǎn)生第二觸發(fā)信號，其中，所述情境元素庫中包含符合該情境的各種不同的物理元素，當(dāng)選擇其中一個情境元素庫時，則提供自所選擇的情境元素庫中提取所需要的元素，組合添加到移動終端的屏幕上，以畫出所需的動態(tài)模型，而得到特定的情境模擬數(shù)據(jù)；以及 步驟4，網(wǎng)絡(luò)傳輸:通過第一傳輸協(xié)議與第二傳輸協(xié)議，用以在2個移動終端建立通話過程中；接收到第一觸發(fā)信號時，依據(jù)第一傳輸協(xié)議并通過所述移動互聯(lián)網(wǎng)網(wǎng)絡(luò)將所述圖像數(shù)據(jù)同步發(fā)送到對方移動終端，而在接收到第二觸發(fā)信號時，依據(jù)第二傳輸協(xié)議并通過所述移動互聯(lián)網(wǎng)網(wǎng)絡(luò)將相應(yīng)的圖片數(shù)據(jù)或特定情境模擬數(shù)據(jù)同步發(fā)送到對方移動終端。2.根據(jù)權(quán)利要求1所述的方法，其特征在于，步驟4中， 又包括: 步驟41，消息分發(fā):通過接收步驟1、步驟2、步驟3執(zhí)行完的數(shù)據(jù)，用以獲得第一觸發(fā)信號與第二觸發(fā)信號，再產(chǎn)生并輸出第一控制信號與第二控制信號；以及 步驟42，網(wǎng)絡(luò)通訊:對第一傳輸協(xié)議與第二傳輸協(xié)議進(jìn)行儲存，用以在2個移動終端建立通話過程中，且接收到所述消息分發(fā)步驟41輸出的第一控制信號時，依據(jù)第一傳輸協(xié)議并通過所述移動互聯(lián)網(wǎng)網(wǎng)絡(luò)將所述圖像數(shù)據(jù)同步發(fā)送到對方移動終端，而在接收到第二控制信號時，依據(jù)第二傳輸協(xié)議并通過所述移動互聯(lián)網(wǎng)網(wǎng)絡(luò)將相應(yīng)的圖片數(shù)據(jù)或特定情境模擬數(shù)據(jù)同步發(fā)送到對方移動終端。
【文檔編號】H04L29/06GK106060001SQ201610301382
【公開日】2016年10月26日
【申請日】2016年5月9日
【發(fā)明人】程久軍, 黃震華
【申請人】同濟(jì)大學(xué)