專利名稱：移動通信終端視頻通話時的視頻效果提供裝置及方法
技術(shù)領(lǐng)域：
本發(fā)明涉及移動通信終端，尤其是涉及在利用支持視頻通話的移動通信終端與對方進行視頻通話時，將效果圖像附加到用戶的形象并進行傳送，從而能夠?qū)⒏星榛蛴腥さ男Ч砸曨l傳達給用戶的移動通信終端視頻通話時的視頻效果提供裝置及方法。
背景技術(shù)：
通常移動通信終端服務(wù)是指根據(jù)無線通信方式，利用移動電話交換設(shè)備對具有設(shè)置于移動體的送收信設(shè)備的對象發(fā)送或接收語音的電子通信服務(wù)。當前，經(jīng)過語音為主的第2代移動通信服務(wù)步驟，過了2.5代，大多數(shù)使用現(xiàn)在第3代移動通信終端CDMA2000-1X終端，并已經(jīng)開始了非同步(W-CDMA)第3代服務(wù)。
在第3代服務(wù)中視頻通話(Video telephony)的功能是代表第3代的服務(wù)，不過現(xiàn)在除了相互間圖像的來往外，還有待改善的問題點。
當前提供移動通信終端的服務(wù)有多媒體服務(wù)，文字郵件相關(guān)服務(wù)，全球漫游服務(wù)，無線網(wǎng)絡(luò)服務(wù)，無線銀行業(yè)務(wù)服務(wù)，信用卡無線結(jié)帳服務(wù)，通話服務(wù)包括發(fā)信號碼服務(wù)，一卡雙號服務(wù)，電話會議。
利用移動通信終端與對方進行的視頻通話單純地收發(fā)對方的視頻數(shù)據(jù)外，沒有其他工作，從而用戶需要更方便而多樣的服務(wù)的提供。

發(fā)明內(nèi)容
為了解決上述問題的本發(fā)明目的在于提供一種利用移動通信終端與對方進行視頻通話時，能夠在LCD畫面上以畫面上插入或縮小方法其他圖像的技術(shù)附加用戶指定的圖釋或背景畫面等圖像效果，從而賦予用戶有趣的視頻通話的移動通信終端視頻通話時的視頻效果提供裝置及方法。
本發(fā)明目的在于提供通過提供視頻通話的視頻通話服務(wù)器和提供圖釋或背景畫面的圖像效果內(nèi)容(contents)的效果服務(wù)器和將用戶的臉和圖釋或背景畫面合成后制作附加了效果圖像并提供的視頻合成服務(wù)器，與對方進行視頻通話的移動通信終端視頻通話時的視頻效果提供裝置及方法。
為了達到如上目的的本發(fā)明的移動通信終端視頻通話時的視頻效果提供方法，其包括用戶利用支持視頻通話的移動通信終端與對方進行視頻通話的第1步驟；在移動通信終端的菜單上用戶選擇視頻效果菜單的第2步驟；通過第2步驟的視頻效果菜單合成用戶的視頻并生成視頻數(shù)據(jù)的第3步驟；將通過第3步驟生成的視頻數(shù)據(jù)傳送到對方的移動通信終端，在對方的移動通信終端顯示并進行視頻通話的第4步驟。
而且，本發(fā)明的第2步驟的視頻效果包括表示用戶的感情或用戶當前的狀態(tài)的圖釋，以動畫制作的背景畫面。
另外，本發(fā)明的第3步驟包括在移動通信終端發(fā)送的用戶的畫面中只提取臉部，以圖像數(shù)據(jù)生成多種臉部形象模樣，制作上述視頻數(shù)據(jù)并存儲的第1子步驟；將在第1子步驟已存儲的用戶的多種模樣合成后，制作上述視頻數(shù)據(jù)并存儲的第2子步驟；第2子步驟的用戶的視頻加上圖釋或背景畫面，作出多種效果后，制作上述視頻數(shù)據(jù)并存儲的第3子步驟。
本發(fā)明的移動通信終端視頻通話時的效果畫面提供裝置包括為了能夠進行視頻通話而向移動通信終端提供用戶的視頻和對方的視頻的視頻通話服務(wù)器；在視頻通話中提供在用戶的畫面上能夠附加圖釋和背景畫面等多種圖像效果的內(nèi)容的效果服務(wù)器；接收視頻通話服務(wù)器提供移動通信終端的用戶的視頻后，將用戶選擇的圖釋或背景畫面與上述用戶的畫面合成存儲并傳送到對方的終端的視頻合成服務(wù)器。
本發(fā)明的效果在于，本發(fā)明利用支持視頻通話的移動通信終端進行視頻通話時能夠賦予各種效果，從而能夠提高移動通信終端的活用度。另外通過給用戶的圖像賦予效果，從而傳到更加生動的表現(xiàn)。


圖1是本發(fā)明移動通信終端視頻通話時提供視頻效果的移動通信系統(tǒng)的概略結(jié)構(gòu)示意圖；圖2是視頻通話進行中為了給對方發(fā)送圖釋而采用臉部識別方式合成視頻的工作順序圖；圖3是視頻通話進行中為了給對方發(fā)送圖釋而合成視頻的工作順序圖；圖4是視頻通話進行中為了給對方發(fā)送以動畫制作的背景畫面而合成視頻的工作順序圖；圖5是視頻通話進行中給對方發(fā)送圖釋的實施例示意圖；圖6是本發(fā)明視頻通話中給對方發(fā)送圖釋的另一實施例示意圖。
附圖主要部分的符號說明20，30移動通信終端50視頻通話服務(wù)器60效果服務(wù)器 70視頻合成服務(wù)器具體實施方式
以下，參照附圖詳細說明本發(fā)明的實施例。
圖1是本發(fā)明移動通信終端視頻通話時提供視頻效果的移動通信系統(tǒng)的概略結(jié)構(gòu)示意圖，圖2是視頻通話進行中為了給對方發(fā)送圖釋而采用臉部識別方式合成視頻的工作順序圖，圖3是視頻通話進行中為了給對方發(fā)送圖釋而合成視頻的工作順序圖，圖4是視頻通話進行中為了給對方發(fā)送以動畫制作的背景畫面而合成視頻的工作順序圖，圖5是視頻通話進行中給對方發(fā)送圖釋的實施例示意圖，圖6是本發(fā)明視頻通話中給對方發(fā)送圖釋的另一實施例示意圖。
本發(fā)明的圖1是顯示利用移動通信終端提供視頻通話時的效果畫面的結(jié)構(gòu)的示意圖。
其包括支持視頻通話的移動通信終端20和移動通信終端30，網(wǎng)絡(luò)25，提供視頻通話服務(wù)的視頻通話服務(wù)器50，在以畫面顯示的圖像上存儲圖釋和背景畫面等多種內(nèi)容并提供的效果服務(wù)器60，將用戶的視頻數(shù)據(jù)和所選擇的圖釋或背景畫面合成后傳送到對方的移動通信終端30的視頻合成服務(wù)器70。
效果服務(wù)器60制作搞笑的模樣，笑的模樣，下雨的模樣，升太陽的模樣，工作的模樣等多種圖釋內(nèi)容并提供，另外，還制作多種背景畫面內(nèi)容并提供。
視頻通話服務(wù)器50從用戶和對方的移動通信終端接收影響數(shù)據(jù)并傳送，從而實現(xiàn)視頻通話，視頻合成服務(wù)器70在用戶的模樣合成效果服務(wù)器60提供的圖釋或背景畫面，并在視頻通話時服務(wù)圖像效果。
視頻合成服務(wù)器70在合成用戶的臉部和圖釋和背景畫面等內(nèi)容方面使用多種方法。
首先，采用臉部識別算法制作與用戶實際臉部相同的合成畫面，即，在包括從用戶的移動通信終端接收的用戶的臉部的圖像中只提取用戶臉部部分。
在提取的臉部圖像中取出關(guān)于代表臉部特征的用戶的眼睛，鼻子，嘴，額頭，眉毛的大小和位置的信息。
為了在提取的臉部圖像生成笑的模樣，利用臉部的特征信息，使用相應(yīng)位置的臉部部分的影響數(shù)據(jù)來制作嘴角往上翹的圖像，為了生成哭的模樣，將眼淚重疊在圖像上，為了生成生氣的模樣，將眼角往上翹，從而制作賦予效果的新圖像，存儲到視頻合成服務(wù)器70并提供。采用臉部識別算法并合成相當于在實際臉部制作各種感情形象，合成像真的用戶的臉部笑的模樣，生氣的模樣。
另外，合成用戶的臉部和圖釋和背景畫面的另一種方法是，從用戶的移動通信終端20接收的視頻數(shù)據(jù)上使用圖像數(shù)據(jù)，加上圖釋和背景畫面合成后存儲到視頻合成服務(wù)器70并提供。
而且，如果是動圖像背景的情況，以動畫GIF制作的背景畫面像拍攝貼紙照片用的圖像一樣在其上面動，在其后面合成用戶的臉部后存儲到視頻合成服務(wù)器70并提供。
用戶利用支持視頻通話的移動通信終端20選擇與對方進行視頻通話并發(fā)送通話信號，通話信號通過網(wǎng)絡(luò)25和視頻通話服務(wù)器50與對方的移動通信終端30連接。
建立通話后，在用戶的移動通信終端20的相機拍攝用戶的模樣并傳送或?qū)㈩A(yù)先存儲的用戶的模樣經(jīng)過視頻通話服務(wù)器50發(fā)送到對方的移動通信終端30，對方的模樣也經(jīng)過視頻通話服務(wù)器50傳送到用戶的移動通信終端20并通過LCD畫面看著對方進行視頻通話。
此時，在為了給顯示用戶的圖像畫面賦予效果而提供的菜單中的多種圖釋或背景畫面進行選擇的話，將從用戶的移動通信終端接收的視頻數(shù)據(jù)和從效果服務(wù)器60提供的圖釋或背景畫面等效果數(shù)據(jù)合成后傳送到對方的移動通信終端30，從而賦予效果。
圖2是視頻通話中為了給對方發(fā)送圖釋而采用臉部識別方式合成視頻的工作順序圖。
如果用戶在與對方視頻通話中提供的菜單中選擇發(fā)送圖釋一項，用戶的移動通信終端從視頻通話服務(wù)器50接收用戶的臉部照片，從效果服務(wù)器60接收用戶所選擇的圖釋內(nèi)容后，傳送到視頻合成服務(wù)器70。(見步驟S80)視頻合成服務(wù)器70對包括用戶臉部的照片采用臉部識別算法，只提取用戶臉部的界限(boundary)部分。在提取的臉部影響中取出用戶的眼睛，鼻子，嘴的大小和位置相關(guān)的信息(見步驟S82)。
在提取出的臉部圖像中為了生成笑的模樣，使用影響數(shù)據(jù)，制作嘴角往上翹的圖像，為了生成哭的模樣，將眼淚重疊在圖像上，為了生成生氣的模樣，制作賦予眼角往上翹的效果的新的圖像，并存儲到視頻合成服務(wù)器70，如果經(jīng)過網(wǎng)絡(luò)25向?qū)Ψ降囊苿油ㄐ沤K端30傳送賦予效果的視頻數(shù)據(jù)，從對方的移動通信終端30的畫面，看著賦予效果的用戶的另一個模樣進行通話(見步驟S84～S86)。通過此方式制作的視頻數(shù)據(jù)的臉部圖像與實際人的臉部幾乎相同。
圖3是視頻通話中為了給對方發(fā)送圖釋而合成視頻的工作順序圖。
如果用戶在與對方視頻通話中提供的菜單中選擇發(fā)送圖釋一項，用戶的移動通信終端從視頻通話服務(wù)器50接收用戶的臉部照片，從效果服務(wù)器60接收用戶所選擇的圖釋內(nèi)容后，傳送到視頻合成服務(wù)器70。(見步驟S90)如果用戶選擇哭的臉部模樣的圖釋時，視頻合成服務(wù)器70利用包括用戶臉部的照片和之前預(yù)先接收并存儲的用戶的臉部照片的影響數(shù)據(jù)進行合成(見步驟S92)。
合成的圖像數(shù)據(jù)存儲到視頻合成服務(wù)器70，經(jīng)過網(wǎng)絡(luò)25向?qū)Ψ降囊苿油ㄐ沤K端30發(fā)送已賦予圖像效果的視頻數(shù)據(jù)，通過對方的移動通信終端30的畫面看著已賦予效果的用戶的另一個模樣進行通話，從而是一種給用戶傳達新的感情，開發(fā)趣味的服務(wù)(見步驟S94)。
另外，圖4是視頻通話中為了給對方發(fā)送以動畫制作的背景畫面而合成視頻的工作順序圖。
如果用戶在與對方的視頻通話中提供的菜單中選擇發(fā)送背景畫面一項，用戶的移動通信終端從視頻通話服務(wù)器50接收用戶的臉部照片，從效果服務(wù)器60接收用戶所選擇的背景畫面內(nèi)容后傳送到視頻合成服務(wù)器70。(見步驟S100)如果是動圖像背景畫面的情況，以動畫GIF制作的背景畫面向拍攝貼紙照片用圖像在其上面動，在其后合成用戶的臉部并存儲到視頻合成服務(wù)器70，視頻合成服務(wù)器70經(jīng)過網(wǎng)絡(luò)25向?qū)Ψ降囊苿油ㄐ沤K端30發(fā)送已賦予圖像效果的視頻數(shù)據(jù)的話，能夠從對方的移動通信終端30畫面看著已賦予動畫背景畫面效果的用戶另一個模樣進行通話，從而是一種給用戶傳達新的感情，提供趣味的服務(wù)(見步驟S102，104)。
另外，圖5是本發(fā)明視頻通話中給對方發(fā)送圖釋的實施例示意圖。
用戶利用支持視頻通話的移動通信終端20與對方進行通話時，用戶在提供的菜單中選擇給對方發(fā)送圖釋一項(見步驟S120～122)。
如果用戶在提供的圖釋中選擇哭的模樣，視頻通話服務(wù)器50將用戶的視頻數(shù)據(jù)發(fā)送到視頻合成服務(wù)器70，效果服務(wù)器60將哭的模樣的圖釋數(shù)據(jù)發(fā)送到視頻合成服務(wù)器70，合成為一個視頻數(shù)據(jù)后發(fā)送到對方的移動通信終端30，從而對方的移動通信終端的LCD畫面上顯示用戶的臉部和哭的模樣的效果圖像。(見步驟S124～S126，及在對方的顯示步驟S128)另外，圖6是本發(fā)明視頻通話中給對方發(fā)送圖釋的另一實施例示意圖。
用戶利用支持視頻通話的移動通信終端20與對方進行通話時，用戶在提供的菜單中選擇給對方發(fā)送圖釋一項(見步驟S130～132)。
如果用戶在提供的服務(wù)中選擇舉著雨傘的圖釋，視頻通話服務(wù)器50將用戶的視頻數(shù)據(jù)發(fā)送到視頻合成服務(wù)器70，效果服務(wù)器60將下雨的模樣的圖釋數(shù)據(jù)發(fā)送到視頻合成服務(wù)器70，合成為一個視頻數(shù)據(jù)后發(fā)送到對方的移動通信終端30，從而對方的移動通信終端30的LCD畫面上，用戶的臉部圖像和下雨的模樣的圖釋合在一起并顯示。(見步驟S134～S136，及在對方的顯示步驟S138)移動通信服務(wù)提供商制作各種圖釋內(nèi)容并提供。
另外，用戶利用支持視頻通話的移動通信終端20與對方進行語音通話時，用戶在提供的菜單中選擇給對方發(fā)送背景畫面的服務(wù)。
用戶在提供的背景畫面服務(wù)中選擇一個服務(wù)。如果用戶選擇太陽模樣的背景畫面服務(wù)，視頻通話服務(wù)器50將用戶的視頻數(shù)據(jù)發(fā)送到視頻合成服務(wù)器70，效果服務(wù)器60將日升的模樣的圖釋數(shù)據(jù)發(fā)送到視頻合成服務(wù)器70，合成為一個視頻數(shù)據(jù)后，經(jīng)過網(wǎng)絡(luò)25發(fā)送到對方的移動通信終端30，在對方的移動通信終端30的LCD畫面上，用戶的視頻上合成日升模樣的圖釋效果圖像并顯示。
另外，用戶提供的背景畫面服務(wù)中選擇彩虹背景畫面的話，用戶的視頻上重疊(overlap)彩虹升起的畫面并顯示在對方的移動通信終端。
下雨的模樣，下雪的模樣，彩虹，黑夜等多樣的背景畫面以動畫GIF(Graphics Interchange Format)等文件生成，使背景畫面在用戶的視頻后面啟動，并將背景畫面合用戶的臉部重疊的數(shù)據(jù)傳送給對方。與圖釋相同，背景畫面的服務(wù)也可以通過制作產(chǎn)生多樣的效果的背景畫面內(nèi)容提供。
本發(fā)明不僅在自身的圖像畫面上混合圖釋的效果并給對方發(fā)送圖像數(shù)據(jù)，而且在多種背景上混合自身的圖像并發(fā)送，從而給用戶增加趣味的因素，能夠以移動通信終端的服務(wù)活用。
另外，本發(fā)明通過提取用戶的臉部模樣的圖像識別，發(fā)送制作平時看不到的表情的視頻數(shù)據(jù)，從而給對方傳達用戶的新形象。
本發(fā)明的效果在于，本發(fā)明利用支持視頻通話的移動通信終端進行視頻通話時能夠賦予各種效果，從而能夠提高移動通信終端的活用度。另外通過給用戶的圖像賦予效果，從而傳到更加生動的表現(xiàn)。
以上
具體實施例方式
僅用于說明本發(fā)明而非用于限定本發(fā)明。
權(quán)利要求
1.一種移動通信終端視頻通話時的視頻效果提供方法，其特征在于包括用戶利用支持視頻通話的移動通信終端與對方進行視頻通話的第1步驟；在移動通信終端的菜單上用戶選擇視頻效果菜單的第2步驟；通過第2步驟的視頻效果菜單合成用戶的視頻并生成視頻數(shù)據(jù)的第3步驟；將通過第3步驟生成的視頻數(shù)據(jù)傳送到對方的移動通信終端，在對方的移動通信終端顯示并進行視頻通話的第4步驟。
2.根據(jù)權(quán)利要求1所述的移動通信終端視頻通話時的視頻效果提供方法，其特征在于所述的第2步驟的視頻效果還包括，表示用戶的感情或用戶當前的狀態(tài)的圖釋；以動畫制作的背景畫面。
3.根據(jù)權(quán)利要求1所述的移動通信終端視頻通話時的視頻效果提供方法，其特征在于所述的第3步驟包括，在移動通信終端發(fā)送的用戶的畫面中只提取臉部，以影像數(shù)據(jù)生成多種臉部形象模樣，制作所述的視頻數(shù)據(jù)并存儲的第1子步驟；將在第1子步驟已存儲的用戶的多種模樣合成后，制作所述的視頻數(shù)據(jù)并存儲的第2子步驟；第2子步驟的用戶的視頻加上圖釋或背景畫面，作出多種效果后，制作所述的視頻數(shù)據(jù)并存儲的第3子步驟。
4.一種移動通信終端視頻通話時的視頻效果提供裝置，其特征在于包括為了能夠進行視頻通話而向移動通信終端提供用戶的視頻和對方的視頻的視頻通話服務(wù)器；在視頻通話中提供在用戶的畫面上能夠附加圖釋和背景畫面等多種影像效果的內(nèi)容的效果服務(wù)器；接收視頻通話服務(wù)器提供移動通信終端的用戶的視頻后，將用戶選擇的圖釋或背景畫面與所述的用戶的畫面合成存儲并傳送到對方的終端的視頻合成服務(wù)器。
全文摘要
本發(fā)明涉及移動通信終端，尤其是涉及在利用支持視頻通話的移動通信終端與對方進行視頻通話時，將效果影像附加到用戶的形象并進行傳送，從而能夠?qū)⒏星榛蛴腥さ男Ч砸曨l傳達給用戶的移動通信終端視頻通話時的視頻效果提供裝置及方法。本發(fā)明通過提供視頻通話的視頻通話服務(wù)器和提供圖釋或背景畫面的影像效果內(nèi)容的效果服務(wù)器和將用戶的臉和圖釋或背景畫面合成后制作附加了效果影像并提供的視頻合成服務(wù)器，與對方進行視頻通話。本發(fā)明利用支持視頻通話的移動通信終端進行視頻通話時，能夠賦予各種效果，從而能提高移動終端的活用度。另外，對用戶的影像賦予效果，可以傳達更生動的表現(xiàn)。
文檔編號H04N5/262GK1747546SQ20051005389
公開日2006年3月15日 申請日期2005年3月14日 優(yōu)先權(quán)日2004年9月7日
發(fā)明者尹廷赫 申請人:樂金電子(中國)研究開發(fā)中心有限公司