專利名稱:一種實現(xiàn)多媒體數(shù)據(jù)上行與下行的手機系統(tǒng)及方法
技術(shù)領(lǐng)域:
本發(fā)明涉及手機的數(shù)據(jù)傳輸領(lǐng)域,特別涉及一種實現(xiàn)多媒體數(shù)據(jù)上行 與下行的手機系統(tǒng)及方法。
背景技術(shù):
TD-SCDMA是我國提出的自主研發(fā)的第三代移動通信技術(shù)標(biāo)準(zhǔn)之一, 2008年4月1日由中國移動在國內(nèi)8個城巿開始了社會化業(yè)務(wù)測試和試商 用。目前試商用的第一批TD-SCDMA移動終端中,可視電話、流媒體、視 頻會議、視頻留言等視頻業(yè)務(wù)都是體現(xiàn)3G特色的鮮明亮點,但其在終端側(cè) 釆用的視頻解碼方式都是基于H. 263格式或MP4格式,編解碼方式的效率 并不是最優(yōu)化的。
H.263格式是國際電聯(lián)ITU-T的一個標(biāo)準(zhǔn)草案,是為低碼流通信而設(shè)計的。 目前的視頻解碼方式一般均基于H. 263格式,而較少釆用H. 264格式。
發(fā)明內(nèi)容
本發(fā)明的目的是提供一種實現(xiàn)多媒體數(shù)據(jù)上行與下行的手機系統(tǒng)及方 法,實現(xiàn)手機多媒體數(shù)據(jù)的上行和先行。
一方面,本發(fā)明提供一種實現(xiàn)多媒體數(shù)據(jù)上行與下行的手機系統(tǒng),其 與網(wǎng)絡(luò)服務(wù)器連接,包括音頻輸入模塊和輸出模塊、顯示模塊以及圖像釆 集模塊,包括
第一處理器,接收下行中的多媒體數(shù)據(jù)并將其分解為音頻數(shù)據(jù)和視頻數(shù) 據(jù),將所述音頻數(shù)據(jù)發(fā)送至所述音頻輸出模塊;接收上行中的音頻數(shù)據(jù)和視頻數(shù) 據(jù)并將兩者混合編碼并發(fā)送至所述網(wǎng)絡(luò)服務(wù)器;
第二處理器,連接所述第一處理器和所述顯示模塊,接收下行中所述 第一處理器分解出的視頻數(shù)據(jù)并進(jìn)行解碼,將解碼的視頻數(shù)據(jù)發(fā)送至所述顯示模塊顯示;接收上行中所述圖像釆集模塊發(fā)送的視頻數(shù)據(jù)并將其壓縮
編碼傳輸至所述第一處理器。
所述第一處理器為所述手機系統(tǒng)的主處理器,所述第二處理器為所述 手機系統(tǒng)的協(xié)處理器。
所述第一處理器在下行中,接收所述網(wǎng)絡(luò)服務(wù)器發(fā)送的多媒體數(shù)據(jù),
并按照H. 324協(xié)議將其分解為音頻數(shù)據(jù)和H. 264格式的視頻數(shù)據(jù),再將所述 音頻數(shù)據(jù)和視頻數(shù)據(jù)分別發(fā)送至所述音頻輸出模塊和所述第二處理器。
所述第一處理器在上行中,接收所述第二處理器發(fā)送的視頻數(shù)據(jù)和所 述音頻輸入模塊采集的音頻數(shù)據(jù)后,將所述音頻數(shù)據(jù)和視頻數(shù)據(jù)按照H.324 協(xié)議混合編碼發(fā)送至所述網(wǎng)絡(luò)服務(wù)器。
所述第二處理器在上行中,接收所述圖像釆集模塊發(fā)送的視頻數(shù)據(jù)并 將其壓縮編碼成視頻電話協(xié)議規(guī)定的碼流,然后將所述碼流發(fā)送至所述第 一處理器。
另一方面,本發(fā)明還提供一種實現(xiàn)手機多媒體數(shù)據(jù)上行與下行的方法, 所述手機系統(tǒng)連接手機網(wǎng)絡(luò)服務(wù)器,包括以下步驟
建立第一控制單元,接收下行中的多媒體數(shù)據(jù)并將其分解為音頻數(shù)據(jù)和 視頻數(shù)據(jù),將所述音頻數(shù)據(jù)發(fā)送至所述手機系統(tǒng)的音頻輸出模塊;接收上行中的 音頻數(shù)據(jù)和視頻數(shù)據(jù)并將兩者混合編碼并發(fā)送至所述網(wǎng)絡(luò)服務(wù)器;
建立第二控制單元,接收下行中所述第一控制單元分解出的視頻數(shù)據(jù) 并進(jìn)行解碼,將解碼的視頻數(shù)據(jù)發(fā)送至所述手機系統(tǒng)的顯示模塊顯示;接 收上行中所述手機系統(tǒng)的圖像采集模塊發(fā)送的視頻數(shù)據(jù)并將其壓縮編碼傳 輸至所述第一控制單元。
所述第一控制單元為所述手機系統(tǒng)的主處理器,所述第二控制單元為 所述手機系統(tǒng)的協(xié)處理器。
所述第一控制單元在下行中,接收所述網(wǎng)絡(luò)服務(wù)器發(fā)送的多媒體數(shù)據(jù), 并按照H. 324協(xié)議將其分解為音頻數(shù)據(jù)和H. 264格式的視頻數(shù)據(jù),再將所述
音頻數(shù)據(jù)和視頻數(shù)據(jù)分別發(fā)送至所述手機系統(tǒng)的音頻輸出模塊和所述第二 控制單元。
所述第一控制單元在上行中,接收所述第二控制單元發(fā)送的視頻數(shù)據(jù)
5和所述手機系統(tǒng)的音頻輸入模塊采集的音頻數(shù)據(jù)后,將所述音頻數(shù)據(jù)和視 頻數(shù)據(jù)混合編碼發(fā)送至所述網(wǎng)絡(luò)服務(wù)器。
所述第二控制單元在上行中,接收所述圖像釆集模塊發(fā)送的視頻數(shù)據(jù) 并將其壓縮編碼成視頻電話協(xié)議規(guī)定的碼流,然后將所述碼流發(fā)送至所述 第一控制單元。
采用本發(fā)明所述的一種實現(xiàn)多媒體數(shù)據(jù)上行與下行的手機系統(tǒng)及方 法,其釆用了主處理器和協(xié)處理器進(jìn)行上行和下行的控制,并采用了在圖
像壓縮技術(shù)上更為先進(jìn)的H. 264視頻解碼技術(shù),能夠在較低帶寬上提供高質(zhì) 量的圖像傳輸,比MP4要節(jié)約40y。左右的碼流,可以大幅提高可視電話、流 媒體的效果。
圖l是本發(fā)明所述系統(tǒng)的原理圖2是本發(fā)明所述系統(tǒng)在下行中的流程圖;
圖3是本發(fā)明所述系統(tǒng)在上行中的流程圖。
具體實施例方式
下面結(jié)合附圖和實施例進(jìn)一步說明本發(fā)明的技術(shù)方案。 首先介紹一下H. 264編解碼技術(shù),H. 264是一種高性能的視頻編解碼技
術(shù)。目前國際上制定視頻編解碼技術(shù)的組織有兩個, 一個是"國際電聯(lián) (ITU-T )",它制定的標(biāo)準(zhǔn)有H. 261、 H. 263、 H. 263+等;另 一個是"國際
標(biāo)準(zhǔn)化組織USO)",它制定的標(biāo)準(zhǔn)有MPEG-1、 MPEG—2、 MPEG-4等。而H. 264
則是由兩個組織聯(lián)合組建的聯(lián)合視頻組(JVT)共同制定的新數(shù)字視頻編碼
標(biāo)準(zhǔn),所以它既是ITU-T的H. 264,又是ISO/IEC的MPEG-4高級視頻編碼 (Advanced Video Coding, AVC ),而且它將成為MPEG-4標(biāo)準(zhǔn)的第10部分。
因此,不論是MPEG-4 AVC、 MPEG-4 Part 10,還是IS0/IEC 14496-10,都
是指H.264編解碼技術(shù)。
參見圖l,圖l顯示了本發(fā)明所述一種實現(xiàn)多媒體數(shù)據(jù)上行與下行的手
機系統(tǒng)110 (虛線框內(nèi)),其與網(wǎng)絡(luò)服務(wù)器120連接,包括音頻輸入模塊104和音頻輸出模塊103、顯示模塊105以及圖像釆集模塊106,還包括
第一處理器IOI (主處理器),第一處理器101在下行中,接收所述網(wǎng) 絡(luò)服務(wù)器120發(fā)送的多媒體數(shù)據(jù),并按照H. 324協(xié)議(用于電話網(wǎng)上的視頻 會議)將其分解為音頻數(shù)據(jù)和H.264格式的視頻數(shù)據(jù),再將所述音頻數(shù)據(jù)和 視頻數(shù)據(jù)分別發(fā)送至所述音頻輸出模塊103和所述第二處理器102;第一處 理器101在上行中,接收所述第二處理器102發(fā)送的視頻數(shù)據(jù)和所述音頻輸 入模塊104采集的音頻數(shù)據(jù)后,將所述音頻數(shù)據(jù)和視頻數(shù)據(jù)混合編碼發(fā)送至 所述網(wǎng)絡(luò)服務(wù)器120。
第二處理器102 (協(xié)處理器),連接所述第一處理器101和所述顯示模 塊105,接收下行中所述第一處理器101分解出的視頻數(shù)據(jù)并進(jìn)行解碼,將 解碼的視頻數(shù)據(jù)發(fā)送至所述顯示模塊105顯示;第二處理器102在上行中, 接收所述圖像釆集模塊106發(fā)送的視頻數(shù)據(jù)并將其壓縮編碼成視頻電話協(xié) 議規(guī)定的碼流,然后將所述碼流發(fā)送至所述第一處理器IOI。
參見圖2,通過所述手機系統(tǒng)IIO,音、視頻數(shù)據(jù)下行的處理包括如下步
驟
Al:手機的第一處理器IOI (主處理器)接收到網(wǎng)絡(luò)側(cè)發(fā)來的音、視頻數(shù)據(jù) 時,按照H. 324協(xié)議將其分解成音頻數(shù)據(jù)和視頻數(shù)據(jù);
A2: —方面,第一處理器101將音頻數(shù)據(jù)傳輸?shù)揭纛l輸出模塊103(聽簡或耳 麥)并播放出來;另一方面,第一處理器101將視頻數(shù)據(jù)發(fā)送給第二處理器102(協(xié) 處理器),第二處理器102收到第一處理器101發(fā)來的H.264格式的視頻碼流后, 將碼流發(fā)送到顯示模塊105 (LCD)顯示。
參見圖3,通過所述手機系統(tǒng)IIO,音、視頻數(shù)據(jù)上行處理包括如下步驟:
Bl:圖像釆集模塊106 (攝像頭等)釆集視頻數(shù)據(jù)后傳送到手機的第二處理 器102;
B2:視頻數(shù)據(jù)經(jīng)過第二處理器102壓縮編碼成H.264格式的碼流,然后將碼 流送給手機的第一處理器101;同時,第一處理器IOI通過音頻輸入模塊104(麥 克風(fēng)等)采集音頻數(shù)據(jù),并將其壓縮成視頻電話協(xié)議規(guī)定的格式(例如AMR格式);
B3:第一處理器101接收到來自第二處理器102發(fā)來的H. 264格式視頻數(shù)據(jù) 和音頻數(shù)據(jù)后,將此音頻數(shù)據(jù)和視頻數(shù)據(jù)通過H. 324協(xié)議編碼發(fā)送到網(wǎng)絡(luò)側(cè)。另一方面,本發(fā)明還提供一種實現(xiàn)手機多媒體數(shù)據(jù)上行與下行的方法,
參見圖l,所述手機系統(tǒng)連接手機網(wǎng)絡(luò)服務(wù)器120,包括以下步驟
建立第一控制單元(主處理器),使第一控制單元在下行中,接收所 述網(wǎng)絡(luò)服務(wù)器120發(fā)送的多媒體數(shù)據(jù),并按照H. 324協(xié)議將其分解為音頻數(shù) 據(jù)和H. 264格式的視頻數(shù)據(jù),再將所述音頻數(shù)據(jù)和視頻數(shù)據(jù)分別發(fā)送至所述 手機系統(tǒng)的音頻輸出模塊103和所述第二控制單元。使第一控制單元在上行
中,接收所述第二控制單元發(fā)送的視頻數(shù)據(jù)和所述手機系統(tǒng)的音頻輸入模 塊104采集的音頻數(shù)據(jù)后,將所述音頻數(shù)據(jù)和視頻數(shù)據(jù)混合編碼發(fā)送至所述 網(wǎng)絡(luò)服務(wù)器120。
建立第二控制單元(協(xié)處理器),接收下行中所述第一控制單元分解 出的視頻數(shù)據(jù)并進(jìn)行解碼,將解碼的視頻數(shù)據(jù)發(fā)送至所述手機系統(tǒng)的顯示 模塊105顯示;使第二控制單元在上行中,接收所迷圖像釆集模塊106發(fā)送 的視頻數(shù)據(jù)并將其壓縮編碼成視頻電話協(xié)議規(guī)定的碼流,然后將所述碼流 發(fā)送至所述第一控制單元。
需要提出的是,本發(fā)明所述的方法和本發(fā)明所述的手機系統(tǒng)100在原理
和實現(xiàn)過程上相同或類似,其具體實施過程見上面已經(jīng)描述的內(nèi)容。
本技術(shù)領(lǐng)域中的普通技術(shù)人員應(yīng)當(dāng)認(rèn)識到,以上的實施例僅是用來說 明本發(fā)明,而并非用作為對本發(fā)明的限定,只要在本發(fā)明的實質(zhì)精神范圍 內(nèi),對以上實施例的變化、變型都將落在本發(fā)明的權(quán)利要求書范圍內(nèi)。
權(quán)利要求
1、一種實現(xiàn)多媒體數(shù)據(jù)上行與下行的手機系統(tǒng),其與網(wǎng)絡(luò)服務(wù)器連接,包括音頻輸入模塊和輸出模塊、顯示模塊以及圖像采集模塊,其特征在于,包括第一處理器,接收下行中的多媒體數(shù)據(jù)并將其分解為音頻數(shù)據(jù)和視頻數(shù)據(jù),將所述音頻數(shù)據(jù)發(fā)送至所述音頻輸出模塊;接收上行中的音頻數(shù)據(jù)和視頻數(shù)據(jù)并將兩者混合編碼并發(fā)送至所述網(wǎng)絡(luò)服務(wù)器;第二處理器,連接所述第一處理器和所述顯示模塊,接收下行中所述第一處理器分解出的視頻數(shù)據(jù)并進(jìn)行解碼,將解碼的視頻數(shù)據(jù)發(fā)送至所述顯示模塊顯示;接收上行中所述圖像采集模塊發(fā)送的視頻數(shù)據(jù)并將其壓縮編碼傳輸至所述第一處理器。
2、 如權(quán)利要求i所述手機系統(tǒng),其特征在于,所述第一處理器為所述 手機系統(tǒng)的主處理器,所述第二處理器為所述手機系統(tǒng)的協(xié)處理器。
3、 如權(quán)利要求i或2所述手機系統(tǒng),其特征在于,所述第一處理器在下行中,接收所述網(wǎng)絡(luò)服務(wù)器發(fā)送的多媒體數(shù)據(jù),并按照H.324協(xié)議將其分解 為音頻數(shù)據(jù)和H.264格式的視頻數(shù)據(jù),再將所述音頻數(shù)據(jù)和視頻數(shù)據(jù)分別發(fā)送至所述音頻輸出模塊和所述第二處理器。
4、 如權(quán)利要求3所述手機系統(tǒng),其特征在于,所述第一處理器在上行中,接收所述第二處理器發(fā)送的視頻數(shù)據(jù)和所述音頻輸入模塊采集的音頻 數(shù)據(jù)后,將所述音頻數(shù)據(jù)和視頻數(shù)據(jù)按照H.324協(xié)議混合編碼發(fā)送至所述網(wǎng)
5、 如權(quán)利要求1或2所述手機系統(tǒng),其特征在于,所述第二處理器在上 行中,接收所述圖像采集模塊發(fā)送的視頻數(shù)據(jù)并將其壓縮編碼成視頻電話 協(xié)議規(guī)定的碼流,然后將所述碼流發(fā)送至所述第一處理器。
6、 一種實現(xiàn)手機多媒體數(shù)據(jù)上行與下行的方法,所述手機系統(tǒng)連接手 機網(wǎng)絡(luò)服務(wù)器,其特征在于,包括以下步驟建立第一控制單元,接收下行中的多媒體數(shù)據(jù)并將其分解為音頻數(shù)據(jù)和 視頻數(shù)據(jù),將所述音頻數(shù)據(jù)發(fā)送至所述手機系統(tǒng)的音頻輸出模塊;接收上行中的音頻數(shù)據(jù)和視頻數(shù)據(jù)并將兩者混合編碼并發(fā)送至所述網(wǎng)絡(luò)服務(wù)器;建立第二控制單元,接收下行中所述第一控制單元分解出的視頻數(shù)據(jù) 并進(jìn)行解碼,將解碼的視頻數(shù)據(jù)發(fā)送至所述手機系統(tǒng)的顯示模塊顯示;接 收上行中所述手機系統(tǒng)的圖像采集模塊發(fā)送的視頻數(shù)據(jù)并將其壓縮編碼傳 輸至所述第一控制單元。
7、 如權(quán)利要求6所述方法,其特征在于,所述第一控制單元為所述手機系統(tǒng)的主處理器,所述第二控制單元為所述手機系統(tǒng)的協(xié)處理器。
8、 如權(quán)利要求6或7所述方法,其特征在于,所述第一控制單元在下行 中,接收所述網(wǎng)絡(luò)服務(wù)器發(fā)送的多媒體數(shù)據(jù),并按照H.324協(xié)議將其分解為 音頻數(shù)據(jù)和H. 264格式的視頻數(shù)據(jù),再將所述音頻數(shù)據(jù)和視頻數(shù)據(jù)分別發(fā)送至所述手機系統(tǒng)的音頻輸出模塊和所述第二控制單元。
9、 如權(quán)利要求8所述方法,其特征在于,所述第一控制單元在上行中,接收所述第二控制單元發(fā)送的視頻數(shù)據(jù)和所述手機系統(tǒng)的音頻輸入模塊釆 集的音頻數(shù)據(jù)后,將所述音頻數(shù)據(jù)和視頻數(shù)據(jù)混合編碼發(fā)送至所述網(wǎng)絡(luò)服 務(wù)器。
10、 如權(quán)利要求6或7所述方法,其特征在于,所述第二控制單元在上 行中,接收所述圖像采集模塊發(fā)送的視頻數(shù)據(jù)并將其壓縮編碼成視頻電話 協(xié)議規(guī)定的碼流,然后將所述碼流發(fā)送至所述第一控制單元。
全文摘要
本發(fā)明揭示了一種實現(xiàn)多媒體數(shù)據(jù)上行與下行的手機系統(tǒng)及方法,其采用了主處理器和協(xié)處理器進(jìn)行上行和下行的控制,并采用了在圖像壓縮技術(shù)上更為先進(jìn)的H.264視頻解碼技術(shù),能夠在較低帶寬上提供高質(zhì)量的圖像傳輸,比MP4要節(jié)約40%左右的碼流,可以大幅提高可視電話、流媒體的效果。
文檔編號H04N7/52GK101646087SQ20091005122
公開日2010年2月10日 申請日期2009年5月14日 優(yōu)先權(quán)日2009年5月14日
發(fā)明者于志斌 申請人:上海聞泰電子科技有限公司