0處生成音頻信號,例如來自另一個裝置的通信的音頻流。裝置100還可以集成用于將耳機或揚聲器插接到裝置100的耳機插接口以用于音頻信號。全球定位系統(tǒng)160用于確定裝置100的位置。
[0029]裝置100可以生成或獲取第一數(shù)據(jù)164和第二數(shù)據(jù)165。響應(yīng)于用戶的命令,第一數(shù)據(jù)164和第二數(shù)據(jù)165可以是以下一個或多個:圖像、視頻或音頻。一個實施例中,第一數(shù)據(jù)164是由帶有麥克風(fēng)152的第一圖像獲取裝置150獲取的視頻和音頻流,而第二數(shù)據(jù)165是由第二圖像獲取裝置151獲取的一個或多個圖像。處理器120用于控制裝置100的組件并能處理第一數(shù)據(jù)164和第二數(shù)據(jù)165。例如,處理器120可以將第一數(shù)據(jù)164和第二數(shù)據(jù)165組合,使得它們能夠通過收發(fā)器161被同時傳輸給一個或多個裝置。收發(fā)器161能夠?qū)崟r向第二裝置同時發(fā)送第一數(shù)據(jù)164和第二數(shù)據(jù)165。
[0030]第一數(shù)據(jù)164和第二數(shù)據(jù)165可以由處理器120組合以形成混合媒體通信。第一數(shù)據(jù)164和第二數(shù)據(jù)165可以同時在生成混合媒體通信的裝置的顯示器上顯示或在接收混合媒體通信的第二裝置的顯示器上顯示。
[0031]在一個實施例中,混合媒體通信是一種與視頻流組合的圖像,這樣圖像和視頻流在相同顯示器上同時顯示??蓪D像描述為圖片或靜止幀。例如,可以在圖像和視頻流正在獲取的過程中,在顯示器上同時顯示圖像和視頻流,這樣裝置100的用戶能夠看到正被獲取的圖像和視頻流,并因此接收到反饋。圖像和視頻流可以同時在正在接收圖像和視頻流的第二裝置的單個顯示器上顯示。音頻流還可以實時與圖像和視頻流同時發(fā)送。
[0032]可以利用各種方式顯示第一數(shù)據(jù)164和第二數(shù)據(jù)165。在一個實施例中,在顯示器的第一區(qū)域和第二區(qū)域中并排顯示第一數(shù)據(jù)164和第二數(shù)據(jù)165。第一和第二區(qū)域的大小可以相同或不同。在一個實施例中,第一和第二區(qū)域彼此重疊,并且一個可以描述為前景而另一個為背景。在一個實施例中,利用畫中畫技術(shù)顯示第一數(shù)據(jù)164和第二數(shù)據(jù)165。在一個實施例中,將第一數(shù)據(jù)164分割并布置在顯示器內(nèi)相對于第二數(shù)據(jù)165的背景中。
[0033]在一個實施例中,可以交換第一數(shù)據(jù)164和第二數(shù)據(jù)165在顯示器上的位置。這對于包括并排顯示、畫中畫顯示和重疊背景前景顯示的所有實施例都是適用的。用于顯示混合媒體通信的方式可以由缺省設(shè)置控制或可以由用戶定制。在一個實施例中,可以在混合媒體通信的傳輸過程中改變顯示方式。例如,混合媒體通信開始是第一數(shù)據(jù)164與第二數(shù)據(jù)165并排,而在傳輸?shù)闹型究梢赞D(zhuǎn)換為畫中畫的方式。應(yīng)該意識到,在混合媒體通信的發(fā)送和傳輸過程中,顯示方式和位置可以以各種方式轉(zhuǎn)換和交換并可以轉(zhuǎn)換或交換任意次。
[0034]在一個實施例中,創(chuàng)建和發(fā)送混合媒體通信的裝置控制顯示方式和所述轉(zhuǎn)換或交換。在一個實施例中,接收混合媒體通信的裝置控制顯示方式和所述轉(zhuǎn)換或交換。在一個實施例中,通信相關(guān)的任意裝置控制顯示方式。處理器120響應(yīng)于在裝置100的用戶界面接收的命令來執(zhí)行這種控制。
[0035]在一個實施例中,第一和第二裝置同時生成、接收并傳輸混合媒體通信。例如,兩個裝置可以獲取和生成圖像和/或視頻并將該數(shù)據(jù)發(fā)送給其他裝置,并同時從其他裝置接收數(shù)據(jù)并將其顯示。
[0036]在一個實施例中,后置照相機或第二圖像獲取裝置151利用光傳感器162來補償前置照相機的光亮度。例如,前置照相機可以獲取比后置照相機獲取的圖像亮度更亮的用戶臉部的視頻。
[0037]裝置100能夠參與到與其他裝置(例如,手持裝置或計算機)的視頻會議中。在視頻會議中,第一圖像獲取裝置150在裝置100處獲取視頻。例如,第一圖像獲取裝置150獲取用戶或其他對象的視頻。麥克風(fēng)152可以同時獲取與在裝置100處獲取的視頻信號對應(yīng)的音頻信號。類似地,第二裝置也可以獲取音頻和視頻。然后這兩個裝置可以交換視頻和音頻。在視頻會議中,裝置100能夠顯示第二裝置獲取的實時的或直播的視頻流,并在顯示器110的兩個不同區(qū)域中顯示裝置100獲取的視頻。視頻會議還可以包括多個裝置。來自多個裝置的音頻和視頻可以通過裝置100顯示。裝置100可能夠記錄視頻會議,其包括來自多個裝置的音頻和視頻。
[0038]在一個實施例中,裝置100能夠獲取視頻會議或視頻流的截圖。還可以將截圖描述為一種視頻的快照或靜止幀。截圖可以包括來自多個視頻源或只來自一個源的視頻的圖像。截圖可以由用戶選擇或由處理器120隨機選擇。
[0039]在一個實施例中,獲取的用于混合媒體通信的內(nèi)容可以包括獲取內(nèi)容所處的位置數(shù)據(jù)??梢酝ㄟ^全球定位系統(tǒng)160產(chǎn)生該位置數(shù)據(jù)。
[0040]處理器120能夠創(chuàng)建具有多個圖像、音頻部分、視頻、動畫或其任意組合的混合媒體通信。在一個實施例中,無需由裝置100生成或獲取混合媒體通信的內(nèi)容。例如,裝置100可以從另一個裝置接收圖像或其他內(nèi)容,或從網(wǎng)絡(luò)中下載圖像,然后處理器120用其創(chuàng)建混合媒體通信。
[0041]音頻流無需是人類聲音而可以是音樂或其他可聽聲音。在一個實施例中,音頻流與圖像、視頻或混合媒體通信的其他內(nèi)容相關(guān)。尤其是,音頻流可以是對圖像或視頻的口頭描述。例如,用戶會處于休假中,并獲取重要地標(biāo)的圖像,然后裝置100會從用戶獲取描述該地標(biāo)的音頻流。在一個實施例中,音頻并不是一種消息且與混合媒體通信的其他內(nèi)容無關(guān)。
[0042]應(yīng)該意識到,裝置100可以獲取任意順序數(shù)量的音頻或圖像。在一個實施例中,在混合媒體通信的傳輸過程中,首先獲取音頻和視頻然后再獲取圖像。在一個實施例中,混合媒體通信可以是用第一圖像獲取裝置150獲取的連續(xù)的視頻和/或音頻流,以及由第二圖像獲取裝置151順序獲取的多幅圖像,并向第二裝置每次發(fā)送一個作為混合媒體通信的一部分。在一個實施例中,裝置100利用多個照相機同時獲取圖像、視頻和音頻。
[0043]裝置100能夠從另一個裝置接收混合媒體通信或流。在一個實施例中,裝置100一旦接收到混合媒體通信就自動將其顯示。在一個實施例中,裝置100在接收混合媒體通信時,可以使用任意數(shù)量的與接收消息或通信的裝置相關(guān)的標(biāo)準(zhǔn)警報將混合媒體通信向用戶報警。然后用戶可以命令裝置100打開或訪問混合媒體通信。
[0044]在生成混合媒體通信的過程中,裝置100還能夠編輯或過濾混合媒體通信中的內(nèi)容??梢詫D像或視頻運用剪輯、調(diào)亮、顏色受控或其他可用的標(biāo)準(zhǔn)編輯技術(shù)。視頻可以剪短??梢韵蚧旌厦襟w通信的內(nèi)容中添加動畫或其他效果。裝置100可以利用用戶界面接收與編輯、過濾、報警、改變或其他效果相關(guān)的命令。文本和其他效果可以疊加在視頻或圖像的最上層。在一個實施例中,可以添加標(biāo)記以識別圖像中的對象。例如,標(biāo)記可以是指向?qū)ο?例如,樹木或一個部分)的呈箭頭形狀或其他的指示符。圖像中被標(biāo)識的對象還可以是圖像的一個區(qū)域。在一個實施例中,可以改變圖像使得圖像的區(qū)域被放大。這可以描述為對圖像的一部分進行縮放。放大的區(qū)域可以只是在混合媒體通信中顯示的圖像的一部分。
[0045]在一個實施例中,可以將混合媒體通信發(fā)送給以視頻、圖片或其他內(nèi)容為主的網(wǎng)站,使得用戶可以基于命令訪問內(nèi)容或者網(wǎng)站可以自動將該內(nèi)容轉(zhuǎn)發(fā)指定用戶。
[0046]現(xiàn)在參考附圖2,根據(jù)本技術(shù)的實施例的示例環(huán)境的框圖。圖2描述了具有麥克風(fēng)225、圖像獲取裝置230、和區(qū)域210的裝置200。如2還描述了對象215和用戶205。可以利用裝置200來獲取對象215的圖像220。正如所能看到的,圖像220是對象215的圖片,其在圖2中描述為一種結(jié)構(gòu)或地標(biāo),例如建筑物。裝置200還可以通過作為前置照相機的視頻獲取裝置230來記錄用戶205的視頻。用戶205的視頻可以在區(qū)域210內(nèi)顯示。
[0047]區(qū)域210還可以用于顯示其他控件,例如編輯控件或用于選擇觸碰以發(fā)送混合媒體通信的控件。在一個實施例中,在獲取視頻和音頻的同時,用戶205能夠在裝置200的顯示器上看到圖像220。應(yīng)該意識到,可以在視頻獲取之前或獲取過程中通過圖像獲取裝置230獲取圖像220。然后圖像220和視頻被同時發(fā)送給另一個裝置。
[0048]現(xiàn)在參考圖3A,根據(jù)本技術(shù)的實施例的示例環(huán)境的框圖。圖3A示出了裝置300的側(cè)面圖,該裝置300包括前置照相機305、后置照相機310和麥克風(fēng)312。圖3A還示出了用戶314和對象320。在一個實施例中,后置照相機310用于獲取對象320的圖片,前置照相機用于獲取用戶314的視頻,而麥克風(fēng)312用于獲取音頻。利用圖片、視頻和音頻創(chuàng)建混合媒體通信。如果裝置300具有一個以上的照相機則可以獲取圖片、視頻和音頻。此外,可以以任意順序和次序獲取圖片、視頻和音頻,且可以由裝置300及其組件獲取或不由裝置300及其組件獲取。
[0049]在一個實施例中,裝置300獲取對象320的圖片并獲取具有用戶314對相關(guān)對象320進行解釋或向其提供信息的音頻或音軌的視頻。例如,用戶314可以解釋對象320為什么是重要的或用戶314如何到達對象320或任何其他類型的信息。然后利用圖片、音頻和視頻創(chuàng)建混合媒體通信。
[0050]現(xiàn)在參考圖3B,根據(jù)本技術(shù)實施例的示例環(huán)境的框圖。圖3B示出了裝置300的正面圖,該裝置300接收并顯示或播放使用如圖3A所示的獲取的圖片、音頻和視頻創(chuàng)建的混合媒體通信。圖像325是對象320的圖片而視頻330是用戶314的視頻。混合媒體通信的顯示方式可以是以連續(xù)的靜態(tài)方式