本發(fā)明涉及通信技術(shù)領(lǐng)域,尤其涉及一種視頻背景虛化終端及方法。
背景技術(shù):
背景虛化因其能迅速突出主體而被廣大攝影愛好者所熟知和使用。隨著即時通信技術(shù)的發(fā)展,在網(wǎng)絡(luò)直播或者視頻過程中,通過背景虛化技術(shù)可以保護直播者或視頻者的個人隱私。
通常情況下,在拍攝照片或者錄制視頻時,用戶一般會針對感興趣的拍攝對象進行聚焦,特別是在拍攝人像時,背景虛化的效果非常受歡迎,在這種效果下,拍攝對象本身得以加強,而背景部分則變得模糊。然而,人們在拍攝具有背景虛化效果的照片或者錄制具有背景虛化效果的視頻時,必須使用專業(yè)的單反相機,并經(jīng)過復雜的調(diào)整操作才能達到理想的效果。
為了滿足非專業(yè)攝影用戶的需求,現(xiàn)有一種通過軟件手段對圖像進行處理,以獲得背景虛化效果的方法:用戶在錄制一段視頻后,通過圖像處理軟件打開該視頻,使用圖像處理軟件自帶的工具手動框選出背景區(qū)域。圖像處理軟件對用戶框選出的背景區(qū)域進行相同或漸變尺度的高斯模糊,輸出具有背景虛化效果的視頻圖像。
上述方法需要用戶預先拍好視頻,再對視頻進行處理,無法實現(xiàn)網(wǎng)絡(luò)直播或者及時通信所需要的實時背景虛擬效果。此外,預先拍好的視頻通過軟件打開圖像并手動框選背景區(qū)域,操作過程復雜,無法及時保護用戶隱私。
技術(shù)實現(xiàn)要素:
本發(fā)明的主要目的在于提出一種視頻背景虛化終端及方法,旨在解決用戶在視頻直播或視頻聊天過程中無法及時保護用戶隱私的技術(shù)問題。
為實現(xiàn)上述目的,本發(fā)明提供的一種視頻背景虛化終端,包括第一判斷模塊、啟動模塊和背景虛化模塊,
其中:所述第一判斷模塊,用于根據(jù)當前時刻和當前位置信息確定當前視頻場景;
所述啟動模塊,用于判斷當前視頻場景是否為預設(shè)背景虛化場景,當前視頻場景為預設(shè)背景虛化場景時,開啟背景虛化模式;
所述背景虛化模塊,用于當開啟背景虛化模式時,提取背景虛化區(qū)域,對所述背景虛化區(qū)域進行虛化處理。
進一步的,所述當前視頻場景包括:第一場景、第二場景…第N場景;所述預設(shè)背景虛化場景為所述第一場景至所述第N場景中的一個或多個場景;其中,所述N為自然數(shù);
所述第一判斷模塊包括:
存儲單元,用于時刻位置與場景信息對照表;所述時刻位置與場景信息對照表包括時間段、位置范圍與當前視頻場景的對應(yīng)關(guān)系;
查詢單元,用于在所述時刻位置與場景信息對照表中查找與當前時刻和當前位置信息對應(yīng)的當前視頻場景。
進一步的,所述視頻背景虛化終端還包括:
第二判斷模塊,用于根據(jù)通信錄確定當前視頻對象;
所述啟動模塊,還用于當所述當前視頻對象為預設(shè)背景虛化視頻對象時,開啟背景虛化模式。
進一步的,所述當前視頻對象包括:第一視頻對象、第二視頻對象…第M視頻對象;所述預設(shè)背景虛化視頻對象為所述第一視頻對象至所述第M視頻對象中的一個或多個視頻對象;其中,M為自然數(shù);
所述第二判斷模塊,用于獲取當前視頻對象的通訊信息,根據(jù)所述通訊信息確定當前視頻對象為所述第一視頻對象至所述第M視頻對象中的一種。
進一步的,所述視頻背景虛化終端還包括:
存儲器,用于存儲背景虛化場景和/或背景虛化視頻對象;
所述啟動模塊,還用于當前視頻場景為所述背景虛化場景和/或,當前視頻對象為所述背景虛化視頻對象時,開啟背景虛化模式。
進一步的,所述視頻背景虛化終端還包括:第一攝像頭和第二攝像頭,分別與所述第一攝像頭和所述第二攝像頭連接的控制器,與所述控制器連接的顯示單元,其中:
所述第一攝像頭,用于捕捉目標對象,并對所述目標對象進行對焦;
所述第二攝像頭,用于當開啟所述背景虛化模式時,對所述背景虛化區(qū)域進行虛化處理;
所述控制器,用于將對焦后的所述目標對象和虛化處理后的所述背景虛化區(qū)域進行合成,并控制所述顯示單元顯示合成對象。
為達到上述目的,本發(fā)明另一方面還提供一種視頻背景虛化方法,所述方法包括:
根據(jù)當前時刻和當前位置信息確定當前視頻場景;
判斷當前視頻場景是否為預設(shè)背景虛化場景,若當前視頻場景為預設(shè)背景虛化場景時,開啟背景虛化模式;
當開啟背景虛化模式時,提取背景虛化區(qū)域,對所述背景虛化區(qū)域進行虛化處理。
進一步的,所述當前視頻場景包括:第一場景、第二場景…第N場景;所述預設(shè)背景虛化場景為所述第一場景至所述第N場景中的一個或多個場景;其中,所述N為自然數(shù);
所述根據(jù)當前時刻和當前位置信息確定當前視頻場景包括:
在所述時刻位置與場景信息對照表中查找與當前時刻和當前位置信息對應(yīng)的當前視頻場景;
其中,所述時刻位置與場景信息對照表包括時間段、位置范圍與當前視頻場景的對應(yīng)關(guān)系。
進一步的,所述方法還包括:
根據(jù)通信錄確定當前視頻對象;
當所述當前視頻對象為預設(shè)背景虛化視頻對象時,開啟背景虛化模式。
進一步的,所述方法還包括:
存儲背景虛化場景和/或背景虛化視頻對象;
若當前視頻場景為所述背景虛化場景和/或,當前視頻對象為所述背景虛化視頻對象時,開啟背景虛化模式。
本發(fā)明提出的視頻背景虛化終端及方法,根據(jù)當前時刻和當前位置信息確定當前視頻場景,根據(jù)通訊錄確定當前視頻對象,能夠在視頻聊天或視頻直播中根據(jù)視頻場景或視頻對象自動開始背景虛化模式,通過背景虛化模式很好的保護用戶隱私,提高視頻聊天或視頻直播中的用戶體驗。
附圖說明
圖1為實現(xiàn)本發(fā)明各個實施例的一可選的移動終端的硬件結(jié)構(gòu)示意圖;
圖2為如圖1所示的移動終端的無線通信系統(tǒng)示意圖;
圖3為本發(fā)明提供的一種移動終端的正視圖;
圖4為本發(fā)明提供的一種移動終端的后視圖;
圖5為本發(fā)明中單手握持移動終端的示意圖;
圖6為本發(fā)明一種實施例中視頻背景虛化終端的組成結(jié)構(gòu)示意圖;
圖7為本發(fā)明另一種實施例中視頻背景虛化終端的組成結(jié)構(gòu)示意圖;
圖8為本發(fā)明另一種實施例中視頻背景虛化終端的組成結(jié)構(gòu)示意圖;
圖9為本發(fā)明另一種實施例中視頻背景虛化終端的組成結(jié)構(gòu)示意圖;
圖10為本發(fā)明提供的第一攝像頭與第二攝像頭的結(jié)構(gòu)示意圖;
圖11a為本發(fā)明中雙目測距原理圖;
圖11b為本發(fā)明中3D距離計算示意圖;
圖12為本發(fā)明提供的一種視頻背景虛化方法的流程圖;
本發(fā)明目的的實現(xiàn)、功能特點及優(yōu)點將結(jié)合實施例,參照附圖做進一步說明。
具體實施方式
應(yīng)當理解,此處所描述的具體實施例僅僅用以解釋本發(fā)明,并不用于限定本發(fā)明。
現(xiàn)在將參考附圖描述實現(xiàn)本發(fā)明各個實施例的移動終端。在后續(xù)的描述中,使用用于表示元件的諸如“模塊”、“部件”或“單元”的后綴僅為了有利于本發(fā)明的說明,其本身并沒有特定的意義。因此,"模塊"與"部件"可以混合地使用。
本發(fā)明提供的視頻背景虛化終端可應(yīng)用于以各種形式實施的移動終端中。例如,本發(fā)明中描述的移動終端可以包括諸如移動電話、智能電話、筆記本電腦、數(shù)字廣播接收器、PDA(個人數(shù)字助理)、PAD(平板電腦)、PMP(便攜式多媒體播放器)、導航裝置等等的移動終端以及諸如數(shù)字TV、臺式計算機等等的固定終端。下面,假設(shè)終端是移動終端。然而,本領(lǐng)域技術(shù)人員將理解的是,除了特別用于移動目的的元件之外,根據(jù)本發(fā)明的實施方式的構(gòu)造也能夠應(yīng)用于固定類型的終端。
圖1為實現(xiàn)本發(fā)明各個實施例的一可選的移動終端的硬件結(jié)構(gòu)示意。
移動終端100可以包括無線通信單元110、A/V(音頻/視頻)輸入單元120、用戶輸入單元130、感測單元140、輸出單元150、存儲器160、接口單元170、控制器180和電源單元190等等。圖1示出了具有各種組件的移動終端,但是應(yīng)理解的是,并不要求實施所有示出的組件??梢蕴娲貙嵤└嗷蚋俚慕M件。將在下面詳細描述移動終端的元件。
無線通信單元110通常包括一個或多個組件,其允許移動終端100與無線通信系統(tǒng)或網(wǎng)絡(luò)之間的無線電通信。例如,無線通信單元可以包括廣播接收模塊111、移動通信模塊112、無線互聯(lián)網(wǎng)模塊113、短程通信模塊114和位置信息模塊115中的至少一個。
廣播接收模塊111經(jīng)由廣播信道從外部廣播管理服務(wù)器接收廣播信號和/或廣播相關(guān)信息。廣播信道可以包括衛(wèi)星信道和/或地面信道。廣播管理服務(wù)器可以是生成并發(fā)送廣播信號和/或廣播相關(guān)信息的服務(wù)器或者接收之前生成的廣播信號和/或廣播相關(guān)信息并且將其發(fā)送給終端的服務(wù)器。廣播信號可以包括TV廣播信號、無線電廣播信號、數(shù)據(jù)廣播信號等等。而且,廣播信號可以進一步包括與TV或無線電廣播信號組合的廣播信號。廣播相關(guān)信息也可以經(jīng)由移動通信網(wǎng)絡(luò)提供,并且在該情況下,廣播相關(guān)信息可以由移動通信模塊112來接收。廣播信號可以以各種形式存在,例如,其可以以數(shù)字多媒體廣播(DMB)的電子節(jié)目指南(EPG)、數(shù)字視頻廣播手持(DVB-H)的電子服務(wù)指南(ESG)等等的形式而存在。廣播接收模塊111可以通過使用各種類型的廣播系統(tǒng)接收信號廣播。特別地,廣播接收模塊111可以通過使用諸如多媒體廣播-地面(DMB-T)、數(shù)字多媒體廣播-衛(wèi)星(DMB-S)、數(shù)字視頻廣播-手持(DVB-H),前向鏈路媒體(MediaFLO@)的數(shù)據(jù)廣播系統(tǒng)、地面數(shù)字廣播綜合服務(wù)(ISDB-T)等等的數(shù)字廣播系統(tǒng)接收數(shù)字廣播。廣播接收模塊111可以被構(gòu)造為適合提供廣播信號的各種廣播系統(tǒng)以及上述數(shù)字廣播系統(tǒng)。經(jīng)由廣播接收模塊111接收的廣播信號和/或廣播相關(guān)信息可以存儲在存儲器160(或者其它類型的存儲介質(zhì))中。
移動通信模塊112將無線電信號發(fā)送到基站(例如,接入點、節(jié)點B等等)、外部終端以及服務(wù)器中的至少一個和/或從其接收無線電信號。這樣的無線電信號可以包括語音通話信號、視頻通話信號、或者根據(jù)文本和/或多媒體消息發(fā)送和/或接收的各種類型的數(shù)據(jù)。
無線互聯(lián)網(wǎng)模塊113支持移動終端的無線互聯(lián)網(wǎng)接入。該模塊可以內(nèi)部或外部地耦接到終端。該模塊所涉及的無線互聯(lián)網(wǎng)接入技術(shù)可以包括WLAN(無線LAN)(Wi-Fi)、Wibro(無線寬帶)、Wimax(全球微波互聯(lián)接入)、HSDPA(高速下行鏈路分組接入)等等。
短程通信模塊114是用于支持短程通信的模塊。短程通信技術(shù)的一些示例包括藍牙TM、射頻識別(RFID)、紅外數(shù)據(jù)協(xié)會(IrDA)、超寬帶(UWB)、紫蜂TM等等。
位置信息模塊115是用于檢查或獲取移動終端的位置信息的模塊。位置信息模塊115的典型示例是GPS(全球定位系統(tǒng))。根據(jù)當前的技術(shù),GPS模塊115計算來自三個或更多衛(wèi)星的距離信息和準確的時間信息并且對于計算的信息應(yīng)用三角測量法,從而根據(jù)經(jīng)度、緯度和高度準確地計算三維當前位置信息。當前,用于計算位置和時間信息的方法使用三顆衛(wèi)星并且通過使用另外的一顆衛(wèi)星校正計算出的位置和時間信息的誤差。此外,GPS模塊115能夠通過實時地連續(xù)計算當前位置信息來計算速度信息。
A/V輸入單元120用于接收音頻或視頻信號。A/V輸入單元120可以包括相機121和麥克風122,相機121對在視頻捕獲模式或圖像捕獲模式中由圖像捕獲裝置獲得的靜態(tài)圖片或視頻的圖像數(shù)據(jù)進行處理。處理后的圖像幀可以顯示在顯示單元151上。經(jīng)相機121處理后的圖像幀可以存儲在存儲器160(或其它存儲介質(zhì))中或者經(jīng)由無線通信單元110進行發(fā)送,可以根據(jù)移動終端的構(gòu)造提供兩個或更多相機121。
存儲器160可以存儲由控制器180執(zhí)行的處理和控制操作的軟件程序等等,或者可以暫時地存儲己經(jīng)輸出或?qū)⒁敵龅臄?shù)據(jù)(例如,電話簿、消息、靜態(tài)圖像、視頻等等)。而且,存儲器160可以存儲關(guān)于當觸摸施加到觸摸屏時輸出的各種方式的振動和音頻信號的數(shù)據(jù)。
具體的,存儲器160可以包括至少一種類型的存儲介質(zhì),所述存儲介質(zhì)包括閃存、硬盤、多媒體卡、卡型存儲器(例如,SD或DX存儲器等等)、隨機訪問存儲器(RAM)、靜態(tài)隨機訪問存儲器(SRAM)、只讀存儲器(ROM)、電可擦除可編程只讀存儲器(EEPROM)、可編程只讀存儲器(PROM)、磁性存儲器、磁盤、光盤等等。而且,移動終端100可以與通過網(wǎng)絡(luò)連接執(zhí)行存儲器160的存儲功能的網(wǎng)絡(luò)存儲裝置協(xié)作。
控制器180通??刂埔苿咏K端的總體操作。例如,控制器180執(zhí)行與語音通話、數(shù)據(jù)通信、視頻通話等等相關(guān)的控制和處理。另外,控制器180可以包括用于再現(xiàn)(或回放)多媒體數(shù)據(jù)的多媒體模塊181,多媒體模塊181可以構(gòu)造在控制器180內(nèi),或者可以構(gòu)造為與控制器180分離。控制器180可以執(zhí)行模式識別處理,以將在觸摸屏上執(zhí)行的手寫輸入或者圖片繪制輸入識別為字符或圖像。
輸出單元150被構(gòu)造為以視覺、音頻和/或觸覺方式提供輸出信號(例如,音頻信號、視頻信號、警報信號、振動信號等等)。輸出單元150可以包括顯示單元151、音頻輸出模塊152、警報單元153等等。
顯示單元151可以顯示在移動終端100中處理的信息。例如,當移動終端100處于電話通話模式時,顯示單元151可以顯示與通話或其它通信(例如,文本消息收發(fā)、多媒體文件下載等等)相關(guān)的用戶界面(UI)或圖形用戶界面(GUI)。當移動終端100處于視頻通話模式或者圖像捕獲模式時,顯示單元151可以顯示捕獲的圖像和/或接收的圖像、示出視頻或圖像以及相關(guān)功能的UI或GUI等等。
同時,當顯示單元151和觸摸板以層的形式彼此疊加以形成觸摸屏時,顯示單元151可以用作輸入裝置和輸出裝置。顯示單元151可以包括液晶顯示器(LCD)、薄膜晶體管LCD(TFT-LCD)、有機發(fā)光二極管(OLED)顯示器、柔性顯示器、三維(3D)顯示器等等中的至少一種。這些顯示器中的一些可以被構(gòu)造為透明狀以允許用戶從外部觀看,這可以稱為透明顯示器,典型的透明顯示器可以例如為TOLED(透明有機發(fā)光二極管)顯示器等等。根據(jù)特定想要的實施方式,移動終端100可以包括兩個或更多顯示單元(或其它顯示裝置),例如,移動終端可以包括外部顯示單元(未示出)和內(nèi)部顯示單元(未示出)。觸摸屏可用于檢測觸摸輸入壓力以及觸摸輸入位置和觸摸輸入面積。
音頻輸出模塊152可以在移動終端處于呼叫信號接收模式、通話模式、記錄模式、語音識別模式、廣播接收模式等等模式下時,將無線通信單元110接收的或者在存儲器160中存儲的音頻數(shù)據(jù)轉(zhuǎn)換音頻信號并且輸出為聲音。而且,音頻輸出模塊152可以提供與移動終端100執(zhí)行的特定功能相關(guān)的音頻輸出(例如,呼叫信號接收聲音、消息接收聲音等等)。音頻輸出模塊152可以包括揚聲器、蜂鳴器等等。
警報單元153可以提供輸出以將事件的發(fā)生通知給移動終端100。典型的事件可以包括呼叫接收、消息接收、鍵信號輸入、觸摸輸入等等。除了音頻或視頻輸出之外,警報單元153可以以不同的方式提供輸出以通知事件的發(fā)生。例如,警報單元153可以以振動的形式提供輸出,當接收到呼叫、消息或一些其它進入通信(incomingcommunication)時,警報單元153可以提供觸覺輸出(即,振動)以將其通知給用戶。通過提供這樣的觸覺輸出,即使在用戶的移動電話處于用戶的口袋中時,用戶也能夠識別出各種事件的發(fā)生。警報單元153也可以經(jīng)由顯示單元151或音頻輸出模塊152提供通知事件的發(fā)生的輸出。
用戶輸入單元130可以根據(jù)用戶輸入的命令生成鍵輸入數(shù)據(jù)以控制移動終端的各種操作。用戶輸入單元130允許用戶輸入各種類型的信息,并且可以包括鍵盤、鍋仔片、觸摸板(例如,檢測由于被接觸而導致的電阻、壓力、電容等等的變化的觸敏組件)、滾輪、搖桿等等。特別地,當觸摸板以層的形式疊加在顯示單元151上時,可以形成觸摸屏。
感測單元140檢測移動終端100的當前狀態(tài),(例如,移動終端100的打開或關(guān)閉狀態(tài))、移動終端100的位置、用戶對于移動終端100的接觸(即,觸摸輸入)的有無、移動終端100的取向、移動終端100的加速或減速移動和方向等等,并且生成用于控制移動終端100的操作的命令或信號。例如,當移動終端100實施為滑動型移動電話時,感測單元140可以感測該滑動型電話是打開還是關(guān)閉。另外,感測單元140能夠檢測電源單元190是否提供電力或者接口單元170是否與外部裝置耦接。
接口單元170用作至少一個外部裝置與移動終端100連接可以通過的接口。例如,外部裝置可以包括有線或無線頭戴式耳機端口、外部電源(或電池充電器)端口、有線或無線數(shù)據(jù)端口、存儲卡端口、用于連接具有識別模塊的裝置的端口、音頻輸入/輸出(I/O)端口、視頻I/O端口、耳機端口等等。接口單元170可以用于接收來自外部裝置的輸入(例如,數(shù)據(jù)信息、電力等等)并且將接收到的輸入傳輸?shù)揭苿咏K端100內(nèi)的一個或多個元件或者可以用于在移動終端和外部裝置之間傳輸數(shù)據(jù)。
另外,當移動終端100與外部底座連接時,接口單元170可以用作允許通過其將電力從底座提供到移動終端100的路徑或者可以用作允許從底座輸入的各種命令信號通過其傳輸?shù)揭苿咏K端的路徑。從底座輸入的各種命令信號或電力可以用作用于識別移動終端是否準確地安裝在底座上的信號。
電源單元190在控制器180的控制下接收外部電力或內(nèi)部電力并且提供操作各元件和組件所需的適當?shù)碾娏Α?/p>
這里描述的各種實施方式可以以使用例如計算機軟件、硬件或其任何組合的計算機可讀介質(zhì)來實施。對于硬件實施,這里描述的實施方式可以通過使用特定用途集成電路(ASIC)、數(shù)字信號處理器(DSP)、數(shù)字信號處理裝置(DSPD)、可編程邏輯裝置(PLD)、現(xiàn)場可編程門陣列(FPGA)、處理器、控制器、微控制器、微處理器、被設(shè)計為執(zhí)行這里描述的功能的電子單元中的至少一種來實施,在一些情況下,這樣的實施方式可以在控制器180中實施。對于軟件實施,諸如過程或功能的實施方式可以與允許執(zhí)行至少一種功能或操作的單獨的軟件模塊來實施。軟件代碼可以由以任何適當?shù)木幊陶Z言編寫的軟件應(yīng)用程序(或程序)來實施,軟件代碼可以存儲在存儲器160中并且由控制器180執(zhí)行。
至此,己經(jīng)按照其功能描述了移動終端。下面,為了簡要起見,將描述諸如折疊型、直板型、擺動型、滑動型移動終端等等的各種類型的移動終端中的滑動型移動終端作為示例。因此,本發(fā)明能夠應(yīng)用于任何類型的移動終端,并且不限于滑動型移動終端。
如圖1中所示的移動終端100可以被構(gòu)造為利用經(jīng)由幀或分組發(fā)送數(shù)據(jù)的諸如有線和無線通信系統(tǒng)以及基于衛(wèi)星的通信系統(tǒng)來操作。
現(xiàn)在將參考圖2描述其中根據(jù)本發(fā)明的移動終端能夠操作的通信系統(tǒng)。
這樣的通信系統(tǒng)可以使用不同的空中接口和/或物理層。例如,由通信系統(tǒng)使用的空中接口包括例如頻分多址(FDMA)、時分多址(TDMA)、碼分多址(CDMA)和通用移動通信系統(tǒng)(UMTS)(特別地,長期演進(LTE))、全球移動通信系統(tǒng)(GSM)等等。作為非限制性示例,下面的描述涉及CDMA通信系統(tǒng),但是這樣的教導同樣適用于其它類型的系統(tǒng)。
參考圖2,CDMA無線通信系統(tǒng)可以包括多個移動終端100、多個基站(BS)270、基站控制器(BSC)275和移動交換中心(MSC)280。MSC280被構(gòu)造為與公共電話交換網(wǎng)絡(luò)(PSTN)290形成接口。MSC280還被構(gòu)造為與可以經(jīng)由回程線路耦接到基站270的BSC275形成接口?;爻叹€路可以根據(jù)若干己知的接口中的任一種來構(gòu)造,所述接口包括例如E1/T1、ATM,IP、PPP、幀中繼、HDSL、ADSL或xDSL。將理解的是,如圖2中所示的系統(tǒng)可以包括多個BSC2750。
每個BS270可以服務(wù)一個或多個分區(qū)(或區(qū)域),由多向天線或指向特定方向的天線覆蓋的每個分區(qū)放射狀地遠離BS270?;蛘?,每個分區(qū)可以由用于分集接收的兩個或更多天線覆蓋。每個BS270可以被構(gòu)造為支持多個頻率分配,并且每個頻率分配具有特定頻譜(例如,1.25MHz,5MHz等等)。
分區(qū)與頻率分配的交叉可以被稱為CDMA信道。BS270也可以被稱為基站收發(fā)器子系統(tǒng)(BTS)或者其它等效術(shù)語。在這樣的情況下,術(shù)語"基站"可以用于籠統(tǒng)地表示單個BSC275和至少一個BS270?;疽部梢员环Q為"蜂窩站"?;蛘撸囟˙S270的各分區(qū)可以被稱為多個蜂窩站。
如圖2中所示,廣播發(fā)射器(BT)295將廣播信號發(fā)送給在系統(tǒng)內(nèi)操作的移動終端100。如圖1中所示的廣播接收模塊111被設(shè)置在移動終端100處以接收由BT295發(fā)送的廣播信號。在圖2中,示出了幾個全球定位系統(tǒng)(GPS)衛(wèi)星300。衛(wèi)星300幫助定位多個移動終端100中的至少一個。
在圖2中,描繪了多個衛(wèi)星300,但是理解的是,可以利用任何數(shù)目的衛(wèi)星獲得有用的定位信息。如圖1中所示的GPS模塊115通常被構(gòu)造為與衛(wèi)星300配合以獲得想要的定位信息。替代GPS跟蹤技術(shù)或者在GPS跟蹤技術(shù)之外,可以使用可以跟蹤移動終端的位置的其它技術(shù)。另外,至少一個GPS衛(wèi)星300可以選擇性地或者額外地處理衛(wèi)星DMB傳輸。
作為無線通信系統(tǒng)的一個典型操作,BS270接收來自各種移動終端100的反向鏈路信號。移動終端100通常參與通話、消息收發(fā)和其它類型的通信。特定基站270接收的每個反向鏈路信號被在特定BS270內(nèi)進行處理。獲得的數(shù)據(jù)被轉(zhuǎn)發(fā)給相關(guān)的BSC275。BSC提供通話資源分配和包括BS270之間的軟切換過程的協(xié)調(diào)的移動管理功能。BSC275還將接收到的數(shù)據(jù)路由到MSC280,其提供用于與PSTN290形成接口的額外的路由服務(wù)。類似地,PSTN290與MSC280形成接口,MSC與BSC275形成接口,并且BSC275相應(yīng)地控制BS270以將正向鏈路信號發(fā)送到移動終端100。
基于上述移動終端硬件結(jié)構(gòu)以及通信系統(tǒng),提出本發(fā)明各個實施例。
本發(fā)明一種實施例提供了在移動終端上對視頻背景虛化的裝置,顯然在本發(fā)明第一實施例中,在移動終端上對視頻背景虛化的裝置可以通過移動終端來實現(xiàn)。
需要說明的是,移動終端上設(shè)置有用于存儲數(shù)據(jù)的存儲器,這里,對移動終端上存儲器的類型不做限制。
這里,移動終端包括但不限于手機、智能電話、筆記本電腦、數(shù)字廣播接收器、PDA、PAD、PMP、導航裝置等等。
這里,移動終端如果具有操作系統(tǒng),該操作系統(tǒng)可以為UNIX、Linux、Windows、安卓(Android)、Windows Phone等等。
下面以移動終端是手機的情況為例進行說明。
在本發(fā)明第一實施例中,圖3為本發(fā)明第一實施例中移動終端的正視圖,圖4為本發(fā)明第一實施例中移動終端的后視圖。
這里,該移動終端還具有便攜性,具體地,移動終端可以實現(xiàn)單手握持,如此,在各種場景需要采用視頻背景虛化時,可以利用移動終端的便攜性實現(xiàn)視頻背景虛化,圖5為本發(fā)明第一實施例中單手握持移動終端的示意圖。
圖6為本發(fā)明第一實施例一種視頻背景虛化終端的組成結(jié)構(gòu)圖,如圖6所示,所述終端6包括:第一判斷模塊61、啟動模塊62和背景虛化模塊63,其中:
其中,第一判斷模塊61,用于根據(jù)當前時刻和當前位置信息確定當前視頻場景。
啟動模塊62,用于判斷當前視頻場景是否為預設(shè)背景虛化場景,當前視頻場景為預設(shè)背景虛化場景時,開啟背景虛化模式。
背景虛化模塊63,用于當開啟背景虛化模式時,提取背景虛化區(qū)域,對所述背景虛化區(qū)域進行虛化處理。
本實施例中,當前時刻即為當前視頻聊天或視頻直播的具體時刻,例如:早上8:00。
當前位置信息為終端所在地理位置,具體可以通過GPS模塊實現(xiàn)。
在一種實施方式中,所述當前視頻場景包括:第一場景、第二場景…第N場景;所述預設(shè)背景虛化場景為所述第一場景至所述第N場景中的一個或多個場景;其中,所述N為自然數(shù)。例如,在一種具體的實施方式中:所述當前視頻場景包括:辦公場景、家庭場景和公共場景;所述預設(shè)背景虛化場景為家庭場景;
所述第一判斷模塊61包括:
存儲單元611,用于時刻位置與場景信息對照表;所述時刻位置與場景信息對照表包括時間段、位置范圍與當前視頻場景的對應(yīng)關(guān)系;
查詢單元612,用于在所述時刻位置與場景信息對照表中查找與當前時刻和當前位置信息對應(yīng)的當前視頻場景。
例如,在一種情形中,所述當前時刻為工作時間時,且所述當前位置信息為辦公地址時,確定當前視頻場景為辦公場景;
在另一種情形中,所述當前時刻為非工作時間時,且所述當前位置信息為家庭住址時,確定當前視頻場景為家庭場景;
在另一種情形中,所述當前位置信息為所述辦公地址和所述家庭住址以外的位置時,確定當前視頻場景為公共場景。
其中,工作時間為終端用戶預設(shè)設(shè)置的工作時間,例如周一至周五早上9:00~12:00,下午2:00~5:00。辦公地址和家庭住址可以根據(jù)終端用戶的實際情況進行設(shè)置和更改。例如當終端用戶工作變動或搬家時,對應(yīng)的辦公地址或家庭住址可以及時更改,以便對結(jié)果進行精確判斷。
例如,上午10:20分終端用戶打開視頻聊天功能,終端設(shè)備的當前位置信息為用戶提前設(shè)置的辦公地址,則查詢單元612確定當前視頻場景為辦公場景,由于預設(shè)背景虛化場景為家庭場景,此時,啟動模塊62不開啟背景虛化模塊。
在另一實例中,下午10:20分終端用戶打開視頻聊天功能,終端設(shè)備的當前位置信息為用戶提前設(shè)置的家庭地址,則查詢單元612確定當前視頻場景為家庭場景,由于預設(shè)背景虛化場景為家庭場景,此時,啟動模塊62開啟背景虛化模塊。
在另一實施例中,上午12:20分終端用戶打開視頻聊天功能,終端設(shè)備的當前位置信息為所述辦公地址和所述家庭住址以外的位置,則查詢單元612確定當前視頻場景為公共場景,由于預設(shè)背景虛化場景為家庭場景,此時,啟動模塊62不開啟背景虛化模塊。
本發(fā)明實施例提出的視頻背景虛化終端,根據(jù)當前時刻和當前位置信息確定當前視頻場景,根據(jù)通訊錄確定當前視頻對象,能夠在視頻聊天或視頻直播中根據(jù)視頻場景或視頻對象自動開始背景虛化模式,通過背景虛化模式很好的保護用戶隱私,提高視頻聊天或視頻直播中的用戶體驗。
如圖7所示為本發(fā)明另一實施例提出的視頻背景虛化終端7,包括:第二判斷模塊71和啟動模塊72,其中:
第二判斷模塊71,用于根據(jù)通信錄確定當前視頻對象;
啟動模塊72,用于判斷當前視頻場景是否為預設(shè)背景虛化場景,當所述當前視頻對象為預設(shè)背景虛化視頻對象時,開啟背景虛化模式。
其中,所述當前視頻對象包括:第一視頻對象、第二視頻對象…第M視頻對象;所述預設(shè)背景虛化視頻對象為所述第一視頻對象至所述第M視頻對象中的一個或多個視頻對象;其中,M為自然數(shù)。
在一種實施方式中,第二判斷模塊71,用于獲取當前視頻對象的通訊信息,根據(jù)所述通訊信息確定當前視頻對象為第一視頻對象至所述第M視頻對象中的一種,其中,第一視頻對象,第二視頻對象…第M視頻對象具體可以是親朋好友、同事、熟人或陌生人中的一種。
其中,所述通訊信息可以包括通訊對象的姓名、手機號碼、微信號等聯(lián)系方式,以及對該通訊對象的分組標記。其中,分組標記可以包括親朋好友、同事、熟人和陌生人等。
分組標記可以是終端用戶手動標記的,也可以是自動標記的。例如在自動標記這種方式中,第二判斷模塊71進一步包括:
統(tǒng)計模塊711,用于統(tǒng)計終端用戶與通訊對象的通訊次數(shù);其中,所述通訊包括打電話等語音通訊和視頻通訊。
標記模塊712,用于根據(jù)所述通訊次數(shù)標記通訊對象的分組標記;例如,可以將通訊次數(shù)少于5次的標記為模式人,通訊次數(shù)大于5次小于10次的標記為同時,通訊次數(shù)大于10次小于15次的標記為熟人,通訊次數(shù)大于15次的標記為親朋好友。
確定模塊713,用于根據(jù)所述分組標記確定當前視頻對象為親朋好友、同事、熟人或陌生人中的一種。
本實施例中,所述預設(shè)背景虛化視頻對象可以為同事、熟人或陌生人中的至少一個;即預設(shè)背景虛化視頻對象可以為同事、熟人或陌生人;預設(shè)背景虛化視頻對象也可以是熟人和陌生人;或者預設(shè)背景虛化視頻對象也可以是同事和陌生人等等,在此不再贅述。
本實施例提供的視頻背景虛化終端,通過通訊錄判斷當前視頻對象是否為預設(shè)背景虛化對象,通過背景虛化模式很好的保護用戶隱私,提高視頻聊天或視頻直播中的用戶體驗。
如圖8所示為本發(fā)明另一實施例提出的視頻背景虛化終端8,包括:存儲器81和啟動模塊82,其中:
在一種實施方式中,存儲器81,用于存儲背景虛化場景;
所述啟動模塊82,還用于當前視頻場景為所述背景虛化場景時,開啟背景虛化模式。
在另一種實施方式中,存儲器81,用于存儲背景虛化視頻對象;
所述啟動模塊82,用于判斷當前視頻場景是否為預設(shè)背景虛化場景,當前視頻對象為所述背景虛化視頻對象時,開啟背景虛化模式。
在另一種實施方式中,存儲器81,用于存儲背景虛化場景和背景虛化視頻對象;
所述啟動模塊82,用于當前視頻場景為所述背景虛化場景,且當前視頻對象為所述背景虛化視頻對象時,開啟背景虛化模式。
在上述各實施方式中,背景虛化場景為終端用戶預先設(shè)置的需要開啟背景虛化模式的場景,如終端用戶可以設(shè)置背景虛化場景為臥室,廚房等需要保護隱私的地方。背景虛化視頻對象可為用戶預先設(shè)置的需要開啟背景虛化模式的視頻對象,例如終端用戶可以設(shè)置背景虛化視頻對象為爸爸、媽媽、男士或者女士等等需要保護隱私的對象。
本發(fā)明實施例提供的視頻背景虛化終端,通過預先存儲背景虛化場景或背景虛化視頻對象,當終端用戶與預先存儲背景虛化場景或背景虛化視頻對象進行視頻聊天或視頻直播時,自動開啟背景虛化模式,通過背景虛化模式很好的保護用戶隱私,提高視頻聊天或視頻直播中的用戶體驗。
如圖9為本發(fā)明提供的另一種視頻背景虛化終端9,包括:第一判斷模塊91,第二判斷模塊92,啟動模塊93,存儲器94,第一攝像頭95,第二攝像頭96,控制器97和顯示單元98。
其中,第一判斷模塊91,用于用于根據(jù)當前時刻和當前位置信息確定當前視頻場景;對應(yīng)的,啟動模塊93,用于判斷當前視頻場景是否為預設(shè)背景虛化場景,當前視頻場景為預設(shè)背景虛化場景時,開啟背景虛化模式。
在一種實施方式中,所述當前視頻場景包括:辦公場景、家庭場景和公共場景;所述預設(shè)背景虛化場景為家庭場景;
所述第一判斷模塊91包括:
辦公場景確定模塊,用于當所述當前時刻為工作時間時,且所述當前位置信息為辦公地址時,確定當前視頻場景為辦公場景;
家庭場景確定模塊,用于當所述當前時刻為非工作時間時,且所述當前位置信息為家庭住址時,確定當前視頻場景為家庭場景;
公共場景確定模塊,用于當所述當前位置信息為所述辦公地址和所述家庭住址以外的位置時,確定當前視頻場景為公共場景。
其中,工作時間為終端用戶預設(shè)設(shè)置的工作時間,例如周一至周五早上9:00~12:00,下午2:00~5:00。辦公地址和家庭住址可以根據(jù)終端用戶的實際情況進行設(shè)置和更改。例如當終端用戶工作變動或搬家時,對應(yīng)的辦公地址或家庭住址可以及時更改,以便對結(jié)果進行精確判斷。
例如,上午10:20分終端用戶打開視頻聊天功能,終端設(shè)備的當前位置信息為用戶提前設(shè)置的辦公地址,則辦公場景確定模塊確定當前視頻場景為辦公場景,由于預設(shè)背景虛化場景為家庭場景,此時,啟動模塊93不開啟背景虛化模塊。
在另一實例中,下午10:20分終端用戶打開視頻聊天功能,終端設(shè)備的當前位置信息為用戶提前設(shè)置的家庭地址,則家庭場景確定模塊確定當前視頻場景為家庭場景,由于預設(shè)背景虛化場景為家庭場景,此時,啟動模塊93開啟背景虛化模塊。
在另一實施例中,上午12:20分終端用戶打開視頻聊天功能,終端設(shè)備的當前位置信息為所述辦公地址和所述家庭住址以外的位置,則公共場景確定模塊確定當前視頻場景為公共場景,由于預設(shè)背景虛化場景為家庭場景,此時,啟動模塊93不開啟背景虛化模塊。
在另一實例中,上午10:20分終端用戶打開視頻聊天功能,終端設(shè)備的當前位置信息為用戶提前設(shè)置的家庭地址,此時,由于當前時刻與當前位置信息不能組合成上述辦公場景、家庭場景和公共場景中的任何一個場景,則第一判斷模塊91不對當前視頻場景進行判斷,控制器97控制顯示單元98顯示出“場景無法識別”的提示信息,終端用戶根據(jù)該提示信息可以選擇手動開啟啟動模塊93。具體可以通過啟動開關(guān)來實現(xiàn),其中,啟動開關(guān)可以是一個物理實體按鍵,用戶通過按壓該實體按鍵,設(shè)置在該實體按鍵內(nèi)的壓力傳感器感應(yīng)到壓力,從而生成開啟啟動模塊93的指令;啟動開關(guān)也可以是設(shè)置在顯示單元98或觸摸屏上的虛擬按鍵或圖標,用戶通過按壓該虛擬按鍵或圖標,設(shè)置在該虛擬按鍵或圖標下的壓力傳感器感應(yīng)到壓力,從而可以生成開啟啟動模塊93的指令。
顯然,在上述方式中,終端用戶可以根據(jù)需要手動開啟或關(guān)閉背景虛化模式,具體可以通過啟動開關(guān)來實現(xiàn)。其中,啟動開關(guān)可以是一個物理實體按鍵,用戶通過按壓該實體按鍵,設(shè)置在該實體按鍵內(nèi)的壓力傳感器感應(yīng)到壓力,從而生成開啟啟動模塊93的指令;啟動開關(guān)也可以是設(shè)置在顯示單元98或觸摸屏上的虛擬按鍵或圖標,用戶通過按壓該虛擬按鍵或圖標,設(shè)置在該虛擬按鍵或圖標下的壓力傳感器感應(yīng)到壓力,從而可以生成開啟啟動模塊93的指令。
第二判斷模塊92,用于根據(jù)通信錄確定當前視頻對象;對應(yīng)的,啟動模塊93,還用于當所述當前視頻對象為預設(shè)背景虛化視頻對象時,開啟背景虛化模式。
存儲器94,用于存儲背景虛化場景和/或背景虛化視頻對象;對應(yīng)的,啟動模塊93,用于當前視頻場景為所述背景虛化場景和/或,當前視頻對象為所述背景虛化視頻對象時,開啟背景虛化模式。
第一攝像頭95,用于捕捉目標對象,并對所述目標對象進行對焦;
第二攝像頭96,用于當開啟所述背景虛化模式時,對所述背景虛化區(qū)域行虛化處理;
控制器97,用于將對焦后的所述目標對象和虛化處理后的所述背景虛化區(qū)域進行合成,并控制所述顯示單元98顯示合成對象。
其中,所述目標對象當前視頻圖像中的一個或多個人、動物等。所述背景對象為當前視頻圖像中除所述目標對象以外的其他圖像。
在一種實施方式中,所述捕捉目標對象的方法可以為通過人臉識別技術(shù)捕捉當前視頻圖像中的人臉,將所述人臉設(shè)定為所述目標對象,若在視頻聊天的過程中,所述人臉的位置發(fā)生了變化,采用人臉識別技術(shù)可以持續(xù)跟蹤所述人臉所在的位置,從而無需用戶手動切換選擇目標對象的所在位置,即可持續(xù)捕捉視頻聊天中的目標對象。具體地,所述用戶終端在進行視頻聊天時,在顯示單元中可以生成一個預設(shè)圖形,所述預設(shè)圖形的形狀可以包括但不限于矩形,所述用戶終端采用人臉識別技術(shù)可以捕捉到所述目標對象的位置,并以所述預設(shè)圖形進行框選,所述用戶終端根據(jù)當前的矩形得到一個內(nèi)切橢圓(也可以是一個圓,當這個矩形框為正方形時),這個內(nèi)切橢圓之外的區(qū)域就是所述用戶終端要虛化的背景區(qū)域,從而對背景區(qū)域內(nèi)的數(shù)據(jù)進行虛化處理。
在另一種實施方式中,所述用戶終端捕捉目標對象的方法還可以為通過用戶手動選擇目標對象,即所述用戶終端接收用戶視頻圖像中的勾畫軌跡。該勾畫軌跡可以是用戶在觸摸屏上通過滑動形成的閉合軌跡。所述用戶終端根據(jù)所述用戶的勾畫軌跡即可捕捉到視頻中的目標對象,若用戶在視頻中需要切換目標對象時,只需要在所述預覽畫面中重新勾畫目標對象的輪廓即可。當所述用戶終端接收到所述用戶重新勾畫的軌跡時,進行目標對象的切換。具體地,所述用戶終端根據(jù)所述用戶勾畫軌跡確定了所述目標對象后,在所述預覽畫面中將所述目標對象以外的其他區(qū)域確定為需要進行虛化的背景區(qū)域,從而對背景區(qū)域內(nèi)的數(shù)據(jù)進行虛化處理。
進一步地,所述用戶終端在所述錄制的預覽畫面中可以以所述目標對象所在的區(qū)域為中心按預設(shè)間距逐層向外進行背景虛化處理,以使所述預覽畫面中目標對象的背景具有鮮明的層次感,達到更佳的錄制效果。
本發(fā)明實施例中,所述用戶終端捕捉到所述目標對象后,根據(jù)所述目標對象自動確定視頻中的背景對象,當開啟所述背景虛化模式時,自動對所述目標對象進行背景虛化處理,以達到在視頻聊天或視頻直播過程中保護終端用戶隱私的效果。且所述用戶終端利用對焦后的所述目標對象和虛化處理后的所述背景對象合成視頻畫面,通過顯示單元進行實時展現(xiàn)。用戶終端無需進行后期處理即可錄制出具有背景虛化效果的視頻,解決了現(xiàn)有技術(shù)中需要用戶通過軟件打開錄制的圖像并手動框選背景區(qū)域從而導致的背景區(qū)域框定不準確且操作過程復雜的問題,達到提高虛化效果并簡化用戶操作、節(jié)約用戶時間的效果。
在另一種實施方式中,可以利用雙目攝像頭獲取場景的深度信息。再利用場景的深度信息,準確分離出目標對象和背景對象。
雙目視覺是模擬人類視覺原理,使用計算機被動感知距離的方法。從兩個或多個點觀察一個物體,獲取同一物體在不同視角下的圖像,根據(jù)圖像之間像素匹配關(guān)系,通過三角測量原理計算出像素之間的偏移來獲取物體的三維信息。得到物體的深度信息,就可以計算出物體與相機之間的實際距離,物體三維大小,兩點之間實際距離。
本實施例中,可以通過第一攝像頭95和第二攝像頭96獲取視頻場景的深度信息,如圖10,第一攝像頭95和第二攝像頭96通過連接部件90連接,通常情況下,連接部件90的長度不可伸縮,這樣可以保證第一攝像頭95和第二攝像頭96的相對位置始終保持固定不變,從而保證第一攝像頭95和第二攝像頭96能夠在同一時刻從不同視角采集到兩幅視頻圖像。
獲取場景的深度信息方法包括如下步驟:
步驟一:離線標定
標定的目的是獲取第一攝像頭95和第二攝像頭96的內(nèi)參數(shù):焦距,圖像中心,畸變系數(shù)等和外參數(shù):R(旋轉(zhuǎn))矩陣T(平移)矩陣。目前比較常用的方法為張正友的棋盤格標定方法,Opencv和Matlab上均有實現(xiàn)。但是一般為了獲取更高的標定精度,采用工業(yè)級的玻璃面板效果會更好。并且有人也建議使用Matlab,因為精度包括可視化效果會更好一些,并且Matlab的結(jié)果保存為xml,Opencv也可以直接讀入,但是步驟相對于Opencv的麻煩了一些。
具體步驟為:
(1)第一攝像頭95標定,獲取內(nèi)外參數(shù)。
(2)第二攝像頭96標定,獲取內(nèi)外參數(shù)。
(3)雙目標定,獲取第一攝像頭95和第二攝像頭96之間的平移旋轉(zhuǎn)關(guān)系。
步驟二:雙目校正
矯正的目的是去除光學畸變帶來的影響,將第一攝像頭95和第二攝像頭96變?yōu)闃藴市问?。得到的參考圖與目標圖之間,只存在X方向上的差異。提高視差計算的準確性。
矯正分為兩個步驟
1、畸變矯正
2、將第一攝像頭95和第二攝像頭96轉(zhuǎn)換為標準形式。
因為矯正部分,會對圖像所有點的位置進行重新計算,因而算法處理的分辨率越大耗時越大,而且一般需要實時處理兩張圖像。而且這種算法并行化強標準化程度較高,優(yōu)選使用IVE進行硬化,類似Opencv中的加速模式,先得到映射Map,再并行化使用映射Map重新得到像素位置。
步驟三:雙目匹配
雙目匹配是雙目深度估計的核心部分,發(fā)展了很多年,也有非常多的算法,主要目的是計算參考圖與目標圖之間像素的相對匹配點,得到視差圖,主要分為局部和非局部的算法。
一般有下面幾個步驟。
1、匹配誤差計算
2、誤差集成
3、視差圖計算/優(yōu)化
4、視差圖矯正
一般局部算法,使用固定大小或者非固定大小窗口,計算與之所在一行的最優(yōu)匹配位置。求一行最佳對應(yīng)點位置,左右視圖X坐標位置差異為視差圖。為了增加噪聲,光照的魯棒性可以使用固定窗口進行匹配,也可以對圖像使用LBP變換之后再進行匹配。一般的匹配損失計算函數(shù)有:SAD,SSD,NCC等。一般采用最大視差也可以限制最大搜索范圍,也可以使用積分圖和Box Filter進行加速計算。目前效果較好的局部匹配算法為基于Guided Filter的使用Box Filter和積分圖的雙目匹配算法,局部算法易于并行化,計算速度快,但是對于紋理較少的區(qū)域效果不佳,一般對圖像分割,將圖像分為紋理豐富和紋理稀疏的區(qū)域,調(diào)整匹配窗大小,紋理稀疏使用小窗口,來提高匹配效果。
非局部的匹配算法,將搜索視差的任務(wù)看做最小化一個確定的基于全部雙目匹配對的損失函數(shù),求該損失函數(shù)的最小值即可得到最佳的視差關(guān)系,著重解決圖像中不確定區(qū)域的匹配問題,主要有動態(tài)規(guī)劃(Dynamic Programming),信任傳播(BliefPropagation),圖割算法(Graph Cut)。目前效果最好的也是圖割算法,Opencv中提供的圖割算法匹配耗時很大。
圖割算法主要是為了解決動態(tài)規(guī)劃算法不能融合水平和豎直方向連續(xù)性約束的問題,將匹配問題看成是利用這些約束在圖像中尋求最小割問題。
因為考慮到全局能量最小化,非局部算法一般耗時較大,不太好使用硬件加速。但是對于遮擋,紋理稀疏的情況解決的較好。
得到了匹配點之后,一般通過左右視線一致性的方式,檢測和確定具有高置信度的匹配點。很類似前后向光流匹配的思想,只有通過左右視線一致性檢驗的點才認為是穩(wěn)定匹配點。這樣也可以找出因為遮擋,噪聲,誤匹配得到的點。
步驟四:3D距離計算
3D距離計算的目的是根據(jù)視差、基線、內(nèi)參數(shù)計算某一點的實際深度。
參見圖11a,P為物理空間中某一點,c1和c2為兩個攝像機從不同位置觀看,m和m‘為p在不同相機中成像位置。
根據(jù)圖像之間像素的匹配關(guān)系,通過三角測量原理計算出像素之間的偏移來獲取物體的三維信息。如圖11b所示,P為空間中某一點,Ol和Or分別為左右兩個攝像機中心,xl和xr為左右兩邊的成像點。
點P在左右圖像中的成像點的視差d=xl-xr,使用以下公式計算出P點的距離Z。
其中f是第一攝像頭95和第二攝像頭96的焦距,其中,第一攝像頭95和第二攝像頭96的焦距相等,T是兩個數(shù)碼攝像頭之間的間距。
基于上述移動終端硬件結(jié)構(gòu)以及通信系統(tǒng),提出本發(fā)明方法實施例。
如圖12所示,本發(fā)明實施例提出一種視頻背景虛化方法,包括:
S101、根據(jù)當前時刻和當前位置信息確定當前視頻場景;
在一種實施方式中,所述當前視頻場景包括:第一場景、第二場景…第N場景;所述預設(shè)背景虛化場景為所述第一場景至所述第N場景中的一個或多個場景;其中,所述N為自然數(shù);
所述根據(jù)當前時刻和當前位置信息確定當前視頻場景包括:
在所述時刻位置與場景信息對照表中查找與當前時刻和當前位置信息對應(yīng)的當前視頻場景;
其中,所述時刻位置與場景信息對照表包括時間段、位置范圍與當前視頻場景的對應(yīng)關(guān)系。
具體的:
當所述當前時刻為工作時間時,且所述當前位置信息為辦公地址時,確定當前視頻場景為辦公場景;
當所述當前時刻為非工作時間時,且所述當前位置信息為家庭住址時,確定當前視頻場景為家庭場景;
當所述當前位置信息為所述辦公地址和所述家庭住址以外的位置時,確定當前視頻場景為公共場景。
顯然,當前視頻場景還可以包含直播場景、講課場景等等。可以根據(jù)具體的應(yīng)用進行設(shè)置,本發(fā)明不做具體限定。
S102、判斷當前視頻場景是否為預設(shè)背景虛化場景,若當前視頻場景為預設(shè)背景虛化場景時,開啟背景虛化模式。
本步驟中,終端用戶可以預先設(shè)置所述預設(shè)背景虛化場景,例如,可以將家庭場景設(shè)置為背景虛化場景。
S103、根據(jù)通信錄確定當前視頻對象;
其中,所述當前視頻對象包括:第一視頻對象、第二視頻對象…第M視頻對象;例如:親朋好友、同事、熟人和陌生人;
所述根據(jù)通訊錄確定當前視頻對象包括:
獲取當前視頻對象的通訊信息,根據(jù)所述通訊信息確定當前視頻對象為所述第一視頻對象至所述第M視頻對象中的一種。
其中,所述通訊信息可以包括通訊對象的姓名、手機號碼、微信號等聯(lián)系方式,以及對該通訊對象的分組標記。其中,分組標記可以包括親朋好友、同事、熟人和陌生人等。
分組標記可以是終端用戶手動標記的,也可以是自動標記的。
其中,自動標記可以通過如下方式實現(xiàn):
步驟一:統(tǒng)計終端用戶與通訊對象的通訊次數(shù);其中,所述通訊包括打電話等語音通訊和視頻通訊。
步驟二:根據(jù)所述通訊次數(shù)標記通訊對象的分組標記;例如,可以將通訊次數(shù)少于5次的標記為模式人,通訊次數(shù)大于5次小于10次的標記為同時,通訊次數(shù)大于10次小于15次的標記為熟人,通訊次數(shù)大于15次的標記為親朋好友。
步驟三:根據(jù)所述分組標記確定當前視頻對象為所述第一視頻對象至所述第M視頻對象中的一種。
S104、當所述當前視頻對象為預設(shè)背景虛化視頻對象時,開啟背景虛化模式。
本步驟中,終端用戶可以預先設(shè)置所述預設(shè)背景虛化視頻對象,例如,所述預設(shè)背景虛化視頻對象可以設(shè)置為同事、熟人或陌生人中的至少一個。
S105、存儲背景虛化場景和/或背景虛化視頻對象;
其中,背景虛化場景為終端用戶預先設(shè)置的需要開啟背景虛化模式的場景,如終端用戶可以設(shè)置背景虛化場景為臥室,廚房等需要保護隱私的地方。背景虛化視頻對象可為用戶預先設(shè)置的需要開啟背景虛化模式的視頻對象,例如終端用戶可以設(shè)置背景虛化視頻對象為爸爸、媽媽、男士或者女士等等需要保護隱私的對象。
S106、若當前視頻場景為所述背景虛化場景和/或,當前視頻對象為所述背景虛化視頻對象時,開啟背景虛化模式。
需要說明的是,本發(fā)明實施例中,步驟S101~S102可以根據(jù)用戶設(shè)置與步驟S103~S104和步驟S105~S106依據(jù)優(yōu)先級的順序執(zhí)行。用戶可以設(shè)置步驟S101~S102與步驟S103~S104、步驟S105~S106的優(yōu)先級,例如,用戶設(shè)置步驟S101~S102的優(yōu)先級最高,步驟S103~S104的優(yōu)先級次高,步驟S105~S106的優(yōu)先級最低。則在這種實施方式中,上午10:20分終端用戶打開視頻聊天功能,終端設(shè)備優(yōu)先執(zhí)行步驟S101~S102。例如:根據(jù)終端設(shè)備的當前位置信息為用戶提前設(shè)置的辦公地址,則確定當前視頻場景為辦公場景,由于預設(shè)背景虛化場景為家庭場景,此時,不開啟背景虛化模塊。由于優(yōu)先執(zhí)行步驟S101~S102后,未開啟背景虛化模塊,可以根據(jù)優(yōu)先級,繼續(xù)執(zhí)行步驟S103~S104,如在執(zhí)行步驟S103~S104時仍未開啟背景虛化模塊,則根據(jù)優(yōu)先級繼續(xù)執(zhí)行步驟S105~S106;如在執(zhí)行步驟S103~S104時已經(jīng)開啟背景虛化模塊,則不需要執(zhí)行步驟S105~S106。
本實施例中,也可以根據(jù)用戶選擇只進行步驟S101~S102、步驟S103~S104與步驟S105~S106中的一組。
本發(fā)明提出的視頻背景虛化終端及方法,根據(jù)當前時刻和當前位置信息確定當前視頻場景,根據(jù)通訊錄確定當前視頻對象,能夠在視頻聊天或視頻直播中根據(jù)視頻場景或視頻對象自動開始背景虛化模式,通過背景虛化模式很好的保護用戶隱私,提高視頻聊天或視頻直播中的用戶體驗。
需要說明的是,在本文中,術(shù)語“包括”、“包含”或者其任何其他變體意在涵蓋非排他性的包含,從而使得包括一系列要素的過程、方法、物品或者裝置不僅包括那些要素,而且還包括沒有明確列出的其他要素,或者是還包括為這種過程、方法、物品或者裝置所固有的要素。在沒有更多限制的情況下,由語句“包括一個……”限定的要素,并不排除在包括該要素的過程、方法、物品或者裝置中還存在另外的相同要素。
上述本發(fā)明實施例序號僅僅為了描述,不代表實施例的優(yōu)劣。
通過以上的實施方式的描述,本領(lǐng)域的技術(shù)人員可以清楚地了解到上述實施例方法可借助軟件加必需的通用硬件平臺的方式來實現(xiàn),當然也可以通過硬件,但很多情況下前者是更佳的實施方式?;谶@樣的理解,本發(fā)明的技術(shù)方案本質(zhì)上或者說對現(xiàn)有技術(shù)做出貢獻的部分可以以軟件產(chǎn)品的形式體現(xiàn)出來,該計算機軟件產(chǎn)品存儲在一個存儲介質(zhì)(如ROM/RAM、磁碟、光盤)中,包括若干指令用以使得一臺終端終端(可以是手機,計算機,服務(wù)器,空調(diào)器,或者網(wǎng)絡(luò)終端等)執(zhí)行本發(fā)明各個實施例所述的方法。
以上僅為本發(fā)明的優(yōu)選實施例,并非因此限制本發(fā)明的專利范圍,凡是利用本發(fā)明說明書及附圖內(nèi)容所作的等效結(jié)構(gòu)或等效流程變換,或直接或間接運用在其他相關(guān)的技術(shù)領(lǐng)域,均同理包括在本發(fā)明的專利保護范圍內(nèi)。