本發(fā)明涉及通信技術領域,尤其涉及一種逆光拍照方法及移動終端。
背景技術:
隨著數(shù)碼相機、各種配備攝像頭的移動終端的普及,拍攝數(shù)碼圖像在人們的生活中已經(jīng)是司空見慣的事情。在拍攝時,常常會遇到拍攝目標對象必須逆光的情況。在這種情況下拍攝的圖像常常會因為在圖像的高亮部分或者陰暗部分的細節(jié)缺失而使得圖像的質量大打折扣。
目前,針對逆光場景拍攝的處理方法是:使用HDR(High-Dynamic Range,高動態(tài)范圍圖像)算法拍攝,但是,如果場景中存在比較特殊的部分,比如人像,人臉等等,這時使用HDR算法所合成出來的照片,可能會改變人像的顏色。現(xiàn)有的逆光場景處理算法,在存在人像等比較特殊部分的情況下。處理的效果會出現(xiàn)異常,例如存在色彩不正確、人像不清晰的問題。
技術實現(xiàn)要素:
本發(fā)明實施例提供一種逆光拍照方法及移動終端,以解決在逆光場景下進行拍攝時,當前拍攝對象包含人臉時存在的色彩不正確、人像不清晰的問題。
第一方面,提供了一種逆光拍照方法,應用于具有第一攝像頭和第二攝像頭的移動終端,所述方法包括:
在所述第一攝像頭和第二攝像頭處于預覽狀態(tài)時,對拍攝場景進行對象檢測和亮度檢測;
當檢測到拍攝場景為逆光場景且包括人臉時,分別控制所述第一攝像頭和第二攝像頭以第一曝光方式和第二曝光方式對所述拍攝場景進行采集圖像;
接收移動終端用戶輸入的拍照指令;
獲取所述第一攝像頭按照所述第一曝光方式拍攝的第一圖像;
獲取所述第二攝像頭按照所述第二曝光方式拍攝的第二圖像;
基于所述第一圖像和第二圖像,生成目標圖像。
第二方面,提供了一種移動終端,包括第一攝像頭和第二攝像頭,所述移動終端還包括:
預覽模式進入模塊,用于在所述第一攝像頭和第二攝像頭處于預覽狀態(tài)時,對拍攝場景進行對象檢測和亮度檢測;
曝光參數(shù)采集模塊,用于當檢測到拍攝場景為逆光場景且包括人臉時,分別控制所述第一攝像頭和第二攝像頭以第一曝光方式和第二曝光方式對所述拍攝場景進行采集圖像;
拍照指令接收模塊,用于接收移動終端用戶輸入的拍照指令;
第一圖像得到模塊,用于獲取所述第一攝像頭按照所述第一曝光方式拍攝的第一圖像;
第二圖像得到模塊,用于獲取所述第二攝像頭按照所述第二曝光方式拍攝的第二圖像;
目標圖像生成模塊,用于基于所述第一圖像和第二圖像,生成目標圖像。
這樣,本發(fā)明實施例中,在進行拍攝時,控制移動終端的至少兩個攝像頭進入預覽模式,當檢測到當前拍攝對象包含人臉并且當前拍攝場景為逆光場景時,將獲取在預覽模式基于至少兩個攝像頭以第一曝光方式和第二曝光方式進行圖像采集,當接收到移動終端用戶輸入的拍照指令時,獲取第一攝像頭按照第一曝光方式拍攝的第一圖像,以及獲取第二攝像頭按照第二曝光方式拍攝的第二圖像,最后基于第一圖像和第二圖像獲得目標圖像,由于第一圖像是基于人臉曝光采集的,故而所得的圖像人臉部分清晰,第二圖像是基于所有拍攝對象曝光采集的,故而所得的圖像整體背景清晰,故而最終根據(jù)第一圖像和第二圖像所生成的目標圖像色彩正確且圖像清晰。
上述說明僅是本發(fā)明技術方案的概述,為了能夠更清楚了解本發(fā)明的技術手段,而可依照說明書的內容予以實施,并且為了讓本發(fā)明的上述和其它目的、特征和優(yōu)點能夠更明顯易懂,以下特舉本發(fā)明的具體實施方式。
附圖說明
為了更清楚地說明本發(fā)明實施例的技術方案,下面將對本發(fā)明實施例的描述中所需要使用的附圖作簡單地介紹,顯而易見地,下面描述中的附圖僅僅是本發(fā)明的一些實施例,對于本領域普通技術人員來講,在不付出創(chuàng)造性勞動性的前提下,還可以根據(jù)這些附圖獲得其他的附圖。
圖1是本發(fā)明實施例一的一種逆光拍照方法實施例的流程圖;
圖2是本發(fā)明實施例二的一種逆光拍照方法實施例的流程圖;
圖3是本發(fā)明實施例三的一種移動終端的結構框圖;
圖3a是本發(fā)明實施例三的一種移動終端的結構框圖之一;
圖3b是本發(fā)明實施例三的一種移動終端的結構框圖之二;
圖3c是本發(fā)明實施例三的一種移動終端的結構框圖之三;
圖3d是本發(fā)明實施例三的一種移動終端的結構框圖之四;
圖3e是本發(fā)明實施例三的一種移動終端的結構框圖之五;
圖3f是本發(fā)明實施例三的一種移動終端的結構框圖之六;
圖4是本發(fā)明實施例四的一種移動終端的框圖;
圖5是本發(fā)明實施例五的一種移動終端的結構示意圖。
具體實施方式
下面將結合本發(fā)明實施例中的附圖,對本發(fā)明實施例中的技術方案進行清楚、完整地描述,顯然,所描述的實施例是本發(fā)明一部分實施例,而不是全部的實施例?;诒景l(fā)明中的實施例,本領域普通技術人員在沒有作出創(chuàng)造性勞動前提下所獲得的所有其他實施例,都屬于本發(fā)明保護的范圍。
實施例一
參照圖1,所示為本發(fā)明實施例一提供的一種逆光拍照方法的流程圖,應用于具有第一攝像頭和第二攝像頭的移動終端,該方法具體可以如下步驟:
步驟101,在所述第一攝像頭和第二攝像頭處于預覽狀態(tài)時,對拍攝場景進行對象檢測和亮度檢測。
在具體實現(xiàn)中,移動終端上搭載有至少兩個攝像頭,基于至少兩個攝像頭能夠同步或異步得到多張圖像。當然移動終端上搭載也可以搭載有三個或者三個以上攝像頭,本發(fā)明實施例對此不加以限制。為了便于說明,以下主要以兩個攝像頭為例對于本發(fā)明實施例進行說明。
在一種具體應用中,在拍照時控制移動終端的第一攝像頭和第二攝像頭進入預覽模式。在預覽模式下,可以控制攝像頭進行對象檢測和亮度檢測。其中,對象是指攝像頭所對準的拍攝對象,例如風景或人物等等,亮度則是指當前拍攝情形下的亮度。
步驟102,當檢測到拍攝場景為逆光場景且包括人臉時,分別控制所述第一攝像頭和第二攝像頭以第一曝光方式和第二曝光方式對所述拍攝場景進行采集圖像。
在本發(fā)明實施例中,當檢測到拍攝場景為逆光場景且包括人臉時,將控制移動終端的攝像頭分別按照不同的曝光方式進行圖像采集,以采集到多張拍照對象清晰度存在差異的圖像。
可以理解,在實際中拍攝者最關注拍攝對象是人臉,故而,在本發(fā)明實施例中可以設置為檢測到人臉時進行相應處理。優(yōu)選地,如果拍攝者對于其他拍攝部分也較為關注時,例如人像,也可以基于拍攝者關注部分進行相應處理,本發(fā)明實施例對此不加以限制。
步驟103,接收移動終端用戶輸入的拍照指令。
當用戶在移動終端上點擊拍攝按鈕,或者點擊屏幕的指定位置時,在移動終端上會接收到用戶輸入的拍照指令。
步驟104,獲取所述第一攝像頭按照所述第一曝光方式拍攝的第一圖像。
當用戶使用移動終端拍攝時,控制第一攝像頭基于第一曝光方式進行圖像采集,此時得到人臉清晰的第一圖像。
步驟105,獲取所述第二攝像頭按照所述第二曝光方式拍攝的第二圖像。
當用戶使用移動終端拍攝時,還可以同時控制第二攝像頭基于第二曝光方式進行圖像采集,此時得到背景清晰但人臉較暗的第二圖像。
步驟106,基于所述第一圖像和第二圖像,生成目標圖像。
在具體實現(xiàn)中,當基于第一攝像頭和第二攝像頭分別得到第一圖像和第二圖像后,可以根據(jù)雙攝像頭的景深特性,將第一圖像和第二圖像合成為目標圖像,這樣合成所得到的目標圖像,結合了第一圖像人臉清晰和第二圖像背景清晰的優(yōu)點,故而目標圖像的人臉部分和背景部分都非常清晰、且色彩正確。
當?shù)玫侥繕藞D像時,就可以結束當前拍攝,進入下一輪曝光參數(shù)的圖像采集操作,以進行下一次的拍攝。
這樣,本發(fā)明實施例中,在進行拍攝時,控制移動終端的至少兩個攝像頭進入預覽模式,當檢測到當前拍攝對象包含人臉并且當前拍攝場景為逆光場景時,將獲取在預覽模式基于至少兩個攝像頭以第一曝光方式和第二曝光方式進行圖像采集,當接收到移動終端用戶輸入的拍照指令時,獲取第一攝像頭按照第一曝光方式拍攝的第一圖像,以及獲取第二攝像頭按照第二曝光方式拍攝的第二圖像,最后基于第一圖像和第二圖像獲得目標圖像,由于第一圖像是基于人臉曝光采集的,故而所得的圖像人臉部分清晰,第二圖像是基于所有拍攝對象曝光采集的,故而所得的圖像整體背景清晰,故而最終根據(jù)第一圖像和第二圖像所生成的目標圖像色彩正確且圖像清晰。
實施例二
參照圖2,所示為本發(fā)明實施例二提供的一種逆光拍照方法的流程圖,應用于具有第一攝像頭和第二攝像頭的移動終端,該方法具體可以如下步驟:
步驟201,在所述第一攝像頭和第二攝像頭處于預覽狀態(tài)時,對拍攝場景進行對象檢測和亮度檢測。
本發(fā)明實施例移動終端在用戶進行拍照時,進入預覽狀態(tài)。在預覽狀態(tài)下可以控制移動終端的至少兩個攝像頭進行對象檢測和亮度檢測。
步驟202,當檢測到拍攝場景為逆光場景且包括人臉時,分別控制所述第一攝像頭和第二攝像頭以第一曝光方式和第二曝光方式對所述拍攝場景進行采集圖像。
在預覽模式下,第一攝像頭會基于人臉進行曝光的第二曝光參數(shù),第二攝像頭則會基于當前拍攝對象進行曝光得到第二曝光參數(shù)。
在本發(fā)明的一種優(yōu)選實施例中,所述步驟202可以包括如下子步驟:
控制所述第一攝像頭在采集每幀圖像時,對所述人臉所在圖像區(qū)域進行測光,確定第一曝光參數(shù);
控制所述第二攝像頭在采集每幀圖像時,對整個圖像區(qū)域進行測光,確定第二曝光參數(shù)。
在本發(fā)明實施例中,當用戶使用移動終端進行拍照時,將對于當前拍攝對象以及當前拍攝場景進行測光,如果檢測當前拍攝對象包含人臉并且當前拍攝場景為逆光場景時,將獲取在預覽模式下得到的針對人臉的第一曝光參數(shù),以及,針對整個區(qū)域的第二曝光參數(shù)。然后再分別基于第一曝光參數(shù)和第二曝光參數(shù),得到第一圖像和第二圖像。
步驟203,接收移動終端用戶輸入的拍照指令。
當用戶在移動終端上點擊拍攝按鈕,或者點擊屏幕的指定位置時,在移動終端上會接收到用戶輸入的拍照指令。
步驟204,獲取所述第一攝像頭按照所述第一曝光方式拍攝的第一圖像。
當用戶使用移動終端拍攝時,控制第一攝像頭基于第一曝光方式進行圖像采集,此時得到人臉清晰的第一圖像。
步驟205,獲取所述第二攝像頭按照所述第二曝光方式拍攝的第二圖像。
當用戶使用移動終端拍攝時,還可以同時控制第二攝像頭基于第二曝光方式進行圖像采集,此時得到背景清晰但人臉較暗的第二圖像。
步驟206,基于所述第一圖像和第二圖像,生成目標圖像。
在本發(fā)明實施例中,可以根據(jù)第一圖像和第二圖像,合成得到人臉部分和背景都清晰的目標圖像。在本發(fā)明的一種優(yōu)選實施例中,所述步驟206可以包括如下子步驟:
提取所述第一圖像的人臉區(qū)域圖像;
記錄所述人臉區(qū)域圖像在所述第一圖像中的目標位置。
將所述第二圖像中與所述目標位置相同位置的圖像區(qū)域替換為所述人臉區(qū)域圖像,生成所述目標圖像。
用戶使用移動終端進行拍攝時,攝像頭響應用戶的請求,獲得在焦平面的第一圖像,該第一圖像具有景深信息,景深是拍攝時主體的清晰區(qū)域。
采用第一攝像頭獲得人臉部分清晰的第一圖像后,獲取該圖像的景深信息,其中景深信息可以為拍攝時人臉部分清晰的距離范圍,根據(jù)這個距離范圍,就可以提取出在第一圖像中清晰的人臉部分。同時將記錄人像部分在第一圖像中的目標位置,然后基于目標位置在第二圖像中相應位置進行替換,得到目標圖像。
具體到本發(fā)明實施例,假設第一圖像為圖像A,第二圖像為圖像B,則根據(jù)景深特性提取的人臉部分的圖像則為圖像C,根據(jù)在先記錄的圖像C在圖像A的目標位置,可以將圖像C覆蓋到圖像B的相應位置上,從而得到目標圖像的圖像C。此時,所得的圖像C人臉部分是清晰的,同時背景也是清晰的。
在本發(fā)明的一種優(yōu)選實施例中,所述提取所述第一圖像的人臉區(qū)域圖像的步驟可以包括如下子步驟:
從所述第一圖像識別出人臉,將所述人臉用一矩形框標識;
獲取所述第一圖像的景深信息;
從所述景深信息中提取出所述矩形框的中心像素點到攝像頭的第一距離;
從所述景深信息中提取出所述矩形框中除中心像素點外的其他像素點到攝像頭的第二距離;
計算所述第二距離和所述第一距離之間的差值;
從所述第一圖像中提取出所有所述差值小于預設閾值的像素點;
將提取出的所述像素點作為所述人臉圖像區(qū)域。
首先,根據(jù)人臉識別的結果,可以得到在2D圖像上人臉在整張圖像上的坐標(如:移動終端在拍照時會進行人臉識別,識別到人臉時會在人臉部分用一個矩形框標識出來,這個矩形框就是根據(jù)人臉在第一圖像上的坐標來劃定的),將該坐標定義為P(X,Y)。
然后,獲取第一圖像的景深信息,基于景深信息可以獲取第一圖像中,所有物體到攝像頭的距離,在矩形框的中心點(一定是人臉區(qū)域)到攝像頭的距離D,距離D這個信息可以由景深信息中獲取。
最后,在矩形框坐標P(X,Y)中的所有像素點,如果該像素點的距離與距離D相差較小(如:小于5cm),則可以認為在矩形框的像素點是人臉部分,就可以將這些像素點提取出來作為人臉部分。這樣,就可以將人臉部分和背景部分分離開來了。
需要說明的是,在實施本發(fā)明實施例時,還可以采用其他方式來從第一圖像中分離人臉,人像部分,本發(fā)明實施例對此不加以限制。
步驟207,判斷所述目標圖像中背景區(qū)域圖像與所述人臉區(qū)域圖像的亮度是否協(xié)調。
在具體實現(xiàn)中,合成得到的目標圖像可能存在人臉部分的圖像亮度與整體亮度不協(xié)調。故在本發(fā)明實施例中,可以根據(jù)亮度來判斷人臉部分是否在目標圖像中是否協(xié)調。
在本發(fā)明的一種優(yōu)選實施例中,所述步驟207可以包括如下子步驟:
計算所述目標圖像中背景區(qū)域圖像的第一平均亮度值;
計算所述目標圖像中人臉區(qū)域圖像的第二平均亮度值;
計算所述第一平均亮度值與所述第二平均亮度值之間的差值;
將所述差值與預設閾值進行比較;
若所述差值大于所述預設閾值,則判定所述目標圖像中背景區(qū)域圖像與所述人臉區(qū)域圖像的亮度不協(xié)調。
在本發(fā)明實施例中,將檢測背景整體的圖像亮度S和人臉部分的圖像亮度SF,其中,圖像亮度S可以是第二圖像的平均圖像亮度,圖像亮度SF可以是人像部分在第二圖像的平均圖像亮度,當然,圖像亮度S也可以是目標圖像中背景部分的平均圖像亮度,本發(fā)明實施例對此不加以限制。
計算圖像亮度S和圖像亮度SF之間的差值,基于該該差值判斷圖像亮度S和圖像亮度SF之間是否相差大于閾值H,如果是,則說明人臉部分和目標圖像之間的圖像亮度相差太大,目標圖像的圖像亮度不協(xié)調,如果不是,則說明人像部分和目標圖像之間的圖像亮度相差較小,目標圖像的圖像亮度比較協(xié)調。
步驟208,若所述目標圖像中背景區(qū)域圖像與所述人臉區(qū)域圖像的亮度不協(xié)調,則調整所述目標圖像中所述人臉區(qū)域圖像的亮度。
在具體實現(xiàn)中,合成得到的目標圖像可能存在人像部分的圖像亮度與整體亮度不協(xié)調。如果存在圖像亮度不協(xié)調情況,還可以針對目標圖像的圖像亮度作進一步的調整。
具體到本發(fā)明實施例中,如果存在人臉部分的圖像亮度與目標圖像中的圖像亮度不符,則可以對人臉部分的圖像亮度進行調節(jié)。
在本發(fā)明的一種優(yōu)選實施例中,所述調整所述目標圖像中所述人臉區(qū)域圖像的亮度的步驟可以包括如下子步驟:
獲取所述目標圖像整個圖像區(qū)域對應的灰度直方圖信息;
基于所述灰度直方圖信息,對所述目標圖像中所述人臉區(qū)域圖像進行直方圖規(guī)定化處理。
在本發(fā)明實施例中,如果目標圖像的圖像亮度協(xié)調,則可以獲取灰度直方圖信息,對人臉部分進行直方圖規(guī)定化處理,使得人臉部分與目標圖像亮度相同。此時的目標圖像,不僅人臉部分清晰,背景清晰,且整體的圖像亮度都是協(xié)調的。
具體地,對于目標圖像的人臉部分進行直方圖規(guī)定化處理的具體過程為:基于整張圖像P1(目標圖像)得到一個灰度直方圖A1,人臉部分的圖像P2得到一個灰度直方圖A2,如果P1和P2的平均亮度之間的差值小于一定閾值(如前述的閾值H),則利用目標圖像的灰度直方圖信息,對人臉部分進行直方圖規(guī)定化處理,處理后所得到目標圖像的人臉部分協(xié)調。保存最終的圖像。
需要說明的是,直方圖規(guī)定化是圖像處理中的一種處理手段,根據(jù)灰度直方圖A1對灰度直方圖A2進行調整,使得A2的直方圖的亮度分布趨近與A1的直方圖亮度分布,從而使得人臉部分的圖像P2的亮度接近于整張圖像P1。處理完畢后,得到一張完整的圖像,所得到的圖像亮度就比較均勻,并且沒有過曝過暗信息。
對于處理后的圖像,可以作為最終的圖像進行保存,或者,在移動終端的屏幕上展現(xiàn)給用戶觀看。
需要說明的是,傳統(tǒng)使用HDR算法針對于人像的逆光場景,也是同一般場景下的圖像進行不同曝光,得到三張圖像后進行合成的操作。但是HDR算法沒有對人像,尤其是人臉部分進行處理。所以人臉部分出現(xiàn)較差處理效果(例如色彩不正確或者不自然等等),或者,存在圖像亮度較暗或者圖像亮度不協(xié)調等情況。而應用本發(fā)明實施例,可以對人臉部分相應處理,使得人臉部分色彩正常且自然,得到的效果顯著,并且圖像亮度效果協(xié)調。
除此之外,應用本發(fā)明實施例使得攝像頭的拍攝性能也有大幅度提高。具體地,傳統(tǒng)的HDR算法需要采集三張不同曝光的圖像進行合成操作,而本發(fā)明實施例只需要檢測后進行拍攝,不需要多次設置曝光參數(shù),能夠直接預存好的圖像,使得拍攝速度大幅度提高。
需要說明的是,對于方法實施例,為了簡單描述,故將其都表述為一系列的動作組合,但是本領域技術人員應該知悉,本發(fā)明實施例并不受所描述的動作順序的限制,因為依據(jù)本發(fā)明實施例,某些步驟可以采用其他順序或者同時進行。其次,本領域技術人員也應該知悉,說明書中所描述的實施例均屬于優(yōu)選實施例,所涉及的動作并不一定是本發(fā)明實施例所必須的。
在本發(fā)明實施例中,在所述第一攝像頭和第二攝像頭處于預覽狀態(tài)時,對拍攝場景進行對象檢測和亮度檢測,當檢測到拍攝場景為逆光場景且包括人臉時,分別控制所述第一攝像頭和第二攝像頭以第一曝光方式和第二曝光方式對所述拍攝場景進行采集圖像;接收移動終端用戶輸入的拍照指令,獲取所述第一攝像頭按照所述第一曝光方式拍攝的第一圖像,獲取所述第二攝像頭按照所述第二曝光方式拍攝的第二圖像,基于所述第一圖像和第二圖像,生成目標圖像;通過判斷所述目標圖像中背景區(qū)域圖像與所述人臉區(qū)域圖像的亮度是否協(xié)調,當所述目標圖像中背景區(qū)域圖像與所述人臉區(qū)域圖像的亮度不協(xié)調時,調整所述目標圖像中所述人臉區(qū)域圖像的亮度,使得目標圖像的整體亮度協(xié)調,進一步優(yōu)化了逆光拍照的顯示效果。
實施例三
參照圖3,示出了本發(fā)明實施例四的一種移動終端300的結構框圖,移動終端300能實現(xiàn)實施例一至實施例二中的逆光拍照方法的細節(jié),并達到相同的效果。所述移動終端包括第一攝像頭和第二攝像頭,所述移動終端300可以包括預覽模式進入模塊301,曝光參數(shù)采集模塊302,拍照指令接收模塊303,第一圖像得到模塊304,第二圖像得到模塊305和目標圖像生成模塊306。
預覽模式進入模塊301,用于在所述第一攝像頭和第二攝像頭處于預覽狀態(tài)時,對拍攝場景進行對象檢測和亮度檢測;
曝光參數(shù)采集模塊302,用于當檢測到拍攝場景為逆光場景且包括人臉時,分別控制所述第一攝像頭和第二攝像頭以第一曝光方式和第二曝光方式對所述拍攝場景進行采集圖像;
拍照指令接收模塊303,用于接收移動終端用戶輸入的拍照指令;
第一圖像得到模塊304,用于獲取所述第一攝像頭按照所述第一曝光方式拍攝的第一圖像;
第二圖像得到模塊305,用于獲取所述第二攝像頭按照所述第二曝光方式拍攝的第二圖像;
目標圖像生成模塊306,用于基于所述第一圖像和第二圖像,生成目標圖像。
參照圖3a所示,本發(fā)明的一實施例中提供的移動終端300,所述所述曝光參數(shù)采集模塊302包括第一曝光參數(shù)采集子模塊3021和第二曝光參數(shù)采集子模塊3022。
參照圖3b所示,本發(fā)明的一實施例中提供的移動終端300,所述所述目標圖像生成模塊306,包括人臉區(qū)域圖像提取子模塊3061,目標位置記錄子模塊3062和目標圖像生成子模塊3063。
人臉區(qū)域圖像提取子模塊3061,用于提取所述第一圖像的人臉區(qū)域圖像;
目標位置記錄子模塊3062,用于記錄所述人臉區(qū)域圖像在所述第一圖像中的目標位置。
目標圖像生成子模塊3063,用于將所述第二圖像中與所述目標位置相同位置的圖像區(qū)域替換為所述人臉區(qū)域圖像,生成所述目標圖像。
參照圖3c所示,本發(fā)明的一實施例中提供的移動終端300,所述人臉區(qū)域圖像提取子模塊3061,包括人臉標識單元30611,景深信息獲取單元30612,第一距離提取單元30613,第二距離提取單元30614,差值計算單元30615,像素點提取單元30616和人臉圖像區(qū)域得到單元30617。
人臉標識單元30611,用于從所述第一圖像識別出人臉,將所述人臉用一矩形框標識;
景深信息獲取單元30612,用于獲取所述第一圖像的景深信息;
第一距離提取單元30613,用于從所述景深信息中提取出所述矩形框的中心像素點到攝像頭的第一距離;
第二距離提取單元30614,用于從所述景深信息中提取出所述矩形框中除中心像素點外的其他像素點到攝像頭的第二距離;
差值計算單元30615,用于計算所述第二距離和所述第一距離之間的差值;
像素點提取單元30616,用于從所述第一圖像中提取出所有所述差值小于預設閾值的像素點;
人臉圖像區(qū)域得到單元30617,用于將提取出的所述像素點作為所述人臉圖像區(qū)域。
參照圖3d所示,本發(fā)明的一實施例中提供的移動終端300,所述移動終端還包括圖像亮度判斷模塊307和圖像亮度調整模塊308。
圖像亮度判斷模塊307,用于判斷所述目標圖像中背景區(qū)域圖像與所述人臉區(qū)域圖像的亮度是否協(xié)調;
圖像亮度調整模塊308,用于若所述目標圖像中背景區(qū)域圖像與所述人臉區(qū)域圖像的亮度不協(xié)調,則調整所述目標圖像中所述人臉區(qū)域圖像的亮度。
參照圖3e所示,本發(fā)明的一實施例中提供的移動終端300,所述圖像亮度判斷模塊307,包括第一平均亮度值計算子模塊3071,第二平均亮度值計算子模塊3072,差值計算子模塊3073,差值比較子模塊3074和不協(xié)調判定子模塊3075。
第一平均亮度值計算子模塊3071,用于計算所述目標圖像中背景區(qū)域圖像的第一平均亮度值;
第二平均亮度值計算子模塊3072,用于計算所述目標圖像中人臉區(qū)域圖像的第二平均亮度值;
差值計算子模塊3073,用于計算所述第一平均亮度值與所述第二平均亮度值之間的差值;
差值比較子模塊3074,用于將所述差值與預設閾值進行比較;
不協(xié)調判定子模塊3075,用于若所述差值大于所述預設閾值,則判定所述目標圖像中背景區(qū)域圖像與所述人臉區(qū)域圖像的亮度不協(xié)調。
參照圖3f所示,本發(fā)明的一實施例中提供的移動終端300,所述圖像亮度調整模塊308,包括灰度直方圖信息獲取子模塊3081和均衡化處理子模塊3082。
灰度直方圖信息獲取子模塊3081,用于獲取所述目標圖像整個圖像區(qū)域對應的灰度直方圖信息;
均衡化處理子模塊3082,用于基于所述灰度直方圖信息,對所述目標圖像中所述人臉區(qū)域圖像進行直方圖規(guī)定化處理。
移動終端300能夠實現(xiàn)方法實施例中移動終端實現(xiàn)的各個過程,為避免重復,這里不再贅述。
這樣,本發(fā)明實施例中,在進行拍攝時,控制移動終端的至少兩個攝像頭進入預覽模式,當檢測到當前拍攝對象包含人像并且當前拍攝場景為逆光場景時,將獲取在預覽模式下采集的人像曝光參數(shù)和整體曝光參數(shù),并基于人像曝光參數(shù)采用第一攝像頭進行拍攝得到第一圖像以及基于整體曝光參數(shù)采用第二攝像頭進行拍攝得到第二圖像,最后合成第一圖像和第二圖像獲得目標圖像,由于第一圖像是基于人像曝光采集的,故而所得的圖像人像部分清晰,第二圖像是基于拍攝對象曝光采集的,故而所得的圖像整體背景清晰,所以根據(jù)第一圖像和第二圖像所合成的目標圖像色彩正確且圖像清晰。
實施例四
圖4是本發(fā)明另一個實施例的移動終端的框圖。
圖4所示的移動終端700包括:至少一個處理器701、存儲器702、至少一個網(wǎng)絡接口704、用戶接口703和拍攝組件706,拍攝組件706包括至少兩個攝像頭。移動終端700中的各個組件通過總線系統(tǒng)705耦合在一起。可理解,總線系統(tǒng)705用于實現(xiàn)這些組件之間的連接通信??偩€系統(tǒng)705除包括數(shù)據(jù)總線之外,還包括電源總線、控制總線和狀態(tài)信號總線。但是為了清楚說明起見,在圖4中將各種總線都標為總線系統(tǒng)705。
其中,用戶接口703可以包括顯示器、鍵盤或者點擊設備(例如,鼠標,軌跡球(trackball)、觸感板或者觸摸屏等。
可以理解,本發(fā)明實施例中的存儲器702可以是易失性存儲器或非易失性存儲器,或可包括易失性和非易失性存儲器兩者。其中,非易失性存儲器可以是只讀存儲器(Read-OnlyMemory,ROM)、可編程只讀存儲器(ProgrammableROM,PROM)、可擦除可編程只讀存儲器(ErasablePROM,EPROM)、電可擦除可編程只讀存儲器(ElectricallyEPROM,EEPROM)或閃存。易失性存儲器可以是隨機存取存儲器(RandomAccessMemory,RAM),其用作外部高速緩存。通過示例性但不是限制性說明,許多形式的RAM可用,例如靜態(tài)隨機存取存儲器(StaticRAM,SRAM)、動態(tài)隨機存取存儲器(DynamicRAM,DRAM)、同步動態(tài)隨機存取存儲器(SynchronousDRAM,SDRAM)、雙倍數(shù)據(jù)速率同步動態(tài)隨機存取存儲器(DoubleDataRate SDRAM,DDRSDRAM)、增強型同步動態(tài)隨機存取存儲器(Enhanced SDRAM,ESDRAM)、同步連接動態(tài)隨機存取存儲器(SynchlinkDRAM,SLDRAM)和直接內存總線隨機存取存儲器(DirectRambusRAM,DRRAM)。本發(fā)明實施例描述的系統(tǒng)和方法的存儲器702旨在包括但不限于這些和任意其它適合類型的存儲器。
在一些實施方式中,存儲器702存儲了如下的元素,可執(zhí)行模塊或者數(shù)據(jù)結構,或者他們的子集,或者他們的擴展集:操作系統(tǒng)7021和應用程序7022。
其中,操作系統(tǒng)7021,包含各種系統(tǒng)程序,例如框架層、核心庫層、驅動層等,用于實現(xiàn)各種基礎業(yè)務以及處理基于硬件的任務。應用程序7022,包含各種應用程序,例如媒體播放器(MediaPlayer)、瀏覽器(Browser)等,用于實現(xiàn)各種應用業(yè)務。實現(xiàn)本發(fā)明實施例方法的程序可以包含在應用程序7022中。
在本發(fā)明實施例中,通過調用存儲器702存儲的程序或指令,具體的,可以是應用程序7022中存儲的程序或指令,處理器701用于在所述第一攝像頭和第二攝像頭處于預覽狀態(tài)時,對拍攝場景進行對象檢測和亮度檢測;當檢測到拍攝場景為逆光場景且包括人臉時,分別控制所述第一攝像頭和第二攝像頭以第一曝光方式和第二曝光方式對所述拍攝場景進行采集圖像;接收移動終端用戶輸入的拍照指令;獲取所述第一攝像頭按照所述第一曝光方式拍攝的第一圖像;獲取所述第二攝像頭按照所述第二曝光方式拍攝的第二圖像;基于所述第一圖像和第二圖像,生成目標圖像。
上述本發(fā)明實施例揭示的方法可以應用于處理器701中,或者由處理器701實現(xiàn)。處理器701可能是一種集成電路芯片,具有信號的處理能力。在實現(xiàn)過程中,上述方法的各步驟可以通過處理器701中的硬件的集成邏輯電路或者軟件形式的指令完成。上述的處理器701可以是通用處理器、數(shù)字信號處理器(DigitalSignalProcessor,DSP)、專用集成電路(ApplicationSpecific IntegratedCircuit,ASIC)、現(xiàn)成可編程門陣列(FieldProgrammableGateArray,F(xiàn)PGA)或者其他可編程邏輯器件、分立門或者晶體管邏輯器件、分立硬件組件??梢詫崿F(xiàn)或者執(zhí)行本發(fā)明實施例中的公開的各方法、步驟及邏輯框圖。通用處理器可以是微處理器或者該處理器也可以是任何常規(guī)的處理器等。結合本發(fā)明實施例所公開的方法的步驟可以直接體現(xiàn)為硬件譯碼處理器執(zhí)行完成,或者用譯碼處理器中的硬件及軟件模塊組合執(zhí)行完成。軟件模塊可以位于隨機存儲器,閃存、只讀存儲器,可編程只讀存儲器或者電可擦寫可編程存儲器、寄存器等本領域成熟的存儲介質中。該存儲介質位于存儲器702,處理器701讀取存儲器702中的信息,結合其硬件完成上述方法的步驟。
可以理解的是,本發(fā)明實施例描述的這些實施例可以用硬件、軟件、固件、中間件、微碼或其組合來實現(xiàn)。對于硬件實現(xiàn),處理單元可以實現(xiàn)在一個或多個專用集成電路(ApplicationSpecificIntegratedCircuits,ASIC)、數(shù)字信號處理器(DigitalSignalProcessing,DSP)、數(shù)字信號處理設備(DSPDevice,DSPD)、可編程邏輯設備(ProgrammableLogicDevice,PLD)、現(xiàn)場可編程門陣列(Field-ProgrammableGateArray,F(xiàn)PGA)、通用處理器、控制器、微控制器、微處理器、用于執(zhí)行本申請所述功能的其它電子單元或其組合中。
對于軟件實現(xiàn),可通過執(zhí)行本發(fā)明實施例所述功能的模塊(例如過程、函數(shù)等)來實現(xiàn)本發(fā)明實施例所述的技術。軟件代碼可存儲在存儲器中并通過處理器執(zhí)行。存儲器可以在處理器中或在處理器外部實現(xiàn)。
可選地,處理器701還用于:控制所述第一攝像頭在采集每幀圖像時,對所述人臉所在圖像區(qū)域進行測光,確定第一曝光參數(shù);控制所述第二攝像頭在采集每幀圖像時,對整個圖像區(qū)域進行測光,確定第二曝光參數(shù)。
可選地,處理器701還用于:提取所述第一圖像的人臉區(qū)域圖像;記錄所述人臉區(qū)域圖像在所述第一圖像中的目標位置。將所述第二圖像中與所述目標位置相同位置的圖像區(qū)域替換為所述人臉區(qū)域圖像,生成所述目標圖像。
可選地,處理器701還用于:從所述第一圖像識別出人臉,將所述人臉用一矩形框標識;獲取所述第一圖像的景深信息;從所述景深信息中提取出所述矩形框的中心像素點到攝像頭的第一距離;從所述景深信息中提取出所述矩形框中除中心像素點外的其他像素點到攝像頭的第二距離;計算所述第二距離和所述第一距離之間的差值;從所述第一圖像中提取出所有所述差值小于預設閾值的像素點;將提取出的所述像素點作為所述人臉圖像區(qū)域。
可選地,處理器701還用于:判斷所述目標圖像中背景區(qū)域圖像與所述人臉區(qū)域圖像的亮度是否協(xié)調;若所述目標圖像中背景區(qū)域圖像與所述人臉區(qū)域圖像的亮度不協(xié)調,則調整所述目標圖像中所述人臉區(qū)域圖像的亮度。
可選地,處理器701還用于:計算所述目標圖像中背景區(qū)域圖像的第一平均亮度值;計算所述目標圖像中人臉區(qū)域圖像的第二平均亮度值;計算所述第一平均亮度值與所述第二平均亮度值之間的差值;將所述差值與預設閾值進行比較;若所述差值大于所述預設閾值,則判定所述目標圖像中背景區(qū)域圖像與所述人臉區(qū)域圖像的亮度不協(xié)調。
可選地,處理器701還用于:獲取所述目標圖像整個圖像區(qū)域對應的灰度直方圖信息;基于所述灰度直方圖信息,對所述目標圖像中所述人臉區(qū)域圖像進行直方圖規(guī)定化處理。
移動終端700能夠實現(xiàn)前述實施例中移動終端實現(xiàn)的各個過程,為避免重復,這里不再贅述。
這樣,本發(fā)明實施例中,在進行拍攝時,控制移動終端的至少兩個攝像頭進入預覽模式,當檢測到當前拍攝對象包含人臉并且當前拍攝場景為逆光場景時,將獲取在預覽模式基于至少兩個攝像頭以第一曝光方式和第二曝光方式進行圖像采集,當接收到移動終端用戶輸入的拍照指令時,獲取第一攝像頭按照第一曝光方式拍攝的第一圖像,以及獲取第二攝像頭按照第二曝光方式拍攝的第二圖像,最后基于第一圖像和第二圖像獲得目標圖像,由于第一圖像是基于人臉曝光采集的,故而所得的圖像人臉部分清晰,第二圖像是基于所有拍攝對象曝光采集的,故而所得的圖像整體背景清晰,故而最終根據(jù)第一圖像和第二圖像所生成的目標圖像色彩正確且圖像清晰。
實施例五
圖5是本發(fā)明另一個實施例的移動終端的結構示意圖。
具體地,圖5中的移動終端800可以為手機、平板電腦、個人數(shù)字助理(PersonalDigital Assistant,PDA)、或車載電腦等。
圖5中的移動終端800包括射頻(RadioFrequency,RF)電路810、存儲器820、輸入單元830、顯示單元840、處理器860、音頻電路870、WiFi(WirelessFidelity)模塊880、電源890和拍攝組件850。
其中,輸入單元830可用于接收用戶輸入的數(shù)字或字符信息,以及產生與移動終端800的用戶設置以及功能控制有關的信號輸入。具體地,本發(fā)明實施例中,該輸入單元830可以包括觸控面板831。觸控面板831,也稱為觸摸屏,可收集用戶在其上或附近的觸摸操作(比如用戶使用手指、觸筆等任何適合的物體或附件在觸控面板831上的操作),并根據(jù)預先設定的程式驅動相應的連接裝置??蛇x的,觸控面板831可包括觸摸檢測裝置和觸摸控制器兩個部分。其中,觸摸檢測裝置檢測用戶的觸摸方位,并檢測觸摸操作帶來的信號,將信號傳送給觸摸控制器;觸摸控制器從觸摸檢測裝置上接收觸摸信息,并將它轉換成觸點坐標,再送給該處理器860,并能接收處理器860發(fā)來的命令并加以執(zhí)行。此外,可以采用電阻式、電容式、紅外線以及表面聲波等多種類型實現(xiàn)觸控面板831。除了觸控面板831,輸入單元830還可以包括其他輸入設備832,其他輸入設備832可以包括但不限于物理鍵盤、功能鍵(比如音量控制按鍵、開關按鍵等)、軌跡球、鼠標、操作桿等中的一種或多種。
其中,顯示單元840可用于顯示由用戶輸入的信息或提供給用戶的信息以及移動終端800的各種菜單界面。顯示單元840可包括顯示面板841,可選的,可以采用LCD或有機發(fā)光二極管(OrganicLight-EmittingDiode,OLED)等形式來配置顯示面板841。
應注意,觸控面板831可以覆蓋顯示面板841,形成觸摸顯示屏,當該觸摸顯示屏檢測到在其上或附近的觸摸操作后,傳送給處理器860以確定觸摸事件的類型,隨后處理器860根據(jù)觸摸事件的類型在觸摸顯示屏上提供相應的視覺輸出。
觸摸顯示屏包括應用程序界面顯示區(qū)及常用控件顯示區(qū)。該應用程序界面顯示區(qū)及該常用控件顯示區(qū)的排列方式并不限定,可以為上下排列、左右排列等可以區(qū)分兩個顯示區(qū)的排列方式。該應用程序界面顯示區(qū)可以用于顯示應用程序的界面。每一個界面可以包含至少一個應用程序的圖標和/或widget桌面控件等界面元素。該應用程序界面顯示區(qū)也可以為不包含任何內容的空界面。該常用控件顯示區(qū)用于顯示使用率較高的控件,例如,設置按鈕、界面編號、滾動條、電話本圖標等應用程序圖標等。
拍攝組件850包括第一攝像頭8051和第一攝像頭8052,第一攝像頭8051按照所述第一曝光方式拍攝的第一圖像,第一攝像頭8052用于按照所述第二曝光方式拍攝的第二圖像,并將第一圖像和第二圖像發(fā)送至處理器860。
其中處理器860是移動終端800的控制中心,利用各種接口和線路連接整個手機的各個部分,通過運行或執(zhí)行存儲在第一存儲器821內的軟件程序和/或模塊,以及調用存儲在第二存儲器822內的數(shù)據(jù),執(zhí)行移動終端800的各種功能和處理數(shù)據(jù),從而對移動終端800進行整體監(jiān)控??蛇x的,處理器860可包括一個或多個處理單元。
在本發(fā)明實施例中,通過調用存儲該第一存儲器821內的軟件程序和/或模塊和/或該第二存儲器822內的數(shù)據(jù),處理器860用于在所述第一攝像頭和第二攝像頭處于預覽狀態(tài)時,對拍攝場景進行對象檢測和亮度檢測;當檢測到拍攝場景為逆光場景且包括人臉時,分別控制所述第一攝像頭和第二攝像頭以第一曝光方式和第二曝光方式對所述拍攝場景進行采集圖像;接收移動終端用戶輸入的拍照指令;獲取所述第一攝像頭按照所述第一曝光方式拍攝的第一圖像;獲取所述第二攝像頭按照所述第二曝光方式拍攝的第二圖像;基于所述第一圖像和第二圖像,生成目標圖像。
可選地,所述處理器860還用于:控制所述第一攝像頭在采集每幀圖像時,對所述人臉所在圖像區(qū)域進行測光,確定第一曝光參數(shù);控制所述第二攝像頭在采集每幀圖像時,對整個圖像區(qū)域進行測光,確定第二曝光參數(shù)。
可選地,所述處理器860還用于:提取所述第一圖像的人臉區(qū)域圖像;記錄所述人臉區(qū)域圖像在所述第一圖像中的目標位置。將所述第二圖像中與所述目標位置相同位置的圖像區(qū)域替換為所述人臉區(qū)域圖像,生成所述目標圖像。
可選地,所述處理器860還用于:從所述第一圖像識別出人臉,將所述人臉用一矩形框標識;獲取所述第一圖像的景深信息;從所述景深信息中提取出所述矩形框的中心像素點到攝像頭的第一距離;從所述景深信息中提取出所述矩形框中除中心像素點外的其他像素點到攝像頭的第二距離;計算所述第二距離和所述第一距離之間的差值;從所述第一圖像中提取出所有所述差值小于預設閾值的像素點;將提取出的所述像素點作為所述人臉圖像區(qū)域。
可選地,所述處理器860還用于:判斷所述目標圖像中背景區(qū)域圖像與所述人臉區(qū)域圖像的亮度是否協(xié)調;若所述目標圖像中背景區(qū)域圖像與所述人臉區(qū)域圖像的亮度不協(xié)調,則調整所述目標圖像中所述人臉區(qū)域圖像的亮度。
可選地,所述處理器860還用于:計算所述目標圖像中背景區(qū)域圖像的第一平均亮度值;計算所述目標圖像中人臉區(qū)域圖像的第二平均亮度值;計算所述第一平均亮度值與所述第二平均亮度值之間的差值;將所述差值與預設閾值進行比較;若所述差值大于所述預設閾值,則判定所述目標圖像中背景區(qū)域圖像與所述人臉區(qū)域圖像的亮度不協(xié)調。
可選地,所述處理器860還用于:獲取所述目標圖像整個圖像區(qū)域對應的灰度直方圖信息;基于所述灰度直方圖信息,對所述目標圖像中所述人臉區(qū)域圖像進行直方圖規(guī)定化處理。
對于移動終端800實施例而言,由于其與方法實施例基本相似,所以描述的比較簡單,相關之處參見方法實施例的部分說明即可。
這樣,本發(fā)明實施例中,在進行拍攝時,控制移動終端的至少兩個攝像頭進入預覽模式,當檢測到當前拍攝對象包含人臉并且當前拍攝場景為逆光場景時,將獲取在預覽模式基于至少兩個攝像頭以第一曝光方式和第二曝光方式進行圖像采集,當接收到移動終端用戶輸入的拍照指令時,獲取第一攝像頭按照第一曝光方式拍攝的第一圖像,以及獲取第二攝像頭按照第二曝光方式拍攝的第二圖像,最后基于第一圖像和第二圖像獲得目標圖像,由于第一圖像是基于人臉曝光采集的,故而所得的圖像人臉部分清晰,第二圖像是基于所有拍攝對象曝光采集的,故而所得的圖像整體背景清晰,故而最終根據(jù)第一圖像和第二圖像所生成的目標圖像色彩正確且圖像清晰。
本領域普通技術人員可以意識到,結合本發(fā)明實施例中所公開的實施例描述的各示例的單元及算法步驟,能夠以電子硬件、或者計算機軟件和電子硬件的結合來實現(xiàn)。這些功能究竟以硬件還是軟件方式來執(zhí)行,取決于技術方案的特定應用和設計約束條件。專業(yè)技術人員可以對每個特定的應用來使用不同方法來實現(xiàn)所描述的功能,但是這種實現(xiàn)不應認為超出本發(fā)明的范圍。
所屬領域的技術人員可以清楚地了解到,為描述的方便和簡潔,上述描述的系統(tǒng)、裝置和單元的具體工作過程,可以參考前述方法實施例中的對應過程,在此不再贅述。
在本申請所提供的實施例中,應該理解到,所揭露的裝置和方法,可以通過其它的方式實現(xiàn)。例如,以上所描述的裝置實施例僅僅是示意性的,例如,所述單元的劃分,僅僅為一種邏輯功能劃分,實際實現(xiàn)時可以有另外的劃分方式,例如多個單元或組件可以結合或者可以集成到另一個系統(tǒng),或一些特征可以忽略,或不執(zhí)行。另一點,所顯示或討論的相互之間的耦合或直接耦合或通信連接可以是通過一些接口,裝置或單元的間接耦合或通信連接,可以是電性,機械或其它的形式。
所述作為分離部件說明的單元可以是或者也可以不是物理上分開的,作為單元顯示的部件可以是或者也可以不是物理單元,即可以位于一個地方,或者也可以分布到多個網(wǎng)絡單元上??梢愿鶕?jù)實際的需要選擇其中的部分或者全部單元來實現(xiàn)本實施例方案的目的。
另外,在本發(fā)明各個實施例中的各功能單元可以集成在一個處理單元中,也可以是各個單元單獨物理存在,也可以兩個或兩個以上單元集成在一個單元中。
所述功能如果以軟件功能單元的形式實現(xiàn)并作為獨立的產品銷售或使用時,可以存儲在一個計算機可讀取存儲介質中。基于這樣的理解,本發(fā)明的技術方案本質上或者說對現(xiàn)有技術做出貢獻的部分或者該技術方案的部分可以以軟件產品的形式體現(xiàn)出來,該計算機軟件產品存儲在一個存儲介質中,包括若干指令用以使得一臺計算機設備(可以是個人計算機,服務器,或者網(wǎng)絡設備等)執(zhí)行本發(fā)明各個實施例所述方法的全部或部分步驟。而前述的存儲介質包括:U盤、移動硬盤、ROM、RAM、磁碟或者光盤等各種可以存儲程序代碼的介質。
以上所述,僅為本發(fā)明的具體實施方式,但本發(fā)明的保護范圍并不局限于此,任何熟悉本技術領域的技術人員在本發(fā)明揭露的技術范圍內,可輕易想到變化或替換,都應涵蓋在本發(fā)明的保護范圍之內。因此,本發(fā)明的保護范圍應以權利要求的保護范圍為準。