專利名稱:移動終端及其控制方法
技術(shù)領(lǐng)域:
本發(fā)明涉及移動終端,更具體地涉及移動終端及其控制方法。雖然本發(fā)明適合于大量應(yīng)用,但是其特別適合于用于生成能顯著地將觀看者從視覺疲勞中復(fù)蘇的3D或立體圖像。
背景技術(shù):
通常,可以根據(jù)移動性的存在或不存在來將終端劃分為移動終端和固定終端。并且,可以根據(jù)手提的可獲得性而進(jìn)一步將移動終端劃分為手持終端和車載終端。隨著終端的功能趨向于多樣化,終端被實(shí)現(xiàn)為多媒體播放器型,該多媒體播放器型配備了復(fù)合功能,該復(fù)合功能例如包括圖像或視頻拍攝、音樂或視頻文件重放、游戲、和廣播接收等。為了支持和增加終端功能,可以考慮終端的結(jié)構(gòu)部分和/或軟件部分的改進(jìn)。近來,開發(fā)了能夠拍攝3D(或立體)圖像的便攜相機(jī)??紤]到開發(fā)便攜3D相機(jī)的當(dāng)前趨勢,移動終端將要配備3D拍攝相機(jī)和用于處理3D圖像的處理器。然而,因?yàn)橛筛鶕?jù)現(xiàn)有技術(shù)的3D圖像拍攝相機(jī)和處理器產(chǎn)生的3D圖像對于觀看者或觀眾而言會引起視覺疲勞,所以對于產(chǎn)生3D圖像以防止由于觀看3D圖像而引起的觀眾的疲勞的方法的需求正在上升。
發(fā)明內(nèi)容
因此,本發(fā)明涉及一種移動終端及其控制方法,其基本上消除了由于現(xiàn)有技術(shù)的限制和缺點(diǎn)導(dǎo)致的一個或多個問題。本發(fā)明的一個目的是提供一種移動終端及其控制方法,通過其,可以產(chǎn)生3D圖像以防止由于觀看3D圖像而引起的觀眾疲勞。本發(fā)明的另一個目的是提供一種移動終端及其控制方法,通過其,可以根據(jù)3D圖像模式來產(chǎn)生具有最佳的3D效果的3D圖像。本發(fā)明的另一個目的是提供一種移動終端及其控制方法,通過其,便于3D圖像拍攝者拍攝最佳的3D圖像。本發(fā)明的另外的優(yōu)點(diǎn)、目的和特征將在隨后的描述中部分地給出,并且其的部分對于查看了下面的內(nèi)容的本領(lǐng)域內(nèi)的普通技術(shù)人員而言變得顯然,或者,其部分可以從本發(fā)明的實(shí)踐來獲悉??梢酝ㄟ^在所書的說明書及其權(quán)利要求以及附圖中具體指出的結(jié)構(gòu)來實(shí)現(xiàn)和獲得本發(fā)明的目的和其他優(yōu)點(diǎn)。為了實(shí)現(xiàn)這些目的和其他優(yōu)點(diǎn),并且根據(jù)本發(fā)明的目的,如在此具體表達(dá)和寬泛描述地,根據(jù)本發(fā)明的一 種移動終端包括第一相機(jī)和第二相機(jī),其被配置來拍攝3D圖像; 顯示單元,其顯示由所述第一和第二相機(jī)的至少一個拍攝的圖像;以及,控制器,用于控制所述第一相機(jī)、所述第二相機(jī)和所述顯示單元。而且,所述控制器在由所述第一相機(jī)拍攝的右眼圖像和由所述第二相機(jī)拍攝的左眼圖像上設(shè)置多個分開的部分,然后基于多個所述分開的部分的每一個的深度值來產(chǎn)生所述3D圖像。在本發(fā)明的另一個方面,一種用于控制移動終端的方法包括圖像拍攝步驟,其分別使用第一相機(jī)和第二相機(jī)來拍攝對象的右眼圖像和左眼圖像;分開部分設(shè)置步驟,其在所述圖像拍攝步驟中獲得的所述對象的左右眼圖像的每一個上布置(或設(shè)置)多個分開部分;深度值確定步驟,其確定多個所述分開部分的每一個的深度值;以及,3D圖像產(chǎn)生步驟,其基于在所述深度值確定步驟中確定的多個所述分開部分的每一個的所述深度值,來同步和處理3D圖像,根據(jù)其可以消除觀看者在觀看的情況下的視覺疲勞。因此,本發(fā)明提供了下面的效果和/或優(yōu)點(diǎn)。首先,本發(fā)明可以產(chǎn)生3D圖像,以防止由于觀看3D圖像而導(dǎo)致的觀眾的疲勞。其次,本發(fā)明可以根據(jù)3D圖像模式來產(chǎn)生具有最佳的3D效果的3D圖像。第三,本發(fā)明便于3D圖像拍攝者拍攝最佳的3D圖像。應(yīng)當(dāng)明白,本發(fā)明的上述一般描述和下面的詳細(xì)描述是示例性的和解釋性的,并且意欲提供所要求保護(hù)的本發(fā)明的進(jìn)一步的解釋。
附圖被包括來用于進(jìn)一步理解本發(fā)明,并且被并入本申請和構(gòu)成本申請的一部分,附示了本發(fā)明的實(shí)施例,并且與說明書一起用于解釋本發(fā)明的原理。在附圖中圖1是根據(jù)本發(fā)明的實(shí)施例的移動終端的框圖;圖2A是根據(jù)本發(fā)明的一個實(shí)施例的移動終端的前透視圖;圖2B是根據(jù)本發(fā)明的一個實(shí)施例的移動終端的后透視圖;圖3是根據(jù)本發(fā)明的圖像拍攝處理的示意圖;圖4A和圖4B是根據(jù)每一個3D圖像的會聚點(diǎn)在3D圖像顯示器中的3D效果的示意圖;圖5是根據(jù)本發(fā)明的一個實(shí)施例的深度值確定步驟的示意圖;圖6是根據(jù)本發(fā)明的一個實(shí)施例的深度值計算處理的示意圖;圖7是根據(jù)本發(fā)明的一個實(shí)施例的分開部分設(shè)置步驟和深度值確定步驟的示意圖;圖8是根據(jù)本發(fā)明的另一個實(shí)施例的分開部分設(shè)置步驟和深度值確定步驟的示意圖;圖9A是根據(jù)本發(fā)明的在屬于3D圖像模式的風(fēng)景模式中的預(yù)設(shè)深度值分布的示意圖;圖9B是根據(jù)本發(fā)明的在屬于3D圖像模式的風(fēng)景模式中的在存儲器中存儲的3D 圖像的示意圖;圖9C是根據(jù)本發(fā)明的在顯示單元上顯示3D圖像的情況下,在屬于3D圖像模式的風(fēng)景模式中的3D圖像的示意布局;
圖IOA是根據(jù)本發(fā)明的在屬于3D圖像模式的風(fēng)景內(nèi)聚焦對象模式中的預(yù)設(shè)深度值分布的示意圖;圖IOB是根據(jù)本發(fā)明的在屬于3D圖像模式的風(fēng)景內(nèi)聚焦對象模式中的在存儲器中存儲的3D圖像的示意
圖IOC是根據(jù)本發(fā)明的在顯示單元上顯示3D圖像的情況下,在屬于3D圖像模式的風(fēng)景內(nèi)聚焦對象模式中的3D圖像的示意布局;圖IlA是根據(jù)本發(fā)明的在屬于3D圖像模式的室內(nèi)聚焦對象模式中的預(yù)設(shè)深度值分布的示意圖;圖IlB是根據(jù)本發(fā)明的在屬于3D圖像模式的室內(nèi)聚焦對象模式中的在存儲器中存儲的3D圖像的示意圖;圖IlC是根據(jù)本發(fā)明的在顯示單元上顯示3D圖像的情況下,在屬于3D圖像模式的室內(nèi)聚焦對象模式中的3D圖像的示意布局;圖12A是根據(jù)本發(fā)明的在屬于3D圖像模式的特寫模式中的預(yù)設(shè)深度值分布的示意圖;圖12B是根據(jù)本發(fā)明的在屬于3D圖像模式的特寫模式中在存儲器中存儲的3D圖像的示意圖;圖12C是根據(jù)本發(fā)明的在顯示單元上顯示3D圖像的情況下,在屬于3D圖像模式的特寫模式中的3D圖像的示意布局;圖13A是根據(jù)本發(fā)明的在不匹配部分存在的情況下的移動終端的后視圖;圖13B是在圖13A中所示的移動終端中左右眼圖像的分開部分的深度值分布的示意圖;圖13C是在圖13A中所示的移動終端的顯示單元的示意圖;圖14A是根據(jù)本發(fā)明的在不確定的分開部分存在的情況下的移動終端的后視圖;圖14B是在圖14A中所示的移動終端中3D圖像的分開部分的深度值分布的示意圖;圖14C是在圖14A中所示的移動終端的顯示單元的示意圖;圖15是根據(jù)本發(fā)明的用于控制移動終端的方法的示意流程圖;圖16是根據(jù)本發(fā)明的一個實(shí)施例的在用于控制移動終端的方法中的深度值確定步驟的示意流程圖;圖17是根據(jù)本發(fā)明的第一另外實(shí)施例的在用于控制移動終端的方法中的深度值確定步驟的示意流程圖;圖18是根據(jù)本發(fā)明的第二另外實(shí)施例的在用于控制移動終端的方法中的深度值確定步驟的示意流程圖;以及圖19是根據(jù)本發(fā)明的在用于控制移動終端的方法中的3D圖像產(chǎn)生步驟的示意流程圖。
具體實(shí)施例方式在下面的詳細(xì)描述中,參考附圖,附圖形成說明書的一部分,并且通過例示示出了本發(fā)明的特定實(shí)施例。本技術(shù)領(lǐng)域內(nèi)的普通技術(shù)人員應(yīng)當(dāng)明白,可以使用其他實(shí)施例,并且在不偏離本發(fā)明的范圍的情況下,可以進(jìn)行結(jié)構(gòu)、電氣結(jié)構(gòu)以及過程的改變。每當(dāng)可能時, 貫穿附圖使用相同的附圖標(biāo)記來指示相同或類似的部分。如在此使用地,后綴“模塊” “單元”和“部分”僅用于元件以便便利公開。因此, 未向后綴本身提供重要的含義或角色,并且可以明白,可以一起或可交換地使用“模塊”“單元”和“部分”。在本說明書中所述的移動終端可以包括下述部分之一移動電話、智能電話、筆記本計算機(jī)(膝上型計算機(jī))、數(shù)字廣播終端、PDA(個人數(shù)字助理)、PMP (便攜多媒體播放機(jī)) 和導(dǎo)航系統(tǒng)等。并且,對于本領(lǐng)域內(nèi)的技術(shù)人員顯而易見的是,除了僅適用于移動終端的情況之外,根據(jù)在本說明書中公開的實(shí)施例的配置應(yīng)當(dāng)適用于固定或靜態(tài)終端,諸如數(shù)字TV 和臺式計算機(jī)等。圖1是根據(jù)本發(fā)明的實(shí)施例的移動終端100的框圖。圖1示出的是根據(jù)本發(fā)明的一個實(shí)施例的移動終端100 包括無線通信單元110、 A/V(音頻/視頻)輸入單元120、用戶輸入單元130、感測單元140、輸出單元150、存儲器 160、接口單元170、控制器180、和電源單元190等。圖1示出了具有各個部件的無線終端 100,但是應(yīng)當(dāng)明白,不要求實(shí)現(xiàn)所有圖示的部件??梢蕴娲貙?shí)現(xiàn)更多或更少的部件。在下面的描述中,依序說明上面的部件。無線通信單元110通常包括一個或多個部件,該一個或多個部件允許在移動終端 100與移動終端100所位于的無線通信系統(tǒng)或網(wǎng)絡(luò)之間的無線通信。例如,無線通信單元 110可以包括廣播接收模塊111、移動通信模塊112、無線因特網(wǎng)模塊113、短距離通信模塊 114、和位置定位模塊115等。廣播接收模塊111經(jīng)由廣播信道來從外部廣播管理服務(wù)器接收廣播信號和/或廣播關(guān)聯(lián)信息。廣播信道可以包括衛(wèi)星信道和陸地信道。廣播管理服務(wù)器一般表示產(chǎn)生和發(fā)射廣播信號和/或廣播關(guān)聯(lián)信息的服務(wù)器,或被提供預(yù)先產(chǎn)生的廣播信號和/或廣播關(guān)聯(lián)信息并且然后向終端發(fā)射所提供的信號或信息的服務(wù)器。除了其他信號之外,廣播信號可以被實(shí)現(xiàn)為TV廣播信號、無線電廣播信號和數(shù)據(jù)廣播信號。根據(jù)需要,廣播信號可以進(jìn)一步包括與TV或無線電廣播信號組合的廣播信號。廣播關(guān)聯(lián)信息包括與廣播信道、廣播節(jié)目、廣播服務(wù)提供商等相關(guān)聯(lián)的信息。并且,可以經(jīng)由移動通信網(wǎng)絡(luò)來提供廣播關(guān)聯(lián)信息。在該情況下,移動通信模塊112可以接收廣播關(guān)聯(lián)信息??梢砸愿鞣N形式來實(shí)現(xiàn)廣播關(guān)聯(lián)信息。例如,廣播關(guān)聯(lián)信息可以包括數(shù)字多媒體廣播(DMB)的電子節(jié)目指南(EPG)和手持?jǐn)?shù)字視頻廣播(DVB-H)的電子服務(wù)指南(ESG)。廣播接收模塊111可以被構(gòu)造來接收從各種類型的廣播系統(tǒng)發(fā)射的廣播信號。通過非限定性示例舉例,這樣的廣播系統(tǒng)包括陸地數(shù)字多媒體廣播(DMB-T)、衛(wèi)星數(shù)字多媒體廣播(DMB-S)、手持?jǐn)?shù)字視頻廣播(DVB-H)、DVB-CBMS、0MA-BCAST、被稱為僅媒體前向鏈路 (MediaFLO )的數(shù)據(jù)廣播系統(tǒng)、和陸地綜合業(yè)務(wù)數(shù)字廣播(ISDB-T)??蛇x地,廣播接收模塊111可以被構(gòu)造來適合于其他廣播系統(tǒng)以及上述的數(shù)字廣播系統(tǒng)。由廣播接收模塊111接收的廣播信號和/或廣播關(guān)聯(lián)信息可以被存儲在諸如存儲器160的適當(dāng)裝置中。 移動通信模塊112向/從一個或多個網(wǎng)絡(luò)實(shí)體(例如,基站、外部終端、服務(wù)器等) 發(fā)射/接收無線信號。除了別的形式之外,這樣的無線信號可以根據(jù)文本/多媒體消息的收發(fā)來表示音頻、視頻、和數(shù)據(jù)。無線因特網(wǎng)模塊113支持移動終端100的因特網(wǎng)接入。該模塊可以內(nèi)部或外部地耦合到移動終端100。在該情況下,無線因特網(wǎng)技術(shù)可以包括WLAN(無線局域網(wǎng))(Wi-Fi)、 Wibro (無線寬帶)、WimaX (全球微波接入互操作性)、HSDPA(高速下行鏈路分組接入)等。短距離通信模塊114便于較短距離通信。用于實(shí)現(xiàn)這個模塊的適當(dāng)技術(shù)包括射頻識別(RFID)、紅外線數(shù)據(jù)協(xié)會(IrDA)、超寬帶(UWB)以及被通稱為藍(lán)牙和ZigBee的聯(lián)網(wǎng)技術(shù),這里僅列出了幾種。位置定位模塊115識別或獲得移動終端100的位置,根據(jù)需要,可以使用全球定位系統(tǒng)(GPS)模塊來實(shí)現(xiàn)這個模塊。同時,A/V(音頻/視頻)輸入單元120被構(gòu)造來輸入音頻信號或視頻信號,并且可以包括相機(jī)模塊121和麥克風(fēng)122等。相機(jī)模塊121處理在視頻呼叫模式或拍攝模式中由圖像傳感器獲得的靜止或移動圖像的圖像幀。而且,可以在顯示器151上顯示所處理的圖像幀。由相機(jī)模塊121處理的圖像幀被存儲在存儲器160中,或可以經(jīng)由無線通信單元 110向外部發(fā)射??梢愿鶕?jù)終端的配置類型來提供至少兩個相機(jī)模塊121。而且,可以提供多個相機(jī)121。具體地說,用于拍攝3D圖像3D的右眼圖像R的第一相機(jī)121a和用于拍攝3D圖像3D的左眼圖像L的第二相機(jī)121b構(gòu)成雙鏡相機(jī)。并且, 第三相機(jī)121c是工作在視頻呼叫模式或2D拍攝模式中的相機(jī)。優(yōu)選的是,第一和第二相機(jī)121a和121b能夠拍攝3D圖像3D,并且也能夠用作在視頻呼叫模式或2D拍攝模式中。在便攜裝置在諸如電話呼叫模式、記錄模式和語音識別的特定模式中時,麥克風(fēng) 122接收外部音頻信號。這個音頻信號被處理和轉(zhuǎn)換為電子音頻數(shù)據(jù)。被處理的音頻數(shù)據(jù)被轉(zhuǎn)換為可在呼叫模式的情況下經(jīng)由移動通信模塊112發(fā)射到移動通信基站的格式。麥克風(fēng)122通常包括各種噪聲去除算法,用于去除在接收外部音頻信號的過程中產(chǎn)生的噪聲。用戶輸入單元130響應(yīng)于相關(guān)聯(lián)的輸入裝置或者裝置的用戶操控而產(chǎn)生輸入數(shù)據(jù)。這樣的裝置的示例包括小鍵盤、圓頂開關(guān)、諸如靜壓/電容的觸摸板、轉(zhuǎn)盤、輕搖開關(guān)等。具體示例是其中用戶輸入單元130與顯示器合作地被配置為觸摸板的示例,下面更詳細(xì)地描述該示例。感測單元140檢測移動終端100的當(dāng)前配置,諸如移動終端100的打開/閉合配置、移動終端100的定位、和用戶接觸的存在與不存在等,然后產(chǎn)生用于控制移動終端100 的操作的感測信號。例如,如果移動終端100是滑蓋型,則感測單元140能夠感測滑蓋電話是否打開或關(guān)閉。并且,感測單元140負(fù)責(zé)感測與電源190提供的電力的存在與否,和接口單元170的外部裝置安裝等相關(guān)的功能。同時,感測單元140可以包括接近傳感器141。輸出單元150被配置來輸出音頻信號、視頻信號、和/或警告信號。并且,輸出單元150可以包括顯示器151、音頻輸出模塊152、警報輸出模塊153、和觸覺模塊154等。
顯示器151通常被實(shí)現(xiàn)來可視地顯示(輸出)與移動終端100相關(guān)聯(lián)的信息。例如,如果移動終端在電話呼叫模式中操作,則顯示器通常提供用戶界面(UI)或圖形用戶界面(GUI),用戶界面(UI)或圖形用戶界面(GUI)包括與開始、進(jìn)行和結(jié)束電話呼叫相關(guān)聯(lián)的 in息O 可以使用下述已知的顯示技術(shù)來實(shí)現(xiàn)顯示器151,所述顯示技術(shù)例如包括液晶顯示器(LCD)、薄膜晶體管液晶顯示器(TFT-LCD)、有機(jī)發(fā)光二極管顯示器(OLED)、軟性顯示器、和三維顯示器。移動終端100也可以包括一個或多個這樣的顯示器??梢砸酝该骰蛲腹馀渲脤?shí)現(xiàn)所述顯示器的一些,以從外部能夠透視其中。并且,這樣的顯示器可以被稱為透光顯示器。TOLED (透明0LED)和AMOLED (有源矩陣0LED)等是透光顯示器的代表性示例。并且,顯示器的背面結(jié)構(gòu)也可以具有透光配置。由于這種結(jié)構(gòu),用戶能夠通過由終端主體占用的區(qū)域看到位于終端主體后面的物體。根據(jù)移動終端100的實(shí)現(xiàn)類型,可以在移動終端100中存在至少兩個顯示器151。 例如,可以以彼此隔開或內(nèi)置在一個主體中的方式來在移動終端100的一個表面上布置多個顯示器。又如,可以分別在移動終端100的不同表面上布置多個顯示器。在顯示器151與用于檢測諸如用戶的手指和鋼筆等的指針的接觸行為的傳感器 (以下稱為“觸摸傳感器”)構(gòu)成互層結(jié)構(gòu)(以下稱為“觸摸屏”)的情況下,能夠使用顯示器151作為輸入裝置以及輸出裝置。在該情況下,例如,可以使用接觸膜、接觸片、或接觸板等來構(gòu)造觸摸傳感器。觸摸傳感器可以被構(gòu)造為將向顯示器151的特定部分施加的壓力或從顯示器151 的特定部分產(chǎn)生的電容的變化轉(zhuǎn)換為電輸入信號。而且,能夠配置觸摸傳感器來檢測接觸壓力,以及接觸的位置或大小。如果向觸摸傳感器進(jìn)行了接觸輸入,則與接觸對應(yīng)的信號被傳送到接觸控制器。 接觸控制器處理所述信號,然后將所處理的信號傳送到控制器180。因此,控制器180能夠知道接觸了顯示器151的哪個部分??梢韵蛴捎|摸屏圍繞或在觸摸屏周圍的移動終端100的內(nèi)部區(qū)域提供接近傳感器。接近傳感器是下述傳感器,該傳感器在沒有機(jī)械接觸的情況下,使用電磁場強(qiáng)度或紅外線來檢測接近規(guī)定的檢測表面的物體或位于接近傳感器周圍的物體的存在與否。因此,接近傳感器具有比接觸型傳感器更長的持續(xù)時間,并且也可以具有比接觸型傳感器更寬的用途。接近傳感器可以包括透射光電傳感器、直接反射光電傳感器、鏡反射光電傳感器、 射頻振蕩接近傳感器、靜電電容接近傳感器、磁接近傳感器、和紅外線接近傳感器等之一。 在觸摸屏包括靜電電容接近傳感器的情況下,該傳感器被構(gòu)造來使用根據(jù)指針的接近的電場變化來檢測指針的接近。在該情況下,可以將觸摸屏(觸摸傳感器)分類為接近傳感器。在下面的描述中,為了清楚,指針接近而不接觸所述觸摸屏從而被識別為位于觸摸屏上的行為被稱為“接近接觸”。而且,指針實(shí)際上接觸所述觸摸屏的行為被稱為“觸摸接觸”。由指針接近觸摸的觸摸屏上的位置的含義表示當(dāng)指針執(zhí)行接近觸摸時垂直地對著觸摸屏的指針的位置。接近傳感器檢測接近接觸和接近接觸模式(例如,接近接觸距離、接近接觸持續(xù)時間、接近接觸位置、接近接觸移位狀態(tài)等)。并且,可以向觸摸屏輸出與所檢測的接近接觸行為和所檢測的接近接觸模式對應(yīng)的信息。
音頻輸出模塊152以包括呼叫接收模式、呼叫進(jìn)行模式、記錄模式、語音識別模式、和廣播接收模式等的各種模式來起作用,以輸出從無線通信單元110接收或被存儲在存儲器160中的音頻數(shù)據(jù)。在運(yùn)行期間,音頻輸出模塊152輸出與特定功能(例如,接收到呼叫、接收到消息等)相關(guān)的音頻。經(jīng)常使用一個或多個揚(yáng)聲器、蜂鳴器、其他音頻產(chǎn)生裝置及其組合來實(shí)現(xiàn)音頻輸出模塊152。警報單元153輸出用于聲明與移動終端100相關(guān)聯(lián)的特定事件的發(fā)生的信號。典型事件包括接收到呼叫事件、接收到消息事件、和接收到觸摸輸入事件。警報單元153能夠輸出用于通過振動以及視頻信號或音頻信號來聲明事件發(fā)生的信號。也可以經(jīng)由顯示器 151或音頻輸出模塊152輸出該視頻或音頻信號。因此,顯示器151或音頻輸出模塊152可以被看作為警報單元153的一部分。觸覺模塊154產(chǎn)生可以被用戶感覺到的各種觸覺效果。振動是由觸覺模塊154產(chǎn)生的觸覺效果的代表方式。由觸覺模塊154產(chǎn)生的振動的強(qiáng)度和模式是可控的。例如,可以以合成在一起的方式來輸出或可以依序輸出不同的振動。觸覺模塊154能夠產(chǎn)生各種觸覺效果以及振動。例如,觸覺模塊154可以產(chǎn)生由頂著接觸皮膚表面垂直地移動的引腳布置而產(chǎn)生的效果、經(jīng)由噴射/吸入孔的空氣的噴射 /吸入力而產(chǎn)生的效果、由在皮膚表面上的掠過而產(chǎn)生的效果、由與電極的接觸而產(chǎn)生的效果、由靜電力而產(chǎn)生的效果、以及由使用吸熱或發(fā)熱裝置產(chǎn)生的熱/冷感覺而表示的效果寸。觸覺模塊154可以被實(shí)現(xiàn)為使得用戶能夠經(jīng)由手指或手臂等的肌肉感覺來感覺觸覺效果,并且通過直接接觸來傳送觸覺效果。選用地,可以根據(jù)移動終端100的對應(yīng)配置類型來向移動終端100提供至少兩個觸覺模塊154。存儲器160可以存儲用于控制器180的處理和控制的程序,并且也能夠執(zhí)行輸入 /輸出的數(shù)據(jù)(例如,電話簿數(shù)據(jù)、消息數(shù)據(jù)、靜止圖像數(shù)據(jù)、移動圖像數(shù)據(jù)等)的暫時存儲的功能。而且,存儲器160可以存儲在向觸摸屏輸入的觸摸的情況下輸出的振動和聲音的各種模式的數(shù)據(jù)。而且,存儲器160能夠存儲各種控制變量。具體地說,存儲器160能夠?qū)⑴c在觀看者和顯示單元151之間的距離對應(yīng)的阻擋層的擋光部分的長度和空間確定值存儲為阻擋層的控制變量,并且也能夠存儲與通過觀看者的雙眼中心相對于顯示單元151的垂直中軸的位置而形成的偏角對應(yīng)的位移確定值。存儲器160可以包括諸如下述類型的至少一個存儲介質(zhì)快閃存儲器型、硬盤型、 多媒體微型卡型、卡型存儲器(例如,SD存儲器、XD存儲器等)、RAM、SRAM(靜態(tài)隨機(jī)存取存儲器)>ROM,EEPROM(電可擦除只讀存儲器)、和PROM(可編程只讀存儲器)等。而且,移動終端100能夠操作網(wǎng)絡(luò)存儲器,該網(wǎng)絡(luò)存儲器在因特網(wǎng)上執(zhí)行存儲器160的存儲功能。接口單元170扮演與連接到移動終端100的每個外部裝置的接口的角色。例如, 外部裝置包括有線/無線頭戴耳機(jī)、外部充電器、有線/無線數(shù)據(jù)端口、卡插槽(例如,存儲卡插槽、SIM/UIM卡插槽等)、音頻1/0(輸入/輸出)端、視頻1/0(輸入/輸出)端、耳機(jī)等。接口單元170從外部裝置接收數(shù)據(jù)或被提供電力,接口單元170然后將所接收的數(shù)據(jù)或所提供的電力傳送到在移動終端100內(nèi)的對應(yīng)的部件,或向?qū)?yīng)的外部裝置發(fā)射在便攜終端100內(nèi)的數(shù)據(jù)。
識別模塊是用于存儲用于鑒權(quán)移動終端100的使用授權(quán)的各種信息的芯片,并且可以包括用戶識別模塊(UIM)、訂戶識別模塊(SIM)、和/或通用訂戶識別模塊(USIM)等。 可以將具有識別模塊的裝置(以下稱為“識別裝置”)制造為智能卡。因此,識別裝置可以經(jīng)由對應(yīng)的端口連接到移動終端100。當(dāng)無線通信單元110連接到外部托架時,接口單元170變?yōu)閺耐屑芟蛞苿咏K端100 供電的通道,或用于向移動終端100提供由用戶從托架輸入的各種命令信號的通道。從托架輸入的各種命令信號的每一個或者電力可以作為用于使得移動終端100能夠識別其被正確地安裝在托架中的信號。控制器180通??刂埔苿咏K端100的全部操作。例如,控制器180執(zhí)行與語音呼口叭數(shù)據(jù)通信、和視頻呼叫等相關(guān)聯(lián)的控制和處理。并且,控制器180也可以被提供有用于多媒體重放的多媒體播放模塊181。多媒體播放模塊181可以被構(gòu)造 為在控制器180內(nèi)的硬件或與控制器180分離的軟件。控制器180能夠執(zhí)行模式識別處理,用于將在觸摸屏上執(zhí)行的手寫輸入或繪制輸入分別識別為字符或圖像。而且,在使用第一相機(jī)121a和第二相機(jī)121b構(gòu)成的雙鏡相機(jī)拍攝3D圖像3D的情況下,控制器180合成和處理3D圖像3D,以產(chǎn)生使得觀看者從視覺疲勞中復(fù)蘇的3D圖像。在下面的說明中將描述這一點(diǎn)。電源單元190接收外部和/或內(nèi)部電源,然后在控制器180的控制下提供相應(yīng)部件的運(yùn)行所需的電力??梢允褂美缬嬎銠C(jī)軟件、硬件、或其某種組合來在計算機(jī)可讀介質(zhì)中實(shí)現(xiàn)在此所述的各個實(shí)施例。對于硬件實(shí)施方式,可以在專用集成電路(ASIC)、數(shù)字信號處理器(DSP)、數(shù)字信號處理裝置(DSPD)、可編程邏輯器件(PLD)、現(xiàn)場可編程門陣列(FPGA)、處理器、控制器、微控制器、微處理器、被設(shè)計來執(zhí)行在此所述的功能的其他電子單元或其選擇性組合中的一個或多個內(nèi)實(shí)現(xiàn)在此所述的實(shí)施例。這樣的實(shí)施例也可以被控制器180實(shí)現(xiàn)。對于軟件實(shí)施方式,可以使用獨(dú)立的軟件模塊來實(shí)現(xiàn)在此所述的實(shí)施例,所述獨(dú)立的軟件模塊例如是過程和功能,其中每一個執(zhí)行在此所述的功能和操作的一個或多個。 軟件代碼可以使用以任何適當(dāng)?shù)木幊陶Z言編寫的軟件應(yīng)用程序來實(shí)現(xiàn),并且可以被存儲在存儲器160中并被控制器180執(zhí)行。圖2A是根據(jù)本發(fā)明的一個實(shí)施例的移動終端的前透視圖。在附圖中所示的移動終端100具有直板型終端主體,但是,可以以多種不同的配置來實(shí)現(xiàn)移動終端100。這樣的配置的示例包括折疊型、滑蓋型、旋轉(zhuǎn)型、旋蓋型及其組合。 為了清楚,進(jìn)一步的公開將主要涉及直板型移動終端100。然而,這樣的教導(dǎo)同樣地適用于其他類型的移動終端。參見圖2A,移動終端100的主體包括構(gòu)成其外型的殼體(例如,外殼、外罩、外蓋等)。根據(jù)本實(shí)施例,所述殼體可以被劃分為前殼體101和后殼體102??梢栽谇昂髿んw 101和102之間提供的空間中安裝各種電子/電氣部分。選用地,可以另外在前后殼體101 和102之間進(jìn)一步提供至少一個中間殼體??梢酝ㄟ^合成樹脂的注射模塑來形成殼體101和102,或可以由諸如不銹鋼(STS)或鈦(Ti)等的金屬物質(zhì)形成殼體101和102??梢韵蚪K端主體,并且主要向前殼體101設(shè)置顯示器151、音頻輸出單元152、相機(jī) 121、用戶輸入單元130(131/132)、麥克風(fēng)122和接口 170等。具體地說,相機(jī)121包括第三相機(jī)121c,并且其優(yōu)選地是在視頻呼叫模式或2D拍攝模式中運(yùn)行的相機(jī)。顯示器151占用前殼體101的主表面的大部分。音頻輸出單元152和相機(jī)121被設(shè)置到與顯示器151的兩個端部之一相鄰的區(qū)域,而第一用戶輸入單元131和麥克風(fēng)122 被設(shè)置到與顯示器151的另一端部相鄰的另一個區(qū)域。第二用戶輸入單元132和接口 170 等可以被設(shè)置在前和后殼體101和102的側(cè)面。用戶輸入單元130被操控來接收用于控制終端100的操作的命令的輸入。并且, 輸入單元130能夠包括多個操控單元131和132。操控單元131和132可以被總體上稱為操控部分,并且可以采用觸覺方式的任何機(jī)制,所 述觸覺方式的任何機(jī)制使得用戶能夠通過體驗(yàn)觸覺感覺來執(zhí)行操控行為??梢圆煌卦O(shè)置經(jīng)由操控單元131或132輸入的內(nèi)容或材料。例如,可以向第一操控單元131輸入諸如開始、結(jié)束、和滾動等的命令。而且,可以向第二操控單元132輸入用于從音頻輸出模塊152輸出的聲音的音量調(diào)整的命令,或用于轉(zhuǎn)換顯示器151的觸摸識別模式的命令等。圖2B是在圖2A中示出的移動終端的背面的透視圖。參見圖2B,包括第一相機(jī)121a和第二相機(jī)121b的雙鏡相機(jī)可以另外被加載在終端主體的背側(cè)上,更具體地,被安裝在后殼體102上。第一和第二相機(jī)121a和121b的每一個具有基本上與在圖2A所示的第三相機(jī)121c的拍攝方向相反的拍攝方向。第一和第二相機(jī)121a和121b能夠拍攝3D圖像和2D圖像。第一和第二相機(jī)121a和121b的每一個可以具有與第三相機(jī)121c的像素不同的像素。優(yōu)選的是,例如,第三相機(jī)121c具有較少像素,所述像素足以拍攝并且傳輸用戶的面部的圖像來用于視頻呼叫。優(yōu)選的是,因?yàn)榈谝缓偷诙鄼C(jī)121a和121b拍攝一般對象的3D或2D圖像,并且所拍攝的圖像通常不瞬時被傳輸,所以第一和第二相機(jī)121a和121b 的每一個具有較大數(shù)量的像素。并且,第一至第三相機(jī)121a至121c的每一個可以被安裝在終端主體處,以能夠旋轉(zhuǎn)和/或彈出。閃光燈123和鏡124另外被設(shè)置為在第一相機(jī)121a附近。閃光燈123在使用第一相機(jī)121a拍攝對象的情況下向?qū)ο笸渡涔?。在用戶試圖使用第一相機(jī)121a來拍攝他本身的圖像(自拍)的情況下,鏡124使得用戶能夠通過鏡124的反射而觀看到他的面部??梢韵蚪K端主體的背面設(shè)置另外的音頻輸出單元152’。該另外的音頻輸出單元 152’能夠與在圖2A中所示的先前的音頻輸出單元152 —起實(shí)現(xiàn)立體聲功能,并且可以用于在通過終端進(jìn)行談話時實(shí)現(xiàn)喇叭揚(yáng)聲器模式。廣播信號接收天線124可以另外被設(shè)置到終端主體的側(cè)面,以及用于通信的天線等。構(gòu)成在圖1中所示的廣播接收模塊111的一部分的天線124可以被可伸縮地設(shè)置到終端主體。向終端主體設(shè)置用于向移動終端100供電的電源單元190。并且,電源單元190可以被構(gòu)造來內(nèi)置在終端主體內(nèi)。替代地,電源單元190可以被構(gòu)造來可卸下地連接到終端主體。用于檢測觸摸的觸摸板135被另外設(shè)置到后殼體102。可以以像顯示器151那樣的透光型來構(gòu)造觸摸板135。在該情況下,如果顯示器151被構(gòu)造來從其兩面輸出可視信息,則也能夠經(jīng)由觸摸板135來識別可視信息。從兩面輸出的信息可以被觸摸板135整體控制。替代地,可以向觸摸板135進(jìn)一步提供另一個顯示器,以便也可以向后殼體102提供觸摸屏。通過與前殼體101的顯示器151互連來激活觸摸板135。也可以平行地在顯示器 151的前或后設(shè)置觸摸板135。觸摸板135可以具有等于或小于顯示器151的大小的大小。在下面的描述中,描述了根據(jù)本發(fā)明的一個實(shí)施例的移動終端。為了下面根據(jù)本發(fā)明的一個實(shí)施例的移動終端的說明的清楚,假定在下面的說明中涉及的移動終端包括在圖1中所示的前述部件的至少一個。具體地說,本發(fā)明所適用的移動終端包括拍攝3D圖像所需的第一和第二相機(jī)121a和121b ;顯示單元151,其被配置來輸出圖像;以及,控制器 180,其被配置來控制第一相機(jī)121a、第二相機(jī)121b和顯示單元151。第一相機(jī)121a是用于拍攝對象的右眼圖像R的右眼相機(jī)。第二相機(jī)121b是用于拍攝對象的左眼圖像L的左眼相機(jī)。當(dāng)用戶使用一雙眼(即,兩眼)觀看對象時,用戶識別由于歸因于在兩眼之間的距離的雙眼差異而導(dǎo)致的3D效果。為了形成引起對象的3D效果的雙眼差異,以通過在其間留下預(yù)定的空間而使得彼此隔開的方式來布置第一和第二相機(jī) 121a和121b。優(yōu)選的是,在第一和第二相機(jī)121a和 圖3是根據(jù)本發(fā)明的圖像拍攝處理的示意圖。具體地說,圖3示出根據(jù)本發(fā)明的由移動終端的第一相機(jī)121a拍攝的右眼圖像R、由移動終端的第二相機(jī)121b拍攝的左眼圖像L、以及由第一和第二相機(jī)121a和121b兩者拍攝的3D圖像。參見圖3,第一相機(jī)121a(即,右眼相機(jī))能夠拍攝對象的右眼圖像R(例如,在圖 3中的風(fēng)景)。并且,第二相機(jī)121b(即,左眼相機(jī))能夠拍攝對象的左眼圖像L。其后,右眼圖像R和左眼圖像L被傳輸?shù)娇刂破?80,然后通過處理和合成被產(chǎn)生為3D圖像。所產(chǎn)生的3D圖像被存儲在存儲器中,或可以被顯示在顯示單元151上。在產(chǎn)生3D圖像的情況下,由第一相機(jī)121a拍攝的右眼圖像R和由第二相機(jī)121b 拍攝的左眼圖像L的每一個包括被合成為3D圖像的FOV (視場)和被去除的FON (非視場)。在下面的說明中,對引起正在觀看對應(yīng)的圖像的觀看者的視覺疲勞的3D圖像和不引起觀看者的視覺疲勞的3D圖像進(jìn)行說明。隨后,描述根據(jù)本發(fā)明的,控制器180用于產(chǎn)生向觀看者提供最佳的3D效果的3D圖像的處理。通常,諸如深度的術(shù)語用于指示在產(chǎn)生或生成3D圖像中的3D效果或透視效果。但是,為了下面的說明的清楚,應(yīng)當(dāng)一致地使用深度值⑷。圖4A和圖4B是根據(jù)每一個3D圖像的會聚點(diǎn)的,在3D圖像顯示器中的3D效果的示意圖。具體地說,圖4A是根據(jù)在3D圖像上設(shè)置的會聚點(diǎn)而引起觀看者的視覺疲勞的3D 圖像的示意圖。并且,圖4B是根據(jù)在3D圖像上設(shè)置的會聚點(diǎn)而不引起觀看者的視覺疲勞的3D圖像的示意圖。在該情況下,會聚點(diǎn)指示特定點(diǎn),在該特定點(diǎn),兩個相機(jī)的視差信息由于在第一和第二相機(jī)121a和121b之間的會聚而變?yōu)榱?。在該情況下,會聚表示在其中第一和第二相機(jī)121a和121b通過以與下述相似的方式向彼此移動從而被聚焦在對象上的現(xiàn)象即,使與正在觀看特定對象的人的雙眼通過向彼此移動而聚焦在對象上的現(xiàn)象類似的方式。當(dāng)觀看3D圖像時,被指定(或設(shè)置)為會聚點(diǎn)的點(diǎn)/區(qū)域變?yōu)槲挥谠陲@示單元151的表面或屏幕上的點(diǎn)/區(qū)域。具體地說,觀看者將被指定為會聚點(diǎn)的區(qū)域識別為象2D圖像那樣位于顯示單元151的表面上。并且,被指定為會聚點(diǎn)的區(qū)域一般被稱為立體窗口。具體地說,當(dāng)觀看3D圖像時,觀看者將在3D圖像拍攝的情況下位于比在被指定為會聚點(diǎn)的區(qū)域中的另一個單元對象更遠(yuǎn)的單位對象識別為位于顯示單元151(即,顯示單元151的表面)之后。相反,當(dāng)觀看3D圖像時,觀看者將在3D圖像拍攝的情況下位于比在被指定為會聚點(diǎn)的區(qū)域中的另一個單元對象更近的單位對象識別為位于顯示單元151 (即,顯示單元151的表面)之前。
參見圖4A,通過雙眼相機(jī)來拍攝3D圖像。在其會聚點(diǎn)被控制器180 (即,自動地) 或拍攝者(即,手動地)指定為最遠(yuǎn)距離(超遠(yuǎn)距離)的單元對象的3D圖像的情況下,當(dāng)觀看者經(jīng)由顯示單元151來觀看3D圖像時,觀看者將3D圖像的大部分識別為從顯示單元 151的表面(即,立體窗口)突出。在該情況下,觀看者體驗(yàn)到視覺疲勞。當(dāng)觀看者長時間觀看3D圖像時,視覺疲勞可能對于觀看者引起紅眼、頭暈、嘔吐和惡心等。參見圖4B,通過雙眼相機(jī)來拍攝3D圖像。在其會聚點(diǎn)被控制器180 (即,自動地) 或拍攝者(即,手動地)指定為最近距離的單元對象的3D圖像的情況下,當(dāng)觀看者經(jīng)由顯示單元151來觀看3D圖像時,觀看者將3D圖像的大部分識別為從顯示單元151的表面 (即,立體窗口)后撤。在該情況下,因?yàn)橛^看者很少體驗(yàn)到視覺疲勞,所以不對于觀看者引起任何由于視覺疲勞而導(dǎo)致的痛苦。但是,因?yàn)橛^看者感覺到對象位于遠(yuǎn)處,3D圖像的逼真度會或多或少地降低。如在上面的說明中所述,為了防止觀看者的視覺疲勞并且增強(qiáng)3D圖像的逼真度, 會聚點(diǎn)被最佳地指定為3D圖像的區(qū)域。在下面的描述中,詳細(xì)描述根據(jù)本發(fā)明的產(chǎn)生具有最佳地指定的會聚點(diǎn)的移動終端及其控制方法。圖5是根據(jù)本發(fā)明的一個實(shí)施例的深度值確定步驟的示意圖。具體地說,因?yàn)樾枰_定在所產(chǎn)生的3D圖像中包含的單元對象的深度值,以指定在3D圖像中的最佳會聚點(diǎn), 所以圖5示意地示出了深度值確定步驟的子步驟。參見圖5,控制器180能夠?qū)⒖疾糠?以下縮寫為RS)設(shè)置為在左右眼圖像L和 R之一中的特定部分。在圖5中,控制器180將參考部分RS設(shè)置為例如左眼圖像L的特定部分。控制器180提取參考部分RS,然后能夠?qū)τ谟已蹐D像R搜索匹配部分(以下縮寫為 MS),該匹配部分MS包括與在參考部分RS中包括的FOV (視場)(或單元對象和單元對象的一部分之一)對應(yīng)(或幾乎匹配)的FOV (或單元對象和單元對象的一部分之一)。隨后,控制器180將在右眼圖像R的匹配部分MS中包括的FOV在右眼圖像R內(nèi)向右移位規(guī)定的位移ΔX以使得左眼圖像L的參考部分RS的位置能夠匹配右眼圖像R的匹配部分MS的位置,并且然后能夠計算該規(guī)定的位移ΔΧ。圖6是根據(jù)本發(fā)明的一個實(shí)施例的深度值計算處理的示意圖。具體地說,圖6示意地示出了深度值計算處理,其用于基于在圖5中所示的前一個處理中計算的規(guī)定的位移 Δ X來計算參考部分RS的深度值d。參見圖6,控制器180使用在位移和深度值之間的比例關(guān)系,基于第一位移值Δ X1 來計算作為單元對象的深度值的第一深度值Cl1,其中,第一位移值A(chǔ)X1的數(shù)量等于位于近距離的單元對象(例如,在圖6中的樹)的位移(displacement)。并且,控制器180能夠基于第二位移值ΔΧ2來計算作為單 元對象的深度值的第二深度值(12,其中,第二位移值ΔΧ2 的數(shù)量等于位于遠(yuǎn)距離的單元對象(例如,在圖6中的山)的位移。深度值計算處理或位移計算處理是示例性的,本發(fā)明不限于此。并且,用于計算在 3D圖像中的對象的深度值的任何技術(shù)都適用于本發(fā)明。圖7是根據(jù)本發(fā)明的一個實(shí)施例的分開部分設(shè)置步驟和深度值確定步驟的示意圖。首先,圖5和圖6示出用于以將單個部分設(shè)置為參考部分RS和/或匹配部分MS 的方式來確定深度值的處理。但是,參見圖7,本發(fā)明的控制器180在左右眼圖像L和R上設(shè)置或布置多個分開部分(以下縮寫為DS),并且然后能夠確定多個分開部分DS的每一個的深度值。具體地說,控制器180能夠以下述方式來確定多個分開部分DS的每一個的深度值 d 即,將在圖5和圖6中所示的深度值確定步驟重復(fù)與在左右眼圖像L和R上設(shè)置的多個分開部分DS的數(shù)量一樣的次數(shù)。在下面的描述中,為了清楚,當(dāng)拍攝3D圖像時,位于較近距離的單元對象或單元對象的一部分應(yīng)當(dāng)被指示為較小數(shù),而位于較遠(yuǎn)距離的單元對象或單元對象的一部分應(yīng)當(dāng)被指示為較大數(shù)。根據(jù)本發(fā)明的一個實(shí)施例,控制器180能夠以多個分開部分DS彼此在大小上相等的方式,來設(shè)置左右眼圖像L和R的分開部分DS。因此,當(dāng)控制器180確定在左右眼圖像L和R上設(shè)置的多個分開部分DS的每一個的深度值時,可以在3D圖像中精確地指定會聚點(diǎn),該會聚點(diǎn)提供最佳的3D效果,而不給觀看3D圖像的觀看者帶來視覺疲勞。因此,可以向觀看者提供最佳的3D圖像。圖8是根據(jù)本發(fā)明的另一個實(shí)施例的分開部分設(shè)置步驟和深度值確定步驟的示意圖。首先,圖5和圖6示出用于以下述方式來設(shè)置深度值的處理即,將單個部分設(shè)置為參考部分RS和/或匹配部分MS。但是,參見圖8,本發(fā)明的控制器180在左右眼圖像L 和R上設(shè)置或布置多個分開部分(以下縮寫為DS),并且然后能夠確定多個分開部分DS的每一個的深度值。具體地說,控制器180能夠以下述方式來確定多個分開部分DS的每一個的深度值 d 即,將在圖5和圖6中所示的深度值確定步驟重復(fù)與在左右眼圖像L和R上設(shè)置的多個分開部分DS的數(shù)量一樣的次數(shù)。根據(jù)本發(fā)明的另一個實(shí)施例,控制器180能夠以下述方式來設(shè)置左右眼圖像L和 R的分開部分DS 卩,多個分開部分DS的一些彼此在大小上不同。在該情況下,優(yōu)選的是, 控制器180能夠參考在左右眼圖像L和R中包括的單元對象,以下述方式來控制多個分開部分DS的設(shè)置即,多個分開部分DS彼此在大小上不同。因此,當(dāng)控制器180確定在左右眼圖像L和R上設(shè)置的多個分開部分DS的每一個的深度值時,可以在3D圖像中精確地指定會聚點(diǎn),該會聚點(diǎn)提供最佳的3D效果,而不給觀看3D圖像的觀看者帶來視覺疲勞。因此,可以向觀看者提供對于每一個單位對象而言不同的3D效果,由此提供具有更逼真的3D效果的3D圖像。在指定在3D圖像中的會聚點(diǎn)之前,如在上面的說明中所述,本發(fā)明的控制器180 能夠以下述方式來指定適合于某種對象的會聚點(diǎn)即,確定在包括左眼圖像L和右眼圖像R的3D圖像中拍攝的對象是否是簡單的風(fēng)景,確定是否在風(fēng)景中存在要變?yōu)榫劢鼓繕?biāo)的物體,確定是否在房間中存在要變?yōu)榫劢鼓繕?biāo)的物體,以及確定是否物體是特寫拍攝物體。具體地說,控制器180參考預(yù)設(shè)的3D圖像模式來分類由第一和第二相機(jī)121a和121b拍攝的對象的類型,并且然后能夠?qū)埸c(diǎn)指定為對于3D圖像模式而言最佳的區(qū)域(即,在左右眼圖像L和R上設(shè)置的多個分開部分DS)。 在移動終端的存儲器中預(yù)設(shè)的3D圖像模式包括風(fēng)景模式、在風(fēng)景內(nèi)的聚焦物體模式、室內(nèi)聚焦物體模式、和特寫拍攝模式。并且,風(fēng)景模式、在風(fēng)景內(nèi)的聚焦物體模式、室內(nèi)聚焦物體模式、和特寫拍攝模式中的每一個具有預(yù)設(shè)深度值的獨(dú)特分布。在下面的描述中,參考圖9至12來描述根據(jù)每一個3D圖像模式的預(yù)設(shè)深度值分布、通過指定適合于每一個3D圖像模式的會聚點(diǎn)而在存儲器中存儲的3D圖像、以及在顯示單元151上顯示的3D圖像的示意布局。圖9A是根據(jù)本發(fā)明的在屬于3D圖像模式的風(fēng)景模式中的預(yù)設(shè)深度值分布的示意圖。圖9B是根據(jù)本發(fā)明的在屬于3D圖像模式的風(fēng)景模式中,在存儲器中存儲的3D圖像的示意圖。并且,圖9C是根據(jù)本發(fā)明的在顯示單元上顯示3D圖像的情況下,在屬于3D圖像模式的風(fēng)景模式中的3D圖像的示意布局。這些附圖僅示出示例性深度值分布,以清楚地描述本發(fā)明,但是本發(fā)明不限于此。參見圖9A,以下面的方式來配置屬于在存儲器中預(yù)設(shè)的3D圖像模式的風(fēng)景模式的預(yù)設(shè)深度值分布。首先,在3D圖像幀的頂側(cè)上布置用于指示遠(yuǎn)距離的多個深度值(例如, 在圖9中被表示為“6”)。其次,在3D圖像幀的底側(cè)上布置用于指示中等距離的多個深度值(例如,在圖9中表示為“4”)??刂破?80將在左右眼圖像L和R上設(shè)置的多個分開部分DS的深度值分布與在圖9A中所示的風(fēng)景模式中的3D圖像幀的預(yù)設(shè)深度值分布作比較。如果多個分開部分DS 的深度值分布匹配(或幾乎匹配)風(fēng)景模式的預(yù)設(shè)深度值分布,則控制器180能夠?qū)⒃谧笥已蹐D像L和R的每一個中拍攝的對象的3D圖像模式確定為風(fēng)景模式。參見圖9B,如果控制器180將在左右眼圖像L和R的每一個中所拍攝的對象的3D 圖像模式確定為風(fēng)景模式,則控制器180將在左右眼圖像L和R上設(shè)置的多個分開部分DS 中的、具有用于指示最近距離的深度值的分開部分DS指定為會聚點(diǎn),并且然后能夠通過彼此重疊被指定為會聚點(diǎn)的左右眼圖像L和R的分開部分DS而產(chǎn)生3D圖像。例如,參見圖9B,如果在左右眼圖像L和R中的所拍攝對象是風(fēng)景的情況下,則控制器180將在最接近左右眼相機(jī)(即,具有最小的深度值)的“道路的入口部分”上設(shè)置的分開部分DS指定為會聚點(diǎn),并且然后能夠通過以下述方式彼此疊加整個左眼圖像L和整個右眼圖像R來產(chǎn)生3D圖像S卩,在“道路的入口部分”上設(shè)置的分開部分DS彼此重疊。如果在左右眼圖像L和R中的具有用于指示遠(yuǎn)距離和中等距離的深度值的分開部分DS被指定為會聚點(diǎn)的情況下,則觀看者在觀看3D圖像的情況下識別在對象內(nèi)的幾乎全部單元對象從顯示單元151的表面(即,立體窗口 )突出。因此,減少了 3D圖像的3D逼真度。而且,觀看者識別為過度突出的單元對象可能看起來搖擺,從而導(dǎo)致觀看者的視覺疲勞。因此,在風(fēng)景模式的情況下,在位于最近距離的單元對象上設(shè)置的分開部分DS被指定為會聚點(diǎn)。參見圖9C,當(dāng)在圖9B中所示的風(fēng)景模式中產(chǎn)生的3D圖像被顯示在顯示單元151上時,在顯示單元151的表面(即,立體窗口 )上顯示被設(shè)置為3D圖像的會聚點(diǎn)的“道路的入口部分”,而以下述方式來顯示在3D圖像中拍攝的其余單元對象即,觀看者識別所有其余的單元對象從顯示單元151的表面的后面后撤。因此,在對象是風(fēng)景的情況下,則控制器180如在上面的說明中所述地設(shè)置會聚點(diǎn)。因此,增強(qiáng)了 3D圖像的逼真3D效果,并且也防止3D圖像導(dǎo)致觀看者的視覺疲勞。圖IOA是根據(jù)本發(fā)明的在屬于3D圖像模式的風(fēng)景內(nèi)聚焦物體模式中的預(yù)設(shè)深度值分布的示意圖。圖IOB是根據(jù)本發(fā)明的在屬于3D圖像模式的風(fēng)景內(nèi)聚焦物體模式中,在存儲器中存儲的3D圖像的示意圖。并且,圖IOC是根據(jù)本發(fā)明的在顯示單元上顯示3D圖像的情況下,在屬于3D圖像模式的風(fēng)景內(nèi)聚焦物體模式中的3D圖像的示意布局。 參見圖10A,以下面的方式來配置屬于在存儲器中預(yù)設(shè)的3D圖像模式的風(fēng)景內(nèi)聚焦物體模式的預(yù)設(shè)深度值分布。首先,在3D圖像幀的頂側(cè)上布置用于指示遠(yuǎn)距離的多個深度值(例如,在圖IOA中被表示為“6”的深度值)。其次,在3D圖像幀的中間和底側(cè)的至少一個上布置用于指示近距離的多個深度值(例如,在圖IOA中被表示為“2”的深度值)。 第三,在3D圖像幀的底側(cè)的至少一部分上布置用于指示中等距離的多個深度值(例如,在圖IOA中被表示為“4”的深度值)。控制器180將在左右眼圖像L和R上設(shè)置的多個分開部分DS的深度值分布與在圖IOA中所示的風(fēng)景內(nèi)聚焦物體模式中的3D圖像幀的預(yù)設(shè)深度值分布作比較。如果多個分開部分DS的深度值分布匹配(或幾乎匹配)風(fēng)景內(nèi)聚焦物體模式的預(yù)設(shè)深度值分布,則控制器180能夠?qū)⒃谧笥已蹐D像L和R的每一個中拍攝的對象的3D圖像模式確定為風(fēng)景內(nèi)聚焦物體模式。參見圖10B,如果控制器180將在左右眼圖像L和R的每一個中拍攝的對象的3D 圖像模式確定為風(fēng)景內(nèi)聚焦物體模式,則控制器180將與在左右眼圖像L和R上設(shè)置的多個分開部分DS中的、具有用于指示最近距離的深度值的分開部分DS和具有聚焦物體的深度值的分開部分DS的平均深度值對應(yīng)的分開部分DS確定為會聚點(diǎn),并且然后能夠通過彼此重疊被指定為會聚點(diǎn)的左右眼圖像L和R的分開部分DS來產(chǎn)生3D圖像。例如,參見圖10B,如果在左右眼圖像L和R中的所拍攝的對象是在風(fēng)景中的人 (即,聚焦物體)的情況下,則控制器180將具有在最接近左右眼相機(jī)(即,具有最小深度值)的“道路的入口部分”上設(shè)置的分開部分DS和對應(yīng)于人的分開部分DS的深度值的平均深度值的,與“左樹的前部分”對應(yīng)的分開部分DS指定為會聚點(diǎn),并且然后能夠通過以下述方式彼此重疊整個左眼圖像L和整個右眼圖像R來產(chǎn)生3D圖像即,彼此重疊在“樹的前部分”上設(shè)置的分開部分DS。如果與人(即,聚焦物體)對應(yīng)的分開部分DS被指定為會聚點(diǎn)的情況下,則降低了 3D圖像的遠(yuǎn)處空間的感覺。而且,因?yàn)橛^看者在觀看3D圖像的情況下,識別到位于人附近的單元物體從顯示單元151的表面(即,立體窗口)突出,所以3D圖像的3D逼真度降低。因此,在風(fēng)景內(nèi)聚焦物體模式的情況下,具有聚焦物體的深度值和用于指示最近距離的深度值的平均深度值的分開部分DS被指定為會聚點(diǎn)。參見圖10C,當(dāng)在圖IOB中所示的風(fēng)景模式中產(chǎn)生的3D圖像被顯示在顯示單元 151上時,在顯示單元151的表面(即,立體窗口 )上顯示被設(shè)置為3D圖像的會聚點(diǎn)的“左樹的前部分”,以從顯示單元151的表面(即,立體窗口)突出的方式來顯示聚焦物體的人,以觀看者識別到其余單元對象在顯示單元151的表面(即,立體窗口 )后部后撤的方式來顯示在3D圖像中拍攝的其余單元對象。因此,在對象在風(fēng)景內(nèi)聚焦物體模式中的情況下,控制器180如在上面的說明中所述地設(shè)置會聚點(diǎn)。因此,增強(qiáng)3D圖像的逼真3D效果,并且,也防止3D圖像引起觀看者的視覺疲勞。圖IlA是根據(jù)本發(fā)明的、在屬于3D圖像模式的室內(nèi)聚焦物體模式中的預(yù)設(shè)深度值分布的示意圖。圖IlB是根據(jù)本發(fā)明的在屬于3D圖像模式的室內(nèi)聚焦物體模式中,在存儲器中存儲的3D圖像的示意圖。圖IlC是根據(jù)本發(fā)明的、在顯示單元上顯示3D圖像的情況下,在屬于3D圖像模式的室內(nèi)聚焦物體模式中的3D圖像的示意布局。參見圖11A,以下面的方式來配置屬于在存儲器中預(yù)設(shè)的3D圖像模式的室內(nèi)聚焦物體模式的預(yù)設(shè)深度值分布。首先,在3D圖像幀的頂側(cè)上布置用于指示中等距離的多個深度值(例如,在圖IlA中被表示為“4”的深度值)。其次,在3D圖像幀的中間和底側(cè)的至少一個上布置用于指示近距離的多個深度值(例如,在圖IlA中被表示為“2”的深度值)。 第三,在3D圖像幀的底側(cè)的至少一部分上布置用于指示中等距離的多個深度值(例如,在圖IlA中被表示為“4”的深度值)。
控制器180將在左右眼圖像L和R上設(shè)置的多個分開部分DS的深度值分布與在圖IlA中所示的室內(nèi)聚焦物體模式中的3D圖像幀的預(yù)設(shè)深度值分布作比較。如果多個分開部分DS的深度值分布匹配(或幾乎匹配)室內(nèi)聚焦物體模式的預(yù)設(shè)深度值分布,則控制器180能夠?qū)⒃谧笥已蹐D像L和R的每一個中拍攝的對象的3D圖像模式確定為室內(nèi)聚焦物體模式。參見圖11B,如果控制器180將在左右眼圖像L和R的每一個中拍攝的對象的3D 圖像模式確定為室內(nèi)聚焦物體模式,則控制器180將與在左右眼圖像L和R上設(shè)置的多個分開部分DS中的具有聚焦物體的深度值的分開部分DS確定為會聚點(diǎn),并且然后能夠通過彼此重疊被指定為會聚點(diǎn)的左右眼圖像L和R的分開部分DS來產(chǎn)生3D圖像。例如,參見圖11B,如果在左右眼圖像L和R中的所拍攝的對象是在室內(nèi)空間(或房間)中的人的情況下,則控制器180將對應(yīng)于“人”的分開部分DS指定為會聚點(diǎn),并且然后能夠通過以下述方式彼此重疊整個左眼圖像L和整個右眼圖像R來產(chǎn)生3D圖像S卩,彼此重疊在“人”上設(shè)置的分開部分DS。因?yàn)樵谑覂?nèi)空間的情況下深度值受限于預(yù)定值,所以優(yōu)選的是,在逼真的3D效果和防止視覺疲勞產(chǎn)生的方面,與聚焦物體對應(yīng)的分開部分DS被指定為會聚點(diǎn)。參見圖11C,當(dāng)在圖IlB中所示的室內(nèi)聚焦物體模式中產(chǎn)生的3D圖像被顯示在顯示單元151上時,在顯示單元151的表面(即,立體窗口 )上顯示被設(shè)置為3D圖像的會聚點(diǎn)的“人”,觀看者識別到通過在顯示單元151的表面(即,立體窗口)之前突出來顯示在3D 圖像3D中拍攝的其余單元對象中比“人”更接近的單元對象,并且,觀看者識別到通過在顯示單元151的表面(即,立體窗口)之后后撤來顯示在3D圖像3D中拍攝的其余單元對象中的比“人”更遠(yuǎn)的單元對象。因此,在對象是位于室內(nèi)空間中的聚焦物體的情況下,控制器180如在上面的說明中所述地設(shè)置會聚點(diǎn)。因此,增強(qiáng)了 3D圖像的逼真的3D效果,并且,也防止3D圖像引起觀看者的視覺疲勞。
圖12A是根據(jù)本發(fā)明的在屬于3D圖像模式的特寫模式中的預(yù)設(shè)深度值分布的示意圖,圖12B是根據(jù)本發(fā)明的在屬于3D圖像模式的特寫模式中,在存儲器中存儲的3D圖像的示意圖,并且圖12C是根據(jù)本發(fā)明的,在顯示單元上顯示3D圖像的情況下,在屬于3D圖像模式的特別模式中的3D圖像的示意布局。參見圖12A,以下面的方式來配置屬于在存儲器中預(yù)設(shè)的3D圖像模式的特寫拍攝模式的預(yù)設(shè)深度值分布。首先,在3D圖像幀的頂側(cè)上布置用于指示中等距離的多個深度值 (例如,在圖12A中被表示為“4”的深度值)。其次,在3D圖像幀的中間和底側(cè)的至少一個上布置用于指示特寫拍攝距離的多個深度值(例如,在圖12A中被表示為“1”的深度值)。 第三,在3D圖像幀的底側(cè)的至少 一部分上布置用于指示中等距離的多個深度值(例如,在圖12A中被表示為“4”的深度值)??刂破?80將在左右眼圖像L和R上設(shè)置的多個分開部分DS的深度值分布與在圖12A中所示的特寫拍攝模式中的3D圖像幀的預(yù)設(shè)深度值分布作比較。如果多個分開部分DS的深度值分布匹配(或幾乎匹配)特寫拍攝模式的預(yù)設(shè)深度值分布,則控制器180能夠?qū)⒃谧笥已蹐D像L和R的每一個中拍攝的對象的3D圖像模式確定為特寫拍攝模式。參見圖12B,如果控制器180將在左右眼圖像L和R的每一個中拍攝的對象的3D 圖像模式確定為特寫拍攝模式,則控制器180將具有在左右眼圖像L和R上設(shè)置的多個分開部分DS中的、具有用于指示中等距離的深度值的分開部分DS和具有特寫物體的深度值的分開部分DS的平均深度值的分開部分DS指定為會聚點(diǎn),并且然后能夠通過彼此重疊被指定為會聚點(diǎn)的左右眼圖像L和R的分開部分DS來產(chǎn)生3D圖像。例如,參見圖12B,如果在左右眼圖像L和R中的所拍攝的對象是人的情況下,控制器180將具有在最接近左右眼相機(jī)的“人”(即,特寫物體)上設(shè)置的分開部分DS的深度值和在構(gòu)成室內(nèi)空間或背景的物體上設(shè)置的分開部分DS的深度值的平均深度值的分開部分 DS指定為會聚點(diǎn),并且然后能夠通過以下述方式彼此重疊整個左眼圖像L和整個右眼圖像 R來產(chǎn)生3D圖像即,彼此重疊被指定為會聚點(diǎn)的左右眼圖像L和R的分開部分DS。在特寫拍攝模式的情況下,因?yàn)榕臄z者通常意欲通過強(qiáng)調(diào)特寫物體來表示3D效果,所以位于比特寫物體更遠(yuǎn)的單元對象的分開部分DS優(yōu)選地被指定為會聚點(diǎn)。參見圖12C,當(dāng)在圖12B中所示的特寫拍攝模式中產(chǎn)生的3D圖像被顯示在顯示單元151上時,在顯示單元151的表面(即,立體窗口 )上顯示被設(shè)置為3D圖像的會聚點(diǎn)的分開部分DS,并且,觀看者識別到通過在顯示單元151的表面之前突出來顯示在3D圖像3D 中拍攝的特寫物體。因此,在對象是特寫物體的情況下,控制器180如在上面的說明中所述地設(shè)置會聚點(diǎn)。因此,增強(qiáng)了 3D圖像的逼真的3D效果,并且,也防止3D圖像引起觀看者的視覺疲勞。如在上面的說明中所述地,控制器180在左右眼圖像L和R上建立多個分開部分 DS,并且確定多個分開部分DS的每一個的深度值。隨后,控制器180基于多個分開部分DS 的深度值的分布來自動地指定適合于3D圖像模式的最佳會聚點(diǎn)。因此,拍攝者能夠拍攝最佳的3D圖像,而不會引起觀看者的視覺疲勞。圖13A是根據(jù)本發(fā)明的、在存在非匹配部分(匪S)的情況下的移動終端的后視圖。 圖13B是在圖13A中所示的移動終端中的左右眼圖像的分開部分的深度值分布的示意圖。 并且,圖13C是在圖13A中所示的移動終端的顯示單元的示意圖。
參見圖13A,當(dāng)拍攝者使用移動終端的第一和第二相機(jī)121a和121b來拍攝3D圖像時,拍攝者可能無意地使用手阻擋第一和第二相機(jī)121a和121b的至少一個。在該情況下,如果拍攝者進(jìn)一步繼續(xù),則可以產(chǎn)生具有降低的逼真3D效果的3D圖像。而且,因?yàn)榭刂破?80不能指定精確的會聚點(diǎn),則會產(chǎn)生引起視覺疲勞的3D圖像為了校正拍攝者的拍攝姿勢的上述錯誤,本發(fā)明的控制器180能夠控制顯示單元 151來向拍攝者提供用于校正拍攝者的拍攝姿勢的信息。參見圖13B,如果障礙物(例如,拍攝者的手)位于第一和第二相機(jī)121a和121b 之一之前,則控制器180確定在左右眼圖像L和R上設(shè)置的多個分開部分DS的每一個的深度值,并且然后能夠確定障礙物在第一相機(jī)121a或第二相機(jī)121b之前。具體地說,控制器 180優(yōu)先地確定在左右眼圖像L和R上設(shè)置的多個分開部分DS的每一個的深度值,并且然后能夠確定是否超過預(yù)設(shè)比率地在其他圖像中存在不匹配部分(NMS),其中,所述不匹配部分不對應(yīng)于在左右眼圖像L和R之一的FOV (視場)上設(shè)置的多個分開部分DS上設(shè)置的至少一個參考部分(RS)。在該情況下,不匹配部分(匪S)的預(yù)設(shè)比率是在多個分開部分DS的總的大小上的不匹配部分(匪S)的大小的比率。優(yōu)選的是,該預(yù)設(shè)比率的范圍是20%至30%。如果控制器180確定超過預(yù)設(shè)比率地在其他圖像中存在不匹配部分(匪S),則控制器180能夠控制顯示單元151來向拍攝者提供關(guān)于不匹配部分(匪S)的信息,或用于去除不匹配部分(匪S)的信息。參見圖13C,向顯示單元151提供的關(guān)于不匹配部分(NMS)的信息Il是用于指示在第一相機(jī)121a或第二相機(jī)121b之前存在障礙物的信息。例如,關(guān)于不匹配部分(匪S)的信息Il是關(guān)于內(nèi)容“右相機(jī)被阻擋”或類似的內(nèi)容的信息。向顯示單元151提供的用于去除不匹配部分(匪S)的信息Il是關(guān)于用于引導(dǎo)用戶從在左右眼圖像L和R上設(shè)置的多個分開部分DS去除不匹配部分(匪S)的內(nèi)容的信息。例如,用于去除不匹配部分(匪S)的信息Il是關(guān)于“去除在右相機(jī)之前的障礙物(例如,手指等),,的內(nèi)容或類似的內(nèi)容的信息。因此,本發(fā)明提供了用于校正拍攝者的拍攝姿勢的信息,由此防止由于拍攝者作出的錯誤而產(chǎn)生3D效果降低的3D圖像,或引起視覺疲勞的3D圖像。圖14A是根據(jù)本發(fā)明的在不確定的分開部分存在的情況下,移動終端的后視圖。 圖14B是在圖14A中所示的移動終端中3D圖像的分開部分的深度值分布的示意圖。并且, 圖14C是在圖14A中所示的移動終端的顯示單元的示意圖。參見圖14,如在上面的說明中所述,用于拍攝3D圖像的雙眼相機(jī)(S卩,第一和第二相機(jī)121a和121b)能夠通過分別拍攝左眼圖像L和右眼圖像R來再現(xiàn)對象的3D效果。但是,如果對象在僅用于第一相機(jī)121a(即,右眼相機(jī))的視角內(nèi),在僅用于第二相機(jī) 121b (即,左眼相機(jī))的視角內(nèi),或者處于由于在第一和第二相機(jī)121a和121b之間的相隔距離而導(dǎo)致形成的盲點(diǎn)內(nèi),則存在其深度值不能被控制器180確定的分開部分(以下稱為不確定的分開部分IDS)。例如,如果對象位于第一和第二相機(jī)121a和121b的盲點(diǎn)內(nèi)[圖14A],則控制器 180能夠使用用于檢測在盲點(diǎn)內(nèi)的對象的不確定分開部分(IDS)檢測裝置來確定其深度值不能夠確定的不可能部分存在[圖14B]。優(yōu)選的是,對象檢測裝置是在考慮到第一相機(jī) 121a的視角和第二相機(jī)121b的視角的情況下,基于用于預(yù)設(shè)盲點(diǎn)的距離或范圍來檢測在盲點(diǎn)內(nèi)的對象的裝置。并且,對象檢測裝置包括諸如紅外線傳感器、接近傳感器、和距離傳感器等的裝置。如果控制器180確定不確定的分開部分IDS存在,則控制器180能夠控制顯示單元151來顯示關(guān)于不確定的分開部分IDS的信息,或用于去除不確定的分開部分IDS的校 IHfn 息。例如,參見圖14C,向顯示單元151提供的關(guān)于不確定的分開部分IDS的信息12指示內(nèi)容“對象太近”或類似的內(nèi)容。并且,用于去除不確定的分開部分IDS的信息12是用于引導(dǎo)用戶以使其位于在第一和第二相機(jī)121a和121b之間的重疊視角(參見圖6)內(nèi)的信息,并且包括關(guān)于內(nèi)容“離開對象”或“躲開對象”或類似的內(nèi)容的信息。根據(jù)本發(fā)明的移動終端提供了用于校正拍攝者的拍攝姿勢以拍攝最佳的3D圖像的信息,由此在降低視覺疲勞的同時增強(qiáng)拍攝者的3D效果。并且,根據(jù)本發(fā)明的移動終端便于拍攝者拍攝3D圖像。在下面的描述中,參考附圖來描述根據(jù)本發(fā)明的用于控制移動終端的方法。
圖15是根據(jù)本發(fā)明的用于控制移動終端的方法的示意流程圖。參見圖15,根據(jù)本發(fā)明的用于控制移動終端的方法S200包括圖像拍攝步驟 S210,其分別使用第一相機(jī)121a和第二相機(jī)121b來拍攝對象的右眼圖像R和左眼圖像L ; 分開部分設(shè)置步驟S220,其用于在圖像拍攝步驟S210中獲得的對象的左右眼圖像L和R的每一個上布置(或設(shè)置)多個分開部分DS;深度值確定步驟S230,其用于確定多個分開部分DS的每一個的深度值;以及,3D圖像產(chǎn)生步驟S240,其用于基于在深度值確定步驟S230 中確定的多個分開部分DS的每一個的深度值來合成和處理3D圖像,根據(jù)所述3D圖像可以在觀看的情況下消除觀看者的視覺疲勞。具體地說,拍攝者使用第一相機(jī)121a和第二相機(jī)121b來拍攝右眼圖像R和左眼圖像 L[S210]。隨后,控制器180在分別由第一和第二相機(jī)121a和121b拍攝的左右眼圖像L和 R的每一個上設(shè)置多個分開部分DS [S220]。在該情況下,多個分開部分DS可以在大小上彼此相等,或可以在大小上彼此不同。如果多個分開部分DS在大小上彼此不同,則優(yōu)選的是, 以構(gòu)成單個對象的每多個單元對象確定大小??刂破?80確定在左右眼圖像L和R的每一個上設(shè)置的多個分開部分DS的深度值[S230]。將在下面的說明中詳細(xì)描述深度值確定步驟S230。其后,控制器180以基于多個分開部分DS的每一個的深度值來處理和合成左右眼圖像L和R的方式,從而產(chǎn)生最佳的3D圖像,通過防止視覺疲勞來增強(qiáng)了最佳3D圖像的逼真3D效果[S240]。將在下面的說明中詳細(xì)描述3D圖像產(chǎn)生步驟S240。圖16是根據(jù)本發(fā)明的一個實(shí)施例的在用于控制移動終端的方法S200中的深度值確定步驟S230的示意流程圖。參見圖16,控制器180執(zhí)行深度值確定步驟S230,其用于計算在分開部分設(shè)置步驟S220中設(shè)置的多個分開部分DS的深度值。具體地說,深度值確定步驟S230包括參考部分設(shè)置子步驟S231、匹配部分搜索子步驟S232、匹配部分(MS)移位子步驟S233、位移計算子步驟S234、和深度值計算子步驟S236。在下面的描述中,詳細(xì)描述深度值確定步驟S230 的子步驟。
首先,為了確定深度值,控制器180將在左右眼圖像L和R之一的FOV(視場)上設(shè)置的多個分開部分DS設(shè)置為至少一個參考部分RS[S231]??刂破?80對于在左右眼圖像L和R的另一個的FOV(視場)中設(shè)置的多個分開部分DS搜索與在參考部分確定步驟S231中確定的至少一個參考部分RS對應(yīng)的至少一個匹配部分MS[S232]。具體地說,參考下述部分來執(zhí)行匹配部分搜索子步驟S232 卩,參考部分RS的形狀是否等于匹配部分MS的形狀,參考部分RS的色度是否等于匹配部分MS的色度,或參考部分RS的亮度是否等于匹配部分MS的亮度。隨后,控制器180參考其上設(shè)置了參考部分RS的一個圖像來移位在另一個圖像內(nèi)的至少一個匹配部分MS的每一個中包括的FOV (視場),以使得至少一個參考部分RS的每一個的位置能夠匹配至少一個匹配部分MS的每一個的位置[S233]。其后,控制器180計算在匹配部分移位步驟S233中在另一個圖像中的至少一個匹配部分MS的每一個的位移[S234]。具體地說,位移計算方法可以參見參考圖5的前面的描述。在如此進(jìn)行中,控制器180通過下述方式來計算多個分開部分DS的每一個的位移即,將匹配部分移位子步驟S233和位移計算子步驟S234重復(fù)與多個分開部分DS的數(shù)量一樣多的次數(shù)[S235]。其后,控制器180基于在位移計算子步驟S234中計算的多個位移來計算分開部分 DS的每一個的深度值。具體地說,用于基于在位移計算子步驟S234中計算的多個位移來計算分開部分DS的每一個的深度值的方法可以參見參考圖6的前述描述。圖17是根據(jù)本發(fā)明的第一另外實(shí)施例的在用于控制移動終端的方法中的深度值確定步驟S230’的示意流程圖。參見圖17,如根據(jù)一個實(shí)施例的之前的深度值確定步驟S230那樣,根據(jù)第一另外實(shí)施例的深度值確定步驟S230’包括參考部分設(shè)置子步驟S231’、匹配部分搜索子步驟S232,、匹配部分(MS)移位子步驟S233,、位移計算子步驟S234,、和深度值計算子步驟 S236’。并且,根據(jù)第一另外實(shí)施例的深度值確定步驟S230’進(jìn)一步包括信息提供子步驟 S238’,其用于校正拍攝者的拍攝姿勢。具體地說,在深度值計算子步驟S236’的完成后,控制器180確定是否超過預(yù)設(shè)比率地在另一個圖像中存在不匹配部分(匪S),其中,所述不匹配部分(匪S)不對應(yīng)于在左右眼圖像L和R之一的FOV (視場)上設(shè)置的多個分開部分DS上設(shè)置的至少一個參考部分 (RS)[S237,]。如果控制器180確定超過預(yù)設(shè)比率地在另一個圖像中存在不匹配部分(匪S),則控制器180經(jīng)由顯示單元151向拍攝者提供關(guān)于不匹配部分(匪S)的信息或用于去除不匹配部分(NMS)的信息[S238,]。在該情況下,不匹配部分(匪S)的預(yù)設(shè)比率是在多個分開部分DS的總的大小上的不匹配部分(匪S)的大小的比率。優(yōu)選的是,該預(yù)設(shè)比率的范圍是20%至30%。圖18是根據(jù)本發(fā)明的第二另外實(shí)施例的在用于控制移動終端的方法中的深度值確定步驟的示意流程圖。參見圖18,如根據(jù)一個實(shí)施例的前述深度值確定步驟S230那樣,根據(jù)第二另外實(shí)施例的深度值確定步驟S230”包括參考部分設(shè)置子步驟S231”、匹配部分搜索子步驟S232”、匹配部分(MS)移位子步驟S233”、位移計算子步驟S234”、和深度值計算子步驟 S236”。并且,根據(jù)第二另外實(shí)施例的深度值確定步驟S230”進(jìn)一步包括引導(dǎo)信息提供子步驟S237”,其用于引導(dǎo)拍攝者容易地拍攝3D圖像。具體地說,在深度值計算子步驟S235”的完成后,控制器180確定是否在多個分開部分DS中存在不確定的分開部分IDS,其中,不確定的分開部分IDS的深度值不能被確定 [S236”]。如果控制器180確定在多個分開部分DS中存在其深度值不能不期確定的不確定的分開部分IDS,則控制器經(jīng)由顯示單元來向拍攝者提供關(guān)于不確定的分開部分的信息,或用于去除不確定的分開部分IDS的信息[S237”]。圖19是根據(jù)本發(fā)明的在用于控制移動終端的方法中的3D圖像產(chǎn)生步驟S240的示意流程圖。參見圖19,根據(jù)本發(fā)明的3D圖像產(chǎn)生步驟S240包括3D圖像模式確定在步驟 S241、提供關(guān)于3D圖像模式的信息的子步驟S242、會聚點(diǎn)指定子步驟S243、F0V(視場)移位子步驟S244、和F0N(非視場)去除子步驟S245。具體地說,為了產(chǎn)生3D圖像,控制器180基于在深度值確定步驟S230、S230’和 S230”之一中確定的多個分開部分DS的深度值來優(yōu)先地確定適合于對象的3D圖像的3D圖像模式[S241]。在該情況下,在3D圖像模式確定子步驟S241中確定的3D圖像模式包括下述模式之一風(fēng)景模式,其具有獨(dú)特的預(yù)設(shè)深度值分布;風(fēng)景內(nèi)聚焦物體模式,其具有獨(dú)特的預(yù)設(shè)深度值分布;室內(nèi)聚焦物體模式,其具有獨(dú)特的預(yù)設(shè)深度值分布;以及,特寫拍攝模式,其具有獨(dú)特的預(yù)設(shè)深度值分布。但是,所確定的3D圖像模式是示例性3D圖像模式,其以便于拍攝者指定會聚點(diǎn)的方式來便于拍攝者拍攝高質(zhì)量的3D圖像,但是本發(fā)明不限于此。在下面的描述中,描述3D圖像模式的預(yù)設(shè)深度值分布。首先,風(fēng)景模式具有預(yù)設(shè)深度值分布[參考圖9]。具體地說,在3D圖像幀的頂側(cè)上布置了用于指示遠(yuǎn)距離的多個深度值,而在3D圖像幀的底側(cè)上布置了用于指示中等距離的多個深度值。其次,風(fēng)景內(nèi)聚焦物體模式具有預(yù)設(shè)深度值分布[參考圖10]。具體地說,在3D圖像幀的頂側(cè)上布置了用于指示遠(yuǎn)距離的多個深度值,在3D圖像幀的中間側(cè)和底側(cè)的至少一個上布置了用于指示近距離的多個深度值,并且,在3D圖像幀的底側(cè)的至少一部分上布置了用于指示中等距離的多個深度值。第三,室內(nèi)聚焦物體模式具有預(yù)設(shè)的深度值分布[參考圖11]。具體地說,在3D圖像幀的頂側(cè)上布置了用于指示中等距離的多個深度值,在3D圖像幀的中間側(cè)和底側(cè)的至少一個上布置了用于指示近距離的多個深度值,并且,在3D圖像幀的底側(cè)的至少一部分上布置了用于指示中等距離的多個深度值。第四,特寫拍攝模式具有預(yù)設(shè)的深度值分布[參考圖12]。具體地說,在3D圖像幀的頂側(cè)上布置了用于指示中等距離的多個深度值,在3D圖像幀的中間側(cè)和底側(cè)的至少一個上布置了用于指示特寫距離的多個深度值,并且,在3D圖像幀的底側(cè)的至少一部分上布置了用于指示中等距離的多個深度值。優(yōu)選的是,如果控制器180確定在多個分開部分DS的深度值分布和3D圖像模式的上述預(yù)設(shè)深度值之間的匹配率等于或大于預(yù)設(shè)同步率,則控制器180將對象的3D圖像的模式確定為與深度值分布的同步率對應(yīng)的3D圖像模式。在該情況下,預(yù)設(shè)同步率優(yōu)選地被設(shè)置為70% 80%。因此,控制器180確定在多個分開部分DS的深度值分布和3D圖像模式的上述預(yù)設(shè)深度值之間的匹配率是否等于或大于預(yù)設(shè)同步率。雖然在多個分開部分DS的深度值分布之間的匹配率不匹配3D圖像模式的預(yù)設(shè)深度值,但是控制器180能夠通過校正在深度值分布之間的不匹配來產(chǎn)生3D圖像,該3D圖像的逼真3D效果被增強(qiáng),并且防止了該3D圖像的視覺疲勞。優(yōu)選的是,如果控制器180確定在多個分開部分DS的深度值分布和3D圖像模式的預(yù)設(shè)深度值之間的匹配率小于預(yù)設(shè)同步率,則控制器180將對象的3D圖像的模式確定為風(fēng)景模式。當(dāng)觀看在風(fēng)景模式中產(chǎn)生的3D圖像時,觀看者識別到幾乎全部對象在顯示單元 151的表面之后后撤,由此不對于觀看者引起視覺疲勞。因此,如果控制器180不能確定對象的3D圖像模式,則控制器180確定將3D圖像模式確定為風(fēng)景模式,其將不引起視覺疲勞。優(yōu)選的是,在控制器180已經(jīng)確定3D圖像模式后,控制器180經(jīng)由顯示單元向拍攝者提供關(guān)于在3D圖像模式確定子步驟中確定的3D圖像模式的信息[S242]。具體地說, 控制器向用戶通知所確定的3D圖像模式的類型,以使得用戶能夠確定所確定的3D圖像模式是否是由拍攝者期望的3D圖像模式。在該情況下,移動終端可以進(jìn)一步包括休息或刷新按鈕,用于在如果拍攝者確定由控制器180確定的3D圖像模式不適當(dāng)時,重新設(shè)置3D圖像模式。如果選擇了休息或刷新按鈕,則控制器180將除了所確定的3D圖像模式之外的其余 3D圖像模式中的最適合的一個確定為3D圖像的模式。在3D圖像模式確定子步驟S241的完成后,控制器180基于在3D圖像模式確定子步驟S241中確定的3D圖像模式來將多個分開部分DS的至少一個指定為會聚點(diǎn)[S243]。具體地說,如果在3D圖像模式確定步驟S241中確定的3D圖像模式是風(fēng)景模式, 則控制器180將在左眼圖像L和右眼圖像R上設(shè)置的多個分開部分DS中的、具有用于指示最近距離的深度值的分開部分DS指定為會聚點(diǎn)[參考圖9]。具體地說,如果在3D圖像模式確定步驟S241中確定的3D圖像模式是風(fēng)景內(nèi)聚焦物體模式,則控制器180將在左眼圖像L和右眼圖像R上設(shè)置的多個分開部分DS中的、與具有用于指示最近距離的深度值的分開部分DS和具有聚焦物體的深度值的分開部分DS的平均深度值的對應(yīng)的分開部分DS指定為會聚點(diǎn)[參考圖10]。具體地說,如果在3D圖像模式確定步驟S241中確定的3D圖像模式是室內(nèi)聚焦物體模式,則控制器180將在左眼圖像L和右眼圖像R上的設(shè)置的多個分開部分DS中的、具有聚焦物體的深度值的分開部分DS指定為會聚點(diǎn)[參考圖11]。具體地說,如果在3D圖像模式確定步驟S241中確定的3D圖像模式是特寫拍攝模式,則控制器 180將具有在左眼圖像L和右眼圖像R上設(shè)置的多個分開部分DS中的、具有用于指示中間距離的深度值的分開部分DS和具有特寫物體的深度值的分開部分DS的平均深度值的分開部分DS指定為會聚點(diǎn)[參考圖12]。優(yōu)選的是,如果單元對象位于在3D圖像幀的邊緣上設(shè)置的分開部分DS處,則控制器180將在多個分開部分DS中的、在3D圖像幀的邊緣上設(shè)置的分開部分DS指定為會聚點(diǎn), 或?qū)⒕哂杏糜谥甘颈仍?D圖像幀的邊緣上設(shè)置的分開部分DS的深度值遠(yuǎn)的距離的深度值
25的分開部分DS指定為會聚點(diǎn)。當(dāng)觀看3D圖像時,如果對象更接近顯示單元151的邊緣,則觀看者難以獲得大的視差。因此,不容易提供3D效果。雖然有能夠提供3D效果的范圍,但是如果觀看者識別到對象以從顯示單元151的邊緣突出的方式定位,則這會導(dǎo)致觀看者的不逼真的3D效果和視覺疲勞。因此,如在上面的說明中所述,如果在3D圖像幀的邊緣上存在單元對象,則能夠以控制器180將會聚點(diǎn)校正到3D圖像幀部分內(nèi)的方式來解決上述問題。在會聚點(diǎn)指定子步驟S243的完成后,控制器180以下述方式來移位在左眼圖像L 和右眼圖像R內(nèi)的左眼圖像L和右眼圖像R的至少一個的FOV(視場)卩,在會聚點(diǎn)指定子步驟S243中被指定為會聚點(diǎn)的至少一個分開部分DS中包括的左眼圖像L和右眼圖像R 的FOV彼此重疊[S244]。隨后,控制器180以在由FOV移位子步驟S244移位的位置處將左眼圖像L和右眼圖像R重疊在一起的方式來合成3D圖像。其后,控制器180從在3D圖像合成步驟中合成的3D圖像去除除了預(yù)設(shè)3D圖像幀或FON(非視場)之外的區(qū)域[S245]。選用地,可以在FOV移位子步驟S244之前執(zhí)行區(qū)域去除子步驟S245。根據(jù)本發(fā)明的一個實(shí)施例,可以在程序記錄介質(zhì)中將上述方法實(shí)現(xiàn)為計算機(jī)可讀代碼。計算機(jī)可讀介質(zhì)包括其中存儲了由計算機(jī)系統(tǒng)可讀的數(shù)據(jù)的所有種類的記錄裝置。 計算機(jī)可讀介質(zhì)例如包括ROM、RAM、CD-ROM、磁帶、軟盤、和光學(xué)數(shù)據(jù)存儲裝置等,并且也包括載波型實(shí)現(xiàn)方式(例如,經(jīng)由因特網(wǎng)的傳輸)。通過預(yù)定類型的本發(fā)明的結(jié)構(gòu)元件和特征的組合來實(shí)現(xiàn)上述實(shí)施例。除非獨(dú)立地指定,應(yīng)當(dāng)選擇性地考慮結(jié)構(gòu)元件或特征的每一個??梢詧?zhí)行結(jié)構(gòu)元件或特征的每一個,而不與其他結(jié)構(gòu)元件或特征組合。而且,一些結(jié)構(gòu)元件和/或特征可以彼此組合以構(gòu)成本發(fā)明的實(shí)施例。本領(lǐng)域的技術(shù)人員應(yīng)該明白,可以在不脫離本發(fā)明的精神和范圍的情況下,對本發(fā)明進(jìn)行各種的修改和變化。因此,本發(fā)明旨在使得本發(fā)明涵蓋只要在所附權(quán)利要求和其等價物的范圍內(nèi)的該發(fā)明的變化和修改。
權(quán)利要求
1.一種移動終端,包括第一相機(jī)和第二相機(jī),其被配置來分別獲得場景的右眼圖像和左眼圖像; 顯示器,其被配置來顯示三維(3D)圖像;以及控制器,用于控制所述第一相機(jī)、所述第二相機(jī)和所述顯示器, 其中,所述控制器被配置來設(shè)置所述左眼圖像和所述右眼圖像的每一個的多個分開部分; 基于所述左眼圖像和所述右眼圖像的每一個的所述多個分開部分的每一個的深度值來產(chǎn)生所述3D圖像;以及使得所述顯示器顯示所述產(chǎn)生的3D圖像。
2.根據(jù)權(quán)利要求1所述的移動終端,其中用于所述左眼圖像和所述右眼圖像的每一個的所述多個分開部分的每一個具有相同的大??;或所述多個分開部分的至少一個具有不同的大小。
3.根據(jù)權(quán)利要求2所述的移動終端,其中,所述控制器進(jìn)一步被配置來當(dāng)所述多個分開部分的所述至少一個具有所述不同的大小時,參考在所述左眼圖像和所述右眼圖像中包括的單元對象設(shè)置用于所述左眼圖像和所述右眼圖像的每一個的所述多個分開部分。
4.根據(jù)權(quán)利要求1所述的移動終端,其中,所述控制器被進(jìn)一步配置來將在所述左眼圖像和所述右眼圖像的一個圖像的視場上的所述多個分開部分設(shè)置為至少一個參考部分;以及搜索與在所述左眼圖像和所述右眼圖像的另一個圖像的視場上設(shè)置的所述多個分開部分中的所述至少一個參考部分對應(yīng)的至少一個匹配部分。
5.根據(jù)權(quán)利要求4所述的移動終端,其中,所述控制器被進(jìn)一步配置來移位在所述另一個圖像內(nèi)的所述至少一個匹配部分的每一個中包括的視場,使得參考所述一個圖像,所述至少一個參考部分的每一個的位置與所述至少一個匹配部分的每一個的位置匹配;計算在所述另一個圖像內(nèi)移位的所述至少一個匹配部分的每一個的位移;以及基于所述計算的位移來確定所述多個分開部分的每一個的深度值。
6.根據(jù)權(quán)利要求1所述的移動終端,其中所述控制器被進(jìn)一步配置來基于所述左眼圖像和所述右眼圖像的每一個的所述多個分開部分的每一個的所述深度值來確定所述3D圖像的3D圖像模式,并且所述3D圖像模式包括選自由下述部分構(gòu)成的組的一個 風(fēng)景模式,其具有獨(dú)特的預(yù)設(shè)深度值分布; 風(fēng)景內(nèi)聚焦物體模式,其具有獨(dú)特的預(yù)設(shè)深度值分布; 室內(nèi)聚焦物體模式,其具有獨(dú)特的預(yù)設(shè)深度值分布;或者, 特寫拍攝模式,其具有獨(dú)特的預(yù)設(shè)深度值分布。
7.根據(jù)權(quán)利要求6所述的移動終端,其中,所述風(fēng)景模式具有以下述方式配置的所述預(yù)設(shè)深度值分布在3D圖像幀的頂部上布置用于指示遠(yuǎn)距離的多個深度值,并且在所述3D 圖像幀的底部上布置用于指示中等距離的多個深度值。
8.根據(jù)權(quán)利要求6所述的移動終端,其中,所述風(fēng)景內(nèi)聚焦物體模式具有以下述方式配置的所述預(yù)設(shè)深度值分布在3D圖像幀的頂部上布置用于指示遠(yuǎn)距離的多個深度值,在所述3D圖像幀的至少中間部分或底部部分上布置用于指示近距離的多個深度值,并且在所述3D圖像幀的至少所述底部部分上布置用于指示中等距離的多個深度值。
9.根據(jù)權(quán)利要求6所述的移動終端,其中,所述室內(nèi)聚焦模式具有以下述方式配置的所述預(yù)設(shè)深度值分布在3D圖像幀的頂部上布置用于指示中等距離的多個深度值的一些, 在所述3D圖像幀的至少中間部分或底部部分上布置用于指示近距離的多個深度值,以及在所述3D圖像幀的至少所述底部部分上布置用于指示所述中等距離的其余所述多個深度值。
10.根據(jù)權(quán)利要求6所述的移動終端,其中,所述特寫拍攝模式具有以下述方式配置的所述預(yù)設(shè)深度值分布在3D圖像幀的至少頂部或底部上布置用于指示中等距離的多個深度值,以及在所述3D圖像幀的至少中間部分上布置用于指示特寫距離的多個深度值。
11.根據(jù)權(quán)利要求6所述的移動終端,其中如果在所述多個分開部分的深度值分布和所述3D圖像模式的預(yù)設(shè)深度值分布之間的匹配率等于或大于預(yù)定同步率,則所述控制器被進(jìn)一步配置來將所述3D圖像的模式確定為與所述深度值分布的所述預(yù)設(shè)同步率對應(yīng)的所述3D圖像模式,并且如果在所述多個分開部分的所述深度值分布和所述3D圖像模式的所述預(yù)設(shè)深度值分布之間的所述匹配率小于所述預(yù)設(shè)同步率,則所述控制器被進(jìn)一步配置來將所述3D圖像的所述模式確定為所述風(fēng)景模式。
12.根據(jù)權(quán)利要求11所述的移動終端,其中,所述預(yù)設(shè)同步率包括70% 80%。
13.根據(jù)權(quán)利要求6所述的移動終端,其中,所述控制器被進(jìn)一步配置來基于由所述控制器確定的所述3D圖像模式來將所述多個分開部分的至少一個指定為會聚點(diǎn)。
14.根據(jù)權(quán)利要求13所述的移動終端,其中,如果由所述控制器確定的所述3D圖像模式是所述風(fēng)景模式,則所述控制器被進(jìn)一步配置來將在所述左眼圖像和所述右眼圖像上設(shè)置的所述多個分開部分中的、具有用于指示最近距離的深度值的分開部分指定為所述會聚點(diǎn)ο
15.根據(jù)權(quán)利要求13所述的移動終端,其中,如果由所述控制器確定的所述3D圖像模式是風(fēng)景內(nèi)聚焦物體模式,則所述控制器被進(jìn)一步配置來將在所述左眼圖像和所述右眼圖像上設(shè)置的所述多個分開部分中的、與具有用于指示最近距離的深度值的分開部分和具有聚焦物體的深度值的分開部分之間的平均值深度值對應(yīng)的分開部分指定為所述會聚點(diǎn)。
16.根據(jù)權(quán)利要求13所述的移動終端,其中,如果由所述控制器確定的所述3D圖像模式是所述室內(nèi)聚焦物體模式,則所述控制器被進(jìn)一步配置來將在所述左眼圖像和所述右眼圖像上設(shè)置的所述多個分開部分中的、具有聚焦物體的深度值的分開部分指定為所述會聚點(diǎn)ο
17.根據(jù)權(quán)利要求13所述的移動終端,其中,如果由所述控制器確定的所述3D圖像模式是所述特寫拍攝模式,則所述控制器被進(jìn)一步配置來將具有在所述左眼圖像和所述右眼圖像上設(shè)置的所述多個分開部分中的、具有用于指示中等距離的深度值的分開部分和具有特寫物體的深度值的分開部分之間的平均值深度值的分開部分指定為所述會聚點(diǎn)。
18.根據(jù)權(quán)利要求13所述的移動終端,其中,如果單元對象位于在3D圖像幀的邊緣部分上設(shè)置的分開部分處,則所述控制器被進(jìn)一步配置來將在所述3D圖像幀的所述邊緣部分上設(shè)置的所述分開部分指定為所述會聚點(diǎn);或者將具有用于指示比在所述3D圖像幀的所述邊緣部分上設(shè)置的所述分開部分的深度值更遠(yuǎn)的距離的深度值的分開部分指定為所述會聚點(diǎn)。
19.根據(jù)權(quán)利要求13所述的移動終端,其中,所述控制器被進(jìn)一步配置來在所述左和右圖像內(nèi)的至少一個圖像的視場移位,使得在被指定為所述會聚點(diǎn)的所述多個分開部分的至少一個中包括的所述左和右眼圖的視場彼此重疊。
20.根據(jù)權(quán)利要求19所述的移動終端,其中,所述控制器被進(jìn)一步配置來通過將所述左眼圖像和所述右眼圖像彼此重疊來產(chǎn)生所述3D圖像。
全文摘要
本發(fā)明公開了一種移動終端及其控制方法,通過其,可以產(chǎn)生3D或立體圖像以使得觀看者從視覺疲勞中顯著地復(fù)蘇。本發(fā)明包括第一相機(jī)和第二相機(jī),其被配置來獲得3D圖像;顯示單元,用于顯示由第一和第二相機(jī)的至少一個拍攝的圖像;以及,控制器,用于控制第一相機(jī)、第二相機(jī)、和顯示單元,其中,所述控制器在由第一相機(jī)拍攝的右眼圖像和由第二相機(jī)拍攝的左眼圖像上設(shè)置多個分開部分,并且然后基于多個分開部分的每一個的深度值來產(chǎn)生3D圖像。
文檔編號H04M1/725GK102447780SQ20111027254
公開日2012年5月9日 申請日期2011年9月8日 優(yōu)先權(quán)日2010年9月8日
發(fā)明者姜璟熙, 林秀晶, 金學(xué)海 申請人:Lg電子株式會社