專利名稱:用于處理圖像的方法和設備的制作方法
技術領域:
本發(fā)明的ー個或多個方面涉及圖像處理,更具體地,涉及ー種用于獲得以有效的和用戶友好的方式添加有視覺效果的圖像的圖像處理技木。
背景技術:
在諸如照相機或便攜式攝像機的圖像處理設備中,可通過經用戶的操作來改變硬件設置值或者通過根據由用戶選擇的模式來處理圖像數(shù)據,從而從同一圖像產生具有各種氛圍的圖像。圖像處理設備提供各種拍攝模式或各種風格模式,從而用戶可在這樣的模式中選擇期望的模式。所述各種拍攝模式的示例包括夜間模式、人像模式、風景模式等。所述各種風格模式的示例包括鮮明(clear)模式、寧靜(calm)模式、深褐色(sepia)模式、清爽 (cool)模式、古典(classic)模式等。用戶可在圖像處理設備中隨意地設置這些拍攝模式或風格模式。也就是說,用戶可從在圖像處理設備中設置的這些模式中選擇期望的模式,或者可使用默認模式。用戶可能需要學習這些模式,以選擇適合于氛圍的模式來捕獲圖像。
發(fā)明內容
根據本發(fā)明的一方面,提供ー種圖像處理設備,所述圖像處理設備包括存儲器單兀,用于存儲映射表,該映射表表^^預設聲音樣式中的至少ー個對應于用于控制圖像捕獲的至少一條預設設置數(shù)據;聲音傳感器,用于獲得聲音;控制器,用于將所述預設聲音樣式中的一個確定為獲得的聲音的聲音樣式;成像単元,用于捕獲圖像。所述控制器將映射表中的所述至少一條預設設置數(shù)據中的與所述聲音樣式對應的預設設置數(shù)據應用于成像単元。所述至少一條預設設置數(shù)據中的每一條可包括光圈值、快門速度、國際標準化組織(ISO)感光度和圖像傳感器設置值中的至少ー個。所述預設聲音樣式可包括第一樣式和第二樣式。第一樣式可對應于作為映射表中的所述至少一條預設設置數(shù)據的第一數(shù)據。第二樣式可對應于作為映射表中的所述至少一條預設設置數(shù)據的第二數(shù)據??蓾M足以下條件中的至少ー個第一條件,即,包括在第一數(shù)據中的光圈值大于包括在第二數(shù)據中的光圈值;第二條件,即,包括在第一數(shù)據中的快門速度快于包括在第二數(shù)據中的快門速度。第一樣式的時域特性可與第二樣式的時域特性不同,或者,第一樣式的頻域特性可與第二樣式的頻域特性不同。每個時域特性可包括時域的幅度變化和自相關性中的至少 ー個,每個頻域特性可包括頻率分布特性。所述控制器可對與根據獲得的聲音的強度(音量)確定的聲音樣式對應的第二預設設置數(shù)據中的至少ー些進行調整。所述第二預設設置數(shù)據可包括光圈值、快門速度、ISO 感光度和圖像傳感器設置值中的至少ー個。根據本發(fā)明的另一方面,提供ー種圖像處理方法,所述圖像處理方法包括將映射表存儲在存儲器單兀中,該映射表表不預設聲音樣式中的至少ー個對應于用于控制圖像捕獲的至少一條預設設置數(shù)據;獲得聲音;將所述預設聲音樣式中的一個確定為獲得的聲音的聲音樣式;通過采用在映射表中的所述至少一條預設設置數(shù)據中的與確定的聲音樣式對應的預設設置數(shù)據來捕獲圖像。所述至少一條預設設置數(shù)據中的的每一條可包括光圈值、快門速度、國際標準化組織(ISO)感光度和圖像傳感器設置值中的至少ー個。所述預設聲音樣式可包括第一樣式和第二樣式。第一樣式可對應于作為映射表中的所述至少一條預設設置數(shù)據的第一數(shù)據。第二樣式可對應于作為映射表中的所述至少一條預設設置數(shù)據的第二數(shù)據。可滿足以下條件中的至少ー個第一條件,即,包括在第一數(shù)據中的光圈值大于包括在第二數(shù)據中的光圈值;第二條件,即,包括在第一數(shù)據中的快門速度快于包括在第二數(shù)據中的快門速度。第一樣式的時域特性可與第二樣式的時域特性不同,或者,第一樣式的頻域特性可與第二樣式的頻域特性不同。每個時域特性可包括時域的幅度變化和自相關性中的至少 ー個,每個頻域特性可包括頻率分布特性。圖像的捕獲步驟可包括調整與根據獲得的聲音的強度確定的聲音樣式對應的預設設置數(shù)據中的至少ー些。所述預設設置數(shù)據可包括光圈值、快門速度、ISO感光度和圖像傳感器設置值中的至少ー個。根據發(fā)明的另一方面,提供ー種圖像處理設備,所述圖像處理設備包括存儲器單元,用于將映射表存儲在存儲器単元中,該映射表表示預設聲音樣式分別對應于預設視覺效果;聲音傳感器,用于獲得聲音;控制器,用于將所述預設聲音樣式中的一個確定為獲得的聲音的聲音樣式;成像単元,用于捕獲圖像。所述控制器執(zhí)行以下操作中的至少ー個控制成像單元將在映射表中的與確定的聲音樣式對應的預設視覺效果應用于捕獲的圖像;修正(調整)捕獲的圖像。所述預設視覺效果中的至少ー個包括用于控制圖像的捕獲的設置數(shù)據,所述設置數(shù)據包括光圈值、快門速度、ISO感光度和圖像傳感器設置值中的至少ー個??刂破骺赏ㄟ^將包括在與確定的聲音樣式對應的預設視覺效果中的設置數(shù)據應用于成像單元來控制成像單元的操作。所述預設視覺效果中的至少ー個包括用于對捕獲的圖像進行修正的圖像數(shù)據處理模式??刂破骺赏ㄟ^根據包括在與確定的聲音樣式對應的預設視覺效果中的圖像數(shù)據處理模式對捕獲的圖像進行修正,來修正捕獲的圖像。圖像數(shù)據處理模式包括關于亮度、色度、對比度和色彩平衡中的至少ー個的修正數(shù)據??刂破骺蓪Πㄔ谂c根據獲得的聲音的強度確定的聲音樣式對應的預設視覺效果中的圖像數(shù)據處理模式的修正數(shù)據進行控制。圖像數(shù)據處理模式包括關于漸暈效果、魚眼效果、水彩畫效果以及添加對象的合成效果中的至少ー個的處理數(shù)據。控制器可調整圖像數(shù)據處理模式的處理數(shù)據的修正級別,該圖像數(shù)據處理模式被包括在與根據獲得的聲音的強度確定的聲音樣式對應的預設視 覺效果中。根據本發(fā)明的另一方面,提供一種圖像處理方法,所述圖像處理方法包括將映射 表存儲在存儲器單元中,該映射表表示預設聲音樣式分別對應于預設視覺效果;獲得聲音; 將所述預設聲音樣式中的一個確定為獲得的聲音的聲音樣式;捕獲圖像。捕獲圖像的步驟 包括以下步驟中的至少一個應用用于控制圖像的捕獲的設置數(shù)據,以將映射表中的與確 定的聲音樣式對應的預設視覺效果應用于捕獲的圖像;修正捕獲的圖像。根據本發(fā)明的另一方面,提供一種圖像處理設備,所述圖像處理設備包括存儲器 單兀,用于存儲映射表,該映射表表不預設聲音樣式中的至少一個對應于用于修正圖像數(shù) 據的至少一個圖像數(shù)據處理模式;聲音傳感器,用于獲得聲音;控制器,用于將所述預設聲 音樣式中的一個確定為獲得的聲音的聲音樣式;成像單元,用于通過捕獲圖像來獲得圖像 數(shù)據。所述控制器可根據映射表中的所述至少一個圖像數(shù)據處理模式中的與確定的聲音樣 式對應的圖像數(shù)據處理模式來調整圖像數(shù)據。根據本發(fā)明的另一方面,提供一種圖像處理方法,所述圖像處理方法包括將映射 表存儲在存儲器單兀中,該映射表表不預設聲音樣式中的至少一個對應于用于修正圖像數(shù) 據的至少一個圖像數(shù)據處理模式;獲得聲音;將所述預設聲音樣式中的一個確定為獲得的 聲音的聲音樣式;通過捕獲圖像來獲得圖像數(shù)據;根據映射表中的所述至少一個圖像數(shù)據 處理模式中的與確定的聲音樣式對應的圖像數(shù)據處理模式來調整圖像數(shù)據。根據本發(fā)明的另一方面,提供一種圖像處理設備,所述圖像處理設備包括存儲器 單元,用于存儲音頻數(shù)據和圖像數(shù)據;控制器,用于接收音頻數(shù)據,接收圖像數(shù)據,并通過將 與音頻數(shù)據對應的預設視覺效果應用于圖像數(shù)據來調整圖像數(shù)據。根據本發(fā)明的另一方面,提供一種圖像處理方法,所述圖像處理方法包括接收音 頻數(shù)據;接收圖像數(shù)據;通過將與音頻數(shù)據對應的預設視覺效果應用于圖像數(shù)據來調整圖 像數(shù)據。
通過參照附圖詳細地描述本發(fā)明的示例性實施例,本發(fā)明的上述和其它特征將變 得更加明顯,其中圖1是根據本發(fā)明實施例的圖像處理設備的框圖;圖2是示出根據本發(fā)明實施例的具有與聲音樣式對應的視覺效果的圖像的示圖;圖3是示出根據本發(fā)明另一實施例的具有與聲音樣式對應的視覺效果的圖像的 示圖;圖4是示出根據本發(fā)明另一實施例的具有與聲音樣式對應的視覺效果的圖像的 示圖;圖5示出根據本發(fā)明實施例的包括聲音樣式和視覺效果之間的映射信息的圖像 數(shù)據結構;圖6是示出根據本發(fā)明實施例的圖像處理方法的流程圖;圖7是示出根據本發(fā)明另一實施例的圖像處理方法的流程圖;圖8是示出根據本發(fā)明另一實施例的圖像處理方法的流程圖。
具體實施例方式以下,將參照附圖詳細地描述本發(fā)明的示例性實施例。然而,本發(fā)明不限于這里闡明的示例性實施例。圖中相同的參考標號始終表示相同的元件。這里使用的術語,例如“實施例”、“示例”、“方面”和“說明”,不應被理解為意味著在此描述的本發(fā)明的方面(或設計)優(yōu)于本發(fā)明的其他方面(或設計)或者具有超過本發(fā)明的其他方面(或設計)的優(yōu)點。通常,這里使用的術語,例如,“組件”、“模塊”、“系統(tǒng)”和“接ロ ”,包括硬件、軟件、
固件或者硬件、軟件和固件的任意組合。術語“或者”應被解釋為“包含的“或””,而不是“排他的“或””。也就是說,除非另外說明或者除非根據上下文另外明確指出,否則表達式“X使用“a”或者“b””可意味著自然包含排列方式之一。如這里所使用的,除非另外說明或者除非根據上下文另外明確指出,否則単數(shù)形式也意圖包括復數(shù)形式。術語“和/或”包括一個或多個相關的所列項的任意組合和所有組合。當在這個說明書中使用術語“包含”和/或“包括”時,說明存在所提到的特征、整體、操作、模塊、元件和/或組件,但不排除存在或添加ー個或多個其它特征、整體、操作、模塊、元件、組件和/或其組合。另外,盡管在這里可使用術語“第一”、“第二”、“第三”等來描述各種元件、組件、區(qū)域、層和/或區(qū)間,但是這些元件、組件、區(qū)域、層和/或區(qū)間不受這些術語的限制。這些術語僅用于將ー個元件、組件、區(qū)域、層或區(qū)間與另一元件、組件、區(qū)域、層或區(qū)間進行區(qū)分。因此,在不脫離本發(fā)明的教導的情況下,下面討論的第一元件、第一組件、第一區(qū)域、第一層或第一區(qū)間可被命名為第二元件、第二組件、第二區(qū)域、第二層或第二區(qū)間。圖I是根據本發(fā)明實施例的圖像處理設備100的框圖。圖像處理設備100可以是能夠捕獲靜止圖像或運動圖像并對捕獲的或存儲的圖像數(shù)據進行處理的設備。圖像處理設備100的示例包括數(shù)碼相機、照相手機、個人數(shù)字助手、便攜式多媒體播放器、便攜式攝像機、智能手機、膝上型計算機、桌面計算機和數(shù)字電視(TV)。圖像處理設備100可包括聲音傳感器110、存儲器単元120、成像単元130和/或控制器150。成像単元130可包括光學単元131和/或圖像傳感器133??刂破?50可包括分析単元151、確定單元153和/或圖像處理器157。根據本發(fā)明的實施例,控制器150 可包括至少ー個處理器,所述至少一個處理器被配置用于執(zhí)行分析単元151、確定單元153 和/或圖像處理器157中的每個的操作。圖像處理設備100還可包括用戶界面単元(未示出)。用戶界面単元可將捕獲的圖像或運動圖像的預覽或示圖提供給用戶,和/或可顯示圖像處理設備100的當前狀態(tài)。用戶界面單元還可提供用戶界面,通過該用戶界面,用戶可選擇或改變(例如)拍攝模式、風格模式或設置數(shù)據。也就是說,通過用戶界面単元,用戶可通過液晶顯示器(LCD)、揚聲器、 觸摸屏或按鈕來輸入信息或者可輸出信息和/或數(shù)據。例如,用戶界面単元可提供用戶界面,從而用戶可利用此用戶界面激活或撤銷混合模式。根據本發(fā)明的實施例,所述混合模式可以是下述模式在該模式中,聲音被分析,并且基于分析,與該聲音相關聯(lián)的氛圍對應的視覺效果被自動應用于圖像。因此,當在圖像處理設備100中激活所述混合模式時,在沒有用戶的操作的情況下,與周圍的聲音相關聯(lián)的氛圍對應的視覺效果可被自動選擇。因此,能夠方便地獲得添加有視覺效果的捕獲的圖像。聲音傳感器110可獲得圖像處理設備100的周圍的聲音。例如,聲音傳感器110可包括麥克風??稍趫D像處理設備100捕獲圖像的時刻由聲音傳感器110獲得聲音,或者可在圖像被捕獲之前或之后的預定時間段內獲得聲音。例如,可在用于驅動成像単元130的至少一部分的半快門信號被輸入的時間與全快門信號被輸入的時間之間的時間段獲得聲音。 另外,聲音可在混合模式被激活的時間與全快門信號被輸入的時間之間的時間段被實時獲得,可以被周期性獲得,或者可以在預定時間段內被獲得。存儲器単元120可接收并存儲由聲音傳感器110獲得的聲音。存儲器単元120可接收并存儲由成像単元130捕獲的圖像或圖像數(shù)據。存儲器単元120還可接收并存儲由包括在控制器150中的圖像處理器157處理的圖像數(shù)據。存儲器単元120可包括易失性存儲器和/或非易失性存儲器。例如,易失性存儲器可以是靜態(tài)隨機存取存儲器(SRAM)或動態(tài)隨機存取存儲器(DRAM)。非易失性存儲器可以是只讀存儲器(ROM)、閃存、硬盤、安全數(shù)字 (SD)存儲卡或多媒體卡(MMC)。根據本發(fā)明的實施例,存儲器単元120可存儲映射表,所述映射表指示預設聲音樣式中的至少ー個對應于預定設置數(shù)據,所述預定設置數(shù)據用于控制圖像的捕獲或調整。例如,預設聲音樣式可包括寧靜聲音樣式和/或響亮聲音樣式。預設聲音樣式可根據音樂流派被分類為諸如古典音樂樣式、爵士樂樣式和/或搖滾音樂樣式的音樂樣式。 音樂樣式還可被分類為子樣式,例如,寧靜聲音樣式和/或響亮聲音樣式。預設聲音樣式還可包括語言樣式,諸如女性樣式、男性樣式和/或兒童樣式。預定設置數(shù)據可包括光圈值、 快門速度、ISO感光度和圖像傳感器設置值中的至少ー個。也就是說,預設設置數(shù)據可被用于控制圖像的捕獲或者用于控制成像単元130。另外,光圈值、快門速度、ISO感光度和圖像傳感器設置值中的每個可被用于對現(xiàn)有值或者根據現(xiàn)有設置而設置的值進行増加、減小或更新。例如,包括在映射表中的預設聲音樣式可包括第一樣式和第二樣式。第一樣式可對應于作為映射表中的預設設置數(shù)據的第一數(shù)據。第二樣式可對應于作為映射表中的預設設置數(shù)據的第二數(shù)據。例如,可滿足以下條件中的至少ー個第一條件,即,包括在第一數(shù)據中的光圈值大于包括在第二數(shù)據中的光圈值;第二條件,即,包括在第一數(shù)據中的快門速度快于包括在第二數(shù)據中的快門速度。第一樣式的時域特性可與第二樣式的時域特性不同, 或者,第一樣式的頻域特性可與第二樣式的頻域特性不同。每個時域特性可包括時域的幅度變化和自相關性中的至少ー個。每個頻域特性可包括頻率分布特性。根據本發(fā)明的另ー實施例,存儲單元120可存儲映射表,該映射表指示預設聲音樣式中的至少ー個對應于用于修正(調整)圖像數(shù)據的至少ー個圖像數(shù)據處理模式。在圖像數(shù)據處理模式中,捕獲的圖像或圖像數(shù)據被修正。例如,圖像數(shù)據處理模式可包括關于亮度、色度、對比度和色彩平衡中的至少ー個的修正數(shù)據。另外,圖像數(shù)據處理模式可包括用于應用漸暈效果、魚眼效果、水彩畫效果以及添加對象的合成效果中的至少ー個的處理數(shù)據。根據本發(fā)明的另ー實施例,存儲單元120可存儲映射表,該映射表指示預設聲音樣式分別對應于預設視覺效果。預設視覺效果中的至少ー個可包括用于控制圖像的捕獲的設置數(shù)據。另外,預設視覺效果中的至少ー個可包括用于對捕獲的圖像進行修正的圖像數(shù)據處理模式。成像單元130可包括光學單元131和/或圖像傳感器133。成像單元130可通過捕獲圖像來獲得圖像數(shù)據。成像単元130還可在控制器150的控制下調整設置數(shù)據或應用由控制器150確定的設置數(shù)據。例如,成像単元130可將調整的或確定的設置數(shù)據應用于捕獲圖像,以獲得應用了特定視覺效果的圖像數(shù)據。盡管未不出,光學單兀131可包括用于聚集光信號的鏡頭、用于控制光信號的光強度的可變光圈、用于控制光信號的輸入的快門等。例如,鏡頭可包括用于根據焦距減小或増加成像角度的變焦鏡頭和/或用于對對象進行對焦的對焦鏡頭。多個鏡頭可被単獨形成或者可被一起形成為ー組鏡頭??扉T可包括機械快門,機械快門的簾幕向上或向下運動。另外,快門可作為電子快門,這是因為圖像傳感器133可控制提供電信號。另外,光學單元131可包括用于驅動鏡頭、可變光圈和/或快門的電機。例如,電機可控制鏡頭的位置、可變光圈的開或關或者操作快門,以執(zhí)行自動對焦、控制曝光、可變光圈的調整或者執(zhí)行變焦。電機可從控制器150接收設置數(shù)據或控制信號,并控制光圈值和/或快門速度。圖像傳感器133可從光學単元131接收光信號,并將光信號轉換為電信號。例如, 圖像傳感器133可以是電荷耦合器件(CCD)傳感器或互補金屬氧化物半導體(CMOS)傳感器??刂破?50可從存儲器単元120接收獲得的聲音。另外,控制器150可繞過存儲器単元120,并可直接從聲音傳感器110接收獲得的聲音??刂破?50可訪問存儲在存儲器単元120中的預設聲音樣式、至少一條設置數(shù)據、至少ー個圖像數(shù)據處理模式、預設視覺效果或映射表??刂破?50可將預設聲音樣式中的一個確定為獲得的聲音的聲音樣式。另外,控制器150可處理圖像數(shù)據。例如,控制器150可執(zhí)行用于提高圖像質量的圖像數(shù)據處理,例如,圖像數(shù)據的降噪、伽瑪(gamma)修正、色彩濾光插值、色彩矩陣、色彩修正或色彩增強??刂破?50可通過壓縮處理的圖像數(shù)據來產生圖像數(shù)據文件。另外,控制器150可將處理的圖像數(shù)據或圖像數(shù)據文件發(fā)送到存儲器単元120??砂纯赡娴幕虿豢赡娴膲嚎s格式對圖像數(shù)據進行壓縮。例如,可按聯(lián)合圖像專家組(JPEG)格式或JPEG 2000 格式來壓縮圖像數(shù)據。另外,控制器150可例如對圖像數(shù)據執(zhí)行銳度控制、色彩控制、模糊、 邊緣增強、圖像分析、圖像識別和圖像效果處理。另外,控制器150可控制圖像的捕獲或者可控制成像單元130。例如,控制器150 可調整成像単元130的設置數(shù)據,或者可將由控制器150確定的設置數(shù)據應用到成像単元 130。根據本發(fā)明的實施例,控制器150可將映射表中的至少一條預設設置數(shù)據中的與確定的聲音樣式對應的預設設置數(shù)據應用到成像単元130。另外,控制器150可對與根據獲得的聲音的強度(音量)確定的聲音樣式對應的預設設置數(shù)據中的至少ー些部分進行調整。根據本發(fā)明的另ー實施例,控制器150可根據映射表中的至少ー個圖像數(shù)據處理模式中的與確定的聲音樣式對應的圖像數(shù)據處理模式來修正圖像數(shù)據。這里,可通過由成像単元130捕獲圖像來獲得圖像數(shù)據。另外,控制器150可按照與根據獲得的聲音的強度確定的聲音樣式對應的圖像數(shù)據處理模式來調整修正數(shù)據。另外,控制器150可調整與根據獲得的聲音的強度確定的聲音樣式對應的處理數(shù)據的修正級別。根據本發(fā)明的另ー示例,控制器150可控制成像單元130將映射表中的與聲音樣式對應的預設視覺效果應用到捕獲的圖像,和/或可修正捕獲的圖像。這里,控制器150 可通過將包括在與確定的聲音樣式對應的預設視覺效果中的設置數(shù)據應用到成像単元130 來控制成像単元130。另外,控制器150可通過根據包括在與確定的聲音樣式對應的預設視覺效果中的圖像數(shù)據處理模式對捕獲的圖像進行修正,來修正捕獲的圖像。另外,控制器 150可根據圖像數(shù)據處理模式調整修正數(shù)據,該圖像數(shù)據處理模式被包括在與根據獲得的聲音的強度確定的聲音樣式對應的預設視覺效果中。另外,控制器150可根據圖像數(shù)據處理模式調整處理數(shù)據的修正級別,該圖像數(shù)據處理模式被包括在與根據獲得的聲音的強度確定的聲音樣式對應的預設視覺效果中。另外,控制器150可確定與使用預設公式、預設函數(shù)、硬件模塊、軟件模塊確定的聲音樣式對應的預設視覺效果,或者可調整預設視覺效果中的至少ー些部分,而不必使用映射表。另外,控制器150可直接確定與獲得的聲音對應的預設視覺效果,而不必確定與獲得的聲音對應的聲音樣式。在這種情況下,包括在控制器150中的分析單兀151可被繞過或被省略。分析単元151可從存儲器単元120接收獲得的聲音。另外,分析単元151可繞過存儲器單元120而直接從聲音傳感器110接收獲得的聲音。分析単元151可分析獲得的聲音的時域特性和/或頻域特性。時域特性可包括時域的幅度變化和自相關性中的至少ー個。 頻域特性可包括頻率分布特性。例如,分析単元151可通過分析時域的幅度變化和/或自相關性來獲得關于音樂節(jié)拍、音樂時間樣式或節(jié)奏的分析數(shù)據,從而確定聲音是否對應于根據音樂流派分類的樣式中的ー個。另外,分析単元151可通過分析頻率分布特性來獲得分析數(shù)據,從而對語音和音樂進行區(qū)分、將語音分類為女性樣式、男性樣式或兒童樣式,或者識別用于演奏音樂的特定樂器。另外,分析単元151可計算獲得的聲音的強度。例如,獲得的聲音的強度可以是在獲得的聲音的在預設時域中的平均強度或最高強度。獲得的聲音的強度可按分貝(dB)進行計算。另外,可在分析數(shù)據中說明獲得的聲音的強度。確定單元153可從分析単元151接收獲得聲音的分析數(shù)據。確定單元153可從存儲器單兀120接收包括在映射表中的預設聲音樣式。確定單兀153可基于獲得的聲音的分析數(shù)據,將映射表中的預設聲音樣式中的一個確定為獲得的聲音的聲音樣式。例如,確定単元153可將獲得的聲音的分析數(shù)據與預設聲音樣式進行比較,并從預設聲音樣式中確定 (識別)與獲得的聲音最相似的聲音樣式,作為獲得的聲音的聲音樣式。另外,確定單元153 可計算獲得的聲音的分析數(shù)據和每個預設聲音樣式之間的相關性,并將預設聲音樣式中的具有最大相關性或者具有等于或大于預定值的相關性的聲音樣式確定為獲得的聲音的聲音樣式。圖像處理器157可從確定単元153接收確定的聲音樣式。圖像處理器157可訪問存儲在存儲器単元120中的映射表,以獲得與確定的聲音樣式對應的預設視覺效果、預設設置數(shù)據或者樣式圖像數(shù)據處理模式。圖像處理器157可將與確定的聲音樣式對應的預設設置數(shù)據應用到捕獲的圖像或者成像単元130。另外,如果與確定的聲音樣式對應的預設視覺效果包括預設設置數(shù)據, 則圖像處理器157可將包括在與確定的聲音樣式對應的預設視覺效果中的預設設置數(shù)據應用到捕獲的圖像或者成像單元130。例如,圖像處理器157可將光圈值、快門速度、ISO感光度和圖像傳感器設置值中的至少ー個應用到包括在成像単元130中的光學単元131和/ 或圖像傳感器133。如果圖像處理器157控制針對捕獲的圖像或成像単元130的預設設置數(shù)據,則可通過成像単元130獲得添加(應用)有預設視覺效果的圖像數(shù)據或者圖像數(shù)據文件。另外,圖像處理器157可從分析単元151或確定單元153接收關于聲音的強度的信息或者說明聲音的強度的分析數(shù)據。圖像處理器157可對與通過聲音的強度確定的聲音樣式對應的預設設置數(shù)據中的至少ー些部分進行調整。另外,圖像處理器157可通過對獲得的圖像數(shù)據進行圖像處理(例如,壓縮)來獲得圖像數(shù)據文件。圖像處理器157可根據與確定的聲音樣式對應的圖像數(shù)據處理模式來修正捕獲的圖像或圖像數(shù)據。這里,可通過由成像単元130捕獲圖像來獲得捕獲的圖像或圖像數(shù)據。 例如,圖像數(shù)據處理模式可包括針對亮度、色度、對比度和色彩平衡中的至少ー個的修正數(shù)據。圖像處理器157可使用修正數(shù)據來修正捕獲的圖像或圖像數(shù)據,從而將與修正數(shù)據對應的預設視覺效果應用到捕獲的圖像或圖像數(shù)據。另外,圖像數(shù)據處理模式可包括關于漸暈效果、魚眼效果、水彩畫效果以及添加對象的合成效果中的至少ー個的處理數(shù)據。圖像處理器157可使用處理數(shù)據來修正捕獲的圖像或圖像數(shù)據,從而將與處理數(shù)據對應的預設視覺效果應用到捕獲的圖像或圖像數(shù)據。另外,圖像處理器157可對與通過獲得的聲音的強度確定的聲音樣式對應的圖像數(shù)據處理模式的處理數(shù)據的修正級別或修正數(shù)據進行調整。 另外,圖像處理器157可將修正的圖像或圖像數(shù)據存儲在存儲器単元120中。在這種情況下,圖像處理器157可對修正的圖像或圖像數(shù)據進行壓縮。現(xiàn)將更加詳細地描述圖像處理設備100,集中在圖2至圖5中示出的具有對應于聲音樣式而應用的視覺效果的圖像的示例以及圖像數(shù)據文件的示例。圖2中示出第一聲音樣式221、第二聲音樣式223、第三聲音樣式225、第四聲音樣式227中的姆個。圖3中不出的第五聲音樣式321是與由圖I的聲音傳感器110獲得的聲音對應的聲音樣式,并可由例如圖I的控制器150(例如,分析単元151)確定。也就是說, 第一至第五聲音樣式221、223、225、227和321可被識別或被分類為預設聲音樣式中的與獲得的聲音對應的聲音樣式。圖2的圖像210、圖3的圖像310和圖4的圖像410可表示當混合模式不被激活時由圖I的圖像處理設備100獲得的圖像數(shù)據。也就是說,圖像210、圖像310和圖像410中的每個可以是還未添加視覺效果的圖像或圖像數(shù)據。如果混合模式被激活,則圖像210可能不具有與獲得的聲音對應的聲音樣式,或者可能不具有與獲得的聲音對應的聲音樣式對應的視覺效果。將根據映射表描述與聲音樣式對應的預設設置數(shù)據、圖像數(shù)據處理模式或預設視覺效果的示例。在圖2中,圖像231可以是應用了第一視覺效果的圖像210或圖像數(shù)據的示例,所述第一視覺效果與存儲在存儲器單兀120中的映射表中的第一聲音樣式221對應。例如,第一聲音樣式221可以是寧靜聲音樣式。與第一聲音樣式221對應的預設第一視覺效果可以是用于使圖像變暗的亮度的調整。另外,第一視覺效果可包括用于控制圖像210的捕獲的設置數(shù)據。設置數(shù)據可以是調整圖像210以具有大于默認光圈值的光圈值或者具有快于默認快門速度的快門速度。另外,第一視覺效果可包括用于對圖像210或圖像數(shù)據進行修正的圖像數(shù)據處理模式。圖像數(shù)據處理模式可包括用于控制圖像210以具有低于默認亮度的亮度的修正數(shù)據??蛇x擇地,第一聲音樣式221可以是風聲音樣式。與第一聲音樣式221對應的預設設置數(shù)據可涉及清爽風格,該清爽風格是用明亮色彩帶來清爽感覺的視覺效果的類型??刂破?50可調整圖I的圖像傳感器133的設置值,從而可根據第一視覺效果在圖像210的捕獲中反映該清爽風格。例如,圖像傳感器133的設置值可被調整以提高對于藍色或緑色的感光度。另外,與第一聲音樣式221對應的圖像數(shù)據處理模式可包括用于增加藍色或綠色的相對表現(xiàn)的關于色彩平衡的修正數(shù)據。另外,與第一聲音樣式221對應的預設視覺效果可包括關于清爽風格的預設設置數(shù)據和圖像數(shù)據處理模式中的至少ー個。圖像233可以是應用有第二視覺效果的圖像210或者圖像數(shù)據的示例,所述第二視覺效果與存儲在存儲器單元120中的映射表中的第二聲音樣式223對應。例如,第二聲音樣式223可以是寧靜音樂樣式。如果獲得的聲音的分析數(shù)據具有諸如音樂節(jié)拍、音樂時間樣式或節(jié)奏的特性,并且最小值和最大值出現(xiàn)在自相關圖的時間周期小于預定閾值級別, 則控制器150可隨后將獲得的聲音確定為寧靜聲音樣式。與第二聲音樣式223對應的圖像數(shù)據處理模式可涉及漸暈效果或樂摸(Iomo)效果。例如,當漸暈效果被添加到圖像233吋, 圖像233的邊緣區(qū)域相對于圖像233的中心區(qū)域可被變暗。與第二聲音樣式223對應的預設視覺效果可包括關于漸暈效果或樂摸效果的預設設置數(shù)據和/或圖像數(shù)據處理模式。例如,關于漸暈效果或樂摸效果的預設設置數(shù)據可以是用于圖像233的邊緣區(qū)域的暗化處理的控制信號或設置值,該暗化處理利用光學単元130的鏡頭特性。圖像235可以是添加了第三視覺效果的圖像210或者圖像數(shù)據的示例,所述第三視覺效果與存儲在存儲器單元120中的映射表中的第三聲音樣式225對應。例如,第三聲音樣式225可以是響亮音樂樣式或搖滾音樂樣式。與第三聲音樣式225對應的圖像數(shù)據處理模式可以是負片圖像效果。圖像237可以是添加了第四視覺效果的圖像210或者圖像數(shù)據的示例,所述第四視覺效果與存儲在存儲器單元120中的映射表中的第四聲音樣式227對應。例如,第四聲音樣式227可以是寧靜音樂樣式。如果獲得的聲音屬于寧靜音樂樣式,則控制器150隨后可基于獲得的聲音的分析數(shù)據,考慮節(jié)奏或頻率分布特性而將獲得的聲音確定為古典音樂樣式。與第四聲音樣式227對應的圖像數(shù)據處理模式可以是添加對象的合成效果。例如, 如果合成效果被添加到圖像237,則與落葉有關的對象可被添加到圖像210或圖像數(shù)據中。 另外,如果合成效果被添加到圖像237,則與星星、音符、心、氣球或鼓可根據相應的聲音樣式而與圖像210或圖像數(shù)據進行合成。在圖3中,圖像331可以是添加了第五視覺效果的捕獲的圖像或者圖像數(shù)據的示例,所述第五視覺效果與存儲在存儲器單兀120中的映射表中的第五聲音樣式321對應。 例如,第五聲音樣式321可以是響亮聲音樣式或兒童樣式。控制器150可考慮獲得的聲音的分析數(shù)據(例如,頻率分布特性)而將獲得的聲音確定為兒童樣式。根據與第五聲音樣式321對應的預設設置數(shù)據,捕獲的圖像可按照以下述這樣的方式被捕獲色度可被増加并且角色的面部色彩和原色可看起來更好。例如,控制器150可控制圖像傳感器133的設置值以增加圖像310的色度。另外,與第五聲音樣式321對應的第五視覺效果可以是圖像數(shù)據處理模式,在該圖像數(shù)據處理模式中,色度可被増加并且角色的面部色彩和原色可看起來更好。例如,控制器150可對捕獲的圖像或圖像數(shù)據進行修正以增加圖像310的色度。 另外,與第五聲音樣式321對應的第五視覺效果可包括預設設置數(shù)據和/或圖像數(shù)據處理模式。參照回圖I,圖像處通設備100可對周圍的聲首和摘獲的圖像一起進行分析,以基于各種信息識別周圍的環(huán)境。例如,存儲在存儲器單元120中的映射表可包括關于圖像樣式、預設聲音樣式和預設視覺效果(包括預設設置數(shù)據或圖像數(shù)據處理模式)的映射信息。 在控制器150中,分析単元151還可分析聲音的樣式和圖像的樣式。分析単元151可獲得關于聲音和圖像的分析數(shù)據,確定単元153可基于該分析數(shù)據確定聲音樣式和/或圖像樣式。圖像處理器157可應用與確定的聲音樣式和/或圖像樣式對應的包括在映射表中的預設設置數(shù)據、圖像數(shù)據處理模式或預設視覺效果。另外,聲音樣式或圖像樣式不必被單獨確定,而是可作為ー個預設綜合樣式被一起確定。圖像處理器157可應用與預設綜合樣式對應的預設設置數(shù)據、圖像數(shù)據處理模式或預設視覺效果。例如,控制器150可基于兒童的聲音和圖像310將圖像的樣式樣式確定為兒童樣式(所述兒童樣式是綜合樣式),并可將與兒童樣式對應的視覺效果應用到圖像。表I示出根據本發(fā)明實施例的示出聲音樣式和視覺效果之間的映射信息的映射表。在存儲在圖I的存儲器單元120的映射表中,包括在表I中示出的映射表中的“分類” 欄、“效果”欄和“視覺效果B”欄可被省略。在表I中,“默認”可表示關于不能被分類為音樂和語音中的至少ー個的聲音的聲音樣式。另外,可基于獲得的聲音的分析數(shù)據將獲得的聲音分類為寧靜聲音樣式和響亮聲音樣式。根據預設分類標準,寧靜聲音樣式的時域特性可與響亮聲音樣式的時域特性不同。根據預設分類標準,寧靜聲音樣式的頻域特性還可與響亮聲音樣式的頻域特性不同。表I
權利要求
1.ー種圖像處理設備,所述圖像處理設備包括存儲器單兀,用于存儲映射表,映射表表不預設聲音樣式中的至少ー個對應于用于控制圖像捕獲的至少一條預設設置數(shù)據;聲音傳感器,用于獲得聲音;控制器,用于將所述預設聲音樣式中的一個確定為獲得的聲音的聲音樣式;以及成像単元,用于捕獲圖像,其中,所述控制器將映射表中的所述至少一條預設設置數(shù)據中的與所述聲音樣式對應的預設設置數(shù)據應用于成像単元。
2.如權利要求I所述的圖像處理設備,其中,所述至少一條預設設置數(shù)據中的每一條包括光圈值、快門速度、國際標準化組織ISO感光度和圖像傳感器設置值中的至少ー個。
3.如權利要求2所述的圖像處理設備,其中,所述預設聲音樣式包括第一樣式和第二樣式,其中,所述第一樣式對應于作為映射表中的所述至少一條預設設置數(shù)據的第一數(shù)據, 所述第二樣式對應于作為映射表中的所述至少一條預設設置數(shù)據的第二數(shù)據,以及滿足以下條件中的至少ー個第一條件,即,包括在第一數(shù)據中的光圈值大于包括在第 ニ數(shù)據中的光圈值;第二條件,即,包括在第一數(shù)據中的快門速度快于包括在第二數(shù)據中的快門速度。
4.如權利要求3所述的圖像處理設備,其中,第一樣式的時域特性與第二樣式的時域特性不同,或者,第一樣式的頻域特性與第二樣式的頻域特性不同,其中,所述時域特性中的每個包括時域的幅度變化和自相關性中的至少ー個,以及其中,所述頻域特性中的每個包括頻率分布特性。
5.如權利要求I所述的圖像處理設備,其中,所述控制器對第二預設設置數(shù)據中的至少ー些進行調整,所述第二預設設置數(shù)據與根據獲得的聲音的強度確定的聲音樣式對應,其中,所述第二預設設置數(shù)據可包括光圈值、快門速度、國際標準化組織ISO感光度和圖像傳感器設置值中的至少ー個。
6.ー種圖像處理方法,所述圖像處理方法包括將映射表存儲在存儲器單兀中,該映射表表不預設聲音樣式中的至少ー個對應于用于控制圖像捕獲的至少一條預設設置數(shù)據;獲得聲首;將所述預設聲音樣式中的一個確定為獲得的聲音的聲音樣式;以及通過采用映射表中的所述至少一條預設設置數(shù)據中的與確定的聲音樣式對應的預設設置數(shù)據來捕獲圖像。
7.如權利要求6所述的圖像處理方法,其中,所述至少一條預設設置數(shù)據中的每一條包括光圈值、快門速度、國際標準化組織ISO感光度和圖像傳感器設置值中的至少ー個。
8.如權利要求7所述的圖像處理方法,其中,所述預設聲音樣式包括第一樣式和第二樣式,其中,所述第一樣式對應于作為映射表中的所述至少一條預設設置數(shù)據的第一數(shù)據, 所述第二樣式對應于作為映射表中的所述至少一條預設設置數(shù)據的第二數(shù)據,以及滿足以下條件中的至少ー個第一條件,即,包括在第一數(shù)據中的光圈值大于包括在第ニ數(shù)據中的光圈值;第二條件,即,包括在第一數(shù)據中的快門速度快于包括在第二數(shù)據中的快門速度。
9.如權利要求8所述的圖像處理方法,其中,第一樣式的時域特性與第二樣式的時域特性不同,或者,第一樣式的頻域特性與第二樣式的頻域特性不同,其中,所述時域特性中的每個包括時域的幅度變化和自相關性中的至少ー個,以及其中,所述頻域特性中的每個包括頻率分布特性。
10.如權利要求6所述的圖像處理方法,其中,捕獲圖像的步驟包括對與根據獲得的聲音的強度確定的聲音樣式對應的預設設置數(shù)據中的至少ー些進行調整,以及其中,所述預設設置數(shù)據可包括光圈值、快門速度、國際標準化組織ISO感光度和圖像傳感器設置值中的至少ー個。
11.一種圖像處理設備,所述圖像處理設備包括存儲器単元,用于將映射表存儲在存儲器単元中,該映射表表示預設聲音樣式分別對應于預設視覺效果;聲音傳感器,用于獲得聲音;控制器,用于將所述預設聲音樣式中的一個確定為獲得的聲音的聲音樣式;成像単元,用于捕獲圖像,其中,所述控制器執(zhí)行以下操作中的至少ー個控制成像單元將映射表中的與確定的聲音樣式對應的預設視覺效果應用于捕獲的圖像;修正捕獲的圖像。
12.如權利要求11所述的圖像處理設備,其中,所述預設視覺效果中的至少ー個包括用于控制圖像的捕獲的設置數(shù)據,所述設置數(shù)據包括光圈值、快門速度、國際標準化組織ISO感光度和圖像傳感器設置值中的至少ー個。
13.如權利要求12所述的圖像處理設備,其中,所述控制器通過將包括在與確定的聲音樣式對應的預設視覺效果中的設置數(shù)據應用于成像單元來控制成像単元的操作。
14.如權利要求11所述的圖像處理設備,其中,所述預設視覺效果中的至少ー個包括用于對捕獲的圖像進行修正的圖像數(shù)據處理模式。
15.如權利要求14所述的圖像處理設備,其中,所述控制器通過根據包括在與確定的聲音樣式對應的預設視覺效果中的圖像數(shù)據處理模式對捕獲的圖像進行修正,來修正捕獲的圖像。
全文摘要
一種用于處理圖像的方法和設備。在圖像處理設備中,預設聲音樣式和預設視覺效果之間的映射信息被存儲在存儲器單元中,聲音被獲得,獲得的聲音的聲音樣式被確定。隨后,通過將預設設置數(shù)據應用到圖像來捕獲或調整圖像,以將與聲音樣式對應的預設視覺效果應用到捕獲的圖像。
文檔編號H04N5/232GK102611844SQ201110461359
公開日2012年7月25日 申請日期2011年12月28日 優(yōu)先權日2011年1月25日
發(fā)明者張仁羅 申請人:三星電子株式會社