專利名稱：降噪處理裝置、攝像裝置及降噪處理程序的制作方法
技術領域：
本發(fā)明涉及從聲音信號減去噪音的降噪處理裝置、攝像裝置及降噪處理程序。本申請基于2011年5月27日提交的日本專利申請第2011-119758號并要求其優(yōu)先權，并將其內(nèi)容引用于此。
背景技術：
例如，為了將連續(xù)產(chǎn)生的周圍音作為噪音除去，根據(jù)聲音信號計算對應于周圍音的噪音(聲音信號中包含的噪音成分)，并將該噪音從聲音信號減去(例如，參照專利文獻I)。專利文獻I特開2005-195955號公報在設置于攝像裝置的光學系統(tǒng)中，在驅(qū)動透鏡的齒輪列等驅(qū)動系統(tǒng)的旋轉(zhuǎn)方向反轉(zhuǎn)等時，有時噪音的音量會暫時地增大。這樣，在根據(jù)工作部的工作狀態(tài)通過驅(qū)動而產(chǎn)生的噪音的音量和/或定時不同的情況下，若進行使用了專利文獻I的技術的降噪處理，則存在著拾音對象即目標音會劣化的問題。

發(fā)明內(nèi)容
本發(fā)明的方式目的在于提供減輕降噪處理中的目標音的劣化的降噪處理裝置、攝像裝置及降噪處理程序。本發(fā)明的方式具備定時信號檢測部，其檢測表示工作部進行工作的定時的工作定時信號；聲音信號取得部，其取得聲音信號；以及降噪處理部，其檢測所述工作定時信號，計算在因所述工作部的工作而產(chǎn)生的噪音產(chǎn)生的可能性高的期間取得的聲音信號的第I頻譜和在不產(chǎn)生所述噪音的可能性高的期間取得的聲音信號的第2頻譜，并基于將所述計算的第I頻譜的至少一部分置換為所述計算的第2頻譜的對應部分而得到的頻譜，計算對所述聲音信號進行了降噪的降噪聲音信號。根據(jù)本發(fā)明的方式，能夠減輕降噪處理中的目標音的劣化。


圖I是表示包含本發(fā)明實施例所涉及的降噪處理部的攝像裝置的結(jié)構(gòu)的一例的框圖。圖2是用于說明本發(fā)明實施例所涉及的工作部的工作定時信號與聲音信號的關系的一例的參考圖。圖3是用于說明圖2所示的聲音信號與窗函數(shù)的關系的參考圖。圖4是用于說明本發(fā)明實施例所涉及的沖擊音降噪處理部取得的第I頻譜和第2頻譜的一例的圖。圖5是表示圖3所示的各頻譜的頻率分量的一例的圖。圖6是用于說明本實施例所涉及的沖擊音降噪處理的一例的圖。
圖7是用于說明本實施例所涉及的降噪處理方法的一例的流程圖。圖8A是表不目標音為男聲的情況下的頻譜的一例的圖。圖SB是表示目標音為女聲的情況下的頻譜的一例的圖。圖9是表不編碼器的輸出和麥克風聲音信號的一例的圖。圖10是表不命令輸出、編碼器的輸出和麥克風聲音信號的一例的圖。圖11是用于說明本發(fā)明實施例所涉及的工作部的工作定時信號與聲音信號的關系的另一例的參考圖。

圖12是用于說明圖11所示的聲音信號與窗函數(shù)的關系的參考圖。圖13是用于說明本發(fā)明實施例所涉及的沖擊音降噪處理部取得的第I頻譜和第2頻譜的另一例的圖。
具體實施例方式參照附圖關于本發(fā)明的實施例詳細地進行說明。圖I示出表示本實施例所涉及的攝像裝置的結(jié)構(gòu)的框圖。如圖I所示，攝像裝置100拍攝由光學系統(tǒng)形成的像，使所得到的圖像數(shù)據(jù)存儲于存儲介質(zhì)200，并且對通過麥克風拾取的麥克風聲音信號進行降噪處理，使降噪處理后的聲音信號存儲于存儲介質(zhì)200。該攝像裝置100具備降噪處理部250。該降噪處理部250進行從通過麥克風拾取的聲音降低噪音的降噪處理。本實施例所涉及的降噪處理部250執(zhí)行用于降低因工作部工作而產(chǎn)生的噪音(以下稱為工作音)的降噪處理。例如，在攝像裝置100中，在AF(Auto Focus 自動對焦)和/或VR (Vibration Reduction :抖動修正)等處理中驅(qū)動光學系統(tǒng)的情況下,會因馬達和/或光學系統(tǒng)工作而產(chǎn)生噪音(工作音)。此外，在馬達轉(zhuǎn)換旋轉(zhuǎn)方向的情況下，會暫時地產(chǎn)生大的噪音(工作音)。這樣，將在工作部的工作狀態(tài)發(fā)生變化的情況下暫時地產(chǎn)生的大的聲音稱為沖擊音。另一方面，將比該沖擊音小的、在光學系統(tǒng)和/或馬達工作時產(chǎn)生的聲音稱為驅(qū)動音。也就是說，驅(qū)動音是沖擊音以外的噪音。本實施例所涉及的降噪處理部250進行從麥克風聲音信號降低由沖擊音形成的噪音的沖擊音降噪處理，并且進行從麥克風聲音信號降低由驅(qū)動音形成的噪音的驅(qū)動音降噪處理。以下，關于攝像裝置100和降噪處理部250的結(jié)構(gòu)的一例詳細地進行說明。另外，在本實施例中，說明降噪處理部250內(nèi)置于攝像裝置100的例子，但本發(fā)明并不受此限制。例如，降噪處理部250也可為攝像裝置100的外部裝置。攝像裝置100具備攝像部110、緩沖存儲器部130、圖像處理部140、顯示部150、存儲部160、通信部170、操作部180、CPU190 (控制部)、計時部220、麥克風230 (聲音信號取得部)、A/D轉(zhuǎn)換部240、降噪處理部250和電池260。攝像部110具備光學系統(tǒng)111、攝像元件119和A/D (Analog/Digital,模擬/數(shù)字)轉(zhuǎn)換部120，且按照根據(jù)設定的攝像條件(例如光圈值、曝光值等)而預先確定的驅(qū)動模式由CPU190進行控制。該攝像部110使由光學系統(tǒng)111形成的光學像成像于攝像元件119，生成基于通過A/D轉(zhuǎn)換部120變換為了數(shù)字信號的光學像的圖像數(shù)據(jù)。光學系統(tǒng)111具備焦點調(diào)整透鏡(以下稱為“AF透鏡”)112、抖動修正透鏡(以下稱為“VR透鏡”)113、變焦透鏡114、變焦編碼器115 (工作檢測部)、透鏡驅(qū)動部116(驅(qū)動部)、AF編碼器117 (工作檢測部)和抖動修正部118 (驅(qū)動部)。光學系統(tǒng)111的這些構(gòu)成在由CPU190進行的焦點調(diào)整處理、抖動修正處理以及變焦處理中，按照各自的驅(qū)動模式進行驅(qū)動。也就是說，光學系統(tǒng)111是攝像裝置100的工作部。光學系統(tǒng)111將從變焦透鏡114入射、按順序通過了變焦透鏡114、VR透鏡113、AF透鏡112的光學像導引至攝像元件119的受光面。透鏡驅(qū)動部116從CPU190輸入用于控制AF透鏡112和變焦透鏡114的位置的驅(qū)動控制信號(命令)。該透鏡驅(qū)動部116根據(jù)輸入的驅(qū)動控制信號控制AF透鏡112和變焦透鏡114的位置。也就是說，該驅(qū)動控制信號從CPU190輸入到透鏡驅(qū)動部116，使透鏡驅(qū)動部116進行驅(qū)動，由此使AF透鏡112及變焦透鏡114移動(工作)。在本實施例中，將CPU190輸出 驅(qū)動控制信號的定時稱為AF透鏡112和變焦透鏡114的工作開始的工作開始定時。變焦編碼器115檢測表示變焦透鏡114的位置的變焦位置，并輸出到CPU190。該變焦編碼器115檢測變焦透鏡114的移動，例如，在變焦透鏡114在光學系統(tǒng)111內(nèi)移動的情況下對CPU190輸出脈沖信號。另一方面，在停止的情況下，變焦編碼器115停止脈沖信號的輸出。AF編碼器117檢測表示AF透鏡112的位置的焦點位置，并輸出到CPU190。該AF編碼器117檢測AF透鏡112的移動，例如，在AF透鏡112在光學系統(tǒng)111內(nèi)移動的情況下對CPU190輸出脈沖信號。另一方面,在停止的情況下,AF編碼器117停止脈沖信號的輸出。另外，變焦編碼器115也可以為了檢測變焦位置而檢測變焦透鏡114的驅(qū)動方向。此外，AF編碼器117也可以為了檢測焦點位置而檢測AF透鏡112的驅(qū)動方向。例如，通過由透鏡驅(qū)動部116驅(qū)動的驅(qū)動機構(gòu)(例如馬達和/或凸輪等)順時針(CW)或逆時針(CCW)旋轉(zhuǎn)，由此變焦透鏡114和/或AF透鏡112在光軸方向移動。變焦編碼器115和AF編碼器117可以分別通過檢測驅(qū)動機構(gòu)的旋轉(zhuǎn)方向(這里稱為順時針或逆時針)，而檢測出變焦透鏡114和AF透鏡112在移動。抖動修正部118具備例如振動回轉(zhuǎn)儀機構(gòu)，檢測由光學系統(tǒng)111形成的像的光軸抖動，使VR透鏡113向抵消該光軸抖動的方向移動。該抖動修正部118例如在使VR透鏡113移動的狀態(tài)下對CPU190輸出高電平的信號。另一方面，在使VR透鏡113停止的狀態(tài)下，抖動修正部118停止低電平信號的輸出。攝像元件119例如具備光電轉(zhuǎn)換面，將在其受光面成像的光學像轉(zhuǎn)換為電信號，并輸出到A/D轉(zhuǎn)換部120。該攝像元件119將在經(jīng)由操作部180接收到拍攝指示時獲得的圖像數(shù)據(jù)作為靜止圖像或運動圖像的圖像數(shù)據(jù)經(jīng)由A/D轉(zhuǎn)換部120存儲于存儲介質(zhì)200。另一方面，攝像元件119在沒有經(jīng)由操作部180接收到攝像指示的狀態(tài)下，將連續(xù)獲得的圖像數(shù)據(jù)作為通行圖像數(shù)據(jù)，經(jīng)由A/D轉(zhuǎn)換部120輸出到CPU190和顯示部150。A/D轉(zhuǎn)換部120將由攝像元件119變換得到的電信號數(shù)字化，并將數(shù)字信號即圖像數(shù)據(jù)輸出到緩沖存儲器部130。緩沖存儲器部130暫時存儲由攝像部110拍攝的圖像數(shù)據(jù)。此外，緩沖存儲器部130暫時存儲與麥克風230拾取的麥克風檢測音相應的麥克風聲音信號。另外，緩沖存儲器部130也可以將麥克風檢測音的拾音時刻與緩沖存儲器部130中的位置相對應地存儲與麥克風檢測音相應的麥克風聲音信號。圖像處理部140參照存儲部160中存儲的圖像處理條件，對緩沖存儲器部130中暫時存儲的圖像數(shù)據(jù)進行圖像處理。圖像處理后的圖像數(shù)據(jù)經(jīng)由通信部170存儲于存儲介質(zhì)200。另外，圖像處理部140也可以對存儲介質(zhì)200中存儲的圖像數(shù)據(jù)進行圖像處理。顯示部150是例如液晶顯示器，顯示由攝像部110得到的圖像數(shù)據(jù)和/或操作畫面等。存儲部160存儲由CPU190在場景判定時所參照的判定條件和/或與通過場景判定而判斷的每個場景相對應的攝像條件等。通信部170與存儲卡等可以取下的存儲介質(zhì)200連接，執(zhí)行對該存儲介質(zhì)200的 信息(圖像數(shù)據(jù)和/或聲音數(shù)據(jù)等)的寫入、讀出或擦除。操作部180具備例如電源開關、快門按鈕、復式選擇器(十字鍵)或其它操作鍵，由使用者操作由此接受使用者的操作輸入，并將與操作輸入相應的操作信息輸出到CPU190。該操作部180在被使用者按下時會發(fā)出物理的工作音。在本實施例中，將與使用者的操作輸入相應的操作信息從操作部180輸入至CPU190的定時，稱為操作部180的工作開始的工作開始定時。存儲介質(zhì)200是相對于攝像裝置100可以裝卸地連接的存儲部，存儲例如由攝像部110生成的(拍攝的)圖像數(shù)據(jù)和/或由降噪處理部250進行了聲音信號處理的聲音信號?？偩€210與攝像部110、緩沖存儲器部130、圖像處理部140、顯示部150、存儲部160、通信部170、操作部180、CPU190、計時部220、A/D轉(zhuǎn)換部240和降噪處理部250連接，
傳送從各構(gòu)成部輸出的數(shù)據(jù)等。計時部220進行日期和/或時刻的計時并輸出表示所計時的日期時間的日期時間信息。麥克風230拾取周圍的聲音，并將該聲音的麥克風聲音信號輸出到A/D轉(zhuǎn)換部240。在通過該麥克風230拾取的麥克風檢測音中主要包含作為拾音對象的目標音和由工作部產(chǎn)生的工作音(噪音)。這里，關于通過麥克風230取得的麥克風聲音信號，例如以在AF透鏡112工作時獲得的麥克風聲音信號為例，參照圖2、3進行說明。圖2(A)表不AF編碼器117的輸出與時間的關系的一例。圖2(B)表不麥克風聲音信號與時間的關系的一例。另外，為了便于說明，圖2(B)在麥克風聲音信號中僅不出工作音的聲音信號，省略了目標音的聲音信號的圖不。圖2(A)和圖2(B)所不的AF透鏡112的驅(qū)動模式表示進行例如以焦點距離a而對焦的AF處理的情況下的驅(qū)動模式。在圖2 (A)中，縱軸表示根據(jù)AF編碼器117輸出求出的、驅(qū)動AF透鏡112的驅(qū)動機構(gòu)的旋轉(zhuǎn)方向。在該進行以焦點距離a而對焦的AF處理的驅(qū)動模式中，如圖2(A)所示，驅(qū)動AF透鏡112的驅(qū)動機構(gòu)在時刻tl(Tt20順時針CW旋轉(zhuǎn)，然后靜止。也就是說，時刻tlO表示AF透鏡112的工作開始定時，時刻t20表示AF透鏡112的工作停止定時。另外，在本實施例中，工作開始定時的時刻tlO表示CPU190輸出用于控制AF透鏡112的位置的驅(qū)動控制信號的定時。工作停止定時的時刻t20表示來自AF編碼器117的脈沖信號的輸出停止的定時。因此，如圖2(B)所示，在時刻tlO t20的期間，在麥克風聲音信號上重疊(產(chǎn)生)了由AF透鏡112產(chǎn)生的工作音，或者重疊工作音的可能性高。以下，在本實施例中，關于在時刻tl(Tt20的期間產(chǎn)生由AF透鏡112產(chǎn)生的工作音即噪音的情況進行說明。此外，如圖2(B)所示，在時刻tlO、t20，分別有高的產(chǎn)生沖擊音的可能性。以下，在本實施例中，關于在時刻tlO、t20產(chǎn)生由AF透鏡112產(chǎn)生的沖擊音的情況進行說明。此外，在產(chǎn)生了沖擊音的情況下，該沖擊音產(chǎn)生的可能性高的時間根據(jù)各驅(qū)動模式預先確定。在進行以焦點距離a而對焦的AF處理的驅(qū)動模式中，確定圖3所示的沖擊音的產(chǎn)生時間。圖3表示在進行以焦點距離a而對焦的AF處理的驅(qū)動模式下驅(qū)動AF透鏡112 時，由麥克風230拾取的麥克風聲音信號的一例。圖3所示的曲線，縱軸表示由麥克風230拾取的麥克風聲音信號，橫軸表不時間。另外，為了便于說明，圖3僅不出麥克風聲音信號中的工作音的聲音信號，省略了目標音的聲音信號的圖不。在進行以焦點距離a而對焦的AF處理的驅(qū)動模式中，預先確定為時刻的時間和時刻t2(Tt21的時間分別為沖擊音的產(chǎn)生時間。在本實施例中，如圖3所示，關于在該沖擊音的產(chǎn)生期間產(chǎn)生沖擊音的例子進行說明。返回到圖1，繼續(xù)說明攝像裝置100的各構(gòu)成部。CPU190按照與所設定的攝像條件(例如光圈值、曝光值等)相應的驅(qū)動模式來控制攝像部110。該CPU190基于從變焦編碼器115輸出的變焦位置和從AF編碼器117輸出的焦點位置來生成驅(qū)動透鏡驅(qū)動部116的驅(qū)動控制信號，并輸出到透鏡驅(qū)動部116。其生成算法可以根據(jù)需要適宜使用已有的算法。定時信號檢測部191檢測攝像裝置100所具備的工作部的工作狀態(tài)發(fā)生變化的定時。作為該工作狀態(tài)發(fā)生變化的定時，例如有工作部開始工作的工作開始定時和工作部的工作停止的工作停止定時。此處所說的工作部，是例如上述的光學系統(tǒng)111或操作部180，是攝像裝置100所具備的構(gòu)成部中通過進行工作或被工作而產(chǎn)生工作音的(或者有產(chǎn)生工作音的可能性的)構(gòu)成部。換言之，工作部是攝像裝置100所具備的構(gòu)成部中通過工作部進行工作而產(chǎn)生的工作音或者通過工作部被工作而產(chǎn)生的工作音被麥克風230拾音(或者有被拾音的可能性的)構(gòu)成部。例如，該定時信號檢測部191可以基于使工作部工作的驅(qū)動控制信號檢測工作部的工作狀態(tài)發(fā)生變化的定時。該驅(qū)動控制信號是對于使工作部工作的驅(qū)動部，設定為使工作部工作的驅(qū)動控制信號，或是使該驅(qū)動部驅(qū)動的驅(qū)動控制信號。例如，定時信號檢測部191基于為了驅(qū)動變焦透鏡114、VR透鏡113或AF透鏡112而輸入于透鏡驅(qū)動部116或抖動修正部118的驅(qū)動控制信號，檢測變焦透鏡114、VR透鏡113或AF透鏡112的工作開始的工作開始定時。在這種情況下，定時信號檢測部191可以基于在CPU190生成驅(qū)動控制信號的情況下在CPU190內(nèi)部執(zhí)行的處理和/或命令來檢測工作開始定時。此外，定時信號檢測部191可以基于從操作部180輸入的、表示驅(qū)動變焦透鏡114或AF透鏡112的操作信號來檢測工作開始定時。此外，定時信號檢測部191也可以基于表示工作部被工作的信號來檢測工作部的工作狀態(tài)發(fā)生變化的定時。例如，定時信號檢測部191可以基于變焦編碼器115或AF編碼器117的輸出，檢測出變焦透鏡114或AF透鏡112被驅(qū)動，由此檢測出變焦透鏡114或AF透鏡112的工作開始定時。此外，定時信號檢測部191可以基于變焦編碼器115或AF編碼器117的輸出檢測出變焦透鏡114或AF透鏡112被停止，由此檢測出變焦透鏡114或AF透鏡112的工作停止定時。此外，定時信號檢測部191可以基于來自抖動修正部118的輸出檢測出VR透鏡 113被驅(qū)動，由此檢測出VR透鏡113的工作開始定時。該定時信號檢測部191可以基于來自抖動修正部118的輸出檢測出VR透鏡113被停止，由此檢測出VR透鏡113的工作停止定時。進而，定時信號檢測部191可以基于來自操作部180的輸入檢測出操作部180被操作，由此檢測出工作部進行工作的定時。定時信號檢測部191檢測攝像裝置100所具備的工作部的工作開始定時，并將表示所檢測的工作開始定時的工作開始定時信號(工作檢測信號)輸出到降噪處理部250。此外，定時信號檢測部191檢測工作停止定時，并將表示該檢測的工作停止定時的工作停止定時信號(工作檢測信號)輸出到降噪處理部250。在本實施例中，定時信號檢測部191將使AF透鏡112移動的驅(qū)動控制信號從CPU190輸出到透鏡驅(qū)動部116的定時判定為AF透鏡112的工作開始定時。定時信號檢測部191輸出表示例如由圖3的例子所示的沖擊音產(chǎn)生的時刻的信息作為工作開始定時信號。此外，定時信號檢測部191基于從AF編碼器117輸出的脈沖信號,將該脈沖信號的輸出停止之時判定為AF透鏡112的工作停止的工作停止定時。定時信號檢測部191輸出表示例如由圖3的例子所示的沖擊音產(chǎn)生的時刻t2(Tt21的信息作為工作停止定時信號。A/D轉(zhuǎn)換部240將從麥克風230輸入的模擬信號的麥克風聲音信號轉(zhuǎn)換成數(shù)字信號的麥克風聲音信號。該A/D轉(zhuǎn)換部240將數(shù)字信號的麥克風聲音信號輸出到降噪處理部250。此外，A/D轉(zhuǎn)換部240也可以是將數(shù)字信號的麥克風聲音信號存儲在緩沖存儲器部130或存儲介質(zhì)200的結(jié)構(gòu)。降噪處理部250對于由A/D轉(zhuǎn)換部240轉(zhuǎn)換為了數(shù)字信號的麥克風聲音信號執(zhí)行降低由例如AF透鏡112、VR透鏡113、變焦透鏡114等工作部產(chǎn)生的工作音即噪音等的降噪處理，并將進行了該降噪處理的聲音信號存儲于存儲介質(zhì)200。該降噪處理部250包含聲音信號處理部251、沖擊音降噪處理部252、驅(qū)動音降噪處理部253和逆傅立葉變換部254。聲音信號處理部251對從A/D轉(zhuǎn)換部240輸出的麥克風聲音信號按每個預先確定的區(qū)間用窗函數(shù)進行加權，并且將該每個區(qū)間的麥克風聲音信號變換為以頻域表示的頻譜，并將該以頻域表示的頻譜輸出到?jīng)_擊音降噪處理部252和驅(qū)動音降噪處理部253。該聲音信號處理部251例如通過對麥克風聲音信號進行傅立葉變換或快速傅立葉變換(FFT:Fast Fourier Transform)，將麥克風聲音信號變換到頻域。聲音信號處理部251例如通過對麥克風聲音信號進行傅立葉變換而計算與窗函數(shù)的各區(qū)間對應的頻譜。這里，窗函數(shù)中預先確定的區(qū)間是信號處理的單位(幀)，是以一定間隔反復的區(qū)間。這些窗函數(shù)的各區(qū)間與其它窗函數(shù)的各區(qū)間各重疊一半。另外，窗函數(shù)可以使用例如漢寧窗(Hanning Window)函數(shù)。參照上述的圖3，說明由聲音信號處理部251計算的與窗函數(shù)的各區(qū)間對應的頻 譜的一例。聲音信號處理部251,如上所述,對從A/D轉(zhuǎn)換部240輸出的麥克風聲音信號,用如圖3所不與其它區(qū)間各重疊一半的窗函數(shù)Wl W14進行加權。由此，麥克風聲音信號被分割成窗函數(shù)的大小。該聲音信號處理部251按用窗函數(shù)Wl W14進行了加權的各區(qū)間的麥克風聲音信號的每一個進行例如傅立葉變換，計算頻域的頻譜Sf S14。也就是說，由聲音信號處理部251計算的頻譜Sl S14是與窗函數(shù)Wl W14的區(qū)間對應的頻譜。如圖3所示，時刻11 (Tt 11的區(qū)間、時刻t2(Tt21的區(qū)間是沖擊音產(chǎn)生的區(qū)間。另夕卜，時刻tlft20的區(qū)間是驅(qū)動音產(chǎn)生的區(qū)間。在本實施例中，與窗函數(shù)W2 W4對應的頻譜S2 S4是包含與AF透鏡112的工作開始定時tlO對應的沖擊音產(chǎn)生期間的聲音信息。另外，與窗函數(shù)W9 W12對應的頻譜S9 S12是包含與AF透鏡112的工作停止定時t20對應的沖擊音產(chǎn)生期間t2(Tt21的聲音信息。與窗函數(shù)W5 W8對應的頻譜S5 S8是與由AF透鏡112產(chǎn)生的驅(qū)動音的產(chǎn)生期間對應的聲音信息。聲音信號處理部251，例如計算頻譜Sf S14，并將與沖擊音產(chǎn)生期間對應的頻譜的頻率分量的總和與預先確定的閾值進行比較。該預先確定的閾值是設定為目標音相對于沖擊音越大則由沖擊音引起的聲音劣化越小的目標音頻譜的頻率分量的總和。在判定為與沖擊音產(chǎn)生期間對應的頻譜的頻率分量的總和低于預先確定的閾值的情況下，聲音信號處理部251將所計算的頻譜Sf S14輸出到?jīng)_擊音降噪處理部252，并進行控制使得執(zhí)行沖擊音降噪處理。另一方面，在判定為與沖擊音產(chǎn)生期間對應的頻譜的頻率分量的總和為預先確定的閾值以上，聲音信號處理部251將所計算的頻譜Sf S14輸出到驅(qū)動音降噪處理部253，并進行控制使得執(zhí)行驅(qū)動音降噪處理。沖擊音降噪處理部252基于從定時信號檢測部191輸入的工作定時信號(工作檢測信號)，根據(jù)例如從聲音信號處理部251輸出的頻譜Sf S14，取得與沖擊音產(chǎn)生的可能性高的期間對應的頻譜(以下稱為第I頻譜)。例如，沖擊音降噪處理部252基于表示與工作開始定時tlO對應的沖擊音產(chǎn)生期間的工作定時信號，取得與存在沖擊音產(chǎn)生可能性的期間對應的頻譜S2 S4作為第I頻譜。沖擊音降噪處理部252基于表示與工作停止定時t20對應的沖擊音產(chǎn)生期間t20、21的工作定時信號，取得與存在沖擊音產(chǎn)生可能性的期間對應的頻譜S9 S12作為第I頻譜。另外，沖擊音降噪處理部252基于從定時信號檢測部191輸入的工作定時信號,根據(jù)從聲音信號處理部251輸出的頻譜Sf S14取得與不產(chǎn)生沖擊音的可能性高的期間對應的頻譜(以下稱為第2頻譜)。該沖擊音降噪處理部252按每個包含沖擊音的可能性高的第I頻譜取得包含該沖擊音的可能性低的第2頻譜。在本實施例中，沖擊音降噪處理部252取得與第I頻譜在時間軸方向最近的頻譜作為第2頻譜。也就是說，沖擊音降噪處理部252取得與第I頻譜在時間軸方向相鄰或重疊的頻譜作為第2頻譜。另外，在本實施例中，第2頻譜是與不產(chǎn)生沖擊音的可能性高的期間對應的頻譜。但是，本發(fā)明不受此限制，第2頻譜優(yōu)選是與不產(chǎn)生因工作部的工作而產(chǎn)生的噪音的可能性高的期間對應的頻譜。另外，也可以是與不產(chǎn)生工作音的可能性高的期間對應的頻譜。這里，參照圖4說明沖擊音降噪處理部252取得的第I頻譜與第2頻譜的關系的一例。圖4是用于說明沖擊音降噪處理部252取得的第I頻譜和第2頻譜的一例的圖。例如，沖擊音降噪處理部252基于表示與工作開始定時tlO對應的沖擊音產(chǎn)生期間的工作定時信號，取得作為第I頻譜的頻譜S2、S3的在時間軸的過去方向最近的頻譜SI作為與頻譜S2、S3對應的第2頻譜。另外，沖擊音降噪處理部252基于表示與工作開始定時tlO對應的沖擊音產(chǎn)生期間的工作定時信號，取得作為第I頻譜的頻 譜S4的在時間軸的未來方向最近的頻譜S5作為與頻譜S4對應的第2頻譜。另外，沖擊音降噪處理部252基于表示與工作停止定時t20對應的沖擊音產(chǎn)生期間t20、21的工作定時信號，取得作為第I頻譜的頻譜S9、S10的在時間軸的過去方向最近的頻譜S8作為與頻譜S9、SlO對應的第2頻譜。另外，沖擊音降噪處理部252基于表示與工作停止定時t20對應的沖擊音產(chǎn)生期間t20、21的工作定時信號，取得作為第I頻譜的頻譜SI I、S12的在時間軸的未來方向最近的頻譜S13作為與頻譜SI I、S12對應的第2頻P曰。進而，沖擊音降噪處理部252將第I頻譜的至少一部分置換成第2頻譜的對應部分。例如，沖擊音降噪處理部252將第I頻譜中預先確定的閾值頻率以上的頻譜與第2頻譜中預先確定的閾值頻率以上的頻譜按每個頻率分量進行比較，在判定為第2頻譜比第I頻譜小的情況下，將第I頻譜中的該頻率分量置換為第2頻譜的頻率分量。參照圖5詳細地進行說明。圖5是用于說明一部分頻譜的頻率分量的一例的圖。另外，在本實施例中，為了便于說明，關于圖3所不的麥克風聲音信號中與窗函數(shù)Wl、W3、W5、W7、Wll、W13 對應的頻譜 SI、S3、S5、S7、SI I、S13 進行說明。如圖5所示，頻譜SI、S3、S5、S7、SlU S13分別包含頻率分量fl f9的頻率分量。例如，沖擊音降噪處理部252預先確定作為各頻譜的閾值頻率以上的頻率分量，關于頻率分量f3 f9將第I頻譜與第2頻譜進行比較。因此，沖擊音降噪處理部252關于頻率分量H、f2不將第I頻譜與第2頻譜進行比較。這里，參照圖6說明關于頻譜SI和S3由沖擊音降噪處理部252執(zhí)行的沖擊音降噪處理的一例。圖6是用于說明按頻譜SI和S3的每個頻率分量進行振幅比較的圖。例如，沖擊音降噪處理部252將頻譜SI的頻率分量f3的振幅與頻譜S3的頻率分量f3的振幅進行比較。在此情況下，頻譜SI的頻率分量f3的振幅小于頻譜S3的頻率分量f3的振幅。因此，沖擊音降噪處理部252將頻譜S3的頻率分量f3置換為頻譜SI的頻率分量f3。另外，沖擊音降噪處理部252將頻譜SI的頻率分量f4的振幅與頻譜S3的頻率分量f4的振幅進行比較。在此情況下，頻譜SI的頻率分量f4的振幅大于頻譜S3的頻率分量f4的振幅。因此，沖擊音降噪處理部252不將頻譜S3的頻率分量f4置換為頻譜SI的頻率分量f4。這樣，沖擊音降噪處理部252僅在頻譜SI的頻率分量的振幅比頻譜S3的頻率分量的振幅小的情況下，將頻譜S3的頻率分量置換為頻譜SI的頻率分量。在圖6所示的情況下，沖擊音降噪處理部252將頻譜S3的頻率分量f3、f6^f9置換為頻譜SI的頻率分量f3、f6 f9。返回到圖1，繼續(xù)對降噪處理部250的各構(gòu)成部進行說明。
驅(qū)動音降噪處理部253基于從定時信號檢測部191輸入的工作定時信號，根據(jù)例如從聲音信號處理部251輸出的頻譜Sf S14，取得與驅(qū)動音產(chǎn)生的可能性高的期間對應的頻譜(以下稱為第3頻譜)。例如，驅(qū)動音降噪處理部253基于表示與工作開始定時tlO對應的沖擊音產(chǎn)生期間的工作定時信號和表示與工作停止定時t20對應的沖擊音產(chǎn)生期間t20、21的工作定時信號，取得與存在驅(qū)動音產(chǎn)生的可能性的期間對應的頻譜S2 S12作為第3頻譜。該驅(qū)動音降噪處理部253，對取得的第3頻譜進行降低根據(jù)驅(qū)動模式預先確定的噪音的驅(qū)動音降噪處理。例如，驅(qū)動音降噪處理部253使用頻譜減去法，該頻譜減去法從第3頻譜的頻率分量減去表示根據(jù)驅(qū)動模式預先確定的噪音的頻譜的頻率分量。另外，根據(jù)驅(qū)動模式預先確定的噪音的頻譜，由驅(qū)動音降噪處理部253作為設定值預先設定。但是，本發(fā)明不受此限制，驅(qū)動音降噪處理部253也可以基于過去的麥克風聲音信號，從驅(qū)動音產(chǎn)生的區(qū)間的頻譜減去不產(chǎn)生驅(qū)動音的區(qū)間的頻譜，由此按每個驅(qū)動模式計算推斷的驅(qū)動音的噪音頻譜。逆傅立葉變換部254對從驅(qū)動音降噪處理部253輸入的頻譜例如進行逆傅立葉變換或逆快速傅立葉變換(IFFT: Inverse Fast Fourier Transform),由此將其變換到時域。該逆傅立葉變換部254使變換到了時域的聲音信號存儲于存儲介質(zhì)200。另外，逆傅立葉變換部254可以使變換到了時域的聲音信號與由攝像元件119拍攝的圖像數(shù)據(jù)按具有對應的日期時間信息的彼此相對應而存儲于存儲介質(zhì)200,也可以作為包含聲音信號的運動圖像進行存儲。接著，參照圖7說明本實施例所涉及的降噪處理方法的一例。圖7是表示本實施例所涉及的降噪處理方法的一例的流程圖。例如，若操作部180的電源開關被設定為0N，則對攝像裝置100接入電源，從電池260對各構(gòu)成部供電。在本實施例中，對于攝像裝置100預先設定使攝像時的圖像數(shù)據(jù)與聲音數(shù)據(jù)對應地存儲于存儲介質(zhì)200。(步驟STl)麥克風230，例如若電源被設定為0N，則將所拾取的麥克風聲音信號輸出到A/D轉(zhuǎn)換部240。A/D轉(zhuǎn)換部240對降噪處理部250輸出對模擬信號的麥克風聲音信號進行了數(shù)字轉(zhuǎn)換的麥克風聲音信號。降噪處理部250從A/D轉(zhuǎn)換部240輸入麥克風聲音信號。
在此，在由使用者按下操作部180的釋放按鈕的情況下，CPU190在AF處理中將用于執(zhí)行例如以焦點距離a而對焦的AF處理的驅(qū)動控制信號輸出到透鏡驅(qū)動部116和定時信號檢測部191。該透鏡驅(qū)動部116基于輸入的驅(qū)動控制信號，按照以焦點距離a而對焦的驅(qū)動模式使AF透鏡112移動。例如，透鏡驅(qū)動部116使AF透鏡112的驅(qū)動機構(gòu)順時針旋轉(zhuǎn)預定量而使AF透鏡112移動。另外,使該驅(qū)動機構(gòu)旋轉(zhuǎn)的旋轉(zhuǎn)量和/或速度作為以焦點距離a而對焦的驅(qū)動模式被預先確定。若AF透鏡112移動，在AF編碼器117對CPU190的定時信號檢測部191輸出脈沖信號。若移動的AF透鏡112停止，在AF編碼器117停止脈沖信號輸出。定時信號檢測部191基于輸入的驅(qū)動控制信號和/或AF編碼器117的脈沖信號，按照以焦點距離a而對焦的驅(qū)動模式生成工作定時信號，并輸出到降噪處理部250。
例如，在輸入了用于執(zhí)行以焦點距離a而對焦的AF處理的驅(qū)動控制信號的情況下，定時信號檢測部191生成表示與AF透鏡112的工作開始定時tlO對應的沖擊音產(chǎn)生期間的工作開始定時信號，并輸出到降噪處理部250。然后，在從AF編碼器117輸入的脈沖信號被停止的情況下，定時信號檢測部191生成表示與AF透鏡112的工作停止定時t20對應的沖擊音產(chǎn)生期間t20、21的工作停止定時信號，并輸出到降噪處理部250。(步驟ST2)降噪處理部250判定是否從定時信號檢測部191輸入了工作定時信號。(步驟ST3)在工作定時信號被輸入的情況下，降噪處理部250的聲音信號處理部251對于從A/D轉(zhuǎn)換部240輸出的麥克風聲音信號按每個預先確定的區(qū)間用窗函數(shù)進行加權，并且將該每個區(qū)間的麥克風聲音信號變換為以頻域表示的頻譜。聲音信號處理部251例如對用窗函數(shù)進行了加權的聲音信號進行傅立葉變換而計算頻譜Sf S14。(步驟ST4)然后，聲音信號處理部251基于工作定時信號，將與沖擊音產(chǎn)生期間對應的頻譜的頻率分量的總和與預先確定的閾值進行比較。例如，聲音信號處理部251基于表示與工作開始定時tlO對應的沖擊音產(chǎn)生期間的工作定時信號，取得與存在沖擊音產(chǎn)生的可能性的期間對應的頻譜S2 S4。并
且，聲音信號處理部251按每個頻譜S2 S4判定頻率分量的總和是否小于預先確定的閾值。此外，聲音信號處理部251基于表示與工作停止定時t20對應的沖擊音產(chǎn)生期間t2(Tt21的工作定時信號，取得與存在沖擊音產(chǎn)生的可能性的期間對應的頻譜S9 S12。并且，聲音信號處理部251按每個頻譜S9 S12判定頻率分量的總和是否小于預先確定的閾值。然后，聲音信號處理部251將頻率分量的總和小于預先確定的閾值的頻譜輸出到?jīng)_擊音降噪處理部252，并且控制沖擊音降噪處理部252，使其對該頻譜執(zhí)行沖擊音降噪處理。(步驟ST5)接著，沖擊音降噪處理部252基于來自聲音信號處理部251的執(zhí)行沖擊音降噪處理的控制，對從A/D轉(zhuǎn)換部240輸入的麥克風聲音信號執(zhí)行沖擊音降噪處理。
例如，沖擊音降噪處理部252基于表示與工作開始定時tlO對應的沖擊音產(chǎn)生期間的工作定時信號，取得與存在沖擊音產(chǎn)生的可能性的期間對應的頻譜S2 S4作為第I頻譜。然后，沖擊音降噪處理部252基于表示與工作開始定時tlO對應的沖擊音產(chǎn)生期間的工作定時信號，取得作為第I頻譜的頻譜S2、S3之前的頻譜SI，作為與頻譜S2、S3對應的第2頻譜。此外，沖擊音降噪處理部252基于 表示與工作開始定時tlO對應的沖擊音產(chǎn)生期間的工作定時信號，取得作為第I頻譜的頻譜S4之后的頻譜S5，作為與頻譜S4對應的第2頻譜。另外，沖擊音降噪處理部252基于表示與工作停止定時t20對應的沖擊音產(chǎn)生期間t20、21的工作定時信號，取得與存在沖擊音產(chǎn)生的可能性的期間對應的頻譜S9 S12作為第I頻譜。然后，沖擊音降噪處理部252基于表示與工作停止定時t20對應的沖擊音產(chǎn)生期間t20、21的工作定時信號，取得作為第I頻譜的頻譜S9、S10之前的頻譜S8，作為與頻譜S9、S10對應的第2頻譜。另外，沖擊音降噪處理部252基于表示與工作停止定時t20對應的沖擊音產(chǎn)生期間t20、21的工作定時信號，取得作為第I頻譜的頻譜Sll、S12之后的頻譜S13，作為與頻譜SI I、S12對應的第2頻譜。(步驟ST6)接著，沖擊音降噪處理部252，作為各頻譜的閾值頻率以上的頻率分量，關于頻率分量f3l9將第I頻譜與第2頻譜進行比較。例如，沖擊音降噪處理部252將頻譜SI的頻率分量f3的振幅與頻譜S2的頻率分量f3的振幅進行比較。在此情況下，頻譜SI的頻率分量f3的振幅比頻譜S2的頻率分量f3的振幅小。因此，沖擊音降噪處理部252將頻譜S3的頻率分量f3置換為頻譜SI的頻率分量f3。另外，沖擊音降噪處理部252將頻譜SI的頻率分量f4的振幅與頻譜S2的頻率分量f4的振幅進行比較。在此情況下，頻譜SI的頻率分量f4的振幅比頻譜S2的頻率分量f4的振幅大。因此，沖擊音降噪處理部252不將頻譜S3的頻率分量f4置換為頻譜SI的頻率分量f4。這樣，沖擊音降噪處理部252僅在頻譜SI的頻率分量的振幅比頻譜S3的頻率分量的振幅小的情況下將頻譜S3的頻率分量置換為頻譜SI的頻率分量。然后，沖擊音降噪處理部252將頻譜S3的頻率分量f3、f6 f9置換為頻譜SI的頻率分量f3、f6^f9,并對驅(qū)動音降噪處理部253輸出沖擊音降噪處理后的頻譜S' 3。沖擊音降噪處理部252同樣地進行作為第I頻譜的頻譜S2與第2頻譜SI的比較以及作為第I頻譜的頻譜S4與第2頻譜S5的比較。并且，僅在第2頻譜SI、S5的頻率分量的振幅分別比頻譜S2、S4的頻率分量的振幅小的情況下，分別將頻譜S2、S4的頻率分量置換為頻譜SI、S5的頻率分量，并對驅(qū)動音降噪處理部253輸出沖擊音降噪處理后的頻譜S' 2、S' 4。另外，沖擊音降噪處理部252同樣地進行作為第I頻譜的頻譜S9、S10與第2頻譜S8的比較以及作為第I頻譜的頻譜S11、S12與第2頻譜S13的比較。并且，僅在第2頻譜S8的頻率分量的振幅分別比頻譜S9、SlO的頻率分量的振幅小的情況下，分別將頻譜S9、SlO的頻率分量置換為頻譜S8的頻率分量，并對驅(qū)動音降噪處理部253輸出沖擊音降噪處理后的頻譜S' 9、S/ 10。同樣地，僅在第2頻譜S13的頻率分量的振幅分別比頻譜S11、S12的頻率分量的振幅小的情況下，分別將頻譜Sll、S12的頻率分量置換為頻譜S13的頻率分量，并對驅(qū)動音降噪處理部253輸出沖擊音降噪處理后的頻譜S' 11、S' 12。(步驟ST7)接著，驅(qū)動音降噪處理部253基于從聲音信號處理部251輸入的麥克風聲音信號的頻譜和從沖擊音降噪處理部252輸入的沖擊音降噪處 理后的頻譜，執(zhí)行驅(qū)動音降噪處理。例如，驅(qū)動音降噪處理部253基于表示與工作開始定時tlO對應的沖擊音產(chǎn)生期間
的工作定時信號和表示與工作停止定時t20對應的沖擊音產(chǎn)生期間t20、21的工作定時信號，取得與存在驅(qū)動音產(chǎn)生的可能性的期間對應的頻譜S2 S12作為第3頻譜。該驅(qū)動音降噪處理部253將取得的第3頻譜S2飛12中與沖擊音降噪處理后的頻譜對應的頻譜S2飛4、S9 S12置換為沖擊音降噪處理后的頻譜S' 2、S' 3、S' 4、S' 9、
S,10、S' 11、S' 12。并且，驅(qū)動音降噪處理部253對沖擊音降噪處理后的頻譜S' 2、S' 3、S' 4、S' 9、S' 10、S' 11、S' 12和頻譜S5 S7執(zhí)行驅(qū)動音降噪處理。也就是說，驅(qū)動音降噪處理部253從沖擊音降噪處理后的第3頻譜S' 2 S' 4、S5 S7、S' 9^S/ 12的頻率分量分別減去表示根據(jù)驅(qū)動模式預先確定的噪音的頻譜的頻率分量。驅(qū)動音降噪處理部253將該驅(qū)動音降噪處理后的頻譜輸出到逆傅立葉變換部254。(步驟ST8)逆傅立葉變換部254對從驅(qū)動音降噪處理部253輸入的驅(qū)動音降噪處理后的頻譜進行例如逆傅立葉變換，由此變換到時域。該逆傅立葉變換部254使變換到了時域的聲音信號存儲于存儲介質(zhì)200。如以上說明，本實施例所涉及的攝像裝置100通過定時信號檢測部191檢測工作部的工作狀態(tài)發(fā)生變化的定時，并且基于該工作定時信號執(zhí)行將存在沖擊音重疊的可能性的麥克風聲音信號的頻譜的一部分置換為存在不重疊沖擊音的可能性的麥克風聲音信號的頻譜的一部分的沖擊音降噪處理。由此，即使是頻譜的頻帶很寬的沖擊音，也能夠取得目標音的不連續(xù)性不明顯且沖擊音降低了的聲音信號。另外，本實施例所涉及的攝像裝置100優(yōu)選將滿足以下(1) (4)中任一項條件的頻譜作為不重疊沖擊音的可能性高的麥克風聲音信號的第2頻譜的一部分與沖擊音重疊的可能性高的麥克風聲音信號的一部分的第I頻譜進行置換。(I)基于下述聲音信號的第2頻譜，該聲音信號在與沖擊音產(chǎn)生的可能性高的期間在時間軸方向相鄰或重疊的不產(chǎn)生沖擊音的可能性高的期間取得。(2)基于在不產(chǎn)生沖擊音和驅(qū)動音的可能性高的期間取得的聲音信號的第2頻譜。(3)第2頻譜中預先確定的閾值以上的頻率分量。(4)第2頻譜中頻譜的頻率分量的總和中預先確定的比例以上的頻率分量。進而，沖擊音降噪處理部252在第2頻譜的頻率分量的振幅比第I頻譜的頻率分量小的情況下，進行該部分的置換。也就是說，沖擊音降噪處理部252僅置換滿足條件(Ir(4)的第2頻譜中(5)比第I頻譜的頻率分量小的第2頻譜的頻率分量。這樣，通過置換第I頻譜中與滿足(1廣(4)的至少任意一項條件的第2頻譜對應的部分，能夠取得目標音的不連續(xù)性不明顯且沖擊音降低了的聲音信號。上述的條件(3)，也可以例如根據(jù)目標音的種類而確定。
圖8A是表示目標音為男聲的情況下的頻譜的一例的圖。另外，圖8B是表示目標音為女聲的情況下的頻譜的一例。如圖8A所示,在目標音為男聲的情況下,頻譜中頻率低的頻率分量比目標音為女聲的情況多，優(yōu)選設定作為第I頻譜與第2頻譜的置換范圍。這里，在目標音為男聲的情況下，沖擊音降噪處理部252不對頻率分量fl、f2進行置換，而僅關于頻率分量f3l9比較與第I頻譜的各頻率分量的大小關系。然后，在第2頻譜的頻率分量的振幅比第I頻譜的頻率分量的振幅小的情況下，將該第I頻譜的頻率分量與第2頻譜的頻率分量進行置換。同樣地，在目標音為女聲的情況下，沖擊音降噪處理部252不對頻率分量fl、f2、f3進行置換，而僅關于頻率分量f4l9比較與第I頻譜的各頻率分量的大小關系。這是因為與女聲相比，男聲的主導性的頻譜包含更多的頻率低的頻率分量。另夕卜，該主導性的頻譜指更多地包含表示目標音的特征的頻譜的部分。這樣，通過不進行主導 性的頻譜的置換，能夠防止目標音的劣化。因此，能夠使目標音的不連續(xù)性不明顯，并且降低沖擊音。上述的條件⑷也可以預先確定為例如相對于頻譜的頻率分量的總和,例如為60%的頻率高的頻率分量。在這種情況下，沖擊音降噪處理部252將第I頻譜的頻率分量的全體的和設定為100%，關于40%的頻率低的(fl、f2*)的頻率分量不進行與第2頻譜的比較。沖擊音降噪處理部252關于60%的頻率高的(f9、f8*)的頻率分量進行與第2頻譜的比較。由此，能夠防止關于頻譜中頻率低的頻率分量的、目標音的劣化。接著，參照圖9、10說明由定時信號檢測部191檢測的工作開始定時的一例。圖9是表不例如AF編碼器117的輸出和麥克風230輸出的麥克風聲音信號的一例的圖。如圖9所示，關于將AF編碼器117的輸出反復高電平和低電平的期間確定為產(chǎn)生由工作部形成的工作音的期間的情況的一例進行說明。在這種情況下，AF編碼器117的輸出最初成為高電平的時刻為工作開始定時tl。因此，從該時刻11開始沖擊音產(chǎn)生的期間。另外，在AF編碼器117的輸出最后在成為高電平時返回到低電平的時刻為工作停止定時t2。因此，從該時刻t2開始沖擊音產(chǎn)生的期間。但是，在這種情況下，在AF透鏡112的驅(qū)動系統(tǒng)(齒輪列等)的后沖()氣,W)'> 二)的影響下，有時AF編碼器117的輸出會與實際的AF透鏡112的驅(qū)動系統(tǒng)的工作開始定時偏離。關于這種情況，參照圖10進行說明。在圖10中，是示出例如AF編碼器117的輸出和麥克風230輸出的麥克風聲音信號的另一例的圖。如圖10所示，實際的AF透鏡112的驅(qū)動系統(tǒng)的工作開始定時在時間軸方向產(chǎn)生于AF編碼器117的輸出反復高電平和低電平的期間之前(過去)。在這種情況下，工作開始定時為時刻t3，而沖擊音在時刻t3后的一定期間內(nèi)產(chǎn)生。因此，在將時刻tl設定為工作開始定時的情況下，沖擊音降噪處理部252將時刻tl后的一定期間作為沖擊音產(chǎn)生的可能性高的期間來對待。在這種情況下，在由沖擊音降噪處理部252取得的第I頻譜中不包含沖擊音的可能性高。因此，定時信號檢測部191，為了避免如使用圖10所說明驅(qū)動系統(tǒng)的實際的開始定時與AF編碼器117的輸出偏離的情況的不良狀況，生成表不向工作部輸出驅(qū)動控制信號(命令)的時刻的工作開始定時信號作為工作開始定時。[變形例]接著，參照圖11 13說明本實施例所涉及的攝像裝置100的驅(qū)動模式的另一例。圖11 (A)表不根據(jù)AF編碼器117輸出求得的旋轉(zhuǎn)方向與時間的關系的一例。圖11 (B)表不麥克風聲音信號與時間的關系的一例。另外，為了便于說明，圖Il(B)在麥克風聲音信號中僅不出工作音的聲音信號，省略了目標音的聲音信號的圖不。圖Il(A)和圖Il(B)所示的AF透鏡112的驅(qū)動模式表示例如進行以焦點距離P而對焦的AF處理的情況下的驅(qū)動模式。在圖Il(A)中，其縱軸作為AF編碼器117的輸出，表示驅(qū)動AF透鏡112的驅(qū)動機 構(gòu)的旋轉(zhuǎn)方向。在該進行以焦點距離P而對焦的AF處理的驅(qū)動模式中，如圖Il(A)所示，驅(qū)動AF透鏡112的驅(qū)動機構(gòu)在時刻tl(Tt20順時針CW旋轉(zhuǎn)，之后靜止。然后驅(qū)動AF透鏡112的驅(qū)動機構(gòu)在時刻t3(Tt40再次順時針CW旋轉(zhuǎn)，之后將旋轉(zhuǎn)方向反轉(zhuǎn)，在時刻t4(Tt50逆時針CCW旋轉(zhuǎn)，然后靜止。也就是說，時刻tlO、t30分別表示AF透鏡112的工作開始定時，時刻t20、t50分別表示AF透鏡112的工作停止定時。另外，時刻t40表示AF透鏡112的驅(qū)動方向成為反向旋轉(zhuǎn)的定時。因此，如圖11⑶所示，在時刻tl(Tt20的期間和時刻t3(Tt50的期間，在麥克風聲音信號上重疊(產(chǎn)生)有由AF透鏡112形成的工作音或工作音重疊的可能性高。以下，在本實施例中，關于在時刻tl(Tt20的期間、時刻t3(Tt50的期間產(chǎn)生由AF透鏡112形成的工作音即噪音的情況進行說明。另外，如圖Il(B)所示，在時刻七10、七20330340、七50分別有產(chǎn)生沖擊音的高可能性。以下，在本實施例中，關于在時刻tlO、t20、t30、t40、t50產(chǎn)生由AF透鏡112形成的沖擊音的情況進行說明。另外，在產(chǎn)生了沖擊音的情況下，該沖擊音產(chǎn)生的可能性高的時間根據(jù)各驅(qū)動模式預先確定。在進行以焦點距離P而對焦的AF處理的驅(qū)動模式中，確定圖12所示的沖擊音的產(chǎn)生時間。圖12表示在進行以焦點距離P而對焦的AF處理的驅(qū)動模式下驅(qū)動AF透鏡112時，由麥克風230拾取的麥克風聲音信號的一例。另外，為了便于說明，圖12在麥克風聲音信號中僅不出工作音的聲音信號，省略了目標音的聲音信號的圖不。在進行以焦點距離P而對焦的AF處理的驅(qū)動模式中，時刻的時間、時刻t20、21的時間、時刻t30、31的時間、時刻t40、41的時間、時刻t50、51的時間分別被預先確定為沖擊音的產(chǎn)生時間。在本實施例中，如圖12所示，關于在該沖擊音的產(chǎn)生期間產(chǎn)生了沖擊音的例子進行說明。聲音信號處理部251對從A/D轉(zhuǎn)換部240輸出的麥克風聲音信號,用如圖12所不與其它區(qū)間各重疊一半的窗函數(shù)WO W32進行加權。由此，麥克風聲音信號被分割為窗函數(shù)的大小。該聲音信號處理部251按用窗函數(shù)WO W32進行了加權的各區(qū)間的麥克風聲音信號的每一個進行例如傅立葉變換，計算頻域的頻譜S(TS32。在本實施例中，與窗函數(shù)W2 W4對應的頻譜S2 S4是包含與AF透鏡112的工作開始定時tlO對應的沖擊音產(chǎn)生期間的聲音信息。另外，與窗函數(shù)W9 W12對應的頻譜S9 S12是包含與AF透鏡112的工作停止定時t20對應的沖擊音產(chǎn)生期間t2(Tt21的聲音信息。進而，與窗函數(shù)W16 W18對應的頻譜S16飛18是包含與AF透鏡112的工作開始定時t30對應的沖擊音產(chǎn)生期間t30、31的聲音信息。此外，與窗函數(shù)W22 W24對應的頻譜S22 S24是包含與AF透鏡112的工作反轉(zhuǎn)定時t40對應的沖擊音產(chǎn)生期間t4(Tt41的聲音信息。進而，與窗函數(shù)W28 W30對應的頻譜S28 S30是包含與AF透鏡112的工作停止定時t50對應的沖擊音產(chǎn)生期間t50、51的聲音信息。這里，參照圖13說明沖擊音降噪處理部252取得的第I頻譜與第2頻譜的關系的一例。圖13是表示沖擊音降噪處理部252取得的第I頻譜與第2頻譜的關系的一例的圖。沖擊音降噪處理部252基于從定時信號檢測部191輸入的工作定時信號，例如根據(jù)從聲音信號處理部251輸出的頻譜S(TS32，基于表示與工作開始定時tlO對應的沖擊 音產(chǎn)生期間的工作定時信號，取得與存在沖擊音產(chǎn)生的可能性的期間對應的頻譜S2^S4作為第I頻譜。此外，沖擊音降噪處理部252基于表示與工作停止定時t20對應的沖擊音產(chǎn)生期間t2(Tt21的工作定時信號，取得與存在沖擊音產(chǎn)生的可能性的期間對應的頻譜S9 S12作為第I頻譜。進而，沖擊音降噪處理部252基于表示與工作開始定時t30對應的沖擊音產(chǎn)生期間t3(Tt31的工作定時信號，取得與存在沖擊音產(chǎn)生的可能性的期間對應的頻譜S16 S18作為第I頻譜。此外，沖擊音降噪處理部252基于表示與工作反轉(zhuǎn)定時t40對應的沖擊音產(chǎn)生期間t4(Tt41的工作定時信號，取得與存在沖擊音產(chǎn)生的可能性的期間對應的頻譜S22 S24作為第I頻譜。進而，沖擊音降噪處理部252基于表示與工作停止定時t50對應的沖擊音產(chǎn)生期間t50、51的工作定時信號，取得與存在沖擊音產(chǎn)生的可能性的期間對應的頻譜S28 S30作為第I頻譜。此外，沖擊音降噪處理部252基于表示與工作開始定時tlO對應的沖擊音產(chǎn)生期間的工作定時信號，取得作為第I頻譜的頻譜S2之前的頻譜SO作為與頻譜S2對應的第2頻譜。該沖擊音降噪處理部252基于表示與工作開始定時tlO對應的沖擊音產(chǎn)生期間的工作定時信號，取得作為第I頻譜的頻譜S3之前的頻譜SI作為與頻譜S3對應的第2頻譜。此外，沖擊音降噪處理部252基于表示與工作開始定時tlO對應的沖擊音產(chǎn)生期間的工作定時信號，取得作為第I頻譜的頻譜S4之后的頻譜S5作為與頻譜S4對應的第2頻譜。此外，沖擊音降噪處理部252基于表示與工作停止定時t20對應的沖擊音產(chǎn)生期間t20 t21的工作定時信號，取得作為第I頻譜的頻譜S9之前的頻譜S8作為與頻譜S9對應的第2頻譜，取得作為第I頻譜的頻譜SlO之前的頻譜S8作為與頻譜SlO對應的第2頻譜。此外，沖擊音降噪處理部252基于表示與工作停止定時t20對應的沖擊音產(chǎn)生期間t2(Tt21的工作定時信號，取得作為第I頻譜的頻譜Sll之后的頻譜S13作為與頻譜Sll對應的第2頻譜，取得作為第I頻譜的頻譜S12之后的頻譜S13作為與頻譜S12對應的第2頻譜。此外，沖擊音降噪處理部252基于表示與工作開始定時t30對應的沖擊音產(chǎn)生期間t3(Tt31的工作定時信號，取得作為第I頻譜的頻譜S17之前的頻譜S15作為與頻譜S17對應的第2頻譜。此外，沖擊音降噪處理部252基于表示與工作開始定時t30對應的沖擊音產(chǎn)生期間t3(Tt31的工作定時信號，取得作為第I頻譜的頻譜S16之前的頻譜S15作為與頻譜S16對應的第2頻譜，取得作為第I頻譜的頻譜S18之后的頻譜S19作為與頻譜S18對應的第2頻譜。此外，沖擊音降噪處理部252基于表示與工作反轉(zhuǎn)定時t40對應的沖擊音產(chǎn)生期間t40、41的工作定時信號，取得作為第I頻譜的頻譜S23之前的頻譜S21作為與頻譜S23對應的第2頻譜。此外，沖擊音降噪處理部252基于表示與工作反轉(zhuǎn)定時t40對應的沖擊音產(chǎn)生期間t40、41的工作定時信號，取得作為第I頻譜的頻譜S22之前的頻譜S21作為與頻譜S22對應的第2頻譜，取得作為第I頻譜的頻譜S24之后的頻譜S25作為與頻譜S24對應的第2頻譜。 此外，沖擊音降噪處理部252基于表示與工作停止定時t50對應的沖擊音產(chǎn)生期間t50、51的工作定時信號，取得作為第I頻譜的頻譜S29之后的頻譜S31作為與頻譜S29對應的第2頻譜。此外，沖擊音降噪處理部252基于表示與工作停止定時t50對應的沖擊音產(chǎn)生期間t50、51的工作定時信號，取得作為第I頻譜的頻譜S28之前的頻譜S27作為與頻譜S28對應的第2頻譜，取得作為第I頻譜的頻譜S30之后的頻譜S31作為與頻譜S30對應的第2頻譜。進而，沖擊音降噪處理部252將第I頻譜的至少一部分置換為第2頻譜的對應部分。例如，沖擊音降噪處理部252將第I頻譜中預先確定的閾值頻率以上的頻譜與第2頻譜中預先確定的閾值頻率以上的頻譜按每個頻率分量進行比較，在判定為第2頻譜比第I頻譜小的情況下，將第I頻譜的該頻率分量置換為第2頻譜的頻率分量。這樣，沖擊音降噪處理部252關于在時間軸方向與第I頻譜相鄰的第2頻譜，執(zhí)行沖擊音降噪處理。在這種情況下，沖擊音降噪處理部252，在時間軸方向與第I頻譜相鄰的頻譜中有不含驅(qū)動音的相鄰頻譜的情況下，進行與該不含驅(qū)動音的頻譜的比較。另外，在時間軸方向相鄰的頻譜是包含驅(qū)動音的頻譜和包含沖擊音的頻譜的情況下，沖擊音降噪處理部252取得包含驅(qū)動音的頻譜作為第2頻譜。此外，在如與工作反轉(zhuǎn)定時t40對應的沖擊音產(chǎn)生期間t40、41那樣在時間軸方向與第I頻譜相鄰的頻譜均為包含驅(qū)動音的頻譜的情況下，沖擊音降噪處理部252取得任一方的頻譜作為第2頻譜。在這種情況下，沖擊音降噪處理部252取得與第I頻譜在時間軸方向更近的頻譜作為第2頻譜。此外，也可以將用于實現(xiàn)由定時信號檢測部191或降噪處理部250等執(zhí)行的處理過程的程序存儲于計算機可讀的記錄介質(zhì)，并使計算機系統(tǒng)讀取并執(zhí)行該記錄介質(zhì)記錄的程序，由此進行執(zhí)行處理。另外，此處所說的“計算機系統(tǒng)”可以包括OS (Operating System,操作系統(tǒng))和/或外圍設備等硬件。
此外，在利用了萬維網(wǎng)(WWW)系統(tǒng)的情況下，“計算機系統(tǒng)”也包括主頁提供環(huán)境(或顯示環(huán)境)。此外，所謂“計算機可讀的記錄介質(zhì)”指軟盤、磁光盤、ROM、閃存等可寫入的非易失性存儲器、CD-ROM等可移動介質(zhì)、內(nèi)置于計算機系統(tǒng)的硬盤等存儲裝置。進而，“計算機可讀的記錄介質(zhì)”還包括如經(jīng)由互聯(lián)網(wǎng)等網(wǎng)絡和/或電話線路等通信線路發(fā)送程序的情況下的作為服務器和/或客戶機的計算機系統(tǒng)內(nèi)部的易失性存儲器(例如DRAM (Dynamic Random Access Memory :動態(tài)隨機存儲器))那樣在一定時間保持程序的裝置。此外，上述程序可以從在存儲裝置等中存儲有該程序的計算機系統(tǒng)經(jīng)由傳送介質(zhì)或通過傳送介質(zhì)中的傳送波傳送到其它計算機系統(tǒng)。這里，傳送程序的“傳送介質(zhì)”指如互聯(lián)網(wǎng)等網(wǎng)絡(通信網(wǎng))和/或電話線路等通信線路(通信線)那樣具有傳送信息的功能的介質(zhì)。
此外，上述程序也可以是用于實現(xiàn)前述的功能的一部分的程序。進而，也可以是能夠以與已經(jīng)記錄于計算機系統(tǒng)的程序的組合實現(xiàn)前述功能的所謂差異文件(差異程序)。
權利要求
1.一種降噪處理裝置，其特征在于，具備 定時信號檢測部，其檢測表示工作部進行工作的定時的工作定時信號； 聲音信號取得部，其取得聲音信號；以及 降噪處理部，其基于所述工作定時信號，計算在因所述工作部的工作而產(chǎn)生的噪音產(chǎn)生的可能性高的期間取得的聲音信號的第I頻譜和在不產(chǎn)生所述噪音的可能性高的期間取得的聲音信號的第2頻譜，并基于將所述計算的第I頻譜的至少一部分置換為所述計算的第2頻譜的對應部分而得到的頻譜，計算對所述聲音信號進行了降噪的降噪聲音信號。
2.如權利要求I所述的降噪處理裝置，其特征在于， 所述降噪處理部基于在與所述噪音產(chǎn)生的期間在時間軸方向最近的不產(chǎn)生所述噪音的可能性高的期間取得的聲音信號計算所述第2頻譜。
3.如權利要求I或2所述的降噪處理裝置，其特征在于， 所述降噪處理部基于在不產(chǎn)生沖擊音的可能性高的期間取得的聲音信號計算所述第2頻譜，所述沖擊音在所述工作部的工作時因所述工作部的狀態(tài)發(fā)生變化而產(chǎn)生。
4.如權利要求廣3中任一項所述的降噪處理裝置，其特征在于， 所述降噪處理部將在所述噪音產(chǎn)生的可能性高的期間取得的聲音信號中預先確定的頻率分量的范圍中包含的所述第I頻譜的頻率分量置換為所述頻率分量的范圍中包含的所述第2頻譜的頻率分量。
5.如權利要求廣4中任一項所述的降噪處理裝置，其特征在于， 所述降噪處理部將所述第I頻譜的振幅與所述第2頻譜的振幅按每個頻率分量進行比較，并在判定為所述第I頻譜的頻率分量的振幅比所述第2頻譜的頻率分量的振幅小的情況下，將所述第I頻譜的所述頻率分量置換為所述第2頻譜的所述頻率分量。
6.如權利要求1飛中任一項所述的降噪處理裝置，其特征在于， 所述降噪處理部判定構(gòu)成所述第2頻譜的多個頻率分量的總和是否為預先確定的閾值以上，在小于所述閾值的情況下，將所述第I頻譜的至少一部分置換為所述第2頻譜的對應部分。
7.如權利要求1飛中任一項所述的降噪處理裝置，其特征在于，還具備 控制部，其對驅(qū)動部輸出用于驅(qū)動所述工作部的命令；以及 工作檢測部，其檢測所述工作部在工作的情況，并輸出表示所述工作部在工作的工作檢測信號； 其中，所述降噪處理部基于表不所述控制部輸出命令的定時的第I工作定時信號和表示所述工作檢測部停止所述工作檢測信號的輸出的定時的第2工作定時信號，判定所述噪音產(chǎn)生的可能性高的期間。
8.如權利要求廣7中任一項所述的降噪處理裝置，其特征在于， 所述降噪處理部， 在基于所述工作定時信號判定為所述工作部的工作開始時，基于在工作開始時所述噪音產(chǎn)生的可能性高的期間之前的不產(chǎn)生所述噪音的可能性高的期間取得的聲音信號計算所述第2頻譜， 在基于所述工作定時信號判定為所述工作部的工作結(jié)束時，基于在工作結(jié)束時所述噪音產(chǎn)生的可能性高的期間之后的不產(chǎn)生所述噪音的可能性高的期間取得的聲音信號計算所述第2頻譜。
9.一種攝像裝置，其特征在于，包括上述權利要求廣8中任一項所述的降噪處理裝置。
10.一種降噪處理程序，其使計算機作為以下部件發(fā)揮作用 定時信號檢測部，其檢測表示工作部進行工作的定時的工作定時信號； 聲音信號取得部，其取得聲音信號；以及 降噪處理部，其檢測所述工作定時信號，計算在因所述工作部的工作而產(chǎn)生的噪音產(chǎn)生的可能性高的期間取得的聲音信號的第I頻譜和在不產(chǎn)生所述噪音的可能性高的期間取得的聲音信號的第2頻譜，并基于將所述計算的第I頻譜的至少一部分置換為所述計算的第2頻譜的對應部分而得到的頻譜，計算對所述聲音信號進行了降噪的降噪聲音信號。
全文摘要
本發(fā)明提供降噪處理裝置、攝像裝置及降噪處理程序。降噪處理裝置具備定時信號檢測部，其檢測表示工作部進行工作的定時的工作定時信號；聲音信號取得部，其取得聲音信號；以及降噪處理部，其計算所述工作定時信號，計算在因所述工作部的工作而產(chǎn)生的噪音產(chǎn)生的可能性高的期間取得的聲音信號的第1頻譜和在不產(chǎn)生所述噪音的可能性高的期間取得的聲音信號的第2頻譜，并基于將所述計算的第1頻譜的至少一部分置換為所述計算的第2頻譜的對應部分而得到的頻譜，計算對所述聲音信號進行了降噪的降噪聲音信號。
文檔編號H04N5/232GK102801911SQ20121016473
公開日2012年11月28日 申請日期2012年5月24日 優(yōu)先權日2011年5月27日
發(fā)明者岡崎光宏, 龍澤孝雄 申請人:株式會社尼康