視頻處理裝置、視頻處理方法、電視接收機(jī)、程序及記錄介質(zhì)的制作方法
【專利摘要】視頻處理裝置(100)所包括的噪聲量計(jì)算部(150)基于各塊的量化代碼和各塊的動(dòng)作判別結(jié)果,從具有互不相同的特性的多種降噪處理中選擇應(yīng)用于該對(duì)象幀的至少一種降噪處理。
【專利說(shuō)明】視頻處理裝置、視頻處理方法、電視接收機(jī)、程序及記錄介 質(zhì)
【技術(shù)領(lǐng)域】
[0001] 本發(fā)明主要涉及降低視頻噪聲的視頻處理裝置及視頻處理方法。
【背景技術(shù)】
[0002] 以往,開(kāi)發(fā)有用于降低在對(duì)壓縮編碼后的視頻進(jìn)行解碼的過(guò)程中產(chǎn)生的噪聲的技 術(shù)。
[0003] 下述專利文獻(xiàn)1中記載有如下技術(shù):S卩,基于與塊編碼的編碼塊邊界之間的距離 來(lái)設(shè)定加權(quán)系數(shù),根據(jù)該加權(quán)系數(shù)來(lái)控制畫質(zhì)修正時(shí)的畫質(zhì)修正量。
[0004] 此外,下述專利文獻(xiàn)2中揭示有如下技術(shù):S卩,基于對(duì)視頻信號(hào)以規(guī)定壓縮率實(shí)施 壓縮處理后的信號(hào)、與對(duì)使視頻信號(hào)延遲規(guī)定幀數(shù)而得到的視頻信號(hào)以規(guī)定壓縮率實(shí)施壓 縮處理后的信號(hào)之間的差值,來(lái)進(jìn)行動(dòng)作檢測(cè),并基于該動(dòng)作檢測(cè)結(jié)果,來(lái)控制是否使所述 處理單元進(jìn)行對(duì)視頻信號(hào)的消噪處理。
[0005] 此外,下述專利文獻(xiàn)3中記載有如下技術(shù):S卩,基于對(duì)解碼圖像中指定的大小各不 相同的范圍所檢測(cè)出的第1活躍值、第2活躍值及量化寬度值,使高頻分量衰減或增強(qiáng)。
[0006] 此外,在下述專利文獻(xiàn)4中記載有如下技術(shù):S卩,對(duì)于jpeg壓縮后的圖像,預(yù)測(cè)圖 像的壓縮率,根據(jù)該預(yù)測(cè)出的壓縮率來(lái)決定進(jìn)行圖像壓縮噪聲降低處理和色彩噪聲降低處 理的順序。此外,還記載了在能調(diào)取壓縮率本身的情況下,也可將壓縮率作為指標(biāo)來(lái)構(gòu)成 jpeg壓縮率判定處理。
[0007] 此外,下述專利文獻(xiàn)5中揭示了如下技術(shù):S卩,利用由動(dòng)作檢測(cè)電路檢測(cè)出的動(dòng)作 信號(hào)、和由噪聲量檢測(cè)電路檢測(cè)出的噪聲量,來(lái)切換對(duì)降噪特性進(jìn)行設(shè)定的系數(shù)器的乘法 系數(shù)。
[0008] 此外,下述專利文獻(xiàn)6中記載有如下技術(shù):S卩,根據(jù)解碼后的視頻信號(hào)是否是對(duì)I 圖像、P圖像及B圖像中的任一種進(jìn)行解碼后的信號(hào),來(lái)變更對(duì)解碼后的視頻信號(hào)的降噪特 性。此外,專利文獻(xiàn)2中記載有如下技術(shù):S卩,根據(jù)編碼視頻信號(hào)的傳輸速率,來(lái)變更對(duì)I圖 像、P圖像及B圖像的降噪特性。
[0009] 現(xiàn)有技術(shù)文獻(xiàn)
[0010] 專利文獻(xiàn)
[0011] 專利文獻(xiàn)1 :日本公開(kāi)專利公報(bào)"特開(kāi)平10-229546號(hào)公報(bào)(1998年8月25日公 開(kāi))"
[0012] 專利文獻(xiàn)2 :日本公開(kāi)專利公報(bào)"特開(kāi)2007-166400號(hào)公報(bào)(2007年6月28日公 開(kāi)),,
[0013] 專利文獻(xiàn)3 :日本公開(kāi)專利公報(bào)"特開(kāi)平8-149471號(hào)公報(bào)(1996年6月7日公開(kāi))"
[0014] 專利文獻(xiàn)4 :日本公開(kāi)專利公報(bào)"特開(kāi)2001-177731號(hào)公報(bào)(2001年6月29日公 開(kāi)),,
[0015] 專利文獻(xiàn)5 :日本公開(kāi)專利公報(bào)"特開(kāi)平7-131680號(hào)公報(bào)(1995年5月19日公 開(kāi))"
[0016] 專利文獻(xiàn)6 :日本公開(kāi)專利公報(bào)"特開(kāi)2003-32685號(hào)公報(bào)(2003年1月31日公 開(kāi)),,
【發(fā)明內(nèi)容】
[0017] 發(fā)明所要解決的技術(shù)問(wèn)題
[0018] 在上述專利文獻(xiàn)1所記載的技術(shù)中,以獲取與塊編碼的編碼塊邊界之間的距離為 前提。因此,在無(wú)法獲取上述距離的裝置中,無(wú)法采用該方法,從而無(wú)法進(jìn)行降噪處理及畫 質(zhì)修正處理。此外,獲取上述距離的結(jié)構(gòu)成為成本上述的一個(gè)原因。
[0019] 此外,即使如上述專利文獻(xiàn)2所記載的技術(shù)那樣利用切換消噪處理的接通關(guān)斷的 結(jié)構(gòu),也存在畫質(zhì)的提高無(wú)法達(dá)到期望的第1問(wèn)題。
[0020] 本發(fā)明是鑒于上述第1問(wèn)題而完成的,其目的在于實(shí)現(xiàn)一種能抑制成本上升、并 進(jìn)行有效的降噪處理的視頻處理裝置。
[0021] 此外,即使如上述專利文獻(xiàn)3所記載的技術(shù)那樣,利用基于第1活躍值、第2活躍 值及量化寬度值來(lái)使高頻分量衰減或增強(qiáng)的結(jié)構(gòu),也存在畫質(zhì)的提高無(wú)法達(dá)到期望的第2 問(wèn)題。
[0022] 本發(fā)明是鑒于上述第2問(wèn)題而完成的,其目的在于實(shí)現(xiàn)一種能抑制成本上升、并 進(jìn)行有效的降噪處理的視頻處理裝置。
[0023] 此外,即使利用上述專利文獻(xiàn)4所記載的技術(shù),也存在畫質(zhì)的提高無(wú)法達(dá)到期望 的第3問(wèn)題。
[0024] 本發(fā)明是鑒于上述第3問(wèn)題而完成的,其目的在于實(shí)現(xiàn)一種能抑制成本上升、且 與現(xiàn)有技術(shù)相比執(zhí)行更有效的色彩噪聲降低處理的視頻處理裝置。
[0025] 此外,即使在上述專利文獻(xiàn)5所記載的技術(shù)中,由于需要?jiǎng)幼鳈z測(cè)電路及噪聲量 檢測(cè)電路,因此,也存在導(dǎo)致成本上升的第4問(wèn)題。
[0026] 本發(fā)明是鑒于上述第4問(wèn)題而完成的,其目的在于實(shí)現(xiàn)一種能抑制成本上升、并 進(jìn)行有效的降噪處理的視頻處理裝置。
[0027] 此外,還已知有基于構(gòu)成對(duì)象幀的塊所具有的量化代碼值來(lái)決定降噪處理的強(qiáng)度 的技術(shù)。例如,已知有通過(guò)判別構(gòu)成對(duì)象幀的塊所具有的量化代碼值是否大于規(guī)定閾值來(lái) 決定是否執(zhí)行降噪處理的技術(shù)。這種技術(shù)具有對(duì)判別為超過(guò)規(guī)定閾值的對(duì)象幀以同樣的強(qiáng) 度應(yīng)用降噪處理的問(wèn)題。例如,在量化代碼值的規(guī)定閾值為10的情況下,對(duì)構(gòu)成對(duì)象幀的 所有塊的量化代碼值為11的視頻、和構(gòu)成對(duì)象幀的所有塊的量化代碼值為31的視頻分別 應(yīng)用相同強(qiáng)度的降噪處理。實(shí)際上,在量化代碼值為11的視頻和量化代碼值為31的視頻 中,各自的視頻在編碼及解碼時(shí)的量化代碼值是不同的。在對(duì)這樣的兩種視頻應(yīng)用相同強(qiáng) 度的降噪處理的情況下,對(duì)量化代碼值為11的視頻而言,應(yīng)用了強(qiáng)度過(guò)度的降噪處理,另 一方面,對(duì)量化代碼值為31的視頻而言,應(yīng)用了強(qiáng)度不足的降噪處理。
[0028] 此外,上述技術(shù)具有如下問(wèn)題:S卩,對(duì)量化代碼值為11的視頻應(yīng)用了強(qiáng)度過(guò)度的 降噪處理,另一方面,對(duì)量化代碼值為10的視頻不應(yīng)用降噪處理。這種降噪處理可能會(huì)給 收看視頻的用戶帶來(lái)異樣感。
[0029] S卩,上述技術(shù)具有無(wú)法根據(jù)量化代碼的值來(lái)實(shí)施適當(dāng)強(qiáng)度的降噪處理的第5問(wèn) 題。
[0030] 本發(fā)明是鑒于上述第5問(wèn)題而完成的,其目的在于實(shí)現(xiàn)一種能抑制成本上升、且 與現(xiàn)有技術(shù)相比實(shí)施更適當(dāng)?shù)膹?qiáng)度的降噪處理的視頻處理裝置。
[0031] 此外,上述專利文獻(xiàn)6所記載的技術(shù)中,雖然著眼于I圖像、P圖像及B圖像的差 異來(lái)變更對(duì)各圖像施加的降噪特性,但即使利用該技術(shù),也存在畫質(zhì)的提高無(wú)法達(dá)到期望 的第6問(wèn)題。
[0032] 本發(fā)明是鑒于上述第6問(wèn)題、基于發(fā)明人的見(jiàn)解而完成的,其目的在于實(shí)現(xiàn)一種 能抑制成本上升、并進(jìn)行有效的降噪處理的視頻處理裝置。
[0033] 解決技術(shù)問(wèn)題所采用的技術(shù)方案
[0034] 為了解決上述第1問(wèn)題,本發(fā)明的一個(gè)方式的視頻處理裝置降低對(duì)視頻信號(hào)進(jìn)行 解碼而得到的視頻的噪聲,其包括:降噪處理選擇單元,其基于構(gòu)成對(duì)象幀的各塊的量化代 碼、和構(gòu)成該對(duì)象幀的各塊的動(dòng)作判別結(jié)果,從具有互不相同的特性的多種降噪處理中選 擇應(yīng)用于該對(duì)象幀的至少一種降噪處理;及降噪單元,其將由所述降噪處理選擇單元所選 擇的降噪處理應(yīng)用于所述對(duì)象幀。
[0035] 此外,為了解決上述第1問(wèn)題,本發(fā)明的一個(gè)方式的視頻處理方法降低對(duì)視頻信 號(hào)進(jìn)行解碼而得到的視頻的噪聲,其包含:降噪處理選擇工序,其基于構(gòu)成對(duì)象幀的各塊的 量化代碼、和構(gòu)成該對(duì)象幀的各塊的動(dòng)作判別結(jié)果,從具有互不相同的特性的多種降噪處 理中選擇應(yīng)用于該對(duì)象幀的至少一種降噪處理;及降噪工序,其將由所述降噪處理選擇工 序所選擇的降噪處理應(yīng)用于所述對(duì)象幀。
[0036] 此外,為了解決上述第2問(wèn)題,本發(fā)明的一個(gè)方式的視頻處理裝置降低對(duì)視頻信 號(hào)進(jìn)行解碼而得到的視頻的噪聲,其包括:設(shè)定單元,其基于構(gòu)成對(duì)象幀的各塊的量化代 碼、和構(gòu)成該對(duì)象幀的各塊的頻率特性或邊緣信息,設(shè)定蚊式噪聲降低參數(shù);及降噪單元, 其對(duì)該對(duì)象幀實(shí)施利用了由所述設(shè)定單元所設(shè)定的蚊式噪聲降低參數(shù)的蚊式噪聲降低處 理。
[0037] 此外,為了解決上述第2問(wèn)題,本發(fā)明的一個(gè)方式的視頻處理方法降低對(duì)視頻信 號(hào)進(jìn)行解碼而得到的視頻的噪聲,其包含:設(shè)定工序,其基于構(gòu)成對(duì)象幀的各塊的量化代 碼、和構(gòu)成該對(duì)象幀的各塊的頻率特性或各像素的邊緣信息,設(shè)定蚊式噪聲降低參數(shù);及降 噪工序,其對(duì)該對(duì)象幀實(shí)施利用了由所述設(shè)定工序所設(shè)定的蚊式噪聲降低參數(shù)的蚊式噪聲 降低處理。
[0038] 此外,為了解決上述第3問(wèn)題,本發(fā)明的一個(gè)方式的視頻處理裝置降低對(duì)視頻信 號(hào)進(jìn)行解碼而得到的視頻的噪聲,其包括:強(qiáng)度決定單元,其基于構(gòu)成對(duì)象幀的各塊的量化 代碼、該對(duì)象幀中所包含的原色像素的數(shù)量、及彼此相鄰的原色像素的形成面積,決定色彩 噪聲降低處理的強(qiáng)度;及降噪單元,其將具有由所述強(qiáng)度決定單元所決定的強(qiáng)度的色彩噪 聲降低處理應(yīng)用于所述對(duì)象幀。
[0039] 此外,為了解決上述第3問(wèn)題,本發(fā)明的一個(gè)方式的視頻處理方法降低對(duì)視頻信 號(hào)進(jìn)行解碼而得到的視頻的噪聲,其包含:強(qiáng)度決定工序,其基于構(gòu)成對(duì)象幀的各塊的量化 代碼、該對(duì)象幀中所包含的原色像素的數(shù)量、及彼此相鄰的原色像素的形成面積,決定色彩 噪聲降低處理的強(qiáng)度;及降噪工序,其將具有由所述強(qiáng)度決定單元所決定的強(qiáng)度的色彩噪 聲降低處理應(yīng)用于所述對(duì)象幀。
[0040] 此外,為了解決上述第4問(wèn)題,本發(fā)明的一個(gè)方式的視頻處理裝置降低對(duì)視頻信 號(hào)進(jìn)行解碼而得到的視頻的噪聲,其包括:降噪處理選擇單元,其基于構(gòu)成對(duì)象幀的各塊的 量化代碼、和構(gòu)成該對(duì)象幀的各塊的運(yùn)動(dòng)矢量信息,從具有互不相同的特性的多種降噪處 理中選擇應(yīng)用于該對(duì)象幀的至少一種降噪處理;及降噪單元,其將由所述降噪處理選擇單 元所選擇的降噪處理應(yīng)用于所述對(duì)象幀。
[0041] 此外,為了解決上述第4問(wèn)題,本發(fā)明的一個(gè)方式的視頻處理方法降低對(duì)視頻信 號(hào)進(jìn)行解碼而得到的視頻的噪聲,其包含:降噪處理選擇工序,其基于構(gòu)成對(duì)象幀的各塊的 量化代碼、和構(gòu)成該對(duì)象幀的各塊的運(yùn)動(dòng)矢量信息,從具有互不相同的特性的多種降噪處 理中選擇應(yīng)用于該對(duì)象幀的至少一種降噪處理;及降噪工序,其將由所述降噪處理選擇工 序所選擇的降噪處理應(yīng)用于所述對(duì)象幀。
[0042] 此外,為了解決上述第5問(wèn)題,本發(fā)明的一個(gè)方式的視頻處理裝置降低對(duì)視頻信 號(hào)進(jìn)行解碼而得到的視頻的噪聲,其包括:設(shè)定單元,其獲取構(gòu)成對(duì)象幀的各塊的量化代碼 值,基于各自的所述量化代碼值計(jì)算所述對(duì)象幀中的降噪?yún)?shù),將規(guī)定范圍內(nèi)的降噪處理 強(qiáng)度設(shè)定成與規(guī)定范圍內(nèi)的所述降噪?yún)?shù)具有正相關(guān)性;及降噪單元,其對(duì)所述對(duì)象幀實(shí) 施利用了由所述設(shè)定單元所設(shè)定的所述降噪處理強(qiáng)度的降噪處理。
[0043] 此外,為了解決上述第5問(wèn)題,本發(fā)明的一個(gè)方式的視頻處理方法包含:設(shè)定單 元,其獲取構(gòu)成對(duì)象幀的各塊的量化代碼值,基于各自的所述量化代碼值計(jì)算所述對(duì)象幀 中的降噪?yún)?shù),將規(guī)定范圍內(nèi)的所述降噪?yún)?shù)設(shè)定成與規(guī)定范圍內(nèi)的降噪處理強(qiáng)度具有正 相關(guān)性;及降噪單元,其對(duì)所述對(duì)象幀實(shí)施利用了由所述設(shè)定單元所設(shè)定的所述降噪處理 強(qiáng)度的降噪處理。
[0044] 此外,為了解決上述第6問(wèn)題,本發(fā)明的一個(gè)方式的視頻處理裝置包括:設(shè)定單 元,其基于構(gòu)成視頻數(shù)據(jù)中所包含的I圖像的各塊的量化代碼,來(lái)設(shè)定降噪?yún)?shù)的偏移量; 變更單元,其根據(jù)I圖像彼此的幀間隔,來(lái)變更所述偏移量;及降噪單元,其對(duì)所述視頻數(shù) 據(jù)實(shí)施降噪處理,該降噪處理利用了包含由所述變更單元變更后的偏移量的降噪?yún)?shù)。
[0045] 此外,為了解決上述第6問(wèn)題,本發(fā)明的一個(gè)方式的視頻處理方法包含:設(shè)定工 序,其基于構(gòu)成視頻數(shù)據(jù)中所包含的I圖像的各塊的量化代碼,來(lái)設(shè)定降噪?yún)?shù)的偏移量; 變更工序,其根據(jù)I圖像彼此的幀間隔,來(lái)變更由所述設(shè)定單元所設(shè)定的所述偏移量;及降 噪工序,其對(duì)所述視頻數(shù)據(jù)實(shí)施降噪處理,該降噪處理利用了具有由所述變更單元變更后 的偏移量的降噪?yún)?shù)。
[0046] 發(fā)明效果
[0047] 如上所述,本發(fā)明的一個(gè)方式的視頻處理裝置降低對(duì)視頻信號(hào)進(jìn)行解碼而得到的 視頻的噪聲,其包括:降噪處理選擇單元,其基于構(gòu)成對(duì)象幀的各塊的量化代碼、和構(gòu)成該 對(duì)象幀的各塊的動(dòng)作判別結(jié)果,從具有互不相同的特性的多種降噪處理中選擇應(yīng)用于該對(duì) 象幀的至少一種降噪處理;及降噪單元,其將由所述降噪處理選擇單元所選擇的降噪處理 應(yīng)用于所述對(duì)象幀。
[0048] 如上所述,本發(fā)明的一個(gè)方式的視頻處理裝置降低對(duì)視頻信號(hào)進(jìn)行解碼而得到的 視頻的噪聲,其包括:設(shè)定單元,其基于構(gòu)成對(duì)象幀的各塊的量化代碼、和構(gòu)成該對(duì)象幀的 各塊的頻率特性或各像素的邊緣信息,設(shè)定蚊式噪聲降低參數(shù);及降噪單元,其對(duì)該對(duì)象幀 實(shí)施利用了由所述設(shè)定單元所設(shè)定的蚊式噪聲降低參數(shù)的蚊式噪聲降低處理。
[0049] 如上所述,本發(fā)明的一個(gè)方式的視頻處理裝置降低對(duì)視頻信號(hào)進(jìn)行解碼而得到的 視頻的噪聲,其包括:強(qiáng)度決定單元,其基于構(gòu)成對(duì)象幀的各塊的量化代碼、該對(duì)象幀中所 包含的原色像素的數(shù)量、及彼此相鄰的原色像素的形成面積,決定色彩噪聲降低處理的強(qiáng) 度;及降噪單元,其將具有由所述強(qiáng)度決定單元所決定的強(qiáng)度的色彩噪聲降低處理應(yīng)用于 所述對(duì)象幀。
[0050] 如上所述,本發(fā)明的一個(gè)方式的視頻處理裝置降低對(duì)視頻信號(hào)進(jìn)行解碼而得到的 視頻的噪聲,其包括:降噪處理選擇單元,其基于構(gòu)成對(duì)象幀的各塊的量化代碼、和構(gòu)成該 對(duì)象幀的各塊的運(yùn)動(dòng)矢量信息,從具有互不相同的特性的多種降噪處理中選擇應(yīng)用于該對(duì) 象幀的至少一種降噪處理;及降噪單元,其將由所述降噪處理選擇單元所選擇的降噪處理 應(yīng)用于所述對(duì)象幀。
[0051] 如上所述,本發(fā)明的一個(gè)方式的視頻處理裝置降低對(duì)視頻信號(hào)進(jìn)行解碼而得到的 視頻的噪聲,其包括:設(shè)定單元,其獲取構(gòu)成對(duì)象幀的各塊的量化代碼值,基于各自的所述 量化代碼值計(jì)算所述對(duì)象幀中的降噪?yún)?shù),將規(guī)定范圍內(nèi)的降噪處理強(qiáng)度設(shè)定成與規(guī)定范 圍內(nèi)的所述降噪?yún)?shù)具有正相關(guān)性;及降噪單元,其對(duì)所述對(duì)象幀實(shí)施利用了由所述設(shè)定 單元所設(shè)定的所述降噪處理強(qiáng)度的降噪處理。
[0052] 如上所述,本發(fā)明的一個(gè)方式的視頻處理裝置包括:設(shè)定單元,其基于構(gòu)成視頻數(shù) 據(jù)中所包含的I圖像的各塊的量化代碼,來(lái)設(shè)定降噪?yún)?shù)的偏移量;變更單元,其根據(jù)I圖 像彼此的幀間隔,來(lái)變更所述偏移量;及降噪單元,其對(duì)所述視頻數(shù)據(jù)實(shí)施降噪處理,該降 噪處理利用了包含由所述變更單元變更后的偏移量的降噪?yún)?shù)。
[0053] 根據(jù)上述各結(jié)構(gòu),能抑制成本上升,并進(jìn)行有效的降噪處理。
【專利附圖】
【附圖說(shuō)明】
[0054] 圖1是實(shí)施方式1的視頻處理裝置100的功能框圖。
[0055] 圖2是實(shí)施方式2的視頻處理裝置100的動(dòng)作流程。
[0056] 圖3是實(shí)施方式4的視頻處理裝置100的功能框圖。
[0057] 圖4是實(shí)施方式5的視頻處理裝置100的功能框圖。
[0058] 圖5是示意性表示視頻處理裝置100實(shí)施的視頻修正量與該視頻的噪聲量之間的 關(guān)系的圖。
[0059] 圖6是表示本發(fā)明一實(shí)施方式的視頻處理裝置的結(jié)構(gòu)的框圖。
[0060] 圖7是用于說(shuō)明本發(fā)明一實(shí)施方式的視頻處理裝置的圖,是表示對(duì)各像素的量化 代碼及閾值的一個(gè)示例的圖。
[0061] 圖8是用于說(shuō)明本發(fā)明一實(shí)施方式的視頻處理裝置的圖,圖8(a)表示在3D降噪 處理中參照的幀,圖8(b)表示2D降噪處理中參照的幀。
[0062] 圖9是用于說(shuō)明本發(fā)明一實(shí)施方式的視頻處理裝置的圖,表示"有動(dòng)作"的塊和 "無(wú)動(dòng)作"的塊。
[0063] 圖10是用于說(shuō)明本發(fā)明一實(shí)施方式的視頻處理裝置的圖,是表示由量化代碼超 過(guò)閾值的比例、以及"有動(dòng)作"的塊的比例所指定的各降噪處理的強(qiáng)度的圖。
[0064] 圖11是用于說(shuō)明本發(fā)明一實(shí)施方式的變形例的視頻處理裝置的圖,是表示對(duì)各 像素的量化代碼及閾值的一個(gè)示例的圖。
[0065] 圖12是用于說(shuō)明本發(fā)明一實(shí)施方式的變形例的視頻處理裝置的圖,是表示由量 化代碼超過(guò)閾值的比例、以及"有動(dòng)作"的塊的比例所指定的各降噪處理的強(qiáng)度的圖。
[0066] 圖13是表示本發(fā)明一實(shí)施方式的視頻處理裝置的結(jié)構(gòu)的框圖。
[0067] 圖14(a)是用于說(shuō)明蚊式噪聲的示意圖。圖14(b)是用于說(shuō)明蚊式噪聲降低處理 中參照的區(qū)域的外表圖。
[0068] 圖15是用于說(shuō)明本發(fā)明一實(shí)施方式的視頻處理裝置的圖,是表示構(gòu)成對(duì)象幀的 像素的頻率特性的直方圖。
[0069] 圖16是用于說(shuō)明本發(fā)明一實(shí)施方式的變形例的視頻處理裝置的圖,是表示由量 化代碼超過(guò)閾值的比例、以及構(gòu)成對(duì)象幀的頻率分量的比例所指定的各降噪處理的強(qiáng)度的 圖。
[0070] 圖17是用于說(shuō)明本發(fā)明一實(shí)施方式的變形例的視頻處理裝置的圖,是表示由量 化代碼超過(guò)閾值的比例、以及構(gòu)成對(duì)象幀的頻率分量的比例所指定的各降噪處理的強(qiáng)度的 圖。
[0071] 圖18是表示本發(fā)明一實(shí)施方式的視頻處理裝置的結(jié)構(gòu)的框圖。
[0072] 圖19是用于說(shuō)明本發(fā)明一實(shí)施方式的視頻處理裝置的圖,是包含有顯示視頻的 幀被判別為色彩噪聲的模式、和被判別為人為追加的模式的情況的示意圖。
[0073] 圖20是用于說(shuō)明本發(fā)明一實(shí)施方式的視頻處理裝置的圖,是表示由量化代碼超 過(guò)閾值的比例、以及原色像素的判別結(jié)果所指定的各降噪處理的強(qiáng)度的圖。
[0074] 圖21是表示本發(fā)明一實(shí)施方式的視頻處理裝置的結(jié)構(gòu)的框圖。
[0075] 圖22是用于說(shuō)明本發(fā)明一實(shí)施方式的視頻處理裝置的圖,表示運(yùn)動(dòng)矢量的一個(gè) 示例。
[0076] 圖23是表示本發(fā)明一實(shí)施方式的視頻處理裝置的結(jié)構(gòu)的框圖。
[0077] 圖24是用于說(shuō)明本發(fā)明一實(shí)施方式的視頻處理裝置的圖,圖24(a)表示構(gòu)成對(duì) 象幀的各塊的量化代碼值的直方圖,圖24(b)表示降噪?yún)?shù)與降噪處理強(qiáng)度之間的相關(guān)關(guān) 系。
[0078] 圖25是表示本發(fā)明一實(shí)施方式的視頻處理裝置的結(jié)構(gòu)的框圖。
[0079] 圖26是用于說(shuō)明本發(fā)明一實(shí)施方式的視頻處理裝置的圖,是表示視頻數(shù)據(jù)所包 含的多個(gè)圖像、各圖像中的NR參數(shù)、偏移量及NR增益的圖。
[0080] 圖27是用于說(shuō)明本發(fā)明一實(shí)施方式的視頻處理裝置的圖,是表示偏移量(N)及偏 移量(M)的概要的圖。
【具體實(shí)施方式】
[0081] 〈實(shí)施方式1>
[0082] 圖1是本發(fā)明實(shí)施方式1的視頻處理裝置100的功能框圖。視頻處理裝置100是 對(duì)所輸入的視頻信號(hào)的噪聲進(jìn)行修正的裝置,包括視頻獲取部110、解碼處理部120、量化 參數(shù)獲取部130、存儲(chǔ)部140、噪聲量計(jì)算部150及降噪處理部160。
[0083] 視頻處理裝置100適用于電視接收機(jī),該電視接收機(jī)例如對(duì)作為廣播信號(hào)傳送的 TS(Transport Stream:傳輸流)進(jìn)行解碼,并對(duì)解碼得到的視頻進(jìn)行顯示。
[0084] (視頻獲取部110)
[0085] 視頻獲取部110接收將視頻變?yōu)樾盘?hào)后得到的視頻信號(hào)。視頻信號(hào)的獲取源可考 慮例如廣播波、存放于存儲(chǔ)介質(zhì)的視頻數(shù)據(jù)等任意形態(tài)的視頻信號(hào)源。但是,需要是采用了 可獲取后述量化參數(shù)的方法的視頻信號(hào)。
[0086] (解碼處理部120)
[0087] 解碼處理部120對(duì)視頻獲取部110所獲取的視頻信號(hào)進(jìn)行解碼。由于一般會(huì)利用 某種方法對(duì)視頻信號(hào)進(jìn)行編碼,因此,需要解碼處理部120的處理。
[0088] 解碼處理部120進(jìn)行解碼的視頻信號(hào)例如根據(jù)MPEG-1、MPEG-2及H. 264/MPEG-4. AVC等進(jìn)行編碼。
[0089] 解碼處理部120例如利用畫面內(nèi)預(yù)測(cè)(幀內(nèi)預(yù)測(cè))及畫面間預(yù)測(cè)(幀間預(yù)測(cè))中 的任一種來(lái)生成預(yù)測(cè)圖像,將該預(yù)測(cè)圖像的各像素值與從視頻信號(hào)解碼得到的各像素值相 力口,從而生成解碼圖像。
[0090] 解碼處理部120在利用幀間預(yù)測(cè)來(lái)生成預(yù)測(cè)圖像時(shí),參照已經(jīng)解碼的、存放在未 圖示的幀存儲(chǔ)器內(nèi)的一個(gè)或多個(gè)已解碼圖像,利用運(yùn)動(dòng)矢量對(duì)構(gòu)成該已解碼圖像的各個(gè)塊 進(jìn)行動(dòng)作補(bǔ)償,從而生成預(yù)測(cè)圖像。此處,表示各運(yùn)動(dòng)矢量的運(yùn)動(dòng)矢量信息從視頻信號(hào)解碼 得到。
[0091] 此外,視頻信號(hào)中通常包含有量化轉(zhuǎn)換系數(shù)(也簡(jiǎn)稱為轉(zhuǎn)換系數(shù)),該量化轉(zhuǎn)換 系數(shù)是在對(duì)每個(gè)塊將各個(gè)塊所包含的像素的像素值進(jìn)行頻率轉(zhuǎn)換(例如,DCT(Discrete Cosine Transform:離散余弦轉(zhuǎn)換)轉(zhuǎn)換)后,實(shí)施與量化參數(shù)對(duì)應(yīng)的量化處理而得到。例 如,在視頻信號(hào)是對(duì)每個(gè)8X8像素的塊進(jìn)行編碼后得到的信號(hào)的情況下,視頻信號(hào)中,對(duì) 各個(gè)塊包含有8X8分量的量化轉(zhuǎn)換系數(shù)。
[0092] 在對(duì)這種視頻信號(hào)進(jìn)行解碼的情況下,解碼處理部120參照量化參數(shù),對(duì)各轉(zhuǎn)換 系數(shù)進(jìn)行逆向量化之后,實(shí)施逆向頻率變換,從而對(duì)各像素值進(jìn)行解碼。
[0093] 此外,視頻信號(hào)中包含的各幀(圖像)大致像以下那樣區(qū)分。
[0094] · I圖像:能不參照其他圖像地進(jìn)行解碼的圖像。I圖像例如是利用上述幀內(nèi)預(yù)測(cè) 來(lái)編碼得到的圖像。
[0095] ·Ρ圖像:能通過(guò)參照其他1張圖像來(lái)解碼的圖像。P圖像例如是利用上述幀間預(yù) 測(cè)來(lái)編碼得到的圖像。
[0096] · Β圖像:能通過(guò)參照其他2張圖像來(lái)解碼的圖像。Β圖像例如是利用上述幀間預(yù) 測(cè)來(lái)編碼得到的圖像。
[0097] (量化參數(shù)獲取部130)
[0098] 量化參數(shù)獲取部130獲取在解碼處理部120對(duì)視頻信號(hào)進(jìn)行解碼的過(guò)程中使用的 量化參數(shù)。如上所述,在大多圖像編碼方法中,在對(duì)視頻進(jìn)行編碼時(shí)實(shí)施量化處理。此時(shí)的 量化參數(shù)對(duì)于實(shí)施解碼處理而言是必須的,因此,以某種形態(tài)傳送到實(shí)施解碼處理的一側(cè)。 例如,可在視頻流的頭部分等記錄每一視頻塊的量化參數(shù)。量化參數(shù)獲取部130與編碼方 法所采用的形式相對(duì)應(yīng)地獲取其量化參數(shù)。
[0099] 另外,量化參數(shù)也可稱為量化代碼。
[0100] 此外,在視頻未被編碼的情況下,無(wú)法獲取量化參數(shù),但若不進(jìn)行編碼處理,則也 不會(huì)產(chǎn)生伴隨著編碼的噪聲,因此,不必采用本發(fā)明的方法。
[0101](存儲(chǔ)部 140)
[0102] 存儲(chǔ)部140存儲(chǔ)有用于利用量化參數(shù)來(lái)計(jì)算該視頻的噪聲量的閾值。該閾值用于 基于量化參數(shù)的值的大小,判定應(yīng)用了該量化參數(shù)的視頻塊是否去除了較多高頻分量。
[0103] (噪聲量計(jì)算部150)
[0104] 噪聲量計(jì)算部150利用量化參數(shù)獲取部130獲取的量化參數(shù)、和存儲(chǔ)部140存放 的閾值,計(jì)算該視頻的噪聲量。關(guān)于計(jì)算方法,將在后面闡述。
[0105] (降噪處理部160)
[0106] 降噪處理部160基于噪聲量計(jì)算部150計(jì)算出的噪聲量,實(shí)施降低該視頻的噪聲 的處理。具體而言,例如相當(dāng)于去除圖像的高頻分量的處理(蚊式噪聲降低處理)、使圖像 的邊界部分產(chǎn)生的噪聲降低的處理(塊式降噪處理)等。
[0107] 視頻獲取部110、解碼處理部120、量化參數(shù)獲取部130、噪聲量計(jì)算部150及降噪 處理部160可以利用實(shí)現(xiàn)這些功能的電路設(shè)備等硬件來(lái)實(shí)現(xiàn),也可以利用像微型計(jì)算機(jī)、 CPU(Central Processing Unit:中央處理單元)等運(yùn)算裝置以及對(duì)其動(dòng)作進(jìn)行規(guī)定的軟件 來(lái)構(gòu)成。
[0108] 存儲(chǔ)部140可以利用像HDD (Hard Disk Drive :硬盤驅(qū)動(dòng)器)等存儲(chǔ)裝置來(lái)構(gòu)成。
[0109] 以上說(shuō)明了本實(shí)施方式1所涉及的視頻處理裝置100的結(jié)構(gòu)。接下來(lái),對(duì)于視頻 處理裝置100計(jì)算視頻的噪聲量的處理,與基本構(gòu)思一起進(jìn)行說(shuō)明。
[0110] 〈實(shí)施方式1 :計(jì)算噪聲量的構(gòu)思〉
[0111] 一般而言,在對(duì)視頻信號(hào)進(jìn)行編碼時(shí),實(shí)施量化處理。該處理的主要目的在于間隔 地去除視頻信號(hào)的高頻分量,壓縮信息量。例如,將各頻率分量的振幅值除以量化參數(shù),縮 小振幅值的比例大?。╯cale)。由此,為呈現(xiàn)各頻率分量的振幅值所需的位數(shù)減少,且可實(shí) 施對(duì)微小的振幅值用〇進(jìn)行近似而進(jìn)行簡(jiǎn)化等處理。其結(jié)果是,能削減為呈現(xiàn)視頻所需的 信息量。
[0112] 在對(duì)視頻信號(hào)進(jìn)行編碼時(shí),有時(shí)將視頻分割為多個(gè)區(qū)域(塊),對(duì)各個(gè)塊進(jìn)行編碼 處理及量化處理。在此情況下,也可對(duì)每個(gè)塊采用不同的量化參數(shù)。某個(gè)塊的量化參數(shù)的 值較大意味著在編碼過(guò)程中間隔地去除了更多的高頻分量。即,若對(duì)量化參數(shù)的值較大的 塊進(jìn)行解碼,則由于喪失了更多的高頻分量,因此,在解碼后的視頻中有容易產(chǎn)生噪聲的趨 勢(shì)。
[0113] 本發(fā)明的各實(shí)施方式中,著眼于這點(diǎn),基于量化參數(shù)的值的大小,推定該塊中的解 碼后的噪聲量的大小。在實(shí)施編碼處理時(shí)進(jìn)行量化處理的編碼方式中,必然在解碼側(cè)也能 獲取量化參數(shù)。因此,在采用量化的編碼方式下,通過(guò)利用量化參數(shù)來(lái)計(jì)算噪聲量,從而具 有能不采用特別的編碼方式、計(jì)算方法而可靠地計(jì)算出噪聲量的優(yōu)點(diǎn)。
[0114] 在計(jì)算出噪聲量后,通過(guò)對(duì)視頻實(shí)施與該噪聲量相應(yīng)的修正處理(降噪處理),從 而可實(shí)施如下這樣的最佳修正處理:即,對(duì)于噪聲較少的塊,減小修正量,對(duì)于噪聲較多的 塊,增大修正量。
[0115] 〈實(shí)施方式1 :降噪過(guò)程〉
[0116] 以下,對(duì)視頻處理裝置100計(jì)算出噪聲量、利用該噪聲量來(lái)實(shí)施降噪處理的過(guò)程 進(jìn)行說(shuō)明。
[0117] (步驟1:獲取視頻信號(hào))
[0118] 視頻獲取部110從任意的視頻信號(hào)源獲取視頻信號(hào)。
[0119] (步驟2 :獲取量化參數(shù))
[0120] 解碼處理部120對(duì)視頻獲取部110所獲取的視頻信號(hào)進(jìn)行解碼。量化參數(shù)獲取部 130獲取在對(duì)視頻信號(hào)進(jìn)行解碼的過(guò)程中得到的量化參數(shù)。在對(duì)視頻內(nèi)的每個(gè)塊設(shè)定有量 化參數(shù)的情況下,獲取各個(gè)塊的量化參數(shù)。
[0121] (步驟2:補(bǔ)充)
[0122] 另外,量化參數(shù)獲取部130獲取量化參數(shù)的方法根據(jù)編碼方法而不同。例如,如上 所述,在視頻信號(hào)本身記錄有量化參數(shù)的情況下,獲取其值即可。雖然不一定需要從視頻信 號(hào)本身導(dǎo)出量化參數(shù),但不管是采用哪種編碼方法的情況,由于在實(shí)施解碼處理時(shí)都需要 量化參數(shù)的值,因此,獲取其值即可。
[0123] (步驟3:獲取閾值)
[0124] 噪聲量計(jì)算部150獲取量化參數(shù)獲取部130所獲取的量化參數(shù)。此外,從存儲(chǔ)部 140獲取用于基于量化參數(shù)來(lái)計(jì)算該視頻的噪聲量的閾值。
[0125] (步驟4:計(jì)算噪聲量)
[0126] 噪聲量計(jì)算部150對(duì)該視頻內(nèi)的視頻塊中量化參數(shù)的值超過(guò)上述閾值的塊的數(shù) 量進(jìn)行計(jì)數(shù)。噪聲量計(jì)算部150利用該計(jì)數(shù)結(jié)果,計(jì)算該視頻的噪聲量。
[0127] (步驟4:補(bǔ)充之一)
[0128] 另外,量化參數(shù)的值超過(guò)閾值的塊較多是指去除較多高頻分量的塊數(shù)較多。若對(duì) 除去較多高頻分量的塊進(jìn)行解碼,則編碼前后的差異有變大的趨勢(shì),因此,將該塊作為解碼 后的噪聲較大的塊進(jìn)行處理。存在噪聲較大的塊越多,該視頻整體的噪聲量就越大的趨勢(shì), 因此,用量化參數(shù)超過(guò)閾值的塊數(shù),定義為噪聲量。
[0129] (步驟4:補(bǔ)充之二)
[0130] 此外,本步驟中,可以將量化參數(shù)超過(guò)閾值的塊數(shù)本身設(shè)為噪聲量,也可以對(duì)其應(yīng) 用某種運(yùn)算式來(lái)重新計(jì)算噪聲量。任一情況下,都基于量化參數(shù)超過(guò)閾值的塊數(shù)來(lái)計(jì)算該 視頻的噪聲量這一點(diǎn)是共通的。這一點(diǎn)在以下的實(shí)施方式中也一樣。
[0131] (步驟5:降噪處理)
[0132] 降噪處理部160根據(jù)噪聲量計(jì)算部150計(jì)算出的噪聲量,對(duì)該視頻的噪聲的降低 量進(jìn)行調(diào)整,在此基礎(chǔ)上實(shí)施降噪處理。具體而言,若該視頻的噪聲量較大,則進(jìn)一步增強(qiáng) 降噪處理的強(qiáng)度。例如,增大利用高頻濾波器去除的高頻分量的降低量(濾波增益)。
[0133] (步驟5:補(bǔ)充其一)
[0134] 另外,量化處理是在編碼過(guò)程中去除高頻分量的處理,因此,在本步驟中,增加高 頻分量的去除量也可考慮雙重地去除高頻分量。然而,若對(duì)在編碼過(guò)程中去除了高頻分量 的視頻進(jìn)行解碼,則原來(lái)的高頻分量在編碼過(guò)程中丟失,因此,有時(shí)反而會(huì)產(chǎn)生高頻噪聲。 作為其典型例,有看起來(lái)將圖像以方框邊界來(lái)劃分成格子狀的塊噪聲。這樣,為了有效去除 在解碼后產(chǎn)生的噪聲,本步驟也是有效的。
[0135] (步驟5:補(bǔ)充之二)
[0136] 此外,作為計(jì)算解碼后的噪聲量的基準(zhǔn),在本實(shí)施方式1中,利用量化參數(shù)。其理 由在于,除了必須能在解碼側(cè)獲取量化參數(shù)這一點(diǎn)以外,還考慮了量化參數(shù)暗示了信息壓 縮的程度這一點(diǎn)。即,量化參數(shù)的值較大使得去除了更多高頻分量,因此,可認(rèn)為在解碼后 產(chǎn)生更多的噪聲。因而,基于量化參數(shù)的大小來(lái)推定噪聲量是妥當(dāng)?shù)?。本發(fā)明在能有效享 有這雙重優(yōu)點(diǎn)方面是有利的。
[0137] 〈實(shí)施方式1:總結(jié)〉
[0138] 如上所述,本實(shí)施方式1的視頻處理裝置100利用量化參數(shù)的值超過(guò)閾值的塊數(shù), 計(jì)算該視頻的噪聲量。在視頻編碼的過(guò)程中實(shí)施了量化處理的情況下,使得在解碼側(cè)也能 獲取該量化參數(shù),因此,無(wú)需為了計(jì)算噪聲量而利用特殊信息或采用獨(dú)特的計(jì)算方法,能可 靠地計(jì)算噪聲量。
[0139] 此外,在本實(shí)施方式1中,利用量化參數(shù)的值超過(guò)閾值的塊數(shù)來(lái)計(jì)算噪聲量是基 于如下認(rèn)識(shí):即,若對(duì)在編碼過(guò)程中去除了較多高頻分量的塊進(jìn)行解碼,則會(huì)產(chǎn)生更多的噪 聲。由此,能與編碼處理的過(guò)程相對(duì)應(yīng)地計(jì)算噪聲量,因此,能求出與圖像特性相符的噪聲 量。
[0140] 此外,本實(shí)施方式1中,根據(jù)計(jì)算出的噪聲量,調(diào)整降噪量。由此,避免對(duì)噪聲較少 的視頻增大降噪量使得反而增大噪聲的問(wèn)題,能實(shí)施適當(dāng)?shù)慕翟胩幚怼?br>
[0141] 〈實(shí)施方式2>
[0142] 實(shí)施方式1中,以量化參數(shù)是否超過(guò)閾值為基準(zhǔn),計(jì)算出噪聲量。在本發(fā)明實(shí)施方 式2中,對(duì)于量化參數(shù)的值,基于其大小分級(jí)為多個(gè)等級(jí),乘以對(duì)各等級(jí)賦予的加權(quán)系數(shù)后 進(jìn)行合計(jì)。由此,力圖更詳細(xì)分析該視頻的噪聲程度,更適當(dāng)?shù)赜?jì)算解碼后的噪聲量。由于 視頻處理裝置100的結(jié)構(gòu)與實(shí)施方式1相同,因此以下以上述計(jì)算方法的不同點(diǎn)為中心進(jìn) 行說(shuō)明。
[0143] 圖2是本實(shí)施方式2的視頻處理裝置100的動(dòng)作流程。以下,說(shuō)明圖2的各步驟。
[0144] (步驟 S200)
[0145] 在視頻獲取部110獲取視頻信號(hào)時(shí),本動(dòng)作流程開(kāi)始。解碼處理部120對(duì)視頻獲 取部110所獲取的視頻信號(hào)進(jìn)行解碼。
[0146] (步驟 S201)
[0147] 量化參數(shù)獲取部130如實(shí)施方式1說(shuō)明的那樣,獲取在解碼處理的過(guò)程中得到的 各視頻塊的量化參數(shù)。
[0148] (步驟 S202 ?S204)
[0149] 噪聲量計(jì)算部150將量化參數(shù)獲取部130獲取的、各視頻塊的量化參數(shù)的值根據(jù) 其大小劃分為多個(gè)等級(jí)。此處,示出劃分為三個(gè)等級(jí),但并不限于此。噪聲量計(jì)算部150判 定該量化參數(shù)的值屬于三個(gè)等級(jí)中的哪一個(gè)。
[0150] (步驟 S205 ?S207)
[0151] 噪聲量計(jì)算部150根據(jù)該量化參數(shù)的值所屬的等級(jí),將預(yù)先確定的加權(quán)系數(shù)乘以 該量化參數(shù)。實(shí)施方式1中直接利用量化參數(shù)的值,而在本實(shí)施方式2中利用乘以加權(quán)系 數(shù)后的值。由此,對(duì)加權(quán)系數(shù)進(jìn)行調(diào)整等,能更為精細(xì)地調(diào)整計(jì)算噪聲量的過(guò)程。
[0152] (步驟S205?S207 :補(bǔ)充之一)
[0153] 本步驟中的加權(quán)系數(shù)可以不一定對(duì)所有塊共通。例如,也可實(shí)施如下調(diào)整等:即, 對(duì)于認(rèn)為重要度較低的塊,使各等級(jí)的加權(quán)系數(shù)整體減小,對(duì)于認(rèn)為重要度較高的塊,將 LV2?3設(shè)定得比其他塊要高。
[0154] (步驟S205?S207 :補(bǔ)充之二)
[0155] 加權(quán)系數(shù)的值可預(yù)先存放在存儲(chǔ)部140等存儲(chǔ)裝置中,在需要時(shí)適當(dāng)讀出即可。
[0156] (步驟 S208)
[0157] 噪聲量計(jì)算部150判定是否對(duì)整個(gè)畫面的塊實(shí)施完成了以上的步驟。若未完成, 則返回至步驟S202,重復(fù)同樣的處理,若完成,則前進(jìn)至步驟S209。
[0158] (步驟 S209 ?S211)
[0159] 與實(shí)施方式1同樣,噪聲量計(jì)算部150對(duì)量化參數(shù)的值超過(guò)閾值的塊數(shù)進(jìn)行計(jì)數(shù), 基于其結(jié)果來(lái)計(jì)算該視頻的噪聲量。與實(shí)施方式1的不同點(diǎn)在于,本實(shí)施方式中,將加權(quán)系 數(shù)乘以量化參數(shù)后與閾值進(jìn)行比較。降噪處理部160的處理與實(shí)施方式1相同。
[0160] 〈實(shí)施方式2:總結(jié)〉
[0161] 如上所述,根據(jù)本實(shí)施方式2,噪聲量計(jì)算部150對(duì)量化參數(shù)進(jìn)行等級(jí)劃分,對(duì)各 等級(jí)分配加權(quán)系數(shù)。噪聲量計(jì)算部150對(duì)將量化參數(shù)與加權(quán)系數(shù)相乘后的結(jié)果進(jìn)行合計(jì), 計(jì)算該視頻的噪聲量。由此,除存儲(chǔ)部140所存放的閾值外還可對(duì)加權(quán)系數(shù)進(jìn)行調(diào)整,因 此,能更為精細(xì)地調(diào)整計(jì)算噪聲量的過(guò)程。
[0162] 例如,除了上述根據(jù)每個(gè)塊的重要度來(lái)調(diào)整加權(quán)系數(shù)的方法外,還可考慮根據(jù)視 頻的種類來(lái)調(diào)整加權(quán)系數(shù)的方法等。另外,關(guān)于閾值和加權(quán)系數(shù)的調(diào)整,可以在每次輸入視 頻時(shí)動(dòng)態(tài)實(shí)施,也可以準(zhǔn)備多個(gè)預(yù)先假定的組合模式并預(yù)先存放在存儲(chǔ)部140中,在輸入 視頻時(shí)應(yīng)用其中一種。
[0163] 〈實(shí)施方式3>
[0164] 實(shí)施方式1?2中,對(duì)量化參數(shù)超過(guò)閾值的塊數(shù)進(jìn)行計(jì)數(shù),采用其值作為該視頻的 噪聲量。作為其他變形例,也可以對(duì)量化參數(shù)超過(guò)閾值的塊數(shù)進(jìn)行計(jì)數(shù),將其值除以總塊數(shù) 后的值、即量化參數(shù)較大的塊占整體的比例定義作為噪聲量。
[0165] 此外,如實(shí)施方式2那樣將加權(quán)系數(shù)與量化參數(shù)相乘的情況下,也可以將最終得 到的計(jì)數(shù)結(jié)果除以總塊數(shù)后的值、即加權(quán)后的量化參數(shù)較大的塊占整體的比例定義作為該 視頻的噪聲量。
[0166] 〈實(shí)施方式4>
[0167] 圖3是本發(fā)明的實(shí)施方式4所涉及的視頻處理裝置100的功能框圖。本實(shí)施方式 4的視頻處理裝置100在實(shí)施方式1?3中說(shuō)明的結(jié)構(gòu)中,包括高頻濾波器161和邊緣濾波 器162作為降噪處理部160的內(nèi)部功能。其他結(jié)構(gòu)與實(shí)施方式1?3相同。
[0168] 高頻濾波器161是將解碼處理部120解碼后的視頻信號(hào)的高頻分量去除的濾波 器。高頻濾波器161對(duì)解碼處理部120解碼后的視頻信號(hào)的整個(gè)畫面實(shí)施去除高頻分量的 處理。另外,去除的高頻分量的量(濾波增益)構(gòu)成為可變更。
[0169] 邊緣濾波器162是將解碼處理部120解碼后的視頻信號(hào)的輪廓部分中產(chǎn)生的噪聲 (邊緣噪聲)去除的濾波器。例如,去除在圖像的邊緣區(qū)域中產(chǎn)生的蚊式噪聲等。邊緣濾波 器162對(duì)解碼處理部120解碼后的視頻信號(hào)的整個(gè)畫面實(shí)施去除邊緣噪聲的處理。另外, 去除的高頻分量的量(濾波增益)構(gòu)成為可變更。
[0170] 本實(shí)施方式4中,噪聲量計(jì)算部150基于計(jì)算出的噪聲量,對(duì)高頻濾波器161的降 噪量和邊緣濾波器162的降噪量進(jìn)行調(diào)整。具體而言,該視頻的噪聲量越多,越增加各濾波 器的降噪量,降低解碼后的噪聲。
[0171] 本實(shí)施方式4中,利用噪聲濾波器來(lái)降噪,因此,為了調(diào)整降噪量,調(diào)整濾波增益 即可。在利用其他方法來(lái)降噪的情況下,與該方法相配合地調(diào)整降噪量。
[0172] 〈實(shí)施方式4:總結(jié)〉
[0173] 如上所述,根據(jù)本實(shí)施方式4,噪聲量計(jì)算部150基于計(jì)算出的噪聲量,對(duì)各噪聲 濾波器的濾波增益進(jìn)行調(diào)整。由此,可與計(jì)算出的噪聲量相對(duì)應(yīng)地調(diào)整噪聲修正處理量。
[0174] 〈實(shí)施方式5>
[0175] 圖4是本發(fā)明的實(shí)施方式5的視頻處理裝置100的功能框圖。本實(shí)施方式5的視 頻處理裝置100在實(shí)施方式1?4中說(shuō)明的結(jié)構(gòu)的基礎(chǔ)上,新包括核化處理部171和銳度 處理部172。其它結(jié)構(gòu)與實(shí)施方式1?4相同。
[0176] 圖4中,示出了在實(shí)施方式4中說(shuō)明的結(jié)構(gòu)的基礎(chǔ)上設(shè)置有核化處理部171和銳 度處理部172的示例,但在其他實(shí)施方式的結(jié)構(gòu)下,也可以設(shè)置核化處理部171和銳度處理 部 172。
[0177] 核化處理部171對(duì)降噪處理部160實(shí)施降噪處理后的視頻的整個(gè)畫面實(shí)施去除微 小的高頻分量的處理。其用于預(yù)先去除高頻分量,使得接下來(lái)說(shuō)明的銳度處理部172不會(huì) 增強(qiáng)高頻噪聲。特別是,在視頻塊的邊界部分產(chǎn)生的塊噪聲可能在高頻濾波器161中沒(méi)有 充分去除。通過(guò)利用核化處理部171來(lái)預(yù)先去除塊噪聲,從而即使銳度處理部172增強(qiáng)塊 噪聲,也能抑制其影響。
[0178] 銳度處理部172對(duì)降噪處理部160實(shí)施降噪處理后的視頻的整個(gè)畫面實(shí)施輪廓增 強(qiáng)處理。輪廓增強(qiáng)處理具有放大高頻分量的作用,因此,在利用核化處理部171預(yù)先去除微 小高頻分量后,實(shí)施輪廓增強(qiáng)處理。
[0179] 〈實(shí)施方式5:總結(jié)〉
[0180] 如上所述,根據(jù)本實(shí)施方式5,根據(jù)噪聲量計(jì)算部150的計(jì)算結(jié)果來(lái)實(shí)施降低高頻 噪聲的處理,之后進(jìn)一步利用銳度處理部172來(lái)實(shí)施輪廓增強(qiáng)處理,從而能去除噪聲并獲 得清晰的視頻。
[0181] 此外,根據(jù)本實(shí)施方式5,通過(guò)利用核化處理部171來(lái)去除塊噪聲等微小高頻噪 聲,從而能抑制銳度處理部172的不良影響,有效發(fā)揮輪廓增強(qiáng)效果。
[0182] 〈實(shí)施方式6>
[0183] 實(shí)施方式4?5中,設(shè)高頻濾波器161、邊緣濾波器162、核化處理部171、及銳度處 理部172的處理對(duì)象為視頻的整個(gè)畫面,但也可以將上述各部的處理對(duì)象限定僅為畫面的 部分塊。例如,也可以僅對(duì)量化參數(shù)的值(或加權(quán)后的量化參數(shù)的值)超過(guò)閾值的塊實(shí)施 上述各部的處理。
[0184] 由此,對(duì)噪聲量較大的塊實(shí)施降噪處理,且能使得因降噪處理而降低清晰度的圖 像重新變清晰。此外,通過(guò)限定作為處理對(duì)象的塊,能抑制處理負(fù)荷,這一點(diǎn)與實(shí)施方式 4?5相比也比較有利。
[0185] 另外,若僅對(duì)特定的塊實(shí)施降噪處理和清晰化處理,則有可能無(wú)法獲得與相鄰的 塊的平衡。因而,也可以例如對(duì)于包含噪聲量較大的塊的周邊區(qū)域?qū)嵤┩瑯拥慕翟胩幚砗?清晰化處理。由此,能抑制處理負(fù)荷,并獲得與其他塊的平衡。
[0186] 〈實(shí)施方式7>
[0187] 圖5是示意性表示本發(fā)明的視頻處理裝置100實(shí)施的視頻修正量與該視頻的噪聲 量之間的關(guān)系的圖。
[0188] 本發(fā)明中,基于量化參數(shù)的值超過(guò)閾值的塊來(lái)計(jì)算該視頻的噪聲量,因此,只要量 化參數(shù)的值沒(méi)有超過(guò)閾值,就不會(huì)判定為是噪聲。即,在噪聲量達(dá)到閾值之前,視頻修正量 不會(huì)增加而大致一定。
[0189] 在噪聲量超過(guò)閾值之后,若噪聲量增加,則增加降噪處理部160中的降噪量,因 此,噪聲量與修正量成比例關(guān)系。
[0190] 通過(guò)調(diào)整圖5中的閾值、噪聲量與修正量的比例系數(shù),能調(diào)整視頻處理裝置100的 處理特性。此外,通過(guò)調(diào)整實(shí)施方式2中說(shuō)明的加權(quán)系數(shù),也能發(fā)揮同樣的效果。
[0191] 除此之外,通過(guò)調(diào)整降噪處理部160的降噪量、核化處理部171及銳度處理部172 的處理量,也能調(diào)整圖5的縱軸方向的特性。
[0192] 〈實(shí)施方式8>
[0193] 本說(shuō)明書所記載的各實(shí)施方式中,考慮了以下那樣的示例作為視頻獲取部110獲 取視頻信號(hào)的獲取源。
[0194] (視頻信號(hào)源的示例1)從模擬視頻廣播波獲取視頻信號(hào)。
[0195] (視頻信號(hào)源的示例2)從數(shù)字視頻廣播波獲取視頻信號(hào)。
[0196] (視頻信號(hào)源的示例3)獲取藍(lán)光(注冊(cè)商標(biāo))光盤、DVD(DigitalVersatile Disk(數(shù)字通用光盤):注冊(cè)商標(biāo))、HDD等存儲(chǔ)介質(zhì)中記錄的視頻信號(hào)。
[0197] (視頻信號(hào)源的示例4)從IP廣播波、CATV廣播波等廣播波獲取視頻信號(hào)。
[0198] (視頻信號(hào)源的示例5)從外置視頻記錄裝置、外置視頻獲取裝置等外部裝置獲取 視頻信號(hào)。
[0199] 〈實(shí)施方式9>
[0200] 以下,參照?qǐng)D6?圖12,對(duì)基于量化代碼和動(dòng)作判別的結(jié)果來(lái)變更與降噪處理相 關(guān)的降噪?yún)?shù)的結(jié)構(gòu)進(jìn)行說(shuō)明。
[0201] 圖6是表示本實(shí)施方式的視頻處理裝置1100的結(jié)構(gòu)的框圖。如圖6所示,本實(shí)施 方式的視頻處理裝置1100在圖1所示結(jié)構(gòu)的基礎(chǔ)上,包括動(dòng)作判別部1200。
[0202] 另外,本實(shí)施方式的視頻處理裝置1100的結(jié)構(gòu)并不限于圖6所示的結(jié)構(gòu),也可采 用在圖3及圖4分別示出的結(jié)構(gòu)上附加動(dòng)作判別部1200的結(jié)構(gòu)。此外,本實(shí)施方式也可與 上述各實(shí)施方式組合使用。
[0203] (動(dòng)作判別部1200)
[0204] 本實(shí)施方式的動(dòng)作判別部1200通過(guò)將從解碼處理部120提供的構(gòu)成視頻的幀中、 作為動(dòng)作判別對(duì)象的已解碼的對(duì)象幀與已解碼的其他幀進(jìn)行比較,從而對(duì)構(gòu)成該對(duì)象幀的 每一處理單位進(jìn)行動(dòng)作判別。此處,動(dòng)作判別的處理單位例如可以與上述塊大小相同,也可 以大小不同。此外,上述其他幀可以是與對(duì)象幀相鄰的幀,也可以是與對(duì)象幀相隔規(guī)定幀數(shù) 的幀。
[0205] 動(dòng)作判別部1200對(duì)每一處理單位進(jìn)行動(dòng)作判別,對(duì)于各處理單位,判別該處理單 位是否是有動(dòng)作的處理單位。更具體而言,動(dòng)作判別部1200例如通過(guò)進(jìn)行以下的處理來(lái)進(jìn) 行動(dòng)作判別。
[0206] (步驟 S1001)
[0207] 動(dòng)作判別部1200通過(guò)將對(duì)象幀中的對(duì)象處理單位的各像素值與其他幀的各像素 值進(jìn)行比較,從而進(jìn)行動(dòng)作檢測(cè)。
[0208] (步驟 S10〇2)
[0209] 接著,動(dòng)作判別部1200將步驟S1001中獲得的動(dòng)作檢測(cè)結(jié)果與存儲(chǔ)部140中存放 的閾值進(jìn)行比較,將示出比該閾值要大的動(dòng)作的塊判別為"有動(dòng)作的塊",將未示出比該閾 值要大的動(dòng)作的塊判別為"無(wú)動(dòng)作的塊"
[0210] 圖9表示由本步驟判別出的"有動(dòng)作的塊"及"無(wú)動(dòng)作的塊"的一個(gè)示例。如圖9 所示,將含有有動(dòng)作的對(duì)象(車)的至少一部分的塊判別為"有動(dòng)作的塊",將未含有有動(dòng)作 的對(duì)象的塊判別為"無(wú)動(dòng)作的塊"。
[0211] (步驟 S1003)
[0212] 對(duì)于對(duì)象幀所包含的所有塊進(jìn)行步驟S1001?S1002的處理。
[0213] 動(dòng)作判別部1200將通過(guò)以上處理得到的對(duì)各塊的動(dòng)作檢測(cè)結(jié)果提供給噪聲量計(jì) 算部1150。
[0214] (降噪處理部116〇)
[0215] 降噪處理部1160基于來(lái)自后述噪聲量計(jì)算部1150的指示,將以下所示的多個(gè)降 噪處理中的至少任一種應(yīng)用于對(duì)象幀。此外,降噪處理部1160基于來(lái)自噪聲量計(jì)算部1150 的指示,切換應(yīng)用于對(duì)象幀的降噪處理的強(qiáng)度。
[0216] · 3D塊噪聲降低處理
[0217] · 2D塊噪聲降低處理
[0218] · 3D蚊式噪聲降低處理
[0219] · 2D蚊式噪聲降低處理
[0220] 此處,3D塊噪聲降低處理及3D蚊式噪聲降低處理是參照對(duì)象幀和一個(gè)或多個(gè)其 他幀來(lái)進(jìn)行的。以下,為了方便,有時(shí)也將3D塊噪聲降低處理及3D蚊式噪聲降低處理稱為 3D噪聲降低處理。
[0221] 具體而言,如圖8(a)所示,3D噪聲降低處理通過(guò)對(duì)每一像素求得對(duì)象幀中的對(duì)象 區(qū)域、和以對(duì)象幀為起點(diǎn)在時(shí)間上位于前后的一個(gè)或多個(gè)參照幀中的對(duì)象區(qū)域的平均,從 而生成降噪后的圖像。
[0222] 此處,在應(yīng)用更強(qiáng)的3D噪聲降低處理的情況下,增多參照幀的個(gè)數(shù),在應(yīng)用更弱 的3D噪聲降低處理的情況下,減少參照幀的個(gè)數(shù)。
[0223] 通過(guò)增多參照幀的個(gè)數(shù),降噪效果變大,但對(duì)于動(dòng)作劇烈的場(chǎng)景,也有容易發(fā)生殘 像的負(fù)面效應(yīng)。通過(guò)減少參照幀的個(gè)數(shù),從而即使是對(duì)于動(dòng)作劇烈的場(chǎng)景,也不易發(fā)生殘 像,但也有降噪效果變小的負(fù)面效應(yīng)。
[0224] 另外,3D噪聲降低處理中的上述平均處理也可以利用設(shè)定成使得降噪后的圖像具 有更高畫質(zhì)的權(quán)重系數(shù)。
[0225] 此外,3D降噪處理也可以將對(duì)象幀中的對(duì)象區(qū)域、與以對(duì)象幀為起點(diǎn)在時(shí)間上位 于前后的一個(gè)或多個(gè)參照幀中的對(duì)象區(qū)域進(jìn)行比較,將瞬間變化的部分判定為噪聲,降低 該噪聲。
[0226] 另一方面,2D塊噪聲降低處理及2D蚊式噪聲降低處理是參照對(duì)象幀中的對(duì)象像 素、和該對(duì)象幀中設(shè)定在該對(duì)象像素周邊的參照區(qū)域所包含的參照像素來(lái)進(jìn)行。以下,為了 方便,有時(shí)也將2D塊噪聲降低處理及2D蚊式噪聲降低處理稱為2D噪聲降低處理。
[0227] 具體而言,如圖8(b)所示,2D噪聲降低處理通過(guò)對(duì)對(duì)象幀中的對(duì)象像素的像素 值、和該對(duì)象幀中設(shè)定在該對(duì)象像素周邊的參照區(qū)域所包含的參照像素的像素值求平均, 從而生成降噪后的圖像。
[0228] 此處,在應(yīng)用更強(qiáng)的2D噪聲降低處理的情況下,將參照區(qū)域設(shè)定得較大,在應(yīng)用 更弱的2D噪聲降低處理的情況下,將參照區(qū)域設(shè)定得較小。
[0229] 通過(guò)增大參照區(qū)域,降噪效果增大,但在產(chǎn)生噪聲的區(qū)域以外的區(qū)域也有容易產(chǎn) 生模糊的負(fù)面效應(yīng)。通過(guò)減小參照區(qū)域,不易產(chǎn)生模糊,但也有降噪效果變小的負(fù)面效應(yīng)。
[0230] 另外,2D噪聲降低處理中的上述平均處理也可以利用設(shè)定成使得降噪后的圖像具 有更高畫質(zhì)的權(quán)重系數(shù)。
[0231] 此外,2D噪聲降低處理也可以將對(duì)象幀中的對(duì)象像素、與該對(duì)象幀中設(shè)定在該對(duì) 象像素周邊的參照區(qū)域所包含的參照像素進(jìn)行比較,在對(duì)象像素的顏色或亮度與參照像素 的顏色或亮度大為不同的情況下,判斷為該對(duì)象像素產(chǎn)生了噪聲,降低該噪聲。
[0232] (噪聲量計(jì)算部1150)
[0233] 接著,對(duì)本實(shí)施方式的噪聲量計(jì)算部1150進(jìn)行說(shuō)明。本實(shí)施方式的噪聲量計(jì)算部 1150是降噪處理選擇單元,也是強(qiáng)度決定單元。噪聲量計(jì)算部1150利用量化參數(shù)獲取部 130獲取的量化代碼、動(dòng)作判別部1200的動(dòng)作判別結(jié)果及存儲(chǔ)部140所存放的閾值,推定該 視頻中的噪聲量。此外,噪聲量計(jì)算部1150基于所推定的噪聲量,變更降噪處理部1160的 降噪處理種類及強(qiáng)度。
[0234] 圖7是表示對(duì)于各像素的量化代碼的一個(gè)示例的圖。橫軸表示對(duì)象幀所包含的各 像素(更具體而言,為對(duì)各像素附加的像素編號(hào)),縱軸表示對(duì)各像素的量化代碼的值的示 例。
[0235] 噪聲量計(jì)算部1150計(jì)算對(duì)象幀中量化代碼超過(guò)規(guī)定閾值(圖7的示例中,閾值= 10)的像素的數(shù)量相對(duì)于該對(duì)象幀中的總像素?cái)?shù)的比例。
[0236] 此外,噪聲量計(jì)算部1150計(jì)算對(duì)象幀中判別為"有動(dòng)作"的塊的數(shù)量相對(duì)于該對(duì) 象幀中的總塊數(shù)的比例。
[0237] 基于上述計(jì)算結(jié)果,噪聲量計(jì)算部1150變更降噪處理部1160應(yīng)用于對(duì)象幀的降 噪處理的種類及其強(qiáng)度。
[0238] 圖10是表示判別為"有動(dòng)作"的塊比例、超過(guò)閾值的量化代碼的比例及由噪聲量 計(jì)算部1150設(shè)定的各降噪處理的強(qiáng)度之間的關(guān)系的一個(gè)示例的表。圖10中,"BNR"指塊 噪聲降低處理,"MNR"指蚊式噪聲降低處理。
[0239] 如圖10所示,噪聲量計(jì)算部1150在判別為有動(dòng)作的塊越多時(shí),越增強(qiáng)塊噪聲降低 處理的強(qiáng)度。
[0240] 此外,如圖10所示,噪聲量計(jì)算部1150在判別為具有超過(guò)規(guī)定閾值的量化代碼的 塊越多時(shí),越增強(qiáng)蚊式噪聲降低處理的強(qiáng)度。
[0241] 此外,噪聲量計(jì)算部1150也可以對(duì)降噪處理部1160進(jìn)行指示,以省略設(shè)定為"弱" 的降噪處理。
[0242] 此外,噪聲量計(jì)算部1150可構(gòu)成為例如在判別為"有動(dòng)作"的塊的比例更小時(shí),選 擇2D噪聲降低處理,在判別為"有動(dòng)作"的塊的比例更大時(shí),選擇3D噪聲降低處理。
[0243] 此外,噪聲量計(jì)算部1150可構(gòu)成為在利用3D噪聲降低處理的情況下,在判別為 "有動(dòng)作"的塊的比例更大時(shí),減小參照的幀的個(gè)數(shù),在判別為"有動(dòng)作"的塊的比例更小時(shí), 增多參照的幀的個(gè)數(shù)。
[0244] 此外,噪聲量計(jì)算部1150也可構(gòu)成為識(shí)別在對(duì)象幀上設(shè)定的對(duì)象區(qū)域中的噪聲 產(chǎn)生模式,并基于識(shí)別結(jié)果,利用降噪處理部1160,變更應(yīng)用于該對(duì)象區(qū)域的降噪處理的種 類及強(qiáng)度。
[0245] 例如,噪聲量計(jì)算部1150可構(gòu)成為檢測(cè)各塊中的平均顏色、亮度,在顏色、亮度以 塊為單位進(jìn)行變化的情況下,推定為該對(duì)象幀中存在塊噪聲,增強(qiáng)應(yīng)用于塊邊界的塊噪聲 降低處理的強(qiáng)度。
[0246] 此外,噪聲量計(jì)算部1150也可構(gòu)成為在顏色、亮度大幅變化的區(qū)域(例如圖像邊 緣)附近檢測(cè)出噪聲的情況下,將該噪聲判定為蚊式噪聲,通過(guò)對(duì)不包含上述邊緣的區(qū)域 中的像素值求平均,從而降低該蚊式噪聲。
[0247] 通過(guò)采用這種結(jié)構(gòu),能進(jìn)行更精細(xì)的降噪處理。
[0248] 另外,上述各閾值可決定為使得視頻處理裝置1100輸出的視頻具有更高畫質(zhì)。
[0249] 〈實(shí)施方式10>
[0250] 參照?qǐng)D11?圖12說(shuō)明實(shí)施方式9的變形例。
[0251] 本變形例的噪聲量計(jì)算部1150在上述結(jié)構(gòu)的基礎(chǔ)上,構(gòu)成為在判別為有動(dòng)作的 塊越多時(shí),越減小與量化代碼相關(guān)的閾值。
[0252] 圖11是將對(duì)各像素的量化代碼的一個(gè)示例與由本變形例的噪聲量計(jì)算部1150設(shè) 定的閾值一起示出的圖。
[0253] 圖12中,噪聲量計(jì)算部1150判別為有動(dòng)作的塊越多時(shí),將與量化代碼相關(guān)的閾值 設(shè)定得越小。
[0254] 在大多編碼方式中,參考所需的壓縮率等,由編碼側(cè)設(shè)定量化代碼。例如,在原視 頻中包含有"發(fā)白噪聲"的情況下,即使降低壓縮率,即將量化代碼設(shè)定得較小,有時(shí)視頻本 身也會(huì)包含較多噪聲。
[0255] 另一方面,這種視頻有被動(dòng)作判別判定為"有動(dòng)作"的塊較多的趨勢(shì)。
[0256] 在本變形例中,在"有動(dòng)作"的塊較多時(shí),將與量化代碼相關(guān)的閾值設(shè)定得較小,因 此,能適當(dāng)降低上述"發(fā)白噪聲"。
[0257] 〈實(shí)施方式11>
[0258] 參照?qǐng)D13?圖16對(duì)視頻處理裝置2100進(jìn)行說(shuō)明,該視頻處理裝置2100構(gòu)成為 基于構(gòu)成對(duì)象幀的各塊的量化代碼、及構(gòu)成該對(duì)象幀的各塊的頻率特性或各像素的邊緣信 息,設(shè)定蚊式噪聲降低參數(shù),對(duì)該對(duì)象幀實(shí)施利用了該蚊式噪聲降低參數(shù)的蚊式噪聲降低 處理。
[0259] 圖13是表示本實(shí)施方式的視頻處理裝置2100的結(jié)構(gòu)的框圖。圖13所示的視頻 處理裝置2100與圖1所示的視頻處理裝置相比,不同點(diǎn)在于包括頻率判別部2200。
[0260] 此外,圖14是用于說(shuō)明蚊式噪聲的示意圖,圖8是用于說(shuō)明本實(shí)施方式的降噪處 理的一個(gè)方式即3D噪聲降低處理及2D噪聲降低處理的不意圖。
[0261] 圖7是用于說(shuō)明本實(shí)施方式的視頻處理裝置的圖,是表示構(gòu)成對(duì)象幀的各塊所具 有的量化代碼及閾值的一個(gè)示例的圖。
[0262] (頻率判別部2200)
[0263] 頻率判別單元即頻率判別部2200基于頻率特性,計(jì)算降噪?yún)?shù)。
[0264] 更具體而言,頻率判別部2200從解碼處理部120獲取構(gòu)成對(duì)象幀的各塊所具有的 頻率分量(參照?qǐng)D13)。之后,頻率判別部2200基于該頻率分量,導(dǎo)出頻率分量的直方圖。 圖15所示的頻率分量的直方圖是頻率判別部2200導(dǎo)出的頻率分量的直方圖的一個(gè)示例。 該頻率分量的直方圖反映對(duì)象幀的頻率特性。
[0265] 頻率判別部2200將導(dǎo)出的頻率分量的直方圖提供給設(shè)定單元即噪聲量計(jì)算部 2150。
[0266] (邊緣信息導(dǎo)出部)
[0267] 另外,視頻處理裝置2100也可以包括邊緣信息導(dǎo)出單元即邊緣信息導(dǎo)出部,以代 替頻率判別部2200。邊緣信息導(dǎo)出部對(duì)提供給構(gòu)成上述對(duì)象幀的各像素的像素值實(shí)施邊緣 信息提取處理,導(dǎo)出對(duì)象幀中的邊緣信息。然后,邊緣信息導(dǎo)出部將該邊緣信息提供給噪聲 量計(jì)算部2150。
[0268] 作為此處使用的邊緣信息提取處理,可應(yīng)用已知的邊緣信息提取方法。以下說(shuō)明 具體的邊緣信息提取處理的一個(gè)示例。邊緣信息導(dǎo)出部將對(duì)象幀所包含的某一像素的亮 度、與配置在該某一像素鄰近的像素的亮度之間的差值作為亮度差來(lái)計(jì)算。同樣,邊緣信息 導(dǎo)出部對(duì)于構(gòu)成對(duì)象幀的所有像素,計(jì)算上述亮度差。之后,邊緣信息導(dǎo)出部將上述亮度差 的分布作為邊緣直方圖來(lái)導(dǎo)出。該邊緣直方圖是邊緣信息的一個(gè)形式。即,邊緣信息導(dǎo)出 部所導(dǎo)出的邊緣信息并不限于邊緣直方圖。
[0269] 作為其他的邊緣信息提取處理的示例,可舉出有利用了 Sobel濾波器的邊緣檢 測(cè)。邊緣信息導(dǎo)出部通過(guò)對(duì)對(duì)象幀實(shí)施Sobel濾波,從而檢測(cè)對(duì)象幀所包含的邊緣分量。邊 緣信息導(dǎo)出部也可基于該對(duì)象幀所包含的邊緣分量,導(dǎo)出對(duì)象幀的邊緣直方圖。
[0270] (降噪處理部2160)
[0271] 降噪處理部2160基于來(lái)自后述噪聲量計(jì)算部2150的指示,將包含以下所示的多 個(gè)降噪處理中的至少蚊式噪聲降低處理的降噪處理應(yīng)用于對(duì)象幀。此外,降噪處理部2160 基于來(lái)自噪聲量計(jì)算部2150的指示,切換應(yīng)用于對(duì)象幀的降噪處理的強(qiáng)度。
[0272] · 3D蚊式噪聲降低處理
[0273] · 2D蚊式噪聲降低處理
[0274] · 3D塊噪聲降低處理
[0275] · 2D塊噪聲降低處理
[0276] (蚊式噪聲降低處理)
[0277] 如上所述,作為色彩噪聲降低處理的一種類型,降噪處理部2160進(jìn)行蚊式噪聲降 低處理。這里,參照?qǐng)D14(a),對(duì)蚊式噪聲的概要進(jìn)行說(shuō)明。蚊式噪聲具有易于在對(duì)象幀內(nèi) 亮度或者顏色大幅變化的邊緣區(qū)域中產(chǎn)生的趨勢(shì)。圖14(a)中,區(qū)域B表示亮度較低的區(qū) 域,區(qū)域C表示亮度較高的區(qū)域。在區(qū)域B及區(qū)域C的邊界附近,亮度大幅變化,因此,易于 產(chǎn)生蚊式噪聲。區(qū)域A表示產(chǎn)生蚊式噪聲的區(qū)域。本來(lái)應(yīng)該是與區(qū)域B同樣亮度較低的區(qū) 域,但由于產(chǎn)生蚊式噪聲,區(qū)域A的亮度比區(qū)域B高,比區(qū)域C低。
[0278] 另外,也可換言之,上述邊緣區(qū)域由構(gòu)成對(duì)象幀的各塊中具有較高的頻率分量的 塊形成。因而,也可以說(shuō),蚊式噪聲易于在具有較高頻率分量的塊內(nèi)及其周邊的塊中產(chǎn)生。 作為其結(jié)果,若構(gòu)成對(duì)象幀的塊中,具有較高頻率分量的塊的比例較高,則在該對(duì)象幀中包 含較多的蚊式噪聲的可能性較高。此外,若對(duì)象幀所表示的視頻包含較多的邊緣區(qū)域,則在 該對(duì)象幀中包含較多的蚊式噪聲的可能性較高。
[0279] 關(guān)于蚊式噪聲降低處理,如后所述有3D蚊式噪聲降低處理和2D蚊式噪聲降低處 理。
[0280] (塊噪聲降低處理)
[0281] 塊噪聲一般是在以高壓縮率對(duì)視頻進(jìn)行編碼時(shí)產(chǎn)生的矩形的噪聲。該噪聲的大小 與編碼過(guò)程中的塊大小相同,因此,稱為塊噪聲。關(guān)于塊噪聲降低處理,如后所述有3D塊噪 聲降低處理和2D塊噪聲降低處理。
[0282] (3D噪聲降低處理)
[0283] 此處,3D塊噪聲降低處理及3D蚊式噪聲降低處理是參照對(duì)象幀和一個(gè)或多個(gè)其 他幀來(lái)進(jìn)行的。以下,為了方便,有時(shí)也將3D塊噪聲降低處理及3D蚊式噪聲降低處理稱為 3D噪聲降低處理。
[0284] 具體而言,如圖8 (a)所示,3D噪聲降低處理通過(guò)對(duì)每一像素求得包含噪聲的對(duì)象 幀中的對(duì)象區(qū)域、和以對(duì)象幀為起點(diǎn)在時(shí)間上位于前后的一個(gè)或多個(gè)參照幀中的對(duì)象區(qū)域 的平均,從而生成降噪后的圖像。
[0285] 此處,在應(yīng)用更強(qiáng)的3D噪聲降低處理的情況下,增多參照幀的個(gè)數(shù),在應(yīng)用更弱 的3D噪聲降低處理的情況下,減少參照幀的個(gè)數(shù)。
[0286] 通過(guò)增多參照幀的個(gè)數(shù),降噪效果變大,但對(duì)于動(dòng)作劇烈的場(chǎng)景,也有容易發(fā)生殘 像的負(fù)面效應(yīng)。通過(guò)減少參照幀的個(gè)數(shù),從而即使是對(duì)于動(dòng)作劇烈的場(chǎng)景,也不易發(fā)生殘 像,但也有降噪效果變小的負(fù)面效應(yīng)。
[0287] 另外,3D噪聲降低處理中的上述平均處理也可以利用設(shè)定成使得降噪后的圖像具 有更高畫質(zhì)的權(quán)重系數(shù)。
[0288] 此外,3D降噪處理也可以將對(duì)象幀中的對(duì)象區(qū)域、與以對(duì)象幀為起點(diǎn)在時(shí)間上位 于前后的一個(gè)或多個(gè)參照幀中的對(duì)象區(qū)域進(jìn)行比較,將瞬間變化的部分判定為噪聲,降低 該噪聲。
[0289] (2D噪聲降低處理)
[0290] 另一方面,2D塊噪聲降低處理及2D蚊式噪聲降低處理是參照對(duì)象幀中的對(duì)象像 素、和該對(duì)象幀中設(shè)定在該對(duì)象像素周邊的參照區(qū)域所包含的參照像素來(lái)進(jìn)行。以下,為了 方便,有時(shí)也將2D塊噪聲降低處理及2D蚊式噪聲降低處理稱為2D噪聲降低處理。
[0291] 具體而言,如圖8(b)所示,2D噪聲降低處理通過(guò)對(duì)對(duì)象幀中的對(duì)象像素的像素 值、和該對(duì)象幀中設(shè)定在該對(duì)象像素周邊的參照區(qū)域所包含的參照像素的像素值求平均, 從而生成降噪后的圖像。
[0292] 此處,在應(yīng)用更強(qiáng)的2D噪聲降低處理的情況下,將參照區(qū)域設(shè)定得較大,在應(yīng)用 更弱的2D噪聲降低處理的情況下,將參照區(qū)域設(shè)定得較小。
[0293] 通過(guò)增大參照區(qū)域,降噪效果增大,但在產(chǎn)生噪聲的區(qū)域以外的區(qū)域也有容易產(chǎn) 生模糊的負(fù)面效應(yīng)。通過(guò)減小參照區(qū)域,不易產(chǎn)生模糊,但也有降噪效果變小的負(fù)面效應(yīng)。 此外,在應(yīng)用2D蚊式噪聲降低處理的情況下,有時(shí)如圖14 (b)所示,作為蚊式噪聲的區(qū)域A 與亮度較高的區(qū)域C相近。在這種情況下,通過(guò)如圖14(b)所示那樣設(shè)定參照區(qū)域,從而能 防止參照區(qū)域中包含亮度較高的區(qū)域C。通過(guò)像上述那樣設(shè)定參照區(qū)域,從而能更有效地執(zhí) 行蚊式噪聲降低處理。
[0294] 另外,2D噪聲降低處理中的上述平均處理也可以利用設(shè)定成使得降噪后的圖像具 有更高畫質(zhì)的權(quán)重系數(shù)。
[0295] 此外,2D噪聲降低處理也可以將對(duì)象幀中的對(duì)象像素、與該對(duì)象幀中設(shè)定在該對(duì) 象像素周邊的參照區(qū)域所包含的參照像素進(jìn)行比較,在對(duì)象像素的顏色或亮度與參照像素 的顏色或亮度大為不同的情況下,判斷為該對(duì)象像素產(chǎn)生了噪聲,降低該噪聲。
[0296] (噪聲量計(jì)算部2150)
[0297] 作為設(shè)定單元的噪聲量計(jì)算部2150基于由頻率判別部2200導(dǎo)出的頻率分量的直 方圖、及構(gòu)成對(duì)象幀的各塊的量化代碼,來(lái)導(dǎo)出蚊式噪聲降低參數(shù)。
[0298] 此處,對(duì)于噪聲量計(jì)算部2150所進(jìn)行的蚊式噪聲降低參數(shù)的導(dǎo)出,參照?qǐng)D7、圖15 及圖16說(shuō)明如下。
[0299] 圖7是表示對(duì)于各像素的量化代碼的一個(gè)示例的圖。橫軸表示對(duì)象幀所包含的各 像素(更具體而言,為對(duì)各像素附加的像素編號(hào)),縱軸表示對(duì)各像素的量化代碼的值的示 例。
[0300] 噪聲量計(jì)算部2150計(jì)算對(duì)象幀中量化代碼超過(guò)規(guī)定閾值(圖7的示例中,閾值= 10)的像素的數(shù)量相對(duì)于該對(duì)象幀中的總像素?cái)?shù)的比例。
[0301] 圖15是表示由頻率判別部2200導(dǎo)出的頻率分量的直方圖的一個(gè)示例的圖。圖 15所示的兩條實(shí)線分別表示第1頻率及第2頻率。第1頻率及第2頻率均為制造者預(yù)先 設(shè)定的頻率。第1頻率及第2頻率也可以在視頻處理裝置2100的制造階段中存儲(chǔ)于存儲(chǔ) 部140。根據(jù)上述結(jié)構(gòu),噪聲量計(jì)算部2150通過(guò)參照存儲(chǔ)部140,來(lái)獲取第1頻率及第2頻 率。另外,本實(shí)施方式中,第1頻率<第2頻率。
[0302] 噪聲量計(jì)算部2150以第1頻率及第2頻率為邊界值,將頻率分量的直方圖分割為 3種頻率分量(參照?qǐng)D15)。噪聲量計(jì)算部2150將頻率為第1頻率以下的頻率區(qū)域作為第 1頻率分量來(lái)處理。圖15所記載的頻率"低"的區(qū)域?yàn)榈?頻率分量。噪聲量計(jì)算部2150 將頻率高于第1頻率、且為第2頻率以下的頻率區(qū)域作為第2頻率分量來(lái)處理。第2頻率 分量對(duì)應(yīng)于圖15所示的頻率"中"的區(qū)域。噪聲量計(jì)算部2150將頻率高于第2頻率的頻 率區(qū)域作為第3頻率分量來(lái)處理。第3頻率分量對(duì)應(yīng)于圖15所示的頻率"高"的區(qū)域。如 上所述,在構(gòu)成對(duì)象幀的塊所具有的頻率特性中,第3頻率分量也可稱為高頻分量,第1頻 率分量也可稱為低頻分量。此外,本實(shí)施方式中,將第2頻率分量表述為中頻分量。
[0303] 之后,噪聲量計(jì)算部2150計(jì)算出第1頻率分量相對(duì)于總頻率分量的比例。同樣, 噪聲量計(jì)算部2150計(jì)算出第2頻率分量相對(duì)于總頻率分量的比例、及第3頻率分量相對(duì)于 總頻率分量的比例。
[0304] 另外,第1頻率及第2頻率為制造者能任意設(shè)定的值。制造者可適當(dāng)調(diào)整第1頻 率及第2頻率的值,以使得降噪處理部2160輸出的降噪處理后的視頻具有所期望的畫質(zhì)。
[0305] (蚊式噪聲降低參數(shù)的導(dǎo)出)
[0306] 接著,噪聲量計(jì)算部2150基于對(duì)象幀中量化代碼超過(guò)規(guī)定閾值的像素的數(shù)量相 對(duì)于該對(duì)象幀中的總像素?cái)?shù)的比例、以及第1頻率分量、第2頻率分量及第3頻率分量,來(lái) 設(shè)定蚊式噪聲降低參數(shù)。以下,參照?qǐng)D16,對(duì)噪聲量計(jì)算部2150設(shè)定蚊式噪聲降低參數(shù)的 處理進(jìn)行說(shuō)明。另外,以下,將"對(duì)象幀中量化代碼超過(guò)規(guī)定閾值的像素的數(shù)量相對(duì)于該對(duì) 象幀中的總像素?cái)?shù)的比例"簡(jiǎn)單表述為"量化代碼超過(guò)閾值的比例"。
[0307] 圖16是表示由構(gòu)成對(duì)象幀的所有塊中量化代碼超過(guò)閾值的塊的比例、和構(gòu)成對(duì) 象幀的頻率分量的比例來(lái)指定的各降噪處理的強(qiáng)度的圖。圖16中,將蚊式噪聲降低參數(shù)表 述為MNR。此外,將塊噪聲降低參數(shù)表述為BNR,將銳度處理參數(shù)表述為SHARPNESS。
[0308] 噪聲量計(jì)算部2150設(shè)定的蚊式噪聲降低參數(shù)的大小越大,降噪處理部2160對(duì)對(duì) 象幀實(shí)施越強(qiáng)的蚊式噪聲降低處理。即,在降噪處理部2160獲取了蚊式噪聲降低參數(shù)"大" 時(shí),降噪處理部2160對(duì)對(duì)象幀實(shí)施"強(qiáng)"的蚊式噪聲降低處理。在降噪處理部2160獲取了 蚊式噪聲降低參數(shù)"中"時(shí),降噪處理部2160對(duì)對(duì)象幀實(shí)施"中等"的蚊式噪聲降低處理。 在降噪處理部2160獲取了蚊式噪聲降低參數(shù)"小"時(shí),降噪處理部2160對(duì)對(duì)象幀實(shí)施"弱" 的蚊式噪聲降低處理。
[0309] (高頻分量比例較高的情況)
[0310] 以下對(duì)在構(gòu)成對(duì)象幀的塊所具有的高頻分量較多的情況下噪聲量計(jì)算部2150設(shè) 定的蚊式噪聲降低參數(shù)的大小進(jìn)行說(shuō)明。本實(shí)施方式中,將高頻分量的比例為50%以上的 情況定義為高頻分量的比例較高的情況。另外,判別高頻分量的比例是否較高的比例并不 限于50%,制造者可適當(dāng)調(diào)整為任意的比例,以使得降噪處理后的視頻具有所期望的畫質(zhì)。
[0311] 構(gòu)成對(duì)象幀的塊所具有的高頻分量較多意味著如下的任一種情況的可能性較高: (i)對(duì)象幀所表示的視頻中包含的對(duì)象的輪廓分明,(ii)對(duì)象幀所表示的視頻包含較多噪 聲。對(duì)象的輪廓分明的情況下,在形成對(duì)象的輪廓的區(qū)域附近容易產(chǎn)生蚊式噪聲。因而,無(wú) 論是(i)及(ii)中的哪一種情況,對(duì)象幀包含較多蚊式噪聲的可能性較高。
[0312] 所以,即使在量化代碼超過(guò)閾值的比例低至0?小于40%的情況,噪聲量計(jì)算部 2150也將蚊式噪聲降低參數(shù)設(shè)定為"中"(參照?qǐng)D16的第1行)。此外,量化代碼超過(guò)閾值 的比例越高,對(duì)視頻進(jìn)行編碼及解碼時(shí)的壓縮率越高,因此,產(chǎn)生蚊式噪聲的頻度也變高的 可能性越高。因而,如圖16所示,量化代碼超過(guò)閾值的比例越高,噪聲量計(jì)算部2150越增 強(qiáng)所設(shè)定的蚊式噪聲降低參數(shù)。
[0313] (高頻分量比例不高的情況)
[0314] 本實(shí)施方式中,將高頻分量的比例小于50%的情況定義為高頻分量的比例不高的 情況。如圖16所示,高頻分量不高的情況有兩種情況。一種情況是如圖16的第2行所示, 中頻分量的比例超過(guò)低頻分量的比例的情況。該情況的對(duì)象幀所表示的視頻可呈現(xiàn)為有模 糊感的場(chǎng)景。由于該視頻所包含的邊緣區(qū)域不多,因此,在量化代碼超過(guò)閾值的比例較低的 情況下,該視頻所包含的蚊式噪聲的量較少。因而,噪聲量計(jì)算部2150將蚊式噪聲降低參 數(shù)設(shè)定為"弱"。另外,量化代碼超過(guò)閾值的比例越高,噪聲量計(jì)算部2150越增強(qiáng)所設(shè)定的 蚊式噪聲降低參數(shù)。
[0315] 另一種情況是如圖16的第3行所示,低頻分量的比例超過(guò)中頻分量的比例的情 況。該情況的對(duì)象幀所表示的視頻可呈現(xiàn)為全單色較多的場(chǎng)景。即,該視頻所包含的邊緣區(qū) 域與有模糊感的場(chǎng)景相比更少。在這種視頻中,產(chǎn)生蚊式噪聲的可能性較低,因此,在量化 代碼超過(guò)閾值的比例較低的情況下,噪聲量計(jì)算部2150將蚊式噪聲降低參數(shù)設(shè)定為"弱"。 另外,量化代碼超過(guò)閾值的比例越高,噪聲量計(jì)算部2150越增強(qiáng)所設(shè)定的蚊式噪聲降低參 數(shù)。然而,其增強(qiáng)程度與有模糊感的場(chǎng)景相比較小。因而,即使在量化代碼超過(guò)閾值的比例 為80?100%的情況下,噪聲量計(jì)算部2150也將蚊式噪聲降低參數(shù)設(shè)定為"中"。
[0316] 這樣,噪聲量計(jì)算部2150適當(dāng)設(shè)定蚊式噪聲降低參數(shù),降噪處理部2160基于該蚊 式噪聲降低參數(shù),對(duì)對(duì)象幀實(shí)施蚊式噪聲降低處理,從而能有效提高對(duì)象幀所表示的視頻 的畫質(zhì)。
[0317] 本實(shí)施方式中,如圖16所示,噪聲量計(jì)算部2150所設(shè)定的降噪?yún)?shù)并不限于蚊式 噪聲降低參數(shù)。噪聲量計(jì)算部2150也可構(gòu)成為基于量化代碼超過(guò)閾值的比例及頻率分量 的比例,將塊噪聲降低參數(shù)和銳度處理參數(shù)如圖16所示那樣設(shè)定。噪聲量計(jì)算部2150在 適當(dāng)設(shè)定蚊式噪聲降低參數(shù)的基礎(chǔ)上,適當(dāng)設(shè)定塊噪聲降低參數(shù)及銳度處理參數(shù),降噪處 理部2160基于上述各參數(shù),對(duì)對(duì)象幀實(shí)施各降噪處理,從而能進(jìn)一步提高對(duì)象幀所表示的 視頻的畫質(zhì)。
[0318] 另外,噪聲量計(jì)算部2150也可以對(duì)降噪處理部2160進(jìn)行指示,以省略設(shè)定為"弱" 的降噪處理。
[0319] 此外,降噪處理部2160在進(jìn)行蚊式噪聲降低處理及塊噪聲降低處理時(shí),各降噪處 理可以是2D噪聲降低處理,也可以是3D噪聲降低處理。
[0320] 此外,噪聲量計(jì)算部2150也可構(gòu)成為識(shí)別在對(duì)象幀上設(shè)定的對(duì)象區(qū)域中的噪聲 產(chǎn)生模式,并基于識(shí)別結(jié)果,利用降噪處理部2160,變更應(yīng)用于該對(duì)象區(qū)域的降噪處理的種 類及強(qiáng)度。
[0321] 例如,噪聲量計(jì)算部2150可構(gòu)成為檢測(cè)各塊中的平均顏色、亮度,在顏色、亮度以 塊為單位進(jìn)行變化的情況下,推定為該對(duì)象幀中存在塊噪聲,增強(qiáng)應(yīng)用于塊邊界的塊噪聲 降低處理的強(qiáng)度。
[0322] 此外,噪聲量計(jì)算部2150也可構(gòu)成為在顏色、亮度大幅變化的區(qū)域(例如圖像邊 緣)附近檢測(cè)出噪聲的情況下,將該噪聲判定為蚊式噪聲,通過(guò)對(duì)不包含上述邊緣的區(qū)域 中的像素值求平均,從而降低該蚊式噪聲。
[0323] 通過(guò)采用這種結(jié)構(gòu),能進(jìn)行更精細(xì)的降噪處理。
[0324] 另外,可預(yù)先決定上述各閾值,使得視頻處理裝置2100輸出的視頻具有更高畫 質(zhì)。
[0325] (基于邊緣信息的蚊式噪聲降低參數(shù)的設(shè)定)
[0326] 在視頻處理裝置2100具有邊緣信息導(dǎo)出部以代替頻率判別部2200的情況下,噪 聲量計(jì)算部2150從邊緣信息導(dǎo)出部獲取作為邊緣信息的一種形態(tài)的邊緣直方圖。邊緣直 方圖如上所述是根據(jù)構(gòu)成對(duì)象幀的各像素所具有的亮度差來(lái)表示其分布的圖。構(gòu)成對(duì)象幀 的塊所具有的頻率分量和構(gòu)成對(duì)象幀的各像素所具有的亮度差均反映了規(guī)定區(qū)域內(nèi)所包 含的邊緣區(qū)域的量。即,邊緣直方圖中的亮度差較大的區(qū)域?qū)?yīng)于頻率分量直方圖中的高 頻分量的區(qū)域。而且,邊緣直方圖中的亮度差較小的區(qū)域?qū)?yīng)于頻率分量直方圖中的低頻 分量的區(qū)域。并且,邊緣直方圖中的亮度差為中等程度的區(qū)域?qū)?yīng)于頻率分量直方圖中的 中頻分量的區(qū)域。
[0327] 因而,噪聲量計(jì)算部2150利用邊緣直方圖來(lái)代替頻率分量直方圖,并使用兩個(gè)規(guī) 定亮度差以將亮度差劃分為三個(gè)區(qū)域,從而能適當(dāng)設(shè)定蚊式噪聲降低參數(shù)。
[0328] 此外,噪聲量計(jì)算部2150也可構(gòu)成為使用一個(gè)規(guī)定亮度差,以確定邊緣直方圖中 的亮度差較大的區(qū)域。即,噪聲量計(jì)算部2150也可構(gòu)成為對(duì)于構(gòu)成對(duì)象幀的所有像素,計(jì) 算構(gòu)成由該規(guī)定亮度差確定的亮度差較大的區(qū)域的像素的比例。在此情況下,噪聲量計(jì)算 部2150基于該比例,能設(shè)定蚊式噪聲降低參數(shù)。噪聲量計(jì)算部2150在構(gòu)成上述亮度差較 大的區(qū)域的像素的比例越高時(shí),將蚊式噪聲降低參數(shù)設(shè)定得越大。
[0329] 〈實(shí)施方式12>
[0330] 參照?qǐng)D11及圖17,說(shuō)明實(shí)施方式11的變形例。
[0331] 本變形例的噪聲量計(jì)算部2150構(gòu)成為在上述結(jié)構(gòu)的基礎(chǔ)上,在高頻分量的比例 越高時(shí),使與量化代碼相關(guān)的閾值越小,在低頻分量的比例越高時(shí),使與量化代碼相關(guān)的閾 值越大。
[0332] 圖11是將對(duì)各像素的量化代碼的一個(gè)示例與由本變形例的噪聲量計(jì)算部2150設(shè) 定的閾值一起示出的圖。
[0333] 如圖17所示,噪聲量計(jì)算部2150在高頻分量的比例越高時(shí),將與量化代碼相關(guān)的 閾值設(shè)定得越小,在低頻分量的比例越高時(shí)將與量化代碼相關(guān)的閾值設(shè)定得越大。
[0334] 在大多編碼方式中,參考所需的壓縮率等,由編碼側(cè)設(shè)定量化代碼。例如,在原視 頻中包含有"發(fā)白噪聲"的情況下,即使降低壓縮率,即將量化代碼設(shè)定得較小,有時(shí)視頻本 身也會(huì)包含較多噪聲。
[0335] 另一方面,在這種視頻本身中包含較多噪聲的情況下,噪聲量計(jì)算部2150對(duì)表示 該視頻的對(duì)象幀判別為高頻分量的比例較高。因而,噪聲量計(jì)算部2150能適當(dāng)降低上述 "發(fā)白噪聲"。
[0336] 〈實(shí)施方式13>
[0337] 以下,參照?qǐng)D7、8、14、18及19,對(duì)如下結(jié)構(gòu)進(jìn)行說(shuō)明:S卩,基于構(gòu)成對(duì)象幀的量化 代碼、構(gòu)成該對(duì)象幀的各像素中所顯示的顏色包含的原色分量的比例大于規(guī)定比例的像素 的數(shù)量、及顯示包含上述原色分量的同一顏色的各像素連續(xù)形成的區(qū)域所包含的像素的數(shù) 量,來(lái)變更與降噪處理相關(guān)的降噪?yún)?shù)。
[0338] 圖18是表示本實(shí)施方式的視頻處理裝置3100的結(jié)構(gòu)的框圖。如圖18所示,本實(shí) 施方式的視頻處理裝置3100在圖1所示結(jié)構(gòu)的基礎(chǔ)上,包括彩度判別部3200。
[0339] 另外,本實(shí)施方式的視頻處理裝置3100的結(jié)構(gòu)并不限于圖18所示的結(jié)構(gòu),也可采 用在圖3及圖4分別示出的結(jié)構(gòu)上附加彩度判別部3200的結(jié)構(gòu)。此外,本實(shí)施方式也可與 上述各實(shí)施方式組合使用。
[0340] (彩度判別部3200)
[0341] 本實(shí)施方式的彩度判別部3200判別從解碼處理部120提供的構(gòu)成視頻的幀中、作 為彩度判別對(duì)象的已解碼的對(duì)象幀中包含的像素(以下也表述為對(duì)象像素)是否為原色像 素。對(duì)判別對(duì)象幀中包含的像素是否為原色像素的方法沒(méi)有限定,可使用公知的判別原色 像素的方法。
[0342] 例如,在提供給某一像素的RGB信號(hào)中,R、G及B中任一個(gè)信號(hào)具有有限灰度、其 他兩個(gè)信號(hào)的灰度為〇的情況下,也可將該像素判別為原色像素。
[0343] 此外,作為判別原色像素的方法的另外一個(gè)示例,也可計(jì)算在提供給某一像素的 RGB信號(hào)中,R、G及B的各信號(hào)在RGB信號(hào)整體中所占的比例。將該比例表述為原色分量的 比例。然后,在提供給該像素的RGB信號(hào)中,任一顏色中的原色分量的比例較高的情況下, 也可將該像素判別為原色像素。以下,對(duì)利用原色分量的比例來(lái)判別原色像素的方法進(jìn)行 說(shuō)明。
[0344] (步驟 S1001)
[0345] 若從解碼處理部120提供的與對(duì)象像素對(duì)應(yīng)的信號(hào)為RGB信號(hào),則彩度判別部 3200將該RGB信號(hào)中的各顏色的信號(hào)強(qiáng)度即r、g及b作為原色分量來(lái)檢測(cè)。
[0346] (步驟 S10〇2)
[0347] 基于檢測(cè)出的r、g及b,彩度判別部3200計(jì)算對(duì)象像素中的原色分量的比例。將 紅色分量的比例即rrate,綠色分量的比例即grate及藍(lán)色分量的比例即brate例如像(1) 式至(3)式那樣定義。
[0348] rrate = r/ (r+g+b) · · · (1)
[0349] grate = g/ (r+g+b) · · · (2)
[0350] brate = b/ (r+g+b) · · · (3)
[0351] (步驟 SIOO3)
[0352] 彩度判別部3200分別比較rrate、grate及brate與決定是否為原色像素的規(guī)定 閾值Cth的大小關(guān)系。在各原色分量中的任一種原色分量的比例大于規(guī)定閾值Cth的情況 下,彩度判別部3200將該像素判別為是原色像素,并作為原色像素進(jìn)行累計(jì)。另一方面,在 各原色分量全都在規(guī)定閾值Cth以下的情況下,彩度判別部3200將該像素判別為不是原色 像素。
[0353] (步驟 S1004)
[0354] 彩度判別部3200在判別對(duì)象幀所包含的所有像素是否為原色像素之后,將該對(duì) 象幀所包含的原色像素的數(shù)量和提供給各原色像素的RGB信號(hào)提供給后述的噪聲量計(jì)算 部 3150。
[0355] 另外,從解碼處理部120提供的與各像素對(duì)應(yīng)的信號(hào)并不限于RGB信號(hào)。從解碼 處理部120提供的信號(hào)例如為YPbPr信號(hào)的情況下,彩度判別部3200也可將該YPbPr信號(hào) 轉(zhuǎn)換為RGB信號(hào),將轉(zhuǎn)換后的RGB信號(hào)中的r、g及b作為原色分量來(lái)檢測(cè)。此外,Cth可由 制造者決定為任意值。制造者通過(guò)將Cth設(shè)定得較大,使得噪聲量計(jì)算部3150判別為是原 色像素的判別基準(zhǔn)變嚴(yán)格。
[0356] (降噪處理部3160)
[0357] 實(shí)施方式13的降噪處理部3160基于來(lái)自后述噪聲量計(jì)算部3150的指示,將以下 所示的多個(gè)降噪處理中的至少任一種應(yīng)用于對(duì)象幀。此外,降噪處理部3160基于來(lái)自噪聲 量計(jì)算部3150的指示,切換應(yīng)用于對(duì)象幀的降噪處理的強(qiáng)度。
[0358] ?色彩噪聲降低處理
[0359] · 3D塊噪聲降低處理
[0360] · 2D塊噪聲降低處理
[0361] · 3D蚊式噪聲降低處理
[0362] · 2D蚊式噪聲降低處理
[0363] ?銳度處理
[0364] 另外,如上所述,本實(shí)施方式中的降噪處理可包含銳度處理。
[0365] (色彩噪聲降低處理)
[0366] 色彩噪聲例如是因拍攝視頻的拍攝元件中的暗電流而產(chǎn)生的噪聲。色彩噪聲具有 以下特征。
[0367] ?是原色或接近原色的顏色。
[0368] ?單一的色彩噪聲限于非常狹窄的區(qū)域。
[0369] 這樣,色彩噪聲大多為原色或接近原色的顏色,因此,容易被用戶看出。色彩噪聲 的降低處理可通過(guò)將提供給形成色彩噪聲的像素的、表示原色或接近原色的顏色的RGB信 號(hào)轉(zhuǎn)換為表示接近無(wú)彩色的顏色的RGB信號(hào)來(lái)執(zhí)行。
[0370] 例如,對(duì)形成色彩噪聲的像素提供表示接近原色的一種即紅色的顏色的RGB信 號(hào)。該RGB信號(hào)中,僅rrate較大,grate及brate較小。因此,降噪處理部3160對(duì)該RGB 信號(hào)僅降低紅色的色彩增益。由此,提供給形成色彩噪聲的像素的RGB信號(hào)所表示的顏色 從紅色轉(zhuǎn)換為接近無(wú)彩色的顏色,使得用戶難以看出。該色彩噪聲降低處理并不限于色彩 噪聲為紅色或接近紅色的顏色的情況,在色彩噪聲為綠色或接近綠色的顏色的情況下也有 效,在色彩噪聲為藍(lán)色或接近藍(lán)色的顏色的情況下也有效。
[0371] 作為色彩噪聲降低處理的一種類型,降噪處理部3160進(jìn)行色彩增益降低處理。
[0372] 在后述的強(qiáng)度決定單元即噪聲量計(jì)算部3150應(yīng)用強(qiáng)度較強(qiáng)的色彩噪聲降低處理 的情況下,對(duì)降噪處理部3160進(jìn)行控制以大幅降低上述色彩增益即可。反之,在噪聲量計(jì) 算部3150應(yīng)用強(qiáng)度較弱的色彩噪聲降低處理的情況下,對(duì)降噪處理部3160進(jìn)行控制以小 幅度地降低上述色彩增益即可。
[0373] (蚊式噪聲降低處理)
[0374] 如上所述,作為色彩噪聲降低處理的一種類型,降噪處理部3160進(jìn)行蚊式噪聲降 低處理。此處,蚊式噪聲具有易于在對(duì)象幀內(nèi)亮度或者顏色大幅變化的邊緣區(qū)域中產(chǎn)生的 趨勢(shì)。參照?qǐng)D14(a),對(duì)蚊式噪聲的概要進(jìn)行說(shuō)明。圖14(a)中,區(qū)域B表示亮度較低的區(qū) 域,區(qū)域C表示亮度較高的區(qū)域。在區(qū)域B及區(qū)域C的邊界附近,亮度大幅變化,因此,易于 產(chǎn)生蚊式噪聲。區(qū)域A表示產(chǎn)生蚊式噪聲的區(qū)域。本來(lái)應(yīng)該是與區(qū)域B同樣亮度較低的區(qū) 域,但由于產(chǎn)生蚊式噪聲,區(qū)域A的亮度比區(qū)域B高,比區(qū)域C低。
[0375] 關(guān)于蚊式噪聲降低處理,如后所述有3D蚊式噪聲降低處理和2D蚊式噪聲降低處 理。
[0376] (塊噪聲降低處理)
[0377] 塊噪聲一般是在以高壓縮率對(duì)視頻進(jìn)行編碼時(shí)產(chǎn)生的矩形的噪聲。該噪聲的大小 與編碼過(guò)程中的塊大小相同,因此,稱為塊噪聲。關(guān)于塊噪聲降低處理,如后所述有3D塊噪 聲降低處理和2D塊噪聲降低處理。
[0378] (3D噪聲降低處理)
[0379] 此處,3D塊噪聲降低處理及3D蚊式噪聲降低處理是參照對(duì)象幀和一個(gè)或多個(gè)其 他幀來(lái)進(jìn)行的。以下,為了方便,有時(shí)也將3D塊噪聲降低處理及3D蚊式噪聲降低處理稱為 3D噪聲降低處理。
[0380] 具體而言,如圖8 (a)所示,3D噪聲降低處理通過(guò)對(duì)每一像素求得包含噪聲的對(duì)象 幀中的對(duì)象區(qū)域、和以對(duì)象幀為起點(diǎn)在時(shí)間上位于前后的一個(gè)或多個(gè)參照幀中的對(duì)象區(qū)域 的平均,從而生成降噪后的圖像。
[0381] 此處,在應(yīng)用更強(qiáng)的3D噪聲降低處理的情況下,增多參照幀的個(gè)數(shù),在應(yīng)用更弱 的3D噪聲降低處理的情況下,減少參照幀的個(gè)數(shù)。
[0382] 通過(guò)增多參照幀的個(gè)數(shù),降噪效果變大,但對(duì)于動(dòng)作劇烈的場(chǎng)景,也有容易發(fā)生殘 像的負(fù)面效應(yīng)。通過(guò)減少參照幀的個(gè)數(shù),從而即使是對(duì)于動(dòng)作劇烈的場(chǎng)景,也不易發(fā)生殘 像,但也有降噪效果變小的負(fù)面效應(yīng)。
[0383] 另外,3D噪聲降低處理中的上述平均處理也可以利用設(shè)定成使得降噪后的圖像具 有更高畫質(zhì)的權(quán)重系數(shù)。
[0384] 此外,3D降噪處理也可以將對(duì)象幀中的對(duì)象區(qū)域、與以對(duì)象幀為起點(diǎn)在時(shí)間上位 于前后的一個(gè)或多個(gè)參照幀中的對(duì)象區(qū)域進(jìn)行比較,將瞬間變化的部分判定為噪聲,降低 該噪聲。
[0385] (2D噪聲降低處理)
[0386] 另一方面,2D塊噪聲降低處理及2D蚊式噪聲降低處理是參照對(duì)象幀中的對(duì)象像 素、和該對(duì)象幀中設(shè)定在該對(duì)象像素周邊的參照區(qū)域所包含的參照像素來(lái)進(jìn)行。以下,為了 方便,有時(shí)也將2D塊噪聲降低處理及2D蚊式噪聲降低處理稱為2D噪聲降低處理。
[0387] 具體而言,如圖8(b)所示,2D噪聲降低處理通過(guò)對(duì)對(duì)象幀中的對(duì)象像素的像素 值、和該對(duì)象幀中設(shè)定在該對(duì)象像素周邊的參照區(qū)域所包含的參照像素的像素值求平均, 從而生成降噪后的圖像。
[0388] 此處,在應(yīng)用更強(qiáng)的2D噪聲降低處理的情況下,將參照區(qū)域設(shè)定得較大,在應(yīng)用 更弱的2D噪聲降低處理的情況下,將參照區(qū)域設(shè)定得較小。
[0389] 通過(guò)增大參照區(qū)域,降噪效果增大,但在產(chǎn)生噪聲的區(qū)域以外的區(qū)域也有容易產(chǎn) 生模糊的負(fù)面效應(yīng)。通過(guò)減小參照區(qū)域,不易產(chǎn)生模糊,但也有降噪效果變小的負(fù)面效應(yīng)。 此外,在應(yīng)用2D蚊式噪聲降低處理的情況下,有時(shí)如圖14 (b)所示,作為蚊式噪聲的區(qū)域A 與亮度較高的區(qū)域C相近。在這種情況下,通過(guò)如圖14(b)所示那樣設(shè)定參照區(qū)域,從而能 防止參照區(qū)域中包含亮度較高的區(qū)域C。通過(guò)像上述那樣設(shè)定參照區(qū)域,從而能更有效地執(zhí) 行蚊式噪聲降低處理。
[0390] 另外,2D噪聲降低處理中的上述平均處理也可以利用設(shè)定成使得降噪后的圖像具 有更高畫質(zhì)的權(quán)重系數(shù)。
[0391] 此外,2D噪聲降低處理也可以將對(duì)象幀中的對(duì)象像素、與該對(duì)象幀中設(shè)定在該對(duì) 象像素周邊的參照區(qū)域所包含的參照像素進(jìn)行比較,在對(duì)象像素的顏色或亮度與參照像素 的顏色或亮度大為不同的情況下,判斷為該對(duì)象像素產(chǎn)生了噪聲,降低該噪聲。
[0392] (噪聲量計(jì)算部3150)
[0393] 接著,對(duì)既是降噪處理選擇單元、也是強(qiáng)度決定單元的噪聲量計(jì)算部3150進(jìn)行說(shuō) 明。本實(shí)施方式的噪聲量計(jì)算部3150利用量化參數(shù)獲取部130獲取的量化代碼、彩度判別 部3200判別出的與原色像素相關(guān)的信息及存儲(chǔ)部140所存放的多個(gè)閾值,推定該視頻中的 噪聲種類及噪聲量。噪聲量計(jì)算部3150在推定噪聲種類及噪聲量時(shí),除了判別量化代碼的 閾值即Qth以外,還利用判別對(duì)象幀所包含的原色像素的個(gè)數(shù)的閾值即Nth、及判別原色像 素形成的面積所包含的原色像素的數(shù)量的閾值即Dth。
[0394] 此外,噪聲量計(jì)算部3150基于所推定的噪聲種類及噪聲量,變更降噪處理部3160 的降噪處理種類及強(qiáng)度。
[0395] (色彩噪聲的判別)
[0396] 以下說(shuō)明噪聲量計(jì)算部3150所執(zhí)行的確定色彩噪聲的處理。
[0397] 噪聲量計(jì)算部3150判別各原色像素形成的面積大小與規(guī)定閾值即Dth相比是大 還是小。原色像素連續(xù)形成的區(qū)域所具有的大小較大的情況下,該區(qū)域?yàn)樽帜换蛴?jì)算機(jī)圖 形(CG)等人為嵌入到視頻中的圖案的可能性較高。因而,噪聲量計(jì)算部3150將原色像素連 續(xù)形成的區(qū)域中大小較大的區(qū)域判別為不是色彩噪聲。另一方面,原色像素連續(xù)形成的區(qū) 域所具有的大小較小的情況下,該區(qū)域不是人為嵌入的圖案而是色彩噪聲的可能性較高。 因而,噪聲量計(jì)算部3150將原色像素連續(xù)形成的區(qū)域中大小較小的區(qū)域判別為是色彩噪 聲。
[0398] 具體而言,噪聲量計(jì)算部3150確定彼此相鄰的原色像素所形成的面積,將該面積 所包含的原色像素的數(shù)量作為Num來(lái)導(dǎo)出。該Num也可作為是表示彼此相鄰的原色像素所 形成的面積的參數(shù)來(lái)獲得。之后,噪聲量計(jì)算部3150將Num與Dth進(jìn)行比較,在Num > Dth 的情況下,判別為原色像素所形成的面積較大,在Num < Dth的情況下,判別為原色像素所 形成的面積較小。此外,對(duì)規(guī)定閾值Dth并無(wú)限定,可由制造者決定為任意值。例如,可以 為 Dth = 4。圖19所示的區(qū)域X及區(qū)域Y表示原色像素所形成的面積。區(qū)域X中,例如若 Num = 4,則噪聲量計(jì)算部3150將區(qū)域X判別為是色彩噪聲。另一方面,區(qū)域Y中,例如若 Num = 200,則噪聲量計(jì)算部3150將區(qū)域Y判別為不是色彩噪聲。
[0399] 另外,此處,示出了利用原色像素形成的面積所包含的原色像素的數(shù)量來(lái)判別該 面積是大還是小的示例。然而,噪聲量計(jì)算部3150也可通過(guò)將面積與判別的規(guī)定閾值進(jìn)行 比較來(lái)判別原色像素形成的面積是大還是小。此外,對(duì)面積的導(dǎo)出方法并無(wú)限定,也可采用 現(xiàn)有已知的方法。
[0400] 此外,噪聲量計(jì)算部3150基于從彩度判別部3200提供的信息,將對(duì)象幀所包含的 原色像素的數(shù)量作為Nf來(lái)導(dǎo)出。噪聲量計(jì)算部3150將Nf與規(guī)定閾值Nth進(jìn)行比較,在Nf > Nth的情況下,判別為該對(duì)象幀所包含的原色像素較多。另一方面,在Nf彡Nth的情況 下,判別為該對(duì)象幀所包含的原色像素較少。此外,對(duì)規(guī)定閾值Nth并無(wú)限定,可由制造者 決定為任意值。
[0401] 以下示出噪聲量計(jì)算部3150所執(zhí)行的處理的一個(gè)示例。
[0402] (步驟 S1101)
[0403] 噪聲量計(jì)算部3150判別與原色像素最相鄰的像素是否為原色像素。
[0404] (步驟 S1102)
[0405] 在上述最相鄰的像素為原色像素的情況下,噪聲量計(jì)算部3150判別進(jìn)一步與上 述最相鄰的像素相鄰的像素是否為原色像素。這樣對(duì)與原色像素相鄰的各像素逐次判別是 否為原色像素,噪聲量計(jì)算部3150確定原色像素所形成的面積。
[0406] (步驟 S1103)
[0407] 之后,噪聲量計(jì)算部3150導(dǎo)出該面積中包含的原色像素的數(shù)量Num。
[0408] (步驟 S1104)
[0409] 噪聲量計(jì)算部3150對(duì)于各原色像素連續(xù)形成的各區(qū)域,比較Num及Nth的大小 關(guān)系。對(duì)于某一區(qū)域,若比較Num及Nth的大小關(guān)系的結(jié)果為Num < Dth,則噪聲量計(jì)算部 3150將該區(qū)域判別為大小較小,即為色彩噪聲。另一方面,若Num > Dth,則將該區(qū)域判別 為大小較大,即不是色彩噪聲。
[0410] (步驟 S1105)
[0411] 噪聲量計(jì)算部將對(duì)象幀所包含的原色像素的數(shù)量Nf與規(guī)定閾值Nth進(jìn)行比較。在 Nf > Nth的情況下,判別為該對(duì)象幀所包含的原色像素較多。另一方面,在Nf彡Nth的情 況下,判別為該對(duì)象幀所包含的原色像素較少。
[0412] 另外,上述處理中的Dth及Nth可由制造者任意決定。制造者通過(guò)將Dth設(shè)定得 較小,使得噪聲量計(jì)算部3150將原色像素所形成的面積判別為是色彩噪聲的判別基準(zhǔn)變 嚴(yán)格。此外,制造者通過(guò)將Nth設(shè)定得較小,使得噪聲量計(jì)算部3150將區(qū)域所具有的大小 判別為大小較小時(shí)的判別基準(zhǔn)變嚴(yán)格。視頻處理裝置3100的制造階段中,上述規(guī)定比例例 如存儲(chǔ)于存儲(chǔ)部140中。噪聲量計(jì)算部3150通過(guò)參照存儲(chǔ)部140來(lái)獲取上述規(guī)定比例即 可。
[0413] (噪聲種類及噪聲量)
[0414] 圖7是表示對(duì)于各像素的量化代碼的一個(gè)示例的圖。橫軸表示對(duì)象幀所包含的各 像素(更具體而言,為對(duì)各像素附加的像素編號(hào)),縱軸表示對(duì)各像素的量化代碼的值的示 例。
[0415] 噪聲量計(jì)算部3150計(jì)算對(duì)象巾貞中量化代碼超過(guò)規(guī)定Qth(圖7的示例中,Qth = 10)的像素的數(shù)量相對(duì)于該對(duì)象幀中的總像素?cái)?shù)的比例。
[0416] 基于色彩噪聲的判別結(jié)果及量化代碼超過(guò)Qth的像素相對(duì)于總像素?cái)?shù)的比例,噪 聲量計(jì)算部3150變更降噪處理部3160應(yīng)用于對(duì)象幀的降噪處理的種類及其強(qiáng)度。
[0417] 圖20是表示對(duì)象幀所包含的原色像素的數(shù)量的多少、彼此相鄰的原色像素所形 成的面積的大小、超過(guò)閾值的量化代碼的比例、及由噪聲量計(jì)算部3150設(shè)定的各降噪處理 的強(qiáng)度之間的關(guān)系的一個(gè)示例的表。圖20中,"BNR"指塊噪聲降低處理,"MNR"指蚊式噪聲 降低處理,"SHARPNESS"指銳度處理,"COLOR"指色彩增益降低處理。本實(shí)施方式中,色彩噪 聲降低處理包含蚊式噪聲降低處理、及將判別為色彩噪聲的原色的增益降低的色彩增益降 低處理。
[0418] 另外,色彩噪聲降低處理的一個(gè)方式即色彩增益降低處理中,"XI"意味著對(duì)從解 碼處理部120提供的視頻信號(hào)乘以1。即,"XI"意味著不變更色彩增益,且意味著色彩噪 聲降低處理的強(qiáng)度非常小,或者不執(zhí)行色彩噪聲降低處理。另一方面,色彩噪聲降低處理 中,例如" X 0. 7"意味著對(duì)從解碼處理部120提供的視頻信號(hào)乘以0. 7。即,色彩增益變成 0. 7倍,相應(yīng)的像素所顯示的顏色從接近原色的顏色朝靠近無(wú)彩色的方向轉(zhuǎn)換。這樣,色彩 噪聲降低處理中的乘法運(yùn)算的數(shù)值的值越小,意味著色彩噪聲降低處理的強(qiáng)度越強(qiáng)。
[0419] 此外,如圖20所示,噪聲量計(jì)算部3150在判別為具有超過(guò)Qth的量化代碼的塊越 多時(shí),越增強(qiáng)蚊式噪聲降低處理及塊噪聲降低處理的強(qiáng)度。
[0420] 此外,噪聲量計(jì)算部3150也可以對(duì)降噪處理部3160進(jìn)行指示,以省略設(shè)定為"弱" 的降噪處理。
[0421] 如圖20的第2行所示,對(duì)象幀所包含的原色像素的數(shù)量較多、原色像素連續(xù)形成 的區(qū)域的面積較大的情況下,噪聲量計(jì)算部3150推定為對(duì)象幀中人為嵌入到視頻中的圖 案(字幕及CG)較多。因而,不管量化代碼超過(guò)Qth的像素相對(duì)于總像素?cái)?shù)的比例如何,噪 聲量計(jì)算部3150都使色彩噪聲降低處理的強(qiáng)度非常弱或省略色彩噪聲降低處理。即,噪聲 量計(jì)算部3150將" X 1"提供給降噪處理部3160。
[0422] 此外,如圖20的第1行所示,對(duì)象幀所包含的原色像素的數(shù)量較多、原色像素連續(xù) 形成的區(qū)域的面積較小的情況下,噪聲量計(jì)算部3150推定為對(duì)象幀中包含較多的色彩噪 聲。因而,噪聲量計(jì)算部3150根據(jù)量化代碼超過(guò)Qth的像素相對(duì)于總像素?cái)?shù)的比例,將色 彩噪聲降低處理的強(qiáng)度設(shè)定為" X Γ'、" X0. 9"及" X0. 7"中的某一值,并將其提供給降噪 處理部3160。
[0423] 此外,如圖20的第3行所示,對(duì)象幀所包含的原色像素的數(shù)量較少、原色像素連續(xù) 形成的區(qū)域的面積較小的情況下,噪聲量計(jì)算部3150推定為對(duì)象幀中包含零散的色彩噪 聲。因而,噪聲量計(jì)算部3150根據(jù)量化代碼超過(guò)Qth的像素相對(duì)于總像素?cái)?shù)的比例,將色 彩噪聲降低處理的強(qiáng)度設(shè)定為" X Γ'、" X0. 9"及" X0. 8"中的某一值,并將其提供給降噪 處理部3160。
[0424] 如上所述,由于各色彩噪聲所形成的面積像上述那樣較小,因此,通過(guò)降低色彩增 益,從而即使原色被轉(zhuǎn)換為接近無(wú)彩色的顏色,影響顯示品質(zhì)的可能性也極低。因而,本實(shí) 施方式的色彩噪聲降低處理能降低色彩噪聲而不會(huì)使用戶有異樣感。
[0425] 此外,噪聲量計(jì)算部3150也可構(gòu)成為識(shí)別在對(duì)象幀上設(shè)定的對(duì)象區(qū)域中的噪聲 產(chǎn)生模式,并基于識(shí)別結(jié)果,利用降噪處理部3160,變更應(yīng)用于該對(duì)象區(qū)域的降噪處理的種 類及強(qiáng)度。
[0426] 例如,噪聲量計(jì)算部3150可構(gòu)成為檢測(cè)各塊中的平均顏色、亮度,在顏色、亮度以 塊為單位進(jìn)行變化的情況下,推定為該對(duì)象幀中存在塊噪聲,增強(qiáng)應(yīng)用于塊邊界的塊噪聲 降低處理的強(qiáng)度。
[0427] 此外,噪聲量計(jì)算部3150也可構(gòu)成為在顏色、亮度大幅變化的區(qū)域(例如圖像邊 緣)附近檢測(cè)出噪聲的情況下,將該噪聲判定為蚊式噪聲,通過(guò)對(duì)不包含上述邊緣的區(qū)域 中的像素值求平均,從而降低該蚊式噪聲。通過(guò)采用這種結(jié)構(gòu),能進(jìn)行更精細(xì)的降噪處理。
[0428] 另外,上述各閾值可決定為使得視頻處理裝置3100輸出的視頻具有更高畫質(zhì)。
[0429] 〈實(shí)施方式14>
[0430] 以下,參照?qǐng)D7、8、10?12、21及22,對(duì)基于量化代碼和運(yùn)動(dòng)矢量信息來(lái)變更與降 噪處理相關(guān)的降噪?yún)?shù)的結(jié)構(gòu)進(jìn)行說(shuō)明。
[0431] 圖21是表示本實(shí)施方式的視頻處理裝置4100的結(jié)構(gòu)的框圖。如圖21所示,本實(shí) 施方式的視頻處理裝置4100具有與圖1所示的結(jié)構(gòu)大致相同的結(jié)構(gòu),但不同點(diǎn)在于,噪聲 量計(jì)算部4150從解碼處理部120獲取運(yùn)動(dòng)矢量信息(圖21中標(biāo)記為"MVI ")。
[0432] 另外,本實(shí)施方式的視頻處理裝置4100的結(jié)構(gòu)并不限于圖21所示的結(jié)構(gòu),也可采 用在圖3及圖4分別示出的結(jié)構(gòu)中使噪聲量計(jì)算部4150從解碼處理部120獲取運(yùn)動(dòng)矢量 信息MVI的結(jié)構(gòu)。
[0433] 〈運(yùn)動(dòng)矢量信息〉
[0434] 運(yùn)動(dòng)矢量信息由解碼處理部120從視頻信號(hào)解碼得到,并分配給各塊。運(yùn)動(dòng)矢量 信息中包含有各塊的運(yùn)動(dòng)矢量的各分量。
[0435] 圖22表示對(duì)在對(duì)象幀中包含向右側(cè)運(yùn)動(dòng)的對(duì)象的塊分配的運(yùn)動(dòng)矢量。
[0436] (降噪處理部416〇)
[0437] 降噪處理部4160基于來(lái)自后述噪聲量計(jì)算部4150的指示,將以下所示的多個(gè)降 噪處理中的至少任一種應(yīng)用于對(duì)象幀。此外,降噪處理部4160基于來(lái)自噪聲量計(jì)算部4150 的指示,切換應(yīng)用于對(duì)象幀的降噪處理的強(qiáng)度。
[0438] · 3D塊噪聲降低處理
[0439] · 2D塊噪聲降低處理
[0440] · 3D蚊式噪聲降低處理
[0441] · 2D蚊式噪聲降低處理
[0442] 此處,3D塊噪聲降低處理及3D蚊式噪聲降低處理是參照對(duì)象幀和一個(gè)或多個(gè)其 他幀來(lái)進(jìn)行的。以下,為了方便,有時(shí)也將3D塊噪聲降低處理及3D蚊式噪聲降低處理稱為 3D噪聲降低處理。
[0443] 具體而言,如圖8(a)所示,3D噪聲降低處理通過(guò)對(duì)每一像素求得對(duì)象幀中的對(duì)象 區(qū)域、和以對(duì)象幀為起點(diǎn)在時(shí)間上位于前后的一個(gè)或多個(gè)參照幀中的對(duì)象區(qū)域的平均,從 而生成降噪后的圖像。
[0444] 此處,在應(yīng)用更強(qiáng)的3D噪聲降低處理的情況下,增多參照幀的個(gè)數(shù),在應(yīng)用更弱 的3D噪聲降低處理的情況下,減少參照幀的個(gè)數(shù)。
[0445] 通過(guò)增多參照幀的個(gè)數(shù),降噪效果變大,但對(duì)于動(dòng)作劇烈的場(chǎng)景,也有容易發(fā)生殘 像的負(fù)面效應(yīng)。通過(guò)減少參照幀的個(gè)數(shù),從而即使是對(duì)于動(dòng)作劇烈的場(chǎng)景,也不易發(fā)生殘 像,但也有降噪效果變小的負(fù)面效應(yīng)。
[0446] 另外,3D噪聲降低處理中的上述平均處理也可以利用設(shè)定成使得降噪后的圖像具 有更高畫質(zhì)的權(quán)重系數(shù)。
[0447] 此外,3D降噪處理也可以將對(duì)象幀中的對(duì)象區(qū)域、與以對(duì)象幀為起點(diǎn)在時(shí)間上位 于前后的一個(gè)或多個(gè)參照幀中的對(duì)象區(qū)域進(jìn)行比較,將瞬間變化的部分判定為噪聲,降低 該噪聲。
[0448] 另一方面,2D塊噪聲降低處理及2D蚊式噪聲降低處理是參照對(duì)象幀中的對(duì)象像 素、和該對(duì)象幀中設(shè)定在該對(duì)象像素周邊的參照區(qū)域所包含的參照像素來(lái)進(jìn)行。以下,為了 方便,有時(shí)也將2D塊噪聲降低處理及2D蚊式噪聲降低處理稱為2D噪聲降低處理。
[0449] 具體而言,如圖8(b)所示,2D噪聲降低處理通過(guò)對(duì)對(duì)象幀中的對(duì)象像素的像素 值、和該對(duì)象幀中設(shè)定在該對(duì)象像素周邊的參照區(qū)域所包含的參照像素的像素值求平均, 從而生成降噪后的圖像。
[0450] 此處,在應(yīng)用更強(qiáng)的2D噪聲降低處理的情況下,將參照區(qū)域設(shè)定得較大,在應(yīng)用 更弱的2D噪聲降低處理的情況下,將參照區(qū)域設(shè)定得較小。
[0451] 通過(guò)增大參照區(qū)域,降噪效果增大,但在產(chǎn)生噪聲的區(qū)域以外的區(qū)域也有容易產(chǎn) 生模糊的負(fù)面效應(yīng)。通過(guò)減小參照區(qū)域,不易產(chǎn)生模糊,但也有降噪效果變小的負(fù)面效應(yīng)。
[0452] 另外,2D噪聲降低處理中的上述平均處理也可以利用設(shè)定成使得降噪后的圖像具 有更高畫質(zhì)的權(quán)重系數(shù)。
[0453] 此外,2D噪聲降低處理也可以將對(duì)象幀中的對(duì)象像素、與該對(duì)象幀中設(shè)定在該對(duì) 象像素周邊的參照區(qū)域所包含的參照像素進(jìn)行比較,在對(duì)象像素的顏色或亮度與參照像素 的顏色或亮度大為不同的情況下,判斷為該對(duì)象像素產(chǎn)生了噪聲,降低該噪聲。
[0454] (噪聲量計(jì)算部4150)
[0455] 接著,對(duì)本實(shí)施方式的噪聲量計(jì)算部4150進(jìn)行說(shuō)明。本實(shí)施方式的噪聲量計(jì)算部 4150是設(shè)定單元。噪聲量計(jì)算部4150利用量化參數(shù)獲取部130獲取的量化代碼、運(yùn)動(dòng)矢量 信息及存儲(chǔ)部140所存放的閾值,推定該視頻中的噪聲量。此外,噪聲量計(jì)算部4150基于 所推定的噪聲量,變更降噪處理部4160的降噪處理種類及強(qiáng)度。
[0456] 噪聲量計(jì)算部4150對(duì)于構(gòu)成對(duì)象幀的各塊,將分配給該塊的運(yùn)動(dòng)矢量的大小與 規(guī)定閾值進(jìn)行比較,在該運(yùn)動(dòng)矢量大于該閾值的情況下,將該塊判定為"有動(dòng)作的塊",在該 運(yùn)動(dòng)矢量為該閾值以下的情況下,將該塊判定為"無(wú)動(dòng)作的塊"。
[0457] 圖7是表示對(duì)于各像素的量化代碼的一個(gè)示例的圖。橫軸表示對(duì)象幀所包含的各 像素(更具體而言,為對(duì)各像素附加的像素編號(hào)),縱軸表示對(duì)各像素的量化代碼的值的示 例。
[0458] 噪聲量計(jì)算部4150計(jì)算對(duì)象幀中量化代碼超過(guò)規(guī)定閾值(圖7的示例中,閾值= 10)的像素的數(shù)量相對(duì)于該對(duì)象幀中的總像素?cái)?shù)的比例。
[0459] 此外,噪聲量計(jì)算部4150計(jì)算對(duì)象幀中判別為"有動(dòng)作"的塊的數(shù)量相對(duì)于該對(duì) 象幀中的總塊數(shù)的比例。
[0460] 基于上述計(jì)算結(jié)果,噪聲量計(jì)算部4150變更降噪處理部4160應(yīng)用于對(duì)象幀的降 噪處理的種類及其強(qiáng)度。
[0461] 圖10是表示判別為"有動(dòng)作"的塊比例、超過(guò)閾值的量化代碼的比例及由噪聲量 計(jì)算部4150設(shè)定的各降噪處理的強(qiáng)度之間的關(guān)系的一個(gè)示例的表。圖10中,"BNR"指塊 噪聲降低處理,"MNR"指蚊式噪聲降低處理。
[0462] 如圖10所示,噪聲量計(jì)算部4150在判別為有動(dòng)作的塊越多時(shí),越增強(qiáng)塊噪聲降低 處理的強(qiáng)度。
[0463] 此外,如圖10所示,噪聲量計(jì)算部4150在判別為具有超過(guò)規(guī)定閾值的量化代碼的 塊越多時(shí),越增強(qiáng)蚊式噪聲降低處理的強(qiáng)度。
[0464] 此外,噪聲量計(jì)算部4150也可以對(duì)降噪處理部4160進(jìn)行指示,以省略設(shè)定為"弱" 的降噪處理。
[0465] 此外,噪聲量計(jì)算部4150可構(gòu)成為例如在判別為"有動(dòng)作"的塊的比例更小時(shí),選 擇2D噪聲降低處理,在判別為"有動(dòng)作"的塊的比例更大時(shí),選擇3D噪聲降低處理。
[0466] 此外,噪聲量計(jì)算部4150可構(gòu)成為在利用3D噪聲降低處理的情況下,在判別為 "有動(dòng)作"的塊的比例更大時(shí),減小參照的幀的個(gè)數(shù),在判別為"有動(dòng)作"的塊的比例更小時(shí), 增多參照的幀的個(gè)數(shù)。
[0467] 此外,噪聲量計(jì)算部4150也可構(gòu)成為識(shí)別在對(duì)象幀上設(shè)定的對(duì)象區(qū)域中的噪聲 產(chǎn)生模式,并基于識(shí)別結(jié)果,利用降噪處理部4160,變更應(yīng)用于該對(duì)象區(qū)域的降噪處理的種 類及強(qiáng)度。
[0468] 例如,噪聲量計(jì)算部4150可構(gòu)成為檢測(cè)各塊中的平均顏色、亮度,在顏色、亮度以 塊為單位進(jìn)行變化的情況下,推定為該對(duì)象幀中存在塊噪聲,增強(qiáng)應(yīng)用于塊邊界的塊噪聲 降低處理的強(qiáng)度。
[0469] 此外,噪聲量計(jì)算部4150也可構(gòu)成為在顏色、亮度大幅變化的區(qū)域(例如圖像邊 緣)附近檢測(cè)出噪聲的情況下,將該噪聲判定為蚊式噪聲,通過(guò)對(duì)不包含上述邊緣的區(qū)域 中的像素值求平均,從而降低該蚊式噪聲。
[0470] 通過(guò)采用這種結(jié)構(gòu),能進(jìn)行更精細(xì)的降噪處理。
[0471] 另外,上述各閾值可決定為使得視頻處理裝置4100輸出的視頻具有更高畫質(zhì)。
[0472] 〈實(shí)施方式15>
[0473] 參照?qǐng)D11?圖12,說(shuō)明實(shí)施方式14的變形例。
[0474] 本變形例的噪聲量計(jì)算部4150在上述結(jié)構(gòu)的基礎(chǔ)上,構(gòu)成為在判別為有動(dòng)作的 塊越多時(shí),越減小與量化代碼相關(guān)的閾值。
[0475] 圖11是將對(duì)各像素的量化代碼的一個(gè)示例與由本變形例的噪聲量計(jì)算部4150設(shè) 定的閾值一起示出的圖。
[0476] 圖12中,噪聲量計(jì)算部4150判別為有動(dòng)作的塊越多時(shí),將與量化代碼相關(guān)的閾值 設(shè)定得越小。
[0477] 在大多編碼方式中,參考所需的壓縮率等,由編碼側(cè)設(shè)定量化代碼。例如,在原視 頻中包含有"發(fā)白噪聲"的情況下,即使降低壓縮率,即將量化代碼設(shè)定得較小,有時(shí)視頻本 身也會(huì)包含較多噪聲。
[0478] 另一方面,這種視頻有被動(dòng)作判別判定為"有動(dòng)作"的塊較多的趨勢(shì)。
[0479] 在本變形例中,在"有動(dòng)作"的塊較多時(shí),將與量化代碼相關(guān)的閾值設(shè)定得較小,因 此,能適當(dāng)降低上述"發(fā)白噪聲"。
[0480] 〈實(shí)施方式16>
[0481] 以上,設(shè)噪聲量計(jì)算部4150從解碼處理部120獲取運(yùn)動(dòng)矢量信息來(lái)進(jìn)行說(shuō)明,但 實(shí)施方式14并不限于此。
[0482] 例如,視頻處理裝置4100在與用于進(jìn)行倍速驅(qū)動(dòng)的幀率調(diào)整單元(FRC :Frame Rate Controller) -起使用的結(jié)構(gòu)中,也可構(gòu)成為從FRC獲取運(yùn)動(dòng)矢量信息。作為這種結(jié) 構(gòu)的具體例,例如可舉出進(jìn)行2倍速驅(qū)動(dòng)的電視接收機(jī)等。
[0483] FRC為了生成補(bǔ)全幀而對(duì)各塊計(jì)算運(yùn)動(dòng)矢量,因此,噪聲量計(jì)算部4150可從FRC獲 取該運(yùn)動(dòng)矢量,進(jìn)行上述降噪處理。
[0484] 〈實(shí)施方式17>
[0485] 以下,參照?qǐng)D7、23及24,對(duì)如下結(jié)構(gòu)進(jìn)行說(shuō)明:S卩,獲取構(gòu)成對(duì)象幀的各塊的量化 代碼值,基于各自的上述量化代碼值計(jì)算上述對(duì)象幀中的降噪?yún)?shù),將規(guī)定范圍內(nèi)的降噪 處理強(qiáng)度設(shè)定成與規(guī)定范圍內(nèi)的上述降噪?yún)?shù)具有正相關(guān)性。另外,以下,將降噪?yún)?shù)也表 述為NR判別值,將降噪處理強(qiáng)度也表述為NR增益。
[0486] 圖23是表示本實(shí)施方式的視頻處理裝置5100的結(jié)構(gòu)的框圖。如圖23所示,本實(shí) 施方式的視頻處理裝置5100與實(shí)施方式1的視頻處理裝置的不同點(diǎn)在于具有NR判別值計(jì) 算部5200。
[0487] 圖7是表示對(duì)于各像素的量化代碼的一個(gè)示例的圖。橫軸表示對(duì)象幀所包含的各 像素(更具體而言,為對(duì)各像素附加的像素編號(hào)),縱軸表示對(duì)各像素的量化代碼的值的示 例。
[0488] 圖24是用于說(shuō)明視頻處理裝置5100所執(zhí)行的降噪處理的圖。圖24(a)表示構(gòu)成 對(duì)象幀的各塊的量化代碼值的直方圖。圖24(b)表示降噪?yún)?shù)與降噪處理強(qiáng)度之間的相關(guān) 性。
[0489] (NR判別值計(jì)算部5200)
[0490] 圖23所示的NR判別值計(jì)算部5200基于向?qū)ο髱兴母鲏K分配的各量化 代碼值,計(jì)算對(duì)象幀中的NR判別值。
[0491] 更具體而言,NR判別值計(jì)算部5200通過(guò)求出對(duì)象幀所包含的某一量化代碼值的、 以具有該量化代碼值的塊的數(shù)量為權(quán)重的加權(quán)求和,來(lái)計(jì)算對(duì)象幀中的NR判別值。本實(shí)施 方式中,設(shè)可能的量化代碼值為〇?31的整數(shù)來(lái)進(jìn)行說(shuō)明。用數(shù)學(xué)式來(lái)呈現(xiàn)上述處理如下。
[0492] NRP= {BN(0) X0+BN(1) X1+BN(2) X2+···+ΒΝ(30) X30+BN(31) X31}/31 ···(!)
[0493] (1)式中,NRP表示NR判別值,BN (η)表示對(duì)象幀所包含的具有量化代碼值η的塊 的數(shù)量。即,(1)式的各項(xiàng)表示具有某一量化代碼值的塊的數(shù)量與該某一量化代碼值之積。 并且,通過(guò)求出關(guān)于各量化代碼值的和,從而NR判別值計(jì)算部5200計(jì)算對(duì)象幀中的NR判 別值。
[0494] 圖24(a)是表示該計(jì)數(shù)結(jié)果的概要的示意圖。因而,圖24(a)并非嚴(yán)格表示一個(gè)對(duì) 象幀中的量化代碼值的直方圖,而表示作為不同對(duì)象幀的視頻a及視頻b中的直方圖。具 體而言,構(gòu)成視頻a的所有塊具有11作為量化代碼值。另一方面,構(gòu)成視頻b的所有塊具 有31作為量化代碼值。
[0495] 若設(shè)對(duì)象幀由1920 X 1080像素構(gòu)成,所有的塊大小為16 X 16,則對(duì)象幀所包含的 塊數(shù)為8100個(gè)。因而,視頻a由量化代碼值為11的8100個(gè)塊構(gòu)成。另一方面,視頻b由 量化代碼值為31的8100個(gè)塊構(gòu)成。NR判別值計(jì)算部5200中,作為視頻a的NR判別值,計(jì) 算出8100X11/31 = 2874,作為視頻b的NR判別值,計(jì)算出8100X31/31 = 8100。
[0496] NR判別值計(jì)算部5200將這樣計(jì)算出的各對(duì)象幀中的NR判別值提供給噪聲量計(jì)算 部 5150。
[0497] (降噪處理部516〇)
[0498] 降噪處理部5160基于來(lái)自后述噪聲量計(jì)算部5150的指示,將以下所示的多個(gè)降 噪處理中的至少任一種應(yīng)用于對(duì)象幀。此外,降噪處理部5160基于來(lái)自噪聲量計(jì)算部5150 的指示,切換應(yīng)用于對(duì)象幀的降噪處理的強(qiáng)度。
[0499] · 3D塊噪聲降低處理
[0500] · 2D塊噪聲降低處理
[0501] · 3D蚊式噪聲降低處理
[0502] · 2D蚊式噪聲降低處理
[0503] 此處,3D塊噪聲降低處理及3D蚊式噪聲降低處理是參照對(duì)象幀和一個(gè)或多個(gè)其 他幀來(lái)進(jìn)行的。以下,為了方便,有時(shí)也將3D塊噪聲降低處理及3D蚊式噪聲降低處理稱為 3D噪聲降低處理。
[0504] 具體而言,3D噪聲降低處理通過(guò)對(duì)每一像素求得對(duì)象幀中的對(duì)象區(qū)域、和以對(duì)象 幀為起點(diǎn)在時(shí)間上位于前后的一個(gè)或多個(gè)參照幀中的對(duì)象區(qū)域的平均,從而生成降噪后的 圖像。
[0505] 此處,在應(yīng)用更強(qiáng)的3D噪聲降低處理的情況下,增多參照幀的個(gè)數(shù),在應(yīng)用更弱 的3D噪聲降低處理的情況下,減少參照幀的個(gè)數(shù)。
[0506] 通過(guò)增多參照幀的個(gè)數(shù),降噪效果變大,但對(duì)于動(dòng)作劇烈的場(chǎng)景,也有容易發(fā)生殘 像的負(fù)面效應(yīng)。通過(guò)減少參照幀的個(gè)數(shù),從而即使是對(duì)于動(dòng)作劇烈的場(chǎng)景,也不易發(fā)生殘 像,但也有降噪效果變小的負(fù)面效應(yīng)。
[0507] 另外,3D噪聲降低處理中的上述平均處理也可以利用設(shè)定成使得降噪后的圖像具 有更高畫質(zhì)的權(quán)重系數(shù)。
[0508] 此外,3D降噪處理也可以將對(duì)象幀中的對(duì)象區(qū)域、與以對(duì)象幀為起點(diǎn)在時(shí)間上位 于前后的一個(gè)或多個(gè)參照幀中的對(duì)象區(qū)域進(jìn)行比較,將瞬間變化的部分判定為噪聲,降低 該噪聲。
[0509] 另一方面,2D塊噪聲降低處理及2D蚊式噪聲降低處理是參照對(duì)象幀中的對(duì)象像 素、和該對(duì)象幀中設(shè)定在該對(duì)象像素周邊的參照區(qū)域所包含的參照像素來(lái)進(jìn)行。以下,為了 方便,有時(shí)也將2D塊噪聲降低處理及2D蚊式噪聲降低處理稱為2D噪聲降低處理。
[0510] 具體而言,2D噪聲降低處理通過(guò)對(duì)對(duì)象幀中的對(duì)象像素的像素值、和該對(duì)象幀中 設(shè)定在該對(duì)象像素周邊的參照區(qū)域所包含的參照像素的像素值求平均,從而生成降噪后的 圖像。
[0511] 此處,在應(yīng)用更強(qiáng)的2D噪聲降低處理的情況下,將參照區(qū)域設(shè)定得較大,在應(yīng)用 更弱的2D噪聲降低處理的情況下,將參照區(qū)域設(shè)定得較小。
[0512] 通過(guò)增大參照區(qū)域,降噪效果增大,但在產(chǎn)生噪聲的區(qū)域以外的區(qū)域也有容易產(chǎn) 生模糊的負(fù)面效應(yīng)。通過(guò)減小參照區(qū)域,不易產(chǎn)生模糊,但也有降噪效果變小的負(fù)面效應(yīng)。
[0513] 另外,2D噪聲降低處理中的上述平均處理也可以利用設(shè)定成使得降噪后的圖像具 有更高畫質(zhì)的權(quán)重系數(shù)。
[0514] 此外,2D噪聲降低處理也可以將對(duì)象幀中的對(duì)象像素、與該對(duì)象幀中設(shè)定在該對(duì) 象像素周邊的參照區(qū)域所包含的參照像素進(jìn)行比較,在對(duì)象像素的顏色或亮度與參照像素 的顏色或亮度大為不同的情況下,判斷為該對(duì)象像素產(chǎn)生了噪聲,降低該噪聲。
[0515] (噪聲量計(jì)算部5150)
[0516] 接著,對(duì)本實(shí)施方式的噪聲量計(jì)算部5150進(jìn)行說(shuō)明。本實(shí)施方式的噪聲量計(jì)算部 5150是設(shè)定單元。噪聲量計(jì)算部5150導(dǎo)出與由NR判別值計(jì)算部5200計(jì)算出的NR判別值 相應(yīng)的NR增益(降噪處理強(qiáng)度)。此外,噪聲量計(jì)算部5150基于所導(dǎo)出的NR增益,變更降 噪處理部5160的降噪處理種類及強(qiáng)度。
[0517] 圖24(b)是表示NR判別值與NR增益之間的相關(guān)性的圖。噪聲量計(jì)算部5150基 于該相關(guān)性,根據(jù)NR判別值導(dǎo)出對(duì)應(yīng)的NR增益。制造者可將表示NR增益的NR判別值的 函數(shù)作為該相關(guān)性存儲(chǔ)于存儲(chǔ)部140,也可將使各NR判別值與各NR增益進(jìn)行對(duì)應(yīng)的查找表 (LUT)作為該相關(guān)性存儲(chǔ)于存儲(chǔ)部140。該相關(guān)性并不限于上述函數(shù)及LUT,只要是將各NR 判別值與各NR增益進(jìn)行對(duì)應(yīng)的結(jié)構(gòu)即可。
[0518] 如圖24(b)所示,上述相關(guān)性確定為使得在NR判別值處于規(guī)定范圍(圖24(b)中, 2600?6270為止的范圍)內(nèi)的情況下,NR判別值與NR增益具有正相關(guān)性。圖24(a)中, 該正相關(guān)性為一次函數(shù)。另一方面,在NR判別值處于上述規(guī)定范圍外(圖24(b)中,0? 2600的范圍以及6270?8100的范圍)的情況下,NR增益不依賴于NR判別值。S卩,在NR 判別值為〇?2600的范圍內(nèi),NR增益始終為規(guī)定范圍中的下限值。此外,在NR判別值為 6270?8100的范圍內(nèi),NR增益始終為規(guī)定范圍中的上限值。
[0519] 本實(shí)施方式的規(guī)定范圍由構(gòu)成對(duì)象幀的所有塊具有量化代碼值10的情況和具有 量化代碼值24的情況來(lái)構(gòu)成。在上述所有塊具有量化代碼值10的情況下,NR判別值大約 為2600。另一方面,在上述所有塊具有量化代碼值24的情況下,NR判別值大約為6270。發(fā) 明人得到了如下見(jiàn)解:即,若量化代碼值為10以下,則隨著編碼及解碼而產(chǎn)生的視頻劣化 為用戶無(wú)法看見(jiàn)的程度。因而,本實(shí)施方式中,設(shè)NR判別值的規(guī)定范圍的下限為2600。此 夕卜,發(fā)明人得到了如下見(jiàn)解:即,若量化代碼值為24以上,則隨著編碼及解碼而產(chǎn)生的視頻 劣化變大,優(yōu)選盡可能執(zhí)行較強(qiáng)強(qiáng)度的降噪處理。因而,本實(shí)施方式中,設(shè)NR判別值的規(guī)定 范圍的上限為6270。另外,上述規(guī)定范圍并不限于上述范圍,制造者可根據(jù)所執(zhí)行的降噪處 理的方式等來(lái)適當(dāng)確定。
[0520] 噪聲量計(jì)算部5150根據(jù)由NR判別值計(jì)算部5200計(jì)算出的NR判別值,基于上述 相關(guān)性導(dǎo)出NR增益。上述相關(guān)性是在所有的NR判別值的所有范圍(0?8100的范圍)內(nèi) 連續(xù)的結(jié)構(gòu),從而噪聲量計(jì)算部5150能導(dǎo)出適于各NR判別值的NR增益。上述相關(guān)性為連 續(xù)結(jié)構(gòu),從而噪聲量計(jì)算部5150所計(jì)算出的NR增益不會(huì)以某一 NR判別值為邊界發(fā)生急劇 變化。因而,能執(zhí)行有效的降噪處理,而不會(huì)使收看視頻的用戶意識(shí)到降噪處理。
[0521] 另外,上述規(guī)定范圍內(nèi)的上述相關(guān)性并不限于一次函數(shù)。只要NR判別值與NR增 益具有正相關(guān)性,也可利用更高次的函數(shù)來(lái)構(gòu)成上述相關(guān)性。
[0522] 在基于構(gòu)成對(duì)象幀的塊所具有的量化代碼值是否大于規(guī)定的一個(gè)閾值來(lái)決定NR 增益的情況下,NR增益會(huì)以該規(guī)定閾值為邊界發(fā)生大幅變化。因而,降噪處理的強(qiáng)度會(huì)以該 規(guī)定閾值為邊界發(fā)生急劇變化,從而可能會(huì)使用戶有異樣感。本實(shí)施方式的噪聲量計(jì)算部 5150如上所述利用連續(xù)結(jié)構(gòu)的相關(guān)性來(lái)導(dǎo)出NR增益,因此,能進(jìn)行更為精細(xì)的降噪處理。
[0523] 基于這樣導(dǎo)出的NR增益,噪聲量計(jì)算部5150導(dǎo)出降噪處理部5160應(yīng)用于對(duì)象幀 的降噪處理的種類及其強(qiáng)度。作為降噪處理部5160應(yīng)用于對(duì)象幀的降噪處理,可使用現(xiàn)有 已知的降噪處理方法。例如,如上所述,可以是塊噪聲降低處理,也可以是蚊式噪聲降低處 理。此外,也可以將多種降噪處理進(jìn)行組合。
[0524] 例如,噪聲量計(jì)算部5150可構(gòu)成為檢測(cè)各塊中的平均顏色、亮度,在顏色、亮度以 塊為單位進(jìn)行變化的情況下,推定為該對(duì)象幀中存在塊噪聲,增強(qiáng)應(yīng)用于塊邊界的塊噪聲 降低處理的強(qiáng)度。
[0525] 此外,噪聲量計(jì)算部5150也可構(gòu)成為在顏色、亮度大幅變化的區(qū)域(例如圖像邊 緣)附近檢測(cè)出噪聲的情況下,將該噪聲判定為蚊式噪聲,通過(guò)對(duì)不包含上述邊緣的區(qū)域 中的像素值求平均,從而降低該蚊式噪聲。
[0526] 通過(guò)采用這種結(jié)構(gòu),能進(jìn)行更精細(xì)的降噪處理。
[0527] 另外,可預(yù)先決定上述各閾值,使得視頻處理裝置5100輸出的視頻具有更高畫 質(zhì)。
[0528] 〈實(shí)施方式18>
[0529] 參照?qǐng)D7、8、14及25?27,說(shuō)明如下視頻處理裝置6100,其包括:設(shè)定單元,其基 于構(gòu)成視頻數(shù)據(jù)中所包含的I圖像的各塊的量化代碼,來(lái)設(shè)定降噪?yún)?shù)的偏移量;變更單 元,其根據(jù)I圖像彼此的幀間隔即第1間隔,來(lái)變更上述偏移量;及降噪單元,其對(duì)上述視頻 數(shù)據(jù)實(shí)施降噪處理,該降噪處理利用了包含由上述變更單元變更后的偏移量的降噪?yún)?shù)。
[0530] 圖25是表示本實(shí)施方式的視頻處理裝置6100的結(jié)構(gòu)的框圖。圖25所示的視頻 處理裝置6100與圖1所示的視頻處理裝置相比,不同點(diǎn)在于包括偏移量計(jì)算部6200。
[0531] 此外,圖14是用于說(shuō)明蚊式噪聲的示意圖,圖8是用于說(shuō)明本實(shí)施方式的降噪處 理的一個(gè)方式即3D噪聲降低處理及2D噪聲降低處理的不意圖。
[0532] 圖7是用于說(shuō)明本實(shí)施方式的視頻處理裝置的圖,是表示構(gòu)成對(duì)象幀的各塊所具 有的量化代碼及閾值的一個(gè)示例的圖。
[0533] 圖26是用于說(shuō)明本發(fā)明一實(shí)施方式的視頻處理裝置的圖,是表示視頻數(shù)據(jù)所包 含的多個(gè)圖像、各圖像中的NR參數(shù)、偏移量及NR增益的圖。
[0534] 圖27是用于說(shuō)明本發(fā)明一實(shí)施方式的視頻處理裝置的圖,是表示偏移量(N)及偏 移量(M)的概要的圖。
[0535] (偏移量計(jì)算部6200)
[0536] 偏移量計(jì)算部6200是變更單元,其對(duì)于作為設(shè)定單元的噪聲量計(jì)算部6150所設(shè) 定的偏移量,基于I圖像彼此的幀間隔及P圖像彼此的幀間隔,變更上述偏移量。以下,將 噪聲量計(jì)算部6150所設(shè)定的偏移量表述為偏移量(i)或OFFSET (i),將偏移量計(jì)算部6200 變更后的偏移量表述為偏移量(f)或〇FFSET(f)。關(guān)于噪聲量計(jì)算部6150及偏移量(i)將 在后面闡述。以下,參照?qǐng)D26及圖27,說(shuō)明本實(shí)施方式的重點(diǎn),即偏移量計(jì)算部6200。
[0537] 圖26是用于說(shuō)明本發(fā)明一實(shí)施方式的視頻處理裝置的圖,是表示視頻數(shù)據(jù)所包 含的多個(gè)圖像、各圖像中的NR參數(shù)、偏移量及NR增益的圖。視頻數(shù)據(jù)是由一個(gè)I圖像、多 個(gè)P圖像及多個(gè)B圖像所構(gòu)成的GOP (Group Of Pictures :圖像組)連續(xù)的結(jié)構(gòu)。圖26所 示的視頻數(shù)據(jù)中,由"I,B,B,P,B,B,P,B,B,P,B,B,P,B,B"這12個(gè)圖像來(lái)構(gòu)成一個(gè)G0P。
[0538] 本實(shí)施方式中,將某一 G0P所包含的I圖像、與和該G0P相鄰的G0P所包含的I圖 像之間的間隔定義為I圖像彼此的幀間隔。此外,以下,將I圖像彼此的幀間隔標(biāo)記為N。 參照?qǐng)D26,本實(shí)施方式中,I圖像彼此的幀間隔為N = 15。另外,N = 1的情況下,構(gòu)成視頻 數(shù)據(jù)的所有圖像為I圖像。因而,N可取的值為1 < N的范圍內(nèi)所包含的整數(shù)。
[0539] 另一方面,本實(shí)施方式中,將一個(gè)G0P所包含的多個(gè)P圖像中、最接近的P圖像彼 此的幀間隔定義為P圖像彼此的幀間隔。此外,以下,將P圖像彼此的幀間隔標(biāo)記為Μ。Μ 優(yōu)選為Ν的約數(shù)。本實(shí)施方式中,Μ為Ν的約數(shù),Μ = 3。另外,與Ν的情況相同,Μ可取的 值為1< Μ的范圍內(nèi)所包含的整數(shù)。
[0540] 上述Ν及Μ嵌入到幾乎所有的編碼方式所編碼后的視頻數(shù)據(jù)中。因而,偏移量計(jì) 算部6200可容易從例如解碼處理部120獲取Μ及Ν。
[0541] 另外,圖26所示的NR參數(shù)是表示噪聲量計(jì)算部6150對(duì)I圖像、Ρ圖像及Β圖像 分別設(shè)定的降噪處理的強(qiáng)度的參數(shù)。對(duì)于該NR參數(shù)將在后文闡述。
[0542] (偏移量的變更)
[0543] 如上所述,偏移量計(jì)算部6200從噪聲量計(jì)算部6150獲取偏移量(i)。噪聲量計(jì)算 部6150基于構(gòu)成I圖像的各塊的量化代碼,設(shè)定偏移量(i)。偏移量計(jì)算部6200導(dǎo)出使偏 移量⑴根據(jù)N而變化的偏移量(N)、和使偏移量⑴根據(jù)Μ而變化的偏移量(M)。以下, 參照?qǐng)D27,對(duì)偏移量(Ν)及偏移量(Μ)進(jìn)行說(shuō)明。
[0544] 圖27是用于說(shuō)明本發(fā)明一實(shí)施方式的視頻處理裝置的圖,是表示偏移量(Ν)及偏 移量(Μ)的概要的圖。
[0545] (偏移量(Ν))
[0546] 本實(shí)施方式中,偏移量(Ν)與Ν具有正相關(guān)性。偏移量(Ν)與Ν的相關(guān)關(guān)系可如 圖27所示為一次函數(shù),也可為二次函數(shù)、對(duì)數(shù)函數(shù)等。換言之,該相關(guān)關(guān)系只要具有正相關(guān) 性即可,除此之外并無(wú)限定。此外,該相關(guān)關(guān)系并不限于圖27所示的函數(shù),也可為使偏移量 (Ν)與Ν以具有正相關(guān)性的方式進(jìn)行對(duì)應(yīng)的查找表。另外,本實(shí)施方式中,設(shè)該相關(guān)關(guān)系為 圖27所示的一次函數(shù)來(lái)進(jìn)行說(shuō)明。
[0547] 將表示偏移量(Ν)與Ν的相關(guān)性的一次函數(shù)表示為(1)式。另外,以下,將偏移量 (Ν)也標(biāo)記為 OFFSET (Ν)。
[0548] OFFSET (N) = anXN+bn · · · (1)
[0549] 此處,第1系數(shù)an為斜率,bn為y截距。(1)式的一次函數(shù)中,其斜率限于0< an 的范圍。另外,在圖27所示的表示偏移量(N)的圖中,對(duì)x截距-(bn/an)的值并無(wú)特別 限定。例如,即使N= 1,在偏移量計(jì)算部6200導(dǎo)出大于0的偏移量(N)時(shí),構(gòu)成為使X截 距包含在-(bn/an) < 1的范圍內(nèi)即可。此時(shí),也可以是X截距為負(fù)、換言之y截距為正的 一次函數(shù)。作為其他示例,也可假定在1 < 10的范圍內(nèi)無(wú)需變更偏移量(i)的狀況。 在這種情況下,(1)式中的X截距包含在10 < -(bn/an) < 11的范圍內(nèi)、且偏移量計(jì)算部 6200利用(1)式導(dǎo)出的偏移量(N)為負(fù)時(shí),偏移量計(jì)算部6200構(gòu)成為導(dǎo)出偏移量(N) =0 即可。根據(jù)上述結(jié)構(gòu),在N包含在1 10的范圍內(nèi)時(shí),偏移量計(jì)算部6200導(dǎo)出偏移量 (N) =0。這樣,在(1)式所示的一次函數(shù)中,對(duì)X截距-(bn/an)及y截距bn并無(wú)特別限 定,可適當(dāng)設(shè)定使得偏移量計(jì)算部6200導(dǎo)出的偏移量(N)為適當(dāng)?shù)闹怠?br>
[0550] (偏移量(M))
[0551] 和偏移量(N)與N的相關(guān)性相同,本實(shí)施方式中,偏移量(M)與Μ具有正相關(guān)性。 偏移量(Μ)與Μ的相關(guān)性和偏移量(Ν)與Ν的相關(guān)性相同,只要具有正相關(guān)性即可,除此之 外并無(wú)限定。即,偏移量(Μ)與Μ的相關(guān)性可如圖27所示為一次函數(shù),也可為二次函數(shù)、對(duì) 數(shù)函數(shù)等。此外,偏移量(Μ)與Μ的相關(guān)性也可由查找表來(lái)表示。另外,本實(shí)施方式中,設(shè) 偏移量(Μ)與Μ的相關(guān)性為圖27所示的一次函數(shù)來(lái)進(jìn)行說(shuō)明。
[0552] 將表不偏移量(Μ)與Μ的相關(guān)性的一次函數(shù)表不為(2)式。以下,將偏移量(Μ) 也標(biāo)記為OFFSET (Μ)。
[0553] OFFSET (M) = amXM+bm · · · (2)
[0554] 此處,第2系數(shù)am為斜率,bm為y截距。(2)式的一次函數(shù)中,其斜率限于0< am 的范圍。另一方面,對(duì)X截距-(bm/am)及y截距bm并無(wú)特別限定,可適當(dāng)設(shè)定使得偏移量 計(jì)算部6200導(dǎo)出的偏移量(M)為適當(dāng)?shù)闹怠?br>
[0555] 偏移量計(jì)算部6200如上述那樣導(dǎo)出偏移量(N)及偏移量(M)。之后,偏移量計(jì)算 部6200通過(guò)將噪聲量計(jì)算部6150所設(shè)定的偏移量(i)加上偏移量(N)和偏移量(M),從而 導(dǎo)出變更后的偏移量即偏移量(f)。偏移量(f)可表述為(3)式那樣。另外,將偏移量(i) 也表述為OFFSET (i),將偏移量(f)也表述為OFFSET (f)。
[0556] OFFSET (f) = OFFSET (i)+0FFSET (N)+0FFSET (Μ) · · · (3)
[0557] 偏移量計(jì)算部6200將這樣導(dǎo)出的變更后的偏移量(f)輸出到噪聲量計(jì)算部6150。
[0558] (N及Μ對(duì)視頻數(shù)據(jù)產(chǎn)生的影響)
[0559] 基于發(fā)明人得到的見(jiàn)解,對(duì)I圖像彼此的幀間隔Ν和Ρ圖像彼此的幀間隔Μ分別 對(duì)視頻數(shù)據(jù)的畫質(zhì)產(chǎn)生的影響進(jìn)行說(shuō)明。
[0560] 發(fā)明人通過(guò)在對(duì)視頻數(shù)據(jù)進(jìn)行編碼及解碼時(shí),使Ν及Μ分別作為參數(shù)進(jìn)行變化,從 而調(diào)查了 Ν及Μ對(duì)視頻數(shù)據(jù)的畫質(zhì)產(chǎn)生的影響。其結(jié)果是,發(fā)明人得到如下見(jiàn)解:S卩,在對(duì) 視頻數(shù)據(jù)進(jìn)行編碼及解碼時(shí),對(duì)視頻數(shù)據(jù)的畫質(zhì)產(chǎn)生較大影響的是N。換言之,Μ對(duì)視頻數(shù) 據(jù)的畫質(zhì)產(chǎn)生的影響小于Ν對(duì)視頻數(shù)據(jù)的畫質(zhì)產(chǎn)生的影響。
[0561] 基于該見(jiàn)解,優(yōu)選使表示偏移量(Ν)的(1)式的斜率an和表示偏移量(Μ)的(2) 式的斜率am的大小關(guān)系為an > am。通過(guò)將(1)式及(2)式代入到(3)式的OFFSET (N)及 OFFSET (M)中,得到(4)式。
[0562] OFFSET (f) = OFFSET (i)+anXN+amXM+bn+bm ··· (4)
[0563] (4)式中,N>M,an > am,因此,OFFSET (f)較大程度依賴于⑷式的第2項(xiàng)anXN。
[0564] (1)式的斜率an及⑵式的斜率am也可分別表述為導(dǎo)出變更后的偏移量即偏移 量(f)時(shí)的對(duì)N及Μ的權(quán)重系數(shù)。
[0565] (偏移量計(jì)算部6200的變形例)
[0566] 將作為偏移量計(jì)算部6200的變形例的偏移量計(jì)算部標(biāo)記為偏移量計(jì)算部α。偏 移量計(jì)算部α基于Ν來(lái)導(dǎo)出偏移量(Ν),并將其與偏移量(i)進(jìn)行相加,從而導(dǎo)出偏移量 (f)。根據(jù)發(fā)明人得到的見(jiàn)解,隨著視頻數(shù)據(jù)的編碼及解碼對(duì)視頻數(shù)據(jù)的畫質(zhì)產(chǎn)生主要影響 的是N。Μ對(duì)視頻數(shù)據(jù)的畫質(zhì)產(chǎn)生的影響是次要的,因此,偏移量計(jì)算部α也可構(gòu)成為基于 Ν來(lái)導(dǎo)出偏移量(f)。
[0567] (降噪處理部6160)
[0568] 作為降噪單元的降噪處理部6160基于來(lái)自后述噪聲量計(jì)算部6150的指示,將包 含以下所示的多個(gè)降噪處理中的至少一種降噪處理的降噪處理應(yīng)用于對(duì)象幀。此外,降噪 處理部6160基于來(lái)自噪聲量計(jì)算部6150的指示,切換應(yīng)用于各圖像的降噪處理的強(qiáng)度。
[0569] · 3D蚊式噪聲降低處理
[0570] · 2D蚊式噪聲降低處理
[0571] · 3D塊噪聲降低處理
[0572] · 2D塊噪聲降低處理
[0573] (蚊式噪聲降低處理)
[0574] 如上所述,作為色彩噪聲降低處理的一種類型,降噪處理部6160進(jìn)行蚊式噪聲降 低處理。這里,參照?qǐng)D14(a),對(duì)蚊式噪聲的概要進(jìn)行說(shuō)明。蚊式噪聲具有易于在對(duì)象圖像 內(nèi)亮度或者顏色大幅變化的邊緣區(qū)域中產(chǎn)生的趨勢(shì)。圖14(a)中,區(qū)域B表示亮度較低的 區(qū)域,區(qū)域C表示亮度較高的區(qū)域。在區(qū)域B及區(qū)域C的邊界附近,亮度大幅變化,因此,易 于產(chǎn)生蚊式噪聲。區(qū)域A表示產(chǎn)生蚊式噪聲的區(qū)域。本來(lái)應(yīng)該是與區(qū)域B同樣亮度較低的 區(qū)域,但由于產(chǎn)生蚊式噪聲,區(qū)域A的亮度比區(qū)域B高,比區(qū)域C低。
[0575] 另外,也可換言之,上述邊緣區(qū)域由構(gòu)成對(duì)象圖像的各塊中具有較高的頻率分量 的塊形成。因而,也可以說(shuō),蚊式噪聲易于在具有較高頻率分量的塊內(nèi)及其周邊的塊中產(chǎn) 生。作為其結(jié)果,若構(gòu)成對(duì)象圖像的塊中,具有較高頻率分量的塊的比例較高,則在該對(duì)象 圖像中包含較多的蚊式噪聲的可能性較高。此外,若對(duì)象圖像所表示的視頻包含較多的邊 緣區(qū)域,則在該對(duì)象圖像中包含較多的蚊式噪聲的可能性較高。
[0576] 關(guān)于蚊式噪聲降低處理,如后所述有3D蚊式噪聲降低處理和2D蚊式噪聲降低處 理。
[0577] (塊噪聲降低處理)
[0578] 塊噪聲一般是在以高壓縮率對(duì)視頻進(jìn)行編碼時(shí)產(chǎn)生的矩形的噪聲。該噪聲的大小 與編碼過(guò)程中的塊大小相同,因此,稱為塊噪聲。關(guān)于塊噪聲降低處理,如后所述有3D塊噪 聲降低處理和2D塊噪聲降低處理。
[0579] (3D噪聲降低處理)
[0580] 此處,3D塊噪聲降低處理及3D蚊式噪聲降低處理是參照對(duì)象圖像和一個(gè)或多個(gè) 其他圖像來(lái)進(jìn)行的。以下,為了方便,有時(shí)也將3D塊噪聲降低處理及3D蚊式噪聲降低處理 稱為3D噪聲降低處理。
[0581] 具體而言,如圖8(a)所示,3D噪聲降低處理通過(guò)對(duì)每一像素求得包含噪聲的對(duì)象 圖像中的對(duì)象區(qū)域、和以對(duì)象圖像為起點(diǎn)在時(shí)間上位于前后的一個(gè)或多個(gè)參照?qǐng)D像中的對(duì) 象區(qū)域的平均,從而生成降噪后的圖像。
[0582] 此處,在應(yīng)用更強(qiáng)的3D噪聲降低處理的情況下,增多參照?qǐng)D像的個(gè)數(shù),在應(yīng)用更 弱的3D噪聲降低處理的情況下,減少參照?qǐng)D像的個(gè)數(shù)。
[0583] 通過(guò)增多參照?qǐng)D像的個(gè)數(shù),降噪效果變大,但對(duì)于動(dòng)作劇烈的場(chǎng)景,也有容易發(fā)生 殘像的負(fù)面效應(yīng)。通過(guò)減少參照?qǐng)D像的個(gè)數(shù),從而即使是對(duì)于動(dòng)作劇烈的場(chǎng)景,也不易發(fā)生 殘像,但也有降噪效果變小的負(fù)面影響。
[0584] 另外,3D噪聲降低處理中的上述平均處理也可以利用設(shè)定成使得降噪后的圖像具 有更高畫質(zhì)的權(quán)重系數(shù)。
[0585] 此外,3D降噪處理也可以將對(duì)象圖像中的對(duì)象區(qū)域、與以對(duì)象圖像為起點(diǎn)在時(shí)間 上位于前后的一個(gè)或多個(gè)參照?qǐng)D像中的對(duì)象區(qū)域進(jìn)行比較,將瞬間變化的部分判定為噪 聲,降低該噪聲。
[0586] (2D噪聲降低處理)
[0587] 另一方面,2D塊噪聲降低處理及2D蚊式噪聲降低處理是參照對(duì)象圖像中的對(duì)象 像素、和該對(duì)象圖像中設(shè)定在該對(duì)象像素周邊的參照區(qū)域所包含的參照像素來(lái)進(jìn)行。以下, 為了方便,有時(shí)也將2D塊噪聲降低處理及2D蚊式噪聲降低處理稱為2D噪聲降低處理。
[0588] 具體而言,如圖8(b)所示,2D噪聲降低處理通過(guò)對(duì)對(duì)象圖像中的對(duì)象像素的像 素值、和該對(duì)象圖像中設(shè)定在該對(duì)象像素周邊的參照區(qū)域所包含的參照像素的像素值求平 均,從而生成降噪后的圖像。
[0589] 此處,在應(yīng)用更強(qiáng)的2D噪聲降低處理的情況下,將參照區(qū)域設(shè)定得較大,在應(yīng)用 更弱的2D噪聲降低處理的情況下,將參照區(qū)域設(shè)定得較小。
[0590] 通過(guò)增大參照區(qū)域,降噪效果增大,但在產(chǎn)生噪聲的區(qū)域以外的區(qū)域也有容易產(chǎn) 生模糊的負(fù)面效應(yīng)。通過(guò)減小參照區(qū)域,不易產(chǎn)生模糊,但也有降噪效果變小的負(fù)面效應(yīng)。 此外,在應(yīng)用2D蚊式噪聲降低處理的情況下,有時(shí)如圖14 (b)所示,作為蚊式噪聲的區(qū)域A 與亮度較高的區(qū)域C相近。在這種情況下,通過(guò)如圖14(b)所示那樣設(shè)定參照區(qū)域,從而能 防止參照區(qū)域中包含亮度較高的區(qū)域C。通過(guò)像上述那樣設(shè)定參照區(qū)域,從而能更有效地執(zhí) 行蚊式噪聲降低處理。
[0591] 另外,2D噪聲降低處理中的上述平均處理也可以利用設(shè)定成使得降噪后的圖像具 有更高畫質(zhì)的權(quán)重系數(shù)。
[0592] 此外,2D噪聲降低處理也可以將對(duì)象圖像中的對(duì)象像素、與該對(duì)象圖像中設(shè)定在 該對(duì)象像素周邊的參照區(qū)域所包含的參照像素進(jìn)行比較,在對(duì)象像素的顏色或亮度與參照 像素的顏色或亮度大為不同的情況下,判斷為該對(duì)象像素產(chǎn)生了噪聲,降低該噪聲。
[0593] (噪聲量計(jì)算部6150)
[0594] 接著,參照?qǐng)D26對(duì)實(shí)施方式18的噪聲量計(jì)算部6150進(jìn)行說(shuō)明。噪聲量計(jì)算部 6150是設(shè)定單元。
[0595] (NR 參數(shù))
[0596] 本實(shí)施方式的噪聲量計(jì)算部6150對(duì)視頻數(shù)據(jù)所包含的I圖像、P圖像及B圖像等 各圖像如圖26所示那樣分配NR參數(shù)。本實(shí)施方式中,將與I圖像對(duì)應(yīng)的NR參數(shù)標(biāo)記為 NRI,將與P圖像對(duì)應(yīng)的NR參數(shù)標(biāo)記為NRP,將與B圖像對(duì)應(yīng)的NR參數(shù)標(biāo)記為NRB。噪聲量 計(jì)算部6150對(duì)I圖像分配NRI = 2,對(duì)P圖像分配NRP = 3,對(duì)B圖像分配NRB = 5。NRI、 NRP、及NRB的值并不限于上述值,各NR參數(shù)的大小關(guān)系優(yōu)選為NRI < NRP < NRB。
[0597] I圖像可不參照其他圖像來(lái)進(jìn)行解碼,P圖像可通過(guò)參照其他一個(gè)圖像來(lái)進(jìn)行解 碼,B圖像是通過(guò)參照其他兩個(gè)圖像來(lái)進(jìn)行解碼。由此,關(guān)于對(duì)各圖像進(jìn)行編碼及解碼時(shí)產(chǎn) 生噪聲的可能性,可推定出I圖像最低,P圖像第二低,B圖像最高。因此,如上所述,各NR 參數(shù)的大小關(guān)系優(yōu)選為NRI < NRP < NRB。
[0598] (偏移量⑴)
[0599] 圖7是表示對(duì)于各像素的量化代碼的一個(gè)示例的圖。橫軸表示作為對(duì)象的I圖像 所包含的各像素(更具體而言,為對(duì)各像素附加的像素編號(hào)),縱軸表示對(duì)各像素的量化代 碼的值的示例。
[0600] 噪聲量計(jì)算部6150計(jì)算該I圖像中量化代碼超過(guò)規(guī)定閾值(圖7的示例中,閾值 =10)的像素的數(shù)量相對(duì)于該對(duì)象圖像中的總像素?cái)?shù)的比例。
[0601] 作為設(shè)定單元的噪聲量計(jì)算部6150基于計(jì)算出的量化代碼超過(guò)規(guī)定閾值的塊的 比例,設(shè)定作為NR參數(shù)的偏移量的偏移量(i)。構(gòu)成作為對(duì)象的I圖像的各塊中,具有超過(guò) 規(guī)定閾值的量化代碼的塊較多(計(jì)算出的量化代碼超過(guò)規(guī)定閾值的塊的比例較高),可推 定為對(duì)該I圖像進(jìn)行編碼時(shí)的壓縮率較高。然后,可推定為以高壓縮率進(jìn)行壓縮后的圖像 與以低壓縮率進(jìn)行壓縮后的圖像相比,包含噪聲的概率更高。因而,噪聲量計(jì)算部6150優(yōu) 選構(gòu)成為在構(gòu)成I圖像的各塊中,具有超過(guò)規(guī)定閾值的量化代碼的塊越多時(shí),將偏移量(i) 設(shè)定得越大。
[0602] 噪聲量計(jì)算部6150將設(shè)定的偏移量(i)提供給偏移量計(jì)算部6200。
[0603] (NR增益的計(jì)算)
[0604] 噪聲量計(jì)算部6150將偏移量(i)提供給偏移量計(jì)算部6200之后,從偏移量計(jì)算 部6200獲取變更后的偏移量(f)。圖26所不的偏移量表不偏移量(f)。
[0605] 噪聲量計(jì)算部6150通過(guò)將各圖像的NR參數(shù)與偏移量(f)相加,從而計(jì)算出決定 降噪處理的強(qiáng)度的參數(shù)即NR增益。噪聲量計(jì)算部6150基于NR增益,變更降噪處理部6160 的降噪處理種類及強(qiáng)度。
[0606] 根據(jù)上述結(jié)構(gòu),噪聲量計(jì)算部6150基于構(gòu)成視頻數(shù)據(jù)中所包含的I圖像的各塊的 量化代碼,設(shè)定上述初始偏移量。此外,偏移量計(jì)算部6200根據(jù)上述I圖像彼此的幀間隔, 變更上述初始偏移量。因此,該視頻處理裝置能抑制成本上升,并進(jìn)行有效的降噪處理。
[0607] 此外,根據(jù)上述結(jié)構(gòu),偏移量計(jì)算部6200以在上述I圖像彼此的幀間隔N越大時(shí), 偏移量(N)的值越大的方式進(jìn)行變更。即,N越大,降噪處理部6160對(duì)視頻實(shí)施強(qiáng)度越強(qiáng) 的降噪處理。因而,能隨著N的變化來(lái)實(shí)施適當(dāng)?shù)慕翟胩幚怼?br>
[0608] 此外,根據(jù)上述結(jié)構(gòu),偏移量計(jì)算部6200進(jìn)一步以在上述P圖像彼此的幀間隔Μ 越大時(shí),偏移量(Μ)的值越大的方式進(jìn)行變更。即,Μ越大,降噪處理部6160對(duì)視頻實(shí)施強(qiáng) 度越強(qiáng)的降噪處理。因此,能在Ν的變化的基礎(chǔ)上,還考慮Μ的變化來(lái)實(shí)施適當(dāng)?shù)慕翟胩幚怼?br>
[0609] 此外,根據(jù)上述結(jié)構(gòu),偏移量計(jì)算部6200通過(guò)導(dǎo)出an與Ν之積,從而導(dǎo)出基于Ν 的偏移量(N)。此夕卜,偏移量計(jì)算部6200通過(guò)導(dǎo)出am與Μ之積,從而導(dǎo)出基于Μ的偏移量 (Μ)。進(jìn)一步地,偏移量計(jì)算部6200根據(jù)基于Ν的上述偏移量(Ν)與基于Ρ的偏移量(Μ) 之和,來(lái)導(dǎo)出偏移量(f)。
[0610] 此時(shí),an大于am。該結(jié)構(gòu)是基于發(fā)明人獲得的如下見(jiàn)解:S卩,作為使視頻的畫質(zhì)劣 化(產(chǎn)生噪聲)的主要原因,N比Μ更重要。根據(jù)上述結(jié)構(gòu),能對(duì)視頻實(shí)施與N、M分別使視 頻的畫質(zhì)劣化的程度相應(yīng)的降噪處理。
[0611] 此外,根據(jù)上述結(jié)構(gòu),噪聲量計(jì)算部6150在構(gòu)成上述I圖像的各塊中,具有超過(guò)上 述閾值的量化代碼的塊越多時(shí),將上述偏移量設(shè)定得越大。因此,能在壓縮視頻的壓縮率越 高時(shí),對(duì)視頻實(shí)施強(qiáng)度越強(qiáng)的降噪處理。
[0612] 此外,噪聲量計(jì)算部6150也可構(gòu)成為識(shí)別在對(duì)象圖像上設(shè)定的對(duì)象區(qū)域中的噪 聲產(chǎn)生模式,并基于識(shí)別結(jié)果,利用降噪處理部6160,變更應(yīng)用于該對(duì)象區(qū)域的降噪處理的 種類及強(qiáng)度。
[0613] 例如,噪聲量計(jì)算部6150可構(gòu)成為檢測(cè)各塊中的平均顏色、亮度,在顏色、亮度以 塊為單位進(jìn)行變化的情況下,推定為該對(duì)象圖像中存在塊噪聲,增強(qiáng)應(yīng)用于塊邊界的塊噪 聲降低處理的強(qiáng)度。
[0614] 此外,噪聲量計(jì)算部6150也可構(gòu)成為在顏色、亮度大幅變化的區(qū)域(例如圖像邊 緣)附近檢測(cè)出噪聲的情況下,將該噪聲判定為蚊式噪聲,通過(guò)對(duì)不包含上述邊緣的區(qū)域 中的像素值求平均,從而降低該蚊式噪聲。
[0615] 通過(guò)采用這種結(jié)構(gòu),能進(jìn)行更精細(xì)的降噪處理。
[0616] 另外,上述閾值可決定為使得視頻處理裝置6100輸出的視頻具有更高畫質(zhì)。
[0617] 〈實(shí)施方式19>
[0618] 此外,也可以將用于實(shí)現(xiàn)本說(shuō)明書記載的各實(shí)施方式中說(shuō)明的視頻處理裝置 1100、2100、3100、4100、5100及6100的各功能部的處理的程序記錄在計(jì)算機(jī)可讀取的記錄 介質(zhì)中,由計(jì)算機(jī)系統(tǒng)讀入該記錄介質(zhì)所記錄的程序并加以執(zhí)行,從而實(shí)現(xiàn)各功能部的處 理。此外,這里所說(shuō)的"計(jì)算機(jī)系統(tǒng)"包含OS (Operating System:操作系統(tǒng))和周邊設(shè)備等 硬件。
[0619] 此外,上述程序可以是用于實(shí)現(xiàn)上述功能的一部分的程序,還可以是通過(guò)與已記 錄在計(jì)算機(jī)系統(tǒng)中的程序的組合而能實(shí)現(xiàn)上述功能的程序。
[0620] 此外,所謂存放有上述程序的"記錄介質(zhì)",是指軟盤、光磁盤、R0M(Read Only Memory :只讀存儲(chǔ)器)、⑶-ROM等計(jì)算機(jī)可讀取的移動(dòng)介質(zhì)、內(nèi)置于計(jì)算機(jī)系統(tǒng)的硬盤等存 儲(chǔ)裝置等。此外,還包含經(jīng)由互聯(lián)網(wǎng)等網(wǎng)絡(luò)或電話線路等通信線路來(lái)發(fā)送程序的情況下的 通信線那樣的、在短時(shí)間內(nèi)動(dòng)態(tài)保存程序的介質(zhì);以及作為此情況下的服務(wù)器或客戶端的 計(jì)算機(jī)系統(tǒng)內(nèi)部的易失性存儲(chǔ)器那樣的、在一定時(shí)間內(nèi)保存程序的介質(zhì)。
[0621] 〔總結(jié)〕
[0622] 本發(fā)明的方式1的視頻處理裝置降低對(duì)視頻信號(hào)進(jìn)行解碼而得到的視頻的噪聲, 其包括:降噪處理選擇單元,其基于構(gòu)成對(duì)象幀的各塊的量化代碼、和構(gòu)成該對(duì)象幀的各塊 的動(dòng)作判別結(jié)果,從具有互不相同的特性的多種降噪處理中選擇應(yīng)用于該對(duì)象幀的至少一 種降噪處理;及降噪單元,其將由所述降噪處理選擇單元所選擇的降噪處理應(yīng)用于所述對(duì) 象幀。
[0623] 此處,量化代碼是規(guī)定對(duì)視頻進(jìn)行編碼時(shí)的量化粗糙度的參數(shù),嵌入到幾乎所有 的編碼方式所編碼后的視頻信號(hào)中,因此,無(wú)需特別結(jié)構(gòu)就能容易地獲取。因此,能抑制成 本上升。此外,根據(jù)上述結(jié)構(gòu),基于量化代碼和動(dòng)作判別結(jié)果,來(lái)選擇降噪處理,因此,與僅 參照量化代碼的結(jié)構(gòu)相比,能進(jìn)行更有效的降噪處理。
[0624] 此外,從具有互不相同的特性的多種降噪處理中進(jìn)行降噪處理的選擇,因此,即使 視頻信號(hào)中產(chǎn)生了各種特性的噪聲,也能進(jìn)行有效的降噪處理。
[0625] 這樣,根據(jù)上述結(jié)構(gòu),能抑制成本上升,并進(jìn)行有效的降噪處理。
[0626] 本發(fā)明的方式2的視頻處理裝置優(yōu)選為,在上述方式1中,還包括強(qiáng)度變更單元, 其基于構(gòu)成所述對(duì)象幀的各塊的量化代碼、和構(gòu)成所述對(duì)象幀的各塊的動(dòng)作判別結(jié)果,變 更由所述降噪處理選擇單元所選擇的降噪處理的強(qiáng)度。
[0627] 根據(jù)上述結(jié)構(gòu),基于構(gòu)成所述對(duì)象幀的各塊的量化代碼、和構(gòu)成所述對(duì)象幀的各 塊的動(dòng)作判別結(jié)果,變更由所述降噪處理選擇單元所選擇的降噪處理的強(qiáng)度,因此,能進(jìn)行 更有效的降噪處理。
[0628] 此外,本發(fā)明的方式3的視頻處理裝置優(yōu)選為,在上述方式2中,所述多種降噪處 理中包含塊噪聲降低處理,所述強(qiáng)度變更單元在判別為有動(dòng)作的塊越多時(shí),越增強(qiáng)塊噪聲 降低處理的強(qiáng)度。
[0629] 發(fā)明人得到如下見(jiàn)解:S卩,在有較大動(dòng)作的視頻中有包含更多的塊噪聲的趨勢(shì)。
[0630] 根據(jù)上述結(jié)構(gòu),在判別為有動(dòng)作的塊越多時(shí),越增強(qiáng)塊噪聲降低處理的強(qiáng)度,因 此,能根據(jù)視頻的動(dòng)作,來(lái)進(jìn)行更有效的降噪處理。
[0631] 此外,本發(fā)明的方式4的視頻處理裝置優(yōu)選為,在上述方式3中,所述塊噪聲降低 處理是參照所述對(duì)象幀和一個(gè)或多個(gè)其他幀來(lái)進(jìn)行的,所述強(qiáng)度變更單元在判別為有動(dòng)作 的塊越多時(shí),越增多所參照的所述其他幀的個(gè)數(shù)。
[0632] 根據(jù)上述結(jié)構(gòu),在參照對(duì)象幀和一個(gè)或多個(gè)其他幀來(lái)進(jìn)行的塊噪聲降低處理中, 在判別為有動(dòng)作的塊越多時(shí),越增多所參照的所述其他幀的個(gè)數(shù),因此,能進(jìn)行更有效的降 噪處理。
[0633] 此外,本發(fā)明的方式5的視頻處理裝置優(yōu)選為,在上述方式3中,所述塊噪聲降低 處理是參照所述對(duì)象幀上的對(duì)象像素和設(shè)定在該對(duì)象像素周邊的參照區(qū)域中所包含的像 素來(lái)進(jìn)行的,所述強(qiáng)度變更單元在判別為有動(dòng)作的塊越多時(shí),將所述參照區(qū)域設(shè)定得越寬。
[0634] 根據(jù)上述結(jié)構(gòu),在參照對(duì)象幀上的對(duì)象像素和設(shè)定在該對(duì)象像素周邊的參照區(qū)域 中所包含的像素來(lái)進(jìn)行的塊噪聲降低處理中,在判別為有動(dòng)作的塊越多時(shí),將所述參照區(qū) 域設(shè)定得越寬,因此,能進(jìn)行更有效的降噪處理。
[0635] 此外,本發(fā)明的方式6的視頻處理裝置優(yōu)選為,在上述方式2至5的任一方式中, 所述多種降噪處理中包含蚊式噪聲降低處理,所述強(qiáng)度變更單元在具有超過(guò)規(guī)定閾值的量 化代碼的塊越多時(shí),越增強(qiáng)所述蚊式噪聲降低處理的強(qiáng)度。
[0636] 發(fā)明人得到如下見(jiàn)解:S卩,具有較大量化代碼的塊越多時(shí),有包含越多的蚊式噪聲 的趨勢(shì)。
[0637] 根據(jù)上述結(jié)構(gòu),在具有超過(guò)規(guī)定閾值的量化代碼的塊越多時(shí),越增強(qiáng)蚊式噪聲降 低處理的強(qiáng)度,因此,能進(jìn)行更有效的降噪處理。
[0638] 此外,本發(fā)明的方式7的視頻處理裝置優(yōu)選為,在上述方式6中,所述蚊式噪聲降 低處理是參照所述對(duì)象幀和一個(gè)或多個(gè)其他幀來(lái)進(jìn)行的,所述強(qiáng)度變更單元在具有超過(guò)規(guī) 定閾值的量化代碼的塊越多時(shí),越增多所參照的所述其他幀的個(gè)數(shù)。
[0639] 根據(jù)上述結(jié)構(gòu),在參照對(duì)象幀和一個(gè)或多個(gè)其他幀來(lái)進(jìn)行的蚊式噪聲降低處理 中,在具有超過(guò)規(guī)定閾值的量化代碼的塊越多時(shí),越增多所參照的所述其他幀的個(gè)數(shù),因 此,能進(jìn)行更有效的降噪處理。
[0640] 此外,本發(fā)明的方式8的視頻處理裝置優(yōu)選為,在上述方式6中,所述蚊式噪聲降 低處理是參照所述對(duì)象幀上的對(duì)象像素和設(shè)定在該對(duì)象像素周邊的參照區(qū)域中所包含的 像素來(lái)進(jìn)行的,所述強(qiáng)度變更單元在具有超過(guò)規(guī)定閾值的量化代碼的塊越多時(shí),將所述參 照區(qū)域設(shè)定得越寬。
[0641] 根據(jù)上述結(jié)構(gòu),在參照對(duì)象幀上的對(duì)象像素和設(shè)定在該對(duì)象像素周邊的參照區(qū)域 中所包含的像素來(lái)進(jìn)行的蚊式噪聲降低處理中,在具有超過(guò)規(guī)定閾值的量化代碼的塊越多 時(shí),將所述參照區(qū)域設(shè)定得越寬,因此,能進(jìn)行更有效的降噪處理。
[0642] 此外,本發(fā)明的方式9的視頻處理裝置優(yōu)選為,在上述方式6至8的任一方式中, 所述強(qiáng)度變更單元在判別為有動(dòng)作的塊越多時(shí),越減小所述規(guī)定閾值。
[0643] 發(fā)明人得到如下見(jiàn)解:S卩,在源視頻中包含有"發(fā)白噪聲"的情況下,即使降低壓縮 率,即將量化代碼設(shè)定得較小,視頻自身有時(shí)也包含較多的噪聲,對(duì)于這種視頻,通過(guò)動(dòng)作 判別,有判定為"有動(dòng)作"的塊較多的趨勢(shì)。
[0644] 根據(jù)上述結(jié)構(gòu),在判別為有動(dòng)作的塊越多時(shí),越減小所述規(guī)定閾值,因此,能適當(dāng) 降低這種"發(fā)白噪聲"。
[0645] 此外,本發(fā)明的方式10的視頻處理裝置優(yōu)選為,在上述方式1至9的任一方式中, 所述降噪處理選擇單元對(duì)設(shè)定在所述對(duì)象幀上的對(duì)象區(qū)域中的噪聲產(chǎn)生模式進(jìn)行識(shí)別,并 基于識(shí)別結(jié)果,從所述多種降噪處理中選擇應(yīng)用于該對(duì)象區(qū)域的至少一種降噪處理。
[0646] 根據(jù)上述結(jié)構(gòu),對(duì)設(shè)定在所述對(duì)象幀上的對(duì)象區(qū)域中的噪聲產(chǎn)生模式進(jìn)行識(shí)別, 并基于識(shí)別結(jié)果,從所述多種降噪處理中選擇應(yīng)用于該對(duì)象區(qū)域的至少一種降噪處理,因 此,能進(jìn)行更精細(xì)的降噪處理。
[0647] 此外,本發(fā)明的方式11的視頻處理方法降低對(duì)視頻信號(hào)進(jìn)行解碼而得到的視頻 的噪聲,其包含:降噪處理選擇工序,其基于構(gòu)成對(duì)象幀的各塊的量化代碼、和構(gòu)成該對(duì)象 幀的各塊的動(dòng)作判別結(jié)果,從具有互不相同的特性的多種降噪處理中選擇應(yīng)用于該對(duì)象幀 的至少一種降噪處理;及降噪工序,其將由所述降噪處理選擇工序所選擇的降噪處理應(yīng)用 于所述對(duì)象幀。
[0648] 根據(jù)上述那樣構(gòu)成的視頻處理方法,起到與上述視頻處理裝置同樣的效果。
[0649] 本發(fā)明的方式12的視頻處理裝置降低對(duì)視頻信號(hào)進(jìn)行解碼而得到的視頻的噪 聲,其包括:設(shè)定單元,其基于構(gòu)成對(duì)象幀的各塊的量化代碼、和構(gòu)成該對(duì)象幀的各塊的頻 率特性或邊緣信息,設(shè)定蚊式噪聲降低參數(shù);及降噪單元,其對(duì)該對(duì)象幀實(shí)施利用了由所述 設(shè)定單元所設(shè)定的蚊式噪聲降低參數(shù)的蚊式噪聲降低處理。
[0650] 此處,量化代碼是規(guī)定對(duì)視頻進(jìn)行編碼時(shí)的量化粗糙度的參數(shù),嵌入到幾乎所有 的編碼方式所編碼后的視頻信號(hào)中,因此,無(wú)需特別結(jié)構(gòu)就能容易地獲取。因此,能抑制成 本上升。
[0651] 此外,根據(jù)上述結(jié)構(gòu),設(shè)定單元基于量化代碼值、和頻率特性或邊緣信息,設(shè)定蚊 式噪聲降低參數(shù)。此外,降噪單元對(duì)所述對(duì)象幀實(shí)施利用了所述蚊式噪聲降低參數(shù)的蚊式 噪聲降低處理。
[0652] 根據(jù)發(fā)明人的見(jiàn)解,蚊式噪聲的產(chǎn)生與頻率特性及邊緣信息具有相關(guān)性。具體而 言,在頻率特性中包含有與亮度變化的斜度相關(guān)的信息,在邊緣信息中包含有與色度變化 的斜度相關(guān)的信息。此處,亮度變化的斜度及顏色變化的斜度均與蚊式噪聲的產(chǎn)生具有相 關(guān)性。因此,根據(jù)上述結(jié)構(gòu),能有效降低蚊式噪聲。
[0653] 此外,本發(fā)明的方式13的視頻處理裝置優(yōu)選為,在上述方式12中,還包括頻率判 別單元,其基于構(gòu)成所述對(duì)象幀的各塊的頻率分量,將所述對(duì)象幀中的頻率分量的直方圖 作為所述頻率特性導(dǎo)出,所述設(shè)定單元從所述頻率分量的直方圖中,分別導(dǎo)出頻率低于規(guī) 定的第1頻率的第1頻率分量、頻率高于所述第1頻率且低于規(guī)定的第2頻率的第2頻率 分量、及頻率高于所述規(guī)定的第2頻率的第3頻率分量,在第3頻率分量相對(duì)于總頻率分量 的比例越高時(shí),將蚊式噪聲降低參數(shù)設(shè)定得越大。
[0654] 所述第3頻率分量相對(duì)于總頻率分量的比例較高也可以說(shuō)是高頻分量相對(duì)于總 頻率分量的比例較高。構(gòu)成所述對(duì)象幀的各塊中高頻分量的比例較高意味著所述對(duì)象幀所 表示的視頻為清晰的視頻或噪聲較多的視頻的可能性較高。因而,所述設(shè)定單元在高頻分 量的比例越高時(shí),將蚊式噪聲降低參數(shù)設(shè)定得越大,從而所述降噪單元能對(duì)所述對(duì)象幀實(shí) 施有效的蚊式噪聲降低處理。
[0655] 此外,本發(fā)明的方式14的視頻處理裝置優(yōu)選為,在上述方式13中,所述設(shè)定單元 在所述頻率分量的直方圖中,所述第1頻率分量相對(duì)于總頻率分量的比例越高時(shí),將蚊式 噪聲降低參數(shù)設(shè)定得越小。
[0656] 所述第1頻率分量相對(duì)于總頻率分量的比例較高也可以說(shuō)是低頻分量相對(duì)于總 頻率分量的比例較高。構(gòu)成所述對(duì)象幀的各塊中低頻分量的比例較高意味著所述對(duì)象幀所 表示的視頻為亮度及色度的變化較少的視頻的可能性較高。在這種視頻中產(chǎn)生蚊式噪聲的 可能性較低,因此,所述設(shè)定單元在低頻分量的比例越高時(shí),將蚊式噪聲降低處理參數(shù)設(shè)定 得越小。由此,所述降噪單元對(duì)于產(chǎn)生蚊式噪聲的可能性較低的視頻不實(shí)施過(guò)度的蚊式噪 聲降低處理,不會(huì)使所述對(duì)象幀所表示的視頻的畫質(zhì)劣化。
[0657] 此外,本發(fā)明的方式15的視頻處理裝置優(yōu)選為,在上述方式13或14中,所述設(shè)定 單元在具有超過(guò)規(guī)定閾值的量化代碼的塊越多時(shí),將蚊式噪聲降低參數(shù)設(shè)定得越大。
[0658] 所述量化代碼為反映在對(duì)視頻進(jìn)行編碼及解碼時(shí)的壓縮率的參數(shù)。所述量化代碼 越大,對(duì)視頻進(jìn)行編碼及解碼時(shí)的壓縮率越大,產(chǎn)生蚊式噪聲的可能性越高。根據(jù)上述結(jié) 構(gòu),所述設(shè)定單元在具有超過(guò)規(guī)定閾值的量化代碼的塊越多時(shí),將蚊式噪聲降低參數(shù)設(shè)定 得越大。因此,所述降噪單元能對(duì)所述對(duì)象幀實(shí)施有效的蚊式噪聲降低處理。
[0659] 此外,本發(fā)明的方式16的視頻處理裝置也可構(gòu)成為,在上述方式12中,還包括邊 緣信息導(dǎo)出單元,作為所述邊緣信息,其對(duì)構(gòu)成所述對(duì)象幀的各像素所具有的像素值實(shí)施 邊緣信息提取處理,將所述對(duì)象幀中的邊緣直方圖作為所述邊緣信息導(dǎo)出,所述設(shè)定單元 從所述邊緣直方圖中,導(dǎo)出亮度差大于規(guī)定亮度差的像素?cái)?shù)相對(duì)于構(gòu)成所述對(duì)象幀的總像 素?cái)?shù)的比例,在該比例越高時(shí),將蚊式噪聲降低參數(shù)設(shè)定得越大。
[0660] 亮度差大于規(guī)定亮度差的像素?cái)?shù)相對(duì)于構(gòu)成所述對(duì)象幀的總像素?cái)?shù)的比例是反 映所述對(duì)象幀所包含的邊緣區(qū)域的多少的參數(shù)。根據(jù)上述結(jié)構(gòu),所述設(shè)定單元在上述比例 越高時(shí),將蚊式噪聲降低參數(shù)設(shè)定得越大,因此,所述降噪單元能對(duì)所述對(duì)象幀實(shí)施有效的 蚊式噪聲降低處理。
[0661] 此外,本發(fā)明的方式17的視頻處理裝置優(yōu)選為,在上述方式13至15的任一方式 中,所述設(shè)定單元在所述第3頻率分量的比例越高時(shí),越減小所述規(guī)定閾值。
[0662] 在原視頻中包含有"發(fā)白噪聲"的情況下,即使降低壓縮率,即將量化代碼設(shè)定得 較小,有時(shí)視頻本身也會(huì)包含較多噪聲。發(fā)明人得到如下見(jiàn)解:即,對(duì)于這種視頻,通過(guò)頻率 判別,有判別為所述第3頻率分量的比例即高頻分量的比例較高的趨勢(shì)。根據(jù)上述結(jié)構(gòu),在 高頻分量的比例越高時(shí),越減小所述規(guī)定閾值,因此,能適當(dāng)降低這種"發(fā)白噪聲"。
[0663] 此外,本發(fā)明的方式18的視頻處理方法降低對(duì)視頻信號(hào)進(jìn)行解碼而得到的視頻 的噪聲,其包括:設(shè)定工序,其基于構(gòu)成對(duì)象幀的各塊的量化代碼、和構(gòu)成該對(duì)象幀的各塊 的頻率特性或各像素的邊緣信息,設(shè)定蚊式噪聲降低參數(shù);及降噪工序,其對(duì)該對(duì)象幀實(shí)施 利用了由所述設(shè)定工序所設(shè)定的蚊式噪聲降低參數(shù)的蚊式噪聲降低處理。
[0664] 根據(jù)上述那樣構(gòu)成的視頻處理方法,起到與上述視頻處理裝置同樣的效果。
[0665] 此外,本發(fā)明的方式19的視頻處理裝置降低對(duì)視頻信號(hào)進(jìn)行解碼而得到的視頻 的噪聲,其包括:強(qiáng)度決定單元,其基于構(gòu)成對(duì)象幀的各塊的量化代碼、該對(duì)象幀中所包含 的原色像素的數(shù)量、及彼此相鄰的原色像素的形成面積,決定色彩噪聲降低處理的強(qiáng)度;及 降噪單元,其將具有由所述強(qiáng)度決定單元所決定的強(qiáng)度的色彩噪聲降低處理應(yīng)用于所述對(duì) 象幀。
[0666] 發(fā)明人得到如下見(jiàn)解:S卩,通過(guò)根據(jù)對(duì)象幀中所包含的原色像素的數(shù)量和彼此相 鄰的原色像素的形成面積,來(lái)設(shè)定色彩噪聲降低處理的強(qiáng)度,從而能更有效地削減色彩噪 聲。
[0667] 根據(jù)上述結(jié)構(gòu),強(qiáng)度決定單元基于構(gòu)成所述對(duì)象幀的各塊的量化代碼、該對(duì)象幀 中所包含的原色像素的數(shù)量、及彼此相鄰的原色像素的形成面積,決定色彩噪聲降低處理 的強(qiáng)度。然后,所述降噪單元將具有由所述強(qiáng)度決定單元所決定的強(qiáng)度的色彩噪聲降低處 理應(yīng)用于所述對(duì)象幀,因此,能實(shí)現(xiàn)有效的色彩噪聲降低處理。
[0668] 此外,根據(jù)上述結(jié)構(gòu),進(jìn)一步根據(jù)量化代碼來(lái)決定色彩噪聲降低處理的強(qiáng)度,因 此,能進(jìn)行更有效的色彩噪聲降低處理。
[0669] 另外,量化代碼是規(guī)定對(duì)視頻進(jìn)行編碼時(shí)的量化粗糙度的參數(shù),嵌入到幾乎所有 的編碼方式所編碼后的視頻信號(hào)中,因此,無(wú)需特別結(jié)構(gòu)就能容易地獲取。因此,能抑制成 本上升。
[0670] 這樣,根據(jù)上述結(jié)構(gòu),能抑制成本上升,并進(jìn)行有效的色彩噪聲降低處理。
[0671] 此外,本發(fā)明的方式20的視頻處理裝置優(yōu)選為,在上述方式19中,在所述色彩噪 聲降低處理中包含蚊式噪聲降低處理,
[0672] 所述強(qiáng)度決定單元在所述對(duì)象幀中所包含的所述原色像素的數(shù)量越多、且所述彼 此相鄰的原色像素的形成面積越小時(shí),越增強(qiáng)蚊式噪聲降低處理的強(qiáng)度。
[0673] 色彩噪聲是因拍攝視頻的拍攝元件中產(chǎn)生的暗電流等而產(chǎn)生的,因此,一般而言, 色彩噪聲所表示的顏色為原色或接近原色的顏色,各自的色彩噪聲的形成面積較小。所述 對(duì)象幀中所包含的所述原色像素的數(shù)量較多、且所述彼此相鄰的原色像素的形成面積較小 意味著所述對(duì)象幀包含較多的色彩噪聲。通過(guò)對(duì)這種所述對(duì)象幀執(zhí)行強(qiáng)度較強(qiáng)的蚊式噪聲 降低處理,從而能使色彩噪聲不易被用戶看出地進(jìn)行處理。因此,根據(jù)上述結(jié)構(gòu),能有效降 低色彩噪聲。
[0674] 此外,本發(fā)明的方式21的視頻處理裝置優(yōu)選為,在上述方式20中,所述強(qiáng)度決定 單元在具有超過(guò)規(guī)定閾值的量化代碼的塊越多時(shí),越增強(qiáng)蚊式噪聲降低處理的強(qiáng)度。
[0675] 具有超過(guò)規(guī)定閾值的量化代碼的塊較多是指以高壓縮率進(jìn)行編碼的塊較多。色彩 噪聲所表示的顏色是原色或接近原色的顏色。因此,對(duì)于形成色彩噪聲的像素和相鄰的像 素所分別表示的顏色,其亮度或色度大為不同。蚊式噪聲容易在亮度或色度大為不同的邊 緣區(qū)域產(chǎn)生。即,可以說(shuō),在以較高壓縮率對(duì)包含色彩噪聲的視頻進(jìn)行編碼時(shí),容易產(chǎn)生蚊 式噪聲。根據(jù)上述結(jié)構(gòu),在具有超過(guò)規(guī)定閾值的量化代碼的塊越多時(shí),越增強(qiáng)蚊式噪聲降低 處理的強(qiáng)度,因此,能有效降低色彩噪聲及因色彩噪聲而產(chǎn)生的蚊式噪聲。
[0676] 此外,本發(fā)明的方式22的視頻處理裝置優(yōu)選為,在上述方式19至21的任一方式 中,所述色彩噪聲降低處理包含降低判別為噪聲的原色的增益的色彩增益降低處理,所述 強(qiáng)度決定單元在具有超過(guò)規(guī)定閾值的量化代碼的塊的比例超過(guò)規(guī)定比例的情況下,在所述 彼此相鄰的原色像素的形成面積越小時(shí),越增強(qiáng)所述色彩增益降低處理的強(qiáng)度。
[0677] 作為色彩噪聲降低處理的一個(gè)方式,包含降低判別為色彩噪聲的原色的增益的色 彩增益降低處理。如上所述,色彩噪聲所表示的顏色是原色或接近原色的顏色。通過(guò)降低 該原色的增益,從而色彩噪聲所表示的顏色從原色或接近原色的顏色轉(zhuǎn)換為接近無(wú)彩色的 顏色。因此,通過(guò)降低原色的增益,從而使色彩噪聲不易被用戶看出。根據(jù)上述結(jié)構(gòu),能有 效降低色彩噪聲。
[0678] 此外,本發(fā)明的方式23的視頻處理方法降低對(duì)視頻信號(hào)進(jìn)行解碼而得到的視頻 的噪聲,其包含:強(qiáng)度決定工序,其基于構(gòu)成對(duì)象幀的各塊的量化代碼、該對(duì)象幀中所包含 的原色像素的數(shù)量、及彼此相鄰的原色像素的形成面積,決定色彩噪聲降低處理的強(qiáng)度;及 降噪工序,其將具有由所述強(qiáng)度決定單元所決定的強(qiáng)度的色彩噪聲降低處理應(yīng)用于所述對(duì) 象幀。
[0679] 根據(jù)上述那樣構(gòu)成的視頻處理方法,起到與上述視頻處理裝置同樣的效果。
[0680] 此外,本發(fā)明的方式24的視頻處理裝置降低對(duì)視頻信號(hào)進(jìn)行解碼而得到的視頻 的噪聲,其包括:降噪處理選擇單元,其基于構(gòu)成對(duì)象幀的各塊的量化代碼、和構(gòu)成該對(duì)象 幀的各塊的運(yùn)動(dòng)矢量信息,從具有互不相同的特性的多種降噪處理中選擇應(yīng)用于該對(duì)象幀 的至少一種降噪處理;及降噪單元,其將由所述降噪處理選擇單元所選擇的降噪處理應(yīng)用 于所述對(duì)象幀。
[0681] 此處,量化代碼是規(guī)定對(duì)視頻進(jìn)行編碼時(shí)的量化粗糙度的參數(shù),嵌入到幾乎所有 的編碼方式所編碼后的視頻信號(hào)中,因此,無(wú)需特別結(jié)構(gòu)就能容易地獲取。此外,在參照運(yùn) 動(dòng)矢量信息的上述結(jié)構(gòu)中,無(wú)需動(dòng)作檢測(cè)電路。因此,根據(jù)上述結(jié)構(gòu),可抑制成本上升。此 夕卜,在上述結(jié)構(gòu)中,基于量化代碼和運(yùn)動(dòng)矢量信息來(lái)選擇降噪處理,因此,能進(jìn)行有效的降 噪處理。
[0682] 此外,降噪處理的選擇是從具有互不相同的特性的多種降噪處理中進(jìn)行的,因此, 即使視頻信號(hào)中產(chǎn)生了各種特性的噪聲,也能進(jìn)行有效的降噪處理。
[0683] 這樣,根據(jù)上述結(jié)構(gòu),能抑制成本上升,并進(jìn)行有效的降噪處理。
[0684] 本發(fā)明的方式25的視頻處理裝置優(yōu)選為,在上述方式24中,還包括強(qiáng)度變更單 元,其基于構(gòu)成所述對(duì)象幀的各塊的量化代碼、和構(gòu)成所述對(duì)象幀的各塊的運(yùn)動(dòng)矢量信息, 變更由所述降噪處理選擇單元所選擇的降噪處理的強(qiáng)度。
[0685] 根據(jù)上述結(jié)構(gòu),基于構(gòu)成所述對(duì)象幀的各塊的量化代碼、和構(gòu)成所述對(duì)象幀的各 塊的運(yùn)動(dòng)矢量信息,變更由所述降噪處理選擇單元所選擇的降噪處理的強(qiáng)度,因此,能進(jìn)行 更有效的降噪處理。
[0686] 此外,本發(fā)明的方式26的視頻處理裝置優(yōu)選為,在上述方式25中,所述多種降噪 處理中包含塊噪聲降低處理,所述強(qiáng)度變更單元在判別為有動(dòng)作的塊越多時(shí),越增強(qiáng)塊噪 聲降低處理的強(qiáng)度。
[0687] 發(fā)明人得到如下見(jiàn)解:S卩,在有較大動(dòng)作的視頻中有包含更多的塊噪聲的趨勢(shì)。
[0688] 根據(jù)上述結(jié)構(gòu),在判別為有動(dòng)作的塊越多時(shí),越增強(qiáng)塊噪聲降低處理的強(qiáng)度,因 此,能根據(jù)視頻的動(dòng)作,來(lái)進(jìn)行更有效的降噪處理。
[0689] 此外,本發(fā)明的方式27的視頻處理裝置優(yōu)選為,在上述方式26中,所述塊噪聲降 低處理是參照所述對(duì)象幀和一個(gè)或多個(gè)其他幀來(lái)進(jìn)行的,所述強(qiáng)度變更單元在判別為有動(dòng) 作的塊越多時(shí),越增多所參照的所述其他幀的個(gè)數(shù)。
[0690] 根據(jù)上述結(jié)構(gòu),在參照對(duì)象幀和一個(gè)或多個(gè)其他幀來(lái)進(jìn)行的塊噪聲降低處理中, 在判別為有動(dòng)作的塊越多時(shí),越增多所參照的所述其他幀的個(gè)數(shù),因此,能進(jìn)行更有效的降 噪處理。
[0691] 此外,本發(fā)明的方式28的視頻處理裝置優(yōu)選為,在上述方式26中,所述塊噪聲降 低處理是參照所述對(duì)象幀上的對(duì)象像素和設(shè)定在該對(duì)象像素周邊的參照區(qū)域中所包含的 像素來(lái)進(jìn)行的,所述強(qiáng)度變更單元在判別為有動(dòng)作的塊越多時(shí),將所述參照區(qū)域設(shè)定得越 寬。
[0692] 根據(jù)上述結(jié)構(gòu),在參照對(duì)象幀上的對(duì)象像素和設(shè)定在該對(duì)象像素周邊的參照區(qū)域 中所包含的像素來(lái)進(jìn)行的塊噪聲降低處理中,在判別為有動(dòng)作的塊越多時(shí),將所述參照區(qū) 域設(shè)定得越寬,因此,能進(jìn)行更有效的降噪處理。
[0693] 此外,本發(fā)明的方式29的視頻處理裝置優(yōu)選為,在上述方式25至28的任一方式 中,所述多種降噪處理中包含蚊式噪聲降低處理,所述強(qiáng)度變更單元在具有超過(guò)規(guī)定閾值 的量化代碼的塊越多時(shí),越增強(qiáng)蚊式噪聲降低處理的強(qiáng)度。
[0694] 發(fā)明人得到如下見(jiàn)解:S卩,具有較大量化代碼的塊越多時(shí),有包含越多的蚊式噪聲 的趨勢(shì)。
[0695] 根據(jù)上述結(jié)構(gòu),在具有超過(guò)規(guī)定閾值的量化代碼的塊越多時(shí),越增強(qiáng)蚊式噪聲降 低處理的強(qiáng)度,因此,能進(jìn)行更有效的降噪處理。
[0696] 此外,本發(fā)明的方式30的視頻處理裝置優(yōu)選為,在上述方式29中,所述蚊式噪聲 降低處理是參照所述對(duì)象幀和一個(gè)或多個(gè)其他幀來(lái)進(jìn)行的,所述強(qiáng)度變更單元在具有超過(guò) 規(guī)定閾值的量化代碼的塊越多時(shí),越增多所參照的所述其他幀的個(gè)數(shù)。
[0697] 根據(jù)上述結(jié)構(gòu),在參照對(duì)象幀和一個(gè)或多個(gè)其他幀來(lái)進(jìn)行的蚊式噪聲降低處理 中,在具有超過(guò)規(guī)定閾值的量化代碼的塊越多時(shí),越增多所參照的所述其他幀的個(gè)數(shù),因 此,能進(jìn)行更有效的降噪處理。
[0698] 此外,本發(fā)明的方式31的視頻處理裝置優(yōu)選為,在上述方式29中,所述蚊式噪聲 降低處理是參照所述對(duì)象幀上的對(duì)象像素和設(shè)定在該對(duì)象像素周邊的參照區(qū)域中所包含 的像素來(lái)進(jìn)行的,所述強(qiáng)度變更單元在具有超過(guò)規(guī)定閾值的量化代碼的塊越多時(shí),將所述 參照區(qū)域設(shè)定得越寬。
[0699] 根據(jù)上述結(jié)構(gòu),在參照對(duì)象幀上的對(duì)象像素和設(shè)定在該對(duì)象像素周邊的參照區(qū)域 中所包含的像素來(lái)進(jìn)行的蚊式噪聲降低處理中,在具有超過(guò)規(guī)定閾值的量化代碼的塊越多 時(shí),將所述參照區(qū)域設(shè)定得越寬,因此,能進(jìn)行更有效的降噪處理。
[0700] 此外,本發(fā)明的方式32的視頻處理裝置優(yōu)選為,在上述方式29至31的任一方式 中,所述強(qiáng)度變更單元在判別為有動(dòng)作的塊越多時(shí),越減小所述規(guī)定閾值。
[0701] 發(fā)明人得到如下見(jiàn)解:即,在源視頻中包含有"發(fā)白噪聲"的情況下,即使降低壓縮 率,即將量化代碼設(shè)定得較小,視頻自身有時(shí)也包含較多的噪聲,對(duì)于這種視頻,通過(guò)動(dòng)作 判別,有判定為"有動(dòng)作"的塊較多的趨勢(shì)。
[0702] 根據(jù)上述結(jié)構(gòu),在判別為有動(dòng)作的塊越多時(shí),越減小所述規(guī)定閾值,因此,能適當(dāng) 降低這種"發(fā)白噪聲"。
[0703] 此外,本發(fā)明的方式33的視頻處理裝置優(yōu)選為,在上述方式24至32的任一方式 中,所述降噪處理選擇單元對(duì)設(shè)定在所述對(duì)象幀上的對(duì)象區(qū)域中的噪聲產(chǎn)生模式進(jìn)行識(shí) 另IJ,并基于識(shí)別結(jié)果,從所述多種降噪處理中選擇應(yīng)用于該對(duì)象區(qū)域的至少一種降噪處理。
[0704] 根據(jù)上述結(jié)構(gòu),對(duì)設(shè)定在所述對(duì)象幀上的對(duì)象區(qū)域中的噪聲產(chǎn)生模式進(jìn)行識(shí)別, 并基于識(shí)別結(jié)果,從所述多種降噪處理中選擇應(yīng)用于該對(duì)象區(qū)域的至少一種降噪處理,因 此,能進(jìn)行更精細(xì)的降噪處理。
[0705] 此外,本發(fā)明的方式34的視頻處理方法降低對(duì)視頻信號(hào)進(jìn)行解碼而得到的視頻 的噪聲,其包含:降噪處理選擇工序,其基于構(gòu)成對(duì)象幀的各塊的量化代碼、和構(gòu)成該對(duì)象 幀的各塊的運(yùn)動(dòng)矢量信息,從具有互不相同的特性的多種降噪處理中選擇應(yīng)用于該對(duì)象幀 的至少一種降噪處理;及降噪工序,其將由所述降噪處理選擇工序所選擇的降噪處理應(yīng)用 于所述對(duì)象幀。
[0706] 根據(jù)上述那樣構(gòu)成的視頻處理方法,起到與上述視頻處理裝置同樣的效果。
[0707] 此外,本發(fā)明的方式35的視頻處理裝置降低對(duì)視頻信號(hào)進(jìn)行解碼而得到的視頻 的噪聲,其包括:設(shè)定單元,其獲取構(gòu)成對(duì)象幀的各塊的量化代碼值,基于各自的所述量化 代碼值計(jì)算所述對(duì)象幀中的降噪?yún)?shù),將規(guī)定范圍內(nèi)的降噪處理強(qiáng)度設(shè)定成與規(guī)定范圍內(nèi) 的所述降噪?yún)?shù)具有正相關(guān)性;及降噪單元,其對(duì)所述對(duì)象幀實(shí)施利用了由所述設(shè)定單元 所設(shè)定的所述降噪處理強(qiáng)度的降噪處理。
[0708] 根據(jù)上述結(jié)構(gòu),所述降噪?yún)?shù)是基于構(gòu)成所述對(duì)象幀的各塊的量化代碼值來(lái)計(jì)算 出的連續(xù)參數(shù)。而且,在規(guī)定范圍內(nèi),所述降噪處理強(qiáng)度是與所述降噪?yún)?shù)具有正相關(guān)性的 連續(xù)參數(shù)。因此,基于構(gòu)成所述對(duì)象幀的各塊的量化代碼值,所述設(shè)定單元能設(shè)定連續(xù)的降 噪處理強(qiáng)度,所述降噪單元能實(shí)施連續(xù)的強(qiáng)度的降噪處理。因此,本發(fā)明的一實(shí)施方式的視 頻處理裝置能根據(jù)構(gòu)成所述對(duì)象幀的各塊的量化代碼值,來(lái)對(duì)所述對(duì)象幀實(shí)施適當(dāng)強(qiáng)度的 降噪處理。
[0709] 此外,本發(fā)明的方式36的視頻處理裝置優(yōu)選為,在上述方式35中,設(shè)定單元通過(guò) 求出所述對(duì)象幀所包含的各量化代碼值的、以具有該量化代碼值的塊的數(shù)量為權(quán)重的加權(quán) 求和,來(lái)計(jì)算所述降噪?yún)?shù)。
[0710] 根據(jù)上述結(jié)構(gòu),所述設(shè)定單元能基于所述對(duì)象幀所包含的各塊所具有的量化代碼 值,來(lái)計(jì)算出適合于所述對(duì)象幀的所述降噪?yún)?shù)。因此,本發(fā)明的一實(shí)施方式的視頻處理 裝置能根據(jù)構(gòu)成所述對(duì)象幀的各塊的量化代碼值,來(lái)對(duì)所述對(duì)象幀實(shí)施適當(dāng)強(qiáng)度的降噪處 理。
[0711] 此外,本發(fā)明的方式37的視頻處理裝置優(yōu)選為,在上述方式35或36中,所述設(shè)定 單元在設(shè)定所述降噪處理強(qiáng)度時(shí)使用的所述正相關(guān)性由一次函數(shù)來(lái)表示。
[0712] 根據(jù)上述結(jié)構(gòu),所述設(shè)定單元能將所述降噪處理強(qiáng)度和所述降噪?yún)?shù)設(shè)定成具有 線性相關(guān)性。
[0713] 此外,本發(fā)明的方式38的視頻處理裝置優(yōu)選為,在上述方式35至37的任一方式 中,所述降噪處理強(qiáng)度在所述降噪?yún)?shù)的從〇到所述規(guī)定范圍的下限為止的范圍內(nèi)、及所 述降噪?yún)?shù)的從所述規(guī)定范圍的上限到降噪?yún)?shù)的最大值為止的范圍內(nèi)不依賴于所述降 噪?yún)?shù)。
[0714] 根據(jù)上述結(jié)構(gòu),在所述對(duì)象幀所包含的噪聲依賴于所述降噪?yún)?shù)的范圍內(nèi),所述 降噪處理強(qiáng)度和所述降噪?yún)?shù)具有正相關(guān)性。因此,所述設(shè)定單元能根據(jù)所述對(duì)象代碼所 包含的各塊所具有的各自的所述量化代碼值,來(lái)設(shè)定適當(dāng)?shù)乃鼋翟胩幚韽?qiáng)度。
[0715] 此外,本發(fā)明的方式39的視頻處理裝置優(yōu)選為,在上述方式35至38的任一方式 中,所述降噪單元所實(shí)施的降噪處理至少包含塊噪聲降低處理及蚊式噪聲降低處理中的任 一方。
[0716] 塊噪聲及蚊式噪聲依賴于對(duì)視頻進(jìn)行編碼及解碼時(shí)的壓縮率而具有產(chǎn)生頻度變 高的趨勢(shì)。根據(jù)上述結(jié)構(gòu),降噪單元根據(jù)所述降噪處理強(qiáng)度,對(duì)所述對(duì)象幀實(shí)施包含塊噪聲 降低處理及蚊式噪聲降低處理中的任一方的降噪處理。因此,所述降噪單元能實(shí)施有效的 降噪處理。
[0717] 此外,本發(fā)明的方式40的視頻處理方法包含:設(shè)定單元,其獲取構(gòu)成對(duì)象幀的各 塊的量化代碼值,基于各自的所述量化代碼值計(jì)算所述對(duì)象幀中的降噪?yún)?shù),將規(guī)定范圍 內(nèi)的所述降噪?yún)?shù)設(shè)定成與規(guī)定范圍內(nèi)的降噪處理強(qiáng)度具有正相關(guān)性;及降噪單元,其對(duì) 所述對(duì)象幀實(shí)施利用了由所述設(shè)定單元所設(shè)定的所述降噪處理強(qiáng)度的降噪處理。
[0718] 根據(jù)上述那樣構(gòu)成的視頻處理方法,起到與上述視頻處理裝置同樣的效果。
[0719] 此外,本發(fā)明的方式41的視頻處理裝置包括:設(shè)定單元,其基于構(gòu)成視頻數(shù)據(jù)中 所包含的I圖像的各塊的量化代碼,來(lái)設(shè)定降噪?yún)?shù)的偏移量;變更單元,其根據(jù)I圖像彼 此的幀間隔,來(lái)變更所述偏移量;及降噪單元,其對(duì)所述視頻數(shù)據(jù)實(shí)施降噪處理,該降噪處 理利用了包含由所述變更單元變更后的偏移量的降噪?yún)?shù)。
[0720] 發(fā)明人得到如下見(jiàn)解:S卩,I圖像彼此的幀間隔與噪聲量彼此關(guān)聯(lián)。
[0721] 根據(jù)上述結(jié)構(gòu),所述設(shè)定單元基于構(gòu)成視頻數(shù)據(jù)中所包含的I圖像的各塊的量化 代碼,來(lái)設(shè)定所述偏移量,所述變更單元根據(jù)所述I圖像彼此的幀間隔,來(lái)變更所述偏移 量。因此,該視頻處理裝置能進(jìn)行有效的降噪處理。
[0722] 此外,所述量化代碼是規(guī)定對(duì)視頻進(jìn)行編碼時(shí)的量化粗糙度的參數(shù)。此外,I圖像 彼此的幀間隔是在對(duì)視頻進(jìn)行編碼時(shí)編碼裝置確定的參數(shù)。量化代碼及所述I圖像彼此的 幀間隔嵌入到幾乎所有的編碼方式所編碼后的視頻數(shù)據(jù)中,因此,無(wú)需特別結(jié)構(gòu)就能容易 地獲取。
[0723] 因此,根據(jù)上述結(jié)構(gòu),能抑制成本上升,并進(jìn)行有效的降噪處理。
[0724] 此外,本發(fā)明的方式42的視頻處理裝置優(yōu)選為,在上述方式41中,所述變更單元 以與所述I圖像彼此的幀間隔具有正相關(guān)性的方式變更所述偏移量。
[0725] 發(fā)明人得到如下見(jiàn)解:即,I圖像彼此的幀間隔與噪聲量具有正相關(guān)性。
[0726] 根據(jù)上述結(jié)構(gòu),所述變更單元在所述I圖像彼此的幀間隔越大時(shí),以所述偏移量 的值越大的方式進(jìn)行變更。即,所述I圖像彼此的幀間隔越大,降噪單元對(duì)視頻實(shí)施強(qiáng)度越 強(qiáng)的降噪處理。因而,能隨著所述I圖像彼此的幀間隔的變化來(lái)實(shí)施適當(dāng)?shù)慕翟胩幚怼?br>
[0727] 此外,本發(fā)明的方式43的視頻處理裝置優(yōu)選為,在上述方式42中,所述變更單元 還以與所述視頻數(shù)據(jù)中所包含的P圖像彼此的幀間隔具有正相關(guān)性的方式變更所述偏移 量。
[0728] 發(fā)明人得到如下見(jiàn)解:S卩,P圖像彼此的幀間隔與噪聲量具有正相關(guān)性。
[0729] 根據(jù)上述結(jié)構(gòu),所述變更單元還在所述P圖像彼此的幀間隔越大時(shí),以所述偏移 量的值越大的方式進(jìn)行變更。即,所述P圖像彼此的幀間隔越大,降噪單元對(duì)視頻實(shí)施強(qiáng)度 越強(qiáng)的降噪處理。因此,能在所述I圖像彼此的幀間隔的變化的基礎(chǔ)上,還考慮所述P圖像 彼此的幀間隔的變化來(lái)實(shí)施適當(dāng)?shù)慕翟胩幚怼?br>
[0730] 此外,本發(fā)明的方式44的視頻處理裝置優(yōu)選為,在上述方式43中,所述變更單元 基于(a)第1系數(shù)與所述I圖像彼此的幀間隔之積、及(b)小于該第1系數(shù)的第2系數(shù)與 所述P圖像彼此的幀間隔之積、的和來(lái)導(dǎo)出所述偏移量。
[0731] 所述變更單元通過(guò)導(dǎo)出(a)所述第1系數(shù)與所述I圖像彼此的幀間隔之積,從而 導(dǎo)出基于所述I圖像彼此的幀間隔的所述偏移量的變化量。此外,所述變更單元通過(guò)導(dǎo)出 (b)所述第2系數(shù)與所述P圖像彼此的幀間隔之積,從而導(dǎo)出基于所述P圖像彼此的幀間隔 的所述偏移量的變化量。進(jìn)一步地,所述變更單元根據(jù)基于所述I圖像彼此的幀間隔的所 述偏移量的變化量、與基于所述P圖像彼此的幀間隔的所述偏移量的變化量的和,來(lái)導(dǎo)出 所述偏移量。
[0732] 此時(shí),所述第1系數(shù)大于所述第2系數(shù)。該結(jié)構(gòu)是基于發(fā)明人獲得的如下見(jiàn)解: 艮P,作為使視頻的畫質(zhì)劣化(產(chǎn)生噪聲)的主要原因,所述I圖像彼此的幀間隔比所述P圖 像彼此的幀間隔更重要。根據(jù)上述結(jié)構(gòu),能與所述I圖像彼此的幀間隔、所述P圖像彼此的 幀間隔分別使視頻的畫質(zhì)劣化的程度相應(yīng)地的對(duì)視頻實(shí)施降噪處理。
[0733] 此外,本發(fā)明的方式45的視頻處理裝置優(yōu)選為,在上述方式41至44的任一方式 中,所述設(shè)定單元在構(gòu)成所述I圖像的各塊中,具有超過(guò)規(guī)定閾值的量化代碼的塊越多時(shí), 將所述偏移量設(shè)定得越大。
[0734] 根據(jù)上述結(jié)構(gòu),所述設(shè)定單元在構(gòu)成所述I圖像的各塊中,具有超過(guò)所述閾值的 量化代碼的塊越多時(shí),將所述偏移量設(shè)定得越大。因此,能在壓縮視頻的壓縮率越高時(shí),對(duì) 視頻實(shí)施強(qiáng)度越強(qiáng)的降噪處理。
[0735] 此外,本發(fā)明的方式46的視頻處理方法包含:設(shè)定工序,其基于構(gòu)成視頻數(shù)據(jù)中 所包含的I圖像的各塊的量化代碼,來(lái)設(shè)定降噪?yún)?shù)的偏移量;變更工序,其根據(jù)I圖像彼 此的幀間隔,來(lái)變更由所述設(shè)定單元所設(shè)定的所述偏移量;及降噪工序,其對(duì)所述視頻數(shù)據(jù) 實(shí)施降噪處理,該降噪處理利用了具有由所述變更單元變更后的偏移量的降噪?yún)?shù)。
[0736] 根據(jù)上述那樣構(gòu)成的視頻處理方法,起到與上述視頻處理裝置同樣的效果。
[0737] 此外,包括上述各方式的視頻處理裝置的電視接收機(jī)也包含在本發(fā)明的范圍內(nèi)。
[0738] 此外,作為上述各方式的視頻處理裝置所包括的各單元,用于使計(jì)算機(jī)動(dòng)作的程 序及記錄有這種程序的計(jì)算機(jī)可讀取的記錄介質(zhì)也包含在本發(fā)明的范疇內(nèi)。
[0739] 本發(fā)明并不局限于上述各實(shí)施方式,可以在權(quán)利要求所示的范圍內(nèi)作出各種變 更,對(duì)分別在不同實(shí)施方式中公開(kāi)的技術(shù)手段進(jìn)行適當(dāng)組合后得到的實(shí)施方式也包含在本 發(fā)明的技術(shù)范圍內(nèi)。此外,通過(guò)將各實(shí)施方式所分別公開(kāi)的技術(shù)方案進(jìn)行組合,能形成新的 技術(shù)特征。
[0740] 工業(yè)上的實(shí)用性
[0741] 本發(fā)明可特別適用于降低視頻的噪聲用的視頻處理裝置。
[0742] 標(biāo)號(hào)說(shuō)明
[0743] 1100、2100、3100、4100、5100、6100 視頻處理裝置
[0744] 110視頻獲取部
[0745] 120解碼處理部
[0746] 130量化參數(shù)獲取部
[0747] 140存儲(chǔ)部
[0748] 1150、3150、4150噪聲量計(jì)算部(降噪處理選擇單元、強(qiáng)度變更單元)
[0749] 2150、5150、6150噪聲量計(jì)算部(設(shè)定單元)
[0750] 1160、2160、3160、4160、5160、6160 降噪處理部(降噪單元)
[0751] 1200動(dòng)作判別部
[0752] 2200頻率判別部(頻率判別單元)
[0753] 3200彩度判別部
[0754] 5200 NR判別值計(jì)算部
[0755] 6200偏移量計(jì)算部
[0756] 161高頻濾波器
[0757] 162邊緣濾波器
[0758] 171核化處理部
[0759] 172銳度處理部
【權(quán)利要求】
1. 一種視頻處理裝置,該視頻處理裝置降低對(duì)視頻信號(hào)進(jìn)行解碼而得到的視頻的噪 聲,其特征在于,包括 : 降噪處理選擇單元,其基于構(gòu)成對(duì)象幀的各塊的量化代碼、和構(gòu)成該對(duì)象幀的各塊的 動(dòng)作判別結(jié)果,從具有互不相同的特性的多種降噪處理中選擇應(yīng)用于該對(duì)象幀的至少一種 降噪處理;及 降噪單元,其將由所述降噪處理選擇單元所選擇的降噪處理應(yīng)用于所述對(duì)象幀。
2. 如權(quán)利要求1所述的視頻處理裝置,其特征在于, 還包括強(qiáng)度變更單元,其基于構(gòu)成所述對(duì)象幀的各塊的量化代碼、和構(gòu)成所述對(duì)象幀 的各塊的動(dòng)作判別結(jié)果,變更由所述降噪處理選擇單元所選擇的降噪處理的強(qiáng)度。
3. 如權(quán)利要求2所述的視頻處理裝置,其特征在于, 所述多種降噪處理中包含塊噪聲降低處理, 所述強(qiáng)度變更單元在判別為有動(dòng)作的塊越多時(shí),越增強(qiáng)塊噪聲降低處理的強(qiáng)度。
4. 如權(quán)利要求3所述的視頻處理裝置,其特征在于, 所述塊噪聲降低處理是參照所述對(duì)象幀和一個(gè)或多個(gè)其他幀來(lái)進(jìn)行的, 所述強(qiáng)度變更單元在判別為有動(dòng)作的塊越多時(shí),越增多所參照的所述其他幀的個(gè)數(shù)。
5. 如權(quán)利要求3所述的視頻處理裝置,其特征在于, 所述塊噪聲降低處理是參照所述對(duì)象幀上的對(duì)象像素和設(shè)定在該對(duì)象像素周邊的參 照區(qū)域中所包含的像素來(lái)進(jìn)行的, 所述強(qiáng)度變更單元在判別為有動(dòng)作的塊越多時(shí),將所述參照區(qū)域設(shè)定得越寬。
6. 如權(quán)利要求2至5的任一項(xiàng)所述的視頻處理裝置,其特征在于, 所述多種降噪處理中包含蚊式噪聲降低處理, 所述強(qiáng)度變更單元在具有超過(guò)規(guī)定閾值的量化代碼的塊越多時(shí),越增強(qiáng)所述蚊式噪聲 降低處理的強(qiáng)度。
7. 如權(quán)利要求6所述的視頻處理裝置,其特征在于, 所述蚊式噪聲降低處理是參照所述對(duì)象幀和一個(gè)或多個(gè)其他幀來(lái)進(jìn)行的, 所述強(qiáng)度變更單元在具有超過(guò)規(guī)定閾值的量化代碼的塊越多時(shí),越增多所參照的所述 其他幀的個(gè)數(shù)。
8. 如權(quán)利要求6所述的視頻處理裝置,其特征在于, 所述蚊式噪聲降低處理是參照所述對(duì)象幀上的對(duì)象像素和設(shè)定在該對(duì)象像素周邊的 參照區(qū)域中所包含的像素來(lái)進(jìn)行的, 所述強(qiáng)度變更單元在具有超過(guò)規(guī)定閾值的量化代碼的塊越多時(shí),將所述參照區(qū)域設(shè)定 得越寬。
9. 如權(quán)利要求6至8的任一項(xiàng)所述的視頻處理裝置,其特征在于, 所述強(qiáng)度變更單元在判別為有動(dòng)作的塊越多時(shí),越減小所述規(guī)定閾值。
10. 如權(quán)利要求1至9的任一項(xiàng)所述的視頻處理裝置,其特征在于, 所述降噪處理選擇單元對(duì)設(shè)定在所述對(duì)象幀上的對(duì)象區(qū)域中的噪聲產(chǎn)生模式進(jìn)行識(shí) 另IJ,并基于識(shí)別結(jié)果,從所述多種降噪處理中選擇應(yīng)用于該對(duì)象區(qū)域的至少一種降噪處理。
11. 一種視頻處理方法,該視頻處理方法降低對(duì)視頻信號(hào)進(jìn)行解碼而得到的視頻的噪 聲,其特征在于,包含 : 降噪處理選擇工序,其基于構(gòu)成對(duì)象幀的各塊的量化代碼、和構(gòu)成該對(duì)象幀的各塊的 動(dòng)作判別結(jié)果,從具有互不相同的特性的多種降噪處理中選擇應(yīng)用于該對(duì)象幀的至少一種 降噪處理;及 降噪工序,其將由所述降噪處理選擇工序所選擇的降噪處理應(yīng)用于所述對(duì)象幀。
12. -種視頻處理裝置,該視頻處理裝置降低對(duì)視頻信號(hào)進(jìn)行解碼而得到的視頻的噪 聲,其特征在于,包括 : 設(shè)定單元,其基于構(gòu)成對(duì)象幀的各塊的量化代碼、和構(gòu)成該對(duì)象幀的各塊的頻率特性 或各像素的邊緣信息,設(shè)定蚊式噪聲降低參數(shù);及 降噪單元,其對(duì)該對(duì)象幀實(shí)施利用了由所述設(shè)定單元所設(shè)定的蚊式噪聲降低參數(shù)的蚊 式噪聲降低處理。
13. 如權(quán)利要求12所述的視頻處理裝置,其特征在于, 還包括頻率判別單元,其基于構(gòu)成所述對(duì)象幀的各塊的頻率分量,將所述對(duì)象幀中的 頻率分量的直方圖作為所述頻率特性導(dǎo)出, 所述設(shè)定單元從所述頻率分量的直方圖中,分別導(dǎo)出頻率低于規(guī)定的第1頻率的第1 頻率分量、頻率高于所述第1頻率且低于規(guī)定的第2頻率的第2頻率分量、及頻率高于所述 規(guī)定的第2頻率的第3頻率分量,在第3頻率分量相對(duì)于總頻率分量的比例越高時(shí),將蚊式 噪聲降低參數(shù)設(shè)定得越大。
14. 如權(quán)利要求13所述的視頻處理裝置,其特征在于, 所述設(shè)定單元在所述頻率分量的直方圖中,所述第1頻率分量相對(duì)于總頻率分量的比 例越高時(shí),將蚊式噪聲降低參數(shù)設(shè)定得越小。
15. 如權(quán)利要求13或14所述的視頻處理裝置,其特征在于, 所述設(shè)定單元在具有超過(guò)規(guī)定閾值的量化代碼的塊越多時(shí),將蚊式噪聲降低參數(shù)設(shè)定 得越大。
16. 如權(quán)利要求12所述的視頻處理裝置,其特征在于, 還包括邊緣信息導(dǎo)出單元,其對(duì)構(gòu)成所述對(duì)象幀的各像素所具有的像素值實(shí)施邊緣信 息提取處理,將所述對(duì)象幀中的邊緣直方圖作為所述邊緣信息導(dǎo)出, 所述設(shè)定單元從所述邊緣直方圖中,導(dǎo)出亮度差大于規(guī)定亮度差的像素?cái)?shù)相對(duì)于構(gòu)成 所述對(duì)象幀的總像素?cái)?shù)的比例,在該比例越高時(shí),將蚊式噪聲降低參數(shù)設(shè)定得越大。
17. 如權(quán)利要求13至15的任一項(xiàng)所述的視頻處理裝置,其特征在于, 所述設(shè)定單元在所述第3頻率分量的比例越高時(shí),越減小所述規(guī)定閾值。
18. -種視頻處理方法,該視頻處理方法降低對(duì)視頻信號(hào)進(jìn)行解碼而得到的視頻的噪 聲,其特征在于,包括 : 設(shè)定工序,其基于構(gòu)成對(duì)象幀的各塊的量化代碼、和構(gòu)成該對(duì)象幀的各塊的頻率特性 或各像素的邊緣信息,設(shè)定蚊式噪聲降低參數(shù);及 降噪工序,其對(duì)該對(duì)象幀實(shí)施利用了由所述設(shè)定工序所設(shè)定的蚊式噪聲降低參數(shù)的蚊 式噪聲降低處理。
19. 一種視頻處理裝置,該視頻處理裝置降低對(duì)視頻信號(hào)進(jìn)行解碼而得到的視頻的噪 聲,其特征在于,包括 : 強(qiáng)度決定單元,其基于構(gòu)成對(duì)象幀的各塊的量化代碼、該對(duì)象幀中所包含的原色像素 的數(shù)量、及彼此相鄰的原色像素的形成面積,決定色彩噪聲降低處理的強(qiáng)度;及 降噪單元,其將具有由所述強(qiáng)度決定單元所決定的強(qiáng)度的色彩噪聲降低處理應(yīng)用于所 述對(duì)象中貞。
20. 如權(quán)利要求19所述的視頻處理裝置,其特征在于, 在所述色彩噪聲降低處理中包含蚊式噪聲降低處理, 所述強(qiáng)度決定單元在所述對(duì)象幀中所包含的所述原色像素的數(shù)量越多、且所述彼此相 鄰的原色像素的形成面積越小時(shí),越增強(qiáng)蚊式噪聲降低處理的強(qiáng)度。
21. 如權(quán)利要求20所述的視頻處理裝置,其特征在于, 所述強(qiáng)度決定單元在具有超過(guò)規(guī)定閾值的量化代碼的塊越多時(shí),越增強(qiáng)蚊式噪聲降低 處理的強(qiáng)度。
22. 如權(quán)利要求19至21的任一項(xiàng)所述的視頻處理裝置,其特征在于, 所述色彩噪聲降低處理包含降低判別為噪聲的原色的增益的色彩增益降低處理, 所述強(qiáng)度決定單元在具有超過(guò)規(guī)定閾值的量化代碼的塊的比例超過(guò)規(guī)定比例的情況 下,在所述彼此相鄰的原色像素的形成面積越小時(shí),越增強(qiáng)所述色彩增益降低處理的強(qiáng)度。
23. -種視頻處理方法,該視頻處理方法降低對(duì)視頻信號(hào)進(jìn)行解碼而得到的視頻的噪 聲,其特征在于,包括 : 強(qiáng)度決定工序,其基于構(gòu)成對(duì)象幀的各塊的量化代碼、該對(duì)象幀中所包含的原色像素 的數(shù)量、及彼此相鄰的原色像素的形成面積,決定色彩噪聲降低處理的強(qiáng)度;及 降噪工序,其將具有由所述強(qiáng)度決定工序所決定的強(qiáng)度的色彩噪聲降低處理應(yīng)用于所 述對(duì)象中貞。
24. -種視頻處理裝置,該視頻處理裝置降低對(duì)視頻信號(hào)進(jìn)行解碼而得到的視頻的噪 聲,其特征在于,包括 : 降噪處理選擇單元,其基于構(gòu)成對(duì)象幀的各塊的量化代碼、和構(gòu)成該對(duì)象幀的各塊的 運(yùn)動(dòng)矢量信息,從具有互不相同的特性的多種降噪處理中選擇應(yīng)用于該對(duì)象幀的至少一種 降噪處理;及 降噪單元,其將由所述降噪處理選擇單元所選擇的降噪處理應(yīng)用于所述對(duì)象幀。
25. 如權(quán)利要求24所述的視頻處理裝置,其特征在于, 還包括強(qiáng)度變更單元,其基于構(gòu)成所述對(duì)象幀的各塊的量化代碼、和構(gòu)成所述對(duì)象幀 的各塊的運(yùn)動(dòng)矢量信息,變更由所述降噪處理選擇單元所選擇的降噪處理的強(qiáng)度。
26. 如權(quán)利要求25所述的視頻處理裝置,其特征在于, 所述多種降噪處理中包含塊噪聲降低處理, 所述強(qiáng)度變更單元在判別為有動(dòng)作的塊越多時(shí),越增強(qiáng)塊噪聲降低處理的強(qiáng)度。
27. 如權(quán)利要求26所述的視頻處理裝置,其特征在于, 所述塊噪聲降低處理是參照所述對(duì)象幀和一個(gè)或多個(gè)其他幀來(lái)進(jìn)行的, 所述強(qiáng)度變更單元在判別為有動(dòng)作的塊越多時(shí),越增多所參照的所述其他幀的個(gè)數(shù)。
28. 如權(quán)利要求26所述的視頻處理裝置,其特征在于, 所述塊噪聲降低處理是參照所述對(duì)象幀上的對(duì)象像素和設(shè)定在該對(duì)象像素周邊的參 照區(qū)域中所包含的像素來(lái)進(jìn)行的, 所述強(qiáng)度變更單元在判別為有動(dòng)作的塊越多時(shí),將所述參照區(qū)域設(shè)定得越寬。
29. 如權(quán)利要求25至28的任一項(xiàng)所述的視頻處理裝置,其特征在于, 所述多種降噪處理中包含蚊式噪聲降低處理, 所述強(qiáng)度變更單元在具有超過(guò)規(guī)定閾值的量化代碼的塊越多時(shí),越增強(qiáng)蚊式噪聲降低 處理的強(qiáng)度。
30. 如權(quán)利要求29所述的視頻處理裝置,其特征在于, 所述蚊式噪聲降低處理是參照所述對(duì)象幀和一個(gè)或多個(gè)其他幀來(lái)進(jìn)行的, 所述強(qiáng)度變更單元在具有超過(guò)規(guī)定閾值的量化代碼的塊越多時(shí),越增多所參照的所述 其他幀的個(gè)數(shù)。
31. 如權(quán)利要求29所述的視頻處理裝置,其特征在于, 所述蚊式噪聲降低處理是參照所述對(duì)象幀上的對(duì)象像素和設(shè)定在該對(duì)象像素周邊的 參照區(qū)域中所包含的像素來(lái)進(jìn)行的, 所述強(qiáng)度變更單元在具有超過(guò)規(guī)定閾值的量化代碼的塊越多時(shí),將所述參照區(qū)域設(shè)定 得越寬。
32. 如權(quán)利要求29至31的任一項(xiàng)所述的視頻處理裝置,其特征在于, 所述強(qiáng)度變更單元在判別為有動(dòng)作的塊越多時(shí),越減小所述規(guī)定閾值。
33. 如權(quán)利要求24至32的任一項(xiàng)所述的視頻處理裝置,其特征在于, 所述降噪處理選擇單元對(duì)設(shè)定在所述對(duì)象幀上的對(duì)象區(qū)域中的噪聲產(chǎn)生模式進(jìn)行識(shí) 另IJ,并基于識(shí)別結(jié)果,從所述多種降噪處理中選擇應(yīng)用于該對(duì)象區(qū)域的至少一種降噪處理。
34. -種視頻處理方法,該視頻處理方法降低對(duì)視頻信號(hào)進(jìn)行解碼而得到的視頻的噪 聲,其特征在于,包含 : 降噪處理選擇工序,其基于構(gòu)成對(duì)象幀的各塊的量化代碼、和構(gòu)成該對(duì)象幀的各塊的 運(yùn)動(dòng)矢量信息,從具有互不相同的特性的多種降噪處理中選擇應(yīng)用于該對(duì)象幀的至少一種 降噪處理;及 降噪工序,其將由所述降噪處理選擇工序所選擇的降噪處理應(yīng)用于所述對(duì)象幀。
35. -種視頻處理裝置,該視頻處理裝置降低對(duì)視頻信號(hào)進(jìn)行解碼而得到的視頻的噪 聲,其特征在于,包括 : 設(shè)定單元,其獲取構(gòu)成對(duì)象幀的各塊的量化代碼值,基于各自的所述量化代碼值計(jì)算 所述對(duì)象幀中的降噪?yún)?shù),將規(guī)定范圍內(nèi)的降噪處理強(qiáng)度設(shè)定成與規(guī)定范圍內(nèi)的所述降噪 參數(shù)具有正相關(guān)性;及 降噪單元,其對(duì)所述對(duì)象幀實(shí)施利用了由所述設(shè)定單元所設(shè)定的所述降噪處理強(qiáng)度的 降噪處理。
36. 如權(quán)利要求35所述的視頻處理裝置,其特征在于, 所述設(shè)定單元通過(guò)求出所述對(duì)象幀所包含的各量化代碼值的、以具有該量化代碼值的 塊的數(shù)量為權(quán)重的加權(quán)求和,來(lái)計(jì)算所述降噪?yún)?shù)。
37. 如權(quán)利要求35或36所述的視頻處理裝置,其特征在于, 所述設(shè)定單元在設(shè)定所述降噪處理強(qiáng)度時(shí)使用的所述正相關(guān)性由一次函數(shù)來(lái)表示。
38. 如權(quán)利要求35至37的任一項(xiàng)所述的視頻處理裝置,其特征在于, 所述降噪處理強(qiáng)度在所述降噪?yún)?shù)的從〇到所述規(guī)定范圍的下限為止的范圍內(nèi)、及所 述降噪?yún)?shù)的從所述規(guī)定范圍的上限到降噪?yún)?shù)的最大值為止的范圍內(nèi)不依賴于所述降 噪?yún)?shù)。
39. 如權(quán)利要求35至38的任一項(xiàng)所述的視頻處理裝置,其特征在于, 所述降噪單元所實(shí)施的降噪處理至少包含塊噪聲降低處理及蚊式噪聲降低處理中的 任一方。
40. -種視頻處理方法,該視頻處理方法降低對(duì)視頻信號(hào)進(jìn)行解碼而得到的視頻的噪 聲,其特征在于,包含 : 設(shè)定工序,其獲取構(gòu)成對(duì)象幀的各塊的量化代碼值,基于各自的所述量化代碼值計(jì)算 所述對(duì)象幀中的降噪?yún)?shù),將規(guī)定范圍內(nèi)的所述降噪?yún)?shù)設(shè)定成與規(guī)定范圍內(nèi)的降噪處理 強(qiáng)度具有正相關(guān)性;及 降噪工序,其對(duì)所述對(duì)象幀實(shí)施利用了由所述設(shè)定工序所設(shè)定的所述降噪處理強(qiáng)度的 降噪處理。
41. 一種視頻處理裝置,其特征在于, 設(shè)定單元,其基于構(gòu)成視頻數(shù)據(jù)中所包含的I圖像的各塊的量化代碼,來(lái)設(shè)定降噪?yún)?數(shù)的偏移量; 變更單元,其根據(jù)I圖像彼此的幀間隔,來(lái)變更所述偏移量;及 降噪單元,其對(duì)所述視頻數(shù)據(jù)實(shí)施降噪處理,該降噪處理利用了包含由所述變更單元 變更后的偏移量的降噪?yún)?shù)。
42. 如權(quán)利要求41所述的視頻處理裝置,其特征在于, 所述變更單元以與所述I圖像彼此的幀間隔具有正相關(guān)性的方式變更所述偏移量。
43. 如權(quán)利要求42所述的視頻處理裝置,其特征在于, 所述變更單元還以與所述視頻數(shù)據(jù)中所包含的P圖像彼此的幀間隔具有正相關(guān)性的 方式變更所述偏移量。
44. 如權(quán)利要求43所述的視頻處理裝置,其特征在于, 所述變更單元基于(a)第1系數(shù)與所述I圖像彼此的幀間隔之積、及(b)小于該第1 系數(shù)的第2系數(shù)與所述P圖像彼此的幀間隔之積、的和來(lái)導(dǎo)出所述偏移量。
45. 如權(quán)利要求41至44的任一項(xiàng)所述的視頻處理裝置,其特征在于, 所述設(shè)定單元在構(gòu)成所述I圖像的各塊中,具有超過(guò)規(guī)定閾值的量化代碼的塊越多 時(shí),將所述偏移量設(shè)定得越大。
46. -種視頻處理方法,該視頻處理方法降低對(duì)視頻信號(hào)進(jìn)行解碼而得到的視頻的噪 聲,其特征在于,包含 : 設(shè)定工序,其基于構(gòu)成視頻數(shù)據(jù)中所包含的I圖像的各塊的量化代碼,來(lái)設(shè)定降噪?yún)?數(shù)的偏移量; 變更工序,其根據(jù)I圖像彼此的幀間隔,來(lái)變更所述偏移量;及 降噪工序,其對(duì)所述視頻數(shù)據(jù)實(shí)施降噪處理,該降噪處理利用了包含由所述變更工序 變更后的偏移量的降噪?yún)?shù)。
47. -種電視接收機(jī),其特征在于, 包括權(quán)利要求1至10、12至17、19至22、24至33、35至39、及41至45的任一項(xiàng)所述 的視頻處理裝置。
48. -種程序,其特征在于, 其用于作為權(quán)利要求1至10、12至17、19至22、24至33、35至39、及41至45的任一 項(xiàng)所述的視頻處理裝置所包括的各單元,使計(jì)算機(jī)動(dòng)作。
49. 一種計(jì)算機(jī)可讀取的記錄介質(zhì),其特征在于,記錄有權(quán)利要求48所述的程序。
【文檔編號(hào)】H04N5/21GK104221361SQ201380019345
【公開(kāi)日】2014年12月17日 申請(qǐng)日期:2013年3月22日 優(yōu)先權(quán)日:2012年4月11日
【發(fā)明者】谷口茂樹(shù), 小池晃, 河野嘉憲, 池山哲夫, 瀧口昌彥, 渡邊美保子 申請(qǐng)人:夏普株式會(huì)社