進(jìn)行處理期間,前景帖的色度鍵控信息被用于修改處 理操作,但不加任何改變地傳播經(jīng)過該處理操作。然而,在一些實(shí)施方式中,優(yōu)選的是根據(jù) 處理后的前景帖來修改色度鍵控信息。
[0117] 例如,如圖13所示,在前景帖131的色度鍵控信息存儲(chǔ)為色度鍵控標(biāo)記陣列133形 式的情況下,其中每個(gè)標(biāo)記對(duì)應(yīng)于上述前景帖131的像素(或采樣點(diǎn)),如果該處理操作使得 處理后前景帖132中的圖像分辨率發(fā)生變化,則處理操作之前前景帖中的像素?cái)?shù)量可能與 處理后前景帖中的像素?cái)?shù)量不同。在該情況下,色度鍵控信息優(yōu)選地修改為使得每個(gè)標(biāo)記 維持其與處理后前景帖的各個(gè)像素的對(duì)應(yīng)性。
[0118] 在實(shí)施方式中,如果前景帖進(jìn)行了縮放,則根據(jù)與應(yīng)用于前景帖的縮放比例相對(duì) 應(yīng)的比例對(duì)前景帖的色度鍵控信息進(jìn)行縮放。例如,可W使用下式確定第η個(gè)采樣點(diǎn)的鍵控 ?目息:
[0119]
[0120] 其中,out_chroma_l?5ying_flag(n)是輸出前景帖的第η個(gè)采樣點(diǎn)的色度鍵控標(biāo)記 的值,in_ch;roma_keying_f lag(n)是輸入前景帖的第η個(gè)采樣點(diǎn)的色度鍵控標(biāo)記的值, size_in是輸入前景帖的大小,size_out是輸出前景帖的大小,floorU)是將數(shù)X向著0取整 到最接近整數(shù)的函數(shù)。
[0121] 圖14A和14B中例示了在對(duì)前景帖進(jìn)行縮放的情況下用于確定色度鍵控標(biāo)記的值 的公式,圖14A和14B分別示出了擴(kuò)展和縮減時(shí)的情形??s放帖的像素的色度鍵控標(biāo)記的取 值是原始帖中位于相對(duì)于縮放帖中該像素(例如圖13中的像素131a和像素132a)的位置最 近對(duì)應(yīng)位置處像素的色度鍵控標(biāo)記的值,其中,縮放帖與原始帖之間的位置對(duì)應(yīng)性由上式 右側(cè)確定。因此,如圖13所示,通過該式將作為原始前景帖131的色度鍵控信息的色度鍵控 標(biāo)記陣列133變換為作為縮放前景帖132的色度鍵控信息的色度鍵控標(biāo)記陣列134。
[0122] 在該實(shí)施方式中,可W通過任何適當(dāng)或期望的縮放方法對(duì)前景帖進(jìn)行縮放,但可 W基于應(yīng)用于前景帖的縮放比例按照相同方式對(duì)色度鍵控信息進(jìn)行修改,而與所使用的縮 放方法無關(guān)。
[0123] 根據(jù)對(duì)前景帖的色度鍵控信息進(jìn)行修改的示例性方式,當(dāng)擴(kuò)展和/或縮減前景帖 時(shí)對(duì)色度鍵控信息進(jìn)行修改。優(yōu)選地,根據(jù)例如上式的預(yù)定規(guī)則基于應(yīng)用于前景帖的縮放 比例對(duì)色度鍵控信息進(jìn)行修改。該修改優(yōu)選地維持色度鍵控信息與縮放后前景帖的各像素 之間的相關(guān)性。
[0124] 根據(jù)此處描述的實(shí)施方式,在對(duì)前景帖的區(qū)域進(jìn)行處理來獲得該區(qū)域的色度鍵控 信息之前,對(duì)該區(qū)域執(zhí)行色度鍵控檢測(cè)。色度鍵控信息優(yōu)選地指示該區(qū)域是否具有鍵控顏 色值?;谏孺I控信息,可W修改要對(duì)該區(qū)域執(zhí)行的后續(xù)處理。
[0125] 在優(yōu)選實(shí)施方式中,如果色度鍵控信息指示該區(qū)域具有鍵控顏色值,則可W省略 要對(duì)該區(qū)域執(zhí)行的處理。在該情況下,可W減少數(shù)據(jù)處理系統(tǒng)的總體功耗。在一些實(shí)施方式 中,其中該區(qū)域的處理結(jié)果取決于周圍(相鄰)區(qū)域的數(shù)據(jù)值,可W基于周圍區(qū)域的色度鍵 控信息修改要對(duì)該區(qū)域執(zhí)行的處理。在實(shí)現(xiàn)示例中,其中要對(duì)該區(qū)域執(zhí)行的處理是對(duì)該區(qū) 域應(yīng)用圖像過濾器,可W基于該區(qū)域W及圖像過濾器所覆蓋的周圍區(qū)域的色度鍵控信息來 修改過濾器輸入。
[0126] 通過基于色度鍵控信息修改要對(duì)該區(qū)域執(zhí)行的處理,可W減少在將前景帖與背景 帖合成時(shí)發(fā)生失真(或偽影)的可能性。因此,在某些情況下,可W省略對(duì)合成帖中失真的檢 測(cè)和校正。
[0127] 在優(yōu)選實(shí)施方式中,前景帖的色度鍵控信息傳播經(jīng)過對(duì)前景帖的處理,使得可W 根據(jù)需要在后續(xù)處理中,或者在將前景帖與背景帖合成W標(biāo)識(shí)前景帖中要用背景帖的像素 代替的鍵控像素期間,使用該色度鍵控信息。
[0128] 從W上說明可W理解的是,本發(fā)明的實(shí)施方式能夠提供一種用于修改要對(duì)前景帖 執(zhí)行的圖像處理操作的機(jī)制,該前景帖要與背景帖合成例如W供顯示。此外,與已有的常規(guī) 處理技術(shù)相比,本發(fā)明的優(yōu)選實(shí)施方式可w提供一種在對(duì)前景帖進(jìn)行處理時(shí)減少數(shù)據(jù)(圖 像)處理系統(tǒng)中所需處理量的機(jī)制。因此,能夠減少例如在將前景帖與背景帖合成時(shí)的失真 量,并減少例如在對(duì)前景帖的內(nèi)容進(jìn)行處理時(shí)的功耗。
【主權(quán)項(xiàng)】
1. 一種提供要與背景幀合成的前景幀的方法,該前景幀包括一個(gè)或更多個(gè)區(qū)域,該方 法包括以下步驟:針對(duì)所述前景幀的至少一個(gè)區(qū)域: 確定該區(qū)域是否具有預(yù)定顏色值; 基于該確定生成并存儲(chǔ)色度鍵控信息;以及 根據(jù)所存儲(chǔ)的色度鍵控信息來控制要對(duì)所述區(qū)域執(zhí)行的圖像處理。2. 根據(jù)權(quán)利要求1所述的方法,其中,存儲(chǔ)所述色度鍵控信息的步驟包括:設(shè)置標(biāo)記以 指示所述區(qū)域是否具有所述預(yù)定顏色值。3. 根據(jù)權(quán)利要求1或2所述的方法,其中,控制圖像處理的步驟包括:如果所述色度鍵控 信息指示了所述區(qū)域具有所述預(yù)定顏色值,則省略要對(duì)所述區(qū)域執(zhí)行的圖像處理。4. 根據(jù)權(quán)利要求1或2所述的方法,其中,要對(duì)所述區(qū)域執(zhí)行的圖像處理根據(jù)縮放比例 來改變所述前景幀的分辨率,并且所述方法進(jìn)一步包括:基于所述縮放比例修改所述色度 鍵控信息。5. 根據(jù)權(quán)利要求1或2所述的方法,其中,要執(zhí)行的圖像處理包括:通過對(duì)所述區(qū)域應(yīng)用 過濾器窗進(jìn)行過濾,所述過濾器窗覆蓋包括所述區(qū)域和一個(gè)或更多個(gè)周圍區(qū)域在內(nèi)的前景 幀的范圍,并且控制圖像處理的步驟包括:如果所述色度鍵控信息指示了所有所述一個(gè)或 更多個(gè)周圍區(qū)域具有所述預(yù)定顏色值,則省略所述過濾。6. 根據(jù)權(quán)利要求1或2所述的方法,其中,要執(zhí)行的圖像處理包括:通過對(duì)所述區(qū)域應(yīng)用 過濾器窗進(jìn)行過濾,所述過濾器窗覆蓋包括所述區(qū)域和一個(gè)或更多個(gè)周圍區(qū)域在內(nèi)的前景 幀的范圍,并且控制圖像處理的步驟包括:如果所述色度鍵控信息指示了所述區(qū)域不具有 所述預(yù)定顏色值,則基于所述一個(gè)或更多個(gè)周圍區(qū)域的所述色度鍵控信息來修改所述過濾 器窗的輸入。7. 根據(jù)權(quán)利要求6所述的方法,其中,修改所述過濾器窗的所述輸入的步驟包括:用所 述區(qū)域的值或者用所述一個(gè)或更多個(gè)周圍區(qū)域中不具有所述預(yù)定顏色值的區(qū)域的值來代 替所述一個(gè)或更多個(gè)周圍區(qū)域中具有所述預(yù)定顏色值的區(qū)域的值。8. 根據(jù)權(quán)利要求5所述的方法,其中,所述過濾器窗是具有NP個(gè)相和NT個(gè)抽頭的多相縮 放過濾器,所述過濾器窗覆蓋包括偶數(shù)個(gè)區(qū)域的前景幀的范圍,并且應(yīng)用所述過濾器窗使 得當(dāng)所述多相縮放過濾器的相大于或等于NP/2時(shí),所述區(qū)域位于第NT/2個(gè)抽頭處,而當(dāng)所 述多相縮放過濾器的相小于NP/2時(shí),所述區(qū)域位于第(ΝΤ/2)+1個(gè)抽頭處。9. 根據(jù)權(quán)利要求1或2所述的方法,所述方法進(jìn)一步包括以下步驟:通過用所述背景幀 的一個(gè)或更多個(gè)區(qū)域代替所述前景幀中所述色度鍵控信息指示具有所述預(yù)定顏色值的一 個(gè)或更多個(gè)區(qū)域,來將所述前景幀與所述背景幀合成。10. 據(jù)權(quán)利要求1或2所述的方法,其中,各個(gè)幀區(qū)域是該幀的像素。11. 一種提供要與背景幀合成的前景幀的裝置,該前景幀包括共同形成所述前景幀的 一個(gè)或更多個(gè)區(qū)域,所述裝置包括能夠執(zhí)行如下操作的處理電路: 確定所述前景幀的區(qū)域是否具有預(yù)定顏色值,并基于該確定而生成和存儲(chǔ)色度鍵控信 息;以及 根據(jù)所存儲(chǔ)的色度鍵控信息,控制要對(duì)所述區(qū)域執(zhí)行的圖像處理。12. 根據(jù)權(quán)利要求11所述的裝置,其中,所述處理電路能夠通過設(shè)置標(biāo)記以指示所述區(qū) 域是否具有所述預(yù)定顏色值,來存儲(chǔ)所述色度鍵控信息。13. 根據(jù)權(quán)利要求11或12所述的裝置,其中,所述處理電路能夠通過以下操作來控制圖 像處理:如果所述色度鍵控信息指示所述區(qū)域具有所述預(yù)定顏色值,則省略要對(duì)所述區(qū)域 執(zhí)行的圖像處理。14. 根據(jù)權(quán)利要求11或12所述的裝置,其中,要對(duì)所述區(qū)域執(zhí)行的所述圖像處理根據(jù)縮 放比例來改變所述前景幀的分辨率,并且所述處理電路進(jìn)一步能夠基于所述縮放比例來修 改所述色度鍵控信息。15. 根據(jù)權(quán)利要求11或12所述的裝置,其中,要執(zhí)行的所述圖像處理包括:通過對(duì)所述 區(qū)域應(yīng)用過濾器窗進(jìn)行過濾,所述過濾器窗覆蓋包括所述區(qū)域和一個(gè)或更多個(gè)周圍區(qū)域在 內(nèi)的所述前景幀的范圍,并且所述處理電路能夠通過如下操作來控制所述圖像處理:如果 所述色度鍵控信息指示所有的所述一個(gè)或更多個(gè)周圍區(qū)域具有所述預(yù)定顏色值,則省略所 述過濾。16. 根據(jù)權(quán)利要求11或12所述的裝置,其中,要執(zhí)行的圖像處理包括:通過對(duì)所述區(qū)域 應(yīng)用過濾器窗進(jìn)行過濾,所述過濾器窗覆蓋包括所述區(qū)域和一個(gè)或更多個(gè)周圍區(qū)域在內(nèi)的 所述前景幀的范圍,并且所述處理電路能夠通過如下操作來控制所述圖像處理:如果所述 色度鍵控信息指示所述區(qū)域不具有所述預(yù)定顏色值,則基于所述一個(gè)或更多個(gè)周圍區(qū)域的 所述色度鍵控信息來修改所述過濾器窗的輸入。17. 根據(jù)權(quán)利要求16所述的裝置,其中,對(duì)所述過濾器窗的所述輸入進(jìn)行修改包括:用 所述區(qū)域的值或者用所述一個(gè)或更多個(gè)周圍區(qū)域中不具有所述預(yù)定顏色值的一個(gè)區(qū)域的 值來代替所述一個(gè)或更多個(gè)周圍區(qū)域中具有所述預(yù)定顏色值的區(qū)域的值。18. 根據(jù)權(quán)利要求15所述的裝置,其中,所述過濾器窗是具有NP個(gè)相和NT個(gè)抽頭的多相 縮放過濾器,所述過濾器窗覆蓋包括偶數(shù)個(gè)區(qū)域的前景幀的范圍,并且應(yīng)用所述過濾器窗 使得當(dāng)所述多相縮放過濾器的相大于或等于NP/2時(shí),所述區(qū)域位于第NT/2個(gè)抽頭處,而當(dāng) 所述多相縮放過濾器的相小于NP/2時(shí),所述區(qū)域位于第(ΝΤ/2)+1個(gè)抽頭處。19. 根據(jù)權(quán)利要求11或12所述的裝置,其中,所述處理電路進(jìn)一步能夠執(zhí)行如下操作: 通過用背景幀的一個(gè)或更多個(gè)區(qū)域代替所述前景幀中所述色度鍵控信息指示具有所述預(yù) 定顏色值的一個(gè)或更多個(gè)區(qū)域,來將所述前景幀與所述背景幀合成。20. 根據(jù)權(quán)利要求11或12所述的裝置,其中,各個(gè)幀區(qū)域是該幀的像素。
【專利摘要】用于在數(shù)據(jù)處理系統(tǒng)中處理幀的方法和裝置。本發(fā)明提供了一種在色度鍵控配置中提供要與背景幀合成的前景幀的裝置,該前景幀和該背景幀均包括一起形成各自幀的一個(gè)或更多個(gè)區(qū)域。檢測(cè)模塊(700)確定各幀區(qū)域是否具有預(yù)定顏色值,并基于該確定生成并存儲(chǔ)色度鍵控信息??刂齐娐?710)隨后根據(jù)所存儲(chǔ)的色度鍵控信息控制要對(duì)所述區(qū)域執(zhí)行的圖像處理。
【IPC分類】H04N5/275
【公開號(hào)】CN105657295
【申請(qǐng)?zhí)枴?br>【發(fā)明人】M·博古茨, P·赫羅博克, D·摩多爾茲克
【申請(qǐng)人】Arm有限公司
【公開日】2016年6月8日
【申請(qǐng)日】2015年12月1日