專利名稱：一種圖像、視頻圖像幀處理方法及裝置的制作方法
技術(shù)領(lǐng)域：
本發(fā)明涉及圖像處理領(lǐng)域，尤其涉及一種圖像處理方法及裝置、一種視頻圖像幀 處理方法及裝置。
背景技術(shù)：
將真實(shí)的圖像或視頻進(jìn)行處理以生成特定風(fēng)格(例如，卡通風(fēng)格)的圖像或視頻， 能夠極大地豐富媒體的表現(xiàn)形式，是目前圖像處理領(lǐng)域的一大研究熱點(diǎn)。以生成卡通風(fēng)格 的圖像或視頻為例，卡通動(dòng)畫的色彩分布與真實(shí)圖像不同，一般具有畫面簡潔、色彩純度 高、色彩使用數(shù)較少的特點(diǎn)，因此需對原始圖像的色彩進(jìn)行處理，以逼近卡通風(fēng)格的特點(diǎn)。 現(xiàn)有的卡通色彩效果圖像生成一般采用對真實(shí)圖像量化的方法降低色彩使用數(shù)量，同時(shí)對 色彩提高純度的方法。將一種圖像進(jìn)行處理后生成成另一種風(fēng)格的圖像，也可基于配色方案學(xué)習(xí)的策 略，主要采用紋理合成的方法，針對原始圖像任意一點(diǎn)，在參考圖像中查找與原圖像以該點(diǎn) 為中心的一定半徑鄰域最相似的色塊，并把顏色信息復(fù)制到原圖像該點(diǎn)處，從而生成具有 參考圖像風(fēng)格的圖像?，F(xiàn)有通過量化的方法降低色彩使用數(shù)量及提高色彩純度的方法進(jìn)行整體的顏色 調(diào)整生成圖像，其結(jié)果與參考圖像的風(fēng)格相差較大。采用上述基于配色方案學(xué)習(xí)的策略，則存在色塊替換錯(cuò)誤率較高的問題，導(dǎo)致生 成的圖像效果欠佳。目前，對于視頻圖像幀處理的研究剛剛開始，僅是針對原始視頻包含的每圖像一 幀，采用現(xiàn)有圖像處理方法生成對應(yīng)的替換圖像幀，然后將生成的各替換圖像幀按順序組 成處理后的視頻。由于對每一圖像幀的處理僅與原始視頻中的這一圖像幀有關(guān)，導(dǎo)致生成 的相鄰替換圖像幀之間存在較多的抖動(dòng)，視覺效果欠佳。

發(fā)明內(nèi)容
本發(fā)明實(shí)施例提供一種圖像處理方法及裝置，使得處理后的圖像的風(fēng)格更接近參 考圖像的風(fēng)格，且處理效率更高。本發(fā)明實(shí)施例提供一種視頻圖像幀處理方法及裝置，與現(xiàn)有技術(shù)生成的新視頻相 比，減少了新視頻中相鄰圖像幀間的抖動(dòng)，使得視覺效果更佳。本發(fā)明實(shí)施例提供一種圖像處理方法，包括確定參考圖像包含的像素點(diǎn)的色調(diào)H分量值分布；根據(jù)所述H分量值分布，確定出原始圖像各像素點(diǎn)對應(yīng)的替換H分量值；所述替換 H分量值分布比所述原始圖像各像素點(diǎn)的H分量值分布更接近所述H分量值分布；根據(jù)所述原始圖像各像素點(diǎn)的替換H分量值，生成處理后的圖像。本發(fā)明實(shí)施例還提供一種視頻處理方法，包括采用設(shè)定的像素值變換策略確定所述視頻的第一個(gè)圖像幀中像素點(diǎn)的替換像素
7值；對于后續(xù)圖像幀中各像素點(diǎn)，確定出第一類像素點(diǎn)，所述第一類像素點(diǎn)在上一個(gè) 圖像幀中存在基于像素運(yùn)動(dòng)對應(yīng)像素點(diǎn)；將其余像素點(diǎn)作為第二類像素點(diǎn)；根據(jù)所述對應(yīng)像素點(diǎn)的替換像素值，確定所述第一類像素點(diǎn)的替換像素值；采用所述變換策略確定所述第二類像素點(diǎn)的替換像素值；根據(jù)圖像幀各像素點(diǎn)的替換像素值，生成處理后的視頻圖像幀。本發(fā)明實(shí)施例再提供一種視頻處理方法，包括采用設(shè)定的像素值變換策略確定所述視頻的第一個(gè)圖像幀中像素點(diǎn)的替換像素 值；對于后續(xù)圖像幀中各像素點(diǎn)，確定出第一類像素點(diǎn)，所述第一類像素點(diǎn)在上一個(gè) 圖像幀中存在基于像素運(yùn)動(dòng)對應(yīng)像素點(diǎn)；將其余像素點(diǎn)作為第二類像素點(diǎn)；根據(jù)所述對應(yīng)像素點(diǎn)與所述第一類像素點(diǎn)之間的光流誤差，確定所述第一類像素 點(diǎn)的替換像素值；采用所述變換策略確定所述第二類像素點(diǎn)的替換像素值；根據(jù)圖像幀各像素點(diǎn)的替換像素值，生成處理后的視頻圖像幀。本發(fā)明實(shí)施例還提供一種圖像處理裝置，包括第一 H分量確定單元，用于確定參考圖像包含的像素點(diǎn)的色調(diào)H分量值分布；第二 H分量確定單元，用于根據(jù)所述H分量值分布，確定出原始圖像各像素點(diǎn)對應(yīng) 的替換H分量值；所述替換H分量值分布比所述原始圖像各像素點(diǎn)的H分量值分布更接近 所述H分量值分布；替換生成單元，用于根據(jù)所述原始圖像各像素點(diǎn)的替換H分量值，生成處理后的 圖像。本發(fā)明實(shí)施例還提供一種視頻處理裝置，包括第一確定單元，用于對于所述視頻中除第一個(gè)圖像幀外的后續(xù)圖像幀的像素點(diǎn)， 確定出第一類像素點(diǎn)，所述第一類像素點(diǎn)在上一個(gè)圖像幀中存在基于像素運(yùn)動(dòng)對應(yīng)像素 點(diǎn)；將其余像素點(diǎn)確定為第二類像素點(diǎn)；第二確定單元，用于根據(jù)所述對應(yīng)像素點(diǎn)的替換像素值，確定所述第一類像素點(diǎn) 的替換像素值；第三確定單元，用于采用設(shè)定的像素值變換策略確定所述第二類像素點(diǎn)的替換像 素值；以及采用所述變換策略確定所述第一個(gè)圖像幀中像素點(diǎn)的替換像素值；生成單元，用于根據(jù)圖像幀各像素點(diǎn)的替換像素值，生成處理后的視頻圖像幀。本發(fā)明實(shí)施例再提供一種視頻處理裝置，包括第一確定單元，用于對于所述視頻中除第一個(gè)圖像幀外的后續(xù)圖像幀的像素點(diǎn)， 確定出第一類像素點(diǎn)，所述第一類像素點(diǎn)在上一個(gè)圖像幀中存在基于像素運(yùn)動(dòng)對應(yīng)像素 點(diǎn)；將其余像素點(diǎn)確定為第二類像素點(diǎn)；第二確定單元，用于根據(jù)所述對應(yīng)像素點(diǎn)與所述第一類像素點(diǎn)的之間的光流誤 差，確定所述第一類像素點(diǎn)的替換像素值；第三確定單元，用于采用設(shè)定的像素值變換策略確定所述第二類像素點(diǎn)的替換像 素值；以及采用所述變換策略確定所述第一個(gè)圖像幀中像素點(diǎn)的替換像素值；
生成單元，用于根據(jù)圖像幀各像素點(diǎn)的替換像素值，生成處理后的視頻圖像幀。本發(fā)明實(shí)施例提供的圖像處理方法，確定出了參考圖像包含的像素點(diǎn)的色調(diào)H分 量值分布，并根據(jù)H分量值分布，確定出原始圖像各像素點(diǎn)對應(yīng)的替換H分量值，且確定出 的替換H分量值分布比原始圖像各像素點(diǎn)的H分量值分布更接近該H分量值分布，因此，根 據(jù)原始圖像各像素點(diǎn)的替換H分量值，生成的處理后的圖像的風(fēng)格接近參考圖像的風(fēng)格。 且本方法對原始圖像每個(gè)像素點(diǎn)的處理均基于參考圖像的整體考慮，且H分量為顏色風(fēng)格 中的主導(dǎo)顏色分量，因此，使得處理后圖像的風(fēng)格更接近參考圖像的風(fēng)格。且本方法對參考 圖像的顏色風(fēng)格僅進(jìn)行一次學(xué)習(xí)，相比現(xiàn)有技術(shù)其他方法中對原始圖像每個(gè)像素點(diǎn)的處理 均需要對參考圖像進(jìn)行一次學(xué)習(xí)，處理效率更高。本發(fā)明實(shí)施例提供的視頻圖像幀處理方法，除對視頻的第一圖像幀各像素點(diǎn)采用 設(shè)定策略進(jìn)行處理外，對于后續(xù)圖像幀，將在上一圖像幀中存在基于像素運(yùn)動(dòng)對應(yīng)像素點(diǎn) 的像素點(diǎn)作為第一類像素點(diǎn)，其余像素點(diǎn)作為第二類像素點(diǎn)；根據(jù)對應(yīng)像素點(diǎn)的像素值或 根據(jù)對應(yīng)像素點(diǎn)與第一類像素點(diǎn)之間的光流誤差，確定第一類像素點(diǎn)的替換像素值；對于 第二類像素點(diǎn)，采用設(shè)定策略進(jìn)行處理。由于上一圖像幀中該對應(yīng)像素點(diǎn)從其所在位置，在 本圖像幀中移動(dòng)到了對應(yīng)的該第一類像素點(diǎn)所在位置，如果對這兩個(gè)點(diǎn)均采用一種像素值 變換策略確定替換像素值，則確定出的兩個(gè)替換像素值可能相差較大，導(dǎo)致相鄰圖像幀間 的抖動(dòng)，而由于本方法中在確定第一類像素點(diǎn)的替換像素值時(shí)參考了其基于像素運(yùn)動(dòng)對應(yīng) 像素點(diǎn)的像素值，因此，根據(jù)上述方法確定出的圖像幀各像素點(diǎn)的替換像素值，而生成的處 理后的視頻圖像幀，由處理后的圖像幀組成的新視頻，相比于采用現(xiàn)有技術(shù)生成的新視頻 明顯減少了視頻中相鄰圖像幀間的抖動(dòng)，使得視覺效果更佳。


圖1為本發(fā)明實(shí)施例提供一種圖像處理方法的流程圖；圖2為本發(fā)明實(shí)施例一提供的一種圖像處理方法中針對像素點(diǎn)的H分量的學(xué)習(xí)和 處理的流程圖；圖3為本發(fā)明實(shí)施例二提供的一種圖像處理方法中針對像素點(diǎn)的H分量的學(xué)習(xí)和 處理的流程圖；圖4為本發(fā)明實(shí)施例三提供的一種圖像處理方法中針對像素點(diǎn)的H分量的學(xué)習(xí)和 處理的流程圖；圖5為本發(fā)明實(shí)施例四提供的一種圖像處理裝置的結(jié)構(gòu)示意圖之一；圖6為本發(fā)明實(shí)施例四提供的一種圖像處理裝置的結(jié)構(gòu)示意圖之二 ；圖7為本發(fā)明實(shí)施例四提供的一種圖像處理裝置的結(jié)構(gòu)示意圖之三；圖8為本發(fā)明實(shí)施例四提供的一種圖像處理裝置的結(jié)構(gòu)示意圖之四；圖9為本發(fā)明實(shí)施例五提供的一種視頻處理方法的流程圖之一；圖10為本發(fā)明實(shí)施例六提供的一種視頻處理方法的流程圖之二 ；圖11為本發(fā)明實(shí)施例六提供的一種視頻處理方法中的步驟S1005的流程圖；圖12為本發(fā)明實(shí)施例七提供的一種視頻處理裝置的結(jié)構(gòu)示意圖；圖13為本發(fā)明實(shí)施例八提供的一種視頻處理裝置的結(jié)構(gòu)示意圖。
具體實(shí)施例方式本發(fā)明實(shí)施例提供一種圖像處理方法，如圖1所示，包括步驟S101、確定參考圖像包含的像素點(diǎn)的色調(diào)H分量值分布。步驟S102、根據(jù)該H分量值分布，確定出原始圖像各像素點(diǎn)對應(yīng)的替換H分量值； 確定出的替換H分量值分布比原始圖像各像素點(diǎn)的H分量值分布更接近該H分量值分布。步驟S103、根據(jù)原始圖像各像素點(diǎn)的替換H分量值，生成處理后的圖像。具體為 用替換H分量值替換對應(yīng)的原始圖像各像素點(diǎn)的H分量值，生成處理后的圖像。較佳的，本發(fā)明實(shí)施例還可以在考慮了 H分量的基礎(chǔ)上，采用上述相同的方法，再 考慮飽和度S分量和/或亮度V分量。具體為，在上述步驟S103中生成處理后的圖像前，還包括確定參考圖像包含的像素點(diǎn)的S分量值分布，并根據(jù)該S分量值分布，確定出原始 圖像各像素點(diǎn)對應(yīng)的替換S分量值；確定出的替換S分量值分布比原始圖像各像素點(diǎn)的S 分量值分布更接近該S分量值分布；以及用替換S分量值替換對應(yīng)的原始圖像各像素點(diǎn)的 S分量值；或者確定參考圖像包含的像素點(diǎn)的V分量值分布，并根據(jù)該V分量值分布，確定出原始 圖像各像素點(diǎn)對應(yīng)的替換V分量值；確定出的替換V分量值分布比原始圖像各像素點(diǎn)的V 分量值分布更接近該V分量值分布；以及用替換V分量值替換對應(yīng)的原始圖像各像素點(diǎn)的 V分量值；或者確定參考圖像包含的像素點(diǎn)的S分量值分布和V分量值分布，并根據(jù)該S分量值 分布，確定出原始圖像各像素點(diǎn)對應(yīng)的替換S分量值；確定出的替換S分量值分布比原始圖 像各像素點(diǎn)的S分量值分布更接近該S分量值分布；并根據(jù)該V分量值分布，確定出原始圖 像各像素點(diǎn)對應(yīng)的替換V分量值；確定出的替換V分量值分布比原始圖像各像素點(diǎn)的V分 量值分布更接近該V分量值分布；以及用替換S分量值替換對應(yīng)的原始圖像各像素點(diǎn)的S 分量值；并用替換V分量值替換對應(yīng)的原始圖像各像素點(diǎn)的V分量值。下面結(jié)合附圖，用具體實(shí)施例對本發(fā)明提供的方法及裝置進(jìn)行詳細(xì)描述。本發(fā)明實(shí)施例提供的方案也是基于配色方案學(xué)習(xí)的策略，首先對參考圖像的顏色 風(fēng)格進(jìn)行學(xué)習(xí)，其中，顏色風(fēng)格主要從主色調(diào)、次主色調(diào)及其他色調(diào)，以及圖像的整體明暗 程度、顏色是否鮮艷這幾個(gè)方面衡量，并根據(jù)學(xué)習(xí)的結(jié)果，對原始圖像也針對這幾個(gè)方面進(jìn) 行處理，使得處理后的圖像接近參考圖像的風(fēng)格。由于顏色風(fēng)格主要從主色調(diào)、次主色調(diào)及其他色調(diào)，以及圖像的整體明暗程度、顏 色是否鮮艷這幾個(gè)方面衡量，所以，本發(fā)明實(shí)施例中，針對參考圖像包含的像素點(diǎn)的H分 量、S分量和V分量三個(gè)顏色分量分別進(jìn)行顏色風(fēng)格的學(xué)習(xí)，相應(yīng)的，針對原始圖像各像素 點(diǎn)的H分量、S分量和V分量三個(gè)顏色分量分別進(jìn)行了處理，且由于是基于參考圖像的全部 像素點(diǎn)進(jìn)行學(xué)習(xí)的，因此，參考圖像可以是一個(gè)圖像，也可以是多個(gè)參考圖像，如一段視頻 (考慮到方法的處理效率，一般選擇包含的圖像幀的數(shù)量為1000幀以下的一段視頻作為參 考視頻)，當(dāng)參考圖像是一段視頻時(shí)，學(xué)習(xí)結(jié)果也更加準(zhǔn)確的代表參考圖像的風(fēng)格，后續(xù)生 成的處理后的圖像也更接近參考圖像的風(fēng)格。本發(fā)明實(shí)施例中，針對像素點(diǎn)的三個(gè)顏色分量的學(xué)習(xí)和處理可以采用相同的方 法，也可以采用不同的方法，下面以H分量為例，進(jìn)行詳細(xì)描述如下
10
實(shí)施例一上述步驟SlOl具體為確定H分量取值范圍內(nèi)的各H分量值在參考圖像各像素點(diǎn) 的H分量值中出現(xiàn)的次數(shù)；上述步驟S102具體為根據(jù)該次數(shù)和原始圖像各像素點(diǎn)的H分量值，采用均值漂 移算法確定出原始圖像各像素點(diǎn)對應(yīng)的替換H分量值。其中均值漂移算法是一種有效的統(tǒng)計(jì)迭代算法，它可以使得每個(gè)像素點(diǎn)的H分量 值逼近該像素點(diǎn)的一個(gè)領(lǐng)域范圍內(nèi)的局部最大值，因此，采用均值漂移算法確定出的原始 圖像各像素點(diǎn)對應(yīng)的替換H分量值，即比原始圖像各像素點(diǎn)的H分量值更接近參考圖像包 含的像素點(diǎn)的H分量值分布。本發(fā)明實(shí)施例中可以采用現(xiàn)有的各種均值漂移算法。更具體的，上述步驟S102為根據(jù)該次數(shù)確定原始圖像各像素點(diǎn)的H分量值對應(yīng) 的均值漂移值；并確定原始圖像各像素點(diǎn)對應(yīng)的替換H分量值為原始圖像各像素點(diǎn)的H分 量值與對應(yīng)的均值漂移值的和。下面使用具體實(shí)例進(jìn)行詳細(xì)描述，如圖2所示，包括步驟S201、獲取參考圖像各像素點(diǎn)的H分量值。如果參考圖像的顏色空間為HSV顏色空間，則直接獲取，若顏色空間為RGB或YUV 顏色空間，則先將其顏色空間轉(zhuǎn)換到HSV顏色空間后，再獲取。較佳的，由于當(dāng)一個(gè)像素點(diǎn)的S分量值和V分量值較小時(shí)，該像素點(diǎn)基本是黑白灰 色，可以認(rèn)為其不具備典型的色彩風(fēng)格，因此，為了避免干擾真正的色調(diào)風(fēng)格的學(xué)習(xí)，上述 步驟S201中，獲取參考圖像中S分量值大于S分量閾值且V分量值大于V分量閾值的像素 點(diǎn)的H分量值；其中，S分量閾值和V分量閾值可以根據(jù)仿真和實(shí)驗(yàn)結(jié)果進(jìn)行調(diào)整，確定出 一個(gè)較佳值，例如，均取32。步驟S202、確定H分量取值范圍內(nèi)的各H分量值在參考圖像各像素點(diǎn)的H分量值 中出現(xiàn)的次數(shù)Th (i)。其中，H分量取值范圍為區(qū)間
內(nèi)的整數(shù)；i分別取區(qū)間
內(nèi)的整數(shù)。對 于現(xiàn)有的HSV顏色空間，χ的取值可以為359或255。步驟S203、獲取原始圖像各像素點(diǎn)的H分量值。
權(quán)利要求
一種圖像處理方法，其特征在于，包括確定參考圖像包含的像素點(diǎn)的色調(diào)H分量值分布；根據(jù)所述H分量值分布，確定出原始圖像各像素點(diǎn)對應(yīng)的替換H分量值；所述替換H分量值分布比所述原始圖像各像素點(diǎn)的H分量值分布更接近所述H分量值分布；根據(jù)所述原始圖像各像素點(diǎn)的替換H分量值，生成處理后的圖像。
2.如權(quán)利要求1所述的方法，其特征在于，確定所述H分量值分布，具體方法為確定H 分量取值范圍內(nèi)的各H分量值在參考圖像各像素點(diǎn)的H分量值中出現(xiàn)的次數(shù)；確定所述替 換H分量值，具體方法為根據(jù)所述次數(shù)和原始圖像各像素點(diǎn)的H分量值，采用均值漂移算 法確定出所述原始圖像各像素點(diǎn)對應(yīng)的替換H分量值；或者確定所述H分量值分布，具體方法為確定參考圖像各像素點(diǎn)的H分量值的第一均值； 確定所述替換H分量值，具體方法為確定原始圖像各像素點(diǎn)的H分量值的第二均值；并根 據(jù)所述第一均值和所述第二均值的差值或比值以及所述原始圖像各像素點(diǎn)的H分量值，確 定所述原始圖像各像素點(diǎn)對應(yīng)的替換H分量值；或者確定所述H分量值分布，具體方法為確定參考圖像各像素點(diǎn)的H分量值的第一均值和 第一標(biāo)準(zhǔn)差；確定所述替換H分量值，具體方法為確定原始圖像各像素點(diǎn)的H分量值的第 二均值和第二標(biāo)準(zhǔn)差；并用所述原始圖像各像素點(diǎn)的H分量值減去所述第二均值，得到差 值；用所述第一標(biāo)準(zhǔn)差與所述第二標(biāo)準(zhǔn)差的比值乘以所述差值，得到乘積；確定所述原始 圖像各像素點(diǎn)對應(yīng)的替換H分量值為所述第一均值與所述乘積的和。
3.如權(quán)利要求2所述的方法，其特征在于，還包括按照確定所述H分量值分布的具體方法，確定出飽和度S分量值分布和/或亮度V分 量值分布；以及按照確定所述替換H分量值的具體方法，確定出替換S分量值和/或替換V分量值； 在所述生成處理后的圖像時(shí)，還根據(jù)所述原始圖像各像素點(diǎn)的替換S分量值和/或所 述原始圖像各像素點(diǎn)的替換V分量值。
4.如權(quán)利要求3所述的方法，其特征在于，確定H分量值分布時(shí)，僅確定參考圖像的各 像素點(diǎn)中S分量值大于設(shè)定的S分量閾值且V分量值大于設(shè)定的V分量閾值的像素點(diǎn)的H 分量值分布；以及確定S分量值分布時(shí)，僅確定參考圖像的各像素點(diǎn)中V分量值大于設(shè)定的V分量閾值 的像素點(diǎn)的S分量值分布；以及確定V分量值分布時(shí)，僅確定參考圖像的各像素點(diǎn)中S分量值大于設(shè)定的S分量閾值 的像素點(diǎn)的V分量值分布。
5.一種視頻圖像幀處理方法，其特征在于，包括采用設(shè)定的像素值變換策略確定所述視頻的第一個(gè)圖像幀中像素點(diǎn)的替換像素值； 對于后續(xù)圖像幀中各像素點(diǎn)，確定出第一類像素點(diǎn)，所述第一類像素點(diǎn)在上一個(gè)圖像 幀中存在基于像素運(yùn)動(dòng)對應(yīng)像素點(diǎn)；將其余像素點(diǎn)作為第二類像素點(diǎn)；根據(jù)所述對應(yīng)像素點(diǎn)的替換像素值，確定所述第一類像素點(diǎn)的替換像素值； 采用所述變換策略確定所述第二類像素點(diǎn)的替換像素值； 根據(jù)圖像幀各像素點(diǎn)的替換像素值，生成處理后的視頻圖像幀。
6.如權(quán)利要求5所述的方法，其特征在于，所述根據(jù)所述對應(yīng)像素點(diǎn)的替換像素值，確定所述第一類像素點(diǎn)的替換像素值，具體為當(dāng)存在唯一所述對應(yīng)像素點(diǎn)時(shí)，確定所述第一類像素點(diǎn)的替換像素值為所述對應(yīng)像素 點(diǎn)的替換像素值；當(dāng)存在多個(gè)所述對應(yīng)像素點(diǎn)時(shí)，確定所述第一類像素點(diǎn)的替換像素值為各所述對應(yīng)像 素點(diǎn)的替換像素值的均值。
7.如權(quán)利要求5或6任一所述的方法，其特征在于，采用所述變換策略確定像素點(diǎn)的替 換像素值，具體為根據(jù)色調(diào)H分量取值范圍內(nèi)的各H分量值在參考圖像各像素點(diǎn)的H分量值中出現(xiàn)的次 數(shù)和該像素點(diǎn)的H分量值，采用均值漂移算法確定出該像素點(diǎn)的替換H分量值；或者根據(jù)參考圖像各像素點(diǎn)的H分量值的第一均值和該像素點(diǎn)所屬圖像幀各像素點(diǎn)的H分 量值的第二均值的差值或比值，以及該像素點(diǎn)的H分量值，確定該像素點(diǎn)的替換H分量值； 或者用該像素點(diǎn)的H分量值減去該像素點(diǎn)所屬圖像幀各像素點(diǎn)的H分量值的第二均值，得 到差值；用參考圖像各像素點(diǎn)的H分量值的第一標(biāo)準(zhǔn)差與該像素點(diǎn)所屬圖像幀各像素點(diǎn)的 H分量值的第二標(biāo)準(zhǔn)差的比值乘以所述差值，得到乘積；確定該像素點(diǎn)的替換H分量值為參 考圖像各像素點(diǎn)的H分量值的第一均值與所述乘積的和。
8.一種視頻圖像幀處理方法，其特征在于，包括采用設(shè)定的像素值變換策略確定所述視頻的第一個(gè)圖像幀中像素點(diǎn)的替換像素值； 對于后續(xù)圖像幀中各像素點(diǎn)，確定出第一類像素點(diǎn)，所述第一類像素點(diǎn)在上一個(gè)圖像 幀中存在基于像素運(yùn)動(dòng)對應(yīng)像素點(diǎn)；將其余像素點(diǎn)作為第二類像素點(diǎn)；根據(jù)所述對應(yīng)像素點(diǎn)與所述第一類像素點(diǎn)之間的光流誤差，確定所述第一類像素點(diǎn)的 替換像素值；采用所述變換策略確定所述第二類像素點(diǎn)的替換像素值； 根據(jù)圖像幀各像素點(diǎn)的替換像素值，生成處理后的視頻圖像幀。
9.如權(quán)利要求8所述的方法，其特征在于，所述根據(jù)所述對應(yīng)像素點(diǎn)與所述第一類像 素點(diǎn)之間的光流誤差，確定所述第一類像素點(diǎn)的替換像素值，具體為確定所述對應(yīng)像素點(diǎn)與所述第一類像素點(diǎn)之間的光流誤差；當(dāng)所述光流誤差大于設(shè)定閾值時(shí)，采用所述變換策略確定所述第一類像素點(diǎn)的替換像 素值；否則，當(dāng)存在唯一所述對應(yīng)像素點(diǎn)時(shí)，確定所述第一類像素點(diǎn)的替換像素值為所述對 應(yīng)像素點(diǎn)的替換像素值；當(dāng)存在多個(gè)所述對應(yīng)像素點(diǎn)時(shí)，確定所述第一類像素點(diǎn)的替換像素值為各所述對應(yīng)像 素點(diǎn)的替換像素值的均值。
10.如權(quán)利要求8或9所述的方法，其特征在于，采用所述變換策略確定像素點(diǎn)的替換 像素值，具體為根據(jù)色調(diào)H分量取值范圍內(nèi)的各H分量值在參考圖像各像素點(diǎn)的H分量值中出現(xiàn)的次 數(shù)和該像素點(diǎn)的H分量值，采用均值漂移算法確定出該像素點(diǎn)的替換H分量值；或者根據(jù)參考圖像各像素點(diǎn)的H分量值的第一均值和該像素點(diǎn)所屬圖像幀各像素點(diǎn)的H分 量值的第二均值的差值或比值，以及該像素點(diǎn)的H分量值，確定該像素點(diǎn)的替換H分量值；或者用該像素點(diǎn)的H分量值減去該像素點(diǎn)所屬圖像幀各像素點(diǎn)的H分量值的第二均值，得 到差值；用參考圖像各像素點(diǎn)的H分量值的第一標(biāo)準(zhǔn)差與該像素點(diǎn)所屬圖像幀各像素點(diǎn)的 H分量值的第二標(biāo)準(zhǔn)差的比值乘以所述差值，得到乘積；確定該像素點(diǎn)的替換H分量值為參 考圖像各像素點(diǎn)的H分量值的第一均值與所述乘積的和。
11.一種圖像處理裝置，其特征在于，包括第一 H分量確定單元，用于確定參考圖像包含的像素點(diǎn)的色調(diào)H分量值分布；第二 H分量確定單元，用于根據(jù)所述H分量值分布，確定出原始圖像各像素點(diǎn)對應(yīng)的替 換H分量值；所述替換H分量值分布比所述原始圖像各像素點(diǎn)的H分量值分布更接近所述 H分量值分布；替換生成單元，用于根據(jù)所述原始圖像各像素點(diǎn)的替換H分量值，生成處理后的圖像。
12.如權(quán)利要求11所述的裝置，其特征在于，所述第一 H分量確定單元，具體用于確定H分量取值范圍內(nèi)的各H分量值在參考圖像 各像素點(diǎn)的H分量值中出現(xiàn)的次數(shù)；所述第二H分量確定單元，具體用于根據(jù)所述次數(shù)和原 始圖像各像素點(diǎn)的H分量值，采用均值漂移算法確定出所述原始圖像各像素點(diǎn)對應(yīng)的替換 H分量值；或者所述第一H分量確定單元，具體用于確定參考圖像各像素點(diǎn)的H分量值的第一均值；所 述第二H分量確定單元，具體用于確定原始圖像各像素點(diǎn)的H分量值的第二均值；并根據(jù)所 述第一均值和所述第二均值的差值或比值以及所述原始圖像各像素點(diǎn)的H分量值，確定所 述原始圖像各像素點(diǎn)對應(yīng)的替換H分量值；或者所述第一 H分量確定單元，具體用于確定參考圖像各像素點(diǎn)的H分量值的第一均值和 第一標(biāo)準(zhǔn)差；所述第二分量確定單元，具體用于確定原始圖像各像素點(diǎn)的H分量值的第二 均值和第二標(biāo)準(zhǔn)差；并用所述原始圖像各像素點(diǎn)的H分量值減去所述第二均值，得到差值； 用所述第一標(biāo)準(zhǔn)差與所述第二標(biāo)準(zhǔn)差的比值乘以所述差值，得到乘積；確定所述原始圖像 各像素點(diǎn)對應(yīng)的替換H分量值為所述第一均值與所述乘積的和。
13.如權(quán)利要求12所述的裝置，其特征在于，還包括第一飽和度S分量確定單元和/或第一亮度V分量確定單元，用于按照所述第一 H分 量確定單元確定所述H分量值分布的具體方法，確定出S分量值分布和/或V分量值分布；第二 S分量確定單元和/或第二 V分量確定單元，用于按照所述第二 H分量確定單元 確定所述替換H分量值的具體方法，確定出替換S分量值和/或替換V分量值；所述替換生成單元，還用于在所述生成處理后的圖像時(shí)，還根據(jù)所述原始圖像各像素 點(diǎn)的替換S分量值和/或所述原始圖像各像素點(diǎn)的替換V分量值。
14.如權(quán)利要求13所述的裝置，其特征在于，所述第一H分量確定單元確定H分量值分 布時(shí)，僅確定參考圖像的各像素點(diǎn)中S分量值大于設(shè)定的S分量閾值且V分量值大于設(shè)定 的V分量閾值的像素點(diǎn)的H分量值分布；所述第一 S分量確定單元確定S分量值分布時(shí)，僅確定參考圖像的各像素點(diǎn)中V分量 值大于設(shè)定的V分量閾值的像素點(diǎn)的S分量值分布；所述第一 V分量確定單元確定V分量值分布時(shí)，僅確定參考圖像的各像素點(diǎn)中S分量 值大于設(shè)定的S分量閾值的像素點(diǎn)的V分量值分布。
15.一種視頻圖像幀處理裝置，其特征在于，包括第一確定單元，用于對于所述視頻中除第一個(gè)圖像幀外的后續(xù)圖像幀的像素點(diǎn)，確定 出第一類像素點(diǎn)，所述第一類像素點(diǎn)在上一個(gè)圖像幀中存在基于像素運(yùn)動(dòng)對應(yīng)像素點(diǎn)；將 其余像素點(diǎn)確定為第二類像素點(diǎn)；第二確定單元，用于根據(jù)所述對應(yīng)像素點(diǎn)的替換像素值，確定所述第一類像素點(diǎn)的替 換像素值；第三確定單元，用于采用設(shè)定的像素值變換策略確定所述第二類像素點(diǎn)的替換像素 值；以及采用所述變換策略確定所述第一個(gè)圖像幀中像素點(diǎn)的替換像素值；生成單元，用于根據(jù)圖像幀各像素點(diǎn)的替換像素值，生成處理后的視頻圖像幀。
16.如權(quán)利要求15所述的裝置，其特征在于，所述第二確定單元，具體用于當(dāng)存在唯 一所述對應(yīng)像素點(diǎn)時(shí)，確定所述第一類像素點(diǎn)的替換像素值為所述對應(yīng)像素點(diǎn)的替換像素 值；當(dāng)存在多個(gè)所述對應(yīng)像素點(diǎn)時(shí)，確定所述第一類像素點(diǎn)的替換像素值為各所述對應(yīng)像 素點(diǎn)的替換像素值的均值。
17.如權(quán)利要求15或16所述的裝置，其特征在于，所述第三確定單元采用所述變換策 略確定像素點(diǎn)的替換像素值，具體為根據(jù)色調(diào)H分量取值范圍內(nèi)的各H分量值在參考圖像各像素點(diǎn)的H分量值中出現(xiàn)的次 數(shù)和該像素點(diǎn)的H分量值，采用均值漂移算法確定出該像素點(diǎn)的替換H分量值；或者根據(jù)參考圖像各像素點(diǎn)的H分量值的第一均值和該像素點(diǎn)所屬圖像幀各像素點(diǎn)的H分 量值的第二均值的差值或比值，以及該像素點(diǎn)的H分量值，確定該像素點(diǎn)的替換H分量值； 或者用該像素點(diǎn)的H分量值減去該像素點(diǎn)所屬圖像幀各像素點(diǎn)的H分量值的第二均值，得 到差值；用參考圖像各像素點(diǎn)的H分量值的第一標(biāo)準(zhǔn)差與該像素點(diǎn)所屬圖像幀各像素點(diǎn)的 H分量值的第二標(biāo)準(zhǔn)差的比值乘以所述差值，得到乘積；確定該像素點(diǎn)的替換H分量值為參 考圖像各像素點(diǎn)的H分量值的第一均值與所述乘積的和。
18.—種視頻圖像幀處理裝置，其特征在于，包括第一確定單元，用于對于所述視頻中除第一個(gè)圖像幀外的后續(xù)圖像幀的像素點(diǎn)，確定 出第一類像素點(diǎn)，所述第一類像素點(diǎn)在上一個(gè)圖像幀中存在基于像素運(yùn)動(dòng)對應(yīng)像素點(diǎn)；將 其余像素點(diǎn)確定為第二類像素點(diǎn)；第二確定單元，用于根據(jù)所述對應(yīng)像素點(diǎn)與所述第一類像素點(diǎn)的之間的光流誤差，確 定所述第一類像素點(diǎn)的替換像素值；第三確定單元，用于采用設(shè)定的像素值變換策略確定所述第二類像素點(diǎn)的替換像素 值；以及采用所述變換策略確定所述第一個(gè)圖像幀中像素點(diǎn)的替換像素值；生成單元，用于根據(jù)圖像幀各像素點(diǎn)的替換像素值，生成處理后的視頻圖像幀。
19.如權(quán)利要求18所述的裝置，其特征在于，所述第二確定單元，具體用于確定所述對 應(yīng)像素點(diǎn)與所述第一類像素點(diǎn)之間的光流誤差；當(dāng)所述光流誤差大于設(shè)定閾值時(shí)，通知所 述第三確定單元；否則，當(dāng)存在唯一所述對應(yīng)像素點(diǎn)時(shí)，確定所述第一類像素點(diǎn)的替換像素 值為所述對應(yīng)像素點(diǎn)的替換像素值；當(dāng)存在多個(gè)所述對應(yīng)像素點(diǎn)時(shí)，確定所述第一類像素 點(diǎn)的替換像素值為各所述對應(yīng)像素點(diǎn)的替換像素值的均值；所述第三確定單元，還用于接收到所述第二確定單元的通知后，采用所述變換策略確定其替換像素值。
20.如權(quán)利要求18或19所述的裝置，其特征在于，所述第三確定單元采用所述變換策 略確定像素點(diǎn)的替換像素值，具體為根據(jù)色調(diào)H分量取值范圍內(nèi)的各H分量值在參考圖像各像素點(diǎn)的H分量值中出現(xiàn)的次 數(shù)和該像素點(diǎn)的H分量值，采用均值漂移算法確定出該像素點(diǎn)的替換H分量值；或者根據(jù)參考圖像各像素點(diǎn)的H分量值的第一均值和該像素點(diǎn)所屬圖像幀各像素點(diǎn)的H分 量值的第二均值的差值或比值，以及該像素點(diǎn)的H分量值，確定該像素點(diǎn)的替換H分量值； 或者用該像素點(diǎn)的H分量值減去該像素點(diǎn)所屬圖像幀各像素點(diǎn)的H分量值的第二均值，得 到差值；用參考圖像各像素點(diǎn)的H分量值的第一標(biāo)準(zhǔn)差與該像素點(diǎn)所屬圖像幀各像素點(diǎn)的 H分量值的第二標(biāo)準(zhǔn)差的比值乘以所述差值，得到乘積；確定該像素點(diǎn)的替換H分量值為參 考圖像各像素點(diǎn)的H分量值的第一均值與所述乘積的和。
全文摘要
本發(fā)明公開了一種圖像處理方法及裝置，包括確定參考圖像包含的像素點(diǎn)的H分量值分布；根據(jù)該H分量值分布，確定出原始圖像各像素點(diǎn)的替換H分量值；確定出的替換H分量值分布比原始圖像各像素點(diǎn)的H分量值分布更接近該H分量值分布；根據(jù)原始圖像各像素點(diǎn)的替換H分量值，生成處理后的圖像。使得處理后的圖像的風(fēng)格更接近參考圖像的風(fēng)格，且處理效率更高。本發(fā)明還公開了一種視頻處理方法及裝置，包括根據(jù)圖像幀像素點(diǎn)基于像素運(yùn)動(dòng)對應(yīng)像素點(diǎn)的像素值或與對應(yīng)像素點(diǎn)的光流誤差，確定出該像素點(diǎn)的替換像素值，根據(jù)確定出的替換像素值，生成處理后的視頻圖像幀。減少了新視頻中相鄰圖像幀間的抖動(dòng)，使得視覺效果更佳。
文檔編號H04N1/56GK101938661SQ20091008679
公開日2011年1月5日 申請日期2009年6月30日 優(yōu)先權(quán)日2009年6月30日
發(fā)明者于蓉蓉, 張松海, 楊黎波, 程威, 胡事民 申請人:中國移動(dòng)通信集團(tuán)公司