本發(fā)明涉及成像技術(shù),特別涉及一種圖像處理方法、圖像處理裝置、控制方法、控制裝置、成像裝置及電子裝置。
背景技術(shù):
現(xiàn)有的一種圖像傳感器包括感光像素單元陣列和設(shè)置在感光像素單元陣列上的濾光片單元陣列,每個(gè)濾光片單元陣列覆蓋對(duì)應(yīng)一個(gè)感光像素單元,每個(gè)感光像素單元包括多個(gè)感光像素。工作時(shí),可以控制圖像傳感器曝光輸出合并圖像,合并圖像可以通過(guò)圖像處理方法轉(zhuǎn)化成合并真彩圖像并保存下來(lái)。合并圖像包括合并像素陣列,同一感光像素單元的多個(gè)感光像素合并輸出作為對(duì)應(yīng)的合并像素。如此,可以提高合并圖像的信噪比,然而,合并圖像的解析度降低。當(dāng)然,也可以控制圖像傳感器曝光輸出高像素的色塊圖像,色塊圖像包括原始像素陣列,每個(gè)感光像素對(duì)應(yīng)一個(gè)原始像素。然而,由于同一濾光片單元對(duì)應(yīng)的多個(gè)原始像素顏色相同,同樣無(wú)法提高色塊圖像的解析度。因此,需要通過(guò)插值計(jì)算的方式將高像素色塊圖像轉(zhuǎn)化成高像素的仿原圖像,仿原圖像可以包括呈貝爾陣列排布的仿原像素。仿原圖像可以通過(guò)圖像處理方法轉(zhuǎn)化成仿原真彩圖像并保存下來(lái)。然而,插值計(jì)算耗費(fèi)資源且耗時(shí),而且并非所有場(chǎng)景都適用或者需要輸出仿原真彩圖像。
技術(shù)實(shí)現(xiàn)要素:
本發(fā)明旨在至少解決現(xiàn)有技術(shù)中存在的技術(shù)問(wèn)題之一。為此,本發(fā)明需要提供一種圖像處理方法、圖像處理裝置、控制方法、控制裝置、成像裝置及電子裝置。
一種圖像處理方法,用于處理圖像傳感器輸出的同一場(chǎng)景的合并圖像和色塊圖像以輸出合并仿原圖像,所述圖像傳感器包括感光像素單元陣列和設(shè)置在所述感光像素單元陣列上的濾光片單元陣列,每個(gè)所述濾光片單元陣列覆蓋對(duì)應(yīng)一個(gè)所述感光像素單元,每個(gè)所述感光像素單元包括多個(gè)感光像素,所述合并圖像包括合并像素陣列,同一所述感光像素單元的多個(gè)感光像素合并輸出作為一個(gè)所述合并像素,所述色塊圖像包括預(yù)定陣列排布的圖像像素單元,所述圖像像素單元包括多個(gè)原始像素,每個(gè)所述感光像素對(duì)應(yīng)一個(gè)所述原始像素,所述圖像處理方法包括以下步驟:
將所述色塊圖像轉(zhuǎn)化成仿原圖像,所述仿原圖像包括陣列排布的仿原像素,所述仿原像素包括當(dāng)前像素,所述原始像素包括與所述當(dāng)前像素對(duì)應(yīng)的關(guān)聯(lián)像素,所述色塊圖像包括固定區(qū)域,所述將所述色塊圖像轉(zhuǎn)化成所述仿原圖像的步驟包括以下步驟:
判斷所述關(guān)聯(lián)像素是否位于所述固定區(qū)域內(nèi);
在所述關(guān)聯(lián)像素位于所述固定區(qū)域內(nèi)時(shí)判斷所述當(dāng)前像素的顏色與所述關(guān)聯(lián)像素的顏色是否相同;
在所述當(dāng)前像素的顏色與所述關(guān)聯(lián)像素的顏色相同時(shí),將所述關(guān)聯(lián)像素的像素值作為所述當(dāng)前像素的像素值;和
在所述當(dāng)前像素的顏色與所述關(guān)聯(lián)像素的顏色不同時(shí),根據(jù)關(guān)聯(lián)像素單元的像素值通過(guò)第一插值算法計(jì)算所述當(dāng)前像素的像素值,所述圖像像素單元包括所述關(guān)聯(lián)像素單元,所述關(guān)聯(lián)像素單元的顏色與所述當(dāng)前像素相同且與所述當(dāng)前像素相鄰;
將所述合并圖像通過(guò)第二插值算法轉(zhuǎn)化成與所述仿原圖像對(duì)應(yīng)的還原圖像,所述第二插值算法的復(fù)雜度小于所述第一插值算法;和
合并所述仿原圖像及所述還原圖像以得到所述合并仿原圖像。
在某些實(shí)施方式中,所述預(yù)定陣列包括貝爾陣列。
在某些實(shí)施方式中,所述圖像像素單元包括2*2陣列的所述原始像素。
在某些實(shí)施方式中,所述根據(jù)關(guān)聯(lián)像素單元的像素值通過(guò)第一插值算法計(jì)算所述當(dāng)前像素的像素值的步驟包括以下步驟:
計(jì)算所述關(guān)聯(lián)像素各個(gè)方向上的漸變量;
計(jì)算所述關(guān)聯(lián)像素各個(gè)方向上的權(quán)重;和
根據(jù)所述漸變量及所述權(quán)重計(jì)算所述當(dāng)前像素的像素值。
在某些實(shí)施方式中,所述圖像處理方法在所述根據(jù)關(guān)聯(lián)像素單元的像素值通過(guò)第一插值算法計(jì)算所述當(dāng)前像素的像素值的步驟前包括以下步驟:
對(duì)所述色塊圖像做白平衡補(bǔ)償;
所述圖像處理方法在所述根據(jù)關(guān)聯(lián)像素單元的像素值通過(guò)第一插值算法計(jì)算所述當(dāng)前像素的像素值的步驟后包括以下步驟:
對(duì)所述仿原圖像做白平衡補(bǔ)償還原。
在某些實(shí)施方式中,所述圖像處理方法在所述根據(jù)關(guān)聯(lián)像素單元的像素值通過(guò)第一插值算法計(jì)算所述當(dāng)前像素的像素值的步驟前包括以下步驟:
對(duì)所述色塊圖像做壞點(diǎn)補(bǔ)償。
在某些實(shí)施方式中,所述圖像處理方法在所述根據(jù)關(guān)聯(lián)像素單元的像素值通過(guò)第一插值算法計(jì)算所述當(dāng)前像素的像素值的步驟前包括以下步驟:
對(duì)所述色塊圖像做串?dāng)_補(bǔ)償。
在某些實(shí)施方式中,所述圖像處理方法在所述根據(jù)關(guān)聯(lián)像素單元的像素值通過(guò)第一插值算法計(jì)算所述當(dāng)前像素的像素值的步驟后包括如下步驟:
對(duì)所述仿原圖像進(jìn)行鏡片形狀校正、去馬賽克、降噪和邊緣銳化處理。
一種控制方法,用于控制電子裝置,所述電子裝置包括成像裝置,所述成像裝置包括圖像傳感器,所述圖像傳感器包括感光像素單元陣列和設(shè)置在所述感光像素單元陣列上的濾光片單元陣列,每個(gè)所述濾光片單元陣列覆蓋對(duì)應(yīng)一個(gè)所述感光像素單元,每個(gè)所述感光像素單元包括多個(gè)感光像素,所述控制方法包括以下步驟:
控制所述圖像傳感器輸出合并圖像和色塊圖像;和
采用所述圖像處理方法處理所述合并圖像和色塊圖像以獲得合并仿原圖像。
在某些實(shí)施方式中,所述電子裝置包括觸摸屏,所述控制方法包括以下步驟:
采用第三插值算法將所述合并圖像轉(zhuǎn)化成預(yù)覽圖像,所述第三插值算法包括所述第二插值算法;
控制所述觸摸屏顯示所述預(yù)覽圖像;和
控制所述觸摸屏顯示提示圖形以顯示所述固定區(qū)域。
一種圖像處理裝置,用于處理圖像傳感器輸出的同一場(chǎng)景的合并圖像和色塊圖像以輸出合并仿原圖像,所述圖像傳感器包括感光像素單元陣列和設(shè)置在所述感光像素單元陣列上的濾光片單元陣列,每個(gè)所述濾光片單元陣列覆蓋對(duì)應(yīng)一個(gè)所述感光像素單元,每個(gè)所述感光像素單元包括多個(gè)感光像素,所述合并圖像包括合并像素陣列,同一所述感光像素單元的多個(gè)感光像素合并輸出作為一個(gè)所述合并像素,所述色塊圖像包括預(yù)定陣列排布的圖像像素單元,所述圖像像素單元包括多個(gè)原始像素,每個(gè)所述感光像素對(duì)應(yīng)一個(gè)所述原始像素,所述圖像處理裝置包括第一轉(zhuǎn)化模塊、第二轉(zhuǎn)化模塊和合并模塊。
所述第一轉(zhuǎn)化模塊用于將所述色塊圖像轉(zhuǎn)化成仿原圖像,所述仿原圖像包括陣列排布的仿原像素,所述仿原像素包括當(dāng)前像素,所述原始像素包括與所述當(dāng)前像素對(duì)應(yīng)的關(guān)聯(lián)像素,所述色塊圖像包括固定區(qū)域,所述第一轉(zhuǎn)化模塊包括第一判斷單元、第二判斷單元、第一計(jì)算單元和第二計(jì)算單元。
所述第一判斷模塊用于判斷所述關(guān)聯(lián)像素是否位于所述固定區(qū)域內(nèi)。
所述第二判斷模塊用于在所述關(guān)聯(lián)像素位于所述固定區(qū)域內(nèi)時(shí)判斷所述當(dāng)前像素的顏色與所述關(guān)聯(lián)像素的顏色是否相同。
所述第一計(jì)算模塊用于在所述當(dāng)前像素的顏色與所述關(guān)聯(lián)像素的顏色相同時(shí),將所述關(guān)聯(lián)像素的像素值作為所述當(dāng)前像素的像素值。
所述第二計(jì)算模塊用于在所述當(dāng)前像素的顏色與所述關(guān)聯(lián)像素的顏色不同時(shí),根據(jù)關(guān)聯(lián)像素單元的像素值通過(guò)第一插值算法計(jì)算所述當(dāng)前像素的像素值,所述圖像像素單元包括所述關(guān)聯(lián)像素單元,所述關(guān)聯(lián)像素單元的顏色與所述當(dāng)前像素相同且與所述當(dāng)前像素相鄰。
所述第二轉(zhuǎn)化模塊用于將所述合并圖像通過(guò)第二插值算法轉(zhuǎn)化成與所述仿原圖像對(duì)應(yīng)的還原圖像,所述第二插值算法的復(fù)雜度小于所述第一差值算法。
所述合并模塊用于合并所述仿原圖像及所述還原圖像以得到所述合并仿原圖像。
在某些實(shí)施方式中,所述預(yù)定陣列包括貝爾陣列。
在某些實(shí)施方式中,所述圖像像素單元包括2*2陣列的所述原始像素。
在某些實(shí)施方式中,所述第二計(jì)算單元包括第一計(jì)算子單元、第二計(jì)算子單元和第三計(jì)算子單元。
所述第一計(jì)算子單元用于計(jì)算所述關(guān)聯(lián)像素各個(gè)方向上的漸變量。
所述第二計(jì)算子單元用于計(jì)算所述關(guān)聯(lián)像素各個(gè)方向上的權(quán)重。
所述第三計(jì)算子單元用于根據(jù)所述漸變量及所述權(quán)重計(jì)算所述當(dāng)前像素的像素值。
在某些實(shí)施方式中,所述第一轉(zhuǎn)化模塊包括白平衡補(bǔ)償單元和白平衡補(bǔ)償還原單元。
所述白平衡補(bǔ)償單元用于對(duì)所述色塊圖像做白平衡補(bǔ)償。
所述白平衡補(bǔ)償還原單元用于對(duì)所述仿原圖像做白平衡補(bǔ)償還原。
在某些實(shí)施方式中,所述第一轉(zhuǎn)化模塊包括壞點(diǎn)補(bǔ)償單元。
所述壞點(diǎn)補(bǔ)償單元用于對(duì)所述色塊圖像做壞點(diǎn)補(bǔ)償。
在某些實(shí)施方式中,所述第一轉(zhuǎn)化模塊包括串?dāng)_補(bǔ)償單元。
所述串?dāng)_補(bǔ)償單元用于對(duì)所述色塊圖像做串?dāng)_補(bǔ)償。
在某些實(shí)施方式中,所述第一轉(zhuǎn)化模塊包括處理單元。
所述處理單元用于對(duì)所述仿原圖像進(jìn)行鏡片形狀校正、去馬賽克、降噪和邊緣銳化處理。
一種成像裝置包括所述圖像處理裝置和圖像傳感器,所述圖像傳感器用于產(chǎn)生所述合并圖像和所述色塊圖像。
一種控制裝置,用于控制電子裝置,所述電子裝置包括成像裝置,所述成像裝置包括圖像傳感器,所述圖像傳感器包括感光像素單元陣列和設(shè)置在所述感光像素單元陣列上的濾光片單元陣列,每個(gè)所述濾光片單元陣列覆蓋對(duì)應(yīng)一個(gè)所述感光像素單元,每個(gè)所述感光像素單元包括多個(gè)感光像素,所述控制裝置包括第一控制模塊和圖像處理裝置。
所述第一控制模塊用于控制所述圖像傳感器輸出合并圖像和色塊圖像。
所述圖像處理裝置用于采用所述圖像處理方法處理所述合并圖像和色塊圖像以獲得合并仿原圖像。
在某些實(shí)施方式中,所述電子裝置包括觸摸屏,所述控制裝置包括第三轉(zhuǎn)化模塊、第二控制模塊和第三控制模塊。
所述第三轉(zhuǎn)化模塊用于采用第三插值算法將所述合并圖像轉(zhuǎn)化成預(yù)覽圖像,所述第三插值算法包括所述第二插值算法。
所述第二控制模塊用于控制所述觸摸屏顯示所述預(yù)覽圖像。
所述第三控制模塊用于控制所述觸摸屏顯示提示圖形以顯示所述固定區(qū)域。
一種電子裝置包括所述成像裝置、觸摸屏和所述控制裝置。
在某些實(shí)施方式中,所述電子裝置包括手機(jī)或平板電腦。
在某些實(shí)施方式中,所述成像裝置包括前置相機(jī)或后置相機(jī)。
本發(fā)明的圖像處理方法、圖像處理裝置、控制方法、控制裝置、成像裝置及電子裝置對(duì)色塊圖像的固定區(qū)域進(jìn)行圖像處理,從而獲得高質(zhì)量的圖像,同時(shí)避免了對(duì)整幀圖像進(jìn)行圖像處理帶來(lái)的大量工作,提高了工作效率。
本發(fā)明的附加方面和優(yōu)點(diǎn)將在下面的描述中部分給出,部分將從下面的描述中變得明顯,或通過(guò)本發(fā)明的實(shí)踐了解到。
附圖說(shuō)明
本發(fā)明的上述和/或附加的方面和優(yōu)點(diǎn)從結(jié)合下面附圖對(duì)實(shí)施方式的描述中將變得明顯和容易理解,其中:
圖1是本發(fā)明實(shí)施方式的圖像處理方法的流程示意圖。
圖2是本發(fā)明實(shí)施方式的圖像處理方法的另一個(gè)流程示意圖。
圖3是本發(fā)明實(shí)施方式的圖像處理裝置的功能模塊示意圖。
圖4是本發(fā)明某些實(shí)施方式的第一轉(zhuǎn)化模塊的功能模塊示意圖。
圖5是本發(fā)明實(shí)施方式的成像裝置的功能模塊示意圖。
圖6是本發(fā)明實(shí)施方式的控制方法的流程示意圖。
圖7是本發(fā)明實(shí)施方式的控制裝置的功能模塊示意圖。
圖8是本發(fā)明實(shí)施方式的電子裝置的功能模塊示意圖。
圖9是本發(fā)明實(shí)施方式的圖像傳感器的模塊示意圖。
圖10是本發(fā)明實(shí)施方式的圖像傳感器的電路示意圖。
圖11是本發(fā)明實(shí)施方式的濾光片單元的示意圖
圖12是本發(fā)明實(shí)施方式的圖像傳感器的結(jié)構(gòu)示意圖。
圖13是本發(fā)明實(shí)施方式的合并圖像狀態(tài)示意圖。
圖14是本發(fā)明實(shí)施方式的色塊圖像的狀態(tài)示意圖。
圖15是本發(fā)明實(shí)施方式的圖像處理方法的狀態(tài)示意圖。
圖16是本發(fā)明某些實(shí)施方式的圖像處理方法的流程示意圖。
圖17是本發(fā)明某些實(shí)施方式的第二計(jì)算單元的功能模塊示意圖。
圖18是本發(fā)明某些實(shí)施方式的圖像處理方法的流程示意圖。
圖19是本發(fā)明某些實(shí)施方式的第一轉(zhuǎn)化模塊的功能模塊示意圖。
圖20是本發(fā)明某些實(shí)施方式的色塊圖像的圖像像素單元示意圖.
圖21是本發(fā)明某些實(shí)施方式的圖像處理方法的流程示意圖。
圖22是本發(fā)明某些實(shí)施方式的第一轉(zhuǎn)化模塊的功能模塊示意圖。
圖23是本發(fā)明某些實(shí)施方式的控制方法的流程示意圖。
圖24是本發(fā)明某些實(shí)施方式的控制裝置的功能模塊示意圖。
主要元件符號(hào)說(shuō)明:
電子裝置1000、成像裝置100、圖像傳感器10、感光像素單元陣列12、感光像素單元12a、感光像素子單元120、感光像素122、感光器件1222、傳輸管1224、源極跟隨器124、模數(shù)轉(zhuǎn)換器126、加法器128、濾光片單元陣列14、濾光片單元14a、圖像處理裝置20、第一轉(zhuǎn)化模塊24、第二轉(zhuǎn)化模塊25、合并模塊26、第一判斷單元241、第二判斷單元242、第一計(jì)算單元243、第二計(jì)算單元244、第一計(jì)算子單元2442、第二計(jì)算子單元2444、第三計(jì)算子單元2446、白平衡補(bǔ)償單元245、白平衡補(bǔ)償還原單元246、壞點(diǎn)補(bǔ)償單元247、串?dāng)_補(bǔ)償單元248、處理單元249、控制裝置200、第一控制模塊212、第三轉(zhuǎn)化模塊214、第二控制模塊216、第三控制模塊218。
具體實(shí)施方式
下面詳細(xì)描述本發(fā)明的實(shí)施方式,所述實(shí)施方式的實(shí)施方式在附圖中示出,其中自始至終相同或類(lèi)似的標(biāo)號(hào)表示相同或類(lèi)似的元件或具有相同或類(lèi)似功能的元件。下面通過(guò)參考附圖描述的實(shí)施方式是示例性的,僅用于解釋本發(fā)明,而不能理解為對(duì)本發(fā)明的限制。
請(qǐng)參閱圖1,本發(fā)明實(shí)施方式的圖像處理方法,用于處理圖像傳感器10輸出的同一場(chǎng)景的合并圖像和色塊圖像以輸出合并仿原圖像,圖像傳感器10包括感光像素單元陣列12和設(shè)置在感光像素單元陣列12上的濾光片單元陣列14,每個(gè)濾光片單元陣列14覆蓋對(duì)應(yīng)一個(gè)感光像素單元12a,每個(gè)感光像素單元12a包括多個(gè)感光像素122,合并圖像包括合并像素陣列,同一感光像素單元12a的多個(gè)感光像素122合并輸出作為一個(gè)合并像素,色塊圖像包括預(yù)定陣列排布的圖像像素單元,圖像像素單元包括多個(gè)原始像素,每個(gè)感光像素122對(duì)應(yīng)一個(gè)原始像素,圖像處理方法包括以下步驟:
S24:將色塊圖像轉(zhuǎn)化成仿原圖像,仿原圖像包括陣列排布的仿原像素,仿原像素包括當(dāng)前像素,原始像素包括與當(dāng)前像素對(duì)應(yīng)的關(guān)聯(lián)像素,色塊圖像包括固定區(qū)域;
S25:將合并圖像通過(guò)第二插值算法轉(zhuǎn)化成與仿原圖像對(duì)應(yīng)的還原圖像,第二插值算法的復(fù)雜度小于第一插值算法;和
S26:合并仿原圖像及還原圖像以得到合并仿原圖像。
請(qǐng)參閱圖2,在某些實(shí)施方式中,步驟S24包括以下步驟:
S241:判斷關(guān)聯(lián)像素是否位于固定區(qū)域內(nèi);
S242:在關(guān)聯(lián)像素位于固定區(qū)域內(nèi)時(shí)判斷當(dāng)前像素的顏色與關(guān)聯(lián)像素的顏色是否相同;
S243:在當(dāng)前像素的顏色與關(guān)聯(lián)像素的顏色相同時(shí),將關(guān)聯(lián)像素的像素值作為當(dāng)前像素的像素值;和
S244在當(dāng)前像素的顏色與關(guān)聯(lián)像素的顏色不同時(shí),根據(jù)關(guān)聯(lián)像素單元的像素值通過(guò)第一插值算法計(jì)算當(dāng)前像素的像素值,圖像像素單元包括關(guān)聯(lián)像素單元,關(guān)聯(lián)像素單元的顏色與當(dāng)前像素相同且與當(dāng)前像素相鄰。
請(qǐng)參閱圖3和圖4,本發(fā)明實(shí)施方式的圖像處理裝置20,用于處理圖像傳感器10輸出的同一場(chǎng)景的合并圖像和色塊圖像以輸出合并仿原圖像,圖像傳感器10包括感光像素單元陣列12和設(shè)置在感光像素單元陣列12上的濾光片單元陣列14,每個(gè)濾光片單元陣列14覆蓋對(duì)應(yīng)一個(gè)感光像素單元12a,每個(gè)感光像素單元12a包括多個(gè)感光像素122,合并圖像包括合并像素陣列,同一感光像素單元12a的多個(gè)感光像素122合并輸出作為一個(gè)合并像素,色塊圖像包括預(yù)定陣列排布的圖像像素單元,圖像像素單元包括多個(gè)原始像素,每個(gè)感光像素對(duì)應(yīng)一個(gè)原始像素。圖像處理裝置20包括第一轉(zhuǎn)化模塊24、第二轉(zhuǎn)化模塊25和合并模塊26。第一轉(zhuǎn)化模塊24用于將色塊圖像轉(zhuǎn)化成仿原圖像,仿原圖像包括陣列排布的仿原像素,仿原像素包括當(dāng)前像素,原始像素包括與當(dāng)前像素對(duì)應(yīng)的關(guān)聯(lián)像素,色塊圖像包括固定區(qū)域,第一轉(zhuǎn)化模塊24包括第一判斷單元241、第二判斷單元242、第一計(jì)算單元243和第二計(jì)算單元244。第一判斷模塊241用于判斷關(guān)聯(lián)像素是否位于固定區(qū)域內(nèi)。第二判斷模塊242用于在關(guān)聯(lián)像素位于固定區(qū)域內(nèi)時(shí)判斷當(dāng)前像素的顏色與關(guān)聯(lián)像素的顏色是否相同。第一計(jì)算模塊243用于在當(dāng)前像素的顏色與關(guān)聯(lián)像素的顏色相同時(shí),將關(guān)聯(lián)像素的像素值作為當(dāng)前像素的像素值。第二計(jì)算模塊244用于在當(dāng)前像素的顏色與關(guān)聯(lián)像素的顏色不同時(shí),根據(jù)關(guān)聯(lián)像素單元的像素值通過(guò)第一插值算法計(jì)算當(dāng)前像素的像素值,圖像像素單元包括關(guān)聯(lián)像素單元,關(guān)聯(lián)像素單元的顏色與當(dāng)前像素相同且與當(dāng)前像素相鄰。第二轉(zhuǎn)化模塊25用于將合并圖像通過(guò)第二插值算法轉(zhuǎn)化成與仿原圖像對(duì)應(yīng)的還原圖像,第二插值算法的復(fù)雜度小于第一差值算法。合并模塊26用于合并仿原圖像及還原圖像以得到合并仿原圖像。
也即是說(shuō),步驟S24可以由第一轉(zhuǎn)化模塊24實(shí)現(xiàn),步驟S25可以由第二轉(zhuǎn)化模塊25實(shí)現(xiàn),步驟S26可以由合并模塊26實(shí)現(xiàn)。
在某些實(shí)施方式中,第二插值算法的時(shí)間復(fù)雜度和空間復(fù)雜度都比第一插值算法小。算法的復(fù)雜度包括時(shí)間復(fù)雜度和空間復(fù)雜度,時(shí)間復(fù)雜度用來(lái)度量算法需要耗費(fèi)的時(shí)間,空間復(fù)雜度是用來(lái)度量算法需要耗費(fèi)的存儲(chǔ)空間。時(shí)間復(fù)雜度小說(shuō)明算法需要耗費(fèi)的時(shí)間少,空間復(fù)雜度小說(shuō)明算法需要耗費(fèi)的存儲(chǔ)空間小,因此,利用第二插值算法有利于提高運(yùn)算速度,使得拍照過(guò)程更加流暢,提高用戶(hù)體驗(yàn)。
請(qǐng)參閱圖5,本發(fā)明實(shí)施方式的成像裝置100包括圖像處理裝置20和圖像傳感器10,圖像傳感器10用于產(chǎn)生合并圖像和色塊圖像。也即是說(shuō),本發(fā)明實(shí)施方式的圖像處理裝置20可以應(yīng)用于本發(fā)明實(shí)施方式的成像裝置100。
請(qǐng)參閱圖6,本發(fā)明實(shí)施方式的控制方法,用于控制電子裝置1000,電子裝置1000包括成像裝置100,成像裝置100包括圖像傳感器10,圖像傳感器10包括感光像素單元陣列12和設(shè)置在感光像素單元陣列12上的濾光片單元陣列14,每個(gè)濾光片單元陣列14覆蓋對(duì)應(yīng)一個(gè)感光像素單元12a,每個(gè)感光像素單元12a包括多個(gè)感光像素122,控制方法包括以下步驟:
S212:控制圖像傳感器輸出合并圖像和色塊圖像;和
S213:采用圖像處理方法處理合并圖像和色塊圖像以獲得合并仿原圖像。
請(qǐng)參閱圖7,本發(fā)明實(shí)施方式的控制裝置200,用于控制電子裝置1000,電子裝置1000包括成像裝置100,成像裝置100包括圖像傳感器10,圖像傳感器10包括感光像素單元陣列12和設(shè)置在感光像素單元陣列12上的濾光片單元陣列14,每個(gè)濾光片單元陣列14覆蓋對(duì)應(yīng)一個(gè)感光像素單元12a,每個(gè)感光像素單元12a包括多個(gè)感光像素122,控制裝置200包括第一控制模塊212和圖像處理裝置20。第一控制模塊212用于控制圖像傳感器10輸出合并圖像和色塊圖像。圖像處理裝置20用于采用本發(fā)明實(shí)施方式的圖像處理方法處理合并圖像和色塊圖像以獲得合并仿原圖像。
也即是說(shuō),步驟S212可以由第一控制模塊212實(shí)現(xiàn),步驟S213可以由圖像傳感器20實(shí)現(xiàn)。
請(qǐng)參閱圖8,本發(fā)明實(shí)施方式的電子裝置1000包括成像裝置100、觸摸屏和本發(fā)明實(shí)施方式的控制裝置200。也即是說(shuō),本發(fā)明實(shí)施方式的控制裝置200可以應(yīng)用于本發(fā)明實(shí)施方式的電子裝置1000。
本發(fā)明的圖像處理方法、圖像處理裝置20、控制方法、控制裝置200、成像裝置100及電子裝置1000對(duì)色塊圖像的固定區(qū)域進(jìn)行圖像處理,從而獲得高質(zhì)量的圖像,同時(shí)避免了對(duì)整幀圖像進(jìn)行圖像處理帶來(lái)的大量工作,提高了工作效率。
在某些實(shí)施方式中,電子裝置1000包括手機(jī)或平板電腦等具備成像裝置的電子設(shè)備,在此不做任何限制。本發(fā)明實(shí)施方式的電子裝置1000是手機(jī)。
在某些實(shí)施方式中,成像裝置100包括前置相機(jī)或后置相機(jī)。
在某些實(shí)施方式中,固定區(qū)域是在拍攝預(yù)覽時(shí)呈現(xiàn)在觸摸屏上的一個(gè)無(wú)法拖動(dòng)且大小固定的區(qū)域,用戶(hù)拍攝時(shí)通過(guò)改變成像裝置100的圖像攝取位置以將需要進(jìn)行圖像處理的主體部分放入該固定區(qū)域內(nèi)。將色塊圖像的固定區(qū)域轉(zhuǎn)化成仿原圖像以提高該部分圖像的解析度,利用復(fù)雜度小于第一插值算法的第二插值算法將合并圖像轉(zhuǎn)化成還原圖像以減少圖像處理的時(shí)間,從而在提升圖像質(zhì)量的同時(shí)提高工作效率。
在某些實(shí)施方式中,合并仿原圖像的固定區(qū)域可以是仿原圖像的固定區(qū)域,合并仿原圖像除了固定區(qū)域的其他區(qū)域可以是還原圖像的對(duì)應(yīng)區(qū)域,也即是說(shuō),提取仿原圖像的固定區(qū)域和還原圖像除了固定區(qū)域的其他區(qū)域,然后進(jìn)行合并,從而得到合并仿原圖像。
在某些實(shí)施方式中,將合并圖像轉(zhuǎn)化成還原圖像的第二插值算法可以是將合并圖像簡(jiǎn)單地放大四倍而不需要進(jìn)行其他的復(fù)雜運(yùn)算,從而獲得與仿原圖像對(duì)應(yīng)的還原圖像。
請(qǐng)一并參閱圖9至圖12,本發(fā)明實(shí)施方式的圖像傳感器10包括感光像素單元陣列12和設(shè)置在感光像素單元陣列12上的濾光片單元陣列14。
進(jìn)一步地,感光像素單元陣列12包括多個(gè)感光像素單元12a,每個(gè)感光像素單元12a包括多個(gè)相鄰的感光像素122。每個(gè)感光像素122包括一個(gè)感光器件1222和一個(gè)傳輸管1224,其中,感光器件1222可以是光電二極管,傳輸管1224可以是MOS晶體管。
濾光片單元陣列14包括多個(gè)濾光片單元14a,每個(gè)濾光片單元14a覆蓋對(duì)應(yīng)一個(gè)感光像素單元12a。
具體地,在某些示例中,濾光片單元陣列14包括拜耳陣列,也即是說(shuō),相鄰的四個(gè)濾光片單元14a分別為一個(gè)紅色濾光片單元、一個(gè)藍(lán)色濾光片單元和兩個(gè)綠色濾光片單元。
每一個(gè)感光像素單元12a對(duì)應(yīng)同一顏色的濾光片單元14a,若一個(gè)感光像素單元12a中一共包括n個(gè)相鄰的感光器件1222,那么一個(gè)濾光片單元14a覆蓋一個(gè)感光像素單元12a中的n個(gè)感光器件1222,該濾光片單元14a可以是一體構(gòu)造,也可以由n個(gè)獨(dú)立的子濾光片組裝連接在一起。
在某些實(shí)施方式中,每個(gè)感光像素單元12a包括四個(gè)相鄰的感光像素122,相鄰兩個(gè)感光像素122共同構(gòu)成一個(gè)感光像素子單元120,感光像素子單元120還包括一個(gè)源極跟隨器124及一個(gè)模數(shù)轉(zhuǎn)換器126。感光像素單元12a還包括一個(gè)加法器128。其中,一個(gè)感光像素子單元120中的每個(gè)傳輸管1224的一端電極被連接到對(duì)應(yīng)感光器件1222的陰極電極,每個(gè)傳輸管1224的另一端被共同連接至源極跟隨器124的閘極電極,并通過(guò)源極跟隨器124源極電極連接至一個(gè)模數(shù)轉(zhuǎn)換器126。其中,源極跟隨器124可以是MOS晶體管。兩個(gè)感光像素子單元120通過(guò)各自的源極跟隨器124及模數(shù)轉(zhuǎn)換器126連接至加法器128。
也即是說(shuō),本發(fā)明實(shí)施方式的圖像傳感器10的一個(gè)感光像素單元12a中相鄰的四個(gè)感光器件1222共用一個(gè)同顏色的濾光片單元14a,每個(gè)感光器件1222對(duì)應(yīng)連接一個(gè)傳輸管1224,相鄰兩個(gè)感光器件1222共用一個(gè)源極跟隨器124和一個(gè)模數(shù)轉(zhuǎn)換器126,相鄰的四個(gè)感光器件1222共用一個(gè)加法器128。
進(jìn)一步地,相鄰的四個(gè)感光器件1222呈2*2陣列排布。其中,一個(gè)感光像素子單元120中的兩個(gè)感光器件1222可以處于同一列。
在成像時(shí),當(dāng)同一濾光片單元14a下覆蓋的兩個(gè)感光像素子單元120或者說(shuō)四個(gè)感光器件1222同時(shí)曝光時(shí),可以對(duì)像素進(jìn)行合并進(jìn)而可輸出合并圖像。
具體地,感光器件1222用于將光照轉(zhuǎn)化為電荷,且產(chǎn)生的電荷與光照強(qiáng)度成比例關(guān)系,傳輸管1224用于根據(jù)控制信號(hào)來(lái)控制電路的導(dǎo)通或斷開(kāi)。當(dāng)電路導(dǎo)通時(shí),源極跟隨器124用于將感光器件1222經(jīng)光照產(chǎn)生的電荷信號(hào)轉(zhuǎn)化為電壓信號(hào)。模數(shù)轉(zhuǎn)換器126用于電壓信號(hào)轉(zhuǎn)換為數(shù)字信號(hào)。加法器128用于將兩路數(shù)字信號(hào)相加共同輸出。
請(qǐng)參閱圖13,以16M的圖像傳感器10舉例來(lái)說(shuō),本發(fā)明實(shí)施方式的圖像傳感器10可以將16M的感光像素122合并成4M,或者說(shuō),輸出合并圖像,合并后,感光像素122的大小相當(dāng)于變成了原來(lái)大小的4倍,從而提升了感光像素122的感光度。此外,由于圖像傳感器10中的噪聲大部分都是隨機(jī)噪聲,對(duì)于合并之前的感光像素122的來(lái)說(shuō),有可能其中一個(gè)或兩個(gè)像素中存在噪點(diǎn),而在將四個(gè)感光像素122合并成一個(gè)大的感光像素122后,減小了噪點(diǎn)對(duì)該大像素的影響,也即是減弱了噪聲,提高了信噪比。
但在感光像素122大小變大的同時(shí),由于像素值降低,合并圖像的解析度也將降低。
在成像時(shí),當(dāng)同一濾光片單元14a下覆蓋的四個(gè)感光器件1222依次曝光時(shí),可以輸出色塊圖像。
具體地,感光器件1222用于將光照轉(zhuǎn)化為電荷,且產(chǎn)生的電荷與光照強(qiáng)度成比例關(guān)系,傳輸管1224用于根據(jù)控制信號(hào)來(lái)控制電路的導(dǎo)通或斷開(kāi)。當(dāng)電路導(dǎo)通時(shí),源極跟隨器124用于將感光器件1222經(jīng)光照產(chǎn)生的電荷信號(hào)轉(zhuǎn)化為電壓信號(hào)。模數(shù)轉(zhuǎn)換器126用于電壓信號(hào)轉(zhuǎn)換為數(shù)字信號(hào)。
請(qǐng)參閱圖14,以16M的圖像傳感器10舉例來(lái)說(shuō),本發(fā)明實(shí)施方式的圖像傳感器200還可以保持16M的感光像素122輸出,或者說(shuō)輸出色塊圖像,色塊圖像包括圖像像素單元,圖像像素單元包括2*2陣列排布的原始像素,該原始像素的大小與感光像素122大小相同,然而由于覆蓋相鄰四個(gè)感光器件1222的濾光片單元14a為同一顏色,也即時(shí)說(shuō),雖然四個(gè)感光器件1222分別曝光,但覆蓋其的濾光片單元14a顏色相同,因此,輸出的每個(gè)圖像像素單元的相鄰四個(gè)原始像素顏色相同,仍然無(wú)法提高圖像的解析度。
本發(fā)明實(shí)施方式的圖像處理方法,可以用于對(duì)輸出的色塊圖像進(jìn)行處理,以得到仿原圖像。
可以理解,合并圖像在輸出時(shí),四個(gè)相鄰的同色感光像素122以合并像素輸出,如此,合并圖像中的四個(gè)相鄰的合并像素仍可看作是典型的拜耳陣列,可以直接被圖像處理裝置20處理以輸出合并真彩圖像。而色塊圖像在輸出時(shí)每個(gè)感光像素122分別輸出,由于相鄰四個(gè)感光像素122顏色相同,因此,一個(gè)圖像像素單元的四個(gè)相鄰原始像素的顏色相同,是非典型的拜耳陣列。而圖像處理裝置20無(wú)法對(duì)非典型拜耳陣列直接進(jìn)行處理,也即是說(shuō),在圖像傳感器10采用同一圖像處理裝置20時(shí),為兼容兩種模式的真彩圖像輸出即合并模式下的合并真彩圖像輸出及色塊模式下的仿原真彩圖像輸出,需將色塊圖像轉(zhuǎn)化為仿原圖像,或者說(shuō)將非典型拜耳陣列的圖像像素單元轉(zhuǎn)化為典型拜耳陣列的像素排布。
仿原圖像包括呈拜耳陣列排布的仿原像素。仿原像素包括當(dāng)前像素,原始像素包括與當(dāng)前像素對(duì)應(yīng)的關(guān)聯(lián)像素。
請(qǐng)參閱圖15,以圖15為例,當(dāng)前像素為R3’3’和R5’5’,對(duì)應(yīng)的關(guān)聯(lián)像素分別為R33和B55。
在獲取當(dāng)前像素R3’3’時(shí),由于R3’3’與對(duì)應(yīng)的關(guān)聯(lián)像素R33的顏色相同,因此在轉(zhuǎn)化時(shí)直接將R33的像素值作為R3’3’的像素值。
在獲取當(dāng)前像素R5’5’時(shí),由于R5’5’與對(duì)應(yīng)的關(guān)聯(lián)像素B55的顏色不相同,顯然不能直接將B55的像素值作為R5’5’的像素值,需要根據(jù)R5’5’的關(guān)聯(lián)像素單元通過(guò)插值的方式計(jì)算得到。
需要說(shuō)明的是,以上及下文中的像素值應(yīng)當(dāng)廣義理解為該像素的顏色屬性數(shù)值,例如色彩值。
關(guān)聯(lián)像素單元包括多個(gè),例如4個(gè),顏色與當(dāng)前像素相同且與當(dāng)前像素相鄰的圖像像素單元中的原始像素。
需要說(shuō)明的是,此處相鄰應(yīng)做廣義理解,以圖15為例,R5’5’對(duì)應(yīng)的關(guān)聯(lián)像素為B55,與B55所在的圖像像素單元相鄰的且與R5’5’顏色相同的關(guān)聯(lián)像素單元所在的圖像像素單元分別為R44、R74、R47、R77所在的圖像像素單元,而并非在空間上距離B55所在的圖像像素單元更遠(yuǎn)的其他的紅色圖像像素單元。其中,與B55在空間上距離最近的紅色原始像素分別為R44、R74、R47和R77,也即是說(shuō),R5’5’的關(guān)聯(lián)像素單元由R44、R74、R47和R77組成,R5’5’與R44、R74、R47和R77的顏色相同且相鄰。
如此,針對(duì)不同情況的當(dāng)前像素,采用不同方式的將原始像素轉(zhuǎn)化為仿原像素,從而將色塊圖像轉(zhuǎn)化為仿原圖像,由于拍攝圖像時(shí),采用了特殊的拜耳陣列結(jié)構(gòu)的濾光片,提高了圖像信噪比,并且在圖像處理過(guò)程中,通過(guò)插值算法對(duì)色塊圖像進(jìn)行插值處理,提高了圖像的分辨率及解析度。
請(qǐng)參閱圖16,在某些實(shí)施方式中,步驟S244包括以下步驟:
S2442:計(jì)算關(guān)聯(lián)像素單元各個(gè)方向上的漸變量;
S2444:計(jì)算關(guān)聯(lián)像素單元各個(gè)方向上的權(quán)重;和
S2446:根據(jù)漸變量及權(quán)重計(jì)算當(dāng)前像素的像素值。
請(qǐng)參閱圖17,在某些實(shí)施方式中,第二計(jì)算單元244包括第一計(jì)算子單元2442、第二計(jì)算子單元2444和第三計(jì)算子單元2446。步驟S2442可以由第一計(jì)算子單元2442實(shí)現(xiàn),步驟S2444可以由第二計(jì)算子單元2444實(shí)現(xiàn),步驟S2446可以由第三計(jì)算子單元2446實(shí)現(xiàn)。或者說(shuō),第一計(jì)算子單元2442用于計(jì)算關(guān)聯(lián)像素單元各個(gè)方向上的漸變量,第二計(jì)算子單元2444用于計(jì)算關(guān)聯(lián)像素單元各個(gè)方向上的權(quán)重,第三計(jì)算子單元2446用于根據(jù)漸變量及權(quán)重計(jì)算當(dāng)前像素的像素值。
具體地,插值處理方式是參考圖像在不同方向上的能量漸變,將與當(dāng)前像素對(duì)應(yīng)的顏色相同且相鄰的關(guān)聯(lián)像素單元依據(jù)在不同方向上的漸變權(quán)重大小,通過(guò)線(xiàn)性插值的方式計(jì)算得到當(dāng)前像素的像素值。其中,在能量變化量較小的方向上,參考比重較大,因此,在插值計(jì)算時(shí)的權(quán)重較大。
在某些示例中,為方便計(jì)算,僅考慮水平和垂直方向。
R5’5’由R44、R74、R47和R77插值得到,而在水平和垂直方向上并不存在顏色相同的原始像素,因此需首根據(jù)關(guān)聯(lián)像素單元計(jì)算在水平和垂直方向上該顏色的分量。其中,水平方向上的分量為R45和R75、垂直方向的分量為R54和R57可以分別通過(guò)R44、R74、R47和R77計(jì)算得到。
具體地,R45=R44*2/3+R47*1/3,R75=2/3*R74+1/3*R77,R54=2/3*R44+1/3*R74,R57=2/3*R47+1/3*R77。
然后,分別計(jì)算在水平和垂直方向的漸變量及權(quán)重,也即是說(shuō),根據(jù)該顏色在不同方向的漸變量,以確定在插值時(shí)不同方向的參考權(quán)重,在漸變量小的方向,權(quán)重較大,而在漸變量較大的方向,權(quán)重較小。其中,在水平方向的漸變量X1=|R45-R75|,在垂直方向上的漸變量X2=|R54-R57|,W1=X1/(X1+X2),W2=X2/(X1+X2)。
如此,根據(jù)上述可計(jì)算得到,R5’5’=(2/3*R45+1/3*R75)*W2+(2/3*R54+1/3*R57)*W1??梢岳斫?,若X1大于X2,則W1大于W2,因此計(jì)算時(shí)水平方向的權(quán)重為W2,而垂直方向的權(quán)重為W1,反之亦反。
如此,可根據(jù)插值算法計(jì)算得到當(dāng)前像素的像素值。依據(jù)上述對(duì)關(guān)聯(lián)像素的處理方式,可將原始像素轉(zhuǎn)化為呈典型拜耳陣列排布的仿原像素,也即是說(shuō),相鄰的四個(gè)2*2陣列的仿原像素包括一個(gè)紅色仿原像素,兩個(gè)綠色仿原像素和一個(gè)藍(lán)色仿原像素。
需要說(shuō)明的是,插值的方式包括但不限于本實(shí)施例中公開(kāi)的在計(jì)算時(shí)僅考慮垂直和水平兩個(gè)方向相同顏色的像素值的方式,例如還可以參考其他顏色的像素值。
請(qǐng)參閱圖18和圖19,在某些實(shí)施方式中,步驟S244前包括步驟:
S245:對(duì)色塊圖像做白平衡補(bǔ)償;
步驟S244后包括步驟:
S246:對(duì)仿原圖像做白平衡補(bǔ)償還原。
在某些實(shí)施方式中,第一轉(zhuǎn)化模塊24包括白平衡補(bǔ)償單元245和白平衡補(bǔ)償還原單元246。步驟S245可以由白平衡補(bǔ)償單元245實(shí)現(xiàn),步驟S246可以由白平衡補(bǔ)償還原單元246實(shí)現(xiàn)?;蛘哒f(shuō),白平衡補(bǔ)償單元245用于對(duì)色塊圖像做白平衡補(bǔ)償,白平衡補(bǔ)償還原單元246用于對(duì)仿原圖像做白平衡補(bǔ)償還原。
具體地,在一些示例中,在將色塊圖像轉(zhuǎn)化為仿原圖像的過(guò)程中,在插值過(guò)程中,紅色和藍(lán)色仿原像素往往不僅參考與其顏色相同的通道的原始像素的顏色,還會(huì)參考綠色通道的原始像素的顏色權(quán)重,因此,在插值前需要進(jìn)行白平衡補(bǔ)償,以在插值計(jì)算中排除白平衡的影響。為了不破壞色塊圖像的白平衡,因此,在插值之后需要將仿原圖像進(jìn)行白平衡補(bǔ)償還原,還原時(shí)根據(jù)在補(bǔ)償中紅色、綠色及藍(lán)色的增益值進(jìn)行還原。
如此,可排除在插值過(guò)程中白平衡的影響,并且能夠使得插值后得到的仿原圖像保持色塊圖像的白平衡。
請(qǐng)?jiān)俅螀㈤唸D18和圖19,在某些實(shí)施方式中,步驟S244前包括步驟:
S247:對(duì)色塊圖像做壞點(diǎn)補(bǔ)償。
在某些實(shí)施方式中,第一轉(zhuǎn)化模塊24包括壞點(diǎn)補(bǔ)償單元247。步驟S247可以由壞點(diǎn)補(bǔ)償單元247實(shí)現(xiàn)?;蛘哒f(shuō),壞點(diǎn)補(bǔ)償單元247用于對(duì)色塊圖像做壞點(diǎn)補(bǔ)償。
可以理解,受限于制造工藝,圖像傳感器10可能會(huì)存在壞點(diǎn),壞點(diǎn)通常不隨感光度變化而始終呈現(xiàn)同一顏色,壞點(diǎn)的存在將影響圖像質(zhì)量,因此,為保證插值的準(zhǔn)確,不受壞點(diǎn)的影響,需要在插值前進(jìn)行壞點(diǎn)補(bǔ)償。
具體地,壞點(diǎn)補(bǔ)償過(guò)程中,可以對(duì)原始像素進(jìn)行檢測(cè),當(dāng)檢測(cè)到某一原始像素為壞點(diǎn)時(shí),可根據(jù)其所在的圖像像素單元的其他原始像的像素值進(jìn)行壞點(diǎn)補(bǔ)償。
如此,可排除壞點(diǎn)對(duì)插值處理的影響,提高圖像質(zhì)量。
請(qǐng)?jiān)俅螀㈤唸D18和圖19,在某些實(shí)施方式中,步驟S244前包括步驟:
S248:對(duì)色塊圖像做串?dāng)_補(bǔ)償。
在某些實(shí)施方式中,第一轉(zhuǎn)化模塊24包括串?dāng)_補(bǔ)償單元248。步驟S248可以由串?dāng)_補(bǔ)償單元248實(shí)現(xiàn)?;蛘哒f(shuō),串?dāng)_補(bǔ)償單元248用于對(duì)色塊圖像做串?dāng)_補(bǔ)償。
具體的,一個(gè)感光像素單元12a中的四個(gè)感光像素122覆蓋同一顏色的濾光片,而感光像素122之間可能存在感光度的差異,以至于以仿原圖像轉(zhuǎn)化輸出的仿原真彩圖像中的純色區(qū)域會(huì)出現(xiàn)固定型譜噪聲,影響圖像的質(zhì)量。因此,需要對(duì)色塊圖像進(jìn)行串?dāng)_補(bǔ)償。
在某些實(shí)施方式中,設(shè)定補(bǔ)償參數(shù)包括以下步驟:提供預(yù)定光環(huán)境;設(shè)置成像裝置的成像參數(shù);拍攝多幀圖像;處理多幀圖像以獲得串?dāng)_補(bǔ)償參數(shù);和將串?dāng)_補(bǔ)償參數(shù)保存在所述圖像處理裝置內(nèi)。
如上述解釋說(shuō)明,進(jìn)行串?dāng)_補(bǔ)償,需要在成像裝置100的圖像傳感器10制造過(guò)程中獲得補(bǔ)償參數(shù),并將串?dāng)_補(bǔ)償?shù)南嚓P(guān)參數(shù)預(yù)置于成像裝置100的存儲(chǔ)器中或裝設(shè)成像裝置100的電子裝置1000例如手機(jī)或平板電腦中。
預(yù)定光環(huán)境例如可包括LED勻光板,5000K左右的色溫,亮度1000勒克斯左右,成像參數(shù)可包括增益值,快門(mén)值及鏡頭位置。設(shè)定好相關(guān)參數(shù)后,進(jìn)行串?dāng)_補(bǔ)償參數(shù)的獲取。
處理過(guò)程中,首先在設(shè)定的光環(huán)境中以設(shè)置好的成像參數(shù),獲取多張色塊圖像,并合并成一張色塊圖像,如此可減少以單張色塊圖像作為校準(zhǔn)基礎(chǔ)的噪聲影響。
請(qǐng)參閱圖20,以圖20中的圖像像素單元Gr為例,其包括Gr1、Gr2、Gr3和Gr4,串?dāng)_補(bǔ)償目的在于將感光度可能存在差異的感光像素通過(guò)補(bǔ)償進(jìn)本校準(zhǔn)至同一水平。該圖像像素單元的平均像素值為Gr_avg=(Gr1+Gr2+Gr3+Gr4)/4,可基本表征這四個(gè)感光像素的感光度的平均水平,以此平均值作為基礎(chǔ)值,分別計(jì)算Gr1/Gr_avg,Gr2/Gr_avg,Gr3/Gr_avg和Gr4/Gr_avg,可以理解,通過(guò)計(jì)算每一個(gè)原始像素的像素值與該圖像像素單元的平均像素值的比值,可以基本反映每個(gè)原始像素與基礎(chǔ)值的偏差,記錄四個(gè)比值并作為補(bǔ)償參數(shù)記錄到相關(guān)裝置的存儲(chǔ)器中,以在成像時(shí)進(jìn)行調(diào)取對(duì)每個(gè)原始像素進(jìn)行補(bǔ)償,從而減少串?dāng)_,提高圖像質(zhì)量。
通常,在設(shè)定串?dāng)_補(bǔ)償參數(shù)后還應(yīng)當(dāng)驗(yàn)證所設(shè)定的參數(shù)是否準(zhǔn)確。
驗(yàn)證過(guò)程中,首先以相同的光環(huán)境和成像參數(shù)獲取一張色塊圖像,依據(jù)計(jì)算得到的補(bǔ)償參數(shù)對(duì)該色塊圖像進(jìn)行串?dāng)_補(bǔ)償,計(jì)算補(bǔ)償后的Gr’_avg、Gr’1/Gr’_avg、Gr’2/Gr’_avg、Gr’3/Gr’_avg和Gr’4/Gr’_avg。根據(jù)計(jì)算結(jié)果判斷補(bǔ)償參數(shù)是否準(zhǔn)確,判斷可根據(jù)宏觀(guān)與微觀(guān)兩個(gè)角度考慮。微觀(guān)是指某一個(gè)原始像素在補(bǔ)償后仍然偏差較大,成像后易被使用者感知,而宏觀(guān)則從全局角度,也即是在補(bǔ)償后仍存在偏差的原始像素的總數(shù)目較多時(shí),此時(shí)即便單獨(dú)的每一個(gè)原始像素的偏差不大,但作為整體仍然會(huì)被使用者感知。因此,應(yīng)當(dāng)設(shè)置針對(duì)微觀(guān)設(shè)置一個(gè)比例閾值即可,針對(duì)宏觀(guān)需設(shè)置一個(gè)比例閾值和一個(gè)數(shù)量閾值。如此,可對(duì)設(shè)置的串?dāng)_補(bǔ)償參數(shù)進(jìn)行驗(yàn)證,確保補(bǔ)償參數(shù)的正確,以減少串?dāng)_對(duì)圖像質(zhì)量的影響。
請(qǐng)參閱圖21和圖22,在某些實(shí)施方式中,步驟S244后還包括步驟:
S249:對(duì)仿原圖像進(jìn)行鏡片陰影校正、去馬賽克、降噪和邊緣銳化處理。
在某些實(shí)施方式中,第一轉(zhuǎn)化模塊24包括處理單元249。步驟S249可以由處理單元249實(shí)現(xiàn),或者說(shuō),處理單元249用于對(duì)仿原圖像進(jìn)行鏡片陰影校正、去馬賽克、降噪和邊緣銳化處理。
可以理解,將色塊圖像轉(zhuǎn)化為仿原圖像后,仿原像素排布為典型的拜耳陣列,可采用圖像處理裝置20進(jìn)行處理,處理過(guò)程中包括鏡片陰影校正、去馬賽克、降噪和邊緣銳化處理,如此,處理后即可得到仿原真彩圖像輸出給用戶(hù)。
請(qǐng)參閱圖23,電子裝置1000包括觸摸屏,控制方法包括以下步驟:
S214:采用第三插值算法將合并圖像轉(zhuǎn)化成預(yù)覽圖像,第三插值算法包括第二插值算法;
S216:控制觸摸屏顯示預(yù)覽圖像;和
S218:控制觸摸屏顯示提示圖形以顯示固定區(qū)域。
請(qǐng)參閱圖24,電子裝置1000包括觸摸屏,控制裝置200包括第三轉(zhuǎn)化模塊214、第二控制模塊216和第三控制模塊218。第三轉(zhuǎn)化模塊214用于采用第三插值算法將合并圖像轉(zhuǎn)化成預(yù)覽圖像,第三插值算法包括第二插值算法。第二控制模塊216用于控制觸摸屏顯示預(yù)覽圖像。第三控制模塊218用于控制觸摸屏顯示提示圖形以顯示固定區(qū)域。
也即是說(shuō),步驟S214可以由第三轉(zhuǎn)化模塊214實(shí)現(xiàn),步驟S216可以由第二控制模塊216實(shí)現(xiàn),步驟S218可以由第三控制模塊218實(shí)現(xiàn)。
在某些實(shí)施方式中,固定區(qū)域的形成方法可以是采用第三插值算法將合并圖像轉(zhuǎn)化成預(yù)覽圖像,其中,第三插值算法包括第二插值算法,也即是說(shuō),在合并圖像轉(zhuǎn)化成預(yù)覽圖像前,先采用第二插值算法將合并圖像轉(zhuǎn)化成還原圖像。預(yù)覽圖像在觸摸屏上顯示后,用戶(hù)可以通過(guò)移動(dòng)電子裝置1000將需要進(jìn)行圖像處理的圖像區(qū)域放到固定區(qū)域中,由于還原圖像和仿原圖像的對(duì)應(yīng)關(guān)系以及仿原圖像和色塊圖像的對(duì)應(yīng)關(guān)系,可以獲得固定區(qū)域在色塊圖像中對(duì)應(yīng)的固定區(qū)域,通過(guò)對(duì)色塊圖像固定區(qū)域進(jìn)行圖像處理,可以獲得高質(zhì)量圖像。
在某些實(shí)施方式中,固定區(qū)域的形狀可以是矩形、圓形、三角形等,在此不做任何限制。
在某些實(shí)施方式中,觸摸屏上固定區(qū)域可以顯示預(yù)覽圖像,固定區(qū)域外的部分則做模糊處理,例如將固定區(qū)域外的部分處理成毛玻璃覆蓋的效果,從而使得用戶(hù)可以更好地掌握固定區(qū)域的適用范圍。
在本發(fā)明的實(shí)施方式的描述中,需要理解的是,術(shù)語(yǔ)“中心”、“縱向”、“橫向”、“長(zhǎng)度”、“寬度”、“厚度”、“上”、“下”、“前”、“后”、“左”、“右”、“豎直”、“水平”、“頂”、“底”、“內(nèi)”、“外”、“順時(shí)針”、“逆時(shí)針”等指示的方位或位置關(guān)系為基于附圖所示的方位或位置關(guān)系,僅是為了便于描述本發(fā)明的實(shí)施方式和簡(jiǎn)化描述,而不是指示或暗示所指的裝置或元件必須具有特定的方位、以特定的方位構(gòu)造和操作,因此不能理解為對(duì)本發(fā)明的實(shí)施方式的限制。
此外,術(shù)語(yǔ)“第一”、“第二”僅用于描述目的,而不能理解為指示或暗示相對(duì)重要性或者隱含指明所指示的技術(shù)特征的數(shù)量。由此,限定有“第一”、“第二”的特征可以明示或者隱含地包括一個(gè)或者更多個(gè)所述特征。在本發(fā)明的實(shí)施方式的描述中,“多個(gè)”的含義是兩個(gè)或兩個(gè)以上,除非另有明確具體的限定。
在本發(fā)明的實(shí)施方式的描述中,需要說(shuō)明的是,除非另有明確的規(guī)定和限定,術(shù)語(yǔ)“安裝”、“相連”、“連接”應(yīng)做廣義理解,例如,可以是固定連接,也可以是可拆卸連接,或一體地連接;可以是機(jī)械連接,也可以是電連接或可以相互通訊;可以是直接相連,也可以通過(guò)中間媒介間接相連,可以是兩個(gè)元件內(nèi)部的連通或兩個(gè)元件的相互作用關(guān)系。對(duì)于本領(lǐng)域的普通技術(shù)人員而言,可以根據(jù)具體情況理解上述術(shù)語(yǔ)在本發(fā)明的實(shí)施方式中的具體含義。
在本發(fā)明的實(shí)施方式中,除非另有明確的規(guī)定和限定,第一特征在第二特征之“上”或之“下”可以包括第一和第二特征直接接觸,也可以包括第一和第二特征不是直接接觸而是通過(guò)它們之間的另外的特征接觸。而且,第一特征在第二特征“之上”、“上方”和“上面”包括第一特征在第二特征正上方和斜上方,或僅僅表示第一特征水平高度高于第二特征。第一特征在第二特征“之下”、“下方”和“下面”包括第一特征在第二特征正下方和斜下方,或僅僅表示第一特征水平高度小于第二特征。
上文的公開(kāi)提供了許多不同的實(shí)施方式或例子用來(lái)實(shí)現(xiàn)本發(fā)明的實(shí)施方式的不同結(jié)構(gòu)。為了簡(jiǎn)化本發(fā)明的實(shí)施方式的公開(kāi),上文中對(duì)特定例子的部件和設(shè)置進(jìn)行描述。當(dāng)然,它們僅僅為示例,并且目的不在于限制本發(fā)明。此外,本發(fā)明的實(shí)施方式可以在不同例子中重復(fù)參考數(shù)字和/或參考字母,這種重復(fù)是為了簡(jiǎn)化和清楚的目的,其本身不指示所討論各種實(shí)施方式和/或設(shè)置之間的關(guān)系。此外,本發(fā)明的實(shí)施方式提供了的各種特定的工藝和材料的例子,但是本領(lǐng)域普通技術(shù)人員可以意識(shí)到其他工藝的應(yīng)用和/或其他材料的使用。
在本說(shuō)明書(shū)的描述中,參考術(shù)語(yǔ)“一個(gè)實(shí)施方式”、“一些實(shí)施方式”、“示意性實(shí)施方式”、“示例”、“具體示例”或“一些示例”等的描述意指結(jié)合所述實(shí)施方式或示例描述的具體特征、結(jié)構(gòu)、材料或者特點(diǎn)包含于本發(fā)明的至少一個(gè)實(shí)施方式或示例中。在本說(shuō)明書(shū)中,對(duì)上述術(shù)語(yǔ)的示意性表述不一定指的是相同的實(shí)施方式或示例。而且,描述的具體特征、結(jié)構(gòu)、材料或者特點(diǎn)可以在任何的一個(gè)或多個(gè)實(shí)施方式或示例中以合適的方式結(jié)合。
流程圖中或在此以其他方式描述的任何過(guò)程或方法描述可以被理解為,表示包括一個(gè)或更多個(gè)用于實(shí)現(xiàn)特定邏輯功能或過(guò)程的步驟的可執(zhí)行指令的代碼的模塊、片段或部分,并且本發(fā)明的優(yōu)選實(shí)施方式的范圍包括另外的實(shí)現(xiàn),其中可以不按所示出或討論的順序,包括根據(jù)所涉及的功能按基本同時(shí)的方式或按相反的順序,來(lái)執(zhí)行功能,這應(yīng)被本發(fā)明的實(shí)施例所屬技術(shù)領(lǐng)域的技術(shù)人員所理解。
在流程圖中表示或在此以其他方式描述的邏輯和/或步驟,例如,可以被認(rèn)為是用于實(shí)現(xiàn)邏輯功能的可執(zhí)行指令的定序列表,可以具體實(shí)現(xiàn)在任何計(jì)算機(jī)可讀介質(zhì)中,以供指令執(zhí)行系統(tǒng)、裝置或設(shè)備(如基于計(jì)算機(jī)的系統(tǒng)、包括處理模塊的系統(tǒng)或其他可以從指令執(zhí)行系統(tǒng)、裝置或設(shè)備取指令并執(zhí)行指令的系統(tǒng))使用,或結(jié)合這些指令執(zhí)行系統(tǒng)、裝置或設(shè)備而使用。就本說(shuō)明書(shū)而言,"計(jì)算機(jī)可讀介質(zhì)"可以是任何可以包含、存儲(chǔ)、通信、傳播或傳輸程序以供指令執(zhí)行系統(tǒng)、裝置或設(shè)備或結(jié)合這些指令執(zhí)行系統(tǒng)、裝置或設(shè)備而使用的裝置。計(jì)算機(jī)可讀介質(zhì)的更具體的示例(非窮盡性列表)包括以下:具有一個(gè)或多個(gè)布線(xiàn)的電連接部(電子裝置),便攜式計(jì)算機(jī)盤(pán)盒(磁裝置),隨機(jī)存取存儲(chǔ)器(RAM),只讀存儲(chǔ)器(ROM),可擦除可編輯只讀存儲(chǔ)器(EPROM或閃速存儲(chǔ)器),光纖裝置,以及便攜式光盤(pán)只讀存儲(chǔ)器(CDROM)。另外,計(jì)算機(jī)可讀介質(zhì)甚至可以是可在其上打印所述程序的紙或其他合適的介質(zhì),因?yàn)榭梢岳缤ㄟ^(guò)對(duì)紙或其他介質(zhì)進(jìn)行光學(xué)掃描,接著進(jìn)行編輯、解譯或必要時(shí)以其他合適方式進(jìn)行處理來(lái)以電子方式獲得所述程序,然后將其存儲(chǔ)在計(jì)算機(jī)存儲(chǔ)器中。
應(yīng)當(dāng)理解,本發(fā)明的實(shí)施方式的各部分可以用硬件、軟件、固件或它們的組合來(lái)實(shí)現(xiàn)。在上述實(shí)施方式中,多個(gè)步驟或方法可以用存儲(chǔ)在存儲(chǔ)器中且由合適的指令執(zhí)行系統(tǒng)執(zhí)行的軟件或固件來(lái)實(shí)現(xiàn)。例如,如果用硬件來(lái)實(shí)現(xiàn),和在另一實(shí)施方式中一樣,可用本領(lǐng)域公知的下列技術(shù)中的任一項(xiàng)或他們的組合來(lái)實(shí)現(xiàn):具有用于對(duì)數(shù)據(jù)信號(hào)實(shí)現(xiàn)邏輯功能的邏輯門(mén)電路的離散邏輯電路,具有合適的組合邏輯門(mén)電路的專(zhuān)用集成電路,可編程門(mén)陣列(PGA),現(xiàn)場(chǎng)可編程門(mén)陣列(FPGA)等。
本技術(shù)領(lǐng)域的普通技術(shù)人員可以理解實(shí)現(xiàn)上述實(shí)施例方法攜帶的全部或部分步驟是可以通過(guò)程序來(lái)指令相關(guān)的硬件完成,所述的程序可以存儲(chǔ)于一種計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)中,該程序在執(zhí)行時(shí),包括方法實(shí)施例的步驟之一或其組合。
此外,在本發(fā)明的各個(gè)實(shí)施例中的各功能單元可以集成在一個(gè)處理模塊中,也可以是各個(gè)單元單獨(dú)物理存在,也可以?xún)蓚€(gè)或兩個(gè)以上單元集成在一個(gè)模塊中。上述集成的模塊既可以采用硬件的形式實(shí)現(xiàn),也可以采用軟件功能模塊的形式實(shí)現(xiàn)。所述集成的模塊如果以軟件功能模塊的形式實(shí)現(xiàn)并作為獨(dú)立的產(chǎn)品銷(xiāo)售或使用時(shí),也可以存儲(chǔ)在一個(gè)計(jì)算機(jī)可讀取存儲(chǔ)介質(zhì)中。
上述提到的存儲(chǔ)介質(zhì)可以是只讀存儲(chǔ)器,磁盤(pán)或光盤(pán)等。
盡管上面已經(jīng)示出和描述了本發(fā)明的實(shí)施例,可以理解的是,上述實(shí)施例是示例性的,不能理解為對(duì)本發(fā)明的限制,本領(lǐng)域的普通技術(shù)人員在本發(fā)明的范圍內(nèi)可以對(duì)上述實(shí)施方式進(jìn)行變化、修改、替換和變型。