本申請(qǐng)涉及圖像處理領(lǐng)域,尤其涉及一種條紋集合查找方法、裝置以及系統(tǒng)。
背景技術(shù):
隨著人機(jī)交互應(yīng)用技術(shù)得發(fā)展,利用手勢(shì)擺動(dòng)等運(yùn)動(dòng)物體取代直接接觸計(jì)算機(jī)裝置,來進(jìn)行指令的輸入,已成為一種發(fā)展趨勢(shì)。進(jìn)而為跟蹤人體手勢(shì)或者其他物體運(yùn)動(dòng)狀態(tài)成為目前需要解決的技術(shù)問題。現(xiàn)有技術(shù)提供了一種運(yùn)動(dòng)跟蹤系統(tǒng),能夠通過圖像處理的方法對(duì)運(yùn)動(dòng)物體的光點(diǎn)進(jìn)行圖像采集,以實(shí)現(xiàn)對(duì)運(yùn)動(dòng)物體的跟蹤。
但是,在實(shí)際的應(yīng)用場(chǎng)景中,如果閃爍光源到了卷簾式圖像傳感器采集的邊緣時(shí),閃爍光源所產(chǎn)生的條紋圖形在原始圖像中是殘缺不全的,會(huì)對(duì)圖像識(shí)別造成干擾。
技術(shù)實(shí)現(xiàn)要素:
本發(fā)明實(shí)施例申請(qǐng)的目的在于提供一種能夠排除殘缺不全的條紋集合的方法。
本發(fā)明第一方面提供了一種條紋集合有效性確定方法,包括:獲取二值化圖像中的多個(gè)第一連通域;從所述多個(gè)第一連通域中選擇出目標(biāo)連通域;根據(jù)所述目標(biāo)連通域確定條紋集合,從而確定條紋圖形;根據(jù)所述條紋集合中的目標(biāo)連通域計(jì)算出所述條紋圖形的中心;根據(jù)所述條紋圖形的中心確定所述條紋集合是否為有效條紋集合。
結(jié)合第一方面,第一方面的第一種可能的實(shí)施方式中,所述獲取二值化圖像中的多個(gè)第一連通域之前還包括:接收卷簾式圖像傳感器采集得到的單幀原始圖像,其中,所述原始圖像包括閃爍光源所形成的條紋圖形;根據(jù)二值化閾值,對(duì)所述原始圖像進(jìn)行二值化以得到二值化圖像。
結(jié)合第一方面,第一方面的第二種可能的實(shí)施方式中,從所述多個(gè)第一連通域中選擇出目標(biāo)連通域包括:確定所述多個(gè)第一連通域中每個(gè)第一連通域的寬度差,將所述每個(gè)第一連通域的寬度差和預(yù)設(shè)的寬度差進(jìn)行比較,根據(jù)比較結(jié)果確定其中符合條件的第一連通域?yàn)槟繕?biāo)連通域。
結(jié)合第一方面的第二種可能的實(shí)施方式,第一方面的第三種可能的實(shí)施方式中,將所述每個(gè)第一連通域的寬度差和預(yù)設(shè)的寬度差進(jìn)行比較,確定其中符合條件的第一連通域?yàn)槟繕?biāo)連通域,具體包括:根據(jù)卷簾式圖像傳感器成像平面,以預(yù)設(shè)條紋圖像的條紋長(zhǎng)度方向?yàn)閤軸,并令y軸垂直于所述x軸;遍歷所述多個(gè)第一連通域的所有像素點(diǎn)以獲得所述多個(gè)第一連通域?qū)?yīng)所有像素點(diǎn)的最大列坐標(biāo)y1和最小列坐標(biāo)y2,確定所述多個(gè)第一連通域中每個(gè)第一連通域的寬度差為:每個(gè)第一連通域中的像素點(diǎn)最大列坐標(biāo)y1減去像素點(diǎn)最小列坐標(biāo)y2;判斷所述多個(gè)第一連通域中每個(gè)第一連通域的寬度差是否≧kh1且≦kh2,其中,kh1為預(yù)設(shè)的第一邊界條件參數(shù),kh2為預(yù)設(shè)的第二邊界條件參數(shù);確定符合寬度差≧kh1且≦kh2的第一連通域?yàn)槟繕?biāo)連通域。
結(jié)合第一方面的第三種可能的實(shí)施方式,第一方面的第四種可能的實(shí)施方式中,還包括以下步驟:從所述多個(gè)第一連通域中刪除寬度差﹤kh1或者﹥kh2的第一連通域。
結(jié)合第一方面,第一方面的第五種可能的實(shí)施方式中,接收卷簾式圖像傳感器采集得到的原始圖像之后,從所述多個(gè)第一連通域中選擇出目標(biāo)連通域之前包括:對(duì)所述原始圖像進(jìn)行處理以得到條紋圖形模板,并根據(jù)所述條紋圖形模板識(shí)別出目標(biāo)連通域,其中,所述條紋圖形模板的形狀為所述原始圖像中的條紋圖形融合而成的斑狀。
結(jié)合第一方面的第五種可能的實(shí)施方式,第一方面的第六種可能的實(shí)施方式中,對(duì)所述原始圖像進(jìn)行處理以得到條紋圖形模板具體為:根據(jù)所述濾波的參數(shù)對(duì)所述原始圖像進(jìn)行濾波以得到模糊圖像,其中,所述濾波的參數(shù)設(shè)置為使得所述原始圖像中的各個(gè)圖形融合成各自對(duì)應(yīng)的斑塊;對(duì)所述模糊圖像進(jìn)行二值化以得到二值化模糊圖像;對(duì)所述二值化模糊圖像查找連通域以獲得多個(gè)第二連通域;識(shí)別所述多個(gè)第二連通域的形狀,并根據(jù)與預(yù)設(shè)的所述閃爍光源所形成的條紋圖形形狀最接近的第二連通域作為條紋圖形模板。
結(jié)合第一方面的第六種可能的實(shí)施方式,第一方面的第七種可能的實(shí)施方式中,根據(jù)所述條紋圖形模板識(shí)別出目標(biāo)連通域具體為:判斷所述第一連通域的像素點(diǎn)的坐標(biāo)是否都包括在所述條紋圖形模板的像素點(diǎn)的坐標(biāo)構(gòu)成的集合中;如果是,確定所述第一連通域?yàn)槟繕?biāo)連通域。
結(jié)合第一方面至第七種可能的實(shí)施方式中的任意一種,第一方面的第八種可能的實(shí)施方式中,所述原始圖像包括多個(gè)閃爍光源所形成的多個(gè)條紋圖形,根據(jù)所述目標(biāo)連通域確定條紋集合具體為:對(duì)所述目標(biāo)連通域進(jìn)行分類以獲得多個(gè)條紋集合。
結(jié)合第一方面的第八種可能的實(shí)施方式,第一方面的第九種可能的實(shí)施方式中,對(duì)所述目標(biāo)連通域進(jìn)行分類以獲得多個(gè)條紋集合包括:根據(jù)所述目標(biāo)連通域構(gòu)成條紋集合的條件,確定初始條紋集合,篩選未歸入任何初始條紋集合的所述目標(biāo)連通域;從未歸入任何初始條紋集合的所述目標(biāo)連通域中,選取第j個(gè)目標(biāo)連通域,其中j為正整數(shù);以所述第j個(gè)目標(biāo)連通域的質(zhì)心為圓心,以所述第j個(gè)目標(biāo)連通域的長(zhǎng)度為直徑作圓;判斷所述初始條紋集合中的任意一個(gè)目標(biāo)連通域區(qū)域是否與所述圓相交;如果相交,則將所述第j個(gè)目標(biāo)連通域歸入對(duì)應(yīng)的所述初始條紋集合,從而得到條紋集合。
結(jié)合第一方面的第九種可能的實(shí)施方式,第一方面的第十種可能的實(shí)施方式中,對(duì)所述目標(biāo)連通域進(jìn)行分類以獲得多個(gè)條紋集合之后還包括:判斷所述條紋集合是否同時(shí)滿足以下條件:所述條紋集合中的目標(biāo)連通域的數(shù)量是否大于數(shù)量閾值;所述條紋集合中最長(zhǎng)的目標(biāo)連通域的長(zhǎng)度是否大于長(zhǎng)度閾值;如果不是同時(shí)滿足所述條件,則刪除所述條紋集合。
結(jié)合第一方面至第十種可能的實(shí)施方式中的任意一種,第一方面的第十一種可能的實(shí)施方式中,根據(jù)所述條紋集合中的目標(biāo)連通域計(jì)算出所述條紋圖形的中心具體為:對(duì)所述條紋集合中的目標(biāo)連通域的中心的坐標(biāo)值求平均以得到所述條紋圖形的中心的坐標(biāo)值。
結(jié)合第一方面的第十一種可能的實(shí)施方式,第一方面的第十二種可能的實(shí)施方式中,對(duì)所述條紋集合中的目標(biāo)連通域的中心的坐標(biāo)值求平均以得到所述條紋圖形的中心的坐標(biāo)值具體為:根據(jù)公式(1)對(duì)所述條紋集合中的目標(biāo)連通域的中心的坐標(biāo)值求平均以得到所述條紋圖形的中心(u0,v0):
其中,i為所述條紋集合中目標(biāo)連通域的序號(hào),li為所述條紋集合中目標(biāo)連通域的數(shù)量,
結(jié)合第一方面的第十二種可能的實(shí)施方式,第一方面的第十三種可能的實(shí)施方式中,根據(jù)公式(1)對(duì)所述條紋集合中的目標(biāo)連通域的中心的坐標(biāo)值求平均以得到所述條紋圖形的中心(u0,v0)之后,根據(jù)所述條紋圖形的中心確定所述條紋集合是否為有效條紋集合之前,還包括:對(duì)矩形區(qū)域q中的像素點(diǎn)的像素值進(jìn)行濾波以得到濾波后的像素值,其中,所述矩形區(qū)域q為所述條紋圖形的中心(u0,v0)為中心,以所述條紋集合中最大連通域的寬度為邊長(zhǎng)的矩形區(qū)域;以所述濾波后的像素點(diǎn)的像素值作為權(quán)值重新計(jì)算所述條紋圖形的中心(u0,v0)的坐標(biāo)值。
結(jié)合第一方面的第十三種可能的實(shí)施方式,第一方面的第十四種可能的實(shí)施方式中,對(duì)矩形區(qū)域q中的像素點(diǎn)的像素值進(jìn)行濾波以得到濾波后的像素值具體為:根據(jù)公式(2)對(duì)矩形區(qū)域q中的像素點(diǎn)的像素值通過濾波模板進(jìn)行濾波以得到濾波后的像素值
n為所述濾波模板的行數(shù)和列數(shù),
結(jié)合第一方面的第十三種可能的實(shí)施方式,第一方面的第十五種可能的實(shí)施方式中,以所述濾波后的像素點(diǎn)的像素值作為權(quán)值重新計(jì)算所述條紋圖形的中心(u0,v0)的坐標(biāo)值具體為:
根據(jù)公式(3)重新計(jì)算所述條紋圖形的中心(u0,v0)的坐標(biāo)值,其中,
(uj,vj)為矩形區(qū)域q中的像素點(diǎn)的坐標(biāo)值,
結(jié)合第一方面第十二至第十五種可能的實(shí)施方式中的任意一種,第一方面的第十五種可能的實(shí)施方式中,根據(jù)所述條紋圖形的中心確定所述條紋集合是否為有效條紋集合具體包括:
判斷所述條紋圖形的中心(u0,v0)是否滿足以下至少一個(gè):
其中,r為所述條紋集合中最大的連通域的寬度,kwide為所述二值化圖像的寬度,kheight為所述二值化圖像的高度;
如果滿足至少一個(gè),則確定所述條紋集合為無效條紋集合,如果不滿足任意一個(gè),則確定所述條紋集合為有效條紋集合。
本發(fā)明第二方面提供了一種條紋集合有效性確定裝置,所述裝置包括能夠?qū)崿F(xiàn)上述任一項(xiàng)所述的方法的單元。
本發(fā)明第三方面提供了一種終端,包括卷簾式圖像傳感器、存儲(chǔ)器以及分別與所述卷簾式圖像傳感器、存儲(chǔ)器耦合的處理器,所述存儲(chǔ)器用于存儲(chǔ)所述卷簾式圖像傳感器采集到的圖像以及指令,所述處理器用于執(zhí)行所述指令,當(dāng)所述處理器在執(zhí)行所述指令時(shí),可根據(jù)所述指令執(zhí)行如上述任一項(xiàng)的方法,以實(shí)現(xiàn)對(duì)所述卷簾式圖像傳感器采集到的圖像進(jìn)行處理以確定條紋集合的有效性。
本發(fā)明第四方面提供了一種運(yùn)動(dòng)物體跟蹤系統(tǒng),包括終端、設(shè)置有閃爍光源的控制器,其中,所述終端設(shè)置有卷簾式圖像傳感器,所述設(shè)置有閃爍光源的控制器被安裝在運(yùn)動(dòng)物體上,所述終端為如上述的終端。
本發(fā)明第五方面提供了一種圖像處理裝置,包括:處理器以及存儲(chǔ)器,其中,所述處理器連接所述存儲(chǔ)器,所述存儲(chǔ)器用于存儲(chǔ)指令,所述處理器用于執(zhí)行所述指令,當(dāng)所述處理器在執(zhí)行所述指令時(shí),可根據(jù)所述指令執(zhí)行如上述任一項(xiàng)的方法,以實(shí)現(xiàn)對(duì)所述卷簾式圖像傳感器采集到的圖像進(jìn)行處理以確定條紋集合的有效性。
本發(fā)明第六方面提供了一種圖像處理系統(tǒng),包括卷簾式圖像傳感器以及圖像處理裝置,所述圖像處理裝置耦合所述卷簾式圖像傳感器,其中,所述圖像處理裝置為如上述所述的圖像處理裝置。
本發(fā)明第七方面提供了一種運(yùn)動(dòng)物體跟蹤系統(tǒng),包括卷簾式圖像傳感器、設(shè)置有閃爍光源的控制器以及圖像處理裝置,所述圖像處理裝置分別耦合所述卷簾式圖像傳感器以及所述控制器,其中,所述控制器被安裝在運(yùn)動(dòng)物體上,所述圖像處理裝置為如上述所述的圖像處理裝置。
本發(fā)明第八方面提供了一種計(jì)算機(jī)可讀存儲(chǔ)介質(zhì),所述計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)存儲(chǔ)了確定條紋集合有效性的程序代碼,所述程序代碼包括用于執(zhí)行如上述任一項(xiàng)所述的方法的指令。
本發(fā)明通過從二值化圖像中選擇出目標(biāo)連通域,并從目標(biāo)連通域中選擇出條紋集合,在根據(jù)條紋集合的目標(biāo)連通域計(jì)算出目標(biāo)連通域?qū)?yīng)的條紋圖形的中心,最后再根據(jù)條紋圖形的中心確定條紋集合是否為有效條紋集合,能夠有效地排除殘缺的條紋集合。
附圖說明
圖1是本發(fā)明實(shí)施例提供的一種運(yùn)動(dòng)跟蹤系統(tǒng)的結(jié)構(gòu)示意圖;
圖2是本發(fā)明實(shí)施例提供的一種運(yùn)動(dòng)跟蹤系統(tǒng)中卷簾式圖像傳感器采集到的閃爍光源的條紋圖形的示意圖;
圖3是本發(fā)明實(shí)施例提供的一種運(yùn)動(dòng)跟蹤系統(tǒng)中卷簾式圖像傳感器在實(shí)際工作環(huán)境中采集到原始圖像;
圖4是本發(fā)明實(shí)施例提供的一種條紋集合有效性確定方法的流程圖;
圖5是本發(fā)明實(shí)施例提供的一種條紋集合有效性確定方法中執(zhí)行步驟420后得到的圖像;
圖6是本發(fā)明實(shí)施例提供的一種條紋集合查找方法中執(zhí)行步驟440后得到的圖像;
圖7是本發(fā)明實(shí)施例提供的一種條紋集合查找方法中執(zhí)行步驟450后得到的圖像;
圖8是本發(fā)明實(shí)施例提供的一種條紋集合查找方法中執(zhí)行步驟470后得到的圖像;
圖9是本發(fā)明實(shí)施例提供的一種終端的結(jié)構(gòu)示意圖。
具體實(shí)施方式
如圖1以及圖2所示,本發(fā)明實(shí)施例公開了一種運(yùn)動(dòng)跟蹤系統(tǒng),包括卷簾式圖像傳感器110、設(shè)置有閃爍光源121的控制器120以及圖像處理裝置130。
卷簾式圖像傳感器110為帶有卷簾快門(rollingshutter)功能的圖像傳感器,例如,設(shè)置有電子卷簾快門(electronicrollingshutter)的cmos(complementarymetaloxidesemiconductor,互補(bǔ)金屬氧化物半導(dǎo)體)傳感器以及設(shè)置有卷簾快門(rollingshutter)的ccd(charge-coupleddevice,電荷耦合元件)傳感器等等。卷簾式圖像傳感器可以設(shè)置在圖像處理裝置上,也可以設(shè)置在獨(dú)立的第三方設(shè)備上。卷簾式圖像傳感器為帶有卷簾快門(rollingshutter)功能的圖像傳感器以行掃描或者列掃描的方式進(jìn)行掃描。
控制器120可以是帶有閃爍光源的游戲手柄、指示棒、體感鼠標(biāo)等等??刂破鞯臄?shù)量可以是一個(gè),也可以是多個(gè)。每個(gè)控制器上的閃爍光源的數(shù)量可以是一個(gè),也可以是多個(gè)。閃爍光源為具備有較穩(wěn)定閃爍頻率或者變化閃爍頻率的光源,例如,led燈等等,通過控制輸入到led等的電源的占空比,可以控制led燈按照固定的頻率或者非固定的頻率進(jìn)行閃爍。其中,閃爍光源的閃爍頻率大于卷簾式圖像傳感器的掃描頻率。
圖像處理裝置130可以是嵌入式處理器、數(shù)字圖像處理器、智能手機(jī)、計(jì)算機(jī)、平板電腦、筆記本等具有良好計(jì)算能力的實(shí)體。圖像處理裝置上可以設(shè)置有卷簾式圖像傳感器,也可以不設(shè)置卷簾式圖像傳感器。
這里的卷簾式圖像傳感器110為帶有卷簾式快門功能的圖像傳感器,用于對(duì)控制器120上的閃爍光源進(jìn)行曝光成像以得到原始圖像。閃爍光源為具備有較穩(wěn)定閃爍頻率或者變化閃爍頻率的光源,能夠影響卷簾式圖像傳感器110在原始圖像的水平方向上形成明暗間隔的圖形。具體地,當(dāng)閃爍光源為“亮”時(shí),卷簾式圖像傳感器110對(duì)閃爍光源進(jìn)行掃描,則原始圖像中會(huì)對(duì)應(yīng)出現(xiàn)一個(gè)亮條紋;當(dāng)閃爍光源為“滅”時(shí),卷簾式圖像傳感器110對(duì)閃爍光源進(jìn)行掃描,則原始圖像中會(huì)對(duì)應(yīng)出現(xiàn)一個(gè)暗條紋。由于閃爍光源的閃爍頻率大于卷簾式圖像傳感器110的掃描頻率,所以,卷簾式圖像傳感器110在完成對(duì)閃爍光源的掃描后,原始圖像中會(huì)對(duì)應(yīng)出現(xiàn)一個(gè)多個(gè)明暗間隔條紋所組成的圖形。
以圖3為例,由于實(shí)際成像環(huán)境的影響,曝光成像后,除了對(duì)閃爍光源331以及332拍攝所形成的圖形外,原始圖像中還會(huì)不可避免地存在環(huán)境中的日光燈310所形成的光斑狀的圖形和白熾燈320所形成的光斑狀的圖形。所以,在卷簾式圖像傳感器110采集到原始圖像后,需要將原始圖像發(fā)送給圖像處理裝置,并由圖像處理裝置對(duì)原始圖像進(jìn)行圖像處理,以排除日光燈310所形成的光斑狀的圖形和白熾燈320所形成的光斑狀的圖形的影響,從原始圖像中識(shí)別出閃爍光源331和332所形成的條紋圖形。
其中,在一般情況下,原始圖像中的條紋圖形是由閃爍光源331和332所曝光形成的明暗間隔的圖形中的多個(gè)亮條紋或者多個(gè)暗條紋組成的。為了便于陳述,下面均以亮條紋為例。原始圖像中的條紋圖形的輪廓的形狀與閃爍光源331和332的形狀相關(guān),例如,如果閃爍光源331和332的形狀是圓形的,則條紋圖形是由長(zhǎng)短不一的亮條紋所構(gòu)成,而且條紋圖形的輪廓是圓形,如果閃爍光源331和332的形狀是長(zhǎng)方形狀的,則條紋圖形是由長(zhǎng)度相同的亮條紋所構(gòu)成的,而且,條紋圖形的輪廓是長(zhǎng)方形。條紋圖形中的亮條紋的寬度與閃爍光源331和332的閃爍周期相關(guān),閃爍光源331和332的閃爍周期越長(zhǎng),亮條紋的寬度越寬。在極限狀況下,如果閃爍光源331和332的閃爍周期為無窮大,則閃爍光源331和332在原始圖像上將會(huì)形成一個(gè)沒有條紋的全亮光斑。原始圖像中的條紋圖形的數(shù)量和卷簾式圖像傳感器采集范圍內(nèi)的閃爍光源331和332的個(gè)數(shù)一一對(duì)應(yīng),例如,卷簾式圖像傳感器110采集范圍內(nèi)的閃爍光源的個(gè)數(shù)為2個(gè),則原始圖像中條紋圖形的數(shù)量也為2個(gè)。
下面進(jìn)一步具體說明對(duì)所述圖像處理裝置對(duì)原始圖像進(jìn)行處理以排除閃爍光源所形成的殘缺的條紋圖形的過程。如圖4所示,
410:接收卷簾式圖像傳感器采集得到的原始圖像,其中,原始圖像包括閃爍光源所形成的條紋圖形。進(jìn)一步的,本步驟中,接收卷簾式圖像傳感器采集得到的單幀原始圖像,該單幀原始圖像可以為卷簾式圖像傳感器的拍攝得到的包含一個(gè)或多個(gè)閃爍光源所形成的具有不同寬度特征條紋的一幅圖像。
420:對(duì)原始圖像進(jìn)行二值化以得到二值化圖像,其中,二值化閾值設(shè)置為條紋圖形對(duì)應(yīng)的像素點(diǎn)的值為第一值。
430:對(duì)二值化圖像中像素值為第一值的像素點(diǎn)查找連通域以獲得多個(gè)第一連通域。
440:從多個(gè)第一連通域中選擇出目標(biāo)連通域,其中,目標(biāo)連通域?yàn)樗鰲l紋所形成的連通域。
450:根據(jù)目標(biāo)連通域確定條紋集合,其中,條紋集合為條紋圖形對(duì)應(yīng)的目標(biāo)通域所構(gòu)成的集合。
460:根據(jù)條紋集合中的目標(biāo)連通域計(jì)算出條紋圖形的中心。
470:根據(jù)條紋圖形的中心確定條紋集合是否為有效條紋集合。
在一具體的實(shí)施例中,接收卷簾式圖像傳感器采集得到的原始圖像具體為:由于卷簾式圖像傳感器可以是集成在圖像處理裝置中的,也可以是設(shè)置在獨(dú)立的第三方設(shè)備中的,所以,原始圖像可以是圖像處理裝置直接通過卷簾式圖像傳感器對(duì)閃爍光源進(jìn)行曝光成像得到的,也可以為圖像處理裝置間接接收到第三方設(shè)備轉(zhuǎn)發(fā)的對(duì)閃爍光源進(jìn)行曝光成像的圖像得到的。
在一具體的實(shí)施例中,終端接收到卷簾式圖像傳感器采集得到的原始圖像后,對(duì)圖像進(jìn)行二值化以得到二值化圖像。具體地,對(duì)于原始圖像,可以根據(jù)下面的公式進(jìn)行二值化:
其中,i為原始圖像中的像素點(diǎn)的序號(hào),p(i)為原始圖像中的像素點(diǎn)i的像素值,x為預(yù)設(shè)的二值化閾值,p1為預(yù)設(shè)的第一值,p2為預(yù)設(shè)的第二值。由于閃爍光源的像素值和白熾燈、日光燈的像素值相近,而閃爍光源的像素值遠(yuǎn)不同于背景的像素值。所以,可以預(yù)先設(shè)置二值化閾值x使得閃爍光源所形成的條紋圖形和白熾燈、日光燈等所形成的光斑狀圖形對(duì)應(yīng)的像素點(diǎn)的像素值大于二值化閾值x,背景的像素點(diǎn)的像素值小于或等于二值化閾值x。通常而言,當(dāng)?shù)谝恢殿A(yù)設(shè)為“1”時(shí),第二值預(yù)設(shè)為“0”;當(dāng)?shù)谝恢殿A(yù)設(shè)為“0”時(shí),第二值預(yù)設(shè)為“1”。如圖5所示的,經(jīng)過二值化后得到的二值化圖像中,閃爍光源所形成的條紋圖形和白熾燈、日光燈等所形成的光斑狀圖形對(duì)應(yīng)的像素點(diǎn)的像素值被設(shè)置為“1”,背景對(duì)應(yīng)的像素點(diǎn)的像素值被設(shè)置為“0”。
在一具體的實(shí)施方式中,設(shè)置二值化閾值的方式可以包括:全局預(yù)設(shè)閾值法、自適應(yīng)閾值法以及局部閾值法等等。
在本發(fā)明實(shí)施方式中,所述全局預(yù)設(shè)閾值法可以通過如下方式實(shí)現(xiàn):預(yù)設(shè)一個(gè)全局閾值,對(duì)所有幀的原始圖像均采用同一個(gè)全局閾值作為二值化閾值。對(duì)于具體的一幀原始圖像,原始圖像中的所有像素點(diǎn)均和該二值化閾值進(jìn)行比較,從而得到二值化圖像。其中,全局閾值可以根據(jù)經(jīng)驗(yàn)人工設(shè)置。
在本發(fā)明實(shí)施方式中,所述自適應(yīng)閾值法可以通過如下方式實(shí)現(xiàn):根據(jù)以往的幾幀原始圖像的信息確定當(dāng)前幀原始圖像的二值化閾值。對(duì)于當(dāng)前幀原始圖像,原始圖像中的所有像素點(diǎn)均和當(dāng)前幀原始圖像的二值化閾值進(jìn)行比較,從而得到二值化圖像。
在本發(fā)明實(shí)施方式中,所述局部閾值法可以通過如下方式實(shí)現(xiàn):以從上往下以及從左往右的順序依次掃描圖像,對(duì)每個(gè)像素i,判斷像素i的像素值是否小于預(yù)設(shè)閾值。如果小于預(yù)設(shè)閾值,則暫時(shí)不作處理。如果大于或者等于預(yù)設(shè)閾值,在當(dāng)前像素點(diǎn)i的n×n鄰域內(nèi)計(jì)算像素值的平均值或者高斯平均值,并將計(jì)算得到的平均值或者高斯平均值作為當(dāng)前像素點(diǎn)i的二值化閾值,其中,n為大于0的正整數(shù)。將像素點(diǎn)i的像素值和像素點(diǎn)i的二值化閾值進(jìn)行比較,如果大于像素點(diǎn)i的二值化閾值,則設(shè)置為第一值,最后,將小于預(yù)設(shè)閾值的像素點(diǎn)設(shè)置為第二值,從而得到二值化圖像。
在一具體的實(shí)施例中,在得到二值化圖像后,對(duì)二值化圖像中像素值為第一值的像素點(diǎn)查找連通域以獲得多個(gè)第一連通域。具體地,在二值化圖像中,如果像素點(diǎn)a與像素點(diǎn)b為4鄰接或者8鄰接,則像素點(diǎn)a與像素點(diǎn)b連通。其中,像素點(diǎn)i(x,y)與像素點(diǎn)i(x-1,y)、像素點(diǎn)i(x+1,y)、像素點(diǎn)i(x,y-1)、像素點(diǎn)i(x,y+1)4鄰接;像素點(diǎn)i(x,y)與像素點(diǎn)i(x-1,y-1)、像素點(diǎn)i(x-1,y)、像素點(diǎn)i(x-1,y+1)、像素點(diǎn)i(x,y-1)、像素點(diǎn)i(x,y+1)、像素點(diǎn)i(x+1,y-1)、像素點(diǎn)i(x+1,y)、像素點(diǎn)i(x+1,y+1)8鄰接。如果像素點(diǎn)a與像素點(diǎn)b連通,像素點(diǎn)b與像素點(diǎn)c連通,則像素點(diǎn)a、b和c均屬于同一個(gè)連通域。通過two-pass法或者seed-filling種子填充法等算法查找連通域后,可以得到多個(gè)第一連通域。以圖5為例,這些第一連通域中,包括:閃爍光源331和332所形成的條紋圖形所對(duì)應(yīng)的第一連通域,其中,條紋圖形中的每個(gè)條紋對(duì)應(yīng)得到一個(gè)第一連通域;白熾燈320所形成的光斑狀圖形對(duì)應(yīng)的第一連通域,其中,一個(gè)白熾燈320所形成的光斑狀圖形對(duì)應(yīng)得到一個(gè)第一連通域;日光燈310所形成的光斑狀圖形對(duì)應(yīng)的第一連通,其中,一個(gè)日光燈310所形成的光斑狀圖形對(duì)應(yīng)得到一個(gè)第一連通域。
在一具體的實(shí)施例中,在得到多個(gè)第一連通域后,從多個(gè)第一連通域中選擇出閃爍光源形成的條紋圖形對(duì)應(yīng)的第一連通域以作為目標(biāo)連通域。具體地,可以通過以下的兩種方式獲得目標(biāo)連通域:
在第一種方式中,確定多個(gè)第一連通域中每個(gè)第一連通域的寬度差,將每個(gè)第一連通域的寬度差和預(yù)設(shè)的寬度差進(jìn)行比較,根據(jù)比較結(jié)果確定其中符合條件的第一連通域?yàn)槟繕?biāo)連通域。具體地,由于條紋圖形中的條紋對(duì)應(yīng)的第一連通域的寬度差遠(yuǎn)小于日光燈和白熾燈對(duì)應(yīng)的第一連通域的寬度差,而且,條紋圖形中的條紋對(duì)應(yīng)的第一連通域的寬度差不可能太小,所以,可以通過下面的方法判斷第一連通域是否為目標(biāo)連通域。首先,根據(jù)卷簾式圖像傳感器成像平面,以預(yù)設(shè)條紋圖像的條紋長(zhǎng)度方向?yàn)閤軸,并令y軸垂直于所述x軸。遍歷多個(gè)第一連通域的所有像素點(diǎn)以獲得多個(gè)第一連通域?qū)?yīng)所有像素點(diǎn)的最大列坐標(biāo)y1和最小列坐標(biāo)y2,確定多個(gè)第一連通域中每個(gè)第一連通域的寬度差為:每個(gè)第一連通域中的像素點(diǎn)最大列坐標(biāo)y1減去像素點(diǎn)最小列坐標(biāo)y2;判斷多個(gè)第一連通域中每個(gè)第一連通域的寬度差是否≧kh1且≦kh2,其中,kh1為預(yù)設(shè)的第一邊界條件參數(shù),kh2為預(yù)設(shè)的第二邊界條件參數(shù)。確定符合寬度差≧kh1且≦kh2的第一連通域?yàn)槟繕?biāo)連通域,不符合寬度差≧kh1且≦kh2的第一連通域不是目標(biāo)連通域。將不是目標(biāo)連通域的第一連通域刪去。以圖6為例,將不是目標(biāo)連通域的第一連通域刪去后,如圖示的結(jié)果。
在一具體的實(shí)施方式中,第一邊界條件參數(shù)kh1以及第二邊界條件參數(shù)kh2可以根據(jù)如下方式確定:如果閃爍光源的閃爍周期為t,閃爍光源的調(diào)制信號(hào)的占空比為φ,卷簾式圖像傳感器行或列曝光時(shí)間為t,則第一邊界條件參數(shù)kh1=(φ*t)/(2t),第二邊界條件參數(shù)kh2=k*(φ*t)/(2t),其中k為調(diào)優(yōu)參數(shù)。
在第二種方式中,對(duì)原始圖像進(jìn)行處理以得到條紋圖形模板,并根據(jù)條紋圖形模板識(shí)別出目標(biāo)連通域,其中,條紋圖形模板的形狀為原始圖像中的條紋圖形融合而成的斑狀。具體地,根據(jù)濾波的參數(shù)對(duì)原始圖像進(jìn)行濾波以得到模糊圖像,其中,濾波的參數(shù)設(shè)置為使得原始圖像中的各個(gè)圖形融合成各自對(duì)應(yīng)的斑塊。然后,對(duì)模糊圖像進(jìn)行二值化以得到二值化模糊圖像。之后,對(duì)二值化模糊圖像查找連通域以獲得多個(gè)第二連通域。識(shí)別多個(gè)第二連通域的形狀,并根據(jù)與預(yù)設(shè)的閃爍光源所形成的條紋圖形形狀最接近的第二連通域作為條紋圖形模板。如此處理后所得到的第二連通域包括:條紋圖形所構(gòu)成的斑狀圖形對(duì)應(yīng)的第二連通域,其中,一個(gè)條紋圖形對(duì)應(yīng)得到一個(gè)第二連通域;白熾燈所形成的光斑狀圖形對(duì)應(yīng)的第二連通域,其中,一個(gè)白熾燈所形成的光斑狀圖形對(duì)應(yīng)得到一個(gè)第二連通域;日光燈所形成的光斑狀圖形對(duì)應(yīng)的第二連通,其中,一個(gè)日光燈所形成的光斑狀圖形對(duì)應(yīng)得到一個(gè)第二連通域。而且,由于條紋圖形所構(gòu)成的斑狀圖形對(duì)應(yīng)的第二連通域、白熾燈所形成的光斑狀圖形對(duì)應(yīng)的第二連通域和日光燈所形成的光斑狀圖形對(duì)應(yīng)的第二連通域的形狀各不相同,所以,可以識(shí)別多個(gè)第二連通域的形狀,并選擇與預(yù)設(shè)的閃爍光源所形成的條紋圖形形狀最接近的第二連通域作為條紋圖形模板。此后,找出條紋圖形模板中的像素點(diǎn)的坐標(biāo)的集合。如果判斷第一連通域的所有像素點(diǎn)的坐標(biāo)都落入條紋圖形模板的像素點(diǎn)的坐標(biāo)構(gòu)成的集合內(nèi),則可以確定第一連通域?yàn)槟繕?biāo)連通域,反之,則可以確定第一連通域不是目標(biāo)連通域。對(duì)每一個(gè)第一連通域都進(jìn)行上述的判斷,就可以將條紋圖形對(duì)應(yīng)的所有目標(biāo)連通域都查找出來。
在一具體的實(shí)施例中,如果原始圖像包括多個(gè)閃爍光源所形成的多個(gè)條紋圖形,則還需要對(duì)查找到的目標(biāo)連通域進(jìn)行分類以獲得多個(gè)條紋集合。具體地,根據(jù)目標(biāo)連通域構(gòu)成條紋集合的條件,確定初始條紋集合,篩選未歸入任何初始條紋集合的目標(biāo)連通域。其中,目標(biāo)連通域構(gòu)成條紋集合的條件可以是隨機(jī)選擇一個(gè)未歸入任何一個(gè)條紋集合的目標(biāo)連通域,將選擇出來的目標(biāo)連通域歸入初始條紋集合,從而得到初始條紋集合。然后,從未歸入任何條紋集合的目標(biāo)連通域中,選取第j個(gè)目標(biāo)連通域,其中j為正整數(shù)。以第j個(gè)目標(biāo)連通域的質(zhì)心為圓心,以第j個(gè)目標(biāo)連通域的長(zhǎng)度為直徑作圓;判斷初始條紋集合中的任意一個(gè)目標(biāo)連通域區(qū)域是否與圓相交。如果相交,則將第j個(gè)目標(biāo)連通域歸入對(duì)應(yīng)的初始條紋集合。對(duì)所有未歸入任何一個(gè)條紋集合的目標(biāo)連通域按上述的方法進(jìn)行判斷后,則初始條紋集合被對(duì)應(yīng)更新為條紋集合。完成查找后,查找的結(jié)果如圖7所示。
在一具體的實(shí)施例中,由于目標(biāo)連通域個(gè)數(shù)太少的條紋集合和最長(zhǎng)的目標(biāo)連通域長(zhǎng)度太短的條紋集合都是不及格的條紋集合,所以,為了提高查找條紋集合的準(zhǔn)確性,還可以在完成查找后進(jìn)行如下判斷,以將不符合的條紋集合去掉。具體地,判斷條紋集合是否同時(shí)滿足以下條件:條紋集合中的目標(biāo)連通域的數(shù)量是否大于數(shù)量閾值;條紋集合中最長(zhǎng)的目標(biāo)連通域的長(zhǎng)度是否大于長(zhǎng)度閾值。如果不是同時(shí)滿足所述條件,則刪除條紋集合,如果同時(shí)滿足所述條件,則保留條紋集合。
在一具體的實(shí)施例中,根據(jù)條紋集合中的目標(biāo)連通域計(jì)算出條紋圖形的中心可以包括:對(duì)條紋集合中的目標(biāo)連通域的中心的坐標(biāo)值求平均以得到條紋圖形的中心的坐標(biāo)值,或者,對(duì)條紋集合中的目標(biāo)連通域的所有像素點(diǎn)的坐標(biāo)值求平均以得到條紋圖形的中心的坐標(biāo)值等等。
在具體的實(shí)現(xiàn)中,對(duì)條紋集合中的目標(biāo)連通域的中心的坐標(biāo)值求平均以得到條紋圖形的中心的坐標(biāo)值可以是:根據(jù)公式(1)對(duì)條紋集合中的目標(biāo)連通域的中心的坐標(biāo)值求平均以得到條紋圖形的中心(u0,v0):
其中,i為條紋集合中目標(biāo)連通域的序號(hào),li為條紋集合中目標(biāo)連通域的數(shù)量,
在具體的實(shí)現(xiàn)中,對(duì)條紋集合中的目標(biāo)連通域的中心的坐標(biāo)值求平均以得到條紋圖形的中心的坐標(biāo)值還可以是:首先,根據(jù)公式(1)對(duì)條紋集合中的目標(biāo)連通域的中心的坐標(biāo)值求平均以得到條紋圖形的中心(u0,v0):
其中,i為條紋集合中目標(biāo)連通域的序號(hào),li為條紋集合中目標(biāo)連通域的數(shù)量,
其中,n為濾波模板的行數(shù)和列數(shù),
其中,(uj,vj)為矩形區(qū)域q中的像素點(diǎn)的坐標(biāo)值,
在一具體的實(shí)施例中,可以通過如下的方法判斷確定條紋集合是否為有效條紋集合,具體地:判斷所述條紋圖形的中心(u0,v0)是否滿足以下至少一個(gè):
其中,r為條紋集合中最大的連通域的寬度,kwide為二值化圖像的寬度,kheight為二值化圖像的高度;如果滿足至少一個(gè),則確定條紋集合為無效條紋集合,如果不滿足任意一個(gè),則確定條紋集合為有效條紋集合。經(jīng)過判斷確定條紋集合是否為有效條紋集合之后,得到的圖像如圖8所示。
參閱圖9,本發(fā)明還提供了一種終端,具體來講:終端500可以包括rf(radiofrequency,射頻)電路510、包括有一個(gè)或一個(gè)以上計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)的存儲(chǔ)器520、輸入單元530、顯示單元540、傳感器550、音頻電路5160、wifi(wirelessfidelity,無線保真)模塊570、包括有一個(gè)或者一個(gè)以上處理核心的處理器580、以及電源590等部件。本領(lǐng)域技術(shù)人員可以理解,圖8中示出的終端結(jié)構(gòu)并不構(gòu)成對(duì)終端的限定,可以包括比圖示更多或更少的部件,或者組合某些部件,或者不同的部件布置。其中:
rf電路510可用于收發(fā)信息或通話過程中,信號(hào)的接收和發(fā)送,特別地,將基站的下行信息接收后,交由一個(gè)或者一個(gè)以上處理器580處理;另外,將涉及上行的數(shù)據(jù)發(fā)送給基站。通常,rf電路510包括但不限于天線、至少一個(gè)放大器、調(diào)諧器、一個(gè)或多個(gè)振蕩器、用戶身份模塊(sim)卡、收發(fā)信機(jī)、耦合器、lna(lownoiseamplifier,低噪聲放大器)、雙工器等。此外,rf電路510還可以通過無線通信與網(wǎng)絡(luò)和其他設(shè)備通信。所述無線通信可以使用任一通信標(biāo)準(zhǔn)或協(xié)議,包括但不限于gsm(globalsystemofmobilecommunication,全球移動(dòng)通訊系統(tǒng))、gprs(generalpacketradioservice,通用分組無線服務(wù))、cdma(codedivisionmultipleaccess,碼分多址)、wcdma(widebandcodedivisionmultipleaccess,寬帶碼分多址)、lte(longtermevolution,長(zhǎng)期演進(jìn))、電子郵件、sms(shortmessagingservice,短消息服務(wù))等。
存儲(chǔ)器520可用于存儲(chǔ)軟件程序以及模塊,處理器580通過運(yùn)行存儲(chǔ)在存儲(chǔ)器520的軟件程序以及模塊,從而執(zhí)行各種功能應(yīng)用以及數(shù)據(jù)處理。存儲(chǔ)器520可主要包括存儲(chǔ)程序區(qū)和存儲(chǔ)數(shù)據(jù)區(qū),其中,存儲(chǔ)程序區(qū)可存儲(chǔ)操作系統(tǒng)、至少一個(gè)功能所需的應(yīng)用程序(比如聲音播放功能、圖像播放功能等)等;存儲(chǔ)數(shù)據(jù)區(qū)可存儲(chǔ)根據(jù)終端500的使用所創(chuàng)建的數(shù)據(jù)(比如音頻數(shù)據(jù)、電話本等)等。此外,存儲(chǔ)器520可以包括高速隨機(jī)存取存儲(chǔ)器,還可以包括非易失性存儲(chǔ)器,例如至少一個(gè)磁盤存儲(chǔ)器件、閃存器件、或其他易失性固態(tài)存儲(chǔ)器件。相應(yīng)地,存儲(chǔ)器520還可以包括存儲(chǔ)器控制器,以提供處理器580和輸入單元530對(duì)存儲(chǔ)器520的訪問。
輸入單元530可用于接收輸入的數(shù)字或字符信息,以及產(chǎn)生與用戶設(shè)置以及功能控制有關(guān)的鍵盤、鼠標(biāo)、操作桿、光學(xué)或者軌跡球信號(hào)輸入。具體地,輸入單元530可包括觸敏表面531以及其他輸入設(shè)備532。觸敏表面531,也稱為觸摸顯示屏或者觸控板,可收集用戶在其上或附近的觸摸操作(比如用戶使用手指、觸筆等任何適合的物體或附件在觸敏表面531上或在觸敏表面531附近的操作),并根據(jù)預(yù)先設(shè)定的程式驅(qū)動(dòng)相應(yīng)的連接裝置。可選的,觸敏表面531可包括觸摸檢測(cè)裝置和觸摸控制器兩個(gè)部分。其中,觸摸檢測(cè)裝置檢測(cè)用戶的觸摸方位,并檢測(cè)觸摸操作帶來的信號(hào),將信號(hào)傳送給觸摸控制器;觸摸控制器從觸摸檢測(cè)裝置上接收觸摸信息,并將它轉(zhuǎn)換成觸點(diǎn)坐標(biāo),再送給處理器580,并能接收處理器580發(fā)來的命令并加以執(zhí)行。此外,可以采用電阻式、電容式、紅外線以及表面聲波等多種類型實(shí)現(xiàn)觸敏表面531。除了觸敏表面531,輸入單元530還可以包括其他輸入設(shè)備532。具體地,其他輸入設(shè)備532可以包括但不限于物理鍵盤、功能鍵(比如音量控制按鍵、開關(guān)按鍵等)、軌跡球、鼠標(biāo)、操作桿等中的一種或多種。
顯示單元540可用于顯示由用戶輸入的信息或提供給用戶的信息以及終端500的各種圖形用戶接口,這些圖形用戶接口可以由圖形、文本、圖標(biāo)、視頻和其任意組合來構(gòu)成。顯示單元540可包括顯示面板541,可選的,可以采用lcd(liquidcrystaldisplay,液晶顯示器)、oled(organiclight-emittingdiode,有機(jī)發(fā)光二極管)等形式來配置顯示面板541。進(jìn)一步的,觸敏表面531可覆蓋顯示面板541,當(dāng)觸敏表面531檢測(cè)到在其上或附近的觸摸操作后,傳送給處理器580以確定觸摸事件的類型,隨后處理器580根據(jù)觸摸事件的類型在顯示面板541上提供相應(yīng)的視覺輸出。雖然在圖8中,觸敏表面531與顯示面板541是作為兩個(gè)獨(dú)立的部件來實(shí)現(xiàn)輸入和輸入功能,但是在某些實(shí)施例中,可以將觸敏表面531與顯示面板541集成而實(shí)現(xiàn)輸入和輸出功能。
終端500還可包括至少一種傳感器550,比如光傳感器、運(yùn)動(dòng)傳感器以及其他傳感器。具體地,光傳感器可包括環(huán)境光傳感器及接近傳感器,其中,環(huán)境光傳感器可根據(jù)環(huán)境光線的明暗來調(diào)節(jié)顯示面板541的亮度,接近傳感器可在終端500移動(dòng)到耳邊時(shí),關(guān)閉顯示面板541和/或背光。作為運(yùn)動(dòng)傳感器的一種,重力加速度傳感器可檢測(cè)各個(gè)方向上(一般為三軸)加速度的大小,靜止時(shí)可檢測(cè)出重力的大小及方向,可用于識(shí)別手機(jī)姿態(tài)的應(yīng)用(比如橫豎屏切換、相關(guān)游戲、磁力計(jì)姿態(tài)校準(zhǔn))、振動(dòng)識(shí)別相關(guān)功能(比如計(jì)步器、敲擊)等;至于終端500還可配置的陀螺儀、氣壓計(jì)、濕度計(jì)、溫度計(jì)、紅外線傳感器等其他傳感器,在此不再贅述。
音頻電路560、揚(yáng)聲器561,傳聲器562可提供用戶與終端500之間的音頻接口。音頻電路560可將接收到的音頻數(shù)據(jù)轉(zhuǎn)換后的電信號(hào),傳輸?shù)綋P(yáng)聲器561,由揚(yáng)聲器561轉(zhuǎn)換為聲音信號(hào)輸出;另一方面,傳聲器562將收集的聲音信號(hào)轉(zhuǎn)換為電信號(hào),由音頻電路560接收后轉(zhuǎn)換為音頻數(shù)據(jù),再將音頻數(shù)據(jù)輸出處理器580處理后,經(jīng)rf電路510以發(fā)送給比如另一終端,或者將音頻數(shù)據(jù)輸出至存儲(chǔ)器520以便進(jìn)一步處理。音頻電路560還可能包括耳塞插孔,以提供外設(shè)耳機(jī)與終端500的通信。
wifi屬于短距離無線傳輸技術(shù),終端500通過wifi模塊570可以幫助用戶收發(fā)電子郵件、瀏覽網(wǎng)頁(yè)和訪問流式媒體等,它為用戶提供了無線的寬帶互聯(lián)網(wǎng)訪問。雖然圖8示出了wifi模塊570,但是可以理解的是,其并不屬于終端500的必須構(gòu)成,完全可以根據(jù)需要在不改變發(fā)明的本質(zhì)的范圍內(nèi)而省略。
處理器580是終端500的控制中心,利用各種接口和線路連接整個(gè)手機(jī)的各個(gè)部分,通過運(yùn)行或執(zhí)行存儲(chǔ)在存儲(chǔ)器520內(nèi)的軟件程序和/或模塊,以及調(diào)用存儲(chǔ)在存儲(chǔ)器520內(nèi)的數(shù)據(jù),執(zhí)行終端500的各種功能和處理數(shù)據(jù),從而對(duì)手機(jī)進(jìn)行整體監(jiān)控。可選的,處理器580可包括一個(gè)或多個(gè)處理核心;優(yōu)選的,處理器580可集成應(yīng)用處理器和調(diào)制解調(diào)處理器,其中,應(yīng)用處理器主要處理操作系統(tǒng)、用戶界面和應(yīng)用程序等,調(diào)制解調(diào)處理器主要處理無線通信??梢岳斫獾氖牵鲜稣{(diào)制解調(diào)處理器也可以不集成到處理器580中。
終端500還包括給各個(gè)部件供電的電源590(比如電池),優(yōu)選的,電源可以通過電源管理系統(tǒng)與處理器580邏輯相連,從而通過電源管理系統(tǒng)實(shí)現(xiàn)管理充電、放電、以及功耗管理等功能。電源590還可以包括一個(gè)或一個(gè)以上的直流或交流電源、再充電系統(tǒng)、電源故障檢測(cè)電路、電源轉(zhuǎn)換器或者逆變器、電源狀態(tài)指示器等任意組件。
盡管未示出,終端500還可以包括攝像頭、藍(lán)牙模塊等,在此不再贅述。具體在本實(shí)施例中,終端的顯示單元是觸摸屏顯示器,終端還包括有存儲(chǔ)器,以及一個(gè)或者一個(gè)以上的程序,其中一個(gè)或者一個(gè)以上程序存儲(chǔ)于存儲(chǔ)器中,且經(jīng)配置以由一個(gè)或者一個(gè)以上處理器執(zhí)行述一個(gè)或者一個(gè)以上程序包含用于進(jìn)行以下操作的指令:
獲取二值化圖像中的多個(gè)第一連通域;
從所述多個(gè)第一連通域中選擇出目標(biāo)連通域;
根據(jù)所述目標(biāo)連通域確定條紋集合,從而確定條紋圖形;
根據(jù)所述條紋集合中的目標(biāo)連通域計(jì)算出所述條紋圖形的中心;
根據(jù)所述條紋圖形的中心確定所述條紋集合是否為有效條紋集合。
可選地,所述獲取二值化圖像中的多個(gè)第一連通域之前還包括:接收卷簾式圖像傳感器采集得到的單幀原始圖像,其中,所述原始圖像包括閃爍光源所形成的條紋圖形;根據(jù)二值化閾值,對(duì)所述原始圖像進(jìn)行二值化以得到二值化圖像。
可選地,從所述多個(gè)第一連通域中選擇出目標(biāo)連通域包括:確定所述多個(gè)第一連通域中每個(gè)第一連通域的寬度差,將所述每個(gè)第一連通域的寬度差和預(yù)設(shè)的寬度差進(jìn)行比較,根據(jù)比較結(jié)果確定其中符合條件的第一連通域?yàn)槟繕?biāo)連通域。
可選地,將所述每個(gè)第一連通域的寬度差和預(yù)設(shè)的寬度差進(jìn)行比較,確定其中符合條件的第一連通域?yàn)槟繕?biāo)連通域,具體包括:根據(jù)卷簾式圖像傳感器成像平面,以預(yù)設(shè)條紋圖像的條紋長(zhǎng)度方向?yàn)閤軸,并令y軸垂直于所述x軸;遍歷所述多個(gè)第一連通域的所有像素點(diǎn)以獲得所述多個(gè)第一連通域?qū)?yīng)所有像素點(diǎn)的最大列坐標(biāo)y1和最小列坐標(biāo)y2,確定所述多個(gè)第一連通域中每個(gè)第一連通域的寬度差為:每個(gè)第一連通域中的像素點(diǎn)最大列坐標(biāo)y1減去像素點(diǎn)最小列坐標(biāo)y2;判斷所述多個(gè)第一連通域中每個(gè)第一連通域的寬度差是否≧kh1且≦kh2,其中,kh1為預(yù)設(shè)的第一邊界條件參數(shù),kh2為預(yù)設(shè)的第二邊界條件參數(shù);確定符合寬度差≧kh1且≦kh2的第一連通域?yàn)槟繕?biāo)連通域。
可選地,還包括以下步驟:從所述多個(gè)第一連通域中刪除寬度差﹤kh1或者﹥kh2的第一連通域。
可選地,接收卷簾式圖像傳感器采集得到的原始圖像之后,從所述多個(gè)第一連通域中選擇出目標(biāo)連通域之前包括:對(duì)所述原始圖像進(jìn)行處理以得到條紋圖形模板,并根據(jù)所述條紋圖形模板識(shí)別出目標(biāo)連通域,其中,所述條紋圖形模板的形狀為所述原始圖像中的條紋圖形融合而成的斑狀。
可選地,對(duì)所述原始圖像進(jìn)行處理以得到條紋圖形模板具體為:根據(jù)所述濾波的參數(shù)對(duì)所述原始圖像進(jìn)行濾波以得到模糊圖像,其中,所述濾波的參數(shù)設(shè)置為使得所述原始圖像中的各個(gè)圖形融合成各自對(duì)應(yīng)的斑塊;對(duì)所述模糊圖像進(jìn)行二值化以得到二值化模糊圖像;對(duì)所述二值化模糊圖像查找連通域以獲得多個(gè)第二連通域;識(shí)別所述多個(gè)第二連通域的形狀,并根據(jù)與預(yù)設(shè)的所述閃爍光源所形成的條紋圖形形狀最接近的第二連通域作為條紋圖形模板。
可選地,根據(jù)所述條紋圖形模板識(shí)別出目標(biāo)連通域具體為:判斷所述第一連通域的像素點(diǎn)的坐標(biāo)是否都包括在所述條紋圖形模板的像素點(diǎn)的坐標(biāo)構(gòu)成的集合中;如果是,確定所述第一連通域?yàn)槟繕?biāo)連通域。
可選地,所述原始圖像包括多個(gè)閃爍光源所形成的多個(gè)條紋圖形,根據(jù)所述目標(biāo)連通域確定條紋集合具體為:對(duì)所述目標(biāo)連通域進(jìn)行分類以獲得多個(gè)條紋集合。
可選地,對(duì)所述目標(biāo)連通域進(jìn)行分類以獲得多個(gè)條紋集合包括:根據(jù)所述目標(biāo)連通域構(gòu)成條紋集合的條件,確定初始條紋集合,篩選未歸入任何初始條紋集合的所述目標(biāo)連通域;從未歸入任何初始條紋集合的所述目標(biāo)連通域中,選取第j個(gè)目標(biāo)連通域,其中j為正整數(shù);以所述第j個(gè)目標(biāo)連通域的質(zhì)心為圓心,以所述第j個(gè)目標(biāo)連通域的長(zhǎng)度為直徑作圓;判斷所述初始條紋集合中的任意一個(gè)目標(biāo)連通域區(qū)域是否與所述圓相交;如果相交,則將所述第j個(gè)目標(biāo)連通域歸入對(duì)應(yīng)的所述初始條紋集合,從而得到條紋集合。
可選地,對(duì)所述目標(biāo)連通域進(jìn)行分類以獲得多個(gè)條紋集合之后還包括:判斷所述條紋集合是否同時(shí)滿足以下條件:所述條紋集合中的目標(biāo)連通域的數(shù)量是否大于數(shù)量閾值;所述條紋集合中最長(zhǎng)的目標(biāo)連通域的長(zhǎng)度是否大于長(zhǎng)度閾值;如果不是同時(shí)滿足所述條件,則刪除所述條紋集合。
可選地,根據(jù)所述條紋集合中的目標(biāo)連通域計(jì)算出條紋圖形的中心具體為:對(duì)所述條紋集合中的目標(biāo)連通域的中心的坐標(biāo)值求平均以得到所述條紋圖形的中心的坐標(biāo)值。
可選地,對(duì)所述條紋集合中的目標(biāo)連通域的中心的坐標(biāo)值求平均以得到所述條紋圖形的中心的坐標(biāo)值具體為:
根據(jù)公式(1)對(duì)所述條紋集合中的目標(biāo)連通域的中心的坐標(biāo)值求平均以得到所述條紋圖形的中心(u0,v0):
其中,i為所述條紋集合中目標(biāo)連通域的序號(hào),li為所述條紋集合中目標(biāo)連通域的數(shù)量,
可選地,根據(jù)公式(1)對(duì)所述條紋集合中的目標(biāo)連通域的中心的坐標(biāo)值求平均以得到所述條紋圖形的中心(u0,v0)之后,根據(jù)所述條紋圖形的中心確定所述條紋集合是否為有效條紋集合之前,還包括:對(duì)矩形區(qū)域q中的像素點(diǎn)的像素值進(jìn)行濾波以得到濾波后的像素值,其中,所述矩形區(qū)域q為所述條紋圖形的中心(u0,v0)為中心,以所述條紋集合中最大連通域的寬度為邊長(zhǎng)的矩形區(qū)域;以所述濾波后的像素點(diǎn)的像素值作為權(quán)值重新計(jì)算所述條紋圖形的中心(u0,v0)的坐標(biāo)值。
可選地,對(duì)矩形區(qū)域q中的像素點(diǎn)的像素值進(jìn)行濾波以得到濾波后的像素值具體為:根據(jù)公式(2)對(duì)矩形區(qū)域q中的像素點(diǎn)的像素值通過濾波模板進(jìn)行濾波以得到濾波后的像素值
n為所述濾波模板的行數(shù)和列數(shù),
可選地,以所述濾波后的像素點(diǎn)的像素值作為權(quán)值重新計(jì)算所述條紋圖形的中心(u0,v0)的坐標(biāo)值具體為:
根據(jù)公式(3)重新計(jì)算所述條紋圖形的中心(u0,v0)的坐標(biāo)值,其中,
(uj,vj)為矩形區(qū)域q中的像素點(diǎn)的坐標(biāo)值,
可選地,根據(jù)所述條紋圖形的中心確定所述條紋集合是否為有效條紋集合具體包括:
判斷所述條紋圖形的中心(u0,v0)是否滿足以下至少一個(gè):
其中,r為所述條紋集合中最大的連通域的寬度,kwide為所述二值化圖像的寬度,kheight為所述二值化圖像的高度;如果滿足至少一個(gè),則確定所述條紋集合為無效條紋集合,如果不滿足任意一個(gè),則確定所述條紋集合為有效條紋集合。
為進(jìn)一步優(yōu)化運(yùn)動(dòng)跟蹤系統(tǒng),本發(fā)明實(shí)施例還公開了另一種運(yùn)動(dòng)跟蹤系統(tǒng),與圖1所示的運(yùn)動(dòng)跟蹤系統(tǒng)的不同之處在于,所述卷簾式圖像傳感器和所述圖像處理裝置均集成在終端中。其中,終端可以是智能手機(jī)、筆記本電腦、平板電腦、行車記錄儀、錄像機(jī)、投影儀等等。
本發(fā)明實(shí)施例還公開了一種圖像處理系統(tǒng),與圖1所示的運(yùn)動(dòng)跟蹤系統(tǒng)的不同之處在于,所述圖像處理系統(tǒng)只包括卷簾式圖像傳感器以及圖像處理裝置,不包括控制器。
本發(fā)明實(shí)施例還提供了一種條紋集合查找裝置,所述裝置包括能夠?qū)崿F(xiàn)如圖4所示的方法的單元,具體請(qǐng)參閱圖4以及相關(guān)描述,此處不再展開描述。
本申請(qǐng)的技術(shù)方案本質(zhì)上或者說對(duì)現(xiàn)有技術(shù)做出貢獻(xiàn)的部分或者該技術(shù)方案的全部或部分可以以軟件產(chǎn)品的形式體現(xiàn)出來,該計(jì)算機(jī)軟件產(chǎn)品存儲(chǔ)在一個(gè)存儲(chǔ)介質(zhì)中,包括若干指令用以使得一臺(tái)計(jì)算機(jī)設(shè)備(可以是個(gè)人計(jì)算機(jī),服務(wù)器,或者網(wǎng)絡(luò)設(shè)備等)或處理器(processor)執(zhí)行本申請(qǐng)各個(gè)實(shí)施方式所述方法的全部或部分步驟。而前述的存儲(chǔ)介質(zhì)包括:u盤、移動(dòng)硬盤、只讀存儲(chǔ)器(rom,read-onlymemory)、隨機(jī)存取存儲(chǔ)器(ram,randomaccessmemory)、磁碟或者光盤等各種可以存儲(chǔ)程序代碼的介質(zhì)。