本發(fā)明涉及拍攝裝置、拍攝顯示裝置以及車輛。
背景技術(shù):
現(xiàn)有已知將多個圖像信號所示的圖像合成而顯示于顯示區(qū)域的技術(shù)(例如,專利文獻(xiàn)1)。
這種將多個圖像信號合成而顯示的技術(shù),作為將顯示車輛外部的情況的圖像顯示于車輛室內(nèi)而輔助車輛的駕駛的拍攝顯示裝置使用。例如,專利文獻(xiàn)2公開了如下技術(shù):將拍攝車輛外部的多個圖像傳感器(拍攝元件)所輸出的多個拍攝信號所示的圖像合成并使合成的圖像顯示于設(shè)置于車輛內(nèi)部的顯示部。
現(xiàn)有技術(shù)文獻(xiàn)
專利文獻(xiàn)
專利文獻(xiàn)1:日本特開2005-284029號公報
專利文獻(xiàn)2:日本特開2009-075988號公報
技術(shù)實現(xiàn)要素:
(發(fā)明所要解決的課題)
但是,在顯示的圖像為動畫的情況下,實時地顯示圖像傳感器的拍攝結(jié)果的必要性高。特別是在車輛用的拍攝顯示裝置中,為了安全的車輛的行駛,嚴(yán)格地要求實時地顯示拍攝結(jié)果。
但是,由于圖像傳感器和顯示部為不同的裝置,因此,通常與不同的基準(zhǔn)信號同步地動作。因此,有時拍攝信號的幀的開始和圖像信號的幀的開始錯時,延遲時間變長。例如,當(dāng)緊接著圖像信號的幀開始之后拍攝信號的幀開始時,會發(fā)生圖像信號的一幀期間以上的延遲時間。
并且,多數(shù)情況是,合成多個圖像傳感器所輸出的多個拍攝信號所示的圖像而顯示的情況,與顯示單一的圖像傳感器所輸出的拍攝信號所示的圖像的情況相比較,從拍攝至顯示的延遲時間變長。
本發(fā)明鑒于以上情況而作出,解決課題之一為在顯示基于多個圖像傳感器所輸出的多個拍攝信號的圖像的情況下,縮短從拍攝至顯示的延遲時間。
(解決課題的技術(shù)方案)
為了解決以上的課題,本發(fā)明涉及的拍攝裝置,其特征在于,包括:拍攝部,具備K(K為2以上的自然數(shù))個拍攝被拍攝體并輸出拍攝信號的拍攝元件;顯示部,具備與所述拍攝部的K個拍攝元件一一對應(yīng)的K個顯示區(qū)域;圖像信號生成部,基于從所述拍攝部的第j個(j為滿足1≤j≤K的自然數(shù))拍攝元件輸出的拍攝信號,生成表示應(yīng)該由所述顯示部的第j個顯示區(qū)域的各行顯示的圖像的部分圖像信號,將由與所述K個顯示區(qū)域?qū)?yīng)的K個部分圖像信號構(gòu)成的、表示應(yīng)該由所述顯示部的各行顯示的圖像的圖像信號向所述顯示部輸出;定時控制部,基于表示與已完成的從所述圖像信號生成部向所述顯示部的輸出的圖像信號對應(yīng)的行的顯示輸出行信息和表示與所述圖像信號生成部生成的部分圖像信號對應(yīng)的行中的、最后顯示圖像的行的圖像處理行信息,控制所述圖像處理生成部輸出所述圖像信號的定時,所述定時控制部執(zhí)行:在所述顯示輸出行信息表示領(lǐng)先于顯示對象行而顯示圖像的行,并且,所述圖像處理行信息表示在所述顯示對象行中顯示圖像的定時以后顯示圖像的行的情況下,以輸出表示應(yīng)該由所述顯示對象行顯示的圖像的圖像信號的方式控制所述圖像信號生成部。
根據(jù)本發(fā)明,在生成構(gòu)成顯示對象行的圖像信號的全部的部分圖像信號的情況下,當(dāng)領(lǐng)先于顯示對象行而顯示圖像的領(lǐng)先顯示行的圖像信號的輸出完成時,能夠輸出顯示對象行的圖像信號。另一方面,當(dāng)領(lǐng)先顯示行的圖像信號的輸出完成時,在沒有進(jìn)行顯示對象行的圖像信號的生成的情況下,在生成顯示對象行的圖像信號的定時,能夠輸出顯示對象行的圖像信號。也就是說,根據(jù)本發(fā)明,在變?yōu)槟軌蜉敵鲲@示對象行的圖像信號的定時,能夠輸出顯示對象行的圖像信號。因此,能夠根據(jù)每行的圖像處理時間,控制各行的圖像信號向顯示部輸出的定時。從而,與不考慮每行的圖像處理時間的變動而確定各行的圖像信號的輸出定時的情況相比較,能夠減小從拍攝部的拍攝起至顯示部的顯示止的延遲。
并且,在上述的拍攝裝置中,也可以以如下為特征:所述顯示部,能夠在各個由以一定周期輸出的顯示水平同步脈沖確定的期間內(nèi)將圖像顯示于各行,所述圖像信號生成部,與所述顯示水平同步脈沖同步地輸出所述圖像信號,所述定時控制部,在所述顯示輸出行信息表示領(lǐng)先于所述顯示對象行而顯示圖像的行,并且,所述圖像處理行信息表示在所述顯示對象行以前顯示圖像的行的情況下,以停止表示應(yīng)該由所述顯示對象行顯示的圖像的圖像信號的輸出的方式控制所述圖像信號生成部,之后,以與所述圖像處理行信息表示的行成為所述顯示對象行之后輸出的所述顯示水平同步脈沖同步地、輸出表示應(yīng)該由所述顯示對象行顯示的圖像的圖像信號的方式,控制所述圖像信號生成部。
根據(jù)該方式,能夠以由顯示水平同步脈沖確定的水平掃描期間的精度,控制各行的圖像信號的輸出定時。因此,能夠防止從拍攝至顯示的間隔例如變?yōu)橐粠芷谄陂g以上的期間這樣的大的延遲的發(fā)生。
并且,在上述的拍攝裝置中,也可以以如下為特征:所述顯示部,能夠在各個由顯示水平同步脈沖確定的期間內(nèi)將圖像顯示于各行,所述圖像信號生成部,與所述顯示水平同步脈沖同步地輸出所述圖像信號,所述定時控制部,能夠以可變的周期輸出所述顯示水平同步脈沖,在所述顯示輸出行信息表示領(lǐng)先于所述顯示對象行而顯示圖像的行,并且,所述圖像處理行信息表示在所述顯示對象行以前顯示圖像的行的情況下,以停止所述顯示水平同步脈沖的輸出的同時,停止表示應(yīng)該由所述顯示對象行顯示的圖像的圖像信號的輸出的方式控制所述圖像信號生成部,之后,在所述圖像處理行信息表示的行成為所述顯示對象行的情況下,以輸出所述顯示水平同步脈沖的同時,與該被輸出的顯示水平同步脈沖同步地輸出表示應(yīng)該由所述顯示對象行顯示的圖像的圖像信號的方式控制所述圖像信號生成部。
根據(jù)該方式,由顯示水平同步脈沖確定的水平掃描期間的時長,根據(jù)變?yōu)槟軌蜉敵龈餍械膱D像信號的定時確定。因此,在與每行的圖像處理時間對應(yīng)的定時,能夠?qū)⒏餍械膱D像信號向顯示部輸出,與不考慮每行的圖像處理時間的變動而確定各行的圖像信號的輸出定時的情況相比較,能夠減小從拍攝起至顯示止的延遲。
此外,本發(fā)明涉及的拍攝裝置,其特征在于,包括:拍攝部,具備K(K為2以上的自然數(shù))個拍攝被拍攝體并與拍攝同步信號同步地輸出表示拍攝結(jié)果的拍攝信號的拍攝元件;顯示部,具備與所述拍攝部的K個拍攝元件一一對應(yīng)的K個顯示區(qū)域,能夠與顯示同步信號同步地、以比所述拍攝部高的幀率進(jìn)行圖像顯示;圖像信號生成部,基于從所述拍攝部的第j個(j為滿足1≤j≤K的自然數(shù))拍攝元件輸出的拍攝信號,生成表示應(yīng)該由所述顯示部的第j個顯示區(qū)域顯示的圖像的部分圖像信號,將由與所述K個顯示區(qū)域?qū)?yīng)的K個部分圖像信號構(gòu)成的、表示應(yīng)該由所述顯示部顯示的圖像的圖像信號與所述顯示同步信號同步地向所述顯示部輸出;定時控制部,控制所述圖像信號生成部輸出所述圖像信號的定時,在將從所述拍攝同步信號的幀的開始起至所述顯示同步信號的幀的開始止的時間作為相位差,將所述拍攝部的幀率作為第一幀率,將能夠由所述顯示部顯示的最高的幀率作為第二幀率時,所述定時控制部能夠執(zhí)行:第一定時控制,在所述相位差比規(guī)定時間長的情況下,通過以所述顯示部的幀率成為所述第二幀率的方式使所述圖像信號生成部輸出所述圖像信號,逐漸減小所述相位差;第二定時控制,在所述相位差變?yōu)樗鲆?guī)定時間以下以后,通過以所述顯示部的幀率成為所述第一幀率的方式使所述圖像信號生成部輸出所述圖像信號。
在本發(fā)明中,在拍攝部和顯示部的相位差比規(guī)定時間長的情況下,通過以比拍攝部高的幀率即第二幀率輸出圖像信號,在相當(dāng)于顯示部的幀期間和拍攝部的幀期間的差分的逐個期間縮小相位差。并且,在相位差變?yōu)橐?guī)定時間以下以后,以顯示部的幀率變?yōu)樽鳛榕臄z部的幀率的第一幀率的方式,使圖像信號同步于拍攝信號并輸出。
因此,在相位差大于規(guī)定時間的情況下,能夠逐步地縮短相位差直至變?yōu)橐?guī)定時間以下為止,在相位差收斂至規(guī)定時間以下以后,能夠維持該相位差。從而,能夠維持從拍攝起至顯示止的延遲時間被最小化的狀態(tài)。
此外,所謂規(guī)定時間例如可以為基于生成相當(dāng)于顯示部的一行的圖像信號所需要的時間所確定的時間。
并且,在上述的拍攝裝置中,其特征可以在于,所述定時控制部,在所述相位差比所述規(guī)定時間長的情況下,在生成所述K個部分圖像信號之后,等待直至能夠由所述顯示部顯示所述K個部分圖像信號表示的圖像為止,將由所述K個部分圖像信號構(gòu)成的圖像信號輸出至所述顯示部。
根據(jù)該方式,通過等待直至能夠由顯示部顯示圖像信號表示的圖像為止,以顯示部的幀率變?yōu)榈诙实姆绞捷敵鰣D像信號,因此,能夠逐步地縮短拍攝部和顯示部的相位差。
并且,在上述的拍攝裝置中,其特征可以在于,所述顯示同步信號,包含一定周期的顯示水平同步脈沖,所述定時控制部,在所述相位差成為所述規(guī)定時間以下以后,在完成所述K個部分圖像信號的生成的圖像信號生成時刻變?yōu)樵谒鲲@示部中能夠顯示所述K個部分圖像信號表示的圖像的能夠顯示時刻以后的情況下,與在所述圖像信號生成時刻之后最初輸出的顯示水平同步脈沖同步地,將由所述K個部分圖像信號構(gòu)成的圖像信號向所述顯示部輸出。
根據(jù)該方式,能夠使從圖像信號的生成至輸出的間隔為由顯示水平同步脈沖確定的水平掃描期間以下。也就是說,能夠以由顯示水平同步脈沖確定的水平掃描期間的精度控制圖像信號的輸出定時。因此,在對應(yīng)于圖像處理的完成的定時,能夠?qū)D像信號向顯示部輸出,與不考慮圖像處理時間的變動而確定圖像信號的輸出定時的情況相比較,能夠減小從拍攝起至顯示止的延遲。
并且,在上述的拍攝裝置中,其特征可以在于,所述定時控制部,輸出包含可變的周期的顯示水平同步脈沖的所述顯示同步信號,在所述相位差變?yōu)樗鼋o定時間以下以后,當(dāng)所述K個部分圖像信號的生成完成的圖像信號生成時刻為在所述顯示部中能夠顯示所述K個部分圖像信號表示的圖像的能夠顯示時刻以后時,在停止所述顯示水平同步脈沖的輸出的同時,停止由所述K個部分圖像信號構(gòu)成的圖像信號的輸出,直至所述圖像信號生成時刻為止,在所述圖像信號生成時刻以后,在輸出所述顯示水平同步脈沖的同時,與該被輸出的顯示水平同步脈沖同步地輸出由所述K個部分圖像信號構(gòu)成的圖像信號。
根據(jù)該方式,根據(jù)能夠輸出圖像信號的定時確定由顯示水平同步脈沖確定的水平掃描期間的時長。因此,在對應(yīng)于圖像處理的完成的定時,能夠?qū)D像信號向顯示部輸出,與不考慮圖像處理時間的變動而確定圖像信號的輸出定時的情況相比較,能夠減小從拍攝起至顯示止的延遲。
并且,在上述的拍攝裝置中,其特征可以在于,所述顯示部設(shè)置于車輛的內(nèi)部,所述拍攝元件拍攝所述車輛的外部。
根據(jù)該方式,由于車輛外部的狀態(tài)能夠?qū)崟r地顯示于車輛內(nèi)部的顯示部,因此,能夠進(jìn)行車輛的安全行駛。
并且,在上述的拍攝裝置中,其特征可以在于,所述拍攝部所具備的K個拍攝元件包含:拍攝所述車輛的后方的被拍攝體的第一拍攝元件;拍攝所述車輛的左后方的被拍攝體的第二拍攝元件;拍攝所述車輛的右后方的被拍攝體的第三拍攝元件,所述顯示部所具備的K個顯示區(qū)域包含:對應(yīng)于所述第一拍攝元件的第一顯示區(qū)域;對應(yīng)于所述第二拍攝元件的、與所述第一顯示區(qū)域相比設(shè)置于左側(cè)的第二顯示區(qū)域;對應(yīng)于所述第三拍攝元件的、與所述第一顯示區(qū)域相比設(shè)置于右側(cè)的第三顯示區(qū)域。
本方式涉及的拍攝裝置,能夠代替后視鏡、側(cè)方后視鏡等而使用,駕駛者能夠可見確認(rèn)車輛的安全行駛所必要的車輛外部的狀態(tài)。從而,由于能夠進(jìn)行富于設(shè)計性的車輛(車內(nèi))的設(shè)計,并且,不再需要將側(cè)方后視鏡安裝于車體外面,因此,行駛時的風(fēng)壓也得以降低。
此外,本發(fā)明涉及的拍攝顯示裝置,其特征在于,具備上述的顯示部和上述拍攝裝置。并且,本發(fā)明涉及的車輛,其特征在于,具備上述拍攝顯示裝置。
附圖說明
圖1為示出根據(jù)本發(fā)明的第一實施方式的車輛用拍攝顯示裝置1的結(jié)構(gòu)的框圖。
圖2為示出左側(cè)后方用的圖像傳感器12L、中央后方用的圖像傳感器12C及右側(cè)后方用的圖像傳感器12R的配置例的說明圖。
圖3A為用于說明顯示區(qū)域AD所顯示的圖像在車輛α的車內(nèi)的顯示位置的說明圖。
圖3B為用于說明顯示區(qū)域AD所顯示的圖像在車輛α的車內(nèi)的顯示位置的說明圖。
圖4為示出顯示部40的結(jié)構(gòu)例的圖。
圖5為示出車輛用拍攝顯示裝置1的結(jié)構(gòu)的框圖。
圖6為用于說明拍攝信號DS和顯示區(qū)域AD的關(guān)系的說明圖。
圖7為用于說明車輛用拍攝顯示裝置1的動作的時序圖。
圖8A為用于說明車輛用拍攝顯示裝置1的動作的時序圖。
圖8B為用于說明車輛用拍攝顯示裝置1的動作的時序圖。
圖8C為用于說明車輛用拍攝顯示裝置1的動作的時序圖。
圖8D為用于說明車輛用拍攝顯示裝置1的動作的時序圖。
圖9為用于說明顯示區(qū)域AD和用于將顯示區(qū)域AD顯示于顯示部的時序圖的說明圖。
圖10為用于說明車輛用拍攝顯示裝置1的動作的時序圖。
圖11A為用于說明車輛用拍攝顯示裝置1的動作的時序圖。
圖11B為用于說明車輛用拍攝顯示裝置1的動作的時序圖。
圖12為示出顯示部40的結(jié)構(gòu)的框圖。
圖13為示出部分圖像處理部21J的結(jié)構(gòu)的框圖。
圖14為用于說明畸變校正處理的說明圖。
圖15A為用于說明修整處理的說明圖。
圖15B示出修整處理后的圖像的一例的圖。
圖15C為示出通過左右反轉(zhuǎn)處理而生成的圖像的一例的圖。
圖16A為用于說明縮小/放大處理的說明圖。
圖16B為用于說明水平方向縮小/放大處理的說明圖。
圖16C為用于說明垂直方向縮小/放大處理的說明圖。
圖17為示出縮小/放大處理后的圖像的一例的圖。
圖18為示出縮小/放大處理后的圖像的一例的圖。
圖19為用于說明縮小/放大處理的說明圖。
圖20為用于說明圖像信號D[m]和拍攝信號DS-J[pJ]的關(guān)系的時序圖。
圖21為用于說明拍攝信號DS的輸出定時的時序圖。
圖22為用于說明車輛用拍攝顯示裝置1的動作的時序圖。
圖23為用于說明車輛用拍攝顯示裝置1的動作的時序圖。
圖24為用于說明車輛用拍攝顯示裝置1的動作的時序圖。
圖25為用于說明車輛用拍攝顯示裝置1的動作的時序圖。
圖26為用于說明本發(fā)明的第二實施方式涉及的車輛用拍攝顯示裝置的動作的時序圖。
圖27為用于說明根據(jù)第二實施方式的車輛用拍攝顯示裝置的動作的時序圖。
圖28為用于說明根據(jù)第二實施方式的車輛用拍攝顯示裝置的動作的時序圖。
具體實施方式
參照附圖說明用于實施本發(fā)明的方式。不過,在各圖中,適當(dāng)?shù)厥垢鞑糠值某叽缂氨壤吲c實際不同。并且,以下敘述的實施方式由于為本發(fā)明的優(yōu)選的具體例,因此,附加了技術(shù)上優(yōu)選的各種限定,在以下的說明中只要沒有特別地限定本發(fā)明的記載,本發(fā)明的保護(hù)范圍就不限于以下的方式。
<A、第一實施方式>
以下在第一實施方式中例示車輛用拍攝顯示裝置1作為“拍攝顯示裝置”。
<1、車輛用拍攝顯示裝置的整體結(jié)構(gòu)>
圖1為示出車輛用拍攝顯示裝置1的結(jié)構(gòu)的概略的框圖。車輛用拍攝顯示裝置1為在駕駛者駕駛機(jī)動車或電車等的車輛時,顯示用于輔助車輛的駕駛的圖像的裝置。
如圖1所示,車輛用拍攝顯示裝置1具備:拍攝車輛的外部并輸出拍攝信號DS的拍攝部10、對于從拍攝部10輸出的拍攝信號DS實施圖像處理而生成圖像信號D的圖像處理電路100、顯示圖像信號D所示的圖像的顯示部40、用于輸入有關(guān)拍攝信號DS的圖像處理的指示等的操作部60、控制車輛用拍攝顯示裝置1的整體的動作的控制部50。
在車輛用拍攝顯示裝置1中,拍攝部10、圖像處理電路100和控制部50為“拍攝裝置”的一例。
拍攝部10具備:拍攝位于車輛的左側(cè)后方區(qū)域的拍攝體并輸出示出拍攝結(jié)果的拍攝信號DS-L的左側(cè)后方用的圖像傳感器12L、拍攝位于車輛的后方區(qū)域的拍攝體并輸出示出拍攝結(jié)果的拍攝信號DS-C的中央后方用的圖像傳感器12C、拍攝位于車輛的右側(cè)后方區(qū)域的拍攝體并輸出示出拍攝結(jié)果的拍攝信號DS-R的右側(cè)后方用的圖像傳感器12R。也就是說,本實施方式涉及的拍攝部10所輸出的拍攝信號DS包含:拍攝信號DS-L、拍攝信號DS-C以及拍攝信號DS-R。
此外,中央后方用的圖像傳感器12C為“第一拍攝元件”的一例,左側(cè)后方用的圖像傳感器12L為“第二拍攝元件”的一例,右側(cè)后方用的圖像傳感器12R為“第三拍攝元件”的一例。并且,將第一拍攝元件、第二拍攝元件以及第三拍攝元件總稱為“拍攝元件”。也就是說,本實施方式涉及的車輛用拍攝顯示裝置1具備三個拍攝元件。
圖2為示出車輛α中的左側(cè)后方用的圖像傳感器12L、中央后方用的圖像傳感器12C以及右側(cè)后方用的圖像傳感器12R的配置例的說明圖。
如圖2所示,左側(cè)后方用的圖像傳感器12L配置于車輛α的左前柱部的外側(cè)表面附近(在圖示例中為現(xiàn)有的設(shè)置有左側(cè)后視鏡的位置),拍攝車輛α的左側(cè)后方區(qū)域LR。右側(cè)后方用的圖像傳感器12R配置于車輛α的右前柱部的外側(cè)表面附近(在圖示例中為現(xiàn)有的設(shè)置有右側(cè)后視鏡的位置),拍攝車輛α的右側(cè)后方區(qū)域RR。中央后方用的圖像傳感器12C配置于車輛α的后方端的車輛寬度方向的中點位置附近(在圖示例中為后窗的下側(cè)),拍攝車輛的后方區(qū)域BR。此外,圖示的配置例為一例,在不改變本發(fā)明的主旨的范圍內(nèi)能夠適當(dāng)?shù)刈兏?/p>
圖像處理電路100對于拍攝信號DS-L實施圖像處理生成部分圖像信號D-L,對于拍攝信號DS-C實施圖像處理生成部分圖像信號D-C,對于拍攝信號DS-R實施圖像處理生成部分圖像信號D-R。并且,圖像處理電路100將生成的由部分圖像信號D-L、部分圖像信號D-C以及部分圖像信號D-R構(gòu)成的圖像信號D向顯示部40輸出。也就是說,本實施方式涉及的圖像處理電路100輸出的圖像信號D包含部分圖像信號D-L、部分圖像信號D-C以及部分圖像信號D-R。
顯示部40具備具有顯示圖像信號D所示的圖像的顯示區(qū)域AD的液晶面板42。
液晶面板42所具備的顯示區(qū)域AD包括:用于顯示圖像信號D中的部分圖像信號D-C所示的圖像的中央顯示區(qū)域AD-C(第一顯示區(qū)域)、用于顯示部分圖像信號D-L所示的圖像的左側(cè)顯示區(qū)域AD-L(第二顯示區(qū)域)、用于顯示部分圖像信號D-R所示的圖像的右側(cè)顯示區(qū)域AD-R(第三顯示區(qū)域)。也就是說,中央顯示區(qū)域AD-C代替現(xiàn)有的后視鏡而顯示后方區(qū)域BR的圖像,左側(cè)顯示區(qū)域AD-L代替現(xiàn)有的左側(cè)后視鏡而顯示左側(cè)后方區(qū)域LR的圖像,右側(cè)顯示區(qū)域AD-R代替現(xiàn)有的右側(cè)后視鏡而顯示右側(cè)后方區(qū)域RR的圖像。
此外,以下為了方便說明,以“J”表示附加于各種符號的后綴字母“L”、“C”、“R”中的任意一個字母。
具體而言,在沒有必要區(qū)分左側(cè)后方用圖像傳感器12L、中央后方用圖像傳感器12C以及右側(cè)后方用圖像傳感器12R時,將其中的任意一個總稱為“圖像傳感器12J”。并且,在沒有必要區(qū)分拍攝信號DS-L、拍攝信號DS-C以及拍攝信號DS-R時,將其中的任意一個總稱為“拍攝信號DS-J”。并且,在沒有必要區(qū)分部分圖像信號D-L、部分圖像信號D-C以及部分圖像信號D-R時,將其中的任意一個總稱為“部分圖像信號D-J”。在沒有必要區(qū)分左側(cè)顯示區(qū)域AD-L、中央顯示區(qū)域AD-C以及右側(cè)顯示區(qū)域AD-R時,將其中的任意一個總稱為“顯示區(qū)域AD-J”。
圖3A示出顯示區(qū)域AD所顯示的圖像在車輛α的車內(nèi)的顯示位置。如該圖所示,在左側(cè)顯示區(qū)域AD-L顯示的圖像,在放大顯示區(qū)域Area-L被放大顯示;在中央顯示區(qū)域AD-C顯示的圖像,在放大顯示區(qū)域Area-C被放大顯示;在右側(cè)顯示區(qū)域AD-R顯示的圖像,在放大顯示區(qū)域Area-R被放大顯示。此外,也可以左側(cè)顯示區(qū)域AD-L與放大顯示區(qū)域Area-L一致,中央顯示區(qū)域AD-C與放大顯示區(qū)域Area-C一致,右側(cè)顯示區(qū)域AD-R與放大顯示區(qū)域Area-R一致。
放大顯示區(qū)域Area-L、放大顯示區(qū)域Area-C以及放大顯示區(qū)域Area-R配置于駕駛席的前方,以便由顯示區(qū)域AD所包含的各顯示區(qū)域AD-J(AD-L、AD-C、AD-R)所顯示的圖像易于被駕駛者查看。此外,從駕駛者來看,以放大顯示區(qū)域Area-L比放大顯示區(qū)域Area-C靠左側(cè)的方式配置,以放大顯示區(qū)域Area-R比放大顯示區(qū)域Area-C靠右側(cè)的方式配置。也就是說,從駕駛者來看,放大顯示區(qū)域Area-L、放大顯示區(qū)域Area-C以及放大顯示區(qū)域Area-R按照現(xiàn)有的右側(cè)后視鏡、后視鏡以及左側(cè)后視鏡的順序排列。因此,對于習(xí)慣了現(xiàn)有的右側(cè)后視鏡、后視鏡以及左側(cè)后視鏡的駕駛者來說,能夠使其查看沒有異樣感的圖像。
在圖3A所示的示例中,液晶面板42配置于駕駛席前方的前窗下的儀表板內(nèi),以對應(yīng)于圖像信號D的圖像通過前窗下部的帶狀的放大顯示區(qū)域(Area-L、Area-C、Area-R)被查看的方式顯示。
此外,圖3A所示的包含放大顯示區(qū)域的液晶面板42的配置只不過為一例,例如,可以將放大顯示區(qū)域配置于車輛α的現(xiàn)有的設(shè)置有儀表板(儀表組板)的區(qū)域?;蛘?,包含放大顯示區(qū)域的液晶面板42,也可以如圖3B所例示的,在車輛α的現(xiàn)有的儀表板(儀表組板)的上部部分以與圖3A比較橫向?qū)挾容^窄的形狀設(shè)置于前窗的下側(cè)?;蛘撸糯箫@示區(qū)域也可以作為液晶面板或有機(jī)EL面板設(shè)置于車輛α的現(xiàn)有的后視鏡的部分。
此外,如圖3A及圖3B所例示,在本實施方式涉及的車輛用拍攝顯示裝置1中,在拍攝車輛α的左側(cè)后方區(qū)域LR、車輛α的后方區(qū)域BR以及車輛α的右側(cè)后方區(qū)域RR而顯示于駕駛者可見的地方的情況下,以示出左側(cè)后方區(qū)域LR的圖像位于示出后方區(qū)域BR的圖像的左側(cè)、示出右側(cè)后方區(qū)域RR的圖像位于示出后方區(qū)域BR的圖像的右側(cè)、示出后方區(qū)域BR的圖像位于示出左側(cè)后方區(qū)域LR的圖像的右側(cè)并且位于示出右側(cè)后方區(qū)域RR的圖像的左側(cè)的方式配置。從而,以駕駛者能夠直觀地識別車輛α的左后方、車輛α的中央后方以及車輛α的右后方的方式配置各圖像。
此外,圖3A以及圖3B只不過為一例,也可以以示出左側(cè)后方區(qū)域LR的圖像位于駕駛者的駕駛位置的左側(cè)、示出右側(cè)后方區(qū)域RR的圖像位于駕駛者的駕駛位置的右側(cè)的方式設(shè)置放大顯示區(qū)域。
在本實施方式中,將顯示部40例如作為平視顯示器(HUD)構(gòu)成。
圖4中示出配置于儀表板內(nèi)的顯示部40的構(gòu)成例。如該圖所示,顯示部40具備:微型投影儀401、透射型屏幕402、物鏡403和組合器(凹面半反射鏡)404。微型投影儀401將對應(yīng)于輸入的圖像信號D的圖像投影于透射型屏幕402而描繪實像。透過透射型屏幕402的光通過物鏡403調(diào)整像的方向,被組合器404反射。此時,被組合器404反射的光經(jīng)由設(shè)置于儀表板的開口部Op而入射至駕駛者的眼睛,從駕駛者來看,可以看見圖像放大地顯示于放大顯示區(qū)域(Area-L、Area-C、Area-R)(即,在儀表板的前方形成放大圖像的虛像)。此外,也可以通過透明的板堵塞開口部Op而使得灰塵或塵埃不會進(jìn)入內(nèi)部。
此外,本發(fā)明涉及的顯示部40不限于本實施方式的方式,可以為直視型的面板的顯示虛像的HUD,也可以為投影儀方式的HUD,還可以為LCD(液晶顯示器,liquid crystal display)或有機(jī)EL面板方式的直視型的顯示面板。
圖5為示出車輛用拍攝顯示裝置1的功能結(jié)構(gòu)的框圖。
如圖5所示,拍攝部10具備:多個圖像傳感器12J(12L、12C、12R),依次線掃描來自矩陣狀排列的受光元件的信號并輸出對應(yīng)于被拍攝體的像的拍攝信號DS-J;定時發(fā)生器13,對于各圖像傳感器12J(12L、12C、12R)輸出各種定時信號。此外,拍攝部10對應(yīng)于各圖像傳感器12J而具備使被拍攝體的像成像的拍攝光學(xué)系統(tǒng),但在該圖中省略了圖示。
如圖6所示,左側(cè)后方用的圖像傳感器12L輸出對應(yīng)于PL行×QL列的像素的拍攝信號DS-L(PL為滿足2≤PL的自然數(shù)。QL為滿足2≤QL的自然數(shù))。中央后方用的圖像傳感器12C輸出對應(yīng)于PC行×QC列的像素的拍攝信號DS-C(PC為滿足2≤PC的自然數(shù)。QC為滿足2≤QL的自然數(shù))。右側(cè)后方用的圖像傳感器12R輸出對應(yīng)于PR行×QR列的像素的拍攝信號DS-R(PR為滿足2≤PR的自然數(shù)。QR為滿足2≤QR的自然數(shù))。如該圖所示,在本實施方式中,設(shè)定“PL=PR<PC”、“QL=QR<QC”的情況。
此外,以下有時將圖像傳感器12J(12L、12C、12R)所輸出的拍攝信號DS-J的像素的尺寸統(tǒng)稱為PJ行×QJ列。
定時發(fā)生器13生成拍攝垂直同步信號SVsync、拍攝水平同步信號SHsync以及拍攝點時鐘信號SCLK,將上述生成的信號向各圖像傳感器12J輸出。此外,在此,由單一的定時發(fā)生器13生成的定時向各個圖像傳感器供給。
圖7為用于說明定時發(fā)生器13生成的拍攝垂直同步信號SVsync、拍攝水平同步信號SHsync以及拍攝點時鐘信號SCLK的時序圖。拍攝垂直同步信號SVsync(“拍攝同步信號”的一例)為規(guī)定用于從各圖像傳感器12J的受光元件讀取檢測信號的拍攝垂直掃描期間Fs(“拍攝同步信號的幀”的一例)的信號。此外,有時將拍攝部10的幀率即“1/FS”稱為“第一幀率”。
拍攝水平同步信號SHsync為規(guī)定用于從各圖像傳感器12J的一行的受光元件讀取檢測信號的水平掃描期間Hs的信號。拍攝點時鐘信號SCLK為規(guī)定用于從各圖像傳感器12J的一像素的受光元件讀取檢測信號的定時的信號。拍攝垂直掃描期間Fs的時長一定(固定長度),水平掃描期間Hs的時長也一定(固定長度)。并且,拍攝垂直掃描期間Fs由多個水平掃描期間Hs構(gòu)成。此外,定時發(fā)生器13也可以將拍攝垂直同步信號SVsync、拍攝水平同步信號SHsync以及拍攝點時鐘信號SCLK向圖像處理電路100輸出。
如此,在本實施方式中,拍攝部10所具備的多個圖像傳感器12J(12L、12C、12R)與從單一的定時發(fā)生器13供給的同一定時信號同步地動作(在此,所謂同一定時信號是指至少拍攝垂直同步信號SVsync定時一致)。
返回圖5進(jìn)行說明。
顯示部40為顯示示出作為拍攝對象的被拍攝體的圖像,用于使車輛α的駕駛者掌握車輛α的外部的被拍攝體的狀態(tài)的顯示裝置,其構(gòu)造如參照圖4所說明的那樣。
顯示部40中的微型投影儀401具備:光源(圖示省略)、具備顯示對應(yīng)于圖像處理電路100所生成的圖像信號D的圖像的顯示區(qū)域AD的液晶面板42、投影光學(xué)系統(tǒng)(圖示省略)和控制液晶面板42的動作的控制器41。光源例如具備LED(發(fā)光二極管,Light Emitting Diode)或激光二極管,向液晶面板42照射白色光。投影光學(xué)系統(tǒng)為投影透過液晶面板42的光的例如凸透鏡等。
如圖6所示,在液晶面板42上,在顯示區(qū)域AD中,多個像素以在縱方向為N列、在橫方向為M行(M線)的方式排列為矩陣狀(M為滿足2≤M的自然數(shù)。N為滿足6≤N的自然數(shù))。換言之,顯示區(qū)域AD以由橫方向排列的N個像素構(gòu)成的行在縱方向上排列M行的方式構(gòu)成。上述M行×N列的像素例如包含用于表示紅色的像素、用于表示綠色的像素以及用于表示藍(lán)色的像素。
此外,如參照圖1所說明的,顯示區(qū)域AD被劃分為三個顯示區(qū)域AD-J,其中,左側(cè)顯示區(qū)域AD-L具備M行×NL列的像素,中央顯示區(qū)域AD-C具備M行×NC列的像素,右側(cè)顯示區(qū)域AD-R具備M行×NR列的像素(NL、NC以及NR為2以上的自然數(shù))。不過,NL、NC、NR滿足“N=NL+NC+NR”。以下有時將顯示區(qū)域AD所具有的各顯示區(qū)域AD-J(AD-L、AD-C、AD-R)的像素的尺寸統(tǒng)稱為M行×NJ列。
此外,在本實施方式中,存在拍攝信號DS-J的像素數(shù)和顯示區(qū)域AD-J的像素數(shù)不同的情況。即,存在“M≠PJ”、“NJ≠Q(mào)J”的情況。在本實施方式中,設(shè)定“M<PJ”、“NJ<QJ”的情況。
在本實施方式中,為了以顯示部40的顯示區(qū)域AD能夠顯示的最高的幀率顯示一畫面的圖像所需要的時長比圖像傳感器12J拍攝一畫面的圖像的時長短。因此,在希望以顯示部40能夠顯示的最高的幀率顯示圖像的情況下,來自拍攝部10的拍攝信號DS的輸出追趕不及。因此,在本實施方式涉及的車輛用拍攝顯示裝置1中,通過由圖像處理電路100調(diào)整來自圖像處理電路100的圖像信號D的輸出定時,使顯示部40的顯示速度追隨來自拍攝部10的拍攝信號DS的輸出周期。
如圖5所示,圖像處理電路100具備:基于拍攝信號DS(多個拍攝信號DS-J)生成圖像信號D(多個部分圖像信號D-J)并將生成的圖像信號D向顯示部40輸出的圖像信號生成部20、控制輸出圖像信號生成部20輸出圖像信號D的定時的定時控制部30。
如圖5所示,圖像信號生成部20具備:對拍攝信號DS實施圖像處理而生成圖像信號D的圖像處理部21、臨時存儲圖像處理部21所生成的圖像信號D的VRAM/行緩沖器22(以下稱為“行緩沖器22”)和從行緩沖器22取得圖像信號D并將取得的圖像信號D向顯示部40輸出的圖像信號輸出部23。
圖像信號D為規(guī)定設(shè)置于液晶面板42的顯示區(qū)域AD的M行×N列的像素的各個應(yīng)該顯示的圖像(灰階)的信號。
以下,在示出應(yīng)該由顯示區(qū)域AD顯示的圖像的圖像信號D中,將示出應(yīng)該由顯示區(qū)域AD的第m行的行顯示的圖像的一行的圖像信號D標(biāo)記為圖像信號D[m](m為滿足1≤m≤M的自然數(shù))。并且,以下在示出應(yīng)該由顯示區(qū)域AD-J顯示的圖像的部分圖像信號D-J中,將示出應(yīng)該由顯示區(qū)域AD-J的第m行的行顯示的圖像的一行的部分圖像信號D-J標(biāo)記為部分圖像信號D-J[m]。也就是說,圖像信號D[m]由部分圖像信號D-L[m]、部分圖像信號D-C[m]以及部分圖像信號D-R[m]構(gòu)成。
如圖5所示,圖像處理部21具備:對拍攝信號DS中的拍攝信號DS-L實施圖像處理而生成部分圖像信號D-L的左側(cè)圖像用圖像處理部21L、對拍攝信號DS中的拍攝信號DS-C實施圖像處理而生成部分圖像信號D-C的中央圖像用圖像處理部21C、對拍攝信號DS中的拍攝信號DS-R實施圖像處理而生成部分圖像信號D-R的右側(cè)圖像用圖像處理部21R。以下在沒有必要區(qū)分左側(cè)圖像用圖像處理部21L、中央圖像用圖像處理部21C以及右側(cè)圖像用圖像處理部21R時,將上述中的任意一個統(tǒng)稱為“部分圖像處理部21J”。
部分圖像處理部21J(21L、21C、21R)對于每一個應(yīng)該由顯示區(qū)域AD-J的一行的像素顯示的圖像生成示出應(yīng)該由液晶面板42的顯示區(qū)域AD-J顯示的圖像的部分圖像信號D-J。更具體而言,部分圖像處理部21J按照部分圖像信號D-J[1]、部分圖像信號D-J[2]、……、部分圖像信號D-J[m]的順序生成部分圖像信號D-J。此外,對于部分圖像處理部21J執(zhí)行的圖像處理的詳細(xì)情況將于后述。
此外,部分圖像處理部21J(21L、21C、21R),當(dāng)生成部分圖像信號D-J[m](D-L[m]、D-C[m]、D-R[m])時,在將生成的部分圖像信號D-J[m]存儲于行緩沖器22的同時,將表示部分圖像信號D-J[m]向行緩沖器22的存儲完成的部分寫入完成信號PtA-J(PtA-L、PtA-C、PtA-R)向定時控制部30輸出。也就是說,左側(cè)圖像用圖像處理部21L,當(dāng)生成部分圖像信號D-L[m]并存儲于行緩沖器22時,輸出部分寫入完成信號PtA-L。并且,中央圖像用圖像處理部21C,當(dāng)生成部分圖像信號D-C[m]并存儲于行緩沖器22時,輸出部分寫入完成信號PtA-C。并且,右側(cè)圖像用圖像處理部21R,當(dāng)生成部分圖像信號D-R[m]并存儲于行緩沖器22時,輸出部分寫入完成信號PtA-R。將這種由圖像處理部21生成圖像信號D[m]并存儲于行緩沖器22時輸出的部分寫入完成信號PtA-L、PtA-C以及PtA-R構(gòu)成的信號稱為寫入完成信號PtA。
在本實施方式中,部分寫入完成信號PtA-J(PtA-L、PtA-C、PtA-R)為示出對應(yīng)于由部分圖像處理部21J進(jìn)行的向行緩沖器22的寫入完成的部分圖像信號D-J的行的編號m的信號。以下,將部分寫入完成信號PtA-J(PtA-L、PtA-C、PtA-R)所示的行的編號m特別地稱為“行編號ma-J(ma-L、ma-C、ma-R)(ma-J為滿足1≤ma-J≤M的自然數(shù))”。寫入完成信號PtA所包含的部分寫入完成信號PtA-L、PtA-C、PtA-R所示的行編號ma-L、ma-C、ma-R的最小值ma相當(dāng)于表示圖像處理完成的行的“圖像處理行信息”。也就是說,寫入完成信號PtA為示出圖像處理行信息的信號。
此外,部分寫入完成信號PtA-J不限于示出行的編號的信號,也可以為包含在部分圖像處理部21J所進(jìn)行的部分圖像信號D-J[m]的生成完成的情況下上升至高電平的脈沖波形的雙值的信號。部分寫入完成信號PtA-J為雙值的信號的情況下,定時控制部30例如通過在一個畫面的顯示開始之后對于部分寫入完成信號PtA-J中所包含的脈沖的個數(shù)進(jìn)行計數(shù),能夠得到由部分圖像處理部21J完成生成的部分圖像信號D-J[m]的行編號。
圖像信號輸出部23根據(jù)定時控制部30的控制,逐行地從行緩沖器22讀取圖像信號D,將讀取的一行的圖像信號D[m]向顯示部40輸出。
此外,以下根據(jù)說明的情況而需要區(qū)分的情況下,將圖像處理部21生成并存儲于行緩沖器22的圖像信號D稱為圖像信號DGA,將圖像信號輸出部23從行緩沖器22取得并輸出至顯示部40的圖像信號D稱為圖像信號DGB。并且,將圖像信號DGA中的部分圖像處理部21J生成的圖像信號DGA稱為部分圖像信號DGA-J(DGA-L、DGA-C、DGA-R)。并且,將圖像處理部21存儲于行緩沖器22的圖像信號DGA中的、表示應(yīng)該由顯示區(qū)域AD的第m行的行顯示的圖像的圖像信號DGA稱為圖像信號DGA[m],將圖像信號輸出部23輸出至顯示部40的圖像信號DGB中的、表示應(yīng)該由顯示區(qū)域AD的第m行的行顯示的圖像的圖像信號DGB稱為圖像信號DGB[m]。
圖像信號輸出部23,在從行緩沖器22讀取圖像信號DGB[m]并將該圖像信號DGB[m]輸出至顯示部40的處理完成的情況下,將表示圖像信號DGB[m]向顯示部40的輸出完成的輸出完成信號PtB向定時控制部30輸出。在本實施方式中,輸出完成信號PtB為示出對應(yīng)于圖像信號輸出部23所進(jìn)行的向顯示部40的輸出完成的圖像信號D[m]的行的編號m的信號。以下,將輸出完成信號PtB所示的行的編號m特別地稱為“行編號mb”(mb基本上為滿足0≤mb≤M的自然數(shù))。作為輸出完成信號PtB所示的值的行編號mb是示出對于顯示部40的輸出完成的圖像信號D[m]的行的“顯示輸出行信息”的一例。
詳細(xì)將于后述,有時圖像信號輸出部23對于顯示部40代替輸出圖像信號DGB[m]而輸出無效信號Dmy(參照圖8D)。這種情況下,圖像信號輸出部23不輸出輸出完成信號PtB。
此外,mb在輸出一幀的最終行之后緊接著變?yōu)閙b=M之后維持mb=M。并且,在下一幀用的圖像輸出準(zhǔn)備完成的時間點(垂直同步信號的輸出后的垂直后沿(back porch)期間完成后的定時),mb信號被重置而成為mb=0。
此外,輸出完成信號PtB不限于示出行的編號的信號,也可以為包含在圖像信號輸出部23所進(jìn)行的圖像信號D-J[m]的輸出完成的情況下上升至高電平的脈沖波形的雙值的信號。
如圖5所示,定時控制部30具備:基于寫入完成信號PtA及輸出完成信號PtB生成輸出控制信號CTR(正確為CTR[m])的輸出控制部31、生成各種定時信號并控制圖像信號輸出部23輸出圖像信號D[m](圖像信號DGB[m])的定時的定時生成器32、將規(guī)定控制器41的動作的設(shè)定參數(shù)PRM向控制器41發(fā)送的參數(shù)發(fā)送部33。
輸出控制部31基于寫入完成信號PtA及輸出完成信號PtB,判定圖像信號輸出部23對于顯示部40輸出示出應(yīng)該由顯示區(qū)域AD的第m行顯示的圖像的圖像信號D[m](圖像信號DGB[m])的準(zhǔn)備是否完成,生成示出判定結(jié)果的輸出控制信號CTR(正確為CTR[m])。
在此,所謂“輸出圖像信號D[m](圖像信號DGB[m])的準(zhǔn)備是否完成”是指滿足以下的第一條件及第二條件。
(第一條件)圖像處理部21完成第m行的圖像信號D[m](圖像信號DGA[m])的圖像處理,完成圖像信號DGA[m]向行緩沖器22的寫入。
(第二條件)圖像信號輸出部23完成第m-1行的圖像信號D[m-1](圖像信號DGB[m-1])的輸出。
第一條件示出部分寫入完成信號PtA-J所示的行編號ma-J的最小值ma為行編號m以上的情況。也就是說,第一條件在“m≦ma”的情況下,更具體說在“m≦ma-L”且“m≦ma-C”且“m≦ma-R”的情況下被滿足。
第二條件在輸出完成信號PtB所示的行編號mb在滿足“mb=m-1”的情況下被滿足(嚴(yán)格來講,在“m=1”的情況下,在滿足“mb=0”(“mb=M”后的垂直同步信號輸出后的垂直后沿期間完成后的定時中,mb信號被重置,mb=0)的情況下被滿足)。
在本說明書中,有時將顯示作為輸出控制部31判定的對象的圖像信號D[m]所示的圖像的顯示區(qū)域AD的行稱為“顯示對象行”。
此外,嚴(yán)格來講,圖像信號輸出部23為了輸出圖像信號D[m](圖像信號DGB[m]),需要滿足以下的第三條件。
(第三條件)圖像信號輸出部23輸出第m行的圖像信號D[m](圖像信號DGB[m])的定時包含于顯示區(qū)域AD能夠顯示圖像的期間(圖8中后述的水平有效數(shù)據(jù)期間DHI)。
但是,在滿足上述的第一條件及第二條件的情況下,由于定時生成器32控制來自圖像信號輸出部23的圖像信號D[m](圖像信號DGB[m])的輸出定時,因此第三條件必然被滿足。因此,在本實施方式中,在輸出控制部31中的判定中不考慮第三條件。
以下對于輸出控制部31的控制方法的實現(xiàn)方法進(jìn)行更為詳細(xì)地記載。輸出控制部31例如通過以下的兩個方式能夠執(zhí)行“輸出圖像信號D[m](圖像信號DGB[m])的準(zhǔn)備是否完成”的判定。
作為第一方式,其為輸出控制部31直接地執(zhí)行是否滿足第一條件的判定(第一判定)和是否滿足第二條件的判定(第二判定)這兩個判定的方式。
具體而言,當(dāng)圖像處理部21輸出寫入完成信號PtA時,輸出控制部31根據(jù)寫入完成信號PtA所包含的多個部分寫入完成信號PtA-J所示的行編號ma-J的最小值ma,對于m判定是否滿足“m≤ma”(執(zhí)行第一判定)。并且,當(dāng)圖像信號輸出部23輸出輸出完成信號PtB時,輸出控制部31判定輸出完成信號PtB所示的行編號mb是否滿足“mb=m-1”(執(zhí)行第二判定)。并且,在第一判定的判定結(jié)果和第二判定的判定結(jié)果的雙方為肯定的情況下,輸出控制部31判定為“輸出圖像信號D[m]的準(zhǔn)備完成”。
在第一方式的情況下,輸出控制部31通過執(zhí)行第一判定,作為判定是否生成了對應(yīng)于應(yīng)該由顯示對象行顯示的圖像的圖像信號的“處理狀況判定部”而發(fā)揮作用,通過執(zhí)行第二判定,作為判定是否能夠進(jìn)行顯示對象行中的圖像的顯示的“顯示判定部”而發(fā)揮作用。
此外,輸出控制部31,在第一判定的判定結(jié)果或者第二判定的判定結(jié)果為否定的情況下,重復(fù)第一判定及第二判定直至第一判定的判定結(jié)果和第二判定的判定結(jié)果的雙方變?yōu)榭隙橹埂>唧w而言,輸出控制部31,例如可以在每次從圖像處理部21輸出寫入完成信號PtA時執(zhí)行第一判定,并且,在每次從圖像信號輸出部23輸出輸出完成信號PtB時執(zhí)行第二判定,直至第一判定和第二判定的雙方的判定結(jié)果變?yōu)榭隙橹?。此外,例如,輸出控制?1也可以以后述的水平掃描期間Hd的周期重復(fù)第一判定及第二判定,直至第一判定和第二判定的雙方的判定結(jié)果變?yōu)榭隙橹?。并且,在第一判定的判定結(jié)果和第二判定的判定結(jié)果的雙方變?yōu)榭隙〞r,將輸出控制信號CTR(正確為CTR[m])設(shè)定為示出判定結(jié)果為肯定的值。
下面,作為“輸出圖像信號D[m](圖像信號DGB[m])的準(zhǔn)備是否完成”的判定的第二方式,其為在前次判定(輸出圖像信號D[m-1]的準(zhǔn)備是否完成的判定)的結(jié)果變?yōu)榭隙ㄖ蟮?、圖像信號輸出部23輸出輸出完成信號PtB所示的行編號mb=m-1的定時,輸出控制部31執(zhí)行第一條件是否被滿足的判定(第一判定)的狀態(tài)。
在該方式中,輸出控制部31,在第一判定的判定結(jié)果為否定的情況下,重復(fù)第一判定直至第一判定的判定結(jié)果變?yōu)榭隙橹?,在第一判定的判定結(jié)果變?yōu)榭隙〞r,將輸出控制信號CTR設(shè)定為示出判定結(jié)果為肯定的值(CTR[m])。具體而言,例如在輸出輸出完成信號PtB的定時第一判定的判定結(jié)果為否定的情況下,之后,在圖像處理部21每次輸出寫入完成信號PtA時,輸出控制部31根據(jù)該寫入完成信號PtA所示的行編號ma-J的最小值ma,對于m判定是否滿足“m≤ma”,在滿足“m≤ma”時,判定為第一條件被滿足即可。
如上所述,圖像處理部21按照行編號的順序生成圖像信號D[m](圖像信號DGA[m]),圖像信號輸出部23按照行編號的順序輸出圖像信號D[m](圖像信號DGB[m])。并且,在本實施方式中,在第m-2行的圖像信號D[m-2]的輸出完成,輸出控制部31判定“輸出圖像信號D[m-1]的準(zhǔn)備完成”之后,圖像信號輸出部23輸出圖像信號D[m-1]。因此,輸出控制部31進(jìn)行是否“完成了輸出圖像信號D[m](圖像信號DGB[m])的準(zhǔn)備”的判定的定時,為從圖像信號輸出部23輸出圖像信號D[m-2](圖像信號DGB[m-2])之后的定時,并且為輸出控制部31判定“完成了輸出圖像信號D[m-1](圖像信號DGB[m-1])的準(zhǔn)備”之后的定時。也就是說,在輸出控制部31進(jìn)行是否“完成了輸出圖像信號D[m]的準(zhǔn)備”的第一判定的定時,圖像信號輸出部23輸出的輸出完成信號PtB所示的行編號mb變?yōu)椤癿-1”。
因此,在第二方式中,輸出控制部31憑借輸出完成信號PtB從圖像信號輸出部23的輸出判斷第二條件被滿足。并且,輸出控制部31通過在輸出完成信號PtB從圖像信號輸出部23輸出后的定時中執(zhí)行第一條件是否被滿足的判定(第一判定),進(jìn)行是否“完成了圖像信號D[m](圖像信號DGB[m])的輸出準(zhǔn)備”的判定。
在本實施方式中,以采用上述的兩個方式中的第二方式為前提進(jìn)行以下的說明。
定時生成器32生成顯示垂直同步信號DVsync、垂直有效數(shù)據(jù)信號DVactive、顯示水平同步信號DHsync、顯示點時鐘信號DCLK以及啟動信號DEnb,將生成的上述信號向圖像信號輸出部23以及顯示部40輸出。
圖8A至圖8D為用于說明定時生成器32生成的顯示垂直同步信號DVsync、垂直有效數(shù)據(jù)信號DVactive、顯示水平同步信號DHsync、顯示點時鐘信號DCLK以及啟動信號DEnb的時序圖。
如圖8A及圖8B所示,顯示垂直同步信號DVsync(“顯示同步信號”的一例)為規(guī)定用于通過液晶面板42的顯示區(qū)域AD的整體(M行)的像素顯示圖像的顯示垂直掃描期間(周期)Fd(“顯示同步信號的幀”的一例)的信號。顯示水平同步信號DHsync為規(guī)定為了通過顯示區(qū)域AD的一行的像素顯示圖像的水平掃描期間Hd的信號。顯示點時鐘信號DCLK為規(guī)定用于通過顯示區(qū)域AD的各像素顯示圖像的定時的信號。
在本實施方式中,水平掃描期間Hd具有預(yù)先確定的一定的時長。并且,在本實施方式中,顯示垂直掃描期間Fd由多個水平掃描期間Hd構(gòu)成,具有時間比拍攝垂直掃描期間Fs的時長(周期)短的可變的時長(周期)。也就是說,各顯示垂直掃描期間Fd所包含的水平掃描期間Hd的個數(shù)是可變的。在圖8A所示的示例中例示了在圖8A所示的多個顯示垂直掃描期間Fd之中,最初的顯示垂直掃描期間Fd即顯示垂直掃描期間Fd1,比顯示垂直掃描期間Fd1之后的顯示垂直掃描期間Fd2短,顯示垂直掃描期間Fd2比顯示垂直掃描期間Fd2之后的顯示垂直掃描期間Fd3短的情況。
此外,在顯示垂直同步信號DVsync所具有的波形之中,將規(guī)定顯示垂直掃描期間Fd的開始及結(jié)束的定時的脈沖狀的波形稱為顯示垂直同步脈沖PlsV。此外,在顯示水平同步信號DHsync所具有的波形之中,將規(guī)定水平掃描期間Hd的開始及結(jié)束的定時的脈沖狀的波形稱為顯示水平同步脈沖PlsH。
如圖8B所示,顯示垂直掃描期間Fd由垂直同步期間DVp、垂直后沿期間DVb、垂直有效數(shù)據(jù)期間DVI和垂直前沿期間DVf構(gòu)成。
垂直同步期間DVp為顯示垂直同步信號DVsync有效(在該圖的示例中為低電平)的期間,其為與顯示垂直掃描期間Fd開始的同時開始的具有預(yù)先確定的時長的期間。垂直后沿期間DVb為垂直同步期間DVp之后的期間,其為具有預(yù)先確定的時長的期間。垂直有效數(shù)據(jù)期間DVI為垂直后沿期間DVb之后的、可變時長的期間。在該垂直有效數(shù)據(jù)期間DVI內(nèi),從圖像信號輸出部23輸出圖像信號DGB(圖像信號DGB[1]~DGB[M])。垂直前沿期間DVf為垂直有效數(shù)據(jù)期間DVI之后的期間,其為與顯示垂直掃描期間Fd的結(jié)束同時結(jié)束的具有預(yù)先確定的時長的期間。
垂直有效數(shù)據(jù)期間DVI為在各顯示垂直掃描期間Fd內(nèi)從啟動信號DEnb最初變?yōu)橛行У乃綊呙杵陂gHd開始至啟動信號DEnb第M次變?yōu)橛行У乃綊呙杵陂gHd結(jié)束為止的期間(關(guān)于啟動信號DEnb變?yōu)橛行У那闆r將于后述)。
該垂直有效數(shù)據(jù)期間DVI例如可以基于對于啟動信號DEnb變?yōu)橛行У拇螖?shù)進(jìn)行計數(shù)的計數(shù)器(圖示省略)所輸出的計數(shù)值而確定。不過,在本實施方式中,為了方便說明,引入在各顯示垂直掃描期間Fd內(nèi)從啟動信號DEnb最初變?yōu)橛行У乃綊呙杵陂gHd開始至啟動信號DEnb第M次變?yōu)橛行У乃綊呙杵陂gHd結(jié)束為止的期間內(nèi)變?yōu)橛行?該圖的示例中為高電平)的垂直有效數(shù)據(jù)信號DVactive。也就是說,在本實施方式中,將垂直有效數(shù)據(jù)信號DVactive有效的期間作為垂直有效數(shù)據(jù)期間DVI進(jìn)行說明。此外,該垂直有效數(shù)據(jù)信號DVactive為為了方便說明而引入的信號,輸出控制部31也可以不輸出該垂直有效數(shù)據(jù)信號DVactive。
如圖8C及圖8D所示,水平掃描期間Hd由水平同步期間DHp、水平后沿期間DHb、水平有效數(shù)據(jù)期間DHI和水平前沿期間DHf構(gòu)成。
水平同步期間DHp為顯示水平同步信號DHsync有效(在該圖的示例中為低電平)的期間,其為與水平掃描期間Hd開始的同時開始的具有預(yù)先確定的時長的期間。水平后沿期間DHb為水平同步期間DHp之后的期間,其為具有預(yù)先確定的時長的期間。水平有效數(shù)據(jù)期間DHI為水平后沿期間DHb之后的、具有預(yù)先確定的時長的期間。水平前沿期間DHf為水平有效數(shù)據(jù)期間DHI之后的期間,其為與水平掃描期間Hd的結(jié)束同時結(jié)束的具有預(yù)先確定的時長的期間。
在本實施方式中,水平掃描期間Hd存在圖像信號輸出部23用于輸出圖像信號D[m]的有效水平掃描期間Hd-A(參照圖8C)和代替輸出圖像信號D[m]而輸出無效信號Dmy[m]的無效水平掃描期間Hd-D(參照圖8D)。
圖8C例示了水平掃描期間Hd為有效水平掃描期間Hd-A的情況。如該圖所示,啟動信號DEnb在水平掃描期間Hd為有效水平掃描期間Hd-A的情況下,在水平有效數(shù)據(jù)期間DHI內(nèi)變?yōu)橛行?在該圖的示例中為高電平)。并且,在啟動信號DEnb有效的水平有效數(shù)據(jù)期間DHI內(nèi),從圖像信號輸出部23輸出圖像信號D[m](圖像信號DGB[m])。另一方面,啟動信號DEnb,在有效水平掃描期間Hd-A中的水平有效數(shù)據(jù)期間DHI以外的期間(水平同步期間DHp、水平后沿期間DHb、水平前沿期間DHf)內(nèi)變?yōu)榉怯行?。圖像信號輸出部23,在有效水平掃描期間Hd-A中的、啟動信號DEnb變?yōu)榉怯行У?、水平有效?shù)據(jù)期間DHI以外的期間內(nèi),停止圖像信號D[m](圖像信號DGB[m])的行數(shù)據(jù)向各個像素的輸出,輸出無效行信號DGB-dmy。
上述的第三條件通過定時生成器32在水平有效數(shù)據(jù)期間DHI內(nèi)使啟動信號DEnb為有效而被滿足。也就是說,具備輸出控制部31及定時生成器32的定時控制部30,在上述第一條件~第三條件全部被滿足的定時,從圖像信號輸出部23向各像素輸出有關(guān)對應(yīng)于顯示對象行的圖像信號D[m](圖像信號DGB[m])的行數(shù)據(jù)。
圖8D例示了水平掃描期間Hd為無效水平掃描期間Hd-D的情況。如該圖所示,啟動信號DEnb在水平掃描期間Hd為無效水平掃描期間Hd-D的情況下,在水平有效數(shù)據(jù)期間DHI內(nèi)變?yōu)榉怯行?。并且,圖像信號輸出部23,在無效水平掃描期間Hd-D中的水平有效數(shù)據(jù)期間DHI內(nèi),代替圖像信號D[m](圖像信號DGB[m])而輸出無效信號Dmy。另一方面,啟動信號DEnb,在無效水平掃描期間Hd-D中的水平有效數(shù)據(jù)期間DHI以外的期間(水平同步期間DHp、水平后沿期間DHb、水平前沿期間DHf)內(nèi)也變?yōu)榉怯行АD像信號輸出部23,在無效水平掃描期間Hd-D中的水平有效數(shù)據(jù)期間DHI以外的期間,停止圖像信號D[m](圖像信號DGB[m])的輸出,輸出無效行信號DGB-dmy。
此外,定時生成器32基于輸出控制部31輸出的輸出控制信號CTR,決定使水平掃描期間Hd為有效水平掃描期間Hd-A還是為無效水平掃描期間Hd-D。換言之,定時生成器32基于輸出控制信號CTR決定在水平有效數(shù)據(jù)期間DHI內(nèi)是否使啟動信號DEnb有效。有關(guān)該輸出控制信號CTR、啟動信號DEnb以及水平掃描期間Hd的種類的關(guān)系于后述。
圖9為用于說明定時生成器32所生成的各種信號和液晶面板42的顯示區(qū)域AD中的圖像的顯示定時的關(guān)系的說明圖。
如該圖所示,顯示區(qū)域AD所具有的從第一行的行開始至第M行的行為止的M行×N列的像素,在顯示垂直掃描期間Fd中的垂直有效數(shù)據(jù)信號DVactive有效的垂直有效數(shù)據(jù)期間DVI內(nèi),顯示圖像信號D[1]~D[m]所示的一畫面的圖像。
并且,顯示區(qū)域AD中的構(gòu)成第m行的行的N個像素,在水平掃描期間Hd(有效水平掃描期間Hd-A)中的啟動信號DEnb有效的水平有效數(shù)據(jù)期間DHI內(nèi),顯示圖像信號D[m]示出的行數(shù)據(jù)的各像素的圖像。
此外,垂直有效數(shù)據(jù)期間DVI根據(jù)該垂直有效數(shù)據(jù)期間DVI所包含的無效水平掃描期間Hd-D的個數(shù)而延長,在該圖中,設(shè)定垂直有效數(shù)據(jù)期間DVI所包含的水平掃描期間Hd全部為有效水平掃描期間Hd-A的情況。
圖10為用于說明輸出控制信號CTR和啟動信號DEnb的說明圖。
如上所述,輸出控制部31,在判定圖像信號D[m]的輸出準(zhǔn)備已完成時,也就是說,在第一條件及第二條件被滿足時,對輸出控制信號CTR設(shè)定示出判定結(jié)果為肯定的值CTR[m]。在本實施方式中,方便起見,輸出控制部31,在判定圖像信號D[m]的輸出準(zhǔn)備已完成時,向輸出控制信號CTR輸出臨時上升至高電平的脈沖狀的波形,如圖10所示,將對輸出控制信號CTR設(shè)定的、示出以輸出圖像信號D[m]的準(zhǔn)備已完成為內(nèi)容的判定結(jié)果的輸出脈沖波形稱為輸出許可脈沖PL[m](=CTR[m])。
如上所述,本實施方式涉及的輸出控制部31,憑借從圖像信號輸出部23輸出了輸出完成信號PtB來判斷第二條件被滿足。并且,輸出控制部31通過在輸出了輸出完成信號PtB時執(zhí)行圖像信號D[m]的圖像處理是否完成(第一條件是否被滿足)的判定(第一判定),判定圖像信號D[m]的輸出準(zhǔn)備是否完成。
如圖10所示,輸出控制部31在進(jìn)行圖像信號D[m]的輸出準(zhǔn)備是否完成的判定的情況下,將輸出控制部31判定圖像信號D[m]的圖像處理完成(判定第一條件被滿足)的定時即第一判定的結(jié)果變?yōu)榭隙ǖ亩〞r稱為圖像處理判定時刻TA[m]。
并且,將輸出完成信號PtB被供給至輸出控制部31(判斷第二條件被滿足)的定時稱為顯示準(zhǔn)備判定時刻TB[m]。
此外,以下為了方便說明,將圖像處理部21進(jìn)行的圖像信號D[m]的生成實際完成的時刻定義為圖像信號生成時刻TC[m]。更具體而言,圖像信號生成時刻TC[m]為部分圖像信號D-L[m]、D-C[m]及D-R[m]全部完成生成的時刻,其為左側(cè)圖像用圖像處理部21L使部分圖像信號D-L[m]的生成完成的時刻、中央圖像用圖像處理部21C使部分圖像信號D-C[m]的生成完成的時刻以及右側(cè)圖像用圖像處理部21R使部分圖像信號D-R[m]的生成完成的時刻中的最遲的時刻。此外,該圖像信號生成時刻TC[m]為“圖像信號生成時刻”的一例。
顯示準(zhǔn)備判定時刻TB[m]為與圖像信號D[m-1]從輸出控制部31的輸出完成的時刻大致相同的時刻,為與圖像信號D[m-1]被輸出的有效水平掃描期間Hd-A(稱為有效水平掃描期間Hd-A[m-1])的水平有效數(shù)據(jù)期間DHI結(jié)束的時刻大致相同的時刻。此外,在顯示準(zhǔn)備判定時刻TB[m]之后最初的水平掃描期間Hd[m]的水平有效數(shù)據(jù)期間DHI開始的時刻為“能夠顯示時刻”的一例。
此外,在本說明書中,所謂“大致相同的時刻”是指,包含在存在起因于信號的發(fā)送或接收的時滯或者起因于各種處理的時滯的情況下,在忽視上述時滯時能夠視為同一時刻的情況的概念。
圖像處理判定時刻TA[m],在顯示準(zhǔn)備判定時刻TB[m]以前完成圖像信號D[m](圖像信號DGA[m])的生成的情況下,即在顯示準(zhǔn)備判定時刻TB[m]以前經(jīng)過了圖像信號生成時刻TC[m]的情況下(稱為情況1),與顯示準(zhǔn)備判定時刻TB[m]為大致相同的時刻。
此外,在情況1時,在顯示準(zhǔn)備判定時刻TB[m]的定時(=視為第二條件被滿足的定時),輸出控制部31,根據(jù)在該顯示準(zhǔn)備判定時刻TB[m]以前被供給至輸出控制部31的寫入完成信號PtA示出的行編號ma-J的最小值ma對于m進(jìn)行以“m≤ma”為內(nèi)容的判定,由于進(jìn)行了該判定的定時為圖像處理判定時刻TA[m],因此,盡管實際上在圖像處理判定時刻TA[m]及顯示準(zhǔn)備判定時刻TB[m]之間存在時滯,但以下為了簡單起見將兩時刻視為大致相同。
另一方面,關(guān)于圖像處理判定時刻TA[m],在顯示準(zhǔn)備判定時刻TB[m]以前未完成圖像信號D[m](圖像信號DGA[m])的生成的情況下(即,在顯示準(zhǔn)備判定時刻TB[m]以前圖像信號生成時刻TC[m]未到來的情況(稱為情況2)),其為圖像處理部21使圖像信號D[m]的生成完成的時刻(即,與圖像信號生成時刻TC[m]大致相同的時刻)。
此外,在情況2時,圖像處理部21在圖像信號生成時刻TC[m]使圖像信號D[m]的生成完成之后,圖像處理部21輸出對應(yīng)于最小值ma的部分寫入完成信號PtA-J,接受該部分寫入完成信號PtA-J的供給的輸出控制部31以滿足“m≤ma”為內(nèi)容的判定的定時為圖像處理判定時刻TA[m],因此,盡管實際上在圖像處理判定時刻TA[m]及圖像信號生成時刻TC[m]之間存在時滯,但以下為了簡單起見將兩時刻視為大致相同。
如此,由于存在情況1和情況2的情況,將兩種情況匯總來說,輸出控制部31,在圖像信號生成時刻TC[m]及顯示準(zhǔn)備判定時刻TB[m]中的較晚的時刻(即,該時刻為圖像處理判定時刻TA[m]),對于輸出控制信號CTR設(shè)定輸出許可脈沖PL[m]。也就是說,該輸出許可脈沖PL[m],在關(guān)于圖像信號D[m]的第一條件及第二條件被滿足時被輸出。并且,定時生成器32進(jìn)行如下控制:在輸出許可脈沖PL[m]被輸出后的第三條件被滿足時,換言之,在輸出許可脈沖PL[m]被輸出后的啟動信號DEnb最初變?yōu)橛行r,從圖像信號輸出部23輸出圖像信號D[m]。
以下為了方便說明,關(guān)于圖像信號D[m],將第一條件~第三條件全部被滿足的時刻稱為輸出條件滿足時刻TZ[m]。
在本實施方式中,定時生成器32基于輸出控制信號CTR決定為了在定時生成器32的內(nèi)部處理中使用的內(nèi)部處理信號IS的電平。并且,定時生成器32基于內(nèi)部處理信號IS決定使啟動信號DEnb為有效的定時以及水平掃描期間Hd的類別(有效水平掃描期間Hd-A或者無效水平掃描期間Hd-D)。
具體而言,如圖10所示,定時生成器32當(dāng)對于輸出控制信號CTR設(shè)定輸出許可脈沖PL[m]時,使內(nèi)部處理信號IS為有效(在該圖示例中為高電平)。
定時生成器32,當(dāng)在水平掃描期間Hd開始的定時中內(nèi)部處理信號IS為有效時,將該水平掃描期間Hd的類別決定(分類)為有效水平掃描期間Hd-A[m],在該有效水平掃描期間Hd-A[m]的水平有效數(shù)據(jù)期間DHI開始的定時,使啟動信號DEnb為有效。該啟動信號DEnb變?yōu)橛行У亩〞r相當(dāng)于輸出條件滿足時刻TZ[m]。
并且,定時生成器32,在該有效水平掃描期間Hd-A[m]的水平有效數(shù)據(jù)期間DHI開始、啟動信號DEnb變?yōu)橛行У亩〞r,即輸出條件滿足時刻TZ[m],使內(nèi)部處理信號IS為非有效。
另一方面,在水平掃描期間Hd開始的定時中內(nèi)部處理信號IS為非有效的情況下,將該水平掃描期間Hd的類別決定(分類)為無效水平掃描期間Hd-D,該無效水平掃描期間Hd-D的期間使啟動信號DEnb為非有效。
在此,在圖10所示的示例中,在顯示準(zhǔn)備判定時刻TB[1]以前,PtB信號的mb從輸出一幀的最終行之后便維持mb=M。并且,在垂直同步信號的輸出后的垂直后沿期間完成后的某個時間點,能夠進(jìn)行下一幀的數(shù)據(jù)輸出。因此,在顯示準(zhǔn)備判定時刻TB[1]的時間點,mb信號被重置,變?yōu)閙b=0(情況0)。情況0為開始顯示一幀的最初的第一行的特殊的定時,在一幀中僅存在一次。并且,其結(jié)果是,水平掃描期間Hd[2]的水平有效數(shù)據(jù)期間DHI開始。
接著,記載第二行之后的示例。以下,在圖10所示的示例中,說明輸出控制部31進(jìn)行圖像信號D[2]的輸出準(zhǔn)備是否完成的判定,對于輸出控制信號CTR設(shè)定輸出許可脈沖PL[2]的情況(相當(dāng)于情況1)。
在圖10所示的示例中,顯示準(zhǔn)備判定時刻TB[2]為圖像信號D[1]的輸出完成的水平掃描期間Hd[1](有效水平掃描期間Hd-A[1])的水平有效數(shù)據(jù)期間DHI結(jié)束時。并且,在該示例中,設(shè)定圖像信號D[2]的圖像處理完成的圖像信號生成時刻TC[2]在顯示準(zhǔn)備判定時刻TB[2]以前到來。因此,在該示例中,圖像處理判定時刻TA[2]與顯示準(zhǔn)備判定時刻TB[2]為大致相同的時刻。因此,輸出控制部31在水平掃描期間Hd[1]的水平有效數(shù)據(jù)期間DHI結(jié)束時即顯示準(zhǔn)備判定時刻TB[2]時,輸出輸出許可脈沖PL[2]作為輸出控制信號CTR。
定時生成器32,在輸出輸出許可脈沖PL[2]作為輸出控制信號CTR的定時即水平掃描期間Hd[1]的水平有效數(shù)據(jù)期間DHI結(jié)束的定時,使內(nèi)部處理信號IS為有效。這種情況下,內(nèi)部處理信號IS在水平掃描期間Hd[2]的開始時變?yōu)橛行?。在此,定時生成器32在水平掃描期間的開始定時(DHsync脈沖)基于內(nèi)部處理信號IS的狀態(tài)進(jìn)行使該水平掃描期間為有效水平掃描期間Hd-A[m]還是為無效水平掃描期間Hd-D的判斷。上述情況下,內(nèi)部處理信號IS為有效。因此,定時生成器32使水平掃描期間Hd[2]為有效水平掃描期間Hd-A[2],在水平掃描期間Hd[2]的水平有效數(shù)據(jù)期間DHI使啟動信號DEnb為有效。
也就是說,水平掃描期間Hd[2]的水平有效數(shù)據(jù)期間DHI的開始時刻為關(guān)于圖像信號D[2]的第一條件~第三條件的全部被滿足的輸出條件滿足時刻TZ[2]。因此,在水平掃描期間Hd[2],輸出圖像信號D[2]。并且,定時生成器32在水平掃描期間Hd[2]的水平有效數(shù)據(jù)期間DHI開始的定時,使內(nèi)部處理信號IS為非有效。
接著,在圖10的示例中,說明輸出控制部31進(jìn)行圖像信號D[3]的輸出準(zhǔn)備是否完成的判定,對于輸出控制信號CTR設(shè)定輸出許可脈沖PL[3]的情況(相當(dāng)于情況2)。
在圖10所示的示例中,顯示準(zhǔn)備判定時刻TB[3]為圖像信號D[2]的輸出完成的水平掃描期間Hd[2](有效水平掃描期間Hd-A[2])的水平有效數(shù)據(jù)期間DHI結(jié)束時。并且,在該示例中,設(shè)定圖像信號D[3]的圖像處理完成的圖像信號生成時刻TC[3]在顯示準(zhǔn)備判定時刻TB[3]之后到來的情況。因此,在該示例中,圖像處理判定時刻TA[3]為顯示準(zhǔn)備判定時刻TB[3]之后的時刻。并且,在該示例中,設(shè)定圖像信號生成時刻TC[3]在水平掃描期間Hd[3]的開始時之后的情況。因此,輸出控制部31,在水平掃描期間Hd[3]的開始時之后的時刻,輸出輸出許可脈沖PL[3]。
如上所述,定時生成器32在水平掃描期間Hd[2]的水平有效數(shù)據(jù)期間DHI的開始時使內(nèi)部處理信號IS為非有效。因此,內(nèi)部處理信號IS在水平掃描期間Hd[3]的開始時變?yōu)榉怯行?。因此,在水平掃描期間的開始定時(DHsync脈沖),由于內(nèi)部處理信號IS的狀態(tài)為非有效,因此,定時生成器32將水平掃描期間Hd[3]分類為無效水平掃描期間Hd-D,在水平掃描期間Hd[3]的水平有效數(shù)據(jù)期間DHI,使啟動信號DEnb為非有效。這種情況下,圖像信號輸出部23在水平掃描期間Hd[3]的水平有效數(shù)據(jù)期間DHI不輸出圖像信號D[3]而輸出無效信號Dmy。
之后,定時生成器32在輸出輸出許可脈沖PL[3]作為輸出控制信號CTR的定時,使內(nèi)部處理信號IS為有效。在該示例中,輸出輸出許可脈沖PL[3]的定時為水平掃描期間Hd[4]開始前。這種情況下,內(nèi)部處理信號IS,在水平掃描期間Hd[4]的開始時(DHsync脈沖)也為有效。因此,定時生成器32使水平掃描期間Hd[4]為有效水平掃描期間Hd-A[3],在水平掃描期間Hd[4]的水平有效數(shù)據(jù)期間DHI使啟動信號DEnb為有效。
也就是說,水平掃描期間Hd[4]的水平有效數(shù)據(jù)期間DHI的開始時刻為關(guān)于圖像信號D[3]的第一條件~第三條件的全部被滿足的輸出條件滿足時刻TZ[3]。因此,在水平掃描期間Hd[4],輸出圖像信號D[3]。
此外,在該圖所示的示例中,關(guān)于輸出控制部31進(jìn)行圖像信號D[1]的輸出準(zhǔn)備是否完成的判定并對于輸出控制信號CTR設(shè)定輸出許可脈沖PL[1]的情況,以及進(jìn)行圖像信號D[1]的輸出準(zhǔn)備是否完成的判定并對于輸出控制信號CTR設(shè)定輸出許可脈沖PL[1]的情況(情況0),設(shè)定為作為情況1的條件的情況。
這樣,在本實施方式中,輸出控制部31,在第一條件及第二條件被滿足時,輸出輸出許可脈沖PL[m],使內(nèi)部處理信號IS的狀態(tài)為有效,在水平掃描期間開始時(DHsync脈沖)決定使其成為有效水平掃描期間Hd-A[m]還是無效水平掃描期間Hd-D[m]。在決定為有效水平掃描期間的情況下,圖像信號輸出部23,在輸出輸出許可脈沖PL[m]之后的最初的水平掃描期間Hd內(nèi),進(jìn)行輸出圖像信號D[m]的動作。通過這種動作,由圖像處理部21進(jìn)行的行單位D[m]的圖像處理結(jié)果從圖像信號輸出部23的圖像信號D[m]的輸出定時,以水平掃描期間Hd的單位的精度被進(jìn)行輸出調(diào)整。
此外,在圖10所示的示例中,定時生成器32在開始水平掃描期間Hd的定時決定水平掃描期間Hd的類別,但其不過為一例而已,也可以例如在從輸出輸出許可脈沖PL[m]的水平掃描期間Hd的水平前沿期間DHf開始至輸出輸出許可脈沖PL[m]之后的最初的水平掃描期間Hd的水平后沿期間DHb結(jié)束的期間決定。
此外,在圖10所示的示例中,使內(nèi)部處理信號IS為非有效的定時為啟動信號DEnb變?yōu)橛行У亩〞r,但其不過為一例而已,定時生成器32使內(nèi)部處理信號IS為非有效的定時,只要在從啟動信號DEnb變?yōu)橛行ч_始至變?yōu)榉怯行橹沟乃接行?shù)據(jù)期間DHI的期間內(nèi),可以為任何時刻。
此外,在本實施方式中,定時生成器32使用內(nèi)部處理信號IS決定啟動信號DEnb的波形和水平掃描期間Hd的類別,但其不過為一例而已,也可以不使用內(nèi)部處理信號IS而基于輸出控制信號CTR決定上述內(nèi)容。
此外,在本實施方式中,輸出控制信號CTR為包含輸出許可脈沖PL[m]的波形,但其不過為一例而已,輸出控制信號CTR也可以例如具有圖10所示的內(nèi)部處理信號IS的波形。這種情況下,定時生成器32將輸出控制部31為了進(jìn)行輸出控制信號CTR的波形的決定所必要的啟動信號DEnb等的各種信號供給至輸出控制部31即可。
圖11A及圖11B為用于說明有效水平掃描期間Hd-A及無效水平掃描期間Hd-D和顯示垂直掃描期間Fd的關(guān)系的說明圖。
顯示垂直掃描期間Fd為輸出對應(yīng)于M行的行的圖像信號D[1]~D[M]的期間。因此,定時生成器32在各顯示垂直掃描期間Fd的垂直有效數(shù)據(jù)期間DVI內(nèi)設(shè)置M個有效水平掃描期間Hd-A。
另一方面,本實施方式涉及的定時生成器32,將水平掃描期間Hd分類為有效水平掃描期間Hd-A或者無效水平掃描期間Hd-D中的某一個。并且,僅在水平掃描期間Hd為有效水平掃描期間Hd-A的情況下,在該水平掃描期間Hd輸出圖像信號D[m]。
因此,本實施方式涉及的定時生成器32,當(dāng)在顯示垂直掃描期間Fd的垂直有效數(shù)據(jù)期間DVI內(nèi)設(shè)置無效水平掃描期間Hd-D的情況下,以相當(dāng)于該無效水平掃描期間Hd-D的時長延長垂直有效數(shù)據(jù)期間DVI,以在各顯示垂直掃描期間Fd的垂直有效數(shù)據(jù)期間DVI內(nèi)設(shè)置M個有效水平掃描期間Hd-A的方式,輸出顯示垂直同步信號DVsync及垂直有效數(shù)據(jù)信號DVactive。
例如,定時生成器32,如圖11A所示的顯示垂直掃描期間Fd1所示,使垂直有效數(shù)據(jù)期間DVI的全部的水平掃描期間Hd為有效水平掃描期間Hd-A的情況下,使垂直有效數(shù)據(jù)期間DVI的時長為水平掃描期間Hd的M倍的時長。在此,將顯示垂直掃描期間Fd1中的除了垂直同步前沿期間(DVf)和垂直同步期間(DVp)和垂直同步后沿期間(DVb)之外的期間即DVI稱為垂直有效數(shù)據(jù)期間DVI、DVactive=H的期間。
另一方面,定時生成器32,如圖11B所示的顯示垂直掃描期間Fd2所示,在垂直有效數(shù)據(jù)期間DVI內(nèi)設(shè)置一個或者多個無效水平掃描期間Hd-D的情況下,垂直有效數(shù)據(jù)期間DVI的時長(DVactive=H的期間)為將水平掃描期間Hd的M倍的時長和存在于垂直有效數(shù)據(jù)期間DVI內(nèi)的一個或者多個無效水平掃描期間Hd-D的合計的時長相加得到的時長。
也就是說,定時生成器32,通過以水平掃描期間Hd的單位調(diào)整顯示垂直掃描期間Fd的時長,圖像信號輸出部23能夠在各顯示垂直掃描期間Fd內(nèi)輸出圖像信號D[1]~D[M]。
此外,如圖11A所示的顯示垂直掃描期間Fd1所示,將在垂直有效數(shù)據(jù)期間DVI的全部的水平掃描期間Hd為有效水平掃描期間Hd-A的情況下的顯示垂直掃描期間Fd的時長稱為標(biāo)準(zhǔn)垂直掃描時間Td。并且,有時將顯示部40所能夠顯示的最高的幀率即顯示垂直掃描期間Fd的時長為標(biāo)準(zhǔn)垂直掃描時間Td的情況下的幀率即“1/Td”稱為“第二幀率”。并且,有時將定時控制部30所執(zhí)行的定時的控制中的、以通過第二幀率輸出圖像信號D的方式進(jìn)行的定時控制,稱為“第一定時控制”。
此外,如圖11B所示的顯示垂直掃描期間Fd2所示,將在垂直有效數(shù)據(jù)期間DVI內(nèi)設(shè)置一個或者多個無效水平掃描期間Hd-D的情況下的、該一個或者多個無效水平掃描期間Hd-D的時長的合計值稱為延長垂直掃描時間Tex。也就是說,在垂直有效數(shù)據(jù)期間DVI內(nèi)設(shè)置一個或者多個無效水平掃描期間Hd-D的情況下的顯示垂直掃描期間Fd的時長為標(biāo)準(zhǔn)垂直掃描時間Td和延長垂直掃描時間Tex的合計值。此外,有時將定時控制部30所執(zhí)行的定時的控制中的、以在設(shè)置有一個或者多個無效水平掃描期間Hd-D的垂直有效數(shù)據(jù)期間DVI內(nèi)輸出圖像信號D的方式進(jìn)行的定時控制,稱為“第二定時控制”。詳細(xì)將于后述,在第二定時控制中,定時控制部30以通過第一幀率輸出圖像信號D的方式控制定時。
下面,參照圖12對于顯示部40進(jìn)行說明。
圖12為示出顯示部40的構(gòu)成的框圖。如上所述,顯示部40具備:控制液晶面板42的動作的控制器41、用于顯示對應(yīng)于圖像信號D的圖像的液晶面板42。
如上所述,在液晶面板42上設(shè)置有用于顯示對應(yīng)于圖像信號D的圖像的顯示區(qū)域AD。顯示區(qū)域AD構(gòu)成為包括在圖9上沿橫方向延伸的M行的掃描線、沿縱方向延伸的N列的數(shù)據(jù)線和對應(yīng)于掃描線及數(shù)據(jù)線的交叉而設(shè)置的M行×N列的像素。并且,液晶面板42具備:用于選擇掃描線的掃描線驅(qū)動電路421和用于驅(qū)動數(shù)據(jù)線的數(shù)據(jù)線驅(qū)動電路422。
控制器41具備:從圖像信號輸出部23輸入圖像信號D(圖像信號DGB)的數(shù)據(jù)輸入部411、在各垂直有效數(shù)據(jù)期間DVI內(nèi)對有效水平掃描期間Hd-A的個數(shù)(啟動信號DEnb變?yōu)橛行У拇螖?shù))進(jìn)行計數(shù)的計數(shù)器412、生成規(guī)定液晶面板42的驅(qū)動定時的各種定時信號的定時生成部413、對液晶面板42輸出圖像信號D(圖像信號DGC)的數(shù)據(jù)輸出部414、用于存儲規(guī)定控制器41的動作的設(shè)定參數(shù)PRM的寄存器415。
此外,在本實施方式中,圖像處理電路100(圖像信號生成部20及定時控制部30)和控制器41之間的數(shù)據(jù)傳輸,通過低電壓差動(LVDS)的串行接口(圖示省略)進(jìn)行。因此,與通過并行接口進(jìn)行圖像處理電路100及控制器41之間的數(shù)據(jù)傳輸?shù)那闆r相比較,能夠進(jìn)行高速的數(shù)據(jù)傳送。
在寄存器415中設(shè)定的設(shè)定參數(shù)PRM為用于對應(yīng)于液晶面板42的規(guī)格而使控制器41動作的、規(guī)定控制器41的動作的值。
作為設(shè)定參數(shù)PRM例如可以包含:水平掃描期間Hd的時長(或者,水平掃描期間Hd所包含的顯示點時鐘信號DCLK的時鐘數(shù)。以下將顯示點時鐘信號DCLK的時鐘數(shù)簡單稱為“時鐘數(shù)”)、水平有效數(shù)據(jù)期間DHI的時長(或者,顯示區(qū)域AD中的X軸方向的像素數(shù)(N))、水平同步期間DHp的時長(或者時鐘數(shù))、水平后沿期間DHb的時長(或者時鐘數(shù))、水平前沿期間DHf的時長(或者時鐘數(shù))、垂直有效數(shù)據(jù)期間DVI內(nèi)不包含無效水平掃描期間Hd-D的情況下的垂直有效數(shù)據(jù)期間DVI的時長(或者,顯示區(qū)域AD中的縱方向的行數(shù)(M)。即,垂直有效數(shù)據(jù)期間DVI內(nèi)包含的有效水平掃描期間Hd-A的個數(shù))、垂直同步期間DVp的時長(或者時鐘數(shù))、垂直后沿期間DVb的時長(或者時鐘數(shù))、垂直前沿期間DVf的時長(或者時鐘數(shù))等。
在本實施方式涉及的車輛用拍攝顯示裝置1中,由于能夠從圖像處理電路100設(shè)定對應(yīng)于液晶面板42的規(guī)格的控制器41的動作定時,因此,即使在變更液晶面板42的尺寸或變更幀率等的液晶面板42的規(guī)格的情況下,也沒有變更控制器41的必要。因此,能夠提高系統(tǒng)的通用性。
從圖像處理電路100向數(shù)據(jù)輸入部411供給顯示點時鐘信號DCLK、包含圖像信號D(圖像信號DGB)及無效信號Dmy的來自圖像信號輸出部23的輸出信號和啟動信號DEnb。
數(shù)據(jù)輸入部411,當(dāng)啟動信號DEnb變?yōu)橛行r,在該啟動信號DEnb有效期間與顯示點時鐘信號DCLK同步地取入從圖像信號輸出部23供給的一行的圖像信號D[m],將取入的圖像信號D[m]向數(shù)據(jù)輸出部414輸出。另一方面,數(shù)據(jù)輸入部411,在啟動信號DEnb為非有效的情況下,不取入從圖像信號輸出部23供給的無效信號Dmy而廢棄。
從圖像處理電路100向計數(shù)器412供給啟動信號DEnb和顯示垂直同步信號DVsync。計數(shù)器412對于啟動信號DEnb的上升邊緣進(jìn)行計數(shù)并將示出計數(shù)結(jié)果的計數(shù)值Cnt向定時生成部413輸出。并且,當(dāng)顯示垂直同步信號DVsync變?yōu)橛行?、顯示垂直同步脈沖PlsV作為顯示垂直同步信號DVsync被供給時,計數(shù)器412將計數(shù)值Cnt重置為“0”。因此,計數(shù)器412能夠?qū)τ诟黠@示垂直掃描期間Fd所包含的有效水平掃描期間Hd-A的個數(shù)進(jìn)行計數(shù)。也就是說,計數(shù)值Cnt在數(shù)據(jù)輸入部411取入指定應(yīng)該由第m行的行顯示的圖像的圖像信號D[m]的情況下,示出對應(yīng)于該圖像信號D[m]的行編號(m)。
從圖像處理電路100向定時生成部413供給顯示垂直同步信號DVsync和顯示水平同步信號DHsync和設(shè)定參數(shù)PRM,并且,從計數(shù)器412供給計數(shù)值Cnt。如上所述,當(dāng)從圖像處理電路100供給設(shè)定參數(shù)PRM時,定時生成部413在寄存器415中設(shè)定被供給的設(shè)定參數(shù)PRM。
在計數(shù)值Cnt示出“m”的情況下,定時生成部413使掃描線驅(qū)動電路421進(jìn)行對應(yīng)于計數(shù)值Cnt的第m行的行(掃描線)的選擇。并且,在計數(shù)值Cnt示出“m”的情況下,定時生成部413使數(shù)據(jù)輸出部414向數(shù)據(jù)線驅(qū)動電路422供給數(shù)據(jù)輸入部411所取入的一行的圖像信號D[m]作為圖像信號DGC[m]。這種情況下,數(shù)據(jù)線驅(qū)動電路422對于對應(yīng)于掃描線驅(qū)動電路421所選擇的第m行的掃描線而設(shè)置的N個像素(第m行的行的像素),經(jīng)由數(shù)據(jù)線寫入從數(shù)據(jù)輸出部414供給的圖像信號DGC[m]。從而,使被選擇的行的圖像顯示于顯示區(qū)域AD。此外,在本實施方式中,圖像信號DGA及DGB為數(shù)字的信號,但圖像信號DGC既可以為數(shù)字的信號也可以為模擬的信號。
如此,控制器41能夠使從圖像信號輸出部23供給的圖像信號D所示的圖像顯示于液晶面板42的顯示區(qū)域AD。
此外,控制器41,當(dāng)檢出計數(shù)值Cnt變?yōu)榕c對寄存器415設(shè)定的顯示區(qū)域AD的行數(shù)“M”相等時,在檢出后的最初供給顯示水平同步信號DHsync的定時即垂直前沿期間DVf開始的定時,進(jìn)入改幀處理的準(zhǔn)備。并且,在垂直前沿期間DVf開始之后,定時生成部413對于數(shù)據(jù)輸入部411及數(shù)據(jù)輸出部414輸出用于指示改幀處理的執(zhí)行的改幀處理開始信號Cng。
在此,所謂改幀處理是指在下一個顯示垂直掃描期間Fd用于顯示圖像的準(zhǔn)備的處理,例如,包含執(zhí)行存儲于數(shù)據(jù)輸入部411及數(shù)據(jù)輸出部414所具備的緩存中的數(shù)據(jù)的擦去處理等。改幀處理在垂直前沿期間DVf開始以后開始。并且,改幀處理優(yōu)選在垂直前沿期間DVf結(jié)束以前結(jié)束。
<2.圖像處理>
下面,參照圖13至圖19,對于圖像處理部21所具備的各部分圖像處理部21J的詳細(xì)情況和由各部分圖像處理部21J執(zhí)行的圖像處理進(jìn)行說明。
圖13為示出各部分圖像處理部21J(21L、21C、21R)的結(jié)構(gòu)的框圖。
如該圖所示,部分圖像處理部21J具備:臨時存儲從圖像傳感器12J輸出的拍攝信號DS-J的行緩存211J(211L、211C、211R)、對于存儲于行緩存211J的拍攝信號DS-J進(jìn)行插值處理的像素插值處理部212J(212L、212C、212R)、對于被插值的拍攝信號DS-J進(jìn)行色彩再現(xiàn)處理的色彩再現(xiàn)處理部213J(213L、213C、213R)、對于被色彩再現(xiàn)的拍攝信號DS-J進(jìn)行過濾處理的過濾處理部214J(214L、214C、214R)、對于被過濾處理的拍攝信號DS-J實施圖像灰度校正的圖像灰度校正部215J(215L、215C、215R)、臨時存儲被圖像灰度校正的拍攝信號DS-J的行緩存216J(216L、216C、216R)、進(jìn)行將存儲于行緩存216J的拍攝信號DS-J轉(zhuǎn)換為顯示區(qū)域AD-J所具備的像素數(shù)的部分圖像信號DRS-J(DRS-L、DRS-C、DRS-R)的調(diào)整尺寸處理的調(diào)整尺寸處理部217J(217L、217C、217R)、通過對于部分圖像信號DRS-J實施修整對應(yīng)于部分圖像信號DRS-J中的駕駛者指定的位置的區(qū)域的修整處理而生成部分圖像信號DT-J(DT-L、DT-C、DT-R)的修整處理部218J(218L、218C、218R)。
此外,駕駛者能夠使用操作部60輸入指定修整的位置的指示。
如上所述,拍攝信號DS所包含的拍攝信號DS-J所示的圖像的像素數(shù)和圖像信號D所包含的部分圖像信號D-J所示的圖像的像素數(shù)(顯示區(qū)域AD中的顯示區(qū)域AD-J的像素數(shù))不同。因此,通過調(diào)整尺寸處理部217J執(zhí)行將拍攝信號DS-J轉(zhuǎn)換為對應(yīng)于顯示區(qū)域AD-J的像素數(shù)的部分圖像信號DRS-J的調(diào)整尺寸處理。
不過,拍攝信號DS-J所示的圖像有時存在具有起因于對應(yīng)于圖像傳感器12J而設(shè)置的拍攝光學(xué)系統(tǒng)所具備的透鏡的光學(xué)特性的畸變的情況。具體而言,示出拍攝被拍攝體時的拍攝結(jié)果的圖像有時具有與在顯示區(qū)域AD-J中原本應(yīng)該顯示的圖像相比向外側(cè)膨脹的桶形畸變,或者與原本應(yīng)該顯示的圖像相比向內(nèi)側(cè)收縮的枕形畸變。因此,通過調(diào)整尺寸處理部217J在調(diào)整尺寸處理中執(zhí)行校正桶形畸變或枕形畸變等的畸變的畸變校正處理。
圖14為用于說明調(diào)整尺寸處理部217J執(zhí)行的畸變校正處理的說明圖。以下參照圖14對于在調(diào)整尺寸處理中執(zhí)行的畸變校正處理進(jìn)行說明。此外,在圖14中,設(shè)定拍攝信號DS-J所示的圖像的行數(shù)PJ為16行(PJ=16)、部分圖像信號D-J(以及部分圖像信號DRS-J)所示的圖像的行數(shù)為12行(M=12)的情況。
以下,將拍攝信號DS-J中的、應(yīng)該示出由第pJ行的行顯示的圖像的一行的拍攝信號DS-J標(biāo)記為拍攝信號DS-J[pJ](pJ為滿足1≤pJ≤PJ的自然數(shù))。并且,以下將部分圖像信號DRS-J中的、第m行的一行的部分圖像信號DRS-J標(biāo)記為部分圖像信號DRS-J[m]。
在圖14中,以符號Pc1表示在產(chǎn)生桶形畸變時拍攝信號DS-J所示的圖像,以符號Pc2表示基于示出圖像Pc1的拍攝信號DS-J的拍攝被拍攝體時部分圖像信號DRS-J所示的圖像;以符號Pc3表示在產(chǎn)生枕形畸變時拍攝信號DS-J所示的圖像,以符號Pc4表示基于示出圖像Pc3的拍攝信號DS-J的拍攝被拍攝體時部分圖像信號DRS-J所示的圖像。
圖像Pc1,(在假定不進(jìn)行后述的修整處理、水平方向縮小/放大處理、垂直方向縮小/放大處理的情況下)盡管應(yīng)該顯示于顯示區(qū)域AD-J的圖像為四邊形SQ,但拍攝信號DS-J為示出四邊形SQ由于桶形畸變而膨脹的閉合曲線CV1的情況下的該拍攝信號DS-J所示的信號。并且,圖像Pc3,(在假定不進(jìn)行后述的修整處理、水平方向縮小/放大處理、垂直方向縮小/放大處理的情況下)盡管應(yīng)該顯示于顯示區(qū)域AD-J的圖像為四邊形SQ,但拍攝信號DS-J為示出四邊形SQ由于枕形畸變而收縮的閉合曲線CV2的情況下的該拍攝信號DS-J所示的信號。
調(diào)整尺寸處理部217J,在產(chǎn)生桶形畸變的情況下,在畸變校正處理中,將示出閉合曲線CV1的圖像Pc1校正為示出四邊形SQ的圖像Pc2。同樣地,調(diào)整尺寸處理部217J,在產(chǎn)生桶形畸變的情況下,在畸變校正處理中,將示出閉合曲線CV2的圖像Pc3校正為示出四邊形SQ的圖像Pc4。
上述情況下,調(diào)整尺寸處理部217J,將校正前的圖像中的像素和校正后的圖像中的像素相關(guān)聯(lián),以對應(yīng)于校正后的像素的校正前的像素為中心像素,基于由包含中心像素和其周邊的像素即周邊像素的參照區(qū)域內(nèi)的像素的各個顯示的灰階,決定校正后的像素應(yīng)該顯示的灰階。
例如,調(diào)整尺寸處理部217J,在決定構(gòu)成圖像Pc2或者圖像Pc4的校正后的像素PxS1的灰階的情況下,將構(gòu)成圖像Pc1或者圖像Pc3的校正前的像素PxC1確定為中心像素。并且,調(diào)整尺寸處理部217J,基于應(yīng)該由包含中心像素即像素PxC1的參照區(qū)域“區(qū)域1”內(nèi)的各像素顯示的灰階,確定應(yīng)該由像素PxS1顯示的灰階。
同樣地,調(diào)整尺寸處理部217J,在決定構(gòu)成圖像Pc2或者圖像Pc4的校正后的像素PxS2的灰階的情況下,將構(gòu)成圖像Pc1或者圖像Pc3的校正前的像素PxC2確定為中心像素。并且,調(diào)整尺寸處理部217J,基于應(yīng)該由包含中心像素即像素PxC2的參照區(qū)域“區(qū)域2”內(nèi)的各像素顯示的灰階,確定應(yīng)該由像素PxS2顯示的灰階。
此外,在圖像Pc2以及圖像Pc4中付與深色剖面線的像素示出部分圖像信號D-J中的位于第1行、第7行以及第12行的校正后的像素,在圖像Pc1以及圖像Pc3中付與深色剖面線的像素示出對應(yīng)于校正后的像素的各個的校正前的像素(中心像素),在圖像Pc1以及圖像Pc3中付與淺色剖面線的像素示出對應(yīng)于中心像素的各個的周邊像素。
如圖14所示的示例所明示的,產(chǎn)生桶形畸變時的圖像的膨脹的程度根據(jù)畫面的行的位置而變動,畫面中的縱方向的位置越接近端部,圖像的膨脹的程度變得越大。并且,產(chǎn)生枕形畸變時的圖像的收縮的程度根據(jù)畫面的行的位置而變動,畫面中的縱方向的位置越接近端部,圖像的收縮的程度變得越大。
因此,調(diào)整尺寸處理部217J生成部分圖像信號DRS-J[m]時所必要的拍攝信號DS-J的行數(shù)由于對應(yīng)于部分圖像信號D-J[m]的行的位置(m的值)而變動。因此,調(diào)整尺寸處理部217J的調(diào)整尺寸處理所需要的時長由于行的位置而變動。
例如,在圖14所示的示例中,調(diào)整尺寸處理部217J為了生成對應(yīng)于第1行的行的部分圖像信號DRS-J[1],需要對應(yīng)于第1行~第5行的行的拍攝信號DS-J[1]~DS-J[5]。與此對比,調(diào)整尺寸處理部217J為了生成對應(yīng)于第7行的行的部分圖像信號DRS-J[7],需要對應(yīng)于第8行~第10行的行的拍攝信號DS-J[8]~DS-J[10]。也就是說,調(diào)整尺寸處理部217J為了生成部分圖像信號DRS-J[1]所需要的時長比為了生成部分圖像信號DRS-J[7]所需要的時長更長。
不過,就現(xiàn)有的側(cè)方后視鏡而言,駕駛者能夠通過設(shè)置于駕駛席旁邊的操作桿或者按鈕等將鏡的上下左右的朝向設(shè)定為任意的方向而變更反映在鏡中的區(qū)域。為了能夠進(jìn)行同樣的區(qū)域變更,在本實施方式中構(gòu)成如下:車輛α的駕駛者能夠從操作部60的觸摸面板(圖示省略)對于修整實施了調(diào)整尺寸處理的部分圖像信號DRS-J所示的圖像的一部分的區(qū)域的修整處理輸入指定修整的位置的指示。
圖15A示出由駕駛者指定的修整區(qū)域的一例。如圖15A所示,修整區(qū)域AreaT-J為部分圖像信號DRS-J所示的圖像的一部分即矩形的區(qū)域。駕駛者例如在車輛非運行時,一邊目測確認(rèn)顯示于車輛室內(nèi)的操作部60的觸摸面板(圖示省略)的部分圖像信號DRS-J所示的圖像,一邊通過觸摸操作使顯示于該圖像上的矩形框FRM-J移動而指定修整區(qū)域AreaT-J。在此,矩形框FRM-J為劃定規(guī)定的大小的區(qū)域,修整區(qū)域AreaT-J由矩形框FRM-J的例如左上頂點的位置PosT-J確定。
控制部50,當(dāng)駕駛者通過觸摸面板使矩形框FRM-J移動而指定位置PosT-J時,生成示出位置PosT-J的位置指定信號Cp-J并向部分圖像處理部21J的修整處理部218J供給。修整處理部218J將以由位置指定信號Cp-J指定的位置PosT-J為左上頂點的矩形框FRM-J決定為修整區(qū)域AreaT-J,執(zhí)行修整部分圖像信號DRS-J所示的圖像中的修整區(qū)域AreaT-J的修整處理。
此外,代替觸摸面板,也可以構(gòu)成為設(shè)置與現(xiàn)有同樣的操作桿等,駕駛者用手使操作桿等活動而使規(guī)定的大小的矩形框FRM-J向左右上下方向移動,從而能夠指定修整區(qū)域AreaT-J。
在本實施方式中,由于部分圖像信號DRS-J與顯示區(qū)域AD-J所具備的像素數(shù)一致,因此,作為其一部分的修整區(qū)域AreaT-J的像素數(shù)比顯示區(qū)域AD-J所具備的像素數(shù)少。因此,為了使修整區(qū)域AreaT-J的像素數(shù)與顯示區(qū)域AD-J所具備的像素數(shù)一致,通過修整處理部218J,在指定修整區(qū)域AreaT-J之后執(zhí)行放大該修整區(qū)域AreaT-J的放大處理。
圖15B示出修整處理后的圖像的一例。如從圖15A及圖15B所理解的,經(jīng)過修整處理,圖15A所示的修整區(qū)域AreaT-J所示的圖像被放大,生成顯示區(qū)域AD-J所具備的M行×NJ列的像素數(shù)的(與部分圖像信號D-J相同的像素數(shù)的)部分圖像信號DT-J。
此外,也可以通過調(diào)整尺寸處理生成Mrs行×NrsJ列(Mrs為M<Mrs<PJ的自然數(shù),NrsJ為NJ<NrsJ<QJ的自然數(shù))的圖像,之后,執(zhí)行從通過調(diào)整尺寸處理生成的圖像中切出M行×NJ列的圖像的修整處理。這種情況下,由于修整區(qū)域AreaT-J為M行×NJ列,因此不需要放大處理,能夠提高圖像的品質(zhì)。并且,也可以構(gòu)成為矩形框FRM-J不必為規(guī)定的大小,通過駕駛者的操作能夠變更。這種情況下,修整區(qū)域AreaT-J所示的圖像的放大率能夠自由地變更。
根據(jù)這種修整處理,其優(yōu)點在于,與例如通過在拍攝部中使包含圖像傳感器在內(nèi)的照相機(jī)自身的拍攝朝向為可動而變更拍攝范圍的結(jié)構(gòu)相比較,由于不需要用于使照相機(jī)的朝向為可動的機(jī)構(gòu),因此抑制了成本。并且,其優(yōu)點還在于,在修整處理中,由于在指定了修整區(qū)域AreaT-J之后根據(jù)顯示區(qū)域AD-J的尺寸而放大,因此,駕駛者希望看到的區(qū)域被放大顯示。
如圖13所示,部分圖像處理部21J進(jìn)一步具備:鏡像生成部219J(219L、219C、219R),通過對于部分圖像信號DT-J實施左右反轉(zhuǎn)處理而生成示出將部分圖像信號DT-J所示的圖像左右反轉(zhuǎn)而成的圖像的部分圖像信號DF-J(DF-L、DF-C、DF-R);水平方向縮小/放大處理部220J(220L、220C、220R),通過對于部分圖像信號DF-J實施水平方向縮小/放大處理而生成示出將部分圖像信號DF-J所示的圖像按照每行沿水平方向縮小及放大而成的圖像的部分圖像信號DX-J(DX-L、DX-C、DX-R);垂直方向縮小/放大處理部221J(221L、221C、221R),通過對于部分圖像信號DX-J實施垂直方向縮小/放大處理而生成示出將部分圖像信號DX-J所示的圖像沿垂直方向縮小及放大而成的圖像的部分圖像信號D-J。
圖15C示出通過鏡像生成部219J執(zhí)行的左右反轉(zhuǎn)處理而生成的部分圖像信號DF-J所示的圖像的一例。車輛α的駕駛者觀察反映于現(xiàn)有類型的側(cè)方后視鏡或后視鏡的被拍攝體的鏡像來進(jìn)行車輛的后方以及側(cè)后方的安全確認(rèn)。但是,圖像傳感器12J拍攝被拍攝體本身而非被拍攝體的鏡像。因此,圖像傳感器12J輸出的拍攝信號DS-J所示的圖像的朝向與反映于現(xiàn)有類型的側(cè)方后視鏡或后視鏡的鏡像左右相反。
因此,鏡像生成部219J進(jìn)行生成示出使從修整處理部218J輸出的部分圖像信號DT-J所示的圖像(圖15B)左右反轉(zhuǎn)而成的鏡面圖像的部分圖像信號DF-J(圖15C)的左右反轉(zhuǎn)處理。通過該左右反轉(zhuǎn)處理,能夠進(jìn)行通過與反映于現(xiàn)有的側(cè)方后視鏡或葉板后視鏡等的鏡像左右相同的方向的圖像的安全確認(rèn),因此,不再有由于反映了與現(xiàn)有左右相反的圖像而使駕駛者混亂的擔(dān)憂。
以下參照圖16A~圖19,對于水平方向縮小/放大處理部220J執(zhí)行的水平方向縮小/放大處理以及垂直方向縮小/放大處理部221J執(zhí)行的垂直方向縮小/放大處理進(jìn)行說明。此外,以下有時將上述的兩個處理統(tǒng)稱為縮小/放大處理。
圖16A為本實施方式涉及的圖像的放大/縮小處理的概念圖。在該圖中,以部分圖像處理部21J(21L、21C、21R)中的左側(cè)圖像用圖像處理部21L的縮小/放大處理作為例示進(jìn)行說明。
如該圖所示,在左側(cè)圖像用圖像處理部21L的放大/縮小處理中,將從鏡像生成部219L輸出的部分圖像信號DF-L所示的圖像劃分為左上區(qū)域LR1、左中央?yún)^(qū)域LR2、左下區(qū)域LR3、中央上區(qū)域LR4、中央?yún)^(qū)域LR5、中央下區(qū)域LR6這六個區(qū)域。在部分圖像信號DF-L所示的圖像的左右方向(橫方向)上左區(qū)域(遠(yuǎn)離車體的區(qū)域)和中央?yún)^(qū)域(靠近車體的區(qū)域)的長度之比為“2:3”,在上下方向(縱方向)上上區(qū)域、中央?yún)^(qū)域、下區(qū)域的長度之比為“1:3:1”。
并且,在圖16A所示的各區(qū)域中,預(yù)先設(shè)定規(guī)定的水平方向變倍率(左右方向的放大率或者縮小率)和規(guī)定的垂直方向變倍率(上下方向的放大率或者縮小率)。
在反映于側(cè)方后視鏡的像中,由于位于靠近車體的區(qū)域LRC(圖2)的物體與車輛接觸的危險性高,因此其為車輛的安全行駛所必要的信息。相反,位于遠(yuǎn)離車體的區(qū)域LRL的圖像例如沿路的建筑物等的圖像在安全確認(rèn)中的重要度低。因此,在本實施方式中,以關(guān)于左右方向靠近車體的區(qū)域LRC比遠(yuǎn)離車體的區(qū)域LRL相對地放大的方式設(shè)定左右方向的放大率或者縮小率。并且,在基于拍攝信號DS-J的圖像中,其他的車輛或行人等的圖像對于車輛的安全駕駛來說是必要的信息,而位于圖像之上的區(qū)域的天空或者山等的景色的圖像或圖像之下的區(qū)域的路面的圖像的重要度低。因此,在本實施方式中,以上下方向的中央的區(qū)域與上區(qū)域或者下區(qū)域相比較被相對地放大的方式,設(shè)定上下方向的放大率或者縮小率。
具體而言,在左側(cè)圖像用圖像處理部21L中的縮小/放大處理中,如圖16A所示,關(guān)于遠(yuǎn)離車輛α并且位于其上或者其下的區(qū)域即左上區(qū)域LR1和左下區(qū)域LR3,左右方向的縮小率H2及上下方向的縮小率V2、V3均設(shè)定為25%。
并且,關(guān)于雖遠(yuǎn)離車輛α但在上下方向上位于中央的區(qū)域即左中央?yún)^(qū)域LR2,左右方向的縮小率H2被設(shè)定為25%且上下方向的放大率V1被設(shè)定為150%。并且,關(guān)于雖接近車輛α但上或者下的區(qū)域即中央上區(qū)域LR4和中央下區(qū)域LR6,左右方向的放大率H1被設(shè)定為150%,上下方向的縮小率V2、V3均被設(shè)定為25%。并且,關(guān)于靠近車輛α、在上下方向也位于中央的區(qū)域即中央?yún)^(qū)域LR5,左右方向的放大率H1及上下方向的放大率V1均被設(shè)定為150%。通過上述設(shè)定,能夠提高基于拍攝信號DS-L的圖像中的、車輛α的行駛時的安全確認(rèn)所必要的區(qū)域的可見確認(rèn)性。并且,例如在側(cè)方后視鏡的鏡面上設(shè)置平面部和凸面部而使反映于凸面部的鏡像被壓縮的結(jié)構(gòu)相比較,不需要物理性的加工處理,并且能夠提高更靠近車輛α、在上下方向上更靠中央的區(qū)域的可見確認(rèn)性。
此外,右側(cè)圖像用圖像處理部21R執(zhí)行的縮小/放大處理,與圖16A所示的左側(cè)圖像用圖像處理部21L執(zhí)行的縮小/放大處理相比,除了左右反轉(zhuǎn)這點之外都是相同的。
也就是說,在左側(cè)圖像用圖像處理部21L及右側(cè)圖像用圖像處理部21R中的縮小/放大處理中,關(guān)于左右方向上的靠近車輛α的區(qū)域的放大率H1及關(guān)于左右方向上的遠(yuǎn)離車輛α區(qū)域的縮小率H2,以如下方式確定:關(guān)于靠近車輛α區(qū)域?qū)⒆笥曳较虻拈L度設(shè)為X1、關(guān)于遠(yuǎn)離車輛α區(qū)域?qū)⒆笥曳较虻拈L度設(shè)為X2時,“X1+X2=X1·H1+X2·H2”。
并且,在左側(cè)圖像用圖像處理部21L及右側(cè)圖像用圖像處理部21R中的縮小/放大處理中,上下方向的中央的區(qū)域的放大率V1、上區(qū)域的縮小率V2以及下區(qū)域的縮小率V3以如下方式確定:關(guān)于中央的區(qū)域?qū)⑸舷路较虻拈L度設(shè)為Y1、關(guān)于上區(qū)域?qū)⑸舷路较虻拈L度設(shè)為Y2、關(guān)于下區(qū)域?qū)⑸舷路较虻拈L度設(shè)為Y3時,“Y1+Y2+Y3=Y(jié)1·V1+Y2·V2+Y3·V3”。
通過如上設(shè)定放大率及縮小率,無需變更部分圖像信號DF-L及DF-R所示的圖像本身的大小(像素數(shù))而能夠生成各區(qū)域間的大小的比率被變更的部分圖像信號D-L及D-R。換言之,即使在執(zhí)行縮小/放大處理的情況下,也能夠使部分圖像信號D-L及D-R與顯示區(qū)域AD-L及AD-R所具備的像素數(shù)一致。
圖16B為用于說明左側(cè)圖像用圖像處理部21L所具備的水平方向縮小/放大處理部220L執(zhí)行的水平方向縮小/放大處理的概念圖,圖16C為用于說明垂直方向縮小/放大處理部221L執(zhí)行的垂直方向縮小/放大處理的概念圖。
通過水平方向縮小/放大處理部220L,對于從鏡像生成部219L輸出的部分圖像信號DF-L,執(zhí)行關(guān)于左右方向與遠(yuǎn)離車體的區(qū)域相比較相對地放大靠近車體的區(qū)域的處理(水平方向縮小/放大處理)。具體而言,對于各區(qū)域LR1~LR6的圖像,執(zhí)行對應(yīng)于所設(shè)定的放大率H1或者縮小率H2的變倍處理。該變倍處理為逐行執(zhí)行的處理。例如,在使一行中的像素數(shù)為100個(即100列)的情況下,進(jìn)行以縮小率H2(25%)縮小從屬于左上區(qū)域LR1、左中央?yún)^(qū)域LR2、左下區(qū)域LR3的第1列至第40列的像素的處理。也就是說,進(jìn)行使像素數(shù)從40個縮小至10個的處理。在該縮小處理中,可以任意地采用例如關(guān)于鄰接的規(guī)定數(shù)的像素將受光元件輸出的檢測信號所示的值進(jìn)行相加平均等的周知的方法。并且,進(jìn)行以放大率H1(150%)放大從屬于中央上區(qū)域LR4、中央?yún)^(qū)域LR5、中央下區(qū)域LR6的第41列至第100列的像素的處理。也就是說,進(jìn)行使像素數(shù)從60個增加至90個的處理。在該放大處理中任意地采用最近鄰插值法等周知的方法。當(dāng)對所有的行實施了水平方向縮小/放大處理時,生成各區(qū)域LR1~LR6的圖像的大小的比率被如圖16B所示變更了的圖像(部分圖像信號DX-L所示的圖像)。
垂直方向縮小/放大處理部221L,對于從水平方向縮小/放大處理部220L逐行輸出的部分圖像信號DX-L執(zhí)行關(guān)于上下方向與上或者下的區(qū)域相比較相對地放大中央的區(qū)域的處理(垂直方向縮小/放大處理)。具體而言,對于各區(qū)域LR1~LR6的圖像,執(zhí)行對應(yīng)于設(shè)定的放大率V1或者縮小率V2或者V3的變倍處理。該變倍處理為對于多行的每一行執(zhí)行的處理。例如,在使部分圖像信號DX-L的行數(shù)為100行的情況下,進(jìn)行從屬于左上區(qū)域LR1及中央上區(qū)域LR4的第1行至第20行中減去對應(yīng)于縮小率V2(25%)的根數(shù)的行的處理。即,進(jìn)行每4根減至1根的行的處理。并且,對于屬于左中央?yún)^(qū)域LR2及中央?yún)^(qū)域LR5的第21行至第80行的像素進(jìn)行以放大率V1(150%)放大的處理。進(jìn)行從屬于左下區(qū)域LR3及中央下區(qū)域LR6的第81行至第100行中減去對應(yīng)于縮小率V3(25%)的根數(shù)的行的處理。當(dāng)對于所有的行實施了垂直方向縮小/放大處理時,生成各區(qū)域LR1~LR6的圖像的大小的比率被如圖16C變更了的圖像(部分圖像信號D-L所示的圖像)。
圖17示出經(jīng)過水平方向縮小/放大處理以及垂直方向縮小/放大處理的部分圖像信號D-L所示的圖像的一例。該圖所示的部分圖像信號D-L示出的圖像,在顯示于左側(cè)顯示區(qū)域AD-L的基礎(chǔ)上,放大顯示于放大顯示區(qū)域Area-L(參照圖3A或者圖3B)。也就是說,在放大顯示區(qū)域Area-L中,顯示在左右方向上靠近車體的上下方向上中央的區(qū)域與其他區(qū)域相比較被相對地放大的圖像。
圖18示出經(jīng)過水平方向縮小/放大處理以及垂直方向縮小/放大處理的部分圖像信號D-R所示的圖像的一例。該圖所示的部分圖像信號D-R示出的圖像,在顯示于右側(cè)顯示區(qū)域AD-R的基礎(chǔ)上,放大顯示于放大顯示區(qū)域Area-R(參照圖3A或者圖3B)。也就是說,在放大顯示區(qū)域Area-R中,顯示在左右方向上靠近車體的上下方向上中央的區(qū)域與其他區(qū)域相比較被相對地放大的圖像。如圖18所示,放大顯示于放大顯示區(qū)域Area-R的部分圖像信號D-R所示的圖像,在左右方向上靠近車體的區(qū)域RRC(參照圖2)與遠(yuǎn)離車體的區(qū)域RRR相比被放大,在上下方向上中央的區(qū)域被放大。
下面,對于中央圖像用圖像處理部21C中的縮小/放大處理(水平方向縮小/放大處理以及垂直方向縮小/放大處理)進(jìn)行說明。
中央圖像用圖像處理部21C中的縮小/放大處理,在將部分圖像信號DT-J劃分為多個區(qū)域時的劃分的方式和被劃分的各區(qū)域的縮寫及放大的比率方面,與左側(cè)圖像用圖像處理部21L以及右側(cè)圖像用圖像處理部21R中的縮小/放大處理不同。
圖19為中央圖像用圖像處理部21C中的縮小/放大處理的概念圖。如該圖所示,在中央圖像用圖像處理部21C中的縮小/放大處理中,將從鏡像生成部219C輸出的部分圖像信號DF-C的圖像劃分為左上區(qū)域BR1、左中央?yún)^(qū)域BR2、左下區(qū)域BR3、中央上區(qū)域BR4、中央?yún)^(qū)域BR5、中央下區(qū)域BR6、右上區(qū)域BR7、右中央?yún)^(qū)域BR8、右下區(qū)域BR9這九個區(qū)域。在該圖所示的示例中,在部分圖像信號DF-C所示的圖像的左右方向上,左邊的區(qū)域BRL(參照圖2)、中央的區(qū)域BRC、右邊的區(qū)域BRR的長度之比為“1:3:1”,在上下方向上,上方的區(qū)域、中央的區(qū)域、下方的區(qū)域的長度之比為“1:3:1”。
并且,在圖19所示的各區(qū)域中,預(yù)先設(shè)定規(guī)定的水平方向的變倍率(左右方向上的放大率或者縮小率)和規(guī)定的垂直方向變倍率(上下方向上的放大率或者縮小率)。具體而言,如圖19所示,關(guān)于在左右方向及上下方向的任一方向上均為端部的區(qū)域即左上區(qū)域BR1、左下區(qū)域BR3、右上區(qū)域BR7以及右下區(qū)域BR9,左右方向的縮小率及上下方向的縮小率均被設(shè)定為25%。并且,關(guān)于在左右方向上為端部的區(qū)域但在上下方向上為中央的區(qū)域即左中央?yún)^(qū)域BR2和右中央?yún)^(qū)域BR8,左右方向的縮小率被設(shè)定為25%并且上下方向的放大率被設(shè)定為150%。并且,關(guān)于在左右方向上為中央的區(qū)域但位于上方或者下方的區(qū)域即中央上區(qū)域BR4和中央下區(qū)域BR6,左右方向的放大率被設(shè)定為150%,上下方向的縮小率被設(shè)定為25%。并且,關(guān)于在左右方向及上下方向的任一方向上均為中央的區(qū)域即中央?yún)^(qū)域BR5,左右方向的放大率及上下方向的放大率均被設(shè)定為150%。
通過上述設(shè)定,能夠提高基于拍攝信號DS-C的圖像中的、車輛的行駛時的安全確認(rèn)所必要的區(qū)域的可見確認(rèn)性。并且,例如與在后視鏡的鏡面上設(shè)置平面部和凸面部而使反映于凸面部的鏡像被壓縮的結(jié)構(gòu)相比較,不需要物理性的加工處理,并且能夠提高左右及上下方向上的中央的區(qū)域的可見確認(rèn)性。
如上生成的部分圖像信號D-C所示的圖像,在顯示于中央顯示區(qū)域AD-C的基礎(chǔ)上,放大顯示于放大顯示區(qū)域Area-L(參照圖3A或者圖3B)。
此外,垂直方向縮小/放大處理部221J,當(dāng)完成用于生成部分圖像信號D-J[m]的垂直方向縮小/放大處理時,在將生成的部分圖像信號D-J[m](部分圖像信號DGA-J[m])存儲于行緩存22的同時,輸出示出部分圖像信號D-J[m]向行緩存22的存儲完成的部分寫入完成信號PtA-J。
<3.拍攝信號和圖像信號的關(guān)系>
下面,對于拍攝信號DS和圖像信號D的關(guān)系,特別是拍攝信號DS從拍攝部10向圖像信號生成部20輸出(供給)定時和圖像信號D從圖像信號生成部20輸出定時的關(guān)系進(jìn)行說明。
首先,作為說明拍攝信號DS(拍攝信號DS-J[pJ])和圖像信號D(圖像信號D[m])的關(guān)系的前提,對于生成圖像信號D[m]所必要的拍攝信號DS-J[pJ]進(jìn)行說明。
如上述說明所明示的,在部分圖像處理部21J進(jìn)行的圖像處理中,生成部分圖像信號D-J[m]所必要的拍攝信號DS-J的行數(shù)根據(jù)對應(yīng)于部分圖像信號D-J[m]的行的位置(m的值)而變動。
例如,部分圖像處理部21J的調(diào)整尺寸處理部217J通過包含畸變校正處理的調(diào)整尺寸處理生成部分圖像信號DRS-J[m]時所必要的拍攝信號DS-J的行數(shù),根據(jù)對應(yīng)于部分圖像信號DRS-J[m]的行的位置(m的值)而變動。在圖14所示的示例中,生成部分圖像信號DRS-J[1]所必要的拍攝信號DS-J為拍攝信號DS-J[1]~DS-J[5]這5行的拍攝信號DS-J[pJ];生成部分圖像信號DRS-J[7]所必要的拍攝信號DS-J為拍攝信號DS-J[8]~DS-J[10]這3行的拍攝信號DS-J[pJ];生成部分圖像信號DRS-J[12]所必要的拍攝信號DS-J為拍攝信號DS-J[12]~DS-J[16]這5行的拍攝信號DS-J[pJ]。
并且,例如,垂直方向縮小/放大處理部221J通過垂直方向縮小/放大處理生成部分圖像信號D-J[m]時所必要的部分圖像信號DX-J的行數(shù)根據(jù)對應(yīng)于部分圖像信號D-J[m]的行的位置(m的值)而變動。
因此,部分圖像處理部21J為了生成部分圖像信號D-J[m]而進(jìn)行的圖像處理所需要的時間根據(jù)對應(yīng)于部分圖像信號D-J[m]的行的位置(m的值)而變動。
以下為了方便說明,將生成部分圖像信號D-J[m]所必要的全部的拍攝信號DS-J[pJ]統(tǒng)稱為拍攝信號DGS-J[m]。
圖20為概略地示出示出圖像信號D[m]及部分圖像信號D-J[m]與拍攝信號DS-J[pJ]的關(guān)系時序圖。如該圖所示,在拍攝信號DS-L[1]~DS-L[60](在該圖中,設(shè)“PL=60行”)中,在用于部分圖像信號D-L[m]的生成的拍攝信號DS-L[pL]為拍攝信號DS-L[10]~DS-L[12]的情況下,將該拍攝信號DS-L[10]~DS-L[12]稱為拍攝信號DGS-L[m]。同樣地,在拍攝信號DS-C[1]~DS-C[80](在該圖中,設(shè)“PC=80行”)中,在用于部分圖像信號D-C[m]的生成的拍攝信號DS-C[pC]為拍攝信號DS-C[14]~DS-C[17]的情況下,將該拍攝信號DS-C[14]~DS-C[17]稱為拍攝信號DGS-C[m]。同樣地,在拍攝信號DS-R[1]~DS-R[60](在該圖中,設(shè)“PR=60行”)中,在用于部分圖像信號D-R[m]的生成的拍攝信號DS-R[pR]為拍攝信號DS-R[12]~DS-R[14]的情況下,將該拍攝信號DS-R[12]~DS-R[14]稱為拍攝信號DGS-R[m]。
并且,將生成圖像信號D[m]所必要的由拍攝信號DGS-L[m]、拍攝信號DGS-C[m]以及拍攝信號DGS-R[m]構(gòu)成的信號稱為拍攝信號DGS[m]。
例如,在圖20所示的示例中,將用于圖像信號D[m]的生成的全部的拍攝信號DS-J[pJ]即由拍攝信號DS-L[10]~DS-L[12]構(gòu)成的拍攝信號DGS-L[m]、由拍攝信號DS-C[14]~DS-C[17]構(gòu)成的拍攝信號DGS-C[m]、由拍攝信號DS-R[12]~DS-R[14]構(gòu)成的拍攝信號DGS-R[m],稱為拍攝信號DGS[m]。
并且,如圖20所示,將生成圖像信號D[m]的圖像處理所需要的時間稱為圖像處理時間UA[m],將生成部分圖像信號D-J[m]的圖像處理所需要的時間稱為部分圖像處理時間UA-J[m]。
如上所述,部分圖像處理部21J的部分圖像處理時間UA-J[m]根據(jù)對應(yīng)于部分圖像信號D-J[m]的行的位置(m的值)而變動。并且,圖像信號D[m]由部分圖像信號D-L[m]、部分圖像信號D-C[m]以及部分圖像信號D-R[m]構(gòu)成。因此,圖像處理時間UA[m]根據(jù)對應(yīng)于圖像信號D[m]的行的位置(m的值)而變動。
當(dāng)開始從拍攝部10供給拍攝信號DGS[m]時,圖像處理部21對于該拍攝信號DGS[m]實施圖像處理。并且,圖像處理部21在圖像處理時間UA[m]之后使圖像處理完成,生成圖像信號D[m]。
更具體而言,如圖20所示,圖像處理部21中的左側(cè)圖像用圖像處理部21L,對于左后方用圖像傳感器12L供給的拍攝信號DGS-L[m]實施圖像處理,在部分圖像處理時間UA-L[m]之后生成部分圖像信號D-L[m],輸出部分寫入完成信號PtA-L。并且,圖像處理部21中的中央圖像用圖像處理部21C,對于中央后方用圖像傳感器12C供給的拍攝信號DGS-C[m]實施圖像處理,在部分圖像處理時間UA-C[m]之后生成部分圖像信號D-C[m],輸出部分寫入完成信號PtA-C。并且,圖像處理部21中的右側(cè)圖像用圖像處理部21R,對于右側(cè)后方用圖像傳感器12R供給的拍攝信號DGS-R[m]實施圖像處理,在部分圖像處理時間UA-R[m]之后生成部分圖像信號D-R[m],輸出部分寫入完成信號PtA-R。
此外,拍攝信號DS-J[pJ]的各種信號例如在拍攝水平同步信號SHsync中的一部分期間內(nèi)持續(xù)地輸出,在圖20(以及之后的附圖)中為了方便圖示,以圓點表示各種信號輸出的期間。
下面,參照圖21及圖22對于拍攝信號DS從拍攝部10向圖像信號生成部20輸出(供給)定時和圖像信號D從圖像信號生成部20輸出定時的關(guān)系進(jìn)行說明。
圖21為概略地示出在連續(xù)的多個拍攝垂直掃描期間Fs(Fs0~Fs3)中的、拍攝垂直掃描期間Fs1~Fs3的各個中,拍攝部10向圖像信號生成部20輸出(供給)拍攝信號DS(拍攝信號DS-J[1]~拍攝信號DS-J[pJ])的定時的時序圖。
如上所述,左后方用的圖像傳感器12L、中央后方用的圖像傳感器12C及右側(cè)后方用的圖像傳感器12R,與定時生成器13輸出的各種定時信號同步動作。因此,左后方用的圖像傳感器12L、中央后方用的圖像傳感器12C及右側(cè)后方用的圖像傳感器12R的幀率相等。
但是,有時各圖像傳感器12J輸出的拍攝信號DS-J的像素的尺寸相互不同。并且,有時拍攝信號DS-J從各圖像傳感器12J向部分圖像處理部21J傳送所需要的時間也不同。因此,通常情況下,從拍攝部10向圖像信號生成部20輸出(供給)拍攝信號DS-J的期間在拍攝信號DS-L、拍攝信號DS-C及拍攝信號DS-R中是不同的。
因此,如圖21所示,從拍攝部10輸出拍攝信號DS的期間即從拍攝部10輸出拍攝信號DGS[1]~DGS[M]的期間為從開始拍攝信號DS-L、DS-C及DS-R的輸出(供給)的時間中的最早的時間至結(jié)束拍攝信號DS-L、DS-C及DS-R的輸出(供給)的時間中的最晚的時間為止的期間。
以下,有時將在拍攝垂直掃描期間Fs0~Fs3中輸出的拍攝信號DS(拍攝信號DS-J[pJ])分別與拍攝信號DS0~DS3(拍攝信號DS-J0[pJ]~DS-J3[pJ])區(qū)別表現(xiàn)。同樣地,有時將在拍攝垂直掃描期間Fs0~Fs3中輸出的拍攝信號DGS[m]分別與拍攝信號DGS0[m]~DGS3[m]區(qū)別表現(xiàn)。
并且,以下為了方便說明,將拍攝部10輸出拍攝信號DS的時間和圖像信號生成部20接受拍攝信號DS的供給的時間看做大致相同的時間,不進(jìn)行區(qū)別而說明。
圖22為概略地示出基于拍攝部10在拍攝垂直掃描期間Fs1~Fs3的各個中輸出的拍攝信號DS1~DS3,圖像處理部21生成圖像信號D(D[1]~D[m])即圖像信號DGA(DGA[1]~DGA[m])并將生成的圖像信號DGA存儲于行緩存22的定時,和在連續(xù)的多個顯示垂直掃描期間Fd(Fd0~Fd3)中的顯示垂直掃描期間Fd1~Fd3的各個中,圖像信號輸出部23從行緩存22取得圖像信號D(D[1]~D[m])即圖像信號DGB(DGB[1]~DGB[m])并向顯示部40輸出的定時的關(guān)系的時序圖。
以下,有時將基于拍攝信號DGS0[m]~DGS3[m]生成的圖像信號D[m](DGA[m]、DGB[m])作為圖像信號D0[m]~D3[m](DGA0[m]~DGA3[m]、DGB0[m]~DGB3[m])而區(qū)別表現(xiàn)。
如圖22所示,將拍攝垂直掃描期間Fs中的、輸出拍攝信號DS的期間稱為“拍攝信號DS的幀”。并且,將顯示垂直掃描期間Fd中的、輸出圖像信號D的期間即垂直有效數(shù)據(jù)期間DVI稱為“圖像信號D的幀”。并且,如圖22所示,將從拍攝信號DS的幀的開始至圖像信號D的幀的開始為止的時間稱為相位差PD。
此外,作為相位差PD,也可以為例如從拍攝垂直掃描期間Fs的幀開始,至圖像信號生成部20輸出基于拍攝部10在上述拍攝垂直掃描期間Fs中輸出的拍攝信號DS的圖像信號D的顯示垂直掃描期間Fd的幀的開始為止的時間。
在圖22中,以線L1表示拍攝部10將拍攝信號DGS[1]~DGS[M]向圖像處理部21供給的定時。也就是說,線L1表示圖像處理部21逐行開始用于生成圖像信號D[1]~D[M](圖像信號DGA[1]~DGA[M])的各個的圖像處理的時刻方向的樣態(tài)(定時)。并且,以線L2表示由圖像處理部21進(jìn)行的圖像信號DGA[1]~DGA[M]的生成完成,上述圖像信號DGA[1]~DGA[M]逐行存儲于行緩存22的時刻方向的樣態(tài)(定時)。圖像信號輸出部23在圖像信號DGA[m]的生成完成后輸出圖像信號DGB[m]。因此,圖像信號DGB[m]不會在線L2所示的時刻以前的時刻被輸出。此外,線L2為連結(jié)圖10說明的圖像信號生成時刻TC[1]~TC[M]的線。
此外,以線L3表示圖像信號輸出部23在以對于顯示部40來說理想的定時供給圖像信號DGB[1]~DGB[M]的情況下,即,通過以顯示部40能夠顯示的最高的幀率(顯示垂直掃描期間Fd的時長為標(biāo)準(zhǔn)垂直掃描時間Td時的幀率)顯示的方式供給圖像信號DGB[1]~DGB[M]的情況下的、圖像信號輸出部23逐行地順序讀取圖像信號DGB[1]~DGB[M]并顯示的定時。
也就是說,線L3為示出假定在顯示部40能夠顯示一行的圖像的每個水平掃描期間Hd,圖像信號輸出部23輸出一行的圖像信號DGB[m]的情況下(即,顯示部40的幀率為第二幀率的情況下),顯示部40在每個水平掃描期間Hd逐行讀取圖像信號DGB[1]~DGB[M]所示的圖像并顯示的定時的線,具有每個水平掃描期間Hd增加一行的傾斜度。也就是說,線L3為設(shè)定垂直有效數(shù)據(jù)期間DVI所包含的水平掃描期間Hd的全部為有效水平掃描期間Hd-A的情況,其與在設(shè)定垂直有效數(shù)據(jù)期間DVI內(nèi)也包含無效水平掃描期間Hd-D的情況的基礎(chǔ)上,示出以第m-1行的圖像信號D[m-1]的輸出完成(第二條件的滿足)為前提的圖像信號D[m]的輸出時刻的顯示準(zhǔn)備判定時刻TB[m]不一定一致。
圖像信號輸出部23在顯示部40能夠顯示時輸出圖像信號DGB[m]。因此,圖像信號DGB[m]不會在線L3所示的時刻以前的時刻被讀出并輸出。
此外,以下有時將對應(yīng)于圖像信號DGA0[m]~DGA3[m]的各個的圖像處理時間UA作為圖像處理時間UA0[m]~UA3[m]而區(qū)別表現(xiàn)。
并且,以下將從圖像信號DGA[m]被存儲于行緩存22開始至通過圖像信號輸出部23向顯示部40輸出為止的時間作為待機(jī)時間UB。以下,為了方便說明,有時將對應(yīng)于圖像信號DGB1[m]~DGB3[m]的各個的待機(jī)時間UB作為待機(jī)時間UB1[m]~UB3[m]而區(qū)別表現(xiàn)。
如上所述,在部分圖像處理部21J進(jìn)行的圖像處理中,生成部分圖像信號D-J[m]所必要的拍攝信號DS-J的行數(shù),根據(jù)對應(yīng)于部分圖像信號D-J[m]的行的位置(m的值)而變動。因此,通常情況下,生成對應(yīng)于各行的圖像信號D[m]的圖像處理的開始間隔不會為一定的間隔而會變動。也就是說,線L1通常不為直線而為折線。不過,在圖22中,為了圖示方便而描繪為直線。此外在使線L1為直線的情況下(例如,將線L1的始點和終點連接為直線的情況下),線L1的傾斜度根據(jù)拍攝部10的幀率即第一幀率而確定。
此外,如上所述,圖像信號D[m]的生成所需要的圖像處理時間UA[m]根據(jù)對應(yīng)于圖像信號D[m]的行的位置(m的值)而變動。因此,線L2不為直線而為折線,但在圖22中為了圖示方便而描繪為直線。
如圖22所示,示出在拍攝垂直掃描期間Fs1內(nèi)圖像處理部21基于從拍攝部10輸出的拍攝信號DS1(DGS1[m])生成圖像信號D1[m](DGA1[m])的時刻的線L2,在時間上領(lǐng)先于示出在顯示垂直掃描期間Fd1內(nèi)顯示部40能夠顯示圖像信號D1[m](DGA1[m])所示的圖像的最早的時刻的線L4(將與前述的線L3的定義不同的假想的定時作為線L4進(jìn)行說明)。將這種線L2時間上領(lǐng)先于線L3(線L4)的狀態(tài)稱為“第一狀態(tài)”。
也就是說,所謂第一狀態(tài)是指,在圖像處理部21基于拍攝信號DS生成圖像信號D[m]時,未完成在顯示部40中顯示該圖像信號D[m]所示的圖像的準(zhǔn)備的狀態(tài)。這里,所謂未完成在顯示部40中顯示圖像信號D[m]的準(zhǔn)備的情況,是指例如在生成圖像信號D1[m]時,顯示部40正在顯示應(yīng)該在圖像信號D1[m]以前顯示的圖像信號D1[m-1]所示的圖像,顯示部40不能顯示圖像信號D1[m]所示的圖像的情況等。
也就是說,在第一狀態(tài)下,即使圖像處理部21生成圖像信號D[m],但由于用于顯示圖像信號D[m]的顯示部40側(cè)的準(zhǔn)備完成不及,因此,就顯示部40中的圖像的顯示而言,顯示部40側(cè)的顯示準(zhǔn)備成為瓶頸而延遲的狀態(tài)。換言之,第一狀態(tài)是指在顯示部40變?yōu)槟軌蝻@示圖像信號D[m]的定時,不延遲而能夠迅速地顯示圖像信號D[m]的狀態(tài)。
不過,由于由顯示部40顯示一畫面所必要的時間(周期)比由拍攝部10拍攝一畫面所必要的時間(周期)短,因此,顯示部40側(cè)的顯示準(zhǔn)備成為瓶頸的顯示的延遲逐漸縮小以至消除。
在圖22中,為了圖示方便,作為第一狀態(tài)僅記載了一個拍攝垂直掃描期間Fs(Fs1)及一個顯示垂直掃描期間Fd(Fd1)的一組垂直掃描期間,實際上有存在多組垂直掃描期間的情況。這種情況下,第一狀態(tài)下的相位差PD1(作為第一狀態(tài)下的相位差PD,如圖22所示付與符號PD1)分別縮短相當(dāng)于顯示垂直掃描期間Fd和拍攝垂直掃描期間Fs的差分的時間。換言之,在每個垂直掃描期間組中,線L3和線L2的距離大致分別縮短相當(dāng)于顯示垂直掃描期間Fd和拍攝垂直掃描期間Fs的差分的時間。
在顯示部40側(cè)的顯示準(zhǔn)備成為瓶頸的顯示延遲消除以前,線L2在時間上領(lǐng)先于線L3(線L4)。另一方面在變?yōu)轱@示準(zhǔn)備成為瓶頸的顯示延遲消除的狀態(tài)的情況下,盡管實際上并不存在,但設(shè)定示出在顯示部40側(cè)能夠顯示圖像的最早的時刻的線L4作為假想的狀態(tài)能夠成為時間上領(lǐng)先于線L2的定時。也就是說,可知在顯示準(zhǔn)備成為瓶頸的顯示延遲消除的定時,在假想的狀態(tài)下,在最快的狀態(tài)下能夠成為線L2和線L4交叉的定時。
此外,如上所述,存在線L2不為直線而為折線的情況。這種情況下,可知線L2和假想的線L4的交叉能夠發(fā)生多次。
在圖22所示的示例中,示出在拍攝垂直掃描期間Fs2內(nèi)圖像處理部21基于從拍攝部10輸出的拍攝信號DS2(DGS2[m])生成圖像信號D2[m](DGA2[m])的時刻的線L2,與示出在顯示垂直掃描期間Fd2內(nèi)顯示部40能夠顯示圖像信號D2[m](DGA2[m])所示的圖像的最早的時刻的線L4交叉。將這種線L2和線L4交叉的狀態(tài)稱為“第二狀態(tài)”。此外,在多次發(fā)生線L2及線L4的交叉的情況下,將最初發(fā)生這種交叉的狀態(tài)稱為“第二狀態(tài)”。并且,將線L2和線L4交叉的時刻稱為時刻Tth。此外,在多次發(fā)生線L2及線L4的交叉的情況下,將最初發(fā)生交叉的時刻作為時刻Tth。
即,所謂第二狀態(tài)是指,從圖像處理部21基于拍攝信號DS生成圖像信號D[m]時在顯示部40中未完成顯示該圖像信號D[m]示出的圖像的準(zhǔn)備的狀態(tài)(線L2總是比線L3時間上領(lǐng)先的狀態(tài)),向存在變?yōu)樵陲@示部40中能夠顯示圖像信號D[m]示出的圖像時圖像處理部21未完成用于生成圖像信號D[m]的圖像處理的情況的狀態(tài)(存在線L4時間上領(lǐng)先于線L2的情況的狀態(tài))遷移。
也就是說,第二狀態(tài)是指,在時刻Tth以前,在變?yōu)轱@示部40能夠顯示圖像信號D[m]示出的圖像的定時,不延遲而顯示圖像信號D[m]示出的圖像的狀態(tài);另一方面,在時刻Tth以后,即使到了在顯示部40側(cè)能夠顯示圖像信號D[m]的時刻,由于用于生成圖像信號D[m]的圖像處理部21中的圖像處理完成不及,因此,顯示部40中的圖像的顯示存在圖像處理部21的圖像處理成為瓶頸而延遲的情況的狀態(tài)。
該第二狀態(tài)中的相位差PD2(作為第二狀態(tài)下的相位差PD,如圖22所示付與符號PD2)如圖22所示比相位差PD1短。
此外,在時刻Tth以后,定時生成器32在垂直有效數(shù)據(jù)期間DVI內(nèi)插入一次無效水平掃描期間Hd-D,調(diào)整圖像信號D[m]從圖像信號輸出部23的輸出定時(顯示部40中的圖像信號D[m]示出的圖像的顯示定時)。不過,在即使進(jìn)行一次的無效水平掃描期間Hd-D的插入,也不及完成用于生成圖像信號D[m]的圖像處理部21中的圖像處理的情況下,進(jìn)一步重復(fù)下一個無效水平掃描期間Hd-D的插入。并且,顯示部40等待用于生成圖像信號D[m]的圖像處理的完成,之后,在生成圖像信號D[m]的情況下,在水平掃描期間Hd以下的時間內(nèi),顯示該圖像信號D[m]示出的圖像。也就是說,在時刻Tth以后,通過無效水平掃描期間Hd-D的插入來調(diào)整圖像信號D[m](DGB[m])從圖像信號輸出部23的輸出定時,從而,在圖像處理部21中的圖像處理的完成定時,使顯示部40側(cè)的顯示定時以水平掃描期間Hd的精度追隨。
如圖22所示,示出在顯示垂直掃描期間Fd3內(nèi)顯示部40能夠顯示圖像信號D3[m](DGA3[m])示出的圖像的最早的時刻的線L4,在時間上領(lǐng)先于示出圖像處理部21基于在拍攝垂直掃描期間Fs3內(nèi)輸出的拍攝信號DS3(DGS3[m])生成圖像信號D3[m](DGA3[m])的時刻的線L2。將這種線L4時間上領(lǐng)先于線L2的狀態(tài)稱為“第三狀態(tài)”。此外,如上所述,線L2不為直線而為折線,存在產(chǎn)生多次線L2及線L3的交叉的情況。這種情況下,將時刻Tth以后開始的垂直掃描期間的組(Fs及Fd)中的狀態(tài)稱為第三狀態(tài)。
也就是說,所謂第三狀態(tài),是指總是發(fā)生在顯示部40中顯示圖像信號D[m]示出的圖像的準(zhǔn)備完成時,圖像處理部21未完成用于生成圖像信號D[m]的圖像處理的情況的狀態(tài)。
也就是說,在第三狀態(tài)下,由于總是發(fā)生即使用于顯示圖像信號D[m]的顯示部40側(cè)的準(zhǔn)備完成,用于生成圖像信號D[m]的圖像處理部21中的圖像處理完成不及這樣的狀況,因此,顯示部40中的圖像的顯示,由于圖像處理部21的圖像處理成為瓶頸而為延遲的狀態(tài)。
該第三狀態(tài)下的相位差PD3(作為第三狀態(tài)下的相位差PD,如圖22所示付與符號PD3),如圖22所示,比相位差PD2短。
此外,第一狀態(tài)下的相位差PD1比圖像處理時間UA(更具體而言,圖像處理時間UA1[1]~UA1[m]的最大值)大,第三狀態(tài)下的相位差PD3為圖像處理時間UA1[1]~UA1[m]的最大值以下。
此外,在第三狀態(tài)下,定時生成器32將無效水平掃描期間Hd-D插入垂直有效數(shù)據(jù)期間DVI,調(diào)整顯示部40中的圖像信號D[m]示出的圖像的顯示定時。從而,能夠以水平掃描期間Hd的精度使顯示部40側(cè)的顯示定時追隨圖像處理部21中的圖像處理的完成定時。
如上所述,圖像處理時間UA逐行變動。但是,其變動幅度與拍攝垂直掃描期間Fs相比足夠小。因此,在使圖像信號D[m]的輸出的定時(顯示部40側(cè)的顯示定時)追隨圖像處理部21中的圖像處理的完成定時的狀態(tài)下,拍攝部10輸出拍攝信號DS3期間的時長與圖像信號輸出部23輸出圖像信號DGB3期間的時長大致相等。換言之,在第三狀態(tài)下,定時控制部30以使顯示部40的幀率為拍攝部10的幀率即第一幀率的方式,調(diào)整輸出圖像信號D[m]的定時(第二定時控制)。
在圖22中,為了圖示方便,作為第三狀態(tài),僅記載了一個拍攝垂直掃描期間Fs(Fs3)及一個顯示垂直掃描期間Fd(Fd3)這一組垂直掃描期間,但實際上存在多組垂直掃描期間。在第三狀態(tài)下,在多組垂直掃描期間的各組內(nèi),以拍攝部10輸出拍攝信號DS3期間的時長與圖像信號輸出部23輸出圖像信號DGB3期間的時長大致相等的方式,調(diào)整輸出圖像信號D[m]的定時。也就是說,在第三狀態(tài)下,在多組垂直掃描期間的各組內(nèi),以顯示部40的幀率成為拍攝部10的幀率即第一幀率的方式,調(diào)整輸出圖像信號D[m]的定時。因此,在該第三狀態(tài)下,在多組垂直掃描期間的各組內(nèi),相位差PD3為大致相等時長。
也就是說,定時控制部30,在相位差PD比規(guī)定時間長的情況下,通過以第二幀率輸出圖像信號D的方式控制定時的第一定時控制來逐漸縮短相位差PD;在相位差PD在規(guī)定時間以下的情況下,通過以第一幀率輸出圖像信號D的方式控制定時的第二定時控制來維持相位差PD成為最短的狀態(tài)。
在本實施方式中,由于使相位差PD為從拍攝信號DS的幀的開始至圖像信號D的幀的開始的時間,作為規(guī)定時間,例如可以為圖像處理時間UA[1]~UA[M]的最大值。
并且,如上所述,在將相位差PD定義為從拍攝垂直掃描期間Fs的幀的開始至顯示垂直掃描期間Fd的幀的開始的時間的情況下,作為規(guī)定時間,例如可以基于圖像處理時間UA[1]~UA[M]的最大值、拍攝垂直掃描期間Fs的幀的開始至拍攝信號DS的幀的開始的時間、顯示垂直掃描期間Fd的幀的開始至圖像信號D的幀的開始的時間來決定。
以下,參照圖22及圖23,以在拍攝垂直掃描期間Fs1內(nèi)拍攝部10輸出的拍攝信號DS1(DGS1)和在顯示垂直掃描期間Fd1內(nèi)圖像信號生成部20向顯示部40輸出的圖像信號D1(DGB1)的關(guān)系為例,對于第一狀態(tài)進(jìn)行說明。
圖23為用于說明拍攝信號DS-J1[pJ]、拍攝信號DGS1[m]和圖像信號D1[m](圖像信號DGA1[m]及圖像信號DGB1[m])的關(guān)系的時序圖。
此外,在圖23和后述的圖24及圖25中,簡單起見,設(shè)定拍攝信號DS示出的圖像的行數(shù)為5行(P=5)、圖像信號D示出的圖像的行數(shù)為4行(M=4)的情況。并且,在圖23至圖25所示的示例中,簡單起見,不區(qū)別拍攝信號DS-L[pL]、DS-C[pC]以及DS-R[pR],標(biāo)記為DS-J[pJ](DS-J1[pJ]、DS-J2[pJ]、DS-J3[pJ])。并且,在圖23至圖25所示的示例中,設(shè)定拍攝信號DGS[1]包含拍攝信號DS-J[1]及DS-J[2],拍攝信號DGS[2]包含拍攝信號DS-J[2]及DS-J[3],拍攝信號DGS[3]包含拍攝信號DS-J[3]及DS-J[4],拍攝信號DGS[4]包含拍攝信號DS-J[4]及DS-J[5]的情況。也就是說,在圖23至圖25所示的示例中,設(shè)定圖像信號D[1]基于拍攝信號DS-J[1]及DS-J[2]生成,圖像信號D[2]基于拍攝信號DS-J[2]及DS-J[3]生成,圖像信號D[3]基于拍攝信號DS-J[3]及DS-J[4]生成,圖像信號D[4]基于拍攝信號DS-J[4]及DS-J[5]生成的情況。并且,在圖23至圖25所示的示例中,設(shè)定線L2及線L3的交叉僅產(chǎn)生一次的情況。
如圖23所示,當(dāng)從拍攝部10輸出拍攝信號DS-J1[m]及DS-J1[m+1](方便起見,開始拍攝信號DGS1[m]的輸出)時,圖像處理部21基于該拍攝信號DGS1[m]開始圖像信號DGA1[m]的生成。并且,圖像處理部21從圖像處理開始在經(jīng)過圖像處理時間UA1[m]之后,完成圖像信號DGA1[m]的生成,將其存儲于行緩存22。
另一方面,圖23所示的示例例示了上述的第一狀態(tài),線L2在時間上領(lǐng)先于線L3。即,在圖23所示的示例中,在由圖像處理部21完成圖像信號DGA1[m]的生成的定時,尚未完成在顯示部40中顯示圖像信號DGB1[m]示出的圖像的準(zhǔn)備。換言之,在由圖像處理部21完成圖像信號DGA1[m]的生成的定時,未從輸出控制部31輸出輸出許可脈沖PL[m]。
因此,圖像信號輸出部23在待機(jī)時間UB1[m]內(nèi)等待圖像信號DGB1[m]的輸出直至輸出輸出許可脈沖PL[m]之后的最初的水平掃描期間Hd1[m]為止,之后,在水平掃描期間Hd1[m]內(nèi)輸出圖像信號DGB1[m]。
并且,圖23所例示的第一狀態(tài)為直至圖像處理部21的圖像處理完成為止顯示部40的顯示準(zhǔn)備完成不及的情況。換言之,在水平掃描期間Hd1[m]開始以前,完成了由圖像處理部21進(jìn)行的圖像信號DGA1[m]的生成,成為能夠從圖像信號輸出部23輸出圖像信號DGB1[m]的狀態(tài)。因此,在圖23所例示的第一狀態(tài)下,顯示垂直掃描期間Fd1的垂直有效數(shù)據(jù)期間DVI內(nèi)所包含的全部的水平掃描期間Hd成為有效水平掃描期間Hd-A。也就是說,在第一狀態(tài)下,顯示垂直掃描期間Fd的時長為標(biāo)準(zhǔn)垂直掃描時間Td。
這樣,在圖23所例示的第一狀態(tài)下,盡管時間十分充裕地完成了用于生成圖像信號D1的圖像處理,但是,顯示部40側(cè)的顯示準(zhǔn)備成為瓶頸,顯示部40中的顯示延遲。
因此,從拍攝部10輸出拍攝信號DS1開始至顯示部40顯示圖像信號D1示出的圖像為止的延遲時間ΔT1為圖像信號生成部20中的圖像處理所需要的時間(圖像處理時間UA)和圖像處理完成后用于等待顯示部40中的顯示準(zhǔn)備的時間(待機(jī)時間UB)的合計時間。
下面,參照圖22及圖24,以在拍攝垂直掃描期間Fs2內(nèi)拍攝部10輸出的拍攝信號DS2(DGS2)和在顯示垂直掃描期間Fd2內(nèi)圖像信號生成部20向顯示部40輸出的圖像信號D2(DGB2)的關(guān)系為例,對于第二狀態(tài)進(jìn)行說明。
圖24為用于說明拍攝信號DS-J2[pJ](拍攝信號DGS2[m])和圖像信號D2[m](圖像信號DGA2[m]及圖像信號DGB2[m])的關(guān)系的時序圖。如該圖所示,當(dāng)從拍攝部10輸出由拍攝信號DS-J2[m]及DS-J2[m+1]構(gòu)成的拍攝信號(方便起見,開始DGS2[m]的輸出)時,圖像處理部21基于該拍攝信號DGS2[m]開始圖像信號DGA2[m]的生成。并且,圖像處理部21從圖像處理開始在經(jīng)過圖像處理時間UA2[m]之后,完成圖像信號DGA2[m]的生成,將其存儲于行緩存22。
此外,在圖24所示的示例中,設(shè)定圖像信號D2[1]、D2[2]及D2[3]為在時刻Tth以前圖像信號輸出部23輸出的圖像信號D[m],圖像信號D2[4]為在時刻Tth以后圖像信號輸出部23輸出的圖像信號D[m]的情況。
在時刻Tth以前,線L2在時間上領(lǐng)先于線L3(線L4)。也就是說,在時刻Tth以前,在完成由圖像處理部21進(jìn)行的圖像信號DGA2[m]的生成的定時,輸出許可脈沖PL[m]未從輸出控制部31輸出。
因此,圖像信號輸出部23,在時刻Tth以前,在待機(jī)時間UB2[m]內(nèi)等待圖像信號DGB2[m]的輸出直至輸出輸出許可脈沖PL[m]之后的最初的水平掃描期間Hd2[m]為止,之后,在水平掃描期間Hd2[m]內(nèi)輸出圖像信號DGB2[m]。
在圖24所示的示例中,圖像信號輸出部23在生成圖像信號DGA2[1]之后,在待機(jī)時間UB2[1]內(nèi)等待圖像信號DGB2[1]的輸出,之后,在水平掃描期間Hd2[1]內(nèi)輸出圖像信號DGB2[1]。同樣地,圖像信號輸出部23在生成圖像信號DGA2[2]之后,在待機(jī)時間UB2[2]內(nèi)等待圖像信號DGB2[2]的輸出,之后,在水平掃描期間Hd2[2]內(nèi)輸出圖像信號DGB2[2]。
另一方面,在時刻Tth以后,通常線L4在時間上領(lǐng)先于線L2。在線L4在時間上領(lǐng)先于線L2的情況下,當(dāng)圖像處理部21生成圖像信號DGA2[m]時,顯示部40能夠立即(在其后的水平掃描期間Hd內(nèi))顯示該圖像信號DGB2[m]示出的圖像。因此,在線L4在時間上領(lǐng)先于線L2的情況下,在完成由圖像處理部21進(jìn)行的圖像信號DGA2[m]的生成的定時,從輸出控制部31輸出輸出許可脈沖PL[m]。
在圖24所示的示例中,圖像信號輸出部23在生成圖像信號DGA2[3]、輸出輸出許可脈沖PL[3]之后的最初的水平掃描期間Hd2[3]內(nèi),輸出圖像信號DGB2[3]。
并且,在該圖所示的示例中,生成圖像信號DGA2[4]在水平掃描期間Hd2[4]的開始后。因此,圖像信號輸出部23在生成圖像信號DGA2[4]、輸出輸出許可脈沖PL[4]之后的最初水平掃描期間Hd2[5]內(nèi),輸出圖像信號DGB2[4]。
并且,定時生成器32將水平掃描期間Hd2[4]作為無效水平掃描期間Hd-D。
這樣,在圖24所例示的第二狀態(tài)下,在時刻Tth以后,由于產(chǎn)生起因于圖像處理的顯示的延遲,因此,在顯示垂直掃描期間Fd2的垂直有效數(shù)據(jù)期間DVI內(nèi)插入無效水平掃描期間Hd-D。也就是說,在第二狀態(tài)下,顯示垂直掃描期間Fd的時長為標(biāo)準(zhǔn)垂直掃描時間Td及延長垂直掃描時間Tex的合計時長。
并且,從拍攝部10輸出拍攝信號DS2開始至顯示部40顯示圖像信號D2示出的圖像為止的延遲時間ΔT2,在時刻Tth以前為圖像信號生成部20中的圖像處理所需要的時間(圖像處理時間UA)和用于等待顯示部40中的顯示準(zhǔn)備的時間(待機(jī)時間UB)的合計時間,在時刻Tth以后,在線L4在時間上領(lǐng)先于線L2的情況下,僅為圖像信號生成部20中的圖像處理所需要的時間(圖像處理時間UA)。因此,第二狀態(tài)所涉及的延遲時間ΔT2比第一狀態(tài)涉及的延遲時間ΔT1短。
接著,參照圖22及圖25,以在拍攝垂直掃描期間Fs3內(nèi)拍攝部10輸出的拍攝信號DS3(DGS3)和在顯示垂直掃描期間Fd3內(nèi)圖像信號生成部20向顯示部40輸出的圖像信號D3(DGB3)的關(guān)系為例,對于第三狀態(tài)進(jìn)行說明。
圖25為用于說明拍攝信號DS-J3[pJ](拍攝信號DGS3[m])和圖像信號D3[m](圖像信號DGA3[m]及圖像信號DGB3[m])的關(guān)系的時序圖。
如圖25所示,當(dāng)從拍攝部10輸出由拍攝信號DS-J3[m]及DS-J3[m+1]構(gòu)成的拍攝信號(方便起見,開始DGS3[m]的輸出)時,圖像處理部21基于該拍攝信號DGS3[m]開始圖像信號DGA3[m]的生成。并且,圖像處理部21從圖像處理開始在經(jīng)過圖像處理時間UA3[m]之后,完成圖像信號DGA3[m]的生成,將其存儲于行緩存22。
在第三狀態(tài)下,通常線L4在時間上領(lǐng)先于線L2。在線L4在時間上領(lǐng)先于線L2的情況下,當(dāng)圖像處理部21生成圖像信號DGA3[m]時,顯示部40能夠立即(在其后的水平掃描期間Hd內(nèi))顯示該圖像信號DGB3[m]示出的圖像。因此,這種情況下,在完成由圖像處理部21進(jìn)行的圖像信號DGA3[m]的生成的定時,從輸出控制部31輸出輸出許可脈沖PL[m]。
具體而言,在圖25所示的示例中,圖像信號輸出部23在生成圖像信號DGA3[1]、輸出輸出許可脈沖PL[1]之后的最初的水平掃描期間Hd3[3]內(nèi),輸出圖像信號DGB3[1];在生成圖像信號DGA3[2]、輸出輸出許可脈沖PL[2]之后的最初的水平掃描期間Hd3[5]內(nèi),輸出圖像信號DGB3[2];在生成圖像信號DGA3[3]、輸出輸出許可脈沖PL[3]之后的最初的水平掃描期間Hd3[7]內(nèi),輸出圖像信號DGB3[3];在生成圖像信號DGA3[4]、輸出輸出許可脈沖PL[4]之后的最初的水平掃描期間Hd3[9]內(nèi),輸出圖像信號DGB3[4]。此外,這種情況下,定時生成器32雖然開始顯示垂直掃描期間Fd1的垂直有效數(shù)據(jù)期間DVI,但由于未輸出輸出許可脈沖PL[1],因此,在水平掃描期間Hd3[1]、Hd3[2]內(nèi)輸出無效水平掃描期間Hd-D,同樣地,在水平掃描期間Hd3[4]、Hd3[6]及Hd3[8]內(nèi)進(jìn)行輸出無效水平掃描期間Hd-D的處理。
這樣,在圖25所例示的第三狀態(tài)下,由于產(chǎn)生起因于圖像處理的顯示的延遲,因此,在顯示垂直掃描期間Fd3的垂直有效數(shù)據(jù)期間DVI內(nèi)插入無效水平掃描期間Hd-D。其結(jié)果是,在第三狀態(tài)下,以顯示部40能夠進(jìn)行與在拍攝垂直掃描期間Fs內(nèi)輸出的拍攝信號DS同步的顯示的方式,以水平掃描期間Hd的精度調(diào)整顯示垂直掃描期間Fd的時長。也就是說,在第三狀態(tài)下,概略來看的話,以與拍攝垂直掃描期間Fs為大致相等的時間的方式調(diào)整顯示垂直掃描期間Fd。
并且,在第三狀態(tài)下,在線L4在時間上領(lǐng)先于線L2的情況下,在圖像處理部21生成圖像信號D[m]后的最初的水平掃描期間Hd內(nèi),顯示部40顯示圖像信號D[m]示出的圖像。因此,從拍攝部10輸出拍攝信號DS3開始至顯示部40顯示圖像信號D3示出的圖像為止的延遲時間ΔT3,與圖像信號生成部20中的圖像處理所需要的時間(圖像處理時間UA)大致相等。具體而言,在第三狀態(tài)下,以水平掃描期間Hd的精度,使從拍攝部10開始拍攝信號DS-J[pJ]的輸出起至顯示部40開始圖像信號D[m]示出的圖像的顯示止的延遲時間ΔT3和圖像處理部21生成圖像信號D[m]所需要的圖像處理時間UA相等。
因此,在第三狀態(tài)下,能夠以水平掃描期間Hd的精度使得從拍攝部10的拍攝開始至顯示部40的顯示為止的延遲最小化。這種情況下,延遲時間ΔT3比第一狀態(tài)涉及的延遲時間ΔT1短,并且,在第二狀態(tài)涉及的延遲時間ΔT2以下。
并且,如上所述,通過顯示部40顯示一個畫面所需要的時間(周期)比通過拍攝部10拍攝一個畫面所需要的時間(周期)短。因此,即使在車輛用拍攝顯示裝置1以第一狀態(tài)動作,產(chǎn)生顯示部40側(cè)的顯示準(zhǔn)備成為瓶頸的顯示的延遲的情況下,該顯示的延遲在各個拍攝垂直掃描期間Fs逐漸地縮小。也就是說,車輛用拍攝顯示裝置1即使在最初以第一狀態(tài)動作的情況下,最終過渡至以第三狀態(tài)動作,在以第三狀態(tài)的動作開始之后,能夠維持以第三狀態(tài)的動作。其結(jié)果是,能夠以水平掃描期間Hd的精度使顯示部40側(cè)的顯示定時追隨圖像處理部21中的圖像處理的完成定時。
<4、第一實施方式的效果>
在本實施方式涉及的車輛用拍攝顯示裝置1中,在第一條件及第二條件被滿足的情況下,從圖像信號輸出部23輸出圖像信號D[m],在第一條件或者第二條件未被滿足的情況下,通過插入無效水平掃描期間Hd-D,以水平掃描期間Hd的精度調(diào)整圖像信號D[m]從圖像信號輸出部23的輸出定時。也就是說,在本實施方式涉及的車輛用拍攝顯示裝置1中,在圖像處理部21生成圖像信號D[m]之后的最初的水平掃描期間Hd,顯示部40能夠顯示圖像信號D[m]示出的圖像。從而,能夠以水平掃描期間Hd的精度使從拍攝部10的拍攝起至顯示部40的顯示止的延遲最小化。
并且,在本實施方式涉及的車輛用拍攝顯示裝置1中,通過將無效水平掃描期間Hd-D插入垂直有效數(shù)據(jù)期間DVI,在使顯示垂直掃描期間Fd的時長可變的同時,能夠維持與拍攝垂直掃描期間Fs的時長大致相同的狀態(tài)。因此,能夠?qū)崿F(xiàn)抑制了顯示的閃爍的高品質(zhì)的顯示。
并且,根據(jù)本實施方式,例如,即使在存在伴隨圖像處理的方法的變更等的圖像處理時間的變更的情況下、圖像處理時間UA逐行變動的情況下、將拍攝部10交換為幀率不同的拍攝部的情況下、或者將顯示部40交換為幀率不同的顯示部的情況等、拍攝部10及顯示部40的相位差、拍攝部10的幀率以及以顯示部40能夠顯示的最高的幀率中的一部分或者全部變化的情況下,能夠使相位差PD自動地收斂至圖像處理時間UA以下的長度。
并且,在本實施方式中,由于將部分圖像信號D-L示出的圖像、部分圖像信號D-R示出的圖像、部分圖像信號D-C示出的圖像顯示于設(shè)置于一個顯示部40的顯示區(qū)域AD,因此,與和三個部分圖像信號D-J一對一地設(shè)置三個顯示部的情況相比較,能夠抑制車輛用拍攝顯示裝置1的成本較低。
不過,在本實施方式中,存在由于拍攝部10輸出的拍攝信號DS中的拍攝信號DS-L的像素數(shù)、拍攝信號DS-R的像素數(shù)以及拍攝信號DS-C的像素數(shù)的不同(參照圖6)等,左側(cè)圖像用圖像處理部21L生成部分圖像信號D-L[m]的圖像處理所需要的時間、右側(cè)圖像用圖像處理部21R生成部分圖像信號D-R[m]的圖像處理所需要的時間、中央圖像用圖像處理部21C生成部分圖像信號D-C[m]的圖像處理所需要的時間彼此不同的情況。
這種情況下,例如在和三個部分圖像信號D-J一對一地設(shè)置三個顯示部,對各顯示部分別地顯示各部分圖像信號D-J所示的圖像的情況下,在各顯示部的顯示定時不同。這種情況下,會導(dǎo)致作為三個顯示部整體的顯示品質(zhì)的下降。
對于此,在本實施方式涉及的圖像處理電路100中,在示出生成了部分圖像信號D-L[m]、部分圖像信號D-R[m]、部分圖像信號D-C[m]中的全部的第一條件被滿足之后,將上述三個部分圖像信號D-J[m]作為一個圖像信號D[m]輸出。并且,顯示部40在一個顯示區(qū)域AD中,將由該三個部分圖像信號D-J[m]構(gòu)成的圖像信號D[m]示出的圖像在同一水平掃描期間Hd內(nèi)顯示。從而,能夠抑制由于每個顯示區(qū)域AD-J的顯示定時不同導(dǎo)致的顯示區(qū)域AD的整體的顯示品質(zhì)的下降。
<B、第二實施方式>
在上述的第一實施方式中,如圖10所示,通過在垂直有效數(shù)據(jù)期間DVI內(nèi)插入無效水平掃描期間Hd-D,以水平掃描期間Hd的精度調(diào)整圖像信號D[m]的輸出定時,使水平掃描期間Hd的時長為固定長度。
與此對比,在第二實施方式涉及的車輛用拍攝顯示裝置中,在使水平掃描期間Hd的時長為可變長度、以例如顯示點時鐘信號DCLK的周期來調(diào)整圖像信號D[m]的輸出定時方面,與第一實施方式涉及的車輛用拍攝顯示裝置1不同。
以下,參照圖26至圖28,對于第二實施方式涉及的車輛用拍攝顯示裝置進(jìn)行說明。此外,在以下例示的第二實施方式中,有關(guān)作用或功能與第一實施方式同等的要素,沿用在以上的說明中參照的符號,適當(dāng)?shù)厥÷愿鱾€的詳細(xì)的說明(以下,對于說明的變形例也是同樣)。
圖26為用于說明第二實施方式涉及的車輛用拍攝顯示裝置所具備的定時控制部30(輸出控制部31及定時生成器32)生成的輸出控制信號CTR、啟動信號DEnb和顯示水平同步信號DHsync2的關(guān)系的說明圖。
第二實施方式涉及的車輛用拍攝顯示裝置所具備的定時控制部30,除了定時生成器32代替顯示水平同步信號DHsync而生成具有可變的周期的顯示水平同步脈沖PlsH的顯示水平同步信號DHsync2,代替顯示垂直同步信號DVsync而生成具有可變的周期的顯示垂直同步脈沖PlsV的顯示垂直同步信號DVsync2的方面之外,與第一實施方式涉及的車輛用拍攝顯示裝置1(參照圖10)同樣地構(gòu)成。
如圖26所示,第二實施方式涉及的輸出控制部31,與第一實施方式同樣地,在圖像處理判定時刻TA[m]及顯示準(zhǔn)備判定時刻TB[m]中的較晚的時刻(在該圖中,由于采用上述的第二方式,其為圖像處理判定時刻TA[m]),向輸出控制信號CTR設(shè)定輸出許可脈沖PL[m]。
并且,如圖26所示,第二實施方式涉及的定時生成器32從向輸出控制部31輸出的輸出控制信號CTR設(shè)定了輸出許可脈沖PL[m]的定時開始經(jīng)過固定的時長即基準(zhǔn)前沿時間TP之后,輸出顯示水平同步脈沖PlsH作為顯示水平同步信號DHsync2。
因此,在顯示準(zhǔn)備判定時刻TB[m]以前完成圖像信號D[m]的生成、在經(jīng)過圖像信號生成時刻TC[m]的情況下(情況1),水平前沿期間DHf的時長為基準(zhǔn)前沿時間TP。
另一方面,在顯示準(zhǔn)備判定時刻TB[m]以前未完成圖像信號D[m]的生成的情況下,即,圖像信號生成時刻TC[m]在顯示準(zhǔn)備判定時刻TB[m]之后到來的情況下(情況2),水平前沿期間DHf的時長為基準(zhǔn)前沿時間TP和從顯示準(zhǔn)備判定時刻TB[m]至圖像信號生成時刻TC[m](圖像處理判定時刻TA[m])的時長即延長前沿時間TPX的合計值。
這樣,第二實施方式涉及的定時生成器32,輸出控制部31等待判定圖像信號D[m]的輸出準(zhǔn)備完成、輸出輸出許可脈沖PL[m]作為輸出控制信號CTR,從輸出輸出許可脈沖PL[m]起經(jīng)過基準(zhǔn)前沿時間TP之后,使水平掃描期間Hd[m]開始。換言之,第二實施方式涉及的定時生成器32,使水平前沿期間DHf延長至圖像信號D[m]的輸出準(zhǔn)備完成為止。
因此,圖像信號輸出部23即使在圖像處理部21中的圖像信號D[m]的圖像處理延遲的情況下,也能夠在水平掃描期間Hd內(nèi)輸出圖像信號D[m]。這種情況下,從拍攝部10輸出拍攝信號DGS[m]起至顯示部40顯示基于圖像信號D[m]的圖像止的延遲時間以顯示點時鐘信號DCLK的精度被最小化。
圖27為用于說明顯示部40中的顯示準(zhǔn)備成為瓶頸的顯示的延遲被消除的狀態(tài)(即,圖24所說明的第二狀態(tài))下的、第二實施方式涉及的車輛用拍攝顯示裝置的動作的時序圖。并且,圖28用于說明圖像處理部21的圖像處理成為瓶頸而顯示上產(chǎn)生延遲的狀態(tài)(即,圖25所說明的第三狀態(tài))下的、第二實施方式涉及的車輛用拍攝顯示裝置的動作的時序圖。此外,在圖27及圖28中,沿用圖22至圖25說明用的符號。
在圖27中,例如在水平掃描期間Hd2[2]中的啟動信號DEnb的下降的定時以前生成圖像信號DGA2[3]。因此,在水平掃描期間Hd2[2]中的啟動信號DEnb的下降的定時輸出輸出許可脈沖PL[3]。這種情況下,水平掃描期間Hd2[2]的水平前沿期間DHf的時長為基準(zhǔn)前沿時間TP。
另一方面,在該圖所示的示例中,生成圖像信號DGA2[4]的定時在水平掃描期間Hd2[3]中的啟動信號DEnb的下降的定時之后。因此,在生成圖像信號DGA2[4]的定時輸出輸出許可脈沖PL[4]。這種情況下,水平掃描期間Hd2[3]的水平前沿期間DHf的時長為基準(zhǔn)前沿時間TP和延長前沿時間TPX(從水平掃描期間Hd2[3]中的啟動信號DEnb的下降的定時至輸出輸出許可脈沖PL[4]的時間)的合計的時長。也就是說,在顯示部40中的顯示準(zhǔn)備成為瓶頸的顯示的延遲被消除的時刻Tth以后,根據(jù)圖像處理的狀況延長水平掃描期間Hd。
此外,在圖28中,生成圖像信號DGA[3]的定時在水平掃描期間Hd3[m-1]中的啟動信號DEnb下降的定時之后。因此,在生成圖像信號DGA3[m]的定時,輸出輸出許可脈沖PL[m]。這種情況下,水平掃描期間Hd3[m]的水平前沿期間DHf的時長為基準(zhǔn)前沿時間TP和延長前沿時間TPX(從水平掃描期間Hd3[m]中的啟動信號DEnb的下降的定時至輸出輸出許可脈沖PL[m]的時間)的合計的時長。也就是說,在圖像處理部21的圖像處理成為瓶頸而在顯示上產(chǎn)生延遲的狀態(tài)(第三狀態(tài))下,根據(jù)圖像處理的狀況延長水平掃描期間Hd。
此外,如圖27及圖28所明示的,在第二實施方式中,不存在無效水平掃描期間Hd-D,全部的水平掃描期間Hd為有效水平掃描期間Hd-A。
此外,在第二實施方式中,水平掃描期間Hd例如以顯示點時鐘信號DCLK的單位可變,因此,顯示垂直掃描期間Fd也具有可變的時長。
<C、變形例>
以上的各方式能夠進(jìn)行多樣的變形。具體的變形的方式例示如下。從以下的例示中任意選擇的兩種以上的方式,在相互不矛盾的范圍內(nèi)能夠適當(dāng)?shù)亟M合。此外,在以下說明的變形例中,為了避免說明的重復(fù),對于與上述的本說明的共通點省略說明。
<變形例1>
在上述的實施方式中,例示了HUD作為顯示部40,但本發(fā)明不限于這種方式,也可以為背投型投影儀、液晶顯示裝置、OLED(organic light emitting diode,有機(jī)發(fā)光二極管)顯示裝置、等離子顯示裝置。
<變形例2>
在上述的實施方式及變形例中,圖像處理電路100和顯示部40之間的數(shù)據(jù)傳送通過低電壓差動(LVDS)的串行接口進(jìn)行,也可以通過并行接口進(jìn)行。
<變形例3>
在上述的實施方式及變形例中,由拍攝垂直同步信號SVsync規(guī)定的拍攝垂直掃描期間Fs具有比由顯示垂直同步信號DVsync(或者DVsync2)規(guī)定的顯示垂直掃描期間Fd以上的時長,但本發(fā)明不限于此方式,拍攝垂直掃描期間Fs也可以具有比顯示垂直掃描期間Fd短的時長。
<變形例4>
在上述的實施方式及變形例中,輸出控制部31基于圖像處理部21輸出的寫入完成信號PtA和圖像信號輸出部23輸出的輸出完成信號PtB,判定輸出圖像信號D[m]的準(zhǔn)備是否完成,但本發(fā)明不限于此方式,輸出控制部31也可以周期性地參照行緩存22,通過判定圖像信號D[m]記錄于行緩存22以及從行緩存22讀取了圖像信號D[m-1]來判定輸出圖像信號D[m]的準(zhǔn)備是否完成。
<變形例5>
在上述的實施方式及變形例中,例示了圖像處理時間UA[m]逐行變動的情況進(jìn)行說明,但本發(fā)明不限于此方式,圖像處理時間UA[m]也可以在各行間相同。
<變形例6>
在上述的實施方式及變形例中,例示了拍攝部10具備三個圖像傳感器12J(12L、12C、12R)的情況進(jìn)行說明,但本發(fā)明不限于此方式,拍攝部10只要具備兩個以上的圖像傳感器12J即可。
這種情況下,圖像處理部21具有與兩個以上的圖像傳感器12J一一對應(yīng)的部分圖像處理部21J即可,并且,顯示區(qū)域AD只要能夠?qū)D像顯示于與兩個以上的圖像傳感器12J一一對應(yīng)的兩個以上的顯示區(qū)域AD-J即可。
并且,這種情況下,表示作為顯示對象行的第m行的圖像信號D[m]的圖像處理完成的第一條件,設(shè)為在兩個以上的各部分圖像處理部21J輸出的部分寫入完成信號PtA-J示出的值的最小值ma為顯示對象行的行編號m以上的情況下被滿足即可。也就是說,“圖像處理行信息”為表示顯示兩個以上的部分圖像處理部21J生成的部分圖像信號D-J[m]的行中的最后顯示圖像的行的信息。
<變形例7>
在上述的實施方式及變形例中,對于在圖像處理部21中,執(zhí)行關(guān)于左右方向?qū)⒔咏囕vα的區(qū)域與遠(yuǎn)離車輛的區(qū)域相比較而相對地放大的水平方向縮小/放大處理和關(guān)于上下方向?qū)⒅醒氲膮^(qū)域與上或者下的區(qū)域相比較而相對地放大的垂直方向縮小/放大處理的雙方的方式進(jìn)行了說明,但既可以執(zhí)行其中一方,也可以雙方均不執(zhí)行。
并且,關(guān)于左右方向?qū)⒔咏囕vα的區(qū)域與遠(yuǎn)離車輛α的區(qū)域相比較而相對地放大的水平方向縮小/放大處理為通過縮小遠(yuǎn)離車輛α的區(qū)域的處理或者放大接近車體的區(qū)域的處理的至少一者而能夠?qū)崿F(xiàn)的處理。也就是說,在放大接近車體的區(qū)域的情況下,縮小遠(yuǎn)離車體的區(qū)域的處理不是必須的;在縮小遠(yuǎn)離車體的區(qū)域的情況下,放大接近車體的區(qū)域的處理不是必須的。同樣地,關(guān)于上下方向?qū)⒅醒氲膮^(qū)域與上或者下的區(qū)域相比較而相對地放大的垂直方向縮小/放大處理為通過放大中央的區(qū)域的處理、縮小上區(qū)域的處理或者縮小下區(qū)域的處理的至少一者而能夠?qū)崿F(xiàn)的處理。也就是說,在放大中央的區(qū)域的情況下,縮小上或者下區(qū)域的處理不是必須的;在縮小上或者下區(qū)域的情況下,放大中央的區(qū)域的處理不是必須的。
此外,在縮小/放大處理中,能夠適當(dāng)?shù)刈兏鲄^(qū)域LR1~LR6(圖16A)或各區(qū)域BR1~BR9(圖19)間的比率、區(qū)分的區(qū)域的個數(shù)以及其放大率或縮小率。
<變形例8>
在上述的實施方式及變形例中,在修整處理之后執(zhí)行鏡像生成處理,之后執(zhí)行水平方向縮小/放大處理以及垂直方向縮小/放大處理,但本發(fā)明不限于此,能夠適當(dāng)變更其執(zhí)行順序。并且,在上述的實施方式中,在一經(jīng)配合顯示區(qū)域AD-J的大小而放大在修整處理中修整的修整區(qū)域AreaT-J的圖像之后,執(zhí)行左右反轉(zhuǎn)處理、水平方向縮小/放大處理以及垂直方向縮小/放大處理,但也可以不放大經(jīng)過修整的圖像而執(zhí)行左右反轉(zhuǎn)處理,之后在水平方向縮小/放大處理以及垂直方向縮小/放大處理中執(zhí)行為了配合顯示區(qū)域AD-J的大小的放大處理。通過這樣構(gòu)成,能夠縮短圖像處理時間。
<變形例9>
在上述的實施方式及變形例中,在圖3A及圖3B中示出了顯示于左側(cè)顯示區(qū)域AD-L的圖像被放大顯示的放大顯示區(qū)域Area-L、顯示于中央顯示區(qū)域AD-C的圖像被放大顯示的放大顯示區(qū)域Area-C以及顯示于右側(cè)顯示區(qū)域AD-R的圖像被放大顯示的放大顯示區(qū)域Area-R的配置例,上述區(qū)域在無損本發(fā)明的主旨的范圍內(nèi)能夠適當(dāng)變更。
<變形例10>
在夜間行駛中,存在由于反映于側(cè)方后視鏡或者后視鏡的圖像的亮度不足而駕駛者無法察覺危險的情況。因此,也可以在上述的實施方式及變形例中所說明的圖像處理的基礎(chǔ)上,圖像處理部21執(zhí)行校正基于拍攝信號DS的圖像的亮度的處理。通過執(zhí)行提高基于拍攝信號DS的圖像的亮度的校正,即使為在灰暗的地方拍攝的圖像,也能夠為車輛的安全行駛顯示更為有用的車輛外部的圖像。
<變形例11>
在上述的實施方式及變形例中,作為“拍攝顯示裝置”例示了搭載于車輛α的車輛用拍攝顯示裝置,但“拍攝顯示裝置”不限于搭載于車輛的車輛用的拍攝顯示裝置。例如,可以用于投影儀裝置、HUD(平視顯示器)、HMD(頭戴顯示器)等的顯示裝置。
符號說明
1 車輛用拍攝顯示裝置、10 拍攝部、12 圖像傳感器、12L 左后方用的圖像傳感器、12C 中央后方用的圖像傳感器、12R 右側(cè)后方用的圖像傳感器、13 定時生成器、20 圖像信號生成部、21 圖像處理部、21L 左側(cè)圖像用圖像處理部、21C 中央圖像用圖像處理部、21R 右側(cè)圖像用圖像處理部、22 行緩存、23 圖像信號輸出部、30 定時控制部、31 輸出控制部、32 定時生成器、33 參數(shù)發(fā)送部、40 顯示部、41 控制器、42 液晶面板、50 控制部、60 操作部、100 圖像處理電路、AD 顯示區(qū)域、AD-L左側(cè)顯示區(qū)域、AD-C 中央顯示區(qū)域、AD-R 右側(cè)顯示區(qū)域AD-R。