專(zhuān)利名稱(chēng)::圖像合成裝置、方法、程序和記錄該程序的記錄介質(zhì)的制作方法
技術(shù)領(lǐng)域:
:本發(fā)明涉及一種裝置、方法、程序和程序介質(zhì),可以將分別拍攝的多個(gè)被攝體同時(shí)存在地合成在一張圖像中,而且在這時(shí)進(jìn)行輔助,使得被攝體之間可以不重疊地拍攝/合成。
背景技術(shù):
:在膠片照相機(jī)和數(shù)字照相機(jī)中,例如在兩個(gè)人并排照相時(shí),只能使用三角架并用自動(dòng)拍照器拍攝,或者請(qǐng)過(guò)路的人等幫助拍攝。但是,帶著三角架行走很困難,而且,存在請(qǐng)求不了解的人也會(huì)引起注意的問(wèn)題。對(duì)此,在特開(kāi)2000-316125號(hào)公報(bào)(2000年11月14日公開(kāi))中,公開(kāi)了一種圖像合成裝置,該裝置從在同一場(chǎng)所拍攝的多張圖像中提取被攝體的區(qū)域,通過(guò)將被攝體的圖像與背景合成或不合成,可以合成能夠使僅為背景的圖像和其它圖像的被攝體同時(shí)存在的圖像。而且,在特開(kāi)2001-333327號(hào)公報(bào)(2001年11月30日公開(kāi))中,公開(kāi)了一種數(shù)字照相機(jī)和圖像處理方法,可以將拍攝完成的參照?qǐng)D像中的被指定區(qū)域(被攝體區(qū)域)重疊到拍攝中的圖像上,使其在監(jiān)視器畫(huà)面或者取景器內(nèi)顯示,同時(shí)可以生成將被攝體區(qū)域內(nèi)的被攝體合成到拍攝中的圖像上的合成圖像的圖像數(shù)據(jù)。但是,在這些現(xiàn)有技術(shù)中,產(chǎn)生兩大問(wèn)題。第一個(gè)問(wèn)題,僅簡(jiǎn)單地剪切出參照?qǐng)D像中的被攝體區(qū)域后與其它圖像重合,在被攝體區(qū)域的指定不正確的情況下,有以下幾點(diǎn)情況(1)合成結(jié)果的被攝體欠缺,(2)無(wú)用的部分被合成,(3)即使指定正確,合成邊界也微妙地出現(xiàn)不自然。例如,在情況(1)的、與實(shí)際的被攝體區(qū)域相比,參照?qǐng)D像中指定的被攝體區(qū)域(以下稱(chēng)為指定被攝體區(qū)域)欠缺的情況下,即使在合成圖像上,該被攝體也欠缺,因此,產(chǎn)生明顯的不自然。而且,在情況(2)的、與實(shí)際的被攝體區(qū)域相比,參照?qǐng)D像中指定的被攝體區(qū)域過(guò)大的情況下,還包含了參照?qǐng)D像上的被攝體周?chē)谋尘?。上述的“無(wú)用的部分”是指該被包含的背景部分。在特開(kāi)2001-333327號(hào)公報(bào)中說(shuō)明的合成方法中,有時(shí)也存在在不同的場(chǎng)所對(duì)參照?qǐng)D像和拍攝圖像進(jìn)行拍攝的情況,所以有時(shí)指定被攝體區(qū)域中包含的背景圖像(參照?qǐng)D像上的背景)和合成圖像上的周?chē)谋尘?拍攝圖像上的背景)不同。這時(shí),在合成圖像上,在指定被攝體區(qū)域背景突然改變,所以變成不自然的合成圖像。假設(shè),即使在同一場(chǎng)所,同一背景下進(jìn)行拍攝,在特開(kāi)2001-333327號(hào)公報(bào)中說(shuō)明的合成方法中,由于可以將參照?qǐng)D像中的指定被攝體區(qū)域配置或合成在拍攝圖像上的任意的位置,所以包含于被攝體區(qū)域中的背景圖像(參照?qǐng)D像上的背景)和拍攝圖像上的合成位置周?chē)谋尘?拍攝圖像的背景)不限于相同位置的背景,所以合成結(jié)果同樣變得不自然。如特開(kāi)2001-333327號(hào)公報(bào)那樣,用戶(hù)使用圖板(tablet)等對(duì)參照?qǐng)D像中的指定被攝體區(qū)域指定其輪廓的情況下,因?yàn)槿藶榕袛嗔溯喞院筮M(jìn)行指定,所以指定被攝體區(qū)域的指定沒(méi)有大的差錯(cuò),但是有可能產(chǎn)生1、2像素乃至數(shù)像素左右的誤差。如果用人手正確地指定1像素單位,則需要大量的勞動(dòng)。而且,在情況(3)的、即使指定正確,合成邊界也微妙地變得不自然的情況下,即使假設(shè)情況(1)、(2)那樣,指定被攝體區(qū)域在像素單位下正確,作為被攝體區(qū)域的合成結(jié)果,也包含其輪廓的像素與拍攝圖像的背景不融合的情況。這是由于使用像素單位進(jìn)行指定,指定被攝體區(qū)域的輪廓精度不夠,實(shí)際上,如果不是使用比1像素更精細(xì)的單位則不能表現(xiàn)。即,輪廓的像素,原本被攝體部分為(0.X)像素,背景部分為(1.0-0.X)像素,作為像素值,被攝體部分的像素值和背景部分的像素值按照比例而成為足夠的值,即被平均的值。因此,被攝體部分和背景部分的比例由于不能從被平均的像素值反推,所以結(jié)果是在合成時(shí)不能以像素單位進(jìn)行操作。其結(jié)果,在合成圖像的輪廓的像素值中,包含參照?qǐng)D像的背景的值,不能與周?chē)呐臄z圖像的背景融合。以上的(1)~(3)的問(wèn)題,即使通過(guò)特開(kāi)2000-316125號(hào)公報(bào)中公開(kāi)的合成方法也不能解決。在該公報(bào)中,公開(kāi)了在將同一場(chǎng)所或者相互接近的場(chǎng)所拍攝的多張圖像重合之前,進(jìn)行位置匹配的內(nèi)容。但是,例如在使用相同的背景,兩個(gè)人交替拍攝對(duì)方的情況下,由于照相機(jī)的方向不同,從而不僅拍攝的背景的位置移動(dòng),而且產(chǎn)生由于照相機(jī)的傾斜造成的圖像的旋轉(zhuǎn)、由于拍攝者和被攝體的距離的錯(cuò)位造成的圖像的擴(kuò)大縮小、或者由于拍攝者的身高的不同導(dǎo)致照相機(jī)的仰角變化,從而造成圖像的失真。因此,僅通過(guò)簡(jiǎn)單地進(jìn)行圖像的位置的匹配而重合,不能解決上述(1)~(3)的問(wèn)題,合成結(jié)果變得不自然。第二個(gè)問(wèn)題是,如果進(jìn)行拍攝的目的是將參照?qǐng)D像中的被攝體區(qū)域和包含其它的被攝體的拍攝圖像進(jìn)行合成,則如果不注意拍攝時(shí)被攝體的位置,則各個(gè)圖像中的被攝體的區(qū)域在合成圖像上相互重合,存在某些被攝體從合成圖像中露出的情況。對(duì)于該問(wèn)題,在特開(kāi)2000-316125號(hào)公報(bào)中,僅主要對(duì)使用了拍攝完成的圖像的合成方法進(jìn)行了說(shuō)明,沒(méi)有觸及防止被攝體之間的重疊和從合成圖像中露出的拍攝方法等。而且,如果按照特開(kāi)2001-333327號(hào)公報(bào)的圖像處理方法,可以將參照?qǐng)D像中的被攝體區(qū)域(用戶(hù)使用圖板等指定輪廓)和拍攝中的圖像重疊后顯示,所以關(guān)于合成時(shí)的參照?qǐng)D像中的被攝體區(qū)域和拍攝中的圖像中的被攝體區(qū)域,在拍攝時(shí)可以知道被攝體之間是否重疊,或者被攝體區(qū)域是否從合成圖像中露出。從被攝體重疊或者露出時(shí),可以通過(guò)移動(dòng)被攝體或者照相機(jī)來(lái)變更拍攝中的圖像中的被攝體的位置,可以拍攝/記錄不產(chǎn)生重疊或者露出的圖像。但是,對(duì)于被攝體區(qū)域的識(shí)別處理、被攝體區(qū)域之間是否重疊、從被攝體區(qū)域是否從合成圖像露出的判斷處理等高度的處理,存在必須由人自己處理的不便。而且,也有參照?qǐng)D像中的被攝體的區(qū)域必須由手指定的不便。本發(fā)明是鑒于上述的課題而提出的,第一目的是提供一種進(jìn)行使合成結(jié)果不會(huì)變得不自然的合成的圖像合成裝置(圖像合成方法),第二目的是提供一種圖像合成裝置(圖像合成方法),在將分別拍攝的多個(gè)被攝體可同時(shí)存在地合成到一張圖像時(shí),對(duì)拍攝進(jìn)行輔助,使得合成圖像上被攝體之間不產(chǎn)生重疊。
發(fā)明內(nèi)容為達(dá)到上述的目的,本發(fā)明的第一圖像合成裝置包括背景修正量計(jì)算部件,對(duì)作為背景的圖像的背景圖像、第一被攝體圖像和第二被攝體圖像之間的背景的相對(duì)移動(dòng)量、旋轉(zhuǎn)量、放大縮小率、失真修正量的其中一個(gè)或者組合構(gòu)成的修正量進(jìn)行計(jì)算,或者對(duì)計(jì)算并存儲(chǔ)的修正量進(jìn)行讀取,所述第一被攝體圖像包括所述背景圖像的至少一部分和第一被攝體,所述第二被攝體圖像包括背景圖像的至少一部分和第二被攝體;以及重疊圖像生成部件,將背景圖像、第一被攝體圖像、第二被攝體圖像的其中之一作為基準(zhǔn)圖像,用由所述背景修正量計(jì)算部件得到的修正量對(duì)另外兩個(gè)圖像進(jìn)行修正,使得被攝體以外的背景的至少一部分重疊,并生成將基準(zhǔn)圖像和修正后的另外一個(gè)或者兩個(gè)圖像重疊的圖像。在上述的結(jié)構(gòu)中,“第一被攝體”、“第二被攝體”是要進(jìn)行合成的對(duì)象,一般多為人物,有時(shí)也為物等。嚴(yán)格來(lái)說(shuō),“第一被攝體”是在背景圖像和第一被攝體圖像之間,背景部分至少一部分重疊時(shí),像素值不一致的區(qū)域,即有變化的區(qū)域都可能成為“第一被攝體的區(qū)域”。因此,以通過(guò)與第一被攝體圖像的比較處理,提取“第一被攝體的區(qū)域”為目的而取得背景圖像。(而且,在第一被攝體圖像和第二被攝體圖像的兩圖像之間不存在重疊的背景部分的情況下,也有以填補(bǔ)該不存在的背景部分為目的而使用背景圖像的情況。)但是,在背景部分,因?yàn)榧词故菢?shù)的葉子因風(fēng)而搖動(dòng)等的小變化,也成為有變化的區(qū)域,所以在某種程度上忽視小的變化和小的區(qū)域,可以確實(shí)地提取“第一被攝體的區(qū)域”,可以得到更自然的重疊圖像。對(duì)于“第二被攝體”也一樣。而且,在例如被攝體為人物的情況下,被攝體不限于必須是一個(gè)人,有時(shí)也將多個(gè)人物匯總成為“第一被攝體”和“第二被攝體”。即,即使是多個(gè)人,也作為合成處理的單位進(jìn)行匯總處理,成為一個(gè)“被攝體”。而且,不僅是人物,對(duì)物體也一樣。而且,被攝體不限于必須是一個(gè)區(qū)域,也有多個(gè)區(qū)域構(gòu)成的情況?!暗谝弧?、“第二”是為了簡(jiǎn)單區(qū)別不同幀的圖像而賦予的,不是表述拍攝的順序等,本質(zhì)上沒(méi)有差別。而且,例如人物拿著衣服或者物品等,即使不出現(xiàn)在“不包含第一、第二被攝體的僅為背景的圖像”中,它們也被包含在被攝體中。“第一被攝體圖像”、“第二被攝體圖像”是包含上述的“第一被攝體”、“第二被攝體”的不同的圖像,一般來(lái)說(shuō),是用照相機(jī)等拍攝了該被攝體的圖像。但是,在圖像上僅拍攝被攝體,與背景圖像共用的背景部分完全沒(méi)有拍攝的情況下,不適合合成,所以需要對(duì)至少一部分與背景圖像共用的背景部分進(jìn)行拍攝。而且,通常,第一被攝體圖像、第二被攝體圖像使用相同背景,即,使照相機(jī)不動(dòng)進(jìn)行拍攝的情況較多。而且,拍攝被攝體的照相機(jī)不必須是將圖像作為靜止圖像記錄的靜止照相機(jī),也可以是將圖像作為活動(dòng)圖像記錄的視頻照相機(jī)。在視頻照相機(jī)生成作為靜止圖像的重疊圖像時(shí),將構(gòu)成拍攝的活動(dòng)圖像的一幀圖像作為被攝體圖像取出,用于合成。所謂“背景”是從風(fēng)景中除去了“第一被攝體”、“第二被攝體”的部分。所謂“背景圖像”是至少包含一部分第一被攝體圖像、第二被攝體圖像各自的背景部分的圖像的圖像,是不拍攝第一被攝體圖像、第二被攝體圖像的圖像。通常,使用與第一被攝體圖像、第二被攝體圖像相同的背景,即,多為使照相機(jī)不移動(dòng),而使第一被攝體、第二被攝體從照相機(jī)的前面移出后進(jìn)行拍攝的情況。所謂“第一、第二被攝體以外的背景”是從第一被攝體圖像、第二被攝體圖像中除去第一被攝體的區(qū)域、第二被攝體的區(qū)域后剩余的部分。所謂“移動(dòng)量”是使其它圖像平行移動(dòng)到基準(zhǔn)圖像和背景的至少一部分重疊的位置的量,也可以指旋轉(zhuǎn)和擴(kuò)大縮小的中心的對(duì)應(yīng)點(diǎn)的移動(dòng)量。所謂“失真修正量”是在照相機(jī)和鏡頭的位置和方向改變所造成的拍攝圖像的變化中,用于對(duì)用平行移動(dòng)、旋轉(zhuǎn)、擴(kuò)大縮小不能修正的剩余的變化進(jìn)行修正的修正量。其中也包含例如在對(duì)拍攝高的建筑時(shí),由于透視法的效果,上面的部分即使是相同的尺寸也拍攝得小的被稱(chēng)為“余勢(shì)”等的效果等進(jìn)行修正的情況等。“重疊圖像生成部件”雖然生成重疊圖像,但不必作為一個(gè)圖像數(shù)據(jù)生成,與其它部件的圖像數(shù)據(jù)匹配合成觀察也可以。例如,在顯示部件上顯示某圖像時(shí),如果以在該圖像上覆寫(xiě)的形式顯示另一圖像的一部分,則在視覺(jué)上由兩個(gè)圖像數(shù)據(jù)生成一個(gè)合成圖像數(shù)據(jù),看到可以顯示該合成圖像數(shù)據(jù),但是實(shí)際上,僅分別存在基于兩個(gè)圖像數(shù)據(jù)的圖像,不存在合成圖像數(shù)據(jù)。在背景修正量計(jì)算部件的修正量計(jì)算中,例如可以使用塊匹配等對(duì)兩個(gè)圖像間的部分位置的對(duì)應(yīng)進(jìn)行計(jì)算的方法。如果例如這些方法等,求出第一被攝體圖像、第二被攝體圖像、背景圖像中的兩個(gè)圖像間的對(duì)應(yīng),則如果背景部分中存在一致的部分,則可以計(jì)算出該部分位置上的對(duì)應(yīng)。由于被攝體部分不存在于另一圖像中,所以該部分得到錯(cuò)誤地對(duì)應(yīng)。使用統(tǒng)計(jì)的方法等,從背景部分的正確的對(duì)應(yīng)和被攝體部分的錯(cuò)誤的對(duì)應(yīng)中,僅得到背景部分的正確的對(duì)應(yīng)。根據(jù)剩余的正確的對(duì)應(yīng),可以計(jì)算背景部分的相對(duì)移動(dòng)量、旋轉(zhuǎn)量、擴(kuò)大縮小率、失真修正量的任意一個(gè)或其組合所構(gòu)成的修正量。重疊圖像生成部件根據(jù)背景修正量計(jì)算部件計(jì)算的修正量,與基準(zhǔn)圖像匹配后做成修正的圖像,使得另外兩個(gè)圖像背景部分一致。求出的修正量意味著兩個(gè)圖像間的關(guān)系,例如,如果分別知道A和B的關(guān)系,B和C的關(guān)系,則也可以知道A和C的關(guān)系,因此,即使將三個(gè)圖像中的任意一個(gè)選為基準(zhǔn)圖像,通過(guò)背景修正量計(jì)算部件,可以計(jì)算出該圖像和其它兩個(gè)圖像的關(guān)系作為修正量。接著,通過(guò)重疊圖像生成部件生成將修正的一個(gè)或者兩個(gè)圖像重疊在基準(zhǔn)圖像上的圖像。作為圖像的重疊方法,可以將三個(gè)圖像對(duì)應(yīng)位置的像素的圖像數(shù)據(jù)以在0~1的范圍內(nèi)比例分配的任意比率混合。例如,在將背景圖像的比率設(shè)為0,將第一被攝體圖像的比率設(shè)為1,將第二被攝體圖像的比率設(shè)為0,則僅將第一被攝體圖像的圖像數(shù)據(jù)寫(xiě)入該像素中。并且,在將三個(gè)圖像的混合比率設(shè)為1∶1∶1時(shí),將三個(gè)圖像的圖像數(shù)據(jù)均等合成后的圖像數(shù)據(jù)寫(xiě)入該像素中。而且,如何設(shè)定混合比率,作為本發(fā)明并非實(shí)質(zhì)的內(nèi)容,在希望顯示乃至輸出什么樣的重疊圖像的用戶(hù)的目的之后。通過(guò)以上的處理,作為本發(fā)明的重要的特征,可以在使背景部分一致的狀態(tài)下,將第一被攝體和第二被攝體合成到一張圖像上。而且,在將背景圖像設(shè)為基準(zhǔn)圖像的情況下,從修正后的第一被攝體圖像和修正后的第二被攝體圖像中提取出的至少“第一被攝體的區(qū)域”和“第二被攝體的區(qū)域”被合成到背景圖像中。對(duì)于“第一被攝體的區(qū)域”和“第二被攝體的區(qū)域”以外的各背景部分,如前所述,可以用規(guī)定的比率合成在背景圖像的對(duì)應(yīng)像素中,也可以全部不合成。而且,在將第一被攝體圖像和第二被攝體圖像的一個(gè)作為基準(zhǔn)圖像的情況下,通過(guò)與修正后的背景圖像的比較處理,可以通過(guò)僅將從修正后的另一個(gè)被攝體圖像中提取的被攝體的區(qū)域合成到基準(zhǔn)圖像中,生成重疊圖像,也可以將背景圖像的對(duì)應(yīng)像素以0~1之間的適當(dāng)比率合成到基準(zhǔn)圖像的背景部分中。這樣,對(duì)于將基準(zhǔn)圖像和其它修正后的一個(gè)圖像重疊還是與兩個(gè)重疊則有各種變化。如上所述,由于可以修正兩個(gè)圖像之間的背景的偏差從而進(jìn)行合成,由此,除了被攝體等明顯不同的區(qū)域以外的部分(即背景部分),不論怎樣重疊,合成結(jié)果也基本一致,具有合成結(jié)果不會(huì)不自然的效果。例如,在僅主要將被攝體區(qū)域進(jìn)行合成時(shí),即使被攝體區(qū)域的提取和指定多少有些不正確,但是由于被攝體區(qū)域周?chē)谋尘安糠峙c合成目標(biāo)的圖像的部分沒(méi)有偏差或者失真,所以被合成為不正確的區(qū)域的內(nèi)外連續(xù)的風(fēng)景,產(chǎn)生減少視覺(jué)上的不自然的效果。即使被攝體區(qū)域的提取以像素為單位是正確的,但如課題項(xiàng)目中說(shuō)明的那樣,在現(xiàn)有技術(shù)的方法中,產(chǎn)生比1像素更精細(xì)的水平上的不自然,但是在本發(fā)明中,由于匹配背景部分后進(jìn)行合成,所以輪廓的像素周?chē)南袼厥窍嗤尘安糠值奈恢玫南袼兀约词购铣梢沧兊米匀?。這樣,產(chǎn)生防止或者減輕在比1個(gè)像素更精細(xì)的水平上的不自然的效果。而且,由于對(duì)背景的偏差進(jìn)行修正后進(jìn)行合成,所以在拍攝背景圖像和第一/第二被攝體圖像時(shí),不需要用三角架等固定照相機(jī),只要用手等對(duì)齊大致的方向就可以,產(chǎn)生拍攝變得簡(jiǎn)單的效果。而且,在不使用背景圖像,僅用第一/第二被攝體圖像進(jìn)行處理時(shí),在第一被攝體圖像和第二被攝體圖像的背景部分中沒(méi)有重疊(一致部分)的情況下,用背景修正量計(jì)算部件不能對(duì)修正量進(jìn)行計(jì)算。在使用背景圖像的情況下,即使第一被攝體圖像和第二被攝體圖像之間背景部分中不重疊,但只要背景圖像和第一被攝體圖像的背景部分中存在重疊,背景圖像和第二被攝體圖像的背景部分中存在重疊,則可以對(duì)第一被攝體圖像和第二被攝體圖像之間的修正量進(jìn)行計(jì)算。由此,即使漏掉第一被攝體圖像的背景部分和第二被攝體圖像的背景部分之間的背景,只要背景圖像的背景插入該漏掉的背景部分,則可以產(chǎn)生能夠?qū)⒃诒尘安糠种袥](méi)有重疊的第一被攝體圖像和第二被攝體圖像以背景連接的狀態(tài)進(jìn)行合成的效果。而且,在利用背景圖像計(jì)算出第一被攝體圖像和第二被攝體圖像之間的修正量以后,從背景圖像、第一被攝體圖像以及第二被攝體圖像中分別取出必要的背景部分,可以做成在通過(guò)修正相互不足的部分而連接成的背景上,合成了第一被攝體和第二被攝體的重疊圖像。而且,本發(fā)明的第一圖像合成裝置可以是以下結(jié)構(gòu)包括從基準(zhǔn)圖像和修正后的另一個(gè)或另兩個(gè)圖像之間的差分圖像中提取第一被攝體的區(qū)域的第二被攝體的區(qū)域的被攝體區(qū)域提取部件,所述重疊圖像生成部件將基準(zhǔn)圖像和由所述被攝體區(qū)域提取部件得到的區(qū)域內(nèi)的修正后的另一個(gè)或者另兩個(gè)圖像重疊,以取代將基準(zhǔn)圖像和修正后的另一個(gè)或者另兩個(gè)圖像重疊。這里,所謂“被攝體的區(qū)域”是用與背景分離的邊界分割被攝體的區(qū)域。例如,人物持有衣服或者物品等,如果在背景圖像中不顯現(xiàn)它們,則它們也是被攝體,被包含在被攝體區(qū)域中。而且,被攝體的區(qū)域并不限于必須是連接的一塊區(qū)域,有時(shí)也分為多個(gè)區(qū)域。所謂“將由所述被攝體區(qū)域提取部件得到的區(qū)域的…圖像重疊”不是說(shuō)除了該區(qū)域以外不生成任何圖像,而是意味著除此以外的區(qū)域埋入在基準(zhǔn)圖像等中。由于進(jìn)行修正而使背景部分一致,所以作為差分表現(xiàn)的主要是被攝體部分。因此,可以通過(guò)被攝體區(qū)域提取部件提取包含于差分圖像中的被攝體區(qū)域。這時(shí),如果實(shí)施從差分圖像中除去干擾等(例如,除去差分的像素值小于或等于閾值的部分)等處理,則可以更正確地提取被攝體區(qū)域。在生成重疊圖像時(shí),決定各像素位置的像素值,但僅在該像素位置處于由被攝體區(qū)域提取部件得到的被攝體區(qū)域內(nèi)的情況下,使被攝體的圖像重疊。由此,產(chǎn)生可以在基準(zhǔn)圖像上或者被修正的背景圖像上,僅合成被修正的被攝體圖像中的被攝體區(qū)域的效果?;蛘?,也可以在在被修正的被攝體圖像上,被修正的背景圖像上,僅合成基準(zhǔn)圖像中的被攝體區(qū)域,或在被修正的背景圖像上合成基準(zhǔn)圖中的被攝體區(qū)域和被修正的被攝體圖像中的被攝體區(qū)域,或在作為基準(zhǔn)圖像的背景圖像上合成被修正的被攝體圖像中的被攝體區(qū)域。而且,還有以下效果如果在對(duì)被攝體區(qū)域的透過(guò)率進(jìn)行改變等后進(jìn)行合成,則可以使用戶(hù)容易知道要將哪個(gè)區(qū)域進(jìn)行合成,如果被攝體之間有重疊,則該情況也更容易了解。進(jìn)而,由此產(chǎn)生可以輔助拍攝以便不產(chǎn)生重疊的效果。而且,在存在重疊的情況下,應(yīng)該移動(dòng)被攝體或照相機(jī)等,在沒(méi)有重疊的狀態(tài)下重新拍攝較好,但是,這時(shí)的輔助成為,例如使用戶(hù)容易識(shí)別是否產(chǎn)生重疊,或者提供用戶(hù)判斷任何使被攝體或者照相機(jī)移動(dòng)才可以消除重疊的材料(這里為合成圖像)等。而且,不使用背景圖像,僅用第一被攝體圖像和第二被攝體圖像計(jì)算背景修正量后對(duì)哪一個(gè)進(jìn)行修正,生成差分圖像,求出差分區(qū)域,在背景部分中存在適當(dāng)量的重疊時(shí)也是可能的。這時(shí),如果在第一被攝體區(qū)域和第二被攝體的區(qū)域中不存在重疊,則作為具有第一被攝體的輪廓的區(qū)域(這里為了說(shuō)明稱(chēng)為“第一區(qū)域”)和具有第二被攝體的輪廓的區(qū)域(同樣稱(chēng)為“第二區(qū)域”)的兩個(gè)獨(dú)立的區(qū)域求出差分區(qū)域。這時(shí),如果僅在一個(gè)被攝體圖像中考慮,則第一區(qū)域和第二區(qū)域的其中一個(gè)是被攝體部分,則另一個(gè)是背景部分則是沒(méi)有問(wèn)題的(順帶提及,差分區(qū)域的周?chē)且恢碌谋尘安糠?。例如,如果是第一被攝體圖像,則其中一個(gè)是第一被攝體部分,另一個(gè)是背景部分?;蛘?,在第一區(qū)域中考慮,則第一被攝體圖像中的第一區(qū)域和第二被攝體圖像中的第一區(qū)域中的一個(gè)是被攝體部分,另一個(gè)是背景部分。但是,僅使用僅由第一被攝體圖像和第二被攝體圖像做成的差分圖像不能判斷哪一個(gè)是被攝體部分,哪一個(gè)是背景部分。對(duì)此,在使用背景圖像時(shí),可以產(chǎn)生能夠簡(jiǎn)單地判斷哪一個(gè)是被攝體部分,哪一個(gè)是背景部分的效果。例如,將背景圖像設(shè)為基準(zhǔn)圖像時(shí),背景圖像和從被修正的第一被攝體圖像求出的被攝體區(qū)域僅成為第一區(qū)域。這時(shí),當(dāng)然被修正的第一被攝體圖像中的第一區(qū)域是被攝體部分,背景圖像中的第一區(qū)域是背景部分。關(guān)于第二被攝體圖像也一樣。因?yàn)椴皇菑牟罘謭D像同時(shí)檢測(cè)第一區(qū)域和第二區(qū)域,所以可以馬上判斷哪一個(gè)是被攝體部分,哪一個(gè)是背景部分。這樣,如果使用背景圖像、第一被攝體圖像和第二被攝體圖像三張,則產(chǎn)生容易提取第一被攝體的區(qū)域或者第二被攝體的區(qū)域的效果。而且,因?yàn)榭梢苑謩e提取第一被攝體的區(qū)域和第二被攝體的區(qū)域,所以產(chǎn)生在各被攝體中存在重疊時(shí),可以決定優(yōu)先合成哪一個(gè),即在重疊部分中,決定第一被攝體合成于第二被攝體之上還是合成于其之下的效果。為了達(dá)到上述的目的,本發(fā)明的第二圖像合成裝置,包括背景修正量計(jì)算部件,對(duì)第一被攝體圖像和第二被攝體圖像之間的背景部分的相對(duì)移動(dòng)量、旋轉(zhuǎn)量、放大縮小率、失真修正量的其中一個(gè)或者組合構(gòu)成的修正量進(jìn)行計(jì)算,或者對(duì)計(jì)算并存儲(chǔ)的修正量進(jìn)行讀取,所述第一被攝體圖像包括背景和第一被攝體,所述第二被攝體圖像包括所述背景的至少一部分和第二被攝體;以及重疊圖像生成部件,將第一被攝體圖像、第二被攝體圖像的其中之一作為基準(zhǔn)圖像,用由所述背景修正量計(jì)算部件得到的修正量對(duì)另一個(gè)圖像進(jìn)行修正,使得被攝體以外的背景部分至少部分重疊,并生成將基準(zhǔn)圖像和修正后的圖像重疊的圖像。在上述的結(jié)構(gòu)中,所謂的“第一被攝體”、“第二被攝體”是要進(jìn)行合成的對(duì)象,一般多為人物,也有物等的情況。嚴(yán)格來(lái)說(shuō),“被攝體”在第一被攝體圖像和第二被攝體圖像之間,背景部分至少部分重疊時(shí),存在像素值不一致的區(qū)域,即具有變化的區(qū)域都成為“被攝體的區(qū)域”的可能性。但是,在背景部分,因?yàn)榧词故菢?shù)的葉子因風(fēng)而搖動(dòng)等的小變化,也成為有變化的區(qū)域,所以在某種程度上忽視小的變化和小的區(qū)域,可以確實(shí)地提取“第一被攝體的區(qū)域”,可以得到更自然的重疊圖像。對(duì)于“第二被攝體”也一樣。而且,在例如被攝體為人物的情況下,被攝體不限于必須是一個(gè)人,有時(shí)也將多個(gè)人物匯總成為“第一被攝體”和“第一被攝體”。即,即使是多個(gè)人,也作為合成處理的單位進(jìn)行匯總處理,成為一個(gè)“被攝體”。而且,不僅是人物,對(duì)物體也一樣。而且,被攝體不限于必須是一個(gè)區(qū)域,也有多個(gè)區(qū)域構(gòu)成的情況?!暗谝弧薄ⅰ暗诙笔菫榱撕?jiǎn)單區(qū)別不同幀的圖像而賦予的,不是表述拍攝的順序等,本質(zhì)上沒(méi)有差別。而且,例如人物拿著衣服或者物品等,即使不出現(xiàn)在“不包含第一、第二被攝體的僅為背景的圖像”中,它們也被包含在被攝體中。“第一被攝體圖像”、“第二被攝體圖像”是包含上述的“第一被攝體”、“第二被攝體”的不同的圖像,一般來(lái)說(shuō),是用照相機(jī)等拍攝了該被攝體的圖像。但是,在圖像上僅拍攝被攝體,與背景圖像共用的背景部分完全沒(méi)有拍攝的情況下,不適合合成,所以需要對(duì)至少一部分與背景圖像共用的背景部分進(jìn)行拍攝。而且,通常,第一被攝體圖像、第二被攝體圖像使用相同背景,即,使照相機(jī)不動(dòng)進(jìn)行拍攝的情況較多。而且,拍攝被攝體的照相機(jī)不必須是將圖像作為靜止圖像記錄的靜止照相機(jī),也可以是將圖像作為活動(dòng)圖像記錄的視頻照相機(jī)。在視頻照相機(jī)生成作為靜止圖像的重疊圖像時(shí),將構(gòu)成拍攝的活動(dòng)圖像的一幀圖像作為被攝體圖像取出,用于合成。所謂“背景的部分”是從第一被攝體圖像、第二被攝體圖像中除去了“第一被攝體”、“第二被攝體”的部分?!耙苿?dòng)量”、“失真修正量”如第一圖像合成裝置中說(shuō)明的那樣?!爸丿B圖像生成部件”雖然生成重疊圖像,但不必作為一個(gè)圖像數(shù)據(jù)生成,與其它部件的圖像數(shù)據(jù)匹配合成觀察也可以。例如,在顯示部件上顯示某圖像時(shí),如果以在該圖像上覆寫(xiě)的形式顯示另一圖像的一部分,則在視覺(jué)上由兩個(gè)圖像數(shù)據(jù)生成一個(gè)合成圖像數(shù)據(jù),看到可以顯示該合成圖像數(shù)據(jù),但是實(shí)際上,僅分別存在基于兩個(gè)圖像數(shù)據(jù)的圖像,不存在合成圖像數(shù)據(jù)。在背景修正量計(jì)算部件的修正量計(jì)算中,例如可以使用塊匹配等對(duì)兩個(gè)圖像間的部分位置的對(duì)應(yīng)進(jìn)行計(jì)算的方法。如果例如這些方法等,求出第一被攝體圖像、第二被攝體圖像兩個(gè)圖像間的對(duì)應(yīng),則如果背景部分中存在一致的部分,則可以計(jì)算出該部分位置上的對(duì)應(yīng)。由于被攝體部分不存在于另一圖像中,所以該部分得到錯(cuò)誤地對(duì)應(yīng)。使用統(tǒng)計(jì)的方法等,從背景部分的正確的對(duì)應(yīng)和被攝體部分的錯(cuò)誤的對(duì)應(yīng)中,僅得到背景部分的正確的對(duì)應(yīng)。根據(jù)剩余的正確的對(duì)應(yīng),可以計(jì)算背景部分的相對(duì)移動(dòng)量、旋轉(zhuǎn)量、擴(kuò)大縮小率、失真修正量的任意一個(gè)或其組合所構(gòu)成的修正量。重疊圖像生成部件根據(jù)背景修正量計(jì)算部件計(jì)算的修正量,與基準(zhǔn)圖像匹配后做成修正其它圖像的圖像,使得背景部分一致。然后,重疊圖像生成部件生成在基準(zhǔn)圖像中重疊了修正后的圖像的圖像。作為圖像的重疊方法,可以將兩個(gè)圖像對(duì)應(yīng)位置的像素的圖像數(shù)據(jù)以在0~1的范圍內(nèi)比例分配的任意比率混合。例如,在將第一被攝體圖像的比率設(shè)為1,將第二被攝體圖像的比率設(shè)為0時(shí),則僅將第一被攝體圖像的圖像數(shù)據(jù)寫(xiě)入該像素中。并且,在將兩個(gè)圖像的混合比率設(shè)為1∶1時(shí),將兩個(gè)圖像的圖像數(shù)據(jù)均等合成后的圖像數(shù)據(jù)寫(xiě)入該像素中。而且,如何設(shè)定混合比率,作為本發(fā)明并非實(shí)質(zhì)的內(nèi)容,在希望顯示乃至輸出什么樣的重疊圖像的用戶(hù)的目的之后。通過(guò)以上的處理,可以在使背景部分一致的狀態(tài)下,將第一被攝體和第二被攝體合成到一張圖像上。由于可以修正兩個(gè)圖像之間的背景的偏差從而進(jìn)行合成,由此,除了被攝體等明顯不同的區(qū)域以外的部分(即背景部分),不論怎樣重疊,合成結(jié)果也基本一致,具有合成結(jié)果不會(huì)不自然的效果。例如,在僅主要將被攝體區(qū)域進(jìn)行合成時(shí),即使被攝體區(qū)域的提取和指定多少有些不正確,但是由于被攝體區(qū)域周?chē)谋尘安糠峙c合成目標(biāo)的圖像的部分沒(méi)有偏差或者失真,所以被合成為不正確的區(qū)域的內(nèi)外連續(xù)的風(fēng)景,獲得減少視覺(jué)上的不自然的效果。即使被攝體區(qū)域的提取以像素為單位是正確的,但如課題項(xiàng)目中說(shuō)明的那樣,在現(xiàn)有技術(shù)的方法中,產(chǎn)生比1像素更精細(xì)的水平上的不自然,但是在本發(fā)明中,由于匹配背景部分后進(jìn)行合成,所以輪廓的像素周?chē)南袼厥窍嗤尘安糠值奈恢玫南袼?,所以即使合成也變得自然。這樣,產(chǎn)生防止或者減輕在比1個(gè)像素更精細(xì)的水平上的不自然的效果。而且,由于對(duì)背景的偏差進(jìn)行修正后進(jìn)行合成,所以在拍攝背景圖像和第一/第二被攝體圖像時(shí),不需要用三角架等固定照相機(jī),只要用手等對(duì)齊大致的方向就可以,產(chǎn)生拍攝變得簡(jiǎn)單的效果。而且,作為部件修正量計(jì)算部件的動(dòng)作,將“計(jì)算背景部分的相對(duì)移動(dòng)量、旋轉(zhuǎn)量、擴(kuò)大縮小率、失真修正量的任意一個(gè)或其組合所構(gòu)成的修正量”作為“背景部分的相對(duì)移動(dòng)量中,計(jì)算相對(duì)旋轉(zhuǎn)量、擴(kuò)大縮小率、失真修正量的任意一個(gè)或其組合所構(gòu)成的修正量”也可以。由此,修正的精度進(jìn)一步提高,可以得到更自然的合成結(jié)果。進(jìn)而,在用戶(hù)通過(guò)輸入部件有選擇地切換背景修正量計(jì)算部件的上述兩種動(dòng)作時(shí),可以區(qū)別使用希望重視修正的精度的情況和希望重視處理速度或者減輕處理負(fù)擔(dān)的情況,圖像合成裝置的操作性提高。而且,在本發(fā)明的第二圖像合成裝置中,還包括被攝體區(qū)域提取部件,從基準(zhǔn)圖像和修正后的圖像之間的差分圖像中提取第一被攝體的區(qū)域和第二被攝體的區(qū)域,所述重疊圖像生成部件可以將基準(zhǔn)圖像或者修正后的圖像和由所述被攝體區(qū)域提取部件得到的區(qū)域內(nèi)的圖像重疊,以取代將基準(zhǔn)圖像和修正后的圖像重疊。這里,所謂“被攝體的區(qū)域”是用與背景分離的邊界分割被攝體的區(qū)域。例如,在第一被攝體圖像中人物持有衣服或者物品等,如果在第二被攝體圖像中不顯現(xiàn)它們,則它們也是被攝體,被包含在被攝體區(qū)域中。而且,被攝體的區(qū)域并不限于必須是連接的一塊區(qū)域,有時(shí)也分為多個(gè)區(qū)域。所謂“將由所述被攝體區(qū)域提取部件得到的區(qū)域的…圖像重疊”不是說(shuō)除了該區(qū)域以外不生成任何圖像,而是意味著除此以外的區(qū)域埋入在基準(zhǔn)圖像等中。由于進(jìn)行修正而使背景部分一致,所以作為差分表現(xiàn)的主要是被攝體部分。因此,可以通過(guò)被攝體區(qū)域提取部件提取包含于差分圖像中的被攝體區(qū)域。這時(shí),如果實(shí)施從差分圖像中除去干擾等(例如,除去差分的像素值小于或等于閾值的部分)等處理,則可以更正確地提取被攝體區(qū)域。在生成重疊圖像時(shí),決定各像素位置的像素值,但僅在該像素位置處于由被攝體區(qū)域提取部件得到的被攝體區(qū)域內(nèi)的情況下,使被攝體的圖像重疊。由此,產(chǎn)生可以在基準(zhǔn)圖像上,僅合成被修正的被攝體圖像中的被攝體區(qū)域的效果。或者,產(chǎn)生可以在被修正的被攝體圖像上,僅合成基準(zhǔn)圖像中的被攝體區(qū)域的效果。而且,還有以下效果提高在對(duì)重疊圖像生成部件中的被攝體區(qū)域的透過(guò)率進(jìn)行改變的處理和組合,則可以使用戶(hù)容易知道要將哪個(gè)區(qū)域進(jìn)行合成,如果作為合成的結(jié)果被攝體之間有重疊,則該情況也更容易了解。進(jìn)而,由此產(chǎn)生可以輔助拍攝以便不產(chǎn)生重疊的效果。而且,在存在重疊的情況下,應(yīng)該移動(dòng)被攝體或照相機(jī)等,在沒(méi)有重疊的狀態(tài)下重新拍攝較好,但是,這時(shí)的輔助成為,例如使用戶(hù)容易識(shí)別是否產(chǎn)生重疊,或者提供用戶(hù)判斷任何使被攝體或者照相機(jī)移動(dòng)才可以消除重疊的材料(這里為合成圖像)等。本發(fā)明的其它目的、特征以及優(yōu)點(diǎn)通過(guò)以下所示的記載可以充分了解。而且,通過(guò)參照附圖的以下說(shuō)明,可以明白本發(fā)明的利益。圖1是表示本發(fā)明的第一圖像合成裝置的功能性結(jié)構(gòu)的方框圖。圖2是說(shuō)明具體實(shí)現(xiàn)上述圖像合成裝置的各部件的裝置的結(jié)構(gòu)例的方框圖。圖3(a)是表示上述圖像合成裝置的背面的外觀例的示意的立體圖,圖3(b)是表示上述圖像合成裝置的前面的外觀例的示意的立體圖。圖4是說(shuō)明圖像數(shù)據(jù)的數(shù)據(jù)結(jié)構(gòu)例的說(shuō)明圖。圖5是表示圖像合成方法全體的流程的流程圖。圖6(a)是表示背景圖像的例子的說(shuō)明圖,圖6(b)是說(shuō)明上述背景圖像中的參照塊的配置的說(shuō)明圖,圖6(c)是說(shuō)明修正了上述背景圖像的修正背景圖像的說(shuō)明圖,圖6(d)是說(shuō)明上述修正背景圖像的遮擋圖像的說(shuō)明圖。圖7(a)是表示第一被攝體圖像的說(shuō)明圖,圖7(b)是說(shuō)明上述第一被攝體圖像中的殘余的匹配塊的配置的說(shuō)明圖。圖8(a)是表示第二被攝體圖像的例子的說(shuō)明圖,圖8(b)是說(shuō)明上述第二被攝體圖像中的殘余的匹配塊的配置的說(shuō)明圖,圖8(c)是說(shuō)明修正了上述第二被攝體圖像的修正第二被攝體圖像的說(shuō)明圖,圖8(d)是說(shuō)明上述修正第二被攝體圖像的遮擋圖像的說(shuō)明圖。圖9(a)是表示第一被攝體圖像和修正背景圖像的差分圖像例的說(shuō)明圖,圖9(b)是表示從上述差分圖像生成的標(biāo)記(label)圖像例的說(shuō)明圖,圖9(c)是表示從上述標(biāo)記圖像中除去干擾部分后的標(biāo)記圖像例的說(shuō)明圖,圖9(d)是表示從上述標(biāo)記圖像中提取了第一被攝體區(qū)域的第一被攝體區(qū)域圖像例的說(shuō)明圖。圖10(a)是表示第二被攝體圖像和修正背景圖像的差分圖像例的說(shuō)明圖,圖10(b)表示從上述的差分圖像生成的標(biāo)記圖像例的說(shuō)明圖,圖10(c)表示從上述標(biāo)記圖像中除去干擾部分后的標(biāo)記圖像例的說(shuō)明圖,圖10(d)是表示從上述標(biāo)記圖像中提取了第二被攝體區(qū)域的第二被攝體區(qū)域圖像例的說(shuō)明圖。圖11(a)表示圖9(d)的第一被攝體區(qū)域部分和圖10(d)的第二被攝體區(qū)域部分與背景部分重疊并合成的重疊圖像例的說(shuō)明圖,圖11(b)表示將第一被攝體區(qū)域部分設(shè)為半透明并重疊合成的重疊圖像例的說(shuō)明圖,圖11(c)表示將第二被攝體區(qū)域部分設(shè)為半透明并重疊合成的重疊圖像例的說(shuō)明圖。圖12是表示圖9(d)的第一被攝體區(qū)域和圖20(b)的第二被攝體區(qū)域的重疊圖像例的說(shuō)明圖。圖13(a)是表示將圖9(d)的第一被攝體區(qū)域部分和圖20(b)的第二被攝體區(qū)域部分與背景部分重合合成的,使重疊部分醒目顯示的圖像例的說(shuō)明圖,圖13(b)是將上述第一被攝體區(qū)域部分設(shè)為半透明而重疊合成的重疊圖像例的說(shuō)明圖,圖13(c)是表示使重疊的警告消息顯示的例子的說(shuō)明圖。圖14是說(shuō)明取得第二被攝體圖像的處理的一個(gè)方法的流程圖。圖15是說(shuō)明計(jì)算背景修正量的處理的一個(gè)方法的流程圖。圖16(a)是表示說(shuō)明塊匹配的參照?qǐng)D像的例子的說(shuō)明圖,圖16(b)是表示說(shuō)明塊匹配的探索圖像的例子的說(shuō)明圖。圖17是說(shuō)明生成背景圖像、第二被攝體圖像的修正圖像,生成與第一被攝體圖像的差分圖像的處理的一個(gè)方法的流程圖。圖18(a)是表示旋轉(zhuǎn)的第二被攝體圖像的例子的說(shuō)明圖,圖18(b)是說(shuō)明上述第二被攝體圖像中殘余的匹配塊的配置的說(shuō)明圖,圖18(c)是說(shuō)明對(duì)上述第二被攝體圖像進(jìn)行修正后的修正第二被攝體圖像的說(shuō)明圖,圖18(d)是說(shuō)明修正第二被攝體圖像的遮擋圖像的說(shuō)明圖。圖19是說(shuō)明提取被攝體區(qū)域的處理的一種方法的流程圖。圖20(a)表示圖7(a)的第一被攝體和被攝體區(qū)域之間重疊的第二被攝體圖像的例子的說(shuō)明圖,圖20(b)表示從上述第二被攝體圖像中提取的第二被攝體區(qū)域圖像的例子的說(shuō)明圖。圖21是說(shuō)明對(duì)被攝體區(qū)域的重疊進(jìn)行警告的處理的一個(gè)方法的流程圖。圖22是說(shuō)明在被攝體區(qū)域中沒(méi)有重疊時(shí),通知最佳拍攝鏡頭的處理的一個(gè)方法的流程圖。圖23是說(shuō)明在被攝體區(qū)域中沒(méi)有重疊時(shí),進(jìn)行自動(dòng)快門(mén)處理的一個(gè)方法的流程圖。圖24是說(shuō)明在被攝體區(qū)域中存在重疊時(shí),通知消除重疊的方向的處理的一個(gè)方法的流程圖。圖25是說(shuō)明在被攝體區(qū)域中消除重疊的方向的說(shuō)明圖。圖26(a)是說(shuō)明在被攝體區(qū)域中存在重疊時(shí),通知消除重疊的方向的例子的說(shuō)明圖,圖26(b)是說(shuō)明在被攝體區(qū)域中存在重疊時(shí),通知消除重疊的位置和方向的例子的說(shuō)明圖。圖27是說(shuō)明在被攝體區(qū)域中存在重疊時(shí),通知消除重疊的位置的處理的一個(gè)方法的流程圖。圖28(a)~圖28(d)是分別說(shuō)明將第二被攝體區(qū)域向上下左右移動(dòng)的例子的說(shuō)明圖。圖29(a)~圖29(d)是說(shuō)明圖9(d)的第一被攝體區(qū)域和圖28(a)~圖28(d)的各第二被攝體區(qū)域的重疊區(qū)域的說(shuō)明圖。圖30是說(shuō)明生成重疊圖像的處理的一個(gè)方法的流程圖。圖31是表示使第一被攝體優(yōu)先并生成了重疊圖像時(shí)的顯示例的說(shuō)明圖。圖32是表示使第二被攝體優(yōu)先并生成了重疊圖像時(shí)的顯示例的說(shuō)明圖。圖33是表示本發(fā)明的第二圖像合成裝置的功能性結(jié)構(gòu)的方框圖。圖34是說(shuō)明具體實(shí)現(xiàn)第二圖像合成裝置的各部件的裝置的結(jié)構(gòu)例的方框圖。圖35(a)是表示第二圖像合成裝置的背面的外觀例的示意的立體圖,圖35(b)是表示第二圖像合成裝置的前面的外觀例的示意的立體圖。圖36是表示第二圖像合成裝置的圖像合成方法全部流程的流程圖。圖37(a)是表示第一被攝體圖像的例子的說(shuō)明圖,圖37(b)是說(shuō)明圖37(a)的第一被攝體圖像中的參照塊的配置的說(shuō)明圖。圖38(a)是第二被攝體圖像的例子的說(shuō)明圖,圖38(b)是說(shuō)明圖38(a)的第二被攝體圖像中檢測(cè)的參照塊的配置的說(shuō)明圖,圖38(c)是說(shuō)明修正了圖38(a)的第二被攝體圖像的修正第二被攝體圖像的說(shuō)明圖,圖38(d)是說(shuō)明圖38(c)的修正第二被攝體圖像的遮擋圖像的說(shuō)明圖。圖39(a)是表示圖37(a)的第一被攝體圖像和圖38(c)的修正第二被攝體圖像的差分圖像例的說(shuō)明圖,圖39(b)表示從圖39(a)的差分圖像生成的標(biāo)記圖像例的說(shuō)明圖,圖39(c)表示從圖39(b)的標(biāo)記圖像中除去干擾部分后的標(biāo)記圖像例的說(shuō)明圖。圖40(a)表示在圖37(a)的第一被攝體圖像上重疊圖49(d)的第二被攝體區(qū)域部分并合成的重疊圖像例的說(shuō)明圖,圖40(b)表示在圖37(a)的第一被攝體圖像上將圖49(b)的第一被攝體區(qū)域部分設(shè)為半透明并重疊、和重疊圖49(d)的第二被攝體區(qū)域部分并合成的重疊圖像例的說(shuō)明圖,圖40(c)表示在圖37(a)的第一被攝體圖像上將49(d)的第二被攝體區(qū)域部分設(shè)為半透明并重疊合成的重疊圖像例的說(shuō)明圖。圖41是表示圖37(a)的第一被攝體和被攝體區(qū)域之間重疊的第二被攝體圖像的例子的說(shuō)明圖。圖42(a)是表示37(a)的第一被攝體圖像和圖41的第二被攝體圖像的修正圖像的差分圖像例的說(shuō)明圖,圖42(b)是表示從圖42(a)的差分圖像生成的標(biāo)記圖像例的說(shuō)明圖,圖42(c)是表示從圖42(b)的標(biāo)記圖像中除去了干擾部分的標(biāo)記圖像例的說(shuō)明圖。圖43是表示使圖42(c)的被攝體區(qū)域部分以一半的透過(guò)率重疊合成,顯示重疊警告消息的例子的說(shuō)明圖。圖44是說(shuō)明取得第二被攝體圖像的處理的一個(gè)方法的流程圖。圖45是說(shuō)明計(jì)算背景修正量的處理的一個(gè)方法的流程圖。圖46是說(shuō)明生成第二被攝體圖像的修正圖像,生成與第一被攝體圖像的差分圖像的處理的一個(gè)方法的流程圖。圖47(a)是表示旋轉(zhuǎn)的第二被攝體圖像的例子的說(shuō)明圖,圖47(b)是說(shuō)明圖47(a)的第二被攝體圖像中檢測(cè)的匹配塊的配置的說(shuō)明圖,圖47(c)是說(shuō)明對(duì)圖47(a)第二被攝體圖像進(jìn)行修正后的修正第二被攝體圖像的說(shuō)明圖,圖47(d)是說(shuō)明圖47(c)的修正第二被攝體圖像的遮擋圖像的說(shuō)明圖。圖48是說(shuō)明提取被攝體區(qū)域的處理的一個(gè)方法的流程圖。圖49(a)是表示圖37(a)的第一被攝體圖像中的第一被攝體區(qū)域的圖像的說(shuō)明圖,圖49(b)是表示圖38(a)的第二被攝體圖像中的第一被攝體區(qū)域的圖像的說(shuō)明圖,圖49(c)是表示圖37(a)的第一被攝體圖像中的第二被攝體區(qū)域的圖像的說(shuō)明圖,圖49(d)是表示圖38(a)的第二被攝體圖像中的第二被攝體區(qū)域的圖像的說(shuō)明圖。圖50是說(shuō)明對(duì)被攝體區(qū)域的重疊進(jìn)行警告的處理的一個(gè)方法的流程圖。圖51是說(shuō)明在被攝體區(qū)域中沒(méi)有重疊時(shí),通知最佳拍攝鏡頭的處理的一個(gè)方法的流程圖。圖52是說(shuō)明在被攝體區(qū)域中沒(méi)有重疊時(shí),進(jìn)行自動(dòng)快門(mén)處理的一個(gè)方法的流程圖。圖53是說(shuō)明生成重疊圖像的處理的一個(gè)方法的流程圖。具體實(shí)施例方式以下,通過(guò)實(shí)施例和比較例更詳細(xì)地說(shuō)明本發(fā)明,但本發(fā)明并不被這些例子進(jìn)行任何限定?!矊?shí)施方式1〕以下參照本發(fā)明的實(shí)施方式。首先,對(duì)詞匯的定義進(jìn)行說(shuō)明?!暗谝槐粩z體”、“第二被攝體”是要進(jìn)行合成的對(duì)象,一般多為人物,有時(shí)也為物等。嚴(yán)格來(lái)說(shuō),“第一被攝體”是在背景圖像和第一被攝體圖像之間,背景部分至少一部分重疊時(shí),像素值不一致的區(qū)域,即有變化的區(qū)域都可能成為“第一被攝體的區(qū)域”。但是,在背景部分,因?yàn)榧词故菢?shù)的葉子因風(fēng)而搖動(dòng)等的小變化,也成為有變化的區(qū)域,所以在某種程度上忽視小的變化和小的區(qū)域較好。對(duì)于“第二被攝體”也一樣。而且,在例如被攝體為人物的情況下,被攝體不限于必須是一個(gè)人,有時(shí)也將多個(gè)人物匯總成為“第一被攝體”和“第二被攝體”。即,即使是多個(gè)人,也作為合成處理的單位進(jìn)行匯總處理,成為一個(gè)“被攝體”。而且,不僅是人物,對(duì)物體也一樣。而且,被攝體不限于必須是一個(gè)區(qū)域,也有多個(gè)區(qū)域構(gòu)成的情況?!暗谝弧?、“第二”是為了簡(jiǎn)單區(qū)別不同幀的圖像而賦予的,不是表述拍攝的順序等,本質(zhì)上沒(méi)有差別。而且,例如人物拿著衣服或者物品等,即使不出現(xiàn)在“不包含第一、第二被攝體的僅為背景的圖像”中,它們也被包含在被攝體中?!暗谝槐粩z體圖像”、“第二被攝體圖像”是包含上述的“第一被攝體”、“第二被攝體”的不同的圖像,一般來(lái)說(shuō),是用照相機(jī)等分別拍攝了該被攝體的圖像。但是,在圖像上僅拍攝被攝體,與背景圖像共用的背景部分完全沒(méi)有拍攝的情況下,因?yàn)椴荒苓M(jìn)行將其共用的背景部分還原的位置匹配,所以不適合合成。所以需要對(duì)至少一部分(為了使合成的被攝體的周?chē)兊米匀?,最好在要合成的被攝體的周?chē)?與背景圖像共用的背景部分進(jìn)行拍攝。而且,通常,第一被攝體圖像、第二被攝體圖像使用相同背景,即,使照相機(jī)不動(dòng)進(jìn)行拍攝的情況較多。所謂“背景部分”是從風(fēng)景中除去了“第一被攝體”、“第二被攝體”的部分。所謂“背景圖像”是至少包含一部分第一被攝體圖像、第二被攝體圖像各自的背景部分的圖像的圖像,是不拍攝第一被攝體圖像、第二被攝體圖像的圖像。通常,使用與第一被攝體圖像、第二被攝體圖像相同的背景,即,多為使照相機(jī)不移動(dòng),而使第一被攝體、第二被攝體從照相機(jī)的前面移出后進(jìn)行拍攝的情況。而且,在第一被攝體圖像和第二被攝體圖像中,在可以與背景圖像進(jìn)行位置匹配的程度上各自包含與背景圖像共用的背景部分就可以。因此,第一被攝體圖像和第二被攝體圖像的背景部分之間的關(guān)系包含完全一致的情況、部分一致的情況、完全不一致的情況的所有情況。所謂“第一、第二被攝體以外的背景部分”是從第一被攝體圖像、第二被攝體圖像中除去第一被攝體的區(qū)域、第二被攝體的區(qū)域后剩余的部分。所謂“移動(dòng)量”是使其平行移動(dòng)的量,也可以指旋轉(zhuǎn)和擴(kuò)大縮小的中心的對(duì)應(yīng)點(diǎn)的移動(dòng)量。所謂“失真修正量”是在照相機(jī)和鏡頭的位置和方向改變所造成的拍攝圖像的變化中,用于對(duì)用平行移動(dòng)、旋轉(zhuǎn)、擴(kuò)大縮小不能修正的剩余的變化進(jìn)行修正的修正量。其中也包含對(duì)例如在拍攝高的建筑時(shí),由于透視法的效果,上面的部分即使是相同的尺寸也拍攝得小的被稱(chēng)為“余勢(shì)”等的效果等進(jìn)行修正的情況等?!爸丿B圖像生成部件”雖然生成重疊圖像,但不必作為一個(gè)圖像生成,與其它部件的圖像數(shù)據(jù)匹配(與其它部件協(xié)動(dòng))合成觀察也可以。例如,在顯示部件上顯示某圖像時(shí),如果以在該圖像上覆寫(xiě)的形式顯示另一圖像的一部分,則在視覺(jué)上由兩個(gè)圖像數(shù)據(jù)生成一個(gè)合成圖像數(shù)據(jù),看到可以顯示該合成圖像數(shù)據(jù),但是實(shí)際上,僅分別存在基于兩個(gè)圖像數(shù)據(jù)的圖像,不存在合成圖像數(shù)據(jù)。所謂“像素值”是像素的值,一般使用規(guī)定的位數(shù)表示。例如,在黑白兩值的情況下,以1位表現(xiàn),在256灰度的單色的情況下,用8位表現(xiàn),在紅、綠、藍(lán)各256灰度的彩色情況下,用24位表現(xiàn)。在彩色的情況下,被分解為紅、綠、藍(lán)的光的三原色來(lái)表現(xiàn)的情況較多。而且,作為相似的詞匯,有“濃度值”、“亮度值”等。它們僅根據(jù)目的而使用,“濃度值”主要在印刷像素時(shí)使用,“亮度值”主要在顯示器上顯示時(shí)使用,因?yàn)樵谶@里沒(méi)有限定目的,所以以“像素值”表現(xiàn)。所謂“透過(guò)率”是在多個(gè)像素的像素值上乘以規(guī)定的比例的值,將其和作為新的像素值的處理中,乘以的“規(guī)定的比例的值”。通常為大于或等于0,小于或等于1的值。而且,在一個(gè)新的像素值中使用的各像素的透過(guò)率的和多為1。也有不說(shuō)“透過(guò)率”,而說(shuō)“不透明度”的情況?!巴该鞫取笔菑?減去“不透明度”的值。在“規(guī)定的透過(guò)率”中,也包含被固定的值、根據(jù)區(qū)域而變化的值、在區(qū)域的邊界附近緩慢變化的值等。所謂“差分圖像”,是比較兩個(gè)圖像中的相同位置的像素值,將其差值作為像素值而做成的圖像。一般來(lái)說(shuō),差值多取絕對(duì)值。所謂“與原來(lái)的像素值不同的像素值”是實(shí)現(xiàn)以下情況的像素值,例如改變透過(guò)率從而使其半透明,或者使像素值的明暗或色調(diào)等相反并反轉(zhuǎn)顯示,或者設(shè)為紅或者白、黑等醒目的顏色等。而且,還包含以下情況在區(qū)域的邊界部分和內(nèi)部,如上述那樣改變像素值、或者用虛線(xiàn)包圍邊界部分,或者閃爍顯示(隨時(shí)間使像素值變化)。所謂“被攝體的區(qū)域”是用與背景分離的邊界分割被攝體的區(qū)域。例如,在第一被攝體圖像中人物持有衣服或者物品等,如果在背景圖像中不顯現(xiàn)它們,則它們也是被攝體,被包含在被攝體區(qū)域中。而且,被攝體的區(qū)域并不限于必須是連接的一塊區(qū)域,有時(shí)也分為多個(gè)區(qū)域。所謂“僅重疊從前述被攝體區(qū)域提取部件得到的區(qū)域”不是說(shuō)在該區(qū)域以外不生成任何圖像,意思是在該區(qū)域以外的區(qū)域埋入基準(zhǔn)圖像等。在“警告”中,在顯示部件等中以文字或者圖像進(jìn)行警告,由燈等產(chǎn)生光或者由揚(yáng)聲器等產(chǎn)生聲音,由振動(dòng)器等產(chǎn)生振動(dòng)等,只要是用戶(hù)或被攝體可以感知的方法都包含在內(nèi)?!巴ㄖ焙汀熬妗币粯樱灰怯脩?hù)或被攝體可以感知的方法都包含在內(nèi)。所謂“框架”是指圖像全體的矩形。在被攝體的一部分掛在圖像的端部(外形輪廓)時(shí),表現(xiàn)為掛在框架上,或者從框架切離等。圖1是表示實(shí)施本發(fā)明的一實(shí)施方式的圖像合成方法的圖像合成裝置的結(jié)構(gòu)圖。即,可以將圖像合成裝置的主要部分展開(kāi)為以下主要功能塊來(lái)表示第一被攝體圖像取得部件1、背景圖像取得部件2、第二被攝體圖像取得部件3、背景修正量計(jì)算部件4、修正圖像生成部件5、差分圖像生成部件6、被攝體區(qū)域提取部件7、重疊檢測(cè)部件8、重疊圖像生成部件9、重疊圖像顯示部件10、重疊回避方法計(jì)算部件11、重疊回避方法通知部件12、重疊警告部件13、最佳鏡頭通知部件14、自動(dòng)快門(mén)部件15、拍攝部件16。圖2是具體實(shí)現(xiàn)圖1的各部件1~16的裝置的結(jié)構(gòu)例。CPU(centralprocessingunit)70具有背景修正量計(jì)算部件4、修正圖像生成部件5、差分圖像生成部件6、被攝體區(qū)域提取部件7、重疊檢測(cè)部件8、重疊圖像生成部件9、重疊圖像顯示部件10、重疊回避方法計(jì)算部件11、重疊回避方法通知部件12、重疊警告部件13、最佳鏡頭通知部件14、自動(dòng)快門(mén)部件15的功能,從主存儲(chǔ)器74、外部存儲(chǔ)器75、通過(guò)通信裝置77的網(wǎng)絡(luò)目的地等得到記述了這些部件1~16的處理順序的程序。而且,有時(shí)對(duì)于第一被攝體圖像取得部件1、背景圖像取得部件2、第二被攝體圖像取得部件3、拍攝部件16,為了對(duì)拍攝元件和拍攝元件輸出的圖形數(shù)據(jù)的各種處理進(jìn)行內(nèi)部控制等也使用CPU等。而且,CPU70一邊對(duì)包括CPU70在內(nèi)、通過(guò)總線(xiàn)79相互連接的顯示器71、拍攝元件72、圖形輸入板73、主存儲(chǔ)器74、外部存儲(chǔ)器75、快門(mén)按鈕76、通信裝置77、燈78、揚(yáng)聲器80的數(shù)據(jù)進(jìn)行收發(fā),一邊進(jìn)行處理。而且,數(shù)據(jù)的收發(fā)除了通過(guò)總線(xiàn)79進(jìn)行,還可以通過(guò)通信電纜和無(wú)線(xiàn)通信裝置等可以發(fā)送接收數(shù)據(jù)的部件進(jìn)行。而且,作為各部件1~16的實(shí)現(xiàn)部件,不限于CPU,也可以使用DSP(digitalsignalprocessor)和處理步驟作為電路組成的邏輯電路等。顯示器71通常與圖形卡等組合而實(shí)現(xiàn),圖形卡上具有VARM(videorandomaccessmemory),將VRAM上的數(shù)據(jù)變換為顯示數(shù)據(jù),發(fā)送到監(jiān)視器等顯示器(顯示/輸出介質(zhì)),顯示器將顯示信號(hào)作為圖像顯示。拍攝元件72是拍攝風(fēng)景等從而得到圖像信號(hào)的裝置,通常有鏡頭等光學(xué)元件和受光元件及其附帶的電子電路等構(gòu)成。這里,拍攝元件72通過(guò)A/D變換器等,包括變換為數(shù)字圖像數(shù)據(jù)的位置,通過(guò)總線(xiàn)79,將拍攝的圖像數(shù)據(jù)發(fā)送到第一被攝體圖像取得部件1、背景圖像取得部件2、第二被攝體圖像取得部件3等。作為拍攝元件的一般的裝置例如有CCD(chargecoupleddevice)等,其它只要可以使風(fēng)景等作為圖像數(shù)據(jù)得到的裝置就可以。作為輸入用戶(hù)指示的部件有圖形輸入板73、快門(mén)按鈕76等。用戶(hù)的指示通過(guò)總線(xiàn)79被輸入到各部件1~16。另外可以使用通過(guò)各種操作按鈕、麥克風(fēng)輸入聲音等的各種輸入部件。圖形輸入板73由筆和檢測(cè)筆位置的檢測(cè)設(shè)備構(gòu)成??扉T(mén)按鈕76由機(jī)械或者電子開(kāi)關(guān)等構(gòu)成,通過(guò)用戶(hù)按壓按鈕,通常將拍攝元件72拍攝的圖像存儲(chǔ)到主存儲(chǔ)器74或者外部存儲(chǔ)器75等,同時(shí)生成使一連串的處理開(kāi)始的開(kāi)始信號(hào)。主存儲(chǔ)器74通常由DRAM(dynamicrandomaccessmemory)或者閃速存儲(chǔ)器等的存儲(chǔ)裝置構(gòu)成。而且,CPU內(nèi)部包含的存儲(chǔ)器或者寄存器等也可以解釋為一種主存儲(chǔ)器。外部存儲(chǔ)器75是HDD(harddiskdrive)或者PC(personalcomputer)卡等可插拔的存儲(chǔ)部件?;蛘咭部梢詫PU70和通過(guò)網(wǎng)絡(luò)有線(xiàn)或者無(wú)線(xiàn)連接的其它網(wǎng)絡(luò)設(shè)備上安裝的主存儲(chǔ)器或者外部存儲(chǔ)器用作外部存儲(chǔ)器75。通信裝置77通過(guò)網(wǎng)絡(luò)接口卡等實(shí)現(xiàn),與通過(guò)有線(xiàn)或者無(wú)線(xiàn)等連接的其它網(wǎng)絡(luò)設(shè)備進(jìn)行數(shù)據(jù)的收發(fā)。揚(yáng)聲器80將通過(guò)總線(xiàn)79等送來(lái)的聲音數(shù)據(jù)解釋為聲音信號(hào),作為聲音輸出。輸出的聲音有時(shí)是單波長(zhǎng)的單純的聲音,有時(shí)是音樂(lè)或者人的聲音等復(fù)雜的聲音。在預(yù)先決定輸出聲音的情況下,有時(shí)送來(lái)的數(shù)據(jù)不是聲音信號(hào),僅為簡(jiǎn)單的導(dǎo)通、截止的動(dòng)作控制信號(hào)。接著,從各部件間的數(shù)據(jù)的授受的觀點(diǎn)說(shuō)明圖1的各部件1~16。并且,各部件間的數(shù)據(jù)的收發(fā),在沒(méi)有特別的注釋表現(xiàn)為“從**部件得到”、“發(fā)送(傳遞)到**部件”時(shí),設(shè)為主要通過(guò)總線(xiàn)79收發(fā)數(shù)據(jù)。這時(shí),既存在各部件間直接進(jìn)行數(shù)據(jù)收發(fā)的情況,也有通過(guò)主存儲(chǔ)器74或者外部存儲(chǔ)器75、其間經(jīng)由通信裝置77插入網(wǎng)絡(luò)等進(jìn)行數(shù)據(jù)收發(fā)的情況。第一被攝體圖像取得部件1由例如包括拍攝元件72的拍攝部件16、主存儲(chǔ)器74、外部存儲(chǔ)器75等構(gòu)成,從拍攝部件16、主存儲(chǔ)器74、外部存儲(chǔ)器75、通過(guò)了通信裝置77的網(wǎng)絡(luò)目的地等得到第一被攝體圖像。而且,第一被攝體圖像取得部件1有時(shí)為了對(duì)拍攝元件72和拍攝元件72輸出的圖像數(shù)據(jù)的各種處理進(jìn)行內(nèi)部控制等也包括CPU等。在使用拍攝部件16的情況下,通過(guò)拍攝元件72拍攝包括第一被攝體的當(dāng)前的風(fēng)景(第一被攝體圖像),通常在按下了快門(mén)按鈕76等的時(shí)刻進(jìn)行拍攝,拍攝的圖像被存儲(chǔ)在主存儲(chǔ)器74、外部存儲(chǔ)器75、經(jīng)由通信裝置77的網(wǎng)絡(luò)目的地等中。另一方面,第一被攝體圖像取得部件1從主存儲(chǔ)器74、外部存儲(chǔ)器75、和/或經(jīng)由通信裝置77的網(wǎng)絡(luò)目的地等取得第一被攝體圖像時(shí),讀出已經(jīng)拍攝的預(yù)先準(zhǔn)備的圖像。而且,也有在通過(guò)通信裝置77的網(wǎng)絡(luò)目的地等存在照相機(jī),通過(guò)網(wǎng)絡(luò)進(jìn)行拍攝的情況。第一被攝體圖像被發(fā)送到背景修正量計(jì)算部件4、修正圖像生成部件5、差分圖像生成部件6、被攝體區(qū)域提取部件7、和/或重疊圖像生成部件9。背景圖像取得部件2例如由包含拍攝元件72的拍攝部件16、主存儲(chǔ)器74和/或外部存儲(chǔ)器75等構(gòu)成,從拍攝部件16、主存儲(chǔ)器74、外部存儲(chǔ)器75和/或經(jīng)由通信裝置77的網(wǎng)絡(luò)目的地等得到背景圖像。而且,背景圖像取得部件2有時(shí)為了上述內(nèi)部控制等,也包括CPU等。除了圖像的內(nèi)容不同以外,關(guān)于圖像的取得方法與第一被攝體圖像取得部件1相同。而且,背景圖像被發(fā)送到背景修正量計(jì)算部件4、修正圖像生成部件5、和/或差分圖像生成部件6。第二被攝體圖像取得部件3由例如包含拍攝元件72的拍攝部件16、主存儲(chǔ)器74和/或外部存儲(chǔ)器75等構(gòu)成,從拍攝部件16、主存儲(chǔ)器74、外部存儲(chǔ)器75和/或經(jīng)由通信裝置77的網(wǎng)絡(luò)目的地等取得包含第二被攝體的圖像(第二被攝體圖像)。而且,第二被攝體圖像取得部件3為了內(nèi)部控制等,有時(shí)也包含CPU等。除了圖像的內(nèi)容不同以外,關(guān)于圖像的取得方法與第一被攝體圖像取得部件1相同。第二被攝體圖像被發(fā)送到背景修正量計(jì)算部件4、修正圖像生成部件5、差分圖像生成部件6、被攝體區(qū)域提取部件7和/或重疊圖像生成部件9等。作為背景修正量計(jì)算部件4的CPU70對(duì)第一被攝體圖像、第二被攝體圖像和背景圖像中的被攝體以外的背景的相對(duì)移動(dòng)量、旋轉(zhuǎn)量、擴(kuò)大縮小率、失真修正量的任意一個(gè)或者其組合構(gòu)成的修正量進(jìn)行計(jì)算。這時(shí),在具有至少一部分共用的背景的兩個(gè)圖像之間,將一個(gè)設(shè)為基準(zhǔn)圖像,最低限度求出該基準(zhǔn)圖像和另一個(gè)圖像之間的修正量就可以。對(duì)于剩余的圖像,如果前述基準(zhǔn)圖像或者另一個(gè)圖像中的任一個(gè),或者甚至雙方具有至少一部分共用背景,則可以最終計(jì)算出相對(duì)于基準(zhǔn)圖像的修正量。而且,由于修正量是相對(duì)的,所以也可以不直接計(jì)算基準(zhǔn)圖像和其它的圖像之間的修正量,而是通過(guò)間接地計(jì)算來(lái)求出。例如,在第一被攝體圖像為基準(zhǔn)圖像時(shí),即使不直接得到基準(zhǔn)圖像和第二被攝體圖像之間的修正量、基準(zhǔn)圖像和背景圖像之間的修正量,只要可以得到基準(zhǔn)圖像和背景圖像間的修正量、第二被攝體圖像和背景圖像之間的修正量,則可以根據(jù)這兩個(gè)修正量通過(guò)計(jì)算求出基準(zhǔn)圖像和第二被攝體圖像間的修正量。背景修正量計(jì)算部件4將算出的修正量發(fā)送到修正圖像生成部件5。而且,在背景修正量計(jì)算部件4讀出預(yù)先計(jì)算的修正量時(shí),從主存儲(chǔ)器74、外部存儲(chǔ)器75和/或經(jīng)由通信裝置77的網(wǎng)絡(luò)目的地等讀出修正量。作為修正圖像生成部件5的CPU70,將第一被攝體圖像、第二被攝體圖像、背景圖像中的一個(gè)設(shè)為基準(zhǔn)圖像,對(duì)另外兩個(gè)圖像用從背景修正量計(jì)算部件4得到的修正量進(jìn)行修正,使得被攝體以外的背景部分重合,從而生成修正后的圖像,發(fā)送到差分圖像生成部件6和重疊圖像生成部件9。而且,在修正圖像生成部件5讀出預(yù)先生成的修正圖像時(shí),從主存儲(chǔ)器74、外部存儲(chǔ)器75和/或經(jīng)由通信裝置77的網(wǎng)絡(luò)目的地等讀出。作為差分圖像生成部件6的CPU70,生成由修正圖像生成部件5決定的基準(zhǔn)圖像和從修正圖像生成部件5得到的修正后的另一個(gè)或者兩個(gè)圖像之間的差分圖像,將生成的差分圖像發(fā)送到被攝體區(qū)域提取部件7和重疊圖像生成部件9?;鶞?zhǔn)圖像是第一被攝體圖像、第二被攝體圖像和背景圖像之一。作為被攝體區(qū)域提取部件7的CPU70,從差分圖像生成部件6得到的差分圖像中提取第一、第二被攝體的區(qū)域,將提取的區(qū)域發(fā)送到重疊檢測(cè)部件8和重疊圖像生成部件9。作為重疊檢測(cè)部件8的CPU70,從被攝體區(qū)域提取部件7得到的第一、第二被攝體的區(qū)域中檢測(cè)第一、第二被攝體之間的重疊,將是否存在重疊的信息和重疊區(qū)域的信息發(fā)送到重疊圖像生成部件9、重疊回避方法計(jì)算部件11、重疊警告部件13、最佳鏡頭通知部件14和自動(dòng)快門(mén)部件15。作為重疊圖像生成部件9的CPU70,將從第一被攝體圖像取得部件1得到的第一被攝體圖像、從第二被攝體圖像取得部件3得到的第二被攝體圖像、從背景圖像取得部件2得到的背景圖像、從修正圖像生成部件5得到的修正圖像全部或者部分重疊并生成重疊后的圖像,將生成的圖像發(fā)送到重疊圖像顯示部件10。而且,有時(shí)重疊圖像生成部件9將從差分圖像生成部件6得到的差分圖像中的存在差異的區(qū)域生成為與原來(lái)的像素值不同的像素值的圖像。而且,有時(shí)重疊圖像生成部件9僅將從被攝體區(qū)域提取部件7得到的第一被攝體和第二被攝體的區(qū)域重疊到基準(zhǔn)圖像等上。而且,有時(shí)重疊圖像生成部件9將從重疊檢測(cè)部件8得到的重疊區(qū)域生成為與原來(lái)的像素值不同的像素值的圖像。作為重疊圖像顯示部件10的CPU70,使從重疊圖像生成部件9得到的重疊圖像顯示在顯示器71等上。而且,有時(shí)有以下情況重疊圖像顯示部件10根據(jù)從重疊回避方法通知部件12得到的重疊回避方法的信息,在進(jìn)行重疊回避方法的顯示的情況,或者根據(jù)從重疊警告部件13得到的警告信息,進(jìn)行警告顯示的情況,或者根據(jù)從最佳鏡頭通知部件14得到的最佳鏡頭信息,進(jìn)行最佳鏡頭情況的顯示的情況,或者根據(jù)從自動(dòng)快門(mén)部件15得到的快門(mén)信息,顯示進(jìn)行了自動(dòng)快門(mén)的情況。作為重疊回避方法計(jì)算部件11的CPU70,根據(jù)從重疊檢測(cè)部件8得到的有關(guān)重疊的信息,為了減少或者消除第一和第二被攝體的重疊,對(duì)第一或者第二被攝體的位置或者其位置的方向進(jìn)行計(jì)算,將該計(jì)算出的位置或者表示方向的信息作為重疊回避方法傳遞給重疊回避方法通知部件12。求取位置或者方向的被攝體可以是第一或者第二被攝體的其中一個(gè),但目前拍攝中的(或者最后拍攝的)被攝體的方便性更好。作為重疊回避方法通知部件12的CPU70將從重疊回避方法計(jì)算部件11得到的上述重疊回避方法通知用戶(hù)、或者被攝體或者兩者。在通知中,可以采用將通知內(nèi)容設(shè)為文字等發(fā)送到重疊圖像顯示部件10,從而在顯示器71上顯示,或者使用燈78以光進(jìn)行通知,或者使用揚(yáng)聲器80以聲音進(jìn)行通知的各種方式。只要可以進(jìn)行通知,也可以使用除此之外的裝置等。作為重疊警告部件13的CPU70根據(jù)從重疊檢測(cè)部件8得到的重疊信息,在存在重疊時(shí),將存在重疊的情況通知用戶(hù)或者被攝體或者兩者。關(guān)于通知方法,與重疊回避方法通知部件12的說(shuō)明一樣。作為最佳鏡頭通知部件14的CPU70根據(jù)從重疊檢測(cè)部件8得到的重疊信息,在不存在重疊時(shí),將不存在重疊的情況通知用戶(hù)或者被攝體或者兩者。關(guān)于通知方法,與重疊回避方法通知部件12的說(shuō)明一樣。作為自動(dòng)快門(mén)部件15的CPU70根據(jù)從重疊檢測(cè)部件8得到的重疊信息,在不存在重疊時(shí),對(duì)第二被攝體圖像取得部件3自動(dòng)發(fā)出指示,使得將從拍攝部件16得到的圖像存儲(chǔ)到主存儲(chǔ)器74或者外部存儲(chǔ)器75等中。這里,主要設(shè)想從拍攝部件16得到的圖像作為背景圖像、第一被攝體圖像或者第二被攝體圖像被最終記錄、保存在主存儲(chǔ)器74或者外部存儲(chǔ)器75中,并被合成的使用方法。在被最終記錄、保存之前,從拍攝部件16得到背景圖像和第一被攝體圖像,每次得到就進(jìn)行記錄、保存,但是即使從拍攝部件16得到第二被攝體圖像也不被馬上保存。即,在將從拍攝部件16得到的圖像設(shè)為第二被攝體圖像時(shí),使用該得到的第二被攝體圖像和保存的背景圖像和第一被攝體圖像,進(jìn)行重疊檢測(cè)和重疊回避等的處理,進(jìn)行在重疊圖像顯示部件10等上的各種顯示和警告、通知等的處理,重復(fù)上述的一連串的處理。然后,通過(guò)自動(dòng)快門(mén)部件15指示了記錄、保存時(shí),第二被攝體圖像被最終地記錄、保存。而且,也可以在存在自動(dòng)快門(mén)部件15的拍攝許可的指示,并且用戶(hù)按壓了快門(mén)按鈕76時(shí),記錄、保存第二被攝體圖像。而且,自動(dòng)快門(mén)部件15也可以將發(fā)出指示的結(jié)果、記錄了拍攝圖像的情況通知用戶(hù)或者被攝體或者兩者。關(guān)于通知方法,與重疊回避方法通知部件12的說(shuō)明相同。而且,作為自動(dòng)快門(mén)部件15的CPU70不僅進(jìn)行記錄的指示,而且根據(jù)從重疊檢測(cè)部件8得到的重疊信息,存在重疊時(shí),自動(dòng)地發(fā)出指示,禁止在第二被攝體圖像取得部件3中將拍攝部件16得到的圖像記錄到主存儲(chǔ)器74或者外部存儲(chǔ)器75等。該動(dòng)作與上述的自動(dòng)記錄的情況相反。這時(shí),在存在自動(dòng)快門(mén)部件15的禁止保存的指示時(shí),即使用戶(hù)按壓快門(mén)按鈕76,第二被攝體圖像也不被記錄、保存。作為主要的結(jié)構(gòu)要素,拍攝部件16具有拍攝元件72,將拍攝的風(fēng)景等作為圖像數(shù)據(jù)發(fā)送到第一被攝體圖像取得部件1、第二被攝體圖像取得部件3和/或背景圖像取得部件2。圖3(a)表示本發(fā)明的圖像合成裝置的背面的外觀圖。主體140上有顯示部兼圖形輸入板141、燈142和快門(mén)按鈕143。顯示部兼圖形輸入板141相當(dāng)于輸入裝置(顯示器71和圖形輸入板73等)和重疊圖像顯示部件10。如圖3(a)所示,在顯示部兼圖形輸入板141上,顯示由重疊圖像生成部件9生成的合成圖像和來(lái)自重疊回避方法通知部件12、重疊警告部件13、最佳鏡頭通知部件14、自動(dòng)快門(mén)部件15等的通知/警告信息等。而且,也用于顯示圖像合成裝置的各種設(shè)定菜單,使用圖形輸入板,用手指或者筆等變更設(shè)定。而且,作為各種設(shè)定等的操作部件,不僅是圖形輸入板,也可以是按鈕類(lèi)等其它的部件。而且,顯示部兼圖形輸入板141也可以利用對(duì)主體140旋轉(zhuǎn)或者分離等方法,不僅使拍攝者,而且在被攝體方也看見(jiàn)。燈142主要用于來(lái)自重疊回避方法通知部件12、重疊警告部件13、最佳鏡頭通知部件14或者自動(dòng)快門(mén)部件15等的通知或警告。開(kāi)門(mén)按鈕143主要用于第一被攝體圖像取得部件1、背景圖像取得部件2、第二被攝體圖像取得部件3指示從拍攝部件16取入/記錄拍攝圖像的定時(shí)。而且,雖然在該例中沒(méi)有顯示,但也可以將內(nèi)置揚(yáng)聲器用作通知/警告部件。圖3(b)顯示本發(fā)明的圖像合成裝置的前面的外觀例。在主體140的前面存在鏡頭部144。鏡頭部144是拍攝部件16的一部分。而且,雖然在圖3(b)的例子中沒(méi)有表示,但也可以具有顯示部或燈、揚(yáng)聲器等,使得在前面向被攝體傳送信息(前述的通知或者警告)。圖4是說(shuō)明圖像數(shù)據(jù)的數(shù)據(jù)結(jié)構(gòu)例的說(shuō)明圖。圖像數(shù)據(jù)是像素?cái)?shù)據(jù)的二維排列,“像素”作為屬性具有位置和像素值。這里作為像素值,具有對(duì)應(yīng)光的三原色(紅、綠、藍(lán))的R、G、B的值。用圖4的橫向排列的R、G、B的組構(gòu)成一個(gè)像素的數(shù)據(jù)。但是,在僅具有不具有色信息的單色的亮度信息時(shí),取代R、G、B,而具有亮度值作為一個(gè)像素的數(shù)據(jù)。位置以X-Y坐標(biāo)(x,y)表示。在圖4中將左上設(shè)為原點(diǎn),將右方向設(shè)為+X方向,將下方向設(shè)為+Y方向。以下為了說(shuō)明,將位置(x,y)的像素表示為“P(x,y)”,將像素P(x,y)的像素值表示為“像素值P(x,y)”或者有時(shí)也簡(jiǎn)單表示為“P(x,y)”。在將像素值分為R、G、B時(shí),對(duì)每個(gè)色進(jìn)行計(jì)算,但只要不是與色有關(guān)的特別的處理,則對(duì)每個(gè)R、G、B的值進(jìn)行相同的計(jì)算處理就可以。因此,以后作為共用的計(jì)算方法,使用“像素值P(x,y)”進(jìn)行說(shuō)明。圖5是表示本發(fā)明的實(shí)施方式的一例-適應(yīng)輸出方法的流程圖。首先,在步驟S1(以下將“步驟S”略記為“S”),背景圖像取得部件2取得背景圖像,處理進(jìn)入到S2。背景圖像可以使用拍攝部件16拍攝,也可以預(yù)先讀出在主存儲(chǔ)器74、外部存儲(chǔ)器75和經(jīng)由通信裝置77的網(wǎng)絡(luò)目的地等中準(zhǔn)備的圖像。接著,在S2,第一被攝體圖像取得部件1取得具有與上述背景圖像至少共用一部分背景部分的第一被攝體圖像,經(jīng)由連接點(diǎn)P20(以下將“連接點(diǎn)P”略記為“P”),處理進(jìn)入到S3。第一被攝體圖像的取得方法和背景圖像相同。而且,S1和S2的處理順序相反也可以。在S3中,第二被攝體圖像取得部件3取得背景圖像以及具有與第一被攝體圖像至少共用一部分的背景部分的第二被攝體圖像,處理經(jīng)由P30進(jìn)到S4。這里的處理在后面利用圖14進(jìn)行詳細(xì)說(shuō)明,但是第二被攝體圖像的取得方法自身與背景圖像相同。在S4中,背景修正量計(jì)算部件4從第一被攝體圖像、第二被攝體圖像和背景圖像中計(jì)算背景修正量,處理經(jīng)由P40進(jìn)到S5。第一被攝體圖像、第二被攝體圖像和背景圖像分別由第一被攝體圖像取得部件1(S2)、第二被攝體圖像取得部件3(S3)、背景圖像取得部件2(S1)取得。而且,以后在使用第一被攝體圖像、第二被攝體圖像和背景圖像時(shí),只要沒(méi)有特別說(shuō)明,這些圖像的取得元的部件/步驟與S4中的取得元的部件/步驟相同,所以以后省略這些圖像的取得元的部件/步驟的說(shuō)明。S4的處理的細(xì)節(jié)在后面利用圖15進(jìn)行說(shuō)明。在S5中,修正圖像生成部件5利用背景修正量計(jì)算部件4得到的背景修正量對(duì)第一被攝體圖像、第二被攝體圖像和背景圖像內(nèi)除了基準(zhǔn)圖像以外的兩個(gè)圖像進(jìn)行修正,差分圖像生成部件6生成修正圖像生成部件5修正的圖像和基準(zhǔn)圖像間的相互的差分圖像,處理經(jīng)由P50進(jìn)入S6。S5的處理的細(xì)節(jié)在后面利用圖17進(jìn)行說(shuō)明。在S6中,被攝體區(qū)域提取部件7從差分圖像生成部件6(S5)得到的差分圖像中提取第一、第二被攝體的區(qū)域(以后稱(chēng)為第一被攝體區(qū)域、第二被攝體區(qū)域),處理經(jīng)由P60進(jìn)到S7。S6的處理的細(xì)節(jié)在后面利用圖19進(jìn)行說(shuō)明。在S7中,重疊檢測(cè)部件8從被攝體區(qū)域提取部件7(S6)得到的第一、第二被攝體的區(qū)域中取得有關(guān)這些區(qū)域的重疊信息,處理經(jīng)由P70進(jìn)到S8。S7的處理的細(xì)節(jié)在后面利用附圖進(jìn)行說(shuō)明。在S8中,重疊回避方法計(jì)算部件11、重疊回避方法通知部件12、重疊警告部件13、最佳鏡頭通知部件14、自動(dòng)快門(mén)部件15中的一個(gè)或一個(gè)以上的部件根據(jù)重疊檢測(cè)部件8(S7)得到的與重疊有關(guān)的信息進(jìn)行各種處理,處理經(jīng)由P80進(jìn)到S9。S8的處理的細(xì)節(jié)在后面利用附圖21至附圖24、圖27進(jìn)行說(shuō)明。在S9中,重疊圖像生成部件9根據(jù)第一被攝體圖像、第二被攝體圖像、背景圖像、以及用修正圖像生成部件5(S5)對(duì)這些圖像進(jìn)行修正后的圖像、由被攝體區(qū)域提取部件7(S6)得到的第一、第二被攝體的區(qū)域、由重疊檢測(cè)部件8(S8)得到的與第一、第二被攝體的重疊有關(guān)的信息等,生成將這些圖像重疊的“重疊圖像”,處理經(jīng)由P90進(jìn)到S10。S9的處理的細(xì)節(jié)在后面利用圖30進(jìn)行說(shuō)明。在S10中,重疊圖像顯示部件10在顯示器71等上顯示由重疊圖像生成部件9(S9)得到的重疊圖像,并結(jié)束處理。在這些從S1到S10的處理中,使用第一被攝體圖像、第二被攝體圖像、背景圖像,將第一被攝體和第二被攝體合成在1張圖像上,并且根據(jù)被攝體之間的重疊的狀況進(jìn)行各種處理。對(duì)于詳細(xì)的處理及其效果,在后面進(jìn)行詳細(xì)地說(shuō)明,首先用簡(jiǎn)單的例子來(lái)說(shuō)明處理的概要。圖6(a)是在S1中得到的背景圖像的例子。建筑物和通到這些建筑物的道路作為背景的風(fēng)景進(jìn)行拍攝,不存在作為被攝體的人物。圖7(a)是在S2中得到的第一被攝體圖像的例子。在圖6(a)的背景之前,左側(cè)站立第一被攝體的人物(1)。為了容易理解,人物(1)的臉部分標(biāo)記“1”。而且,今后沒(méi)有特別說(shuō)明“右側(cè)”“左側(cè)”的情況下,指圖上的“右側(cè)”“左側(cè)”。也可以認(rèn)為該方向是從攝影者/照相機(jī)觀察的方向。圖8(a)是在S3中得到的第二被攝體圖像的例子。在圖6(a)的背景之前,在右側(cè)站立第二被攝體的人物(2)。為了容易理解,人物(2)的臉部分標(biāo)記“2”。圖6(c)是求出圖6(a)的背景圖像和圖7(a)的第一被攝體圖像之間的背景修正量,將第一被攝體圖像作為基準(zhǔn)圖像,對(duì)背景圖像進(jìn)行修正后的圖像。同樣,圖8(c)是求出圖7(a)的第一被攝體圖像和圖8(a)的第二被攝體圖像之間的背景修正量,將第一被攝體圖像作為基準(zhǔn)圖像,對(duì)第二被攝體圖像進(jìn)行修正后的圖像。被修正的圖像是用實(shí)線(xiàn)的框包圍的范圍,為了清楚被修正的方式,分別在圖6(c)和圖8(c)上用虛線(xiàn)的框表示原來(lái)圖6(a)的背景圖像和圖8(a)的第二被攝體圖像的范圍。例如,圖6(a)的背景圖像是拍攝圖7(a)的背景的稍右側(cè)的風(fēng)景而得到的。因此,在使圖6(a)的背景圖像與圖7(a)的背景重疊的修正中,需要選擇圖6(a)稍左側(cè)的風(fēng)景。因此,修正圖6(c),使其成為比圖6(a)稍左側(cè)的風(fēng)景。用虛線(xiàn)表示原來(lái)圖6(a)的范圍。因?yàn)楸葓D6(a)稍左側(cè)的風(fēng)景不存在,所以在圖6(c)中從左端的虛線(xiàn)開(kāi)始左邊的部分為空白。相反,切除圖6(a)的右端的部分。這里,沒(méi)有擴(kuò)大縮小和旋轉(zhuǎn)等的修正,僅為簡(jiǎn)單的平行移動(dòng)的修正結(jié)果。即,在S4中得到的背景修正量在這里是實(shí)線(xiàn)的框和虛線(xiàn)的框的錯(cuò)位表示的平行移動(dòng)量。圖9(a)是在S5中,在圖7(a)的第一被攝體圖像和圖6(c)的被修正的背景圖像之間生成的差分圖像。同樣,圖10(a)是在圖8(c)的被修正的第二被攝體圖像和圖6(c)的被修正的背景圖像之間生成的差分圖像。在差分圖像中,差分量為0的部分(即與背景一致的部分)用黑色的區(qū)域表示。存在差分的部分是被攝體的區(qū)域內(nèi)和干擾部分,被攝體的區(qū)域部分成為背景圖像和被攝體部分的圖像重合后的巧妙的部分。(而且,通過(guò)修正,僅其中一個(gè)圖像不存在像素的區(qū)域(例如位于圖6(c)左側(cè)或者右側(cè)的實(shí)線(xiàn)和虛線(xiàn)之間的區(qū)域)從差分對(duì)象中排除,差分量設(shè)為0)。圖9(d)是在S6中,從圖9(a)中提取第一被攝體區(qū)域后的結(jié)果。對(duì)于提取處理的細(xì)節(jié)在后面說(shuō)明。圖中成為黑色人物形狀的區(qū)域112是第一被攝體區(qū)域。同樣,圖10(d)是從中提取第二被攝體區(qū)域后的結(jié)果。圖中成為黑色人物形狀的區(qū)域122是第二被攝體區(qū)域。雖然在S7中檢測(cè)出圖9(d)和圖10(d)的被攝體區(qū)域之間的重疊,但是在本例中沒(méi)有重疊,所以省略重疊的圖。雖然S8的與重疊有關(guān)的處理有各種處理方法,但是在本例中不檢測(cè)重疊,所以這里為了簡(jiǎn)化說(shuō)明,進(jìn)行特別的處理。圖11(a)是從圖8(c)的被修正后的第二被攝體圖像中提取相當(dāng)于圖10(d)的第二被攝體區(qū)域的部分的圖像,將其重疊到圖7(a)的第一被攝體圖像(覆寫(xiě))而生成的圖像。由此,在圖11(a)中,分別在圖7(a)和圖8(a)中拍攝的被攝體不重疊地排列在相同的圖像上。即使關(guān)于重疊方法,也存在各種處理方法,所以在后面詳細(xì)說(shuō)明。圖11(a)的圖像在重疊圖像顯示部件10上表示為合成圖像。由此,產(chǎn)生可以將分別拍攝的被攝體合成如同時(shí)拍攝的圖像的效果。按照以上的說(shuō)明,對(duì)處理的概要進(jìn)行了大致的說(shuō)明,但由于沒(méi)有對(duì)在S7中被攝體區(qū)域之間存在重疊的情況的S8的處理例的概要進(jìn)行說(shuō)明,所以以下先簡(jiǎn)單地觸及。圖20(a)是與圖8(a)不同的第二被攝體圖像的例子。與圖8(a)相比,第二被攝體相對(duì)于同一背景位于稍左側(cè)。而且,背景圖像、第一被攝體圖像使用與圖6(a)、圖7(a)相同的圖像。圖20(b)表示第二被攝體區(qū)域。圖中的區(qū)域130為第二被攝體區(qū)域。而且,作為第二被攝體區(qū)域的區(qū)域130與前述相同,在圖7(a)的第一被攝體圖像和圖20(a)的第二被攝體圖像之間求取背景修正量,將第一被攝體圖像作為基準(zhǔn)圖像,對(duì)第二被攝體圖像進(jìn)行修正,從該修正后的圖像和圖6(c)的被修正的背景圖像之間生成的差分圖像中被提取。圖12表示在S7中利用圖9(d)的區(qū)域112和圖20(b)的區(qū)域130檢測(cè)出的各被攝體的重疊區(qū)域。圖12中的涂黑的區(qū)域131是重疊區(qū)域,為了容易理解,用虛線(xiàn)表示第一被攝體區(qū)域112和第二被攝體區(qū)域130。圖13(a)表示在S8中存在重疊的情況下,在S9中生成的重疊圖像的一例。這時(shí),在第一被攝體圖像上重疊第二被攝體并進(jìn)行覆寫(xiě)后的結(jié)果,是醒目地顯示與第一被攝體和第二被攝體重疊的重疊區(qū)域131相當(dāng)?shù)牟糠?。即,變更重疊區(qū)域131原來(lái)的像素值,作為例如涂黑的像素值。這樣,通過(guò)顯示使重疊區(qū)域131醒目的重疊圖像,產(chǎn)生使用戶(hù)容易理解第一被攝體和第二被攝體重疊的情況的輔助拍攝的效果。通過(guò)以上的說(shuō)明,對(duì)S7中被攝體區(qū)域之間存在重疊的情況的S8的處理例的概要進(jìn)行了說(shuō)明。而且,如果在典型的利用場(chǎng)合例中考慮該情況,則首先用照相機(jī)(圖像合成裝置)拍攝、記錄圖6(a)那樣的背景圖像。接著在相同的背景下拍攝、記錄圖7(a)那樣的第一被攝體。最后在相同背景下拍攝圖8(a)那樣的第二被攝體。而且,通過(guò)第一被攝體和第二被攝體交互進(jìn)行第一被攝體和第二被攝體的拍攝,所以即使沒(méi)有第三者也可以進(jìn)行拍攝。背景圖像的拍攝在被攝體或者第二被攝體中進(jìn)行都可以,但是如果考慮下一次的拍攝,則拍攝了第二被攝體的情況下,可進(jìn)行流暢的處理。為了在相同背景下拍攝,雖然照相機(jī)不動(dòng)較好,但是因?yàn)榕c背景匹配地進(jìn)行修正,所以不用三角架等固定,用手在大致相同的位置朝向相同的方向進(jìn)行拍攝也可以。而且,被攝體的位置關(guān)系不僅是圖7(a)、圖8(a)那樣的左右關(guān)系,任意的位置關(guān)系都可以。然后,在拍攝了三個(gè)圖像以后,進(jìn)行從S4到S10的處理,進(jìn)行圖11(a)和圖13(a)那樣的顯示(或者在后說(shuō)明的警告/通知等)。如果在存在被攝體重疊等的顯示或通知的情況下,也可以再次重復(fù)從S1到S10的處理。即拍攝背景圖像、第一被攝體圖像、第二被攝體圖像,生成、顯示重疊圖像等。在滿(mǎn)足被顯示的處理結(jié)果之前,進(jìn)行多少次重復(fù)都可以。但是,在第二被攝體移動(dòng)位置等情況下,也可以不必重新拍攝背景圖像和第一被攝體圖像,有時(shí)只要重新取得第二被攝體就可以。這時(shí),只要重復(fù)S3至S10就可以。這時(shí),如果自動(dòng)地重復(fù)從S3的第二被攝體圖像的取得到S10的顯示,即如果如不按壓快門(mén)按鈕而拍攝活動(dòng)圖像那樣,連續(xù)地取得第二被攝體圖像,并包括處理、顯示而重復(fù)進(jìn)行,則可以追蹤照相機(jī)和第二被攝體的移動(dòng)等,從而實(shí)時(shí)地確認(rèn)處理結(jié)果。因此,可以實(shí)時(shí)地了解第二被攝體的移動(dòng)位置是否合適(是否重疊),產(chǎn)生容易進(jìn)行用于得到?jīng)]有重疊的合成結(jié)果的第二被攝體的拍攝的優(yōu)點(diǎn)。而且,為了啟動(dòng)該重復(fù)處理,需要從菜單等選擇處理開(kāi)始,進(jìn)入專(zhuān)用模式??梢酝ㄟ^(guò)到達(dá)合適的移動(dòng)位置后按壓快門(mén)按鈕,決定第二被攝體圖像(存儲(chǔ)),使該重復(fù)處理/專(zhuān)用模式結(jié)束(雖然結(jié)束,但可以繼續(xù)處理,直到得到最后的合成結(jié)果的S10)。而且,在背景圖像良好但第一被攝體圖像不好的情況下,例如,在第一被攝體位于背景的正中,無(wú)論怎樣配置都會(huì)與第二被攝體重疊,或者如果不使之重疊,則第二被攝體從重疊圖像移到取景框外的情況下,則可以重新進(jìn)行S2的第一被攝體圖像的取得。而且,由于這里將第一被攝體圖像作為基準(zhǔn)圖像進(jìn)行合成,所以重新拍攝第一被攝體圖像,但在將背景圖像作為基準(zhǔn)圖像,在其上合成第一被攝體區(qū)域和第二被攝體區(qū)域的圖像的情況下,也有原樣保持第一被攝體圖像,對(duì)背景圖像進(jìn)行重新拍攝的方法。例如,在作為基準(zhǔn)的背景圖像上對(duì)第一被攝體進(jìn)行配置,使之與背景匹配時(shí),第一被攝體無(wú)論如何都位于背景圖像的正中的情況下,有時(shí)存在沒(méi)有將第二被攝體無(wú)重疊地配置在其周?chē)目臻g的情況。這時(shí),通過(guò)重新拍攝背景圖像,使得第一被攝體不處于正中,而被配置在靠近端部,從而可以產(chǎn)生可空出配置第二被攝體的區(qū)域的效果。以下,對(duì)以上說(shuō)明的處理的細(xì)節(jié)進(jìn)行說(shuō)明。圖14是說(shuō)明圖5的處理,即取得第二被攝體圖像的處理的一個(gè)方法的流程圖。在經(jīng)由P20的S3-1中,第二被攝體圖像取得部件3取得第二被攝體圖像,處理進(jìn)入S3-2。這里的處理與圖5的S1的背景圖像的取得和取得方法本身相同。在S3-2中,同一部件3判斷是否有來(lái)自自動(dòng)快門(mén)部件15的拍攝圖像的指示,如果有指示則進(jìn)入S3-3,如果沒(méi)有指示則處理跳到P30。在S3-3中,同一部件3將在S3-1中取得的第二被攝體圖像存儲(chǔ)到主存儲(chǔ)器74、外部存儲(chǔ)器75等,處理跳到P30。在以上的S3-1到S3-3的處理中,進(jìn)行圖5的S3的處理。而且,處理自動(dòng)快門(mén)部件15以外,由攝影者手動(dòng)按壓快門(mén),或者在用定時(shí)器啟動(dòng)快門(mén)等情況下,也可以存儲(chǔ)拍攝圖像,但這些處理包含在S1、S2、S3-1的處理中。圖15是說(shuō)明圖5的S4的處理,即對(duì)背景修正量進(jìn)行計(jì)算的處理的一個(gè)方法的流程圖。雖然考慮各種計(jì)算背景修正量的方法,但是這里對(duì)使用塊匹配的簡(jiǎn)單方法進(jìn)行說(shuō)明。在經(jīng)由P30的S4-1中,背景修正量計(jì)算部件4將背景圖像分割為塊區(qū)域。圖6(b)是說(shuō)明將圖6(a)的背景圖像分割為塊區(qū)域的狀態(tài)的說(shuō)明圖。用虛線(xiàn)區(qū)分的矩形是各塊區(qū)域。將左上的塊設(shè)為“B(1,I)”,將其右的設(shè)為“B(1,2)”,將其下的設(shè)為“B(2,1)”來(lái)表現(xiàn)。在圖6(b)中,根據(jù)空間的情況,例如在塊B(1,1)的塊中,塊的左上記為“11”。在S4-2中,同一部件4求出背景圖像的塊在第一被攝體圖像、第二被攝體圖像上匹配的位置,處理進(jìn)入S4-3。所謂“(塊)匹配”是在這時(shí),在第一被攝體圖像、第二被攝體圖像上查找與背景圖像的各塊的塊內(nèi)圖像最相似的塊區(qū)域的處理。為了說(shuō)明,將定義塊的圖像(這里為背景圖像)稱(chēng)為“參照?qǐng)D像”,將查找相似塊的對(duì)方的圖像(這里為第一被攝體圖像和第二被攝體圖像)稱(chēng)為“檢索圖像”,將參照?qǐng)D像上的塊稱(chēng)為“參照塊”,將檢索圖像上的塊稱(chēng)為“檢索塊”。將參照?qǐng)D像上的任意的點(diǎn)(x,y)的像素值設(shè)為Pr(x,y),將檢索圖像上的任意的點(diǎn)(x,y)的像素值設(shè)為Ps(x,y)。而且,參照?qǐng)D像不限于背景圖像,與也可以定為基準(zhǔn)圖像或者與基準(zhǔn)圖像無(wú)關(guān)的第一被攝體圖像、第二被攝體圖像中的一個(gè),但為了求出背景部分的修正量而進(jìn)行塊匹配,所以將背景部分最多的背景圖像選作參照?qǐng)D像,有和檢索圖像中的背景圖像部分匹配的準(zhǔn)確率高的優(yōu)點(diǎn)。例如,在將第一被攝體圖像作為參照?qǐng)D像,將第二被攝體圖像作為檢索圖像時(shí),在第二被攝體圖像上的背景部分(例如圖8(b)的B(4,2))相當(dāng)于第一被攝體圖像上的被攝體部分時(shí),不能正確地求出對(duì)應(yīng)的塊。如果將背景圖像設(shè)為參照?qǐng)D像,則對(duì)應(yīng)于圖8(b)的B(4,2)的塊在背景圖像中作為圖6(b)的B(4,2)的塊而存在。目前,設(shè)參照塊為正方形,其一邊的尺寸為m像素。則參照塊B(i,j)的左上的像素的位置為(m×(i-1),m×(j-1)從參照塊B(i,j)的左上設(shè)為像素?cái)?shù)而離開(kāi)(dx,dy)的像素值為Pr(m×(i-1)+dx,m×(j-1)+dy)在將檢索塊的左上位置設(shè)為(xs,ys)時(shí),用以下2式求出參照塊B(i,j)和檢索塊的相似度S(xs,ys)D(xs,ys;dx,dy)=|Ps(xs+dx,ys+dy)-Pr(m×(i-1)+dx,m×(j-1)+dy|S(xs,ys)=Σdx=0m-1Σdy=0m-1D(xs,ys;dx,dy)]]>D(xs,ys;dx,dy)是參照決和檢索塊從左上離開(kāi)(dx,dy)的各個(gè)像素值之間的差的絕對(duì)值。然后,S(xs,ys)是對(duì)塊內(nèi)的全部像素將該差的絕對(duì)值進(jìn)行相加的值。如果參照塊和檢索塊是完全相同的圖像(對(duì)應(yīng)的像素值全部相等)的情況下,S(xs,ys)為0。如果不相似的部分增加,即像素值的差變大,則S(xs,ys)變?yōu)檩^大的值。因此,S(xs,ys)越小,越為相似的塊。S(xs,ys)是將檢索塊的左上位置設(shè)為(xs,ys)時(shí)的相似度,所以如果使(xs,ys)在檢索圖像上變化,則得到各個(gè)位置的相似度??梢詫⑺邢嗨贫戎凶钚〉南嗨贫鹊奈恢?xs,ys)設(shè)為已匹配的位置。將已匹配的位置的檢索塊稱(chēng)為“匹配塊”。圖16是說(shuō)明了該匹配塊的樣子的圖,但將圖16(a)的圖像作為參照?qǐng)D像,將圖16(b)的圖像作為檢索圖像,作為圖像的內(nèi)容,設(shè)括號(hào)形的線(xiàn)分別存在一些位置錯(cuò)位。設(shè)參照?qǐng)D像中的參照塊100位于括號(hào)形的線(xiàn)的稍角部。作為檢索圖像中的檢索塊,存在檢索塊101、102、103。如果分別計(jì)算參照塊100和檢索塊101、參照塊100和檢索塊102、參照塊100和檢索塊103中的相似度,則因?yàn)闄z索塊101為最小值,所以將檢索塊101作為相對(duì)于參照塊100的匹配塊就可以。以上對(duì)一個(gè)參照塊B(i,j)的匹配進(jìn)行了說(shuō)明,但可以對(duì)于各個(gè)參照塊求出匹配塊。對(duì)于圖6(b)的42個(gè)參照塊的每一個(gè),可以在第一被攝體圖像、第二被攝體圖像的各個(gè)中檢索匹配塊。而且,對(duì)于求出匹配塊的相似度的方法,這里使用了各像素值的差分的絕對(duì)值,但是此外還有各種方法,使用哪種方法都可以。例如,還有使用相關(guān)系數(shù)的方法和使用頻率分量的方法等,還有各種高速化方法等。而且,雖然考慮各種參照塊的位置和大小等的設(shè)定方法,但匹配塊的詳細(xì)的改進(jìn)方法不是本發(fā)明的主旨,所以這里省略說(shuō)明。而且,對(duì)于參照塊的大小,如果過(guò)小,則不能在塊內(nèi)捕捉很好的特征,匹配結(jié)果的精度變差,但相反如果過(guò)大,則包含被攝體和圖像的框,匹配結(jié)果的精度變差,不能很好對(duì)應(yīng)旋轉(zhuǎn)、擴(kuò)大縮小等的變化,所以希望設(shè)為適當(dāng)?shù)拇笮 =又?,在S4-3中,相同部件4從S4-2中求出的匹配塊中僅挑出與背景部分相當(dāng)?shù)臋z索塊,處理進(jìn)入S4-4。在S4-3中求出的匹配塊,因?yàn)閮H選擇差分最少的檢索塊,所以不能保證為相同的圖像,偶爾也有僅像某種模樣等的情況。而且,因?yàn)樽畛鯙榈谝换蛘叩诙粩z體,所以有時(shí)不存在與參照塊相當(dāng)?shù)膱D像部分,這時(shí)在適當(dāng)?shù)奈恢迷O(shè)定匹配塊。因此,需要從各匹配塊中去除被判斷為不是與參照塊相同的圖像部分的匹配塊。因?yàn)槭S嗟钠ヅ鋲K是判斷為與參照塊相同的圖像部分的匹配塊,所以結(jié)果是僅剩余除去了第一和第二被攝體后的背景部分。雖然考慮各種匹配塊的選擇方法,但是作為最簡(jiǎn)單的方法,為用規(guī)定閾值判斷相似度S(xs,ys)。即,如果各匹配塊S(xs,ys)超過(guò)該閾值,則該匹配作為不正確被去除的方法。S(xs,ys)被塊的大小影響,所以希望考慮塊的大小后決定閾值。圖7(b)是從圖7(a)的第一被攝體圖像的S4-2的匹配結(jié)果中,去除了不正確的匹配塊后的結(jié)果。在被判斷為正確的匹配塊中,分配與對(duì)應(yīng)的參照塊相同的號(hào)碼。同樣,圖8(b)是從圖8(a)的第二被攝體圖像的S4-2的匹配結(jié)果中,去除了不正確的匹配塊后的結(jié)果。由此可知,僅剩余不包含被攝體部分,或者基本不包含的背景部分的匹配塊。在S4-4中,同一部件4從S4-3中得到的背景部分匹配塊中求出第一被攝體圖像和第二被攝體圖像的背景修正量,處理跳到P40。作為背景修正量,例如求取旋轉(zhuǎn)量θ、擴(kuò)大縮小量R、和/或平行移動(dòng)量(Lx,Ly),可考慮各種計(jì)算方法。這里對(duì)使用了兩個(gè)塊的最簡(jiǎn)單的方法進(jìn)行說(shuō)明。而且,旋轉(zhuǎn)量、擴(kuò)大縮小量、平行移動(dòng)量以外的失真修正量,只要在拍攝時(shí)使照相機(jī)基本不移動(dòng),即使不使用,背景部分也基本重疊,可以在差分圖像中進(jìn)行干擾足夠小的失真修正的情況很多。為了得到旋轉(zhuǎn)量、擴(kuò)大縮小量、平行移動(dòng)量以外的失真修正量,雖然最少需要使用3點(diǎn)或者4點(diǎn)以上的塊,需要考慮了透視變換以后的計(jì)算,但由于是在全景圖像的合成等中也使用的公知方法(例如“共立出版bit1994年11月號(hào)別冊(cè)‘コンピユ一タ.サイエンス’(計(jì)算機(jī).科學(xué))”的P90等),所以這里省略處理的細(xì)節(jié)。首先,盡可能選擇相互距離遠(yuǎn)的兩個(gè)匹配塊。而且,在S4-3中剩余的匹配塊僅有一個(gè)時(shí),省略以后的求取擴(kuò)大縮小率、旋轉(zhuǎn)量的處理,只要求出和對(duì)應(yīng)的參照塊的位置的差分作為平行移動(dòng)量就可以。在S4-3中剩余的匹配塊一個(gè)也沒(méi)有時(shí),考慮重新拍攝了背景圖像、第一/第二被攝體圖像等的方法較好,所以進(jìn)行發(fā)出該意圖的警告等較好??紤]各種選擇方法,例如考慮以下方法1)選擇匹配塊中的任意兩個(gè),計(jì)算這兩個(gè)匹配塊的中心位置間的距離,2)在所有匹配塊的組合中進(jìn)行1)的計(jì)算,3)選擇2)中距離最大的組合作為在背景修正量的計(jì)算中使用的兩個(gè)塊。這里,作為上述3)舉出的那樣,作為使用相互距離最遠(yuǎn)的匹配塊的優(yōu)點(diǎn),可舉出在求出擴(kuò)大縮小率和修正量等時(shí)的精度變好的優(yōu)點(diǎn)。因?yàn)槠ヅ鋲K的位置為像素單位,所以精度也為像素單位。例如,在橫向離開(kāi)50像素的位置上錯(cuò)開(kāi)1像素時(shí)的角度,和橫向離開(kāi)5像素的位置上錯(cuò)開(kāi)0.1像素時(shí)的角度相同。但是,0.1像素的錯(cuò)開(kāi)在匹配中不能檢測(cè)。因此,使用了盡可能遠(yuǎn)離的匹配塊的方法較好。使用兩個(gè)塊只是為了計(jì)算簡(jiǎn)單。使用更多的塊來(lái)計(jì)算平均擴(kuò)大縮小率和旋轉(zhuǎn)量時(shí),獲得誤差減小的優(yōu)點(diǎn)。例如在圖8(b)的例子中,相互距離最遠(yuǎn)的兩個(gè)匹配塊為塊15和61的組合。接著,設(shè)將選擇的兩個(gè)匹配塊的中心位置用檢索圖像上的坐標(biāo)表示為(x1’,y1’),(x2’,y2’),將與其對(duì)應(yīng)的參照塊的中心位置用參照?qǐng)D像上的坐標(biāo)表示為(x1,y1),(x2,y2)。首先,求取擴(kuò)大縮小率。匹配塊的中心間的距離Lm為L(zhǎng)m=((x2’-x1’)×(x2’-x1’)+(y2’-y1’)×(y2’-y1’))1/2參照塊的中心間的距離Lr為L(zhǎng)r=((x2-x1)×(x2-x1)+(y2-y1)×(y2-y1))1/2擴(kuò)大縮小率R用下式求出R=Lr/Lm接著求取旋轉(zhuǎn)量。通過(guò)匹配塊的中心的直線(xiàn)的傾角θm為θm=arctan((y2’-y1’)/(x2’-x1’))(但是x2’=x1’時(shí),θm=π/2)通過(guò)參照塊的中心的直線(xiàn)的傾角θr為θr=arctan((y2-y1)/(x2-x1))(但是x2=x1時(shí),θr=π/2)而且,arctan為tan的逆函數(shù)。由此,旋轉(zhuǎn)量θ用下式求出θ=θr-θm最后是平行移動(dòng)量,但是其對(duì)應(yīng)的決之間的中心位置相等就可以,所以例如設(shè)(x1’,y1’)和(x1,y1)相等,則平行移動(dòng)量(Lx,Ly)為(Lx,Ly)=(x1’-x1,y1’-y1)由于旋轉(zhuǎn)量和擴(kuò)大縮小量將任意位置設(shè)為中心都可以,所以這里將平行移動(dòng)中一致的點(diǎn),即對(duì)應(yīng)的塊的中心作為旋轉(zhuǎn)中心和擴(kuò)大縮小中心。因此,將檢索圖像中的任意的點(diǎn)(x’,y’)變換為被修正的點(diǎn)(x”,y”)的變換式為x”=R×(cosθ×(x’-x1’)-sinθ×(y’-y1’))+x1y”=R×(sinθ×(x’-x1’)+cosθ×(y’-y1’))+y1雖然描述了旋轉(zhuǎn)量、擴(kuò)大縮小量、平行移動(dòng)量,但正確的是在這里求取了θ、R,(x1,y1)、(x1’,y1’)的參數(shù)。而且,修正量/變換式的表示方法不應(yīng)限制于此,其他表示方法也可以。該變換式是將檢索圖像上的點(diǎn)(x’,y’)變換為修正圖像上的點(diǎn)(x”,y”),但修正圖像上的點(diǎn)(x”,y”)與參照?qǐng)D像(背景部分)重疊,所以可以看做從檢索圖像向參照?qǐng)D像(背景部分重疊那樣)變換。因此,將該變換式表現(xiàn)為將檢索圖像上的點(diǎn)(Xs,Ys)變換到參照?qǐng)D像上的點(diǎn)(Xr,Yr)的變換函數(shù)Fsr和下式(Xr,Yr)=Fsr(Xs,Ys)而且,前式也可以反向變形為從被修正的點(diǎn)(x”,y”)到檢索圖像中的任意點(diǎn)(x’,y’)的變換式x’=(1/R×(cosθ×(x”-x1)+sinθ×(y”-y1))+x1’y’=(1/R×(sinθ×(x”-x1)-sinθ×(y”-y1))+y1’如果這也用變換函數(shù)Frs表示,則為下式(Xs,Ys)=Frs(Xr,Yr)變換函數(shù)Frs也稱(chēng)為變換函數(shù)Fsr的逆變換函數(shù)。在圖6(a)、圖7(a)、圖8(a)的例子中,沒(méi)有旋轉(zhuǎn)和擴(kuò)大縮小,僅為簡(jiǎn)單的平行移動(dòng),但細(xì)節(jié)在后以圖6(c)、圖8(c)進(jìn)行說(shuō)明。以上的S4-1到S4-4的處理中,進(jìn)行了圖5的S4的背景修正量的計(jì)算處理。圖17是說(shuō)明圖5的S5的處理,即生成背景圖像和第二被攝體圖像的修正圖像,生成第一被攝體圖像的差分圖像的處理的一個(gè)方法的流程圖。在S4中計(jì)算的修正量的說(shuō)明中,對(duì)背景圖像和第一被攝體圖像、背景圖像和第二被攝體圖像之間的修正量進(jìn)行了計(jì)算。如果以變換式的形式書(shū)寫(xiě),則將背景圖像上的點(diǎn)設(shè)為(Xb,Yb),將第一被攝體圖像上的點(diǎn)設(shè)為(X1,Y1),將第二被攝體圖像上的點(diǎn)設(shè)為(X2,Y2),求出下式(X1,Y1)=Fb1(Xb,Yb)(Xb,Yb)=F1b(X1,Y1)(X2,Y2)=Fb2(Xb,Yb)(Xb,Yb)=F2b(X2,Y2)但是,F(xiàn)b1是從(Xb,Yb)到(X1,Y1)的變換函數(shù),F(xiàn)1b是其逆變換函數(shù),F(xiàn)b2是從(Xb,Yb)到(X2,Y2)的變換函數(shù),F(xiàn)2b是其逆變換函數(shù)。由于在三個(gè)圖像中求出了兩個(gè)圖像的變換函數(shù)(修正量),所以三個(gè)圖像中的任意兩個(gè)圖像都可能相互變換。因此,問(wèn)題是在進(jìn)行修正時(shí),與哪個(gè)圖像匹配來(lái)進(jìn)行修正。這里還考慮后面的處理的效率,第一被攝體圖像,即在第一/第二被攝體圖像內(nèi),將先拍攝的被攝體圖像作為基準(zhǔn)圖像,并進(jìn)行修正,使得除此之外的背景圖像、第二被攝體圖像的背景部分與第一被攝體圖像的背景部分重疊。例如考慮由于被攝體之間存在重疊等原因而重新拍攝的情況。設(shè)對(duì)第一/第二被攝體圖像以該順序進(jìn)行了拍攝,將第一被攝體圖像設(shè)為基準(zhǔn)圖像,被攝體之間存在重疊的情況下,重新拍攝第二被攝體圖像。這時(shí),第一被攝體圖像和以第一被攝體圖像為基準(zhǔn)圖像修正的背景圖像不需要重新拍攝,可以原樣用于合成圖像的制作。與此相對(duì),在將后拍攝的第二被攝體圖像設(shè)為基準(zhǔn)圖像,被攝體之間存在重疊的情況下,如果重新拍攝第二被攝體圖像,則當(dāng)然以第二被攝體圖像為基準(zhǔn)修正的第一被攝體圖像和背景圖像的修正處理無(wú)效,必須對(duì)各自進(jìn)行再修正。這樣在第一被攝體圖像和第二被攝體圖像中,通過(guò)將先拍攝的一個(gè)作為基準(zhǔn)圖像,可以在反復(fù)重新拍攝的情況下產(chǎn)生可減少處理量/處理時(shí)間的效果。從第二被攝體圖像到第一被攝體圖像的變換函數(shù)F21組合上述的變換式,成為下式(X1,Y1)=F21(X2,Y2)=Fb1(F2b(X2,Y2))逆變換函數(shù)F12也以同樣的考慮方式來(lái)求出。在經(jīng)由P40的S5-1中,修正圖像生成部件5利用在背景修正量計(jì)算部件4(S4)中得到的修正量生成修正后的圖像,使得背景圖像的背景部分與第一被攝體圖像的背景部分重疊,處理進(jìn)入S5-2。而且,將這里生成的被修正的背景圖像稱(chēng)為“修正背景圖像”(參照?qǐng)D6(c))。在修正中,也可以使用變換函數(shù)Fb1或者逆變換函數(shù)F1b。一般來(lái)說(shuō),為了生成漂亮的變換圖像,求出與變換圖像(這里為修正背景圖像)的像素位置對(duì)應(yīng)的原圖像(這里為背景圖像)的像素位置,從該像素位置求出變換圖像的像素值。這時(shí),使用的變換函數(shù)變?yōu)镕1b。而且,一般來(lái)說(shuō),求出的原圖像的像素位置不為整數(shù)值,所以保持原樣,求出的原圖像的像素位置的像素值不能被求出。因此,通常進(jìn)行某些插補(bǔ)。例如,作為最一般的方法,有根據(jù)求出的原圖像的像素位置周?chē)恼麛?shù)值的像素位置的四個(gè)像素用一次插補(bǔ)求出的方法。關(guān)于一次插補(bǔ)法,記載在一般的圖像處理的書(shū)等(例如,森北出版安居院猛,中嶼正之共著“圖像信息處理”的P54頁(yè))中,這里省略詳細(xì)的說(shuō)明。圖6(c)為根據(jù)圖6(a)的背景圖像和圖7(a)的第一被攝體圖像生成的背景圖像與第一被攝體圖像的背景部分重疊的修正背景圖像的例子。在該例子中,修正僅為平行移動(dòng)。為了明白修正的樣子,用虛線(xiàn)表示圖6(a)的背景圖像的范圍??蚣苷w比圖6(a)的背景圖像稍向左移動(dòng)。修正的結(jié)果,產(chǎn)生對(duì)應(yīng)的背景圖像不存在的部分。例如,圖6(c)的左端的虛線(xiàn)和實(shí)線(xiàn)之間的部分是在圖6(a)的背景圖像中不存在的部分,所以去除。這里可知表示下方的道路的水平線(xiàn)在未到達(dá)左端的中間切斷。該部分利用在S5-2中說(shuō)明的屏蔽(mask)圖像排除,所以原樣作為合適的像素值保持也沒(méi)問(wèn)題。在S5-2中,修正圖像生成部件5生成修正背景圖像的屏蔽圖像,處理進(jìn)入S5-3。屏蔽圖像是在生成修正圖像時(shí),用先前說(shuō)明的式求出與修正圖像上的各像素對(duì)應(yīng)的原始圖像上的像素位置,但是以該像素位置是否收斂在原始圖像的范圍內(nèi)進(jìn)行判斷,如果收斂,則作為屏蔽部分,將修正圖像上的對(duì)應(yīng)的像素的像素值設(shè)為例如0(黑),如果不收斂,則可以設(shè)為例如255(白)。雖然屏蔽部分的像素值不限于0,255,可以自由決定,但是以下用0(黑),255(白)進(jìn)行說(shuō)明。圖6(d)是圖6(c)的屏蔽圖像的例子。實(shí)線(xiàn)的框架中被涂黑的范圍是屏蔽部分。該屏蔽部分表示在被修正的圖像中原始圖像(修正前的圖像)具有像素的范圍。因此,在圖6(d)中,對(duì)應(yīng)的背景圖像不存在的左端部分不成為屏蔽部分,成為白色。在S5-3中,差分圖像生成部件6利用第一被攝體圖像和從修正圖像生成部件5(S5-1)得到的修正背景圖像及其屏蔽圖像,生成第一被攝體圖像和修正背景圖像的差分圖像,處理進(jìn)入S5-4。而且,這里將被生成的差分圖像稱(chēng)為“第一被攝體差分圖像”。為了生成差分圖像,觀察某點(diǎn)(x,y)的屏蔽圖像上的點(diǎn)的像素值是否為0。如果是0(黑),則修正背景圖像上被修正的像素應(yīng)該存在,所以差分圖像上的點(diǎn)(x,y)的像素值Pd(x,y)根據(jù)下式,成為第一被攝體圖像上的像素值P1(x,y)和修正背景圖像上的像素值Pfb(x,y)的差的絕對(duì)值。Pd(x,y)=|P1(x,y)-Pfb(x,y)|如果某點(diǎn)(x,y)的屏蔽圖像上的點(diǎn)的像素值不為0(黑),則成為下式Pd(x,y)=0可以對(duì)點(diǎn)(x,y)從差分圖像的左上到右下的所有像素重復(fù)這些處理。圖9(a)是從圖7(a)的第一被攝體圖像和圖6(c)的修正背景圖像、圖6(d)的屏蔽圖像生成的第一被攝體差分圖像的例子。人物(1)的區(qū)域以外的位置背景一致,或者在屏蔽范圍以外,從而差分為0,主要在人物(1)的區(qū)域內(nèi),成為人物(1)的圖像和背景的圖像混合的圖像。通常,由于在S4中的修正量的計(jì)算誤差,或者修正圖像生成的插補(bǔ)處理等的誤差,背景部分的圖像自身的拍攝時(shí)間的差造成的微妙的變化等,在人物(1)的區(qū)域以外也產(chǎn)生小的差分部分。通常為數(shù)像素左右的大小,差也不太大的情況較多。在圖9(a)人物(1)的區(qū)域的周邊也多少產(chǎn)生白色的部分。在S5-4中,修正圖像生成部件5使用背景修正量計(jì)算部件4(S4)得到的修正量生成修正后的圖像,使得第二被攝體圖像的背景部分和第一被攝體圖像的背景部分重疊,處理進(jìn)入S5-4。在修正中,可以使用變換函數(shù)F21或者逆變換函數(shù)F12。除了處理的圖像和變換函數(shù)不同以外,與S5-1的處理相同。而且,將這里生成的被修正的第二被攝體圖像稱(chēng)為“修正第二被攝體圖像”。圖8(c)從圖8(a)的第二被攝體圖像和圖7(a)的第一被攝體圖像生成的修正第二被攝體圖像的例子。在該例中的修正也僅為平行移動(dòng)。為了明白修正的樣子,用虛線(xiàn)表示圖8(a)的第二被攝體圖像的范圍。框架整體比圖6(a)的背景圖像稍向右下移動(dòng)。而且,圖18(a)是在修正中需要旋轉(zhuǎn)時(shí)的第二被攝體圖像的例子。設(shè)背景圖像、第一被攝體圖像與圖6(a)、圖7(a)相同。畫(huà)面整體比圖8(a)稍向左旋轉(zhuǎn)。圖18(b)是在圖18(a)的第二被攝體圖像和圖6(a)的背景圖像中進(jìn)行了塊匹配的結(jié)果。塊即使存在旋轉(zhuǎn)等,如果旋轉(zhuǎn)量和塊的大小不是那么大,則塊內(nèi)的圖像變化少,所以在某種程度上跟隨旋轉(zhuǎn),進(jìn)行正確的匹配。圖18(c)是根據(jù)圖18(b)的塊匹配結(jié)果計(jì)算背景修正量而修正后的第二被攝體圖像。與圖7(a)的第一被攝體圖像的背景部分重疊,可知旋轉(zhuǎn)被修正。為了明白修正的樣子,用虛線(xiàn)表示圖18(a)的圖像框。在S5-5中,修正圖像生成部件5生成修正第二被攝體圖像的屏蔽圖像,處理進(jìn)入S5-6。關(guān)于屏蔽圖像的生成方法,與S5-2相同。圖8(d)是圖8(c)屏蔽圖像的例子。圖18(b)的情況下的屏蔽圖像成為圖8(d)那樣。而且,即使在擴(kuò)大縮小和旋轉(zhuǎn)的修正量存在的情況下,如果在S5-4、S5-5中進(jìn)行修正和屏蔽圖像的生成,則由于后面的處理作為順序沒(méi)有變化,所以,在以后的說(shuō)明中,第二被攝體圖像不使用圖18(a),而使用圖8(a)。在S5-6中,差分圖像生成部件6利用從修正圖像生成部件5(S5-1)得到的修正背景圖像、從修正圖像生成部件5(S5-2)得到的修正背景圖像的屏蔽圖像、從修正圖像生成部件5(S5-4)得到的修正第二被攝體圖像,從修正圖像生成部件5(S5-5)得到的修正第二被攝體圖像的屏蔽圖像,生成修正第二被攝體圖像和修正背景圖像的差分圖像后,處理跳到P50。而且,將這里生成的差分圖像稱(chēng)為“第二被攝體差分圖像”(參照?qǐng)D10(a))。關(guān)于差分圖像的生成方法,基本上與S5-3相同,但是在修正背景圖像的屏蔽圖像和修正第二被攝體圖像的屏蔽圖像的某點(diǎn)(x,y)的像素值的任意一個(gè)都僅在0(黑)時(shí)取得圖像的差分這一點(diǎn)上與屏蔽圖像的處理稍有不同。圖10(a)是圖6(c)的修正背景圖像和從圖8(c)的修正第二被攝體圖像生成的第二被攝體差分圖像的例子。除了第一被攝體變?yōu)榈诙粩z體之外,為與圖9(a)相同的狀態(tài)。在以上的S5-1至S5-6的處理中,進(jìn)行圖5的S5的差分圖像生成的處理。圖19是說(shuō)明圖5的S6的處理,即提取被攝體區(qū)域的處理的一個(gè)方法的流程圖。在經(jīng)由P50的S6-1中,被攝體區(qū)域提取部件7根據(jù)從差分圖像生成部件6得到的差分圖像,生成“標(biāo)示圖像”(對(duì)于“標(biāo)示圖像”的含義在后說(shuō)明),處理進(jìn)入S6-2。差分圖像有第一被攝體差分圖像和第二被攝體差分圖像兩個(gè),所以標(biāo)示圖像也被分別做成。由于哪一個(gè)的生成標(biāo)示圖像的處理步驟都在一起,所以以后“差分圖像”一詞中包含“第一被攝體差分圖像”、“第二被攝體差分圖像”來(lái)說(shuō)明。首先,作為準(zhǔn)備,根據(jù)差分圖像生成二值圖像。雖然也考慮各種二值圖像的生成方法,但是,例如將差分圖像中的各像素值和規(guī)定的閾值比較,如果比閾值大則為黑,如果小于或等于閾值則為白等處理就可以。在差分圖像由R,G,B的像素值構(gòu)成的情況下,將R,G,B的像素值相加后的值與閾值比較就可以。圖9(b)是根據(jù)圖9(a)的第一被攝體圖像生成的二值圖像的例子。黑色的區(qū)域從區(qū)域110到115,存在六個(gè),除了大的人形區(qū)域112以外都是小區(qū)域。同樣,圖10(b)是根據(jù)圖10(a)的第二被攝體圖像生成的二值圖像的例子。黑色的區(qū)域從區(qū)域120到125,存在六個(gè),除了大的人形區(qū)域122以外都是小區(qū)域。接著,根據(jù)生成的二值圖像生成標(biāo)示圖像,但是一般所說(shuō)的“標(biāo)示圖像”是找出二值圖像中的白像素之間或者黑像素之間連接的塊,通過(guò)對(duì)該塊分配號(hào)碼(以后稱(chēng)為“標(biāo)示值”)的處理而生成的圖像。在多數(shù)情況下,被輸出的標(biāo)示圖像是多值的單色圖像,各塊的區(qū)域的像素值變?yōu)槿勘环峙涞臉?biāo)示值。而且,以后將具有相同標(biāo)示值的像素的區(qū)域稱(chēng)為“標(biāo)示區(qū)域”。對(duì)于找出連接的塊,對(duì)該塊分配標(biāo)示值的處理步驟的細(xì)節(jié),由于記載在一般的圖像處理的書(shū)等中(例如昭晃堂昭和62年發(fā)行“圖像處理手冊(cè)”P(pán)318頁(yè)),所以這里省略說(shuō)明,表示處理結(jié)果例。所謂二值圖像和標(biāo)示圖像,由于二值或者多值的差異,標(biāo)示圖像例用圖9(b)和圖10(b)說(shuō)明。在圖9(b)的區(qū)域110到115的號(hào)碼后面附帶用括號(hào)括住的號(hào)碼,如“110(1)”等,但這是各區(qū)域的標(biāo)示值。對(duì)于圖10(b)也一樣。除此之外的區(qū)域被分配標(biāo)示值0。而且,標(biāo)示圖像圖9(b)、圖10(b)由于在紙面上難以圖示多值圖像,所以標(biāo)示為二值圖像,但是,由于實(shí)際上標(biāo)示值產(chǎn)生多值圖像,所以雖然不需要顯示,但在實(shí)際上作為圖像顯示的情況下,執(zhí)行與圖9(b)、圖10(b)不同的觀察方法。在S6-2中,被攝體區(qū)域提取部件7除去從S6-1得到的標(biāo)示圖像中的“干擾”區(qū)域,處理進(jìn)入S6-3?!案蓴_”一般指目的數(shù)據(jù)以外的部分,這里指人形的區(qū)域以外的區(qū)域。為了除去干擾,有各種方法,但是作為簡(jiǎn)單的方法,例如有除去某閾值以下面積的標(biāo)示區(qū)域的方法。為此,首先求出各標(biāo)示區(qū)域的面積。為了求出面積,只要掃描所有像素,對(duì)存在多少具有某特定的標(biāo)示值的像素進(jìn)行計(jì)數(shù)就可以。在對(duì)所有標(biāo)示值求出面積(像素?cái)?shù))以后,在其中除去規(guī)定閾值以下的面積(像素?cái)?shù))的標(biāo)示區(qū)域。具體來(lái)說(shuō),除去處理是將該標(biāo)示區(qū)域的標(biāo)示值設(shè)為0,或者做成新的標(biāo)示圖像,在其中復(fù)制干擾之外的標(biāo)示區(qū)域也可以。圖9(c)是從圖9(b)的標(biāo)示圖像中除去了干擾之后的結(jié)果。除了人形區(qū)域112以外,都被作為干擾除去。同樣,圖10(c)是從圖10(b)的標(biāo)示圖像中除去了干擾之后的結(jié)果。除了人形區(qū)域122以外,都被作為干擾除去。在S6-3中,被攝體區(qū)域提取部件7從S6-2得到的被除去了干擾后的標(biāo)示圖像中提取被攝體的區(qū)域,處理跳到P60。一般來(lái)說(shuō),僅通過(guò)圖像處理,難以完全正確地對(duì)被攝體的區(qū)域進(jìn)行提取,一般需要人的知識(shí)和人工智能的高度的處理。雖然也有作為提取區(qū)域的方法之一的“曲折移動(dòng)(snake)”等,但沒(méi)有完美的方法。但是,在某種程度上可以推測(cè)可在重疊檢測(cè)處理或者合成處理中使用的程度的區(qū)域。例如,在程序中等將第一或者第二被攝體的人數(shù)設(shè)定為固定值或者變量,則可以從被除去了干擾之后的標(biāo)示圖像中,按照面積大小的順序,按人數(shù)提取標(biāo)示區(qū)域。或者可以將所有具有大于或等于規(guī)定的閾值的面積的區(qū)域作為被攝體區(qū)域。而且,如果難以完全自動(dòng)化,則可以考慮使用書(shū)寫(xiě)板或者鼠標(biāo)等輸入部件,由用戶(hù)指定哪個(gè)區(qū)域?yàn)楸粩z體區(qū)域的方法。指定方法也考慮以下方法連被攝體區(qū)域的輪廓都指定而得到的方法,以及輪廓使用標(biāo)示圖像的各標(biāo)示區(qū)域的輪廓,指定哪個(gè)標(biāo)示區(qū)域是被攝體區(qū)域而得到的方法。這里,將所有具有大于或等于規(guī)定的閾值的面積都作為被攝體區(qū)域,但是,在圖9(c)和圖10(c)中,由于已經(jīng)在干擾除去階段使大的區(qū)域變?yōu)橐粋€(gè),所以處理結(jié)果圖9(d)和圖10(d)看上去和圖9(c)和圖10(c)一樣。而且,圖9(b)和圖10(b)中偶爾人形的區(qū)域很好地成為一個(gè)標(biāo)示區(qū)域,但是通過(guò)圖像,有時(shí)即使是一個(gè)人的被攝體,也被分為多個(gè)標(biāo)示區(qū)域。例如,在被攝體區(qū)域中的正中附近的像素為與背景相似的顏色和亮度時(shí),由于在差分圖像中該部分的像素值小,所以有時(shí)被攝體區(qū)域的正中周?chē)蛔R(shí)別為背景,被攝體區(qū)域被分?jǐn)酁樯舷禄蜃笥也⒈惶崛?。這時(shí),有可能出現(xiàn)后面的被攝體的重疊檢測(cè)和合成處理等不能很好的處理的情況。因此,也有使標(biāo)示圖像的標(biāo)示區(qū)域膨脹,將距離近的標(biāo)示區(qū)域作為相同標(biāo)示區(qū)域進(jìn)行統(tǒng)一處理的方法。進(jìn)而還考慮利用曲折移動(dòng)的方法。對(duì)于膨脹和曲折移動(dòng)的處理步驟的細(xì)節(jié),由于記錄在一般的圖像處理的書(shū)等中(例如昭晃堂昭和62年發(fā)行“圖像處理手冊(cè)”P(pán)320頁(yè),以及KassA.,etal.,“SnakesActiveContourModels”,Int.J.Comput.Vision,pp.321-331(1988)),所以這里省略說(shuō)明。而且,即使不統(tǒng)一地使用距離近的標(biāo)示區(qū)域,為了用于減少遺漏有重疊的情況的危險(xiǎn)性,也有使提取出的被攝體區(qū)域進(jìn)行一定量的膨脹的方法。而且,這里以不特別進(jìn)行膨脹和統(tǒng)一的處理例來(lái)進(jìn)行說(shuō)明。在以上的S6-1到S6-3的處理中,進(jìn)行圖5的S6的被攝體區(qū)域提取處理。接著,對(duì)圖5的S7的處理的一個(gè)詳細(xì)的例子進(jìn)行說(shuō)明。在S7中,重疊檢測(cè)部件8對(duì)于從被攝體區(qū)域提取部件7(S6)得到的第一被攝體區(qū)域、第二被攝體區(qū)域檢測(cè)兩者的區(qū)域中是否存在重疊,在存在重疊的情況下提取重疊區(qū)域。但是,實(shí)際上,為了檢測(cè)是否存在重疊,由于提取重疊區(qū)域,檢測(cè)是否存在重疊非常簡(jiǎn)單,所以首先提取重疊區(qū)域。作為其方法,判斷某像素的位置(x,y)是否屬于第一被攝體區(qū)域和第二被攝體區(qū)域兩者,如果屬于兩者,則將該像素值例如設(shè)為0(黑),如果不屬于兩者,則例如設(shè)為255(白),如果對(duì)所有像素位置進(jìn)行位置(x,y)掃描,結(jié)果則可以生成重疊圖像。為了判斷某像素的位置(x,y)是否屬于第一被攝體區(qū)域和第二被攝體區(qū)域兩者,觀察包含從S6得到的第一被攝體區(qū)域的圖像和包含第二被攝體區(qū)域的圖像中的(x,y)位置的像素,可以通過(guò)是否兩個(gè)都為被攝體區(qū)域的像素(例如在前面的例子中,如果標(biāo)示值不為0則為被攝體區(qū)域的像素)來(lái)進(jìn)行判斷。觀察被生成的重疊圖像中是否存在具有0(黑)的像素值的像素,如果存在,則存在重疊,如果不存在,則不存在重疊。而且,重疊檢測(cè)部件8在與重疊有關(guān)的信息中,不僅包括是否存在重疊,還對(duì)重疊的區(qū)域進(jìn)行輸出。即,也輸出生成的重疊圖像。在圖9(c)、圖10(c)的例子中,由于沒(méi)有重疊,所以不特別表示重疊圖像,但是這時(shí)重疊檢測(cè)部件8判斷沒(méi)有重疊。用圖20(a)的第二被攝體圖像說(shuō)明存在重疊的例子。而且,背景圖像、第一被攝體圖像使用圖6(a)、圖7(a)。圖20(b)是從圖20(a)生成的第二被攝體圖像。第二被攝體圖像130與圖10(d)的區(qū)域122相比稍偏向左。根據(jù)圖20(b)和圖9(d)的第一被攝體圖像做成的重疊圖像為圖12。重疊的區(qū)域131被涂黑。為了容易了解重疊的狀況,在圖12中用虛線(xiàn)表示第一被攝體區(qū)域112和第二被攝體區(qū)域130(在實(shí)際的重疊圖像中不存在該虛線(xiàn))。在圖12的情況下,重疊檢測(cè)部件8判斷存在重疊。接著,圖21是對(duì)圖5的S8的處理,即與重疊有關(guān)的處理的一個(gè)方法進(jìn)行說(shuō)明的流程圖。關(guān)于與重疊有關(guān)的其它的處理方法,在后面用圖22、23、24、27進(jìn)行說(shuō)明。在經(jīng)由P70的S8-1中,重疊警告部件13根據(jù)從重疊檢測(cè)部件8(S8)得到的信息來(lái)判斷是否存在重疊,在存在重疊的情況下進(jìn)到S8A-2,在沒(méi)有重疊的情況下處理跳到P80。在S8A-2中,重疊警告部件13將第一被攝體和第二被攝體存在重疊的情況警告用戶(hù)(拍攝者)或者被攝體或者兩方,處理跳到P80。作為警告的通知方法考慮各種情況。例如,在利用合成圖像進(jìn)行通知的情況下,將合成區(qū)域醒目地重疊在合成圖像來(lái)顯示就可以。圖13(a)、圖13(b)是對(duì)其進(jìn)行說(shuō)明的例子。兩個(gè)圖像的差異僅在于第一被攝體(人物(1))的圖像合成方法的不同。在圖13(a)、圖13(b)中,圖12的重疊區(qū)域131被重疊在合成圖像上來(lái)顯示。如果將區(qū)域131的部分的像素值變更后用紅色等醒目的顏色涂覆則更好。或者使區(qū)域131的區(qū)域及其輪廓等閃爍顯示也可以。圖13(c)是進(jìn)一步用文字進(jìn)行警告的例子。在圖13(c)的上方,在合成圖像上重疊產(chǎn)生警告窗口,在其中顯示“被攝體重疊!”的信息。也可以使其醒目的配色或者閃爍。對(duì)于這些合成圖像的覆寫(xiě),可以按照重疊警告部件13的指示對(duì)重疊圖像生成部件9進(jìn)行,也可以對(duì)重疊圖像顯示部件10進(jìn)行。在使警告窗口閃爍的情況下,可能需要使原來(lái)的合成圖像留下,所以有時(shí)對(duì)于重疊圖像顯示部件10,使例如從主存儲(chǔ)器74或者外部存儲(chǔ)器75間歇地讀出并提供警告窗口的數(shù)據(jù)的萬(wàn)法較好。如果在圖3(a)的監(jiān)視器141上顯示這些警告顯示,則可以一邊拍攝一邊確認(rèn)重疊的狀態(tài),在拍攝中很方便。這時(shí),可以產(chǎn)生拍攝者在將接著拍攝的圖像作為第二被攝體圖像等使用的情況下,對(duì)被攝體(人物(2))進(jìn)行“因?yàn)橹丿B,所以再向右方移動(dòng)”的指示,以便消除重疊狀態(tài)的優(yōu)點(diǎn)。而且,所謂在將接著拍攝的圖像作為第二被攝體圖像等使用的情況,考慮以下情況用戶(hù)通過(guò)菜單或者快門(mén)按鈕143指示第二被攝體圖像的記錄(存儲(chǔ)器寫(xiě)入)的情況,或者如前所述那樣,成為將第二被攝體圖像活動(dòng)地拍攝,將修正重疊圖像基本上實(shí)時(shí)地顯示的反復(fù)處理的專(zhuān)用模式的情況等。而且,圖3(a)的監(jiān)視器141朝向拍攝者的方向,但如果是監(jiān)視器可以朝向被攝體的方向的裝置,則被攝體也可以確認(rèn)重疊狀況,即使不被拍攝者指示,被攝體也可以自己移動(dòng)以便消除重疊。也可以準(zhǔn)備與監(jiān)視器141不同的監(jiān)視器,使其可以看見(jiàn)被攝體。而且,如果將如前所述作為專(zhuān)用模式說(shuō)明的圖5的S3到S10的處理進(jìn)行重復(fù),則可以基本上實(shí)時(shí)地了解當(dāng)前的重疊狀態(tài),所以基本上實(shí)時(shí)地了解是否通過(guò)被攝體的移動(dòng)而消除了重疊,可以使拍攝便利且有效率。從圖5的S3到S10的處理如果使用足夠快的CPU和邏輯電路等,則不需要那么長(zhǎng)的時(shí)間。在實(shí)際使用中,如果可以實(shí)現(xiàn)1秒內(nèi)大于或等于1次的速度的重復(fù)處理,則可以說(shuō)是基本上實(shí)時(shí)地顯示。而且,在重復(fù)處理的情況下,持續(xù)更新第二被攝體圖像,但是在S5中生成差分圖像時(shí),將基準(zhǔn)圖像設(shè)為第一被攝體圖像,是由于具有在反復(fù)處理時(shí)可以減少處理量的優(yōu)點(diǎn)。即,如果將第二被攝體圖像設(shè)為基準(zhǔn)圖像,則必須對(duì)包含第一被攝體圖像、背景圖像的全體進(jìn)行背景修正量的計(jì)算、重復(fù)圖像生成和被攝體區(qū)域的檢測(cè)等的處理,但是如果將第一被攝體圖像設(shè)為基準(zhǔn)圖像,則一次就可以完成第一被攝體圖像和背景圖像之間的中間處理,只要重復(fù)進(jìn)行與第二被攝體圖像有關(guān)聯(lián)的處理就可以。而且,只要看見(jiàn)將重疊區(qū)域重疊在合成圖像而顯示的結(jié)果、被攝體之間的重疊狀況和合成圖像的框架之間的關(guān)系,可以判斷被攝體不論怎樣移動(dòng)都產(chǎn)生重疊,或者被攝體在框架之外,則可以判斷出根據(jù)第一被攝體圖像和背景圖像的拍攝重新進(jìn)行的方式較好。而且,作為警告的通知的方法,可以通過(guò)使圖3(a)的燈142點(diǎn)亮或者閃爍來(lái)進(jìn)行通知。由于是警告,所以如果將燈的顏色設(shè)為紅色或者橙色等顏色則容易明白。燈的閃爍等一般具有即使拍攝者不盯著監(jiān)視器141也容易引起注意的優(yōu)點(diǎn)。而且,可以如圖13(b)那樣不將重疊區(qū)域重疊在合成圖像中進(jìn)行顯示,僅以燈通知也可以。這時(shí),雖然難以馬上了解重疊了多少,但是知道了是否有重疊,而在之后通過(guò)被攝體移動(dòng)等來(lái)觀察是否警告通知消失,則可以達(dá)到得到?jīng)]有重疊的合成圖像的目的,所以?xún)H通過(guò)燈也可以。由此,產(chǎn)生省略顯示重疊部分的處理的優(yōu)點(diǎn)。而且,用數(shù)字或者柱形圖等在監(jiān)視器141上顯示重疊的面積,或者使多個(gè)燈的亮燈控制或單獨(dú)的燈的閃爍間隔根據(jù)重疊的面積而改變等,可以用其它途徑通知重疊狀況更好。而且,雖然在圖3(a)中沒(méi)有,但存在與監(jiān)視器141不同的尋像器那樣可以確認(rèn)圖像的其它部件時(shí),也考慮進(jìn)而與監(jiān)視器141一樣顯示警告通知,或者在尋像器內(nèi)部安裝燈來(lái)進(jìn)行通知的方法。而且,在雖然在圖3(a)、圖3(b)中沒(méi)有表示,但是也可以使用圖2的揚(yáng)聲器80來(lái)進(jìn)行警告通知。在存在重疊時(shí),一邊使警告蜂鳴器鳴叫,一邊輸出“產(chǎn)生重疊”等的聲音等來(lái)進(jìn)行警告通知。這時(shí)也有望得到與燈相同的效果。在使用揚(yáng)聲器的情況下,與光不同,基本上沒(méi)有指向性,所以有通過(guò)一個(gè)揚(yáng)聲器可以向拍攝者和被攝體兩方通知重疊的狀態(tài)的優(yōu)點(diǎn)。在以上的S8-1到S8A-2的處理中,進(jìn)行與圖5的S8的重疊有關(guān)的處理。圖22是圖5的S8的處理,即對(duì)與重疊有關(guān)的處理的另一個(gè)方法進(jìn)行說(shuō)明的流程圖。在經(jīng)由P70的S8-1中,最佳鏡頭通知部件14根據(jù)從重疊檢測(cè)部件8(S7)得到的信息判斷是否存在重疊,在存在重疊時(shí),處理跳到P80,在沒(méi)有的情況下處理進(jìn)入到S8B-2。在S8B-2中,最佳鏡頭通知部件14向用戶(hù)(拍攝者)或者被攝體或者兩者通知第一被攝體和第二被攝體中沒(méi)有重疊的情況,處理跳到P80。實(shí)際上使用該通知的最一般的方法是,與通知無(wú)重疊的情況相比,進(jìn)一步通知沒(méi)有重疊而引起的下一步的操作,具體來(lái)說(shuō)是通知成為記錄第二被攝體圖像的最佳鏡頭的情況。這時(shí),該通知主要針對(duì)拍攝者。關(guān)于最佳鏡頭的通知方法,基本上原樣使用在圖21中說(shuō)明的方法。例如,可以將圖13(c)的信息改為“是最佳鏡頭!”等就可以。而且,圖13(c)的重疊部分這時(shí)不存在,所以當(dāng)然也不需要表示。另外,對(duì)于燈、揚(yáng)聲器,顏色或者輸出的聲音的內(nèi)容也多少有些改變,但作為通知方法可以同樣利用。如果知道為最佳鏡頭,則拍攝者可以通過(guò)按壓快門(mén)在被攝體之間沒(méi)有重疊的狀態(tài)下進(jìn)行拍攝/記錄,而且產(chǎn)生被攝體也可以進(jìn)行可能按壓快門(mén)的準(zhǔn)備(例如視線(xiàn)的方向或者面部的表情等)的優(yōu)點(diǎn)。在以上的S8-1到S8B-1的處理中,進(jìn)行與圖5的S8的重疊有關(guān)的處理。圖23是對(duì)圖5的S8的處理,即與重疊有關(guān)的處理的再一個(gè)方法進(jìn)行說(shuō)明的流程圖。在經(jīng)由P70的S8-1中,自動(dòng)快門(mén)部件15根據(jù)從重疊檢測(cè)部件8(S7)得到的信息判斷是否存在重疊,如果存在重疊時(shí),處理跳到P80,在沒(méi)有重疊時(shí)處理進(jìn)入S8C-2。在S8C-2中,自動(dòng)快門(mén)部件15判斷是否按壓快門(mén)按鈕,如果按壓則進(jìn)入S8C-3,如果沒(méi)有按壓則處理跳到P80。在S8C-3中,自動(dòng)快門(mén)部件15對(duì)第二被攝體圖像取得部件3指示記錄第二被攝體圖像,處理跳到P80。第二被攝體圖像取得部件3根據(jù)指示,將拍攝圖像存儲(chǔ)到主存儲(chǔ)器74、外部存儲(chǔ)器75等中。由此,如果在被攝體之間沒(méi)有重疊時(shí)按壓快門(mén)按鈕,則產(chǎn)生可以自動(dòng)記錄拍攝圖像的效果。同時(shí),也可以產(chǎn)生防止失誤地在重疊狀態(tài)下記錄拍攝圖像的效果。作為實(shí)際使用的方法,觀察被攝體的樣子等,在認(rèn)為目前也可以記錄拍攝圖像后,拍攝者按壓快門(mén)按鈕,但在該時(shí)刻也不一定被記錄,在產(chǎn)生重疊的情況下不被記錄。即,自動(dòng)快門(mén)部件15在判斷出存在重疊的情況下,即使拍攝者按壓快門(mén)按鈕,也禁止第二被攝體圖像的記錄,使得第二被攝體圖像取得部件3也不進(jìn)行記錄動(dòng)作。而且,在不被記錄的情況下,對(duì)該狀況進(jìn)行顯示,或者通過(guò)燈、揚(yáng)聲器等的通知部件通知拍攝者等的方法,只要明確雖然按壓了快門(mén),但沒(méi)有被拍攝的狀況就可以。然后,被攝體移動(dòng)等,從而成為沒(méi)有重疊的狀態(tài)時(shí),如果再次按壓快門(mén)按鈕,則此次被記錄。進(jìn)行顯示,或者通過(guò)燈、揚(yáng)聲器等的通知部件通知拍攝者等,使其了解被記錄的狀況。不是每次按壓快門(mén)按鈕,如果一直按壓,則從重疊狀態(tài)變?yōu)椴恢丿B狀態(tài)的瞬間自動(dòng)地被記錄。但是,如果在重疊消失的瞬間被攝體不靜止,則有時(shí)拍攝圖像晃動(dòng),或者未達(dá)到拍攝圖像的狀態(tài)(被攝體朝向其它位置時(shí)等),所以,這時(shí)在自動(dòng)記錄之前稍微隔開(kāi)一段時(shí)間較好。在以上的S8-1到S8C-3的處理中,進(jìn)行了與圖5的S8的重疊有關(guān)的處理。圖24是對(duì)圖5的S8的處理即與重疊有關(guān)的處理的再一個(gè)方法進(jìn)行說(shuō)明的流程圖。在經(jīng)由P70的S8-1中,重疊回避方法計(jì)算部件11根據(jù)從重疊檢測(cè)部件8(S7)得到的信息來(lái)判斷是否存在重疊,如果存在重疊則進(jìn)入S8D-2,如果沒(méi)有則處理跳到P80。在S8D-2中,重疊回避方法計(jì)算部件11分別計(jì)算第一、第二被攝體區(qū)域的重心位置,處理進(jìn)入S8D-3。所謂重心位置簡(jiǎn)而言之是該區(qū)域的中心位置,正確地說(shuō),是將從重心位置到某像素的距離和方向設(shè)為向量,所有區(qū)域內(nèi)的像素的向量和為0的狀態(tài)。求出重心位置的方法也記錄在一般的圖像處理的書(shū)等中,因此這里省略。在S8D-3中,重疊回避方法計(jì)算部件11根據(jù)在S8D-2中求出的第一、第二被攝體區(qū)域的重心位置,對(duì)第二被攝體移動(dòng)的方向,求出兩者的重心位置間距離最遠(yuǎn)的方向(從第一被攝體區(qū)域的重心位置朝向第二被攝體的重心位置的方向),處理進(jìn)入S8D-4。例如,在S8D-2中得到的第一被攝體區(qū)域的重心位置為(Xg1,Yg1),第二被攝體區(qū)域的重心位置為(Xg2,Yg2)時(shí),距離最遠(yuǎn)的方向如果用向量形式表示則為(Xg2-Xg1,Yg2-Yg1)但是,在Xg2=Xg1,Yg2=Y(jié)g1時(shí),第一被攝體和第二被攝體的重心位置重疊,所以可以是任意方向。圖25是在圖12的重疊狀態(tài)下求出的重心位置最遠(yuǎn)離方向的例子。第一被攝體圖像112的重心位置132和第二被攝體圖像130的重心位置133之間重心位置最遠(yuǎn)離的方向是從重心位置132朝向重心位置133的箭頭134的方向。在S8D-4中,重疊回避方法通知部件12將在S8D-3中求出的方向作為減少重疊的回避方法通知用戶(hù)或者被攝體或者兩者,處理跳到P80。圖26(a)是表示通過(guò)監(jiān)視器141通知回避方法的狀態(tài)的說(shuō)明圖。由于在S8D-3中求出如圖25那樣,第二被攝體以向右方向移動(dòng)的方式減少重疊,所以將表示使第二被攝體向右方向移動(dòng)的箭頭重疊在合成圖像中進(jìn)行顯示。該箭頭也和已經(jīng)說(shuō)明的重疊部分的顯示那樣,用顏色或者閃爍等醒目的顯示的方法容易了解就可以。如果僅表示重疊狀態(tài),則雖然難以馬上判斷被攝體怎樣移動(dòng)可以減少重疊,但是通過(guò)用箭頭等表示被攝體的移動(dòng)方向,可以產(chǎn)生很容易了解怎樣移動(dòng)較好的優(yōu)點(diǎn)。而且,箭頭的方向的角度θd根據(jù)S8D-3中求出的方向向量通過(guò)下式求出θd=arctan((Yg2-Yg1)/(Xg2-Xg1)),(0≠Xg2-Xg1)θd=π/2,(0=Xg2-Xg1,0≤Yg2-Yg1)θd=-π/2,(0=Xg2-Xg1,0>Yg2-Yg1)這里顯示的箭頭方向很重要,所以可以忽略在S8D-3中求出的方向向量的大小。但是,可以使顯示的箭頭的長(zhǎng)度具有某種意義。例如,如果已知被攝體之間重疊的面積,則可以使箭頭的長(zhǎng)度或者寬度與該面積成比例。重疊越大,則箭頭越長(zhǎng)(或者越寬),可以直觀地了解重疊的狀況。而且,可以產(chǎn)生由于箭頭大,拍攝者也必須注意消除重疊的效果。而且,在S8D-3中求出的方向取所有的方向,但是為了指示被攝體的移動(dòng),不需要這么正確的方向,所以,也可以從上下左右4個(gè)方向加上斜方向的8個(gè)方向中選擇最接近求出的θd的方向。在壓縮為4個(gè)方向或者8個(gè)方向時(shí),用語(yǔ)言也可以容易地通知,所以可以如圖26(a)上的信息那樣,通知為“被攝體向右方向移動(dòng)可以消除重疊”。而且,也可以用揚(yáng)聲器播出這些信息。而且,不用箭頭或者信息,用燈通知移動(dòng)的方向也可以。這時(shí),有時(shí)也需要多個(gè)方向的燈,以便可以表示上下左右4方向或者8方向等的方向。例如,可以在監(jiān)視器141的周?chē)渲梅较驘簟6?,這些通知和重疊狀態(tài)的通知等一樣,不僅向拍攝者,而且也可以向被攝體進(jìn)行通知。對(duì)于其效果,與已經(jīng)說(shuō)明的一樣。而且,這里利用了被攝體的重心位置,但除此之外也考慮各種方法。例如,將被攝體區(qū)域的像素值投影在X軸或者Y軸上,粗略地求出位于各軸方向的哪個(gè)邊上。根據(jù)投影的結(jié)果可以求出重心位置和重疊的范圍,所以據(jù)此可以求出向上下左右的哪個(gè)方向移動(dòng)較好。如果組合上下方向和左右方向,則也可以求出傾斜方向的移動(dòng)方向。在以上的S8-1到S8D-4的處理中,進(jìn)行了與圖5的S8的重疊有關(guān)的處理。圖27是對(duì)圖5的S8的處理,即與重疊有關(guān)的處理的再一個(gè)方法進(jìn)行說(shuō)明的流程圖。在經(jīng)由P70的S8-1中,重疊回避方法計(jì)算部件11根據(jù)重疊檢測(cè)部件8(S7)得到的信息判斷是否存在重疊,如果存在重疊,則進(jìn)入S8E-2,如果不存在,則處理跳到P80。在S8E-2中,重疊回避方法計(jì)算部件11預(yù)測(cè)在使第二被攝體向各方向移動(dòng)時(shí)的重疊量,處理進(jìn)入S8E-3。首先,假設(shè)目前為圖12的第一被攝體圖像112、第二被攝體圖像130的狀態(tài),存在重疊的區(qū)域?yàn)閰^(qū)域131。從該狀態(tài)嘗試使第二被攝體圖像130向上下左右移動(dòng)規(guī)定量。圖28(a)是對(duì)用虛線(xiàn)表示的第二被攝體區(qū)域130向左移動(dòng),嘗試移動(dòng)到被涂黑的區(qū)域150的狀態(tài)進(jìn)行說(shuō)明的圖。同樣,圖28(b)是對(duì)嘗試向右移動(dòng)的狀態(tài),圖28(c)是對(duì)嘗試向上移動(dòng)的狀態(tài),圖28(d)是對(duì)嘗試向下移動(dòng)的狀態(tài)進(jìn)行說(shuō)明的圖。求出了這樣移動(dòng)后的第二被攝體區(qū)域和第一被攝體區(qū)域的重疊的重疊圖像為圖29(a)到圖29(d)。存在重疊的區(qū)域涂黑表示。移動(dòng)后的第二被攝體區(qū)域和第一被攝體區(qū)域用虛線(xiàn)表示。圖29(a)的重疊區(qū)域與圖12的重疊區(qū)域相比增大。圖29(b)的重疊區(qū)域消失。圖29(c)和圖29(d)的重疊區(qū)域與圖12的重疊區(qū)域131相比基本沒(méi)變。而且,這里在四個(gè)方向上預(yù)想了重疊量,但是當(dāng)然可以考慮必要的精度和處理量等,設(shè)為除此之外的方向數(shù)。而且,移動(dòng)量也可以設(shè)為規(guī)定的值,但是也考慮使其對(duì)應(yīng)一個(gè)方向,用多個(gè)值求出重疊量的方法。在S8E-3中,重疊回避方法計(jì)算部件11在向從S8E-2得到的各方向移動(dòng)時(shí)的重疊量的預(yù)測(cè)中,提取重疊量最少的方向,處理進(jìn)入S8E-4。而且,也考慮以下方法利用在S8E-2中說(shuō)明的方法,將各方向的移動(dòng)量進(jìn)行各種變化后求出重疊量的情況下,分別單獨(dú)考慮并選擇重疊最少的方向和位置的方法,以及用該方向的所有移動(dòng)量的重疊量的和進(jìn)行比較,或者用平均重疊量進(jìn)行比較的方法。由于從圖29(a)到圖29(d)中重疊最少的是圖29(b),所以預(yù)想將第二被攝體向右方向移動(dòng)的方式(在四個(gè)方向中)重疊變得最少。在S8E-4中,重疊回避方法通知部件12將在S8E-3中求出的方向作為減少重疊的回避方法通知用戶(hù)或者被攝體或者兩者,處理跳到P80。這里的處理,關(guān)于通知方法與S8D-4基本相同。例如成為圖26(a)那樣的通知結(jié)果。如果說(shuō)到與S8D-4的不同,則在從S8D-2到S8D-4的處理中,僅求出方向,但是在從S8E-2到S8E-4的處理中,由于假定第二被攝體的移動(dòng)目的后決定方向,所以不僅是方向,還可以表示在多大程度移動(dòng)較好。作為顯示的方法,例如可以將表示移動(dòng)方向的箭頭的起點(diǎn)和終點(diǎn)設(shè)在第二被攝體的當(dāng)前位置和以最小限度的移動(dòng)量使重疊變得最少的位置上。由此,可以產(chǎn)生能夠清楚地了解第二被攝體移動(dòng)多少較好的效果。而且,不僅是箭頭,也有直接顯示被攝體的移動(dòng)目的的位置的方法。圖26(b)是以最小限度的移動(dòng)量消除重疊的移動(dòng)目的地的例子。用虛線(xiàn)表示移動(dòng)目的地的第二被攝體。在以上的S8-1到S8E-4的處理中,進(jìn)行與圖5的S8的重疊有關(guān)的處理。而且,S21~27的處理不必是排他的處理,可以進(jìn)行任意的組合來(lái)處理。作為組合的例子,可以為以下那樣的利用情景。“在被攝體直接重疊時(shí),警告‘重疊’,在這時(shí)即使按壓快門(mén)按鈕也不記錄拍攝圖像。然后,如圖26(a)那樣與警告一起顯示被攝體向哪個(gè)方向移動(dòng)較好。據(jù)此被攝體移動(dòng),重疊消失以后,最佳鏡頭燈點(diǎn)亮。在最佳鏡頭燈點(diǎn)亮期間按壓快門(mén)按鈕以后記錄拍攝圖像?!苯又瑘D30是對(duì)圖5的S9的處理,即生成重疊圖像的處理的一個(gè)方法進(jìn)行說(shuō)明的流程圖。在經(jīng)由P80的S9-1中,重疊圖像生成部件9將生成的重疊圖像的最初的像素位置設(shè)為當(dāng)前像素,處理進(jìn)入S9-2。最初的像素位置例如多從左上等的角部開(kāi)始。而且,“像素位置”表示圖像上的特定的位置,多用將左上角設(shè)為原點(diǎn),將右方向設(shè)為+X軸,將下方設(shè)為+Y軸的X-Y坐標(biāo)軸來(lái)表現(xiàn)。像素位置對(duì)應(yīng)于表示圖像的存儲(chǔ)器上的地址,像素值是該地址的存儲(chǔ)器的值。在S9-2中,重疊圖像生成部件9判斷當(dāng)前像素位置是否存在,如果存在則處理進(jìn)入S9-3,如果不存在則處理跳到P90。在S9-3中,重疊圖像生成部件9判斷當(dāng)前像素位置是否存在于第一被攝體區(qū)域內(nèi),如果存在于第一被攝體區(qū)域內(nèi)則處理進(jìn)入S9-4,如果不是這樣則處理進(jìn)入S9-5。是否存在于第一被攝體區(qū)域內(nèi),可以通過(guò)在從被攝體區(qū)域提取部件7(S6)得到的第一被攝體區(qū)域圖像上,當(dāng)前像素位置的像素值是否為黑(0)來(lái)判斷。而且,在不因是否為第一被攝體區(qū)域而特別改變處理的情況下,省略S9-3,S9-4,從S9-2進(jìn)入S9-5就可以。在S9-4中,重疊圖像生成部件9計(jì)算對(duì)應(yīng)于設(shè)定的像素值,作為重疊圖像的當(dāng)前像素位置的像素值寫(xiě)入。上述的設(shè)定是指合成何種重疊圖像。例如,是如圖11(b)那樣將第一被攝體以半透明方式進(jìn)行合成,還是如圖11(a)的那樣以不透明的方式將第一被攝體原樣覆寫(xiě)來(lái)進(jìn)行合成等。如果是以半透明方式進(jìn)行合成,則得到第一被攝體圖像的當(dāng)前像素位置的像素值P1和從修正圖像生成部件5(S5)得到的修正背景圖像的當(dāng)前像素位置的像素值Pb,用規(guī)定的透過(guò)率A(0.0到1.0之間的值)來(lái)求出合成像素值(P1×A+Pb×(1-A))就可以。如果原樣覆寫(xiě),則將透過(guò)率A作為1.0原樣寫(xiě)入P1就可以。在S9-5中,重疊圖像生成部件9在S9-3中判斷當(dāng)前像素位置不在第一被攝體區(qū)域內(nèi)時(shí),繼續(xù)判斷當(dāng)前像素位置是否在第二被攝體區(qū)域內(nèi),如果在第二被攝體區(qū)域內(nèi)則處理進(jìn)入S9-6,如果不是則處理進(jìn)入S9-7。這里的處理僅是第一被攝體區(qū)域變?yōu)榈诙粩z體區(qū)域,與S9-3相同。在S9-6中,重疊圖像生成部件9生成對(duì)應(yīng)于設(shè)定的合成像素,作為重疊圖像的當(dāng)前像素位置的像素值寫(xiě)入。這里的處理僅是將第一被攝體區(qū)域(圖像)變?yōu)榈诙粩z體區(qū)域(圖像),與S9-4相同。在S9-7中,重疊圖像生成部件9在S9-5中判斷當(dāng)前像素位置不在第二被攝體區(qū)域內(nèi)時(shí),將第一被攝體圖像的當(dāng)前像素位置的像素值作為重疊圖像的當(dāng)前像素位置的像素值寫(xiě)入。即這時(shí)的當(dāng)前像素位置既不在第一被攝體區(qū)域內(nèi),也不在第二被攝體區(qū)域內(nèi),所以結(jié)果是相當(dāng)于背景部分。而且,這里從第一被攝體圖像取得背景部分的圖像,但是也可以從修正背景圖像取得。但是,第一被攝體區(qū)域和背景部分的邊界部分使用第一被攝體圖像比使用修正背景圖像具有得到自然的邊界部分的優(yōu)點(diǎn)。而且,而且可以產(chǎn)生即使在S6中的第一、第二被攝體區(qū)域的提取錯(cuò)誤,由于邊界自然而使錯(cuò)誤不醒目的效果。在S9-8中,重疊圖像生成部件9將當(dāng)前像素位置設(shè)定為下一個(gè)像素位置,處理返回S9-2。在以上的S9-1到S9-8的處理中,進(jìn)行了圖5的S9的與重疊圖像生成有關(guān)的處理。而且,在上述的處理中,在S9-4和S9-7中對(duì)第一被攝體圖像和修正背景圖像進(jìn)行了處理,但是也考慮在生成的重疊圖像中,在S9-1之前最初將第一被攝體圖像或者修正背景圖像進(jìn)行全像素復(fù)制,之后,在各像素位置的處理中僅處理第一被攝體區(qū)域和/或第二被攝體區(qū)域的方法。全像素復(fù)制的方法雖然處理步驟簡(jiǎn)單,但是可能增加若干處理時(shí)間。而且,即使假設(shè)第一被攝體區(qū)域和第二被攝體區(qū)域重疊,也考慮原樣許可重疊圖像的生成的形態(tài)。這時(shí),在圖5的流程圖中,如果省略S7,S8,則處理變得簡(jiǎn)單。但是,如前所述,即使執(zhí)行使重疊區(qū)域醒目的處理或者警告存在重疊的狀況的處理也沒(méi)有問(wèn)題。重要的是,在本發(fā)明的圖像合成方法中,由于可以獨(dú)立提取第一被攝體區(qū)域和第二被攝體區(qū)域,所以在生成第一被攝體區(qū)域和第二被攝體區(qū)域具有重疊的重疊圖像的情況下,可以決定優(yōu)選合成第一被攝體和第二被攝體的哪一個(gè)較好。例如,設(shè)定重疊圖像生成部件9使得第一被攝體優(yōu)先時(shí),如圖31所示,在第一被攝體和第二被攝體的重疊區(qū)域中,得到將第一被攝體(人物(1))重疊在第二被攝體(人物(2))上的重疊圖像。如果用圖30的流程圖進(jìn)行說(shuō)明,則在S9-4中,重疊圖像生成部件9將上述的透過(guò)率A,即合成比例設(shè)為1.0(100%),進(jìn)行將第一被攝體圖像的像素值P1原樣寫(xiě)入當(dāng)前像素位置的處理。另一方面,在設(shè)定重疊圖像生成部件9使得第二被攝體優(yōu)先時(shí),如圖32所示,在第一被攝體和第二被攝體的重疊區(qū)域中,得到將第一被攝體(人物(1))重疊在第二被攝體(人物(2))之下的重疊圖像。為了實(shí)現(xiàn)這一目的,在圖30的流程圖中替換S9-3的處理和S9-5的處理,非常簡(jiǎn)單。即,重疊圖像生成部件9在先進(jìn)行當(dāng)前像素位置是否在第二被攝體區(qū)域內(nèi)的判斷,其結(jié)果,如果當(dāng)前像素位置在第二被攝體區(qū)域內(nèi),則同樣將第二被攝體圖像的合成比例設(shè)為1.0,進(jìn)行將第二被攝體圖像的像素值原樣寫(xiě)入當(dāng)前像素位置的處理就可以。而且,這樣的處理如果用不使用背景圖像,僅通過(guò)第一被攝體圖像和第二被攝體圖像來(lái)進(jìn)行合成處理的方法則不可能。因?yàn)閮H通過(guò)第一被攝體圖像和第二被攝體圖像不能獨(dú)立提取第一被攝體區(qū)域和第二被攝體區(qū)域,只能作為統(tǒng)一為一塊的區(qū)域來(lái)提取。而且,這里將合成圖像的大小設(shè)為基準(zhǔn)圖像的大小,但是也可以設(shè)為比其小或者比其大。例如在圖6(c)和圖8(c)中生成修正圖像時(shí),切除一部分,但是如果放大修正圖像的尺寸從而不能切除時(shí),為了滿(mǎn)足擴(kuò)大合成圖像的情況,可以不切除地將剩余的圖像用于合成,由此擴(kuò)大背景。產(chǎn)生可以進(jìn)行所謂全景圖像合成那樣的效果。而且,例如在第一被攝體圖像和背景圖像、第二被攝體特色和背景圖像之間有共用的背景部分,第一被攝體圖像和第二被攝體圖像之間沒(méi)有共用的背景部分的情況下,雖然在合成圖像中也可能產(chǎn)生不存在第一被攝體和第二被攝體之間的背景的情況,但是通過(guò)使用背景圖像,也可以產(chǎn)生能夠生成插入不存在的部分的合成圖像的效果。這時(shí),例如生成按照第一被攝體圖像、背景圖像、第二被攝體圖像的順序,端部分別重疊的長(zhǎng)的合成圖像(按照本發(fā)明的處理,第一被攝體圖像和第二被攝體圖像在合成圖像上沒(méi)有位置的重疊)。圖11(b)是僅將第一被攝體區(qū)域半透明地合成的重疊圖像。圖11(c)是僅將第二被攝體區(qū)域半透明地合成的重疊圖像。圖11(a)是兩者都不半透明,任意一個(gè)都覆寫(xiě)生成的重疊圖像。而且,雖然未圖示,但是也考慮將兩者都半透明地合成的方法。由于按照目的來(lái)決定采用哪個(gè)合成方法,所以用戶(hù)只要可以選擇對(duì)應(yīng)當(dāng)時(shí)的目的的合成方法就可以。例如,在已經(jīng)拍攝/記錄背景圖像、第一被攝體圖像,要無(wú)重疊地拍攝第二被攝體圖像的階段,不需要第一被攝體的詳細(xì)的圖像,只要了解大致存在于何處,是否有重疊就可以,所以用半透明的合成也沒(méi)關(guān)系。而且,由于如果不能詳細(xì)地了解第二被攝體在拍攝的瞬間有什么樣的表情等,就不能很好的按壓快門(mén),所以不采用半透明方式,而用覆寫(xiě)方式來(lái)進(jìn)行合成的方法較好。因此,傾向圖11(b)那樣的合成方法。而且,作為認(rèn)為知道了合成的被攝體區(qū)域后容易拍攝的用戶(hù),可能存在在拍攝中將兩者以半透明的方式合成較好的情況,以及僅將第二被攝體設(shè)為半透明較好的情況。而且,在第二被攝體的拍攝/記錄完成,希望使用背景圖像、第一被攝體圖像、第二被攝體圖像來(lái)最終合成圖像的情況下,由于用半透明的被攝體很困難,所以任意一個(gè)都需要用覆寫(xiě)來(lái)進(jìn)行合成。因此,傾向于圖11(a)那樣的合成方法。而且,如果從被攝體區(qū)域提取部件7(S6)得到的被攝體區(qū)域已經(jīng)被膨脹,則不僅是被攝體,而且其周?chē)谋尘安糠忠惨黄鸷铣?,但是已?jīng)由修正圖像生成部件5(S5)進(jìn)行修正處理,使得背景部分一致,所以即使與實(shí)際的被攝體的輪廓的區(qū)域相比,提取被攝體區(qū)域變大,多少包含背景部分,但在合成邊界也產(chǎn)生不會(huì)變得不自然的效果。另外,如果是使被攝體區(qū)域膨脹進(jìn)行處理,則也有以下方法;在也包含外部的被攝體區(qū)域的合成區(qū)域的合成邊界附近,或者僅在被攝體區(qū)域內(nèi)部的合成邊界附近,使透明度緩慢變化來(lái)進(jìn)行合成,從而使合成邊界看上去更加自然。例如有以下?tīng)顩r隨著進(jìn)入到被攝體區(qū)域的外部,使背景部分的圖像的比例增強(qiáng),隨著進(jìn)入到被攝體區(qū)域的內(nèi)部,使被攝體區(qū)域部分的圖像的比例增強(qiáng)。由此,即使假設(shè)在合成邊界附近存在由修正誤差造成的一些背景的偏差,也產(chǎn)生可使不自然不醒目的效果。而且即使假設(shè)不是修正誤差,而是各個(gè)被攝體區(qū)域的提取錯(cuò)誤的情況下,或者由于拍攝時(shí)間的偏差產(chǎn)生的背景部分的圖像的變化(例如由于風(fēng)產(chǎn)生樹(shù)木的移動(dòng),太陽(yáng)的蔭影,無(wú)關(guān)的人的通過(guò)等),同樣可以產(chǎn)生可使不自然不醒目的效果。而且,不用說(shuō),本發(fā)明的目的也可以通過(guò)將記錄了實(shí)現(xiàn)前述的本實(shí)施方式的功能的軟件的程序碼的存儲(chǔ)介質(zhì)提供給系統(tǒng)或者裝置,該系統(tǒng)或者裝置的計(jì)算機(jī)(或者CPU或MPU)讀出存儲(chǔ)于存儲(chǔ)介質(zhì)的程序碼并執(zhí)行來(lái)達(dá)成。這時(shí),從存儲(chǔ)介質(zhì)讀出的程序碼自身實(shí)現(xiàn)前述的實(shí)施方式的功能,存儲(chǔ)了該程序碼的存儲(chǔ)介質(zhì)構(gòu)成本發(fā)明。作為用于提供程序碼的存儲(chǔ)介質(zhì),例如可以使用軟盤(pán)、硬盤(pán)、光盤(pán)、光磁盤(pán)、磁帶、非易失性存儲(chǔ)卡等。而且,也可以是將上述程序碼通過(guò)圖像網(wǎng)絡(luò)那樣的傳送介質(zhì),從其他的計(jì)算機(jī)系統(tǒng)下載到圖像合成裝置的主存儲(chǔ)器74或者外部存儲(chǔ)器75的設(shè)備。而且,當(dāng)然也包括以下情況通過(guò)執(zhí)行計(jì)算機(jī)讀出的程序碼,不僅實(shí)現(xiàn)前述的實(shí)施方式的功能,而且根據(jù)該程序碼的指示,在計(jì)算機(jī)上工作的OS(操作系統(tǒng))等執(zhí)行實(shí)際的處理的一部分或者全部,通過(guò)該處理來(lái)實(shí)現(xiàn)前述的實(shí)施方式的功能。進(jìn)而,當(dāng)然也包括以下情況從存儲(chǔ)介質(zhì)讀出的程序碼在被寫(xiě)入插入計(jì)算機(jī)的功能擴(kuò)展接口或者與計(jì)算機(jī)連接的功能擴(kuò)展單元中具有的存儲(chǔ)器中后,根據(jù)該程序碼的指示,該功能擴(kuò)展接口或者功能擴(kuò)展單元中具有的CPU等執(zhí)行實(shí)際的處理的一部分或者全部,通過(guò)該處理來(lái)實(shí)現(xiàn)前述的實(shí)施方式的功能。在將本發(fā)明應(yīng)用于上述存儲(chǔ)介質(zhì)中的情況下,在該存儲(chǔ)介質(zhì)中,對(duì)與先前說(shuō)明的流程對(duì)應(yīng)的程序碼進(jìn)行存儲(chǔ)。本發(fā)明不限于上述的實(shí)施方式,在權(quán)利要求所示的范圍內(nèi)可以進(jìn)行各種變更。如上所述,本發(fā)明的第一圖像合成裝置包括背景修正量計(jì)算部件和重疊圖像生成部件。所述部件修正量計(jì)算部件對(duì)作為背景的圖像的背景圖像、作為包含前述的背景的至少一部分和第一被攝體的圖像的第一被攝體圖像、包含前述背景的至少一部分和第二被攝體圖像的第二被攝體圖像之間的相對(duì)移動(dòng)量、旋轉(zhuǎn)量、擴(kuò)大縮小率、失真修正量之一或者組合構(gòu)成的修正量進(jìn)行計(jì)算,或者讀出計(jì)算并記錄的修正量。前述重疊圖像生成部件將背景圖像、第一被攝體圖像、第二被攝體圖像的任意一個(gè)作為基準(zhǔn)圖像,用由前述背景修正量計(jì)算部件得到的修正量修正另外兩個(gè)圖像,使得被攝體以外的背景的至少一部分重疊,生成使基準(zhǔn)圖像和修正后的另外一個(gè)或者兩個(gè)圖像重疊的圖像。由此,可以修正兩個(gè)圖像間的背景的偏差從而進(jìn)行合成,所以,除了與被攝體明顯不同的區(qū)域以外的部分(即背景部分)無(wú)論怎樣重疊,合成結(jié)果都基本一致,產(chǎn)生合成結(jié)果不會(huì)變得不自然的效果。例如,在僅要主要合成被攝體區(qū)域時(shí),即使被攝體區(qū)域的提取或者指定多少有些不正確,但由于被攝體區(qū)域的周?chē)谋尘安糠峙c合成目的的圖像的部分沒(méi)有偏差,所以被合成為不正確的區(qū)域的內(nèi)外連續(xù)的風(fēng)景,可以產(chǎn)生減輕視覺(jué)上不自然的效果。而且,由此,即使例如假設(shè)被攝體區(qū)域的提取以像素單位是正確的,如課題的項(xiàng)說(shuō)明的那樣,雖然通過(guò)現(xiàn)有技術(shù)的方法,產(chǎn)生比一個(gè)像素更細(xì)微的水平上的不自然,但是在本發(fā)明中,使背景部分匹配后合成,所以輪廓的像素周?chē)南袼爻蔀橄嗤尘安糠值奈恢玫南袼兀词购铣梢不咀匀坏剡B接。這樣,可以產(chǎn)生防止或者減輕比一個(gè)像素更細(xì)微的水平上的不自然的效果。而且,由于對(duì)背景的偏差進(jìn)行修正后合成,所以在拍攝背景圖像或者第一/第二被攝體圖像時(shí),不需要用三角架固定照相機(jī)等,用手等匹配大致的方向就可以,產(chǎn)生拍攝變得簡(jiǎn)單的效果。進(jìn)而,即使第一被攝體圖像和第二被攝體圖像之間在背景部分沒(méi)有重疊,也可以計(jì)算第一被攝體圖像和第二被攝體圖像之間的修正量。由此,即使第一被攝體圖像的背景部分和第二被攝體圖像的背景部分之間的背景缺少,如果背景圖像的背景插入該缺少的背景部分,則可以產(chǎn)生以背景連接的狀態(tài)對(duì)背景部分無(wú)重疊的第一被攝體圖像和第二被攝體圖像進(jìn)行合成的效果。而且,也可以分別從背景圖像、第一被攝體圖像和第二被攝體圖像中取出必要的背景部分,在通過(guò)補(bǔ)償相互不足的部分而連接的背景上,做成對(duì)第一被攝體和第二被攝體進(jìn)行合成后的重疊圖像。而且,本發(fā)明的第一圖像合成裝置進(jìn)一步包含對(duì)被攝體和風(fēng)景進(jìn)行拍攝的拍攝部件,可以成為基于前述拍攝部件的輸出來(lái)輸出背景圖像、或者第一被攝體圖像、或者第二被攝體圖像的結(jié)構(gòu)。按照上述的結(jié)構(gòu),生成重疊圖像的圖像合成裝置由于具有拍攝部件,用戶(hù)可以在拍攝了被攝體或者風(fēng)景的場(chǎng)所生成重疊圖像,所以作為用戶(hù)提高了便利性。而且,如果生成重疊圖像的結(jié)果如果存在被攝體之間有重疊等的不舒服,則產(chǎn)生可以在該場(chǎng)所重新拍攝的效果。而且,由拍攝部件得到的圖像通常記錄在不論是否內(nèi)置于圖像合成裝置中的主存儲(chǔ)器或者外部存儲(chǔ)器中,用戶(hù)利用快門(mén)按鈕指示記錄的定時(shí)。然后將記錄的圖像作為背景圖像、或者第一被攝體圖像、或者第二被攝體圖像用于合成處理。而且,本發(fā)明的第一圖像合成裝置可以是將第一被攝體圖像和第二被攝體圖像中先拍攝的一個(gè)作為基準(zhǔn)圖像的結(jié)構(gòu)。在上述的結(jié)構(gòu)中,例如按照第一被攝體圖像、第二被攝體圖像的順序進(jìn)行拍攝時(shí),將第一被攝體圖像作為基準(zhǔn)圖像。首先假設(shè)背景圖像以任何順序都可以。將第一被攝體圖像作為基準(zhǔn)圖像,對(duì)背景圖像、第二被攝體圖像進(jìn)行修正。這時(shí),背景修正量計(jì)算部件計(jì)算第一被攝體圖像(基準(zhǔn)圖像)和背景圖像、第二被攝體圖像和背景圖像之間背景部分的移動(dòng)量等的修正量。重疊圖像生成背景利用該修正量進(jìn)行修正,利用第一被攝體圖像(基準(zhǔn)圖像)、被修正的背景圖像、被修正的第二被攝體圖像三個(gè)圖像合成合成圖像。在該時(shí)刻,在因被攝體之間存在重疊等理由重新拍攝的情況下,僅重新拍攝第二被攝體圖像,再次生成合成圖像。這時(shí),不需要再次做成第一被攝體圖像(基準(zhǔn)圖像)、被修正的背景圖像,所以可以原樣使用先前做成合成圖像時(shí)的圖像。由于第二被攝體圖像不改變,所以將第一被攝體圖像作為基準(zhǔn)圖像,重新修正第二被攝體圖像。由此,生成被修正后的新的第二被攝體圖像。使用第一被攝體圖像(基準(zhǔn)圖像)、被修正的背景圖像、新的被修正的第二被攝體圖像三個(gè)圖像合成合成圖像。在反復(fù)進(jìn)行重新拍攝時(shí),可以反復(fù)上述的處理。如果將后拍攝的第二被攝體圖像設(shè)為基準(zhǔn)圖像,則合成所需要的圖像為被修正的第一被攝體圖像、被修正的背景圖像、第二被攝體圖像(基準(zhǔn)圖像)三個(gè)圖像。如果重新拍攝第二被攝體圖像,則由于基準(zhǔn)圖像改變,所以必須重新進(jìn)行全部修正處理。具體來(lái)說(shuō),必須再次生成被修正的第一被攝體圖像、被修正的背景圖像。這樣,通過(guò)將第一被攝體圖像和第二被攝體圖像中先拍攝的一個(gè)設(shè)為基準(zhǔn)圖像,在反復(fù)重新拍攝的情況下,可以產(chǎn)生減少處理量/處理時(shí)間的效果。而且,在合成第一被攝體和第二被攝體時(shí),與將背景圖像設(shè)為基準(zhǔn)圖像,在背景圖像上放置第一和第二被攝體的區(qū)域進(jìn)行合成相比,在第一被攝體圖像上放置第二被攝體的區(qū)域的圖像進(jìn)行合成(或者相反)的方式,可以產(chǎn)生合成區(qū)域變少,減少處理量/處理時(shí)間的效果。而且,這時(shí)合成區(qū)域減少,產(chǎn)生可以減少合成結(jié)果變得不自然的可能性的效果。所謂合成結(jié)果變得不自然的情況,是例如被攝體的區(qū)域比實(shí)際的被攝體的輪廓小時(shí),被合成的被攝體欠缺,或者前述的輪廓等變得不自然的情況。而且,在本發(fā)明的第一圖像合成裝置中,可以為按照在基準(zhǔn)圖像之前或者之后的順序拍攝背景圖像的結(jié)構(gòu)。在上述的結(jié)構(gòu)中,在例如按照背景圖像、第一被攝體圖像、第二被攝體圖像的順序,或者按照第一被攝體圖像、背景圖像、第二被攝體圖像的順序進(jìn)行拍攝的情況下,將第一被攝體圖像設(shè)為基準(zhǔn)圖像。由此,即使在由于被攝體之間重疊等重新拍攝第二被攝體圖像的情況下,由于第二被攝體還在其位置的可能性高,所以容易在移動(dòng)照相機(jī)或者第二被攝體圖像進(jìn)行微調(diào)整后重新拍攝。與上述不同,如果考慮例如按照第一被攝體圖像、第二被攝體圖像、背景圖像的順序進(jìn)行拍攝的情況(將第一被攝體圖像設(shè)為基準(zhǔn)圖像),則在拍攝第二被攝體圖像的時(shí)刻,第二被攝體是存在于背景之前的狀態(tài),但是在拍攝背景圖像時(shí),需要使第二被攝體從背景的前面讓開(kāi)。如果假設(shè)由于被攝體之間重疊等,重新拍攝第二被攝體圖像,則由于第二被攝體已經(jīng)讓開(kāi),所以存在必須再次站在背景前的問(wèn)題。而且,即使假設(shè)已知第二被攝體稍向右移動(dòng)就可以消除重疊,但由于不能馬上知道先前拍攝第二被攝體圖像時(shí)的位置,所以存在不能馬上知道稍向右移的位置在哪里的問(wèn)題。這樣,產(chǎn)生減少再次拍攝時(shí)的被攝體或者拍攝者的微調(diào)整等的時(shí)間,容易拍攝很少有重疊等的不合適的圖像的效果。而且,不僅產(chǎn)生容易拍攝的效果,而且也產(chǎn)生與處理有關(guān)的效果。在本發(fā)明的圖像合成方法中,與背景圖像的拍攝順序無(wú)關(guān),如果不最終備齊三張圖像,則不能做成合成圖像,但是在做成合成圖像時(shí),如果還考慮修正圖像的做成之外的處理,則在處理順序中產(chǎn)生差異。在最初的例子的順序中,在拍攝第二被攝體圖像之前,作為修正背景圖像之外的處理,例如還可能是例如在后說(shuō)明的第一被攝體區(qū)域的區(qū)域提取等的處理。被提取的區(qū)域被用于合成或者重疊檢測(cè)等。只要不是進(jìn)行高速連拍,在拍攝第二張圖像后拍攝第三張圖像(第二被攝體圖像)之前,通常有一些時(shí)間間隔,所以進(jìn)行這些處理的時(shí)間也足夠。在拍攝第二張圖像后拍攝了第三張圖像(第二被攝體圖像)時(shí),可以馬上將提取的第一被攝體的區(qū)域等用于合成或者重疊檢測(cè)等處理,可以產(chǎn)生減少拍攝第三張圖像(第二被攝體圖像)后相關(guān)的處理時(shí)間的效果。從用戶(hù)使用上看,產(chǎn)生合成裝置的反應(yīng)變快的效果。在后述的例子的順序(背景圖像最后)的情況下,因?yàn)楸尘皥D像未取得,所以在拍攝第二張圖像后的時(shí)刻不能進(jìn)行第一被攝體的區(qū)域的提取等處理,只有在拍攝了第三張的背景圖像以后才可以,所以在拍攝第三張圖像以后的相關(guān)處理時(shí)間變大。而且,與本發(fā)明相關(guān)的第一圖像合成裝置也可以是前述重疊圖像生成部件將基準(zhǔn)圖像和修正后的另一個(gè)或者兩個(gè)圖像按照各自規(guī)定的透過(guò)率進(jìn)行重疊的結(jié)構(gòu)。這里,“規(guī)定的透過(guò)率”可以是被固定的值,也可以是根據(jù)區(qū)域而變化的值,或者在區(qū)域的邊界附近緩慢變化的值。前述重疊圖像生成部件決定重疊圖像的像素位置,得到基準(zhǔn)圖像上的像素位置的像素值和修正后的另一個(gè)圖像上像素位置的像素值,將在這兩個(gè)像素值上分別乘以規(guī)定的透過(guò)率的值的合計(jì)值作為重疊圖像的像素值。在重疊圖像的所有像素位置進(jìn)行該處理。而且,如果透過(guò)率根據(jù)像素位置而改變,則可以根據(jù)位置加強(qiáng)基準(zhǔn)圖像的比例,或者加強(qiáng)修正圖像的比例。使用以上方式,例如在僅將被修正的被攝體圖像中的被攝體區(qū)域重疊在基準(zhǔn)圖像中時(shí),在被攝體區(qū)域內(nèi)以不透明(即保持修正圖像中的被攝體的圖像的原樣)重疊,在被攝體區(qū)域的周邊根據(jù)離開(kāi)被攝體區(qū)域的程度加強(qiáng)基準(zhǔn)圖像的比例來(lái)進(jìn)行重疊。這樣,即使假設(shè)被攝體區(qū)域,即提取出的被攝體的輪廓錯(cuò)誤,其周邊的像素由于從修正圖像向基準(zhǔn)圖像緩慢變化,所以產(chǎn)生錯(cuò)誤變得不醒目的效果。而且,通過(guò)例如進(jìn)行僅對(duì)被攝體區(qū)域用一半的透過(guò)率進(jìn)行重疊等的合成顯示,可以產(chǎn)生容易判斷被顯示的圖像的哪一部分是以前拍攝的合成對(duì)象部分,哪一部分是目前拍攝的被攝體的圖像的效果。而且,人通常具有通過(guò)使用常識(shí)(圖像理解)來(lái)區(qū)別圖像中的背景部分和被攝體部分(輪廓)的能力。即使對(duì)被攝體區(qū)域用一半的透過(guò)率進(jìn)行重疊顯示,該能力一般也有效。因此,通過(guò)對(duì)被攝體區(qū)域用一半的透過(guò)率進(jìn)行重疊顯示,即使在重疊多個(gè)被攝體的區(qū)域時(shí),也可以用前述的能力區(qū)別各個(gè)被攝體,可以容易地判斷它們?cè)诤铣蓤D像上是否位置重疊。通過(guò)將第一被攝體圖像和第二被攝體圖像左右并排觀察也不是不能判斷是否存在重疊,但是這時(shí)必須用前述能力區(qū)別各個(gè)圖像中的被攝體區(qū)域,考慮各個(gè)圖像的背景部分的重疊,在頭腦中計(jì)算并判斷區(qū)別的被攝體區(qū)域之間是否重疊。僅在頭腦中正確地進(jìn)行這一連串的工作與區(qū)別合成圖像中的被攝體區(qū)域的先前的方法相比更困難。即,通過(guò)機(jī)械地進(jìn)行背景部分重疊的位置匹配,使用人的高度的圖像理解能力,作出容易判斷被攝體區(qū)域之間是否重疊的狀況。這樣,通過(guò)對(duì)被攝體區(qū)域用一半的透過(guò)率進(jìn)行重疊顯示,即使在被攝體之間存在重疊等的情況下,也可以產(chǎn)生容易判別目前拍攝的被攝體的位置的效果。而且,也可以將這里記載的結(jié)構(gòu)和前述的各結(jié)構(gòu)根據(jù)需要進(jìn)行任意的組合。而且,本發(fā)明的第一圖像合成裝置也可以是以下結(jié)構(gòu)前述的重疊圖像生成部件將基準(zhǔn)圖像和修正的另一個(gè)或者兩個(gè)圖像之間的差分圖像中存在差的區(qū)域生成為與原來(lái)的像素值不同的像素值的圖像。這里,所謂“差分圖像”是比較兩個(gè)圖像中的相同位置的像素值,將其差值作為像素值而作出的圖像。一般來(lái)說(shuō),差值多取絕對(duì)值。所謂“與原來(lái)的像素值不同的像素值”是例如實(shí)現(xiàn)改變透過(guò)率而變成半透明,或者使像素值的明暗或者色調(diào)等相反來(lái)反轉(zhuǎn)顯示,或者成為紅色或者白色、黑色等醒目的顏色的像素值。而且,在區(qū)域的邊界部分和內(nèi)部中還包括以下情況改變前述的像素值,或者用虛線(xiàn)包圍邊界部分,或者閃爍顯示(使像素值時(shí)間性地變化)。按照上述的結(jié)構(gòu),在基準(zhǔn)圖像和修正的其它圖像之間,得到相同像素位置的像素值,在存在其差時(shí),將該像素位置的重疊圖像的像素值設(shè)為與其它區(qū)域不同的像素值。通過(guò)對(duì)所有像素位置進(jìn)行該處理,可以將差分部分的區(qū)域生成為與原來(lái)的像素值不同的像素值的圖像。由此,產(chǎn)生使用戶(hù)容易了解兩個(gè)圖像間不一致的部分的效果。例如第一或第二被攝體的區(qū)域在基準(zhǔn)圖像上和修正圖像上,一方成為被攝體的圖像,另一方成為背景的圖像,所以作為差分圖像中存在差的區(qū)域被提取。通過(guò)將被提取的區(qū)域設(shè)為半透明,或者反轉(zhuǎn)顯示,或者設(shè)為醒目的顏色的像素值,用戶(hù)容易了解被攝體的區(qū)域,如果被攝體之間存在重疊等,則產(chǎn)生也容易了解該重疊的效果。而且,這里記載的結(jié)構(gòu)可以和前述的各結(jié)構(gòu)根據(jù)需要進(jìn)行任意的組合。本發(fā)明的第一圖像合成裝置也可以是以下結(jié)構(gòu)還包括被攝體區(qū)域提取部件,從基準(zhǔn)圖像和修正后的另一個(gè)或者兩個(gè)圖像間的差分圖像中提取第一被攝體的區(qū)域和第二被攝體的區(qū)域,在前述的重疊圖像生成部件中,將基準(zhǔn)圖像和從前述被攝體區(qū)域提取部件得到的區(qū)域內(nèi)的修正后的另一個(gè)或者兩個(gè)圖像重疊,從而取代將基準(zhǔn)圖像和修正后的另一個(gè)或者兩個(gè)圖像重疊。由此,可以產(chǎn)生在基準(zhǔn)圖像上或者被修正的背景圖像上,僅合成被修正的被攝體圖像中的被攝體區(qū)域的效果。或者也可以在被修正的被攝體圖像上或者被修正的背景圖像上,僅合成基準(zhǔn)圖像中的被攝體區(qū)域,或者在被修正的背景圖像上合成基準(zhǔn)圖像中的被攝體區(qū)域和被修正的被攝體圖像中的被攝體區(qū)域,或者在作為基準(zhǔn)圖像的背景圖像上合成被修正的被攝體圖像中的被攝體區(qū)域。而且,如果改變被攝體區(qū)域的透過(guò)率等進(jìn)行合成,則用戶(hù)容易了解要合成哪個(gè)區(qū)域,如果被攝體之間存在重疊,則產(chǎn)生也可以進(jìn)一步容易了解該狀況的效果。進(jìn)而,由此產(chǎn)生可以輔助拍攝,提供用戶(hù)判斷如何避免產(chǎn)生重疊的材料的效果。而且,如果使用背景圖像、第一被攝體圖像和第二被攝體圖像三張圖像,則產(chǎn)生容易提取第一被攝體的區(qū)域火災(zāi)第二被攝體的區(qū)域的效果。進(jìn)而,由于可以分別提取第一被攝體的區(qū)域或者第二被攝體的區(qū)域,所以在各被攝體存在重疊的情況下,產(chǎn)生可以決定哪個(gè)優(yōu)先合成,即在重疊部分中,第一被攝體合成在第二被攝體之上還是合成在第二被攝體之下的效果。而且,這里記載的結(jié)構(gòu)可以根據(jù)需要和前述的各結(jié)構(gòu)進(jìn)行任意的組合。而且,本發(fā)明的第一圖像合成裝置可以是以下結(jié)構(gòu)進(jìn)一步包括重疊檢測(cè)部件,對(duì)前述被攝體區(qū)域提取部件得到的第一被攝體的區(qū)域和第二被攝體的區(qū)域的重疊進(jìn)行檢測(cè)。按照上述的結(jié)構(gòu),從被攝體區(qū)域提取部件得到第一被攝體的區(qū)域和第二被攝體的區(qū)域,所以重疊檢測(cè)部件對(duì)于某個(gè)像素位置,通過(guò)調(diào)查其是否為包含于第一被攝體的區(qū)域和第二被攝體的區(qū)域兩者中的像素位置,在包含于兩者中的像素位置存在的情況下,可以判斷為存在重疊。作為適用于該判斷處理的方法,例如被攝體區(qū)域提取部件或者重疊檢測(cè)部件將各個(gè)區(qū)域作為圖像生成,將被攝體區(qū)域的像素的像素值設(shè)定為規(guī)定的值。然后,如果重疊檢測(cè)部件在各像素位置中判斷兩者圖像的相同像素位置的像素值是否為設(shè)定的規(guī)定的值,則可以準(zhǔn)確地判斷是否存在重疊。由此,產(chǎn)生用戶(hù)容易判別被攝體之間是否存在重疊部分的效果。由此,對(duì)于輔助拍攝,從而不產(chǎn)生重疊的效果與前述相同。而且,本發(fā)明的第一圖像合成裝置還可以是以下結(jié)構(gòu)還包括重疊警告部件,在所述重疊檢測(cè)部件中檢測(cè)到重疊時(shí),向用戶(hù)或者被攝體或者向兩者警告存在重疊的情況。這里,為了“警告”,包括在顯示部件等上以文字或者圖像進(jìn)行警告,還包括燈產(chǎn)生的光或者揚(yáng)聲器等產(chǎn)生的聲音,振動(dòng)器等產(chǎn)生的振動(dòng)等,只要是用戶(hù)或者被攝體可以感知的方法都可以。由此,在被攝體之間重疊的情況下,由于通過(guò)重疊警告部件的動(dòng)作被警告,所以可以防止用戶(hù)對(duì)該情況不注意地進(jìn)行拍攝/記錄,或者進(jìn)行合成處理,進(jìn)而產(chǎn)生馬上通知被攝體需要進(jìn)行位置調(diào)整等的情況的輔助拍攝的效果。而且,本發(fā)明的第一圖像合成裝置還可以是以下結(jié)構(gòu)還包括最佳鏡頭通知部件,在所述重疊檢測(cè)部件中沒(méi)有檢測(cè)到重疊時(shí),向用戶(hù)或者被攝體或者向兩者通知不存在重疊的情況。這里,為了“通知”,和“警告”一樣,只要是用戶(hù)或者被攝體可以感知的方法都可以。由此,由于用戶(hù)可以知道被攝體之間沒(méi)有重疊的時(shí)刻,所以如果使拍攝或者拍攝圖像記錄、合成的定時(shí)與該時(shí)刻匹配進(jìn)行,則可以產(chǎn)生被攝體之間不重疊地進(jìn)行合成的輔助拍攝效果。而且,也可以對(duì)被攝體通知最佳鏡頭,所以可以得到馬上進(jìn)行擺姿勢(shì)或視線(xiàn)的準(zhǔn)備的輔助拍攝效果。而且,本發(fā)明的第一圖像合成裝置也可以是以下結(jié)構(gòu)還包括拍攝部件,對(duì)被攝體或者風(fēng)景進(jìn)行拍攝;自動(dòng)快門(mén)部件,在所述重疊檢測(cè)部件中沒(méi)有檢測(cè)到重疊時(shí),生成將所述拍攝部件得到的圖像作為背景圖像、或者第一被攝體圖像、或者第二被攝體圖像來(lái)進(jìn)行記錄的指示。在上述的結(jié)構(gòu)中,所謂將拍攝圖像作為背景圖像或者第一被攝體圖像、第二被攝體圖像記錄,是例如通過(guò)記錄到主存儲(chǔ)器或者外部存儲(chǔ)器來(lái)實(shí)現(xiàn)。因此,自動(dòng)快門(mén)部件在從重疊檢測(cè)部件輸入了在第一被攝體的區(qū)域和第二被攝體的區(qū)域中沒(méi)有重疊的信號(hào)時(shí),輸出對(duì)主存儲(chǔ)器或者外部存儲(chǔ)器進(jìn)行記錄控制處理的指示。然后,背景修正量計(jì)算部件或者重疊圖像生成部件通過(guò)讀取被記錄在主存儲(chǔ)器或者外部存儲(chǔ)器中的圖像,可以得到背景圖像或者第一被攝體圖像、第二被攝體圖像。而且,即使自動(dòng)快門(mén)部件自動(dòng)地生成指示,也不一定馬上記錄圖像。例如,也可以是同時(shí)還按壓快門(mén)按鈕,或者如果不成為自動(dòng)記錄模式等的狀態(tài)就不記錄。由此,由于在被攝體之間不重疊時(shí)自動(dòng)地進(jìn)行拍攝,所以產(chǎn)生用戶(hù)自己判斷是否存在重疊而可以不按壓快門(mén)的輔助拍攝效果。本發(fā)明的第一圖像合成裝置還可以是以下結(jié)構(gòu)還包括拍攝被攝體或者風(fēng)景的拍攝部件;以及自動(dòng)快門(mén)部件,在通過(guò)所述重疊檢測(cè)部件檢測(cè)重疊時(shí),生成禁止將所述拍攝部件得到的圖像作為背景圖像、或者第一被攝體圖像、或者第二被攝體圖像來(lái)進(jìn)行記錄的指示。按照上述的結(jié)構(gòu),自動(dòng)快門(mén)部件在從重疊檢測(cè)部件得到存在重疊的信號(hào)后,輸出禁止將從拍攝部件得到的圖像記錄到主存儲(chǔ)器或者外部存儲(chǔ)器等的指示。其結(jié)果,例如即使假設(shè)快門(mén)按鈕被按壓,也不記錄從拍攝部件得到的圖像。而且,也可以只要不是成為自動(dòng)禁止模式等的狀態(tài),就不進(jìn)行該禁止處理。由此,由于在被攝體之間存在重疊時(shí)不進(jìn)行拍攝,所以可以產(chǎn)生防止用戶(hù)錯(cuò)誤地在存在重疊的狀態(tài)下進(jìn)行拍攝/記錄的輔助拍攝效果。而且,本發(fā)明的第一圖像合成裝置還可以是以下結(jié)構(gòu)所述重疊檢測(cè)部件提取第一被攝體的區(qū)域和第二被攝體的區(qū)域重疊的重疊區(qū)域。按照上述結(jié)構(gòu),在通過(guò)重疊檢測(cè)部件檢測(cè)是否存在重疊時(shí),例如使用先前說(shuō)明的圖像等,還可以同時(shí)提取重疊區(qū)域。利用該提取出的重疊區(qū)域,在被攝體之間存在重疊部分的情況下,可以通過(guò)顯示來(lái)通知哪一部分存在重疊。由此,產(chǎn)生用戶(hù)容易判別重疊區(qū)域的效果。而且,由此產(chǎn)生容易判斷照相機(jī)或者被攝體向哪個(gè)方向、位置移動(dòng)多少合適的輔助拍攝的效果。而且,如果在背景部分存在適量的重疊,則不使用背景圖像,僅用第一被攝體圖像和第二被攝體圖像,也可以計(jì)算背景修正量從而對(duì)某個(gè)進(jìn)行修正,生成差分圖像,求出差分區(qū)域。這時(shí),如果第一被攝體的區(qū)域和第二被攝體的區(qū)域中沒(méi)有重疊,則差分區(qū)域作為第一區(qū)域和第二區(qū)域兩個(gè)獨(dú)立的區(qū)域求出。但是,在存在重疊時(shí),不使第一區(qū)域和第二區(qū)域獨(dú)立,而作為混合的一個(gè)區(qū)域被提取。因此,難以?xún)H從第一被攝體圖像以及第二被攝體圖像提取重疊區(qū)域。對(duì)此,在使用背景圖像的情況下,如果在背景圖像中取得基準(zhǔn)圖像,則在差分圖像中,僅存在第一區(qū)域或第二區(qū)域之一,第一區(qū)域和第二區(qū)域被分別提取。不是同時(shí)被提取。因此,即使第一區(qū)域和第二區(qū)域重疊,也可以沒(méi)有問(wèn)題地求出第一區(qū)域和第二區(qū)域。因此,也可以求出重疊區(qū)域。由此,通過(guò)使用背景圖像,即使被攝體中存在重疊,也可以產(chǎn)生能夠求出重疊區(qū)域的效果。而且,本發(fā)明的第一圖像合成裝置還可以是以下結(jié)構(gòu)所述重疊圖像生成區(qū)域?qū)⑺鲋丿B檢測(cè)部件提取的重疊區(qū)域作為與原來(lái)的像素值不同的像素值的圖像來(lái)生成。按照上述的結(jié)構(gòu),重疊圖像生成部件在生成重疊圖像時(shí),雖然決定各像素位置的像素值,但是在該像素位置在由重疊檢測(cè)部件得到的重疊區(qū)域內(nèi)時(shí)(例如,將重疊區(qū)域作為黑圖像生成的情況,如果判斷重疊圖像的像素位置的像素值為黑色則處理簡(jiǎn)便),設(shè)為與其它區(qū)域不同的像素值。特別是將該區(qū)域的邊界線(xiàn)或內(nèi)部用紅色等醒目的顏色描畫(huà),或者使邊界線(xiàn)閃爍顯示,或者成為半透明,從而透過(guò)背景的像素值較好。由此,可以產(chǎn)生用戶(hù)或被攝體容易判斷重疊區(qū)域的輔助拍攝效果。而且,本發(fā)明的第一圖像合成裝置也可以是以下結(jié)構(gòu)還包括重疊回避方法計(jì)算部件,在所述重疊檢測(cè)部件檢測(cè)重疊時(shí),對(duì)減少重疊的第一被攝體或者第二被攝體的位置或者該位置的方向進(jìn)行計(jì)算;以及重疊回避方法通知部件,向用戶(hù)或者被攝體或者兩者通知由所述重疊回避方法計(jì)算部件得到的第一被攝體或者第二被攝體的位置或者該位置的方向。這里,從被攝體區(qū)域提取背景得到第一被攝體的區(qū)域和第二被攝體的區(qū)域的信息,重疊檢測(cè)部件從這些區(qū)域信息中得到與重疊有關(guān)的信息,這與已經(jīng)說(shuō)明的相同。因此,如果將被攝體的區(qū)域的位置設(shè)為與從被攝體區(qū)域提取部件得到的位置不同的位置,通過(guò)重疊檢測(cè)部件調(diào)查有多少重疊,則可以預(yù)測(cè)在該位置被攝體移動(dòng)時(shí)的重疊量。將被攝體的區(qū)域的位置嘗試移動(dòng)到各個(gè)位置,預(yù)測(cè)各自的重疊量,將重疊最少的位置和方向作為減少重疊的位置和方向通知用戶(hù)或被攝體。或者,更簡(jiǎn)單的處理,由于一般被攝體間的距離越大則重疊應(yīng)越減少,所以可以根據(jù)得到的被攝體區(qū)域計(jì)算被攝體間的距離遠(yuǎn)離的方向。例如通過(guò)顯示來(lái)通知得到的重疊變少的位置和方向的情況下,在生成重疊圖像時(shí),在進(jìn)行了各種合成處理以后,可以覆寫(xiě)箭頭等來(lái)進(jìn)行生成。由此,在存在重疊的情況下,可以產(chǎn)生用戶(hù)不用判斷攝像機(jī)或者拍攝中的被攝體向哪個(gè)方向、位置移動(dòng)較好就可以的輔助拍攝效果。而且,計(jì)算重疊減少的位置和方向的被攝體可以是第一或者第二被攝體之一,但是考慮先拍攝的被攝體已經(jīng)從照相機(jī)的前面退下,后拍攝的被攝體通常還站在照相機(jī)前。因此,如果對(duì)后拍攝的被攝體計(jì)算位置和方向,則根據(jù)該計(jì)算結(jié)果,被攝體馬上移動(dòng)就可以減少重疊,所以使用方便。本發(fā)明的第一圖像合成方法,包含以下步驟背景修正量計(jì)算步驟,對(duì)作為背景的圖像的背景圖像、第一被攝體圖像和第二被攝體圖像之間的背景的相對(duì)移動(dòng)量、旋轉(zhuǎn)量、放大縮小率、失真修正量的其中一個(gè)或者組合構(gòu)成的修正量進(jìn)行計(jì)算,或者對(duì)計(jì)算并存儲(chǔ)的修正量進(jìn)行讀取,所述第一被攝體圖像包括所述背景圖像的至少一部分和第一被攝體,所述第二被攝體圖像包括背景圖像的至少一部分和第二被攝體;以及重疊圖像生成步驟,將背景圖像、第一被攝體圖像、第二被攝體圖像的其中之一作為基準(zhǔn)圖像,用由所述背景修正量計(jì)算步驟得到的修正量對(duì)另外兩個(gè)圖像進(jìn)行修正,使得被攝體以外的背景的至少一部分重疊,并生成將基準(zhǔn)圖像和修正后的另外一個(gè)或者兩個(gè)圖像重疊的圖像。由此產(chǎn)生的各種作用效果與前述相同。本發(fā)明的第一圖像合成程序是使計(jì)算機(jī)作為上述的第一圖像合成裝置具有的各部件的功能的結(jié)構(gòu)。本發(fā)明的第一圖像合成程序是使計(jì)算機(jī)執(zhí)行上述的第一圖像合成方法具有的各步驟的結(jié)構(gòu)。本發(fā)明的第一記錄介質(zhì)是記錄了上述第一圖像合成程序的結(jié)構(gòu)。由此,通過(guò)經(jīng)由上述記錄介質(zhì)或者網(wǎng)絡(luò),在一般的計(jì)算機(jī)中安裝圖像合成程序,利用該計(jì)算機(jī)實(shí)現(xiàn)上述的圖像合成方法,換言之,可以使計(jì)算機(jī)具有作為圖像合成裝置的功能。〔實(shí)施方式2〕以下,參照本發(fā)明的實(shí)施方式的另一個(gè)實(shí)施方式。在實(shí)施方式1中,處理第一被攝體圖像和第二被攝體圖像,還利用了拍攝了與各被攝體至少一部分共用的背景部分,而沒(méi)有拍攝被攝體的背景圖像,但是在實(shí)施方式2中,對(duì)不利用背景圖像進(jìn)行圖像合成的結(jié)構(gòu)進(jìn)行說(shuō)明。這里也首先對(duì)語(yǔ)言的定義進(jìn)行說(shuō)明。“第一被攝體”、“第二被攝體”是要進(jìn)行合成的對(duì)象,一般多為人物,有時(shí)也為物等。嚴(yán)格來(lái)說(shuō),“被攝體”是在第一被攝體圖像和第二被攝體圖像之間,背景部分至少一部分重疊時(shí),像素值不一致的區(qū)域,即有變化的區(qū)域都可能成為“被攝體的區(qū)域”。但是,在背景部分,因?yàn)榧词故菢?shù)的葉子因風(fēng)而搖動(dòng)等的小變化,也成為有變化的區(qū)域,所以在某種程度上忽視小的變化和小的區(qū)域較好。而且,在例如被攝體為人物的情況下,被攝體不限于必須是一個(gè)人,有時(shí)也將多個(gè)人物匯總成為“第一被攝體”和“第二被攝體”。即,即使是多個(gè)人,也作為合成處理的單位進(jìn)行匯總處理,成為一個(gè)“被攝體”。而且,不僅是人物,對(duì)物體也一樣。而且,被攝體不限于必須是一個(gè)區(qū)域,也有多個(gè)區(qū)域構(gòu)成的情況?!暗谝弧?、“第二”是為了簡(jiǎn)單區(qū)別不同幀的圖像而賦予的,不是表述拍攝的順序等,本質(zhì)上沒(méi)有差別。而且,例如人物拿著衣服或者物品等,即使不出現(xiàn)在“不包含第一被攝體或者第二被攝體的僅為背景的圖像”中,它們也被包含在被攝體中?!暗谝槐粩z體圖像”、“第二被攝體圖像”是包含上述的“第一被攝體”、“第二被攝體”的不同的圖像,一般來(lái)說(shuō),是用照相機(jī)等分別拍攝了該被攝體的圖像。但是,在圖像上僅拍攝被攝體,與背景圖像共用的背景部分完全沒(méi)有拍攝的情況下,因?yàn)椴荒苓M(jìn)行將其共用的背景部分還原的位置匹配,所以不適合合成。所以需要對(duì)至少一部分(為了使合成的被攝體的周?chē)兊米匀?,最好在要合成的被攝體的周?chē)?與背景圖像共用的背景部分進(jìn)行拍攝。而且,通常,第一被攝體圖像、第二被攝體圖像使用相同背景,即,使照相機(jī)不動(dòng)進(jìn)行拍攝的情況較多。所謂“背景部分”是從第一被攝體圖像、第二被攝體圖像中除去了“第一被攝體”、“第二被攝體”的部分。“移動(dòng)量”、“失真修正量”和“重疊圖像生成部件”與實(shí)施方式1中說(shuō)明的相同,所以省略說(shuō)明。關(guān)于“像素值”、“濃度值”、“亮度值”、“透過(guò)率”、“不透明度”、“規(guī)定的透過(guò)率”、“差分圖像”以及“與原來(lái)的像素值不同的像素值”,由于與實(shí)施方式1中說(shuō)明的相同,所以省略說(shuō)明。所謂“被攝體的區(qū)域”是用與背景分離的邊界分割被攝體的區(qū)域。例如,在第一被攝體圖像中人物持有衣服或者物品,如果在第二被攝體圖像中不顯現(xiàn)它們,則它們也是被攝體,被包含在被攝體區(qū)域中。而且,被攝體的區(qū)域并不限于必須是連接的一塊區(qū)域,有時(shí)也分為多個(gè)區(qū)域。所謂“僅重疊從前述被攝體區(qū)域提取部件得到的區(qū)域”不是說(shuō)在該區(qū)域以外不生成任何圖像,意思是在該區(qū)域以外的區(qū)域埋入基準(zhǔn)圖像等。所謂“特征”是該區(qū)域的圖像具有的特性等,作為特征量最好具有可以數(shù)值化表現(xiàn)的性質(zhì)。作為特征量,除了例如各色的像素值、其色調(diào)、色度、亮度,作為表示圖像的模樣和構(gòu)造的統(tǒng)計(jì)量,還有同時(shí)關(guān)聯(lián)矩陣和差分統(tǒng)計(jì)量、掃描寬度矩陣、功率譜、這些第二次統(tǒng)計(jì)量、高次統(tǒng)計(jì)量等。所謂“第一被攝體或者第二被攝體的區(qū)域”是從差分圖像等提取的被攝體的區(qū)域,對(duì)第一被攝體的區(qū)域或者第二被攝體的區(qū)域不加區(qū)別也可以的區(qū)域。所謂“要合成的被攝體”不是在合成處理的過(guò)程中求出的被攝體,而是實(shí)際(在照相機(jī)前)存在的被攝體,對(duì)于確定為第一被攝體圖像和第二被攝體圖像中的一個(gè)的基準(zhǔn)圖像,是用戶(hù)要合成的被攝體。但是,如上所述,作為合成處理的單位總和處理的是一個(gè)“被攝體”,所以有時(shí)一個(gè)被攝體為多個(gè)人物或物體。對(duì)于“警告”、“通知”和“框架”也和實(shí)施方式1中說(shuō)明的一樣,所以省略說(shuō)明。圖33是表示實(shí)施本發(fā)明的一個(gè)實(shí)施方式的圖像合成方法的圖像合成裝置的結(jié)構(gòu)圖。即,可以將圖像合成裝置的主要部分展開(kāi)表示為以下主要功能塊拍攝部件21、第一被攝體圖像取得部件22、第二被攝體圖像取得部件23、背景修正量計(jì)算部件24、修正圖像生成部件25、差分圖像生成部件26、被攝體區(qū)域提取部件27、重疊檢測(cè)部件28、重疊圖像生成部件29、重疊圖像顯示部件30、重疊警告部件31、最佳快門(mén)通知部件32、自動(dòng)快門(mén)部件33。圖34是具體實(shí)現(xiàn)圖33的各部件21~33的裝置的結(jié)構(gòu)例。CPU(centralprocessingunit)90用作背景修正量計(jì)算部件24、修正圖像生成部件25、差分圖像生成部件26、被攝體區(qū)域提取部件27、重疊檢測(cè)部件28、重疊圖像生成部件29、重疊圖像顯示部件30、重疊警告部件31、最佳快門(mén)通知部件32、自動(dòng)快門(mén)部件33,可以從主存儲(chǔ)器74、外部存儲(chǔ)器75、經(jīng)由通信裝置77的網(wǎng)絡(luò)目的地等得到記述了這些部件24~33的處理步驟的程序。而且,對(duì)于拍攝部件21、第一被攝體圖像取得部件22、第二被攝體圖像取得部件23,為了對(duì)拍攝元件、拍攝元件生成的圖像數(shù)據(jù)的各種處理進(jìn)行內(nèi)部控制,有時(shí)也使用CPU等。而且,CPU90在與包括CPU90,通過(guò)總線(xiàn)79相互連接的顯示器71、拍攝元件72、圖形輸入板73、主存儲(chǔ)器74、外部存儲(chǔ)器75、快門(mén)按鈕76、通信裝置77、燈78、揚(yáng)聲器80進(jìn)行數(shù)據(jù)的收發(fā)后,進(jìn)行處理。而且,數(shù)據(jù)的收發(fā)處理經(jīng)由總線(xiàn)79進(jìn)行以外,還可以經(jīng)由通信電纜或者無(wú)線(xiàn)通信裝置等可以發(fā)送接收數(shù)據(jù)的裝置進(jìn)行。而且,作為各部件21~33的實(shí)現(xiàn)部件,不限于CPU,也可以利用將DSP(digitalsignalprocessor)和處理步驟作為電路進(jìn)行組合的邏輯電路等。顯示器71通常與圖形卡組合來(lái)實(shí)現(xiàn),在圖形卡上有VRAM(videorandomaccessmemory),將VRAM上的數(shù)據(jù)變換為顯示信號(hào),發(fā)送到監(jiān)視器等的顯示器(顯示/輸出介質(zhì)),顯示器將顯示信號(hào)作為圖像顯示。拍攝元件72是拍攝風(fēng)景等得到圖像信號(hào)的設(shè)備,通常由鏡頭等光學(xué)部件和受光元件及其附帶的電子電路等構(gòu)成。這里,假設(shè)拍攝元件72包含將輸出信號(hào)通過(guò)A/D變換器等變換為數(shù)字圖像信號(hào)之前的部分,通過(guò)總線(xiàn)79將拍攝的圖像的圖像數(shù)據(jù)發(fā)送到第一被攝體圖像取得部件22、第二被攝體圖像取得部件23等。作為拍攝元件的一般的器件,例如有CCD(chargecoupleddevice)等,但是除此之外,只要是可以將風(fēng)景等作為圖像數(shù)據(jù)得到的器件都可以。作為輸入用戶(hù)指示的部件有圖形輸入板73、快門(mén)按鈕76等。用戶(hù)的指示通過(guò)總線(xiàn)79被輸入到各部件21~33。另外可以使用各種操作按鈕、由麥克風(fēng)輸入聲音等各種輸入部件。圖形輸入板73由筆和檢測(cè)筆位置的檢測(cè)設(shè)備構(gòu)成。快門(mén)按鈕76由機(jī)械或者電子開(kāi)關(guān)等構(gòu)成,通過(guò)用戶(hù)按壓按鈕,通常將拍攝元件72拍攝的圖像存儲(chǔ)到主存儲(chǔ)器74或者外部存儲(chǔ)器75等,同時(shí)生成使一連串的處理開(kāi)始的開(kāi)始信號(hào)。主存儲(chǔ)器74通常由DRAM(dynamicrandomaccessmemory)或者閃速存儲(chǔ)器等的存儲(chǔ)裝置構(gòu)成。而且,CPU內(nèi)部包含的存儲(chǔ)器或者檢測(cè)器也可以解釋為一種主存儲(chǔ)器。外部存儲(chǔ)器75是HDD(harddiskdrive)或者PC(personalcomputer)卡等可插拔的存儲(chǔ)部件?;蛘咭部梢詫PU90和通過(guò)網(wǎng)絡(luò)有線(xiàn)或者無(wú)線(xiàn)連接的其它網(wǎng)絡(luò)設(shè)備上安裝的主存儲(chǔ)器或者外部存儲(chǔ)器用作外部存儲(chǔ)器75。通信裝置77通過(guò)網(wǎng)絡(luò)接口卡等實(shí)現(xiàn),與通過(guò)有線(xiàn)或者無(wú)線(xiàn)等連接的其它網(wǎng)絡(luò)設(shè)備進(jìn)行數(shù)據(jù)的收發(fā)。揚(yáng)聲器80將通過(guò)總線(xiàn)79等送來(lái)的聲音數(shù)據(jù)解釋為聲音信號(hào),作為聲音輸出。輸出的聲音有時(shí)是單波長(zhǎng)的單純的聲音,有時(shí)是音樂(lè)或者人的聲音等復(fù)雜的聲音。在預(yù)先決定輸出聲音的情況下,有時(shí)送來(lái)的數(shù)據(jù)不是聲音信號(hào),僅為簡(jiǎn)單的導(dǎo)通、截止的動(dòng)作控制信號(hào)。接著,從各部件間的數(shù)據(jù)的授受的觀點(diǎn)說(shuō)明圖33的各部件21~33。并且,各部件間的數(shù)據(jù)的收發(fā),在沒(méi)有特別的注釋表現(xiàn)為“從**部件得到”、“發(fā)送(傳遞)到**部件”時(shí),設(shè)為主要通過(guò)總線(xiàn)79收發(fā)數(shù)據(jù)。這時(shí),既存在各部件間的直接進(jìn)行數(shù)據(jù)收發(fā)的情況,也有通過(guò)主存儲(chǔ)器74或者外部存儲(chǔ)器75、其間經(jīng)由通信裝置77插入網(wǎng)絡(luò)等進(jìn)行數(shù)據(jù)收發(fā)的情況。拍攝部件21主要由拍攝元件72構(gòu)成,將拍攝的風(fēng)景等作為圖像數(shù)據(jù)發(fā)送到第一被攝體圖像取得部件22、第二被攝體圖像取得部件23。第一被攝體圖像取得部件22例如由拍攝部件21、主存儲(chǔ)器74和/或外部存儲(chǔ)器75等構(gòu)成,從拍攝部件21、主存儲(chǔ)器74、外部存儲(chǔ)器75、和/或經(jīng)由通信裝置77的網(wǎng)絡(luò)目的地等得到第一被攝體圖像。而且,第一被攝體圖像取得部件22為了進(jìn)行內(nèi)部控制等,有時(shí)也包括CPU等。在使用拍攝部件21的情況下,通過(guò)拍攝元件72拍攝包括第一被攝體的當(dāng)前的風(fēng)景(第一被攝體圖像),通常在按下了快門(mén)按鈕76等的時(shí)刻進(jìn)行拍攝,拍攝的圖像被存儲(chǔ)在主存儲(chǔ)器74、外部存儲(chǔ)器75、和/或經(jīng)由通信裝置77的網(wǎng)絡(luò)目的地等中。另一方面,第一被攝體圖像取得部件22從主存儲(chǔ)器74、外部存儲(chǔ)器75、和/或經(jīng)由通信裝置77的網(wǎng)絡(luò)目的地等取得第一被攝體圖像時(shí),讀出已經(jīng)拍攝的預(yù)先準(zhǔn)備的圖像。而且,也有在經(jīng)由通信裝置77的網(wǎng)絡(luò)目的地等存在照相機(jī),通過(guò)網(wǎng)絡(luò)進(jìn)行拍攝的情況。第一被攝體圖像被發(fā)送到背景修正量計(jì)算部件24、修正圖像生成部件25、差分圖像生成部件26、被攝體區(qū)域提取部件27和/或重疊圖像生成部件29等。第二被攝體圖像取得部件23例如由拍攝部件21、主存儲(chǔ)器74和/或外部存儲(chǔ)器75等構(gòu)成,從拍攝部件21、主存儲(chǔ)器74、外部存儲(chǔ)器75和/或經(jīng)由通信裝置77的網(wǎng)絡(luò)地址等取得包含第二被攝體的圖像(以后稱(chēng)為“第二被攝體圖像”)。而且,第二被攝體圖像取得部件23有時(shí)為了進(jìn)行內(nèi)部控制可包含CPU等。除了圖像的內(nèi)容不同以外,關(guān)于圖像的取得方法與第一被攝體圖像取得部件22一樣。第二被攝體圖像被發(fā)送到背景修正量計(jì)算部件24、修正圖像生成部件25、差分圖像生成部件26、被攝體區(qū)域提取部件27和/或重疊圖像生成部件29等。作為背景修正量計(jì)算部件24的CPU90對(duì)第一被攝體圖像、第二被攝體圖像中的被攝體以外的背景的相對(duì)移動(dòng)量、旋轉(zhuǎn)量、擴(kuò)大縮小率、失真修正量的任意一個(gè)或者其組合構(gòu)成的修正量進(jìn)行計(jì)算。最低限度地求取第一被攝體圖像和第二被攝體圖像的一方(基準(zhǔn)圖像)和另一方的圖像之間的修正量就可以。背景修正量計(jì)算部件24將計(jì)算出的修正量發(fā)送到修正圖像生成部件25。而且,在背景修正量計(jì)算部件24讀出預(yù)先計(jì)算的修正量時(shí),從主存儲(chǔ)器74、外部存儲(chǔ)器75和/或經(jīng)由通信裝置77的網(wǎng)絡(luò)目的地讀出修正量。作為修正圖像生成部件25的CPU90,將第一被攝體圖像、第二被攝體圖像中的一個(gè)設(shè)為基準(zhǔn)圖像,對(duì)另一個(gè)圖像用從背景修正量計(jì)算部件24得到的修正量進(jìn)行修正,使得被攝體以外的背景部分重合,從而生成修正后的圖像(以下稱(chēng)為修正圖像),發(fā)送到差分圖像生成部件26和重疊圖像生成部件29。而且,在修正圖像生成部件25讀出預(yù)先生成的修正圖像時(shí),從主存儲(chǔ)器74、外部存儲(chǔ)器75和/或經(jīng)由通信裝置77的網(wǎng)絡(luò)目的地等讀出。作為差分圖像生成部件26的CPU90,生成由修正圖像生成部件25決定的基準(zhǔn)圖像和從修正圖像生成部件25得到的修正圖像之間的差分圖像,將生成的差分圖像發(fā)送到被攝體區(qū)域提取部件27和重疊圖像生成部件29。作為被攝體區(qū)域提取部件27的CPU90,從差分圖像生成部件26得到的差分圖像中提取第一、第二被攝體的區(qū)域,將提取的區(qū)域發(fā)送到重疊檢測(cè)部件28和重疊圖像生成部件29。作為重疊檢測(cè)部件28的CPU90,從被攝體區(qū)域提取部件27得到的第一、第二被攝體的區(qū)域中檢測(cè)第一、第二被攝體之間的重疊,將是否存在重疊的信息和重疊區(qū)域的信息發(fā)送到重疊圖像生成部件29、重疊警告部件31、最佳快門(mén)通知部件32和自動(dòng)快門(mén)部件33。作為重疊圖像生成部件29的CPU90,將從第一被攝體圖像取得部件22得到的第一被攝體圖像、從第二被攝體圖像取得部件23得到的第二被攝體圖像、從修正圖像生成部件25得到的修正圖像生成全部或者部分重疊的圖像,將生成的圖像發(fā)送到重疊圖像顯示部件30。而且,有時(shí)重疊圖像生成部件29將從差分圖像生成部件26得到的差分圖像中的存在差的區(qū)域生成為與原來(lái)的像素值不同的像素值的圖像。而且,有時(shí)重疊圖像生成部件29僅將從被攝體區(qū)域提取部件27得到的第一被攝體和第二被攝體的區(qū)域重疊到基準(zhǔn)圖像等上。而且,有時(shí)重疊圖像生成部件29將從重疊檢測(cè)部件28得到的重疊區(qū)域生成為與原來(lái)的像素值不同的像素值的圖像。作為重疊圖像顯示部件30的CPU90,使從重疊圖像生成部件29得到的重疊圖像顯示在顯示器71等上。而且,有時(shí)有以下情況重疊圖像顯示部件30根據(jù)從重疊警告部件31得到的警告信息,進(jìn)行警告顯示的情況,或者根據(jù)從最佳快門(mén)通知部件32得到的最佳鏡頭信息,進(jìn)行最佳鏡頭情況的顯示的情況,或者根據(jù)從自動(dòng)快門(mén)部件33得到的快門(mén)信息,顯示進(jìn)行了自動(dòng)快門(mén)的情況。作為重疊警告部件31的CPU90,根據(jù)從重疊檢測(cè)部件28得到的有關(guān)重疊的信息,在存在重疊的情況下,向用戶(hù)、或者被攝體或者兩者通知該情況。在通知中,可以采用將通知內(nèi)容設(shè)為文字等發(fā)送到重疊圖像顯示部件30,從而在顯示器71上顯示,或者使用燈78以光進(jìn)行通知,或者使用揚(yáng)聲器80以聲音進(jìn)行通知的各種方式。只要可以進(jìn)行通知,也可以使用除此之外的裝置等。作為最佳快門(mén)通知部件32的CPU90根據(jù)從重疊檢測(cè)部件28得到的重疊信息,在不存在重疊時(shí),將不存在重疊的情況通知用戶(hù)或者被攝體或者兩者。關(guān)于通知方法,與重疊警告部件31的說(shuō)明一樣。作為自動(dòng)快門(mén)部件33的CPU90根據(jù)從重疊檢測(cè)部件28得到的重疊信息,在不存在重疊時(shí),對(duì)第二被攝體圖像取得部件23自動(dòng)發(fā)出指示,使得將從拍攝部件21得到的圖像存儲(chǔ)到主存儲(chǔ)器74或者外部存儲(chǔ)器75等中。這里,主要設(shè)想從拍攝部件21得到的圖像作為第一被攝體圖像或者第二被攝體圖像被最終記錄、保存在主存儲(chǔ)器74或者外部存儲(chǔ)器75中,并被合成的使用方法。例如在先拍攝第一被攝體后拍攝第二被攝體時(shí),在從拍攝部件21得到第一被攝體圖像時(shí),每次得到就進(jìn)行記錄、保存,但是即使從拍攝部件21得到第二被攝體圖像也不被馬上保存。即,在將從拍攝部件21得到的圖像設(shè)為第二被攝體圖像時(shí),使用該得到的第二被攝體圖像和保存的第一被攝體圖像,進(jìn)行重疊檢測(cè)等的處理,進(jìn)行在重疊圖像顯示部件30等上的各種顯示和警告、通知等的處理,重復(fù)上述的一連串的處理。然后,通過(guò)自動(dòng)快門(mén)部件33指示了記錄、保存時(shí),第二被攝體圖像被最終地記錄、保存。而且,也可以在存在自動(dòng)快門(mén)部件33的指示,并且用戶(hù)按壓了快門(mén)按鈕143時(shí),記錄、保存第二被攝體圖像。而且,自動(dòng)快門(mén)部件33也可以將發(fā)出指示的結(jié)果、記錄了拍攝圖像的情況通知用戶(hù)或者被攝體或者兩者。關(guān)于通知方法,與重疊警告部件31的說(shuō)明相同。而且,作為自動(dòng)快門(mén)部件33的CPU90不僅進(jìn)行記錄的指示,而且根據(jù)從重疊檢測(cè)部件28得到的重疊信息,存在重疊時(shí),自動(dòng)地發(fā)出指示,禁止在第二被攝體圖像取得部件23中將拍攝部件21得到的圖像記錄到主存儲(chǔ)器74或者外部存儲(chǔ)器75等。該動(dòng)作與上述的自動(dòng)記錄的情況相反。這時(shí),在存在自動(dòng)快門(mén)部件33的禁止保存的指示時(shí),即使用戶(hù)按壓快門(mén)按鈕143,第二被攝體圖像也不被記錄、保存。圖35(a)表示本發(fā)明的圖像合成裝置背面的外觀圖。主體140上有顯示部兼圖形輸入板141、燈142和快門(mén)按鈕143。顯示部兼圖形輸入板141相當(dāng)于輸入輸出裝置(顯示器71和圖形輸入板73等)和重疊圖像顯示部件30。如圖35(a)所示,在顯示部兼圖形輸入板141上,顯示由重疊圖像生成部件29生成的合成圖像和來(lái)自重疊警告部件31、最佳快門(mén)通知部件32、自動(dòng)快門(mén)部件33等的通知/警告信息等。而且,也用于顯示圖像合成裝置的各種設(shè)定菜單,使用圖形輸入板,用手指或者筆等變更設(shè)定。而且,作為各種設(shè)定等的操作部件,不僅是圖形輸入板,也可以是按鈕類(lèi)等其它的部件。而且,顯示部兼圖形輸入板141也可以利用對(duì)主體140旋轉(zhuǎn)或者分離等方法,不僅使拍攝者,而且在被攝體方也看見(jiàn)。燈142用于來(lái)自重疊警告部件31、最佳快門(mén)通知部件32、自動(dòng)快門(mén)部件33等的通知和警告??扉T(mén)按鈕143主要用于指示第一被攝體圖像取得部件22或者第二被攝體圖像取得部件23從拍攝部件21取入/記錄拍攝圖像的定時(shí)。而且,雖然在該例中沒(méi)有顯示,但也可以將內(nèi)置揚(yáng)聲器用作通知/警告部件。圖35(b)顯示本發(fā)明的圖像合成裝置的前面的外觀例。在主體140的前面存在鏡頭部144。鏡頭部144是拍攝部件21的一部分。而且,在雖然在圖35(b)的例子中沒(méi)有表示,但也可以具有顯示部或燈、揚(yáng)聲器等,使得在前面向被攝體傳送信息(前述的通知或者警告)。對(duì)于圖像數(shù)據(jù)和像素值與實(shí)施方式1中利用圖4說(shuō)明的相同,所以省略說(shuō)明。圖36是表示本發(fā)明的實(shí)施方式的一例的流程圖。首先,在步驟S11(以下將“步驟S”略記為“S”),第一被攝體圖像取得部件22取得第一被攝體圖像,經(jīng)由連接點(diǎn)p20(以下將“連接點(diǎn)p”略記為“p”)處理進(jìn)入到S12。第一被攝體圖像可以使用拍攝部件21拍攝,也可以預(yù)先讀出在主存儲(chǔ)器74、外部存儲(chǔ)器75和經(jīng)由通信裝置77的網(wǎng)絡(luò)目的地等中準(zhǔn)備的圖像。接著,在S12,第二被攝體圖像取得部件23取得具有與上述第一被攝體圖像至少共用一部分背景部分的第二被攝體圖像,經(jīng)由連接點(diǎn)p30,處理進(jìn)入到S13。這里的除了在后面利用圖44詳細(xì)說(shuō)明,但是第二被攝體圖像的取得方法自身與第一被攝體圖像相同。而且,S11和S12的處理順序相反也可以,但是如果將后拍攝的一個(gè)作為基準(zhǔn)圖像,則可以產(chǎn)生拍攝時(shí)的合成圖像的顯示中不一致感較少的效果。在S13中,背景修正量計(jì)算部件24從第一被攝體圖像、第二被攝體圖像中計(jì)算背景修正量,處理經(jīng)由p40進(jìn)到S14。第一被攝體圖像、第二被攝體圖像分別由第一被攝體圖像取得部件22(S11)、第二被攝體圖像取得部件23(S12)取得。而且,以后在使用第一被攝體圖像、第二被攝體圖像時(shí),只要沒(méi)有特別說(shuō)明,這些圖像的取得元的部件/步驟與S13中的取得元的部件/步驟相同,所以以后省略這些圖像的取得元的部件/步驟的說(shuō)明。S13的處理的細(xì)節(jié)在后面利用圖45進(jìn)行說(shuō)明。在S14中,修正圖像生成部件25利用背景修正量計(jì)算部件24得到的背景修正量對(duì)除了基準(zhǔn)圖像以外第一被攝體圖像、第二被攝體圖像進(jìn)行修正,差分圖像生成部件26生成修正圖像生成部件25修正的圖像和基準(zhǔn)圖像間的差分圖像,處理經(jīng)由p50進(jìn)入S15。S14的處理的細(xì)節(jié)在后面利用圖46進(jìn)行說(shuō)明。在S15中,被攝體區(qū)域提取部件27從差分圖像生成部件26(S14)得到的差分圖像中提取第一、第二被攝體的區(qū)域(以后稱(chēng)為第一被攝體區(qū)域、第二被攝體區(qū)域),重疊檢測(cè)部件28檢測(cè)被攝體之間的重疊,處理經(jīng)由p60進(jìn)到S16。S15的處理的細(xì)節(jié)在后面利用圖48進(jìn)行說(shuō)明。在S16中,重疊警告部件31、最佳快門(mén)通知部件32、自動(dòng)快門(mén)部件33中的多于或等于一個(gè)的部件根據(jù)重疊檢測(cè)部件28(S15)得到的與重疊有關(guān)的信息進(jìn)行各種處理,處理經(jīng)由p70進(jìn)到S17。S16的處理的細(xì)節(jié)在后面利用附圖50至附圖52進(jìn)行說(shuō)明。在S17中,重疊圖像生成部件29根據(jù)第一被攝體圖像、第二被攝體圖像、以及用修正圖像生成部件25(S14)對(duì)不是其中的基準(zhǔn)圖像的圖像進(jìn)行修正后的圖像、由被攝體區(qū)域提取部件27(S15)得到的第一、第二被攝體的區(qū)域、由重疊檢測(cè)部件28(S16)得到的與第一、第二被攝體的重疊有關(guān)的信息,生成將這兩張圖像重疊的“重疊圖像”,處理經(jīng)由p80進(jìn)到S18。S17的處理的細(xì)節(jié)在后面利用圖53進(jìn)行說(shuō)明。在S17中,重疊圖像顯示部件30在顯示器71等上顯示由重疊圖像生成部件29(S17)得到的重疊圖像,并結(jié)束處理。在這些從S11到S17的處理中,使用第一被攝體圖像、第二被攝體圖像,將第一被攝體和第二被攝體合成在1張圖像上,并且根據(jù)被攝體之間的重疊的狀況進(jìn)行各種處理。對(duì)于詳細(xì)的處理及其效果,在后面進(jìn)行詳細(xì)地說(shuō)明,首先用簡(jiǎn)單的例子來(lái)說(shuō)明處理的概要。圖37(a)是在S11中得到的第一被攝體圖像的例子。在背景之前,左側(cè)站立第一被攝體的人物(1)。為了容易理解,人物(1)的臉部分標(biāo)記“1”。而且,今后沒(méi)有特別說(shuō)明“右側(cè)”“左側(cè)”的情況下,指圖上的“右側(cè)”“左側(cè)”。也可以認(rèn)為該方向是從攝影者/照相機(jī)觀察的方向。圖38(a)是在S12中得到的第二被攝體圖像的例子。在背景之前,在右側(cè)站立第二被攝體的人物(2)。為了容易理解,人物(2)的臉部分標(biāo)記“2”。圖38(c)是求出圖37(a)的第一被攝體圖像和圖38(a)的第二被攝體圖像之間的背景修正量,將第一被攝體圖像作為基準(zhǔn)圖像,利用該背景修正量對(duì)背景圖像進(jìn)行修正后的圖像。被修正的圖像是用實(shí)線(xiàn)的框包圍的范圍,為了清楚被修正的方式,在圖38(c)上用虛線(xiàn)的框表示原來(lái)圖38(a)的第二被攝體圖像和圖37(a)的第一被攝體圖像的范圍。圖38(a)的背景是拍攝圖37(a)的背景的稍左上側(cè)的風(fēng)景而得到的。因此,在使圖38(a)的第二被攝體圖像與圖37(a)的第一被攝體圖像的背景重疊的修正中,需要選擇圖38(a)稍右下側(cè)的風(fēng)景。因此,修正圖38(c),使其成為比圖38(a)稍右下側(cè)的風(fēng)景。用虛線(xiàn)表示原來(lái)圖38(a)的范圍。因?yàn)楸葓D38(a)稍右下側(cè)的風(fēng)景不存在,所以在圖38(c)中從右端的虛線(xiàn)開(kāi)始向右邊的部分為空白,以及從下端的虛線(xiàn)開(kāi)銷(xiāo)向下的部分為空白。相反,切除圖38(a)的左上端的部分。這里,沒(méi)有擴(kuò)大縮小和旋轉(zhuǎn)等的修正,僅為簡(jiǎn)單的平行移動(dòng)的修正結(jié)果。即,在S13中得到的背景修正量在這里是實(shí)線(xiàn)的框和虛線(xiàn)的框的錯(cuò)位表示的平行移動(dòng)量。圖39(a)是在S14中,在圖37(a)的第一被攝體圖像和圖38(c)的被修正的第二被攝體圖像之間生成的差分圖像。在差分圖像中,差分量為0的部分(即與背景一致的部分)用黑色的區(qū)域表示。存在差分的部分是被攝體的區(qū)域內(nèi)和干擾部分,被攝體的區(qū)域部分成為背景圖像和被攝體部分的圖像重合后的巧妙的部分。(而且,通過(guò)修正,僅其中一個(gè)圖像不存在像素的區(qū)域(例如位于圖38(c)右下側(cè)的實(shí)線(xiàn)和虛線(xiàn)之間反L字形的區(qū)域)從差分對(duì)象中排除,差分量設(shè)為0)。雖然S16的與重疊有關(guān)的處理有各種處理方法,但是在本例中不檢測(cè)重疊,所以這里為了簡(jiǎn)化說(shuō)明,進(jìn)行特別的處理。圖40(a)是將相對(duì)于圖49(d)所示的第二被攝體區(qū)域的部分的圖像重疊(覆寫(xiě))到圖37(a)的第一被攝體圖像(基準(zhǔn)圖像)而生成的圖像。由此,分別在圖37(a)和圖38(a)中拍攝的被攝體不重疊地排列在相同的圖像上。即使關(guān)于重疊方法,也存在各種處理方法,所以在后面詳細(xì)說(shuō)明。圖40(a)的圖像在重疊圖像顯示部件30上表示為合成圖像。由此,產(chǎn)生可以將分別拍攝的被攝體合成如同時(shí)拍攝的圖像的效果。按照以上的說(shuō)明,對(duì)處理的概要進(jìn)行了大致的說(shuō)明,但由于沒(méi)有對(duì)在S15中被攝體區(qū)域之間存在重疊的情況的S16的處理例的概要進(jìn)行說(shuō)明,所以以下先簡(jiǎn)單地觸及。圖41是與圖38(a)不同的第二被攝體圖像的例子。與圖38(a)相比,第二被攝體相對(duì)于同一背景位于稍左側(cè)。而且第一被攝體圖像使用與圖37(a)相同的圖像。圖42(c)表示第一被攝體區(qū)域和第二被攝體區(qū)域匹配的區(qū)域。圖中的區(qū)域202由第一被攝體區(qū)域和第二被攝體區(qū)域構(gòu)成。這里,由于第一、第二被攝體的各位置相對(duì)于相同背景的關(guān)系,第一被攝體區(qū)域和第二被攝體區(qū)域中產(chǎn)生重疊,所以將區(qū)域202顯示為被結(jié)合的區(qū)域。圖43表示在S16中存在重疊的情況下,在S17中生成的重疊圖像的一例。這時(shí),區(qū)域202作為結(jié)合了第一被攝體區(qū)域和第二被攝體區(qū)域的一個(gè)區(qū)域被處理,所以統(tǒng)一半透明顯示。而且,在重疊圖像上覆寫(xiě)顯示表示第一被攝體和第二被攝體重疊的情況的消息。通過(guò)顯示該重疊圖像(含消息),可以產(chǎn)生用戶(hù)或者被攝體容易了解第一被攝體和第二被攝體重疊的情況的效果。通過(guò)以上的說(shuō)明,對(duì)S15中被攝體區(qū)域之間存在重疊的情況的S16的處理例的概要進(jìn)行了說(shuō)明。而且,如果在典型的利用場(chǎng)合例中考慮該情況,則首先如圖37(a)那樣用照相機(jī)(圖像合成裝置)拍攝、記錄第一被攝體。接著在相同背景下拍攝圖38(a)那樣的第二被攝體。而且,通過(guò)交互進(jìn)行第一被攝體和第二被攝體的拍攝,所以即使沒(méi)有第三者也可以拍攝第一被攝體和第二被攝體。為了在相同背景下拍攝,雖然照相機(jī)不動(dòng)較好,但是因?yàn)榕c背景匹配進(jìn)行修正,所以不用三角架等固定,用手在大致相同的位置朝向相同的方向進(jìn)行拍攝也可以。而且,被攝體的位置關(guān)系不僅是圖37(a)、圖38(a)那樣的左右關(guān)系,任意的位置關(guān)系都可以。然后,在拍攝了二個(gè)圖像以后,進(jìn)行從S13到S17的處理,進(jìn)行圖40(a)和圖43那樣的顯示(或者在后說(shuō)明的警告/通知等)。如果在存在被攝體重疊等的顯示或通知的情況下,也可以再次重復(fù)從S11到S17的處理。即拍攝第一被攝體圖像、第二被攝體區(qū)域,對(duì)重疊圖像進(jìn)行生成、顯示等。在滿(mǎn)足被顯示的處理結(jié)果之前,進(jìn)行多少次重復(fù)都可以。但是,在第二被攝體移動(dòng)位置等情況下,也可以不必重新拍攝第一被攝體圖像,有時(shí)只要重新取得第二被攝體就可以。這時(shí),只要重復(fù)S12至S17就可以。這時(shí),如果自動(dòng)地重復(fù)從S12的第二被攝體圖像的取得到S17的顯示,即如果如不按壓快門(mén)按鈕而拍攝活動(dòng)圖像那樣,連續(xù)地取得第二被攝體圖像,并包括處理、顯示而重復(fù)進(jìn)行,則可以追蹤照相機(jī)和第二被攝體的移動(dòng)等,從而實(shí)時(shí)地確認(rèn)處理結(jié)果。因此,可以實(shí)時(shí)地了解第二被攝體的移動(dòng)位置是否合適(是否重疊),產(chǎn)生容易進(jìn)行用于得到?jīng)]有重疊的合成結(jié)果的第二被攝體的拍攝的優(yōu)點(diǎn)。而且,為了啟動(dòng)該重復(fù)處理,需要從菜單等選擇處理開(kāi)始,進(jìn)入專(zhuān)用模式??梢酝ㄟ^(guò)到達(dá)合適的移動(dòng)位置后按壓快門(mén)按鈕,決定第二被攝體圖像(存儲(chǔ)),使該重復(fù)處理/專(zhuān)用模式結(jié)束(雖然結(jié)束,但可以繼續(xù)處理,直到得到最后的合成結(jié)果的S17)。而且,在第一被攝體圖像不好的情況下,例如,在第一被攝體位于背景的正中,無(wú)論怎樣配置都會(huì)與第二被攝體重疊,或者如果不使之重疊,則第二被攝體從重疊圖像移到取景框外的情況下,則可以重新進(jìn)行S11的第一被攝體圖像的取得。以下,對(duì)以上說(shuō)明的處理的細(xì)節(jié)進(jìn)行說(shuō)明。圖44是說(shuō)明圖36的S12的處理,即取得第二被攝體圖像的處理的一個(gè)方法的流程圖。在經(jīng)由p20的S12-1中,第二被攝體圖像取得部件23取得第二被攝體圖像,處理進(jìn)入S12-2。這里的處理與圖36的S11的第一被攝體圖像的取得和取得方法本身相同。在S12-2中,同一部件23判斷是否有來(lái)自自動(dòng)快門(mén)部件33的記錄圖像的指示,如果有指示則進(jìn)入S12-3,如果沒(méi)有指示則處理跳到P30。在S12-3中,同一部件23將在S12-1中取得的第二被攝體圖像存儲(chǔ)到主存儲(chǔ)器74、外部存儲(chǔ)器75等,處理跳到P30。在以上的S12-1到S12-3的處理中,進(jìn)行圖36的S12的處理。而且,除了自動(dòng)快門(mén)部件33以外,由攝影者手動(dòng)按壓快門(mén),或者在用定時(shí)器啟動(dòng)快門(mén)等情況下,也可以存儲(chǔ)拍攝圖像,但這些處理包含在S11、S12-1的處理中。圖45是說(shuō)明圖36的S13的處理,即對(duì)背景修正量進(jìn)行計(jì)算的處理的一個(gè)方法的流程圖。雖然考慮各種計(jì)算修正量的方法,但是這里對(duì)使用塊匹配的簡(jiǎn)單方法進(jìn)行說(shuō)明。在經(jīng)由p30的S13-1中,背景修正量計(jì)算部件24將背景圖像分割為塊區(qū)域。圖37(b)是說(shuō)明將圖37(a)的第一被攝體圖像分割為塊區(qū)域的狀態(tài)的說(shuō)明圖。用虛線(xiàn)區(qū)分的矩形是各塊區(qū)域。將左上的塊設(shè)為“B(1,1)”,將其右的設(shè)為“B(1,2)”,將其下的設(shè)為“B(2,1)”來(lái)表現(xiàn)。在圖37(b)中,根據(jù)空間的情況,例如在塊B(1,1)中,塊的左上記為“11”。在S13-2中,同一部件24求出第一被攝體圖像的塊在第二被攝體圖像上匹配的位置,處理進(jìn)入S13-3。所謂“(塊)匹配”是在這時(shí),在第二被攝體圖像上查找與第一被攝體圖像的各塊的塊內(nèi)圖像最相似的塊區(qū)域的處理。而且,關(guān)于匹配的細(xì)節(jié)與實(shí)施方式1中說(shuō)明的相同,所以省略其說(shuō)明。這里,定義稱(chēng)為“參照?qǐng)D像”的圖像為第一被攝體圖像,稱(chēng)為“檢索圖像”,查找相似塊的對(duì)方的圖像為第二被攝體圖像。而且,由于背景修正量為相對(duì)的量,所以與上述相反,將參照?qǐng)D像和檢索圖像作為第二被攝體圖像和第一被攝體圖像也可以。接著,在S13-3中,同一部件24從S13-2中求出的匹配塊中僅抽取與背景部分相當(dāng)?shù)臋z索塊,處理進(jìn)入S13-4。在S13-2中求出的匹配塊,因?yàn)閮H選擇差分最少的檢索塊,所以不能保證為相同的圖像,偶爾也有僅像某種模樣等的情況。而且,因?yàn)樽畛鯙榈谝槐粩z體,所以參照塊本身不是背景部分,或者參照塊是背景部分,但是由于第二被攝體的原因,有時(shí)在第二被攝體圖像上不存在與參照塊相當(dāng)?shù)膱D像部分,所以這時(shí)在適當(dāng)?shù)奈恢迷O(shè)定匹配塊。因此,需要從各匹配塊中去除被判斷為不是與參照塊相同的圖像部分的匹配塊。因?yàn)槭S嗟钠ヅ鋲K是判斷為與參照塊相同的圖像部分的匹配塊,所以結(jié)果是僅剩余除去了第一和第二被攝體后的背景部分。雖然考慮各種匹配塊的選擇方法,但是作為最簡(jiǎn)單的方法,為用規(guī)定閾值判斷相似度S(xs,ys)。即,如果各匹配塊S(xs,ys)超過(guò)該閾值,則該匹配作為不正確被去除的方法。S(xs,ys)被塊的大小影響,所以希望考慮塊的大小后決定閾值。圖38(b)是從圖38(a)的第二被攝體圖像的S13-2的匹配結(jié)果中,去除了不正確的匹配塊后的結(jié)果。在被判斷為正確的匹配塊中,分配與對(duì)應(yīng)的參照塊相同的號(hào)碼。由此可知,僅剩余不包含被攝體部分,或者基本不包含的背景部分的匹配塊。而且,可以判斷剩余的匹配塊是與第一被攝體圖像和第二被攝體圖像共用并寫(xiě)入的相同的背景部分。如果第一被攝體圖像和第二被攝體圖像完全沒(méi)有共用的背景部分,則S13-3的處理的結(jié)果是剩余的匹配塊為0。在S13-4中,同一部件24從S13-3中得到的背景部分匹配塊中求出第二被攝體圖像的背景修正量,處理跳到p40。作為背景修正量,例如求取旋轉(zhuǎn)量θ、擴(kuò)大縮小量R、和/或平行移動(dòng)量,以及其計(jì)算方法的說(shuō)明等已經(jīng)在實(shí)施方式1中說(shuō)明,所以這里省略說(shuō)明(在S13-3中剩余的匹配塊只有一個(gè)時(shí),或者剩余的匹配塊一個(gè)都沒(méi)有時(shí)的對(duì)應(yīng)也相同)。而且,將檢索圖像中的任意的點(diǎn)(x’,y’)變換為被修正的點(diǎn)的變換式等(變換函數(shù)Fsr或者逆變換函數(shù)Frs等)也相同,所以這里省略說(shuō)明。在圖37(a)、圖38(a)的例子中,沒(méi)有旋轉(zhuǎn)和擴(kuò)大縮小,僅為簡(jiǎn)單的平行移動(dòng),但細(xì)節(jié)在后以圖38(c)進(jìn)行說(shuō)明。以上的S13-1到S13-4的處理中,進(jìn)行了圖36的S13的背景修正量的計(jì)算處理。圖46是說(shuō)明圖36的S14的處理,即生成第二被攝體圖像的修正圖像,生成與第一被攝體圖像的差分圖像的處理的一個(gè)方法的流程圖。在經(jīng)由p40的S14-1中,修正圖像生成部件25利用在背景修正量計(jì)算部件24(S13)中得到的修正量生成修正后的圖像,使得第二被攝體圖像的背景部分與第一被攝體圖像的背景部分重疊,處理進(jìn)入S14-2。而且,將這里生成的被修正的第二被攝體圖像稱(chēng)為“修正第二被攝體圖像”(參照?qǐng)D38(c))。在修正中,也可以使用變換函數(shù)Fsr或者逆變換函數(shù)Frs。一般來(lái)說(shuō),為了生成漂亮的變換圖像,求出與變換圖像(這里為修正第二被攝體圖像)的像素位置對(duì)應(yīng)的原圖像(這里為第二被攝體圖像)的像素位置,從該像素位置求出變換圖像的像素值。這時(shí),使用的變換函數(shù)變?yōu)镕sr。而且,一般來(lái)說(shuō),求出的原圖像的像素位置不為整數(shù)值,所以保持原樣,求出的原圖像的像素位置的像素值不能被求出。因此,通常進(jìn)行某些插補(bǔ)。例如,作為最一般的方法,有根據(jù)求出的原圖像的像素位置周?chē)恼麛?shù)值的像素位置的四個(gè)像素用一次插補(bǔ)求出的方法。關(guān)于一次插補(bǔ)法,記載在一般的圖像處理的書(shū)等(例如,森北出版安居院猛,中嶼正之共著“圖像信息處理”的P54頁(yè))中,這里省略詳細(xì)的說(shuō)明。圖38(c)為根據(jù)圖38(a)的第二被攝體圖像和圖37(a)的第一被攝體圖像生成的第二被攝體圖像與第一被攝體圖像的背景部分重疊的修正第二被攝體圖像的例子。在該例子中,修正僅為平行移動(dòng)。為了明白修正的樣子,用虛線(xiàn)表示圖38(a)的背景圖像的范圍??蚣苷w比圖38(a)的第二被攝體圖像稍向右下移動(dòng)。修正的結(jié)果,產(chǎn)生對(duì)應(yīng)的第二被攝體圖像不存在的部分。例如,圖38(c)的右端的虛線(xiàn)和實(shí)線(xiàn)之間的部分是在圖38(a)的第二被攝體圖像中不存在的部分,所以去除。這里可知表示下方的道路的水平線(xiàn)在未到達(dá)右端的中間切斷。該部分利用在S14-2中說(shuō)明的屏蔽圖像排除,所以原樣作為合適的像素值保持也沒(méi)問(wèn)題。而且,圖47(a)是在修正中需要旋轉(zhuǎn)時(shí)的第二被攝體圖像的例子。第一被攝體圖像與圖37(a)相同。畫(huà)面整體與圖38(a)相比稍向左旋轉(zhuǎn)。圖47(b)是在圖47(a)的第二被攝體圖像和圖37(a)的第一被攝體圖像中進(jìn)行了塊匹配的結(jié)果。即使塊存在旋轉(zhuǎn)等,只要旋轉(zhuǎn)量和塊的大小不是那么大,則塊內(nèi)的圖像變化少,所以可以在某種程度上追隨旋轉(zhuǎn)進(jìn)行正確地匹配。圖47(c)是根據(jù)圖47(b)的塊匹配結(jié)果計(jì)算背景修正量而修正后的第二被攝體圖像。可知旋轉(zhuǎn)被修正,使得圖37(a)的第一被攝體圖像和背景部分程度。用虛線(xiàn)表示圖47(a)的圖像框以便了解修正的樣子。在S14-2中,修正圖像生成部件25生成修正第二被攝體圖像的屏蔽圖像,處理進(jìn)入S14-3。屏蔽圖像是在生成修正圖像時(shí),用先前說(shuō)明的式求出與修正圖像上的各像素對(duì)應(yīng)的原始圖像上的像素位置,但是以該像素位置是否收斂在原始圖像的范圍內(nèi)進(jìn)行判斷,如果收斂,則作為屏蔽部分,將修正圖像上的對(duì)應(yīng)的像素的像素值設(shè)為例如0(黑),如果不收斂,則可以設(shè)為例如255(白)。雖然屏蔽部分的像素值不限于0,255,可以自由決定,但是以下用0(黑),255(白)進(jìn)行說(shuō)明。圖38(d)是圖38(c)的屏蔽圖像的例子。實(shí)線(xiàn)的框架中被涂黑的范圍是屏蔽部分。該屏蔽部分表示在被修正的圖像中原始圖像(修正前的圖像)具有像素的范圍。因此,在圖38(d)中,對(duì)應(yīng)的第二被攝體圖像不存在的右下端部分不成為屏蔽部分,成為白色。在S14-3中,差分圖像生成部件26利用第一被攝體圖像和從修正圖像生成部件25(S14-1)得到的修正第二被攝體圖像及其屏蔽圖像,生成第一被攝體圖像和修正第二被攝體圖像的差分圖像,處理進(jìn)入S14-4。為了生成差分圖像,觀察某點(diǎn)(x,y)的屏蔽圖像上的點(diǎn)的像素值是否為0。如果是0(黑),則修正第二被攝體圖像上被修正的像素應(yīng)該存在,所以差分圖像上的點(diǎn)(x,y)的像素值Pd(x,y)根據(jù)下式,成為第一被攝體圖像上的像素值P1(x,y)和第二被攝體背景圖像上的像素值Pf2(x,y)的差的絕對(duì)值。Pd(x,y)=|P1(x,y)-Pf2(x,y)|如果某點(diǎn)(x,y)的屏蔽圖像上的點(diǎn)的像素值不為0(黑),則成為下式Pd(x,y)=0可以對(duì)點(diǎn)(x,y)從差分圖像的左上到右下的所有像素重復(fù)這些處理。圖39(a)是從圖37(a)的第一被攝體圖像和圖38(c)的修正第二被攝體圖像、圖38(d)的屏蔽圖像生成的差分圖像的例子。人物(1)和人物(2)的區(qū)域以外的位置背景一致,或者在屏蔽范圍以外,從而差分為0,主要在人物(1)和人物(2)的區(qū)域內(nèi),成為人物(1)的圖像和背景的圖像、人物(2)的圖像和背景的圖像混合的圖像。通常,由于在S13中的修正量的計(jì)算誤差,或者修正圖像生成的插補(bǔ)處理等的誤差,背景部分的圖像自身的拍攝時(shí)間的差造成的微妙的變化等,在人物(1)的區(qū)域和人物(2)的區(qū)域以外也產(chǎn)生小的差分部分。通常為數(shù)像素左右的大小,差也不太大的情況較多。在圖39(a),人物(1)的區(qū)域和人物(2)的區(qū)域的周邊也多少產(chǎn)生白色的部分。另一方面,圖47(b)時(shí)的屏蔽圖像如圖47(d)所示。而且,即使在擴(kuò)大縮小和旋轉(zhuǎn)的修正量存在的情況下,如果在S14-1、S14-2中進(jìn)行修正和屏蔽圖像的生成,則由于后面的處理作為順序沒(méi)有變化,所以,在以后的說(shuō)明中,第二被攝體圖像不使用圖47(a),而使用圖38(a)。在以上的S14-1至S14-3的處理中,進(jìn)行圖36的S14的差分圖像生成的處理。圖48是說(shuō)明圖36的S15的處理,即提取被攝體區(qū)域的處理的一個(gè)方法的流程圖。在經(jīng)由p50的S15-1中,被攝體區(qū)域提取部件27根據(jù)從差分圖像生成部件26(S15)得到的差分圖像,生成“標(biāo)示圖像”(“標(biāo)示圖像”的含義已在實(shí)施方式1中說(shuō)明),處理進(jìn)入S15-2。首先,作為準(zhǔn)備,根據(jù)差分圖像生成二值圖像。雖然也考慮各種二值圖像的生成方法,但是,例如將差分圖像中的各像素值和規(guī)定的閾值比較,如果比閾值大則為黑,如果小于或等于閾值則為白等處理就可以。在差分圖像由R,G,B的像素值構(gòu)成的情況下,將R,G,B的像素值相加后的值與閾值比較就可以。圖39(b)的根據(jù)圖39(a)的差分圖像生成的二值圖像的例子。黑色的區(qū)域從區(qū)域110到116,存在七個(gè),除了大的人形區(qū)域112、113以外都是小區(qū)域。接著,根據(jù)生成的二值圖像生成標(biāo)示圖像。二值圖像和標(biāo)示圖像是二值還是多值并沒(méi)有差別,所以用圖39(b)說(shuō)明標(biāo)示圖像例。圖39(b)的區(qū)域110到116的號(hào)碼之后附帶用括號(hào)括住的號(hào)碼,如“110(1)”等,但這是各區(qū)域的標(biāo)示值。除此之外的區(qū)域被分配標(biāo)示值0。而且,標(biāo)示圖像圖39(b)由于在紙面上難以圖示多值圖像,所以標(biāo)示為二值圖像,但是,由于實(shí)際上標(biāo)示值產(chǎn)生多值圖像,所以雖然不需要顯示,但在實(shí)際上作為圖像顯示的情況下,執(zhí)行與圖39(b)不同的觀察方法。在S15-2中,被攝體區(qū)域提取部件27除去從S15-1得到的標(biāo)示圖像中的“干擾”區(qū)域,處理進(jìn)入S15-3?!案蓴_”一般指目的數(shù)據(jù)以外的部分,這里指人形的區(qū)域以外的區(qū)域。為了除去干擾,有各種方法,但是作為簡(jiǎn)單的方法,例如有除去某閾值以下面積的標(biāo)示區(qū)域的方法。為此,首先求出各標(biāo)示區(qū)域的面積。為了求出面積,只要掃描所有像素,對(duì)存在多少具有某特定的標(biāo)示值的像素進(jìn)行計(jì)數(shù)就可以。在對(duì)所有標(biāo)示值求出面積(像素?cái)?shù))以后,在其中除去規(guī)定閾值以下的面積(像素?cái)?shù))的標(biāo)示區(qū)域。具體來(lái)說(shuō),除去處理是將該標(biāo)示區(qū)域的標(biāo)示值設(shè)為0,或者做成新的標(biāo)示圖像,在其中復(fù)制干擾之外的標(biāo)示區(qū)域也可以。圖39(c)是從圖39(b)的標(biāo)示圖像中除去了干擾之后的結(jié)果。除了人形區(qū)域112、113以外,都被作為干擾除去。而且,如果難以實(shí)現(xiàn)除去被攝體以外的標(biāo)示區(qū)域的干擾除去處理的完全自動(dòng)化,則可以考慮使用書(shū)寫(xiě)板或者鼠標(biāo)等輸入部件,由用戶(hù)指定哪個(gè)區(qū)域?yàn)楸粩z體區(qū)域的方法。指定方法可考慮以下方法連被攝體區(qū)域的輪廓都指定而得到的方法,以及輪廓使用標(biāo)示圖像的各標(biāo)示區(qū)域的輪廓,指定哪個(gè)標(biāo)示區(qū)域是被攝體區(qū)域而得到的方法。而且,圖39(b)中偶爾一個(gè)人的區(qū)域很好地成為一個(gè)標(biāo)示區(qū)域,但是通過(guò)圖像,有時(shí)即使是一個(gè)人的被攝體,也被分為多個(gè)標(biāo)示區(qū)域。例如,在被攝體區(qū)域中的正中附近的像素為與背景相似的顏色和亮度時(shí),由于在差分圖像中該部分的像素值小,所以有時(shí)被攝體區(qū)域的正中周?chē)蛔R(shí)別為背景,被攝體區(qū)域被分?jǐn)酁樯舷禄蜃笥也⒈惶崛 _@時(shí),有可能出現(xiàn)后面的被攝體的重疊檢測(cè)和合成處理等不能很好的處理的情況。因此,如已有的實(shí)施方式1已說(shuō)明的那樣,也有使標(biāo)示圖像的標(biāo)示區(qū)域膨脹,將距離近的標(biāo)示區(qū)域作為相同標(biāo)示區(qū)域進(jìn)行統(tǒng)一處理的方法。進(jìn)而還考慮統(tǒng)一利用提取區(qū)域的方法之一的“曲折移動(dòng)”的方法。而且,即使不統(tǒng)一地使用距離近的標(biāo)示區(qū)域,為了用于減少遺漏第一、第二被攝體區(qū)域之間有重疊的情況的危險(xiǎn)性,也有使提取出的被攝體區(qū)域進(jìn)行一定量的膨脹的方法。而且,這里以不特別進(jìn)行膨脹和統(tǒng)一的處理例來(lái)進(jìn)行說(shuō)明。在S15-3中,重疊檢測(cè)部件28根據(jù)S15-2得到的被除去干擾的標(biāo)示圖像來(lái)檢測(cè)被攝體的區(qū)域中是否存在重疊,在沒(méi)有檢測(cè)出重疊的情況下進(jìn)入S15-4,在檢測(cè)出重疊的情況下進(jìn)入S15-5。重疊的檢測(cè)方法考慮各種方法,但是這里作為簡(jiǎn)單的求取方法,對(duì)使用希望拍攝/合成的被攝體的數(shù)量、被除去干擾的標(biāo)示圖像中的被攝體的區(qū)域數(shù)的方法進(jìn)行說(shuō)明。首先,通過(guò)預(yù)先的程序或者外部存儲(chǔ)、用戶(hù)輸入等指定要拍攝/合成的被攝體的數(shù)量。例如,在照相機(jī)中有“2集團(tuán)拍攝模式”(被攝體數(shù)量2)、“3集團(tuán)拍攝模式”(被攝體數(shù)量3)等的模式設(shè)定,用戶(hù)設(shè)定該模式。而且,這里的“被攝體的數(shù)量”是作為區(qū)域成為一塊的人物等的數(shù)量。例如,作為第一被攝體、第二被攝體分別為一個(gè)人,則被攝體數(shù)量為2。作為第一被攝體為一個(gè)人,如果第二被攝體為兩個(gè)人時(shí),在這兩個(gè)人挨在一起拍攝的情況下,由于成為一塊區(qū)域,所以將第二被攝體作為1,被攝體的數(shù)量合計(jì)為2,但是在兩個(gè)人隔開(kāi)一定距離的情況下,不成為一塊區(qū)域,所以將第二被攝體作為2,被攝體的數(shù)量合計(jì)為3。被攝體的區(qū)域數(shù)量也可以對(duì)除去了干擾的標(biāo)示圖像中不同標(biāo)示值的區(qū)域數(shù)進(jìn)行計(jì)數(shù)(除去標(biāo)示值為0的部分)。因此,重疊檢測(cè)部件28觀察得到的要拍攝/合成的被攝體的數(shù)量和被除去干擾的標(biāo)示圖像中的被攝體的區(qū)域數(shù)量是否一致,如果一致則判斷被攝體之間沒(méi)有重疊,如果不一致,則判斷被攝體之間存在重疊。該重疊檢測(cè)部件28的判斷的原理如下所述。為了使說(shuō)明簡(jiǎn)單,這里將要拍攝/合成的被攝體的數(shù)量設(shè)為2。如果被攝體之間沒(méi)有重疊,則第一被攝體的區(qū)域和第二被攝體的區(qū)域應(yīng)該分離。因此,在被攝體之間沒(méi)有重疊時(shí),除去干擾以后的被攝體的區(qū)域的數(shù)量應(yīng)該為2。如果被攝體之間存在重疊,則因?yàn)榈谝槐粩z體的區(qū)域和第二被攝體的區(qū)域在重疊部分被統(tǒng)一,所以應(yīng)該不分離。因此,在被攝體之間存在重疊時(shí),被除去干擾以后的被攝體的區(qū)域的數(shù)量應(yīng)該為1。要拍攝/合成的被攝體的數(shù)量為3也用同樣的考慮方法,如果在被攝體之間沒(méi)有重疊時(shí),由于各個(gè)區(qū)域被分離,所以除去干擾以后的被攝體的區(qū)域的數(shù)量應(yīng)該為3。如果在被攝體之間存在重疊時(shí),則三個(gè)被攝體的區(qū)域至少其中一組在被重疊的部分被統(tǒng)一,所以應(yīng)該不分離。因此,在被攝體之間存在重疊時(shí),被除去干擾以后的被攝體的區(qū)域的數(shù)量應(yīng)該為1或者2。在圖37(a)、38(a)中,由于分別成為被攝體的人物是一個(gè)人,所以要拍攝/合成的被攝體的數(shù)量被設(shè)定為2。在圖39(c)中,區(qū)域的數(shù)量,人形的區(qū)域112、113為兩個(gè),所以得到的要拍攝/合成的被攝體的數(shù)量和被除去干擾后的標(biāo)示圖像中的被攝體的區(qū)域數(shù)量一致。因此,這時(shí)重疊檢測(cè)部件28判斷被攝體之間沒(méi)有重疊。作為存在重疊的例子,考慮使用第二被攝體圖像的圖41的情況。第一被攝體圖像原樣使用圖37(a)。根據(jù)它們生成的差分圖像為圖42(a)。在圖42(a)中,被攝體之間重疊,重疊的腕的部分成為第一被攝體和第二被攝體的圖像混合后的圖像,此外的被攝體的部分成為第一被攝體和背景部分、第二被攝體和背景部分混合的圖像。圖42(a)的標(biāo)示圖像為圖42(b),從圖42(b)實(shí)施了干擾除去的圖為圖42(c)。在圖42(c)中,由于第一被攝體和第二被攝體的區(qū)域在腕的部分結(jié)合,所以?xún)H剩余一塊的區(qū)域202。這時(shí),由于被除去干擾的標(biāo)示圖像中的被攝體的區(qū)域數(shù)量為1,所以要拍攝/合成的被攝體的數(shù)量不一致,判斷存在重疊。而且,作為檢測(cè)重疊的方法,還有正確地求出第一被攝體和第二被攝體的輪廓,用該輪廓之間是否存在重疊來(lái)判斷的方法。在正確地求出輪廓以后,還可以進(jìn)行重疊的檢測(cè),進(jìn)而還可以進(jìn)行使用了重疊區(qū)域的顯示、重疊回避等各種處理。但是,一般來(lái)說(shuō),僅通過(guò)圖像處理,難以完全正確地對(duì)被攝體的區(qū)域進(jìn)行提取,一般需要人的知識(shí)和人工智能的高度的處理。雖然也有作為提取區(qū)域的方法之一的“曲折移動(dòng)(snake)”,但沒(méi)有完美的方法。而且,除了第一被攝體圖像和第二被攝體圖像,如果利用拍攝與各被攝體圖像至少共用一部分的背景圖像而不拍攝被攝體的背景圖像,則不管有無(wú)重疊,都可以提取被攝體的區(qū)域。與此相反,僅根據(jù)第一被攝體圖像和第二被攝體圖像,難以正確的提取可能存在重疊的被攝體的輪廓。因此,這里用上述的簡(jiǎn)單方法僅檢測(cè)有無(wú)重疊。在S15-4中,被攝體區(qū)域提取部件27對(duì)于被除去干擾的標(biāo)示圖像中的被攝體的區(qū)域,判斷哪一個(gè)是第一被攝體區(qū)域,哪一個(gè)是修正第二被攝體區(qū)域,跳到p60。在利用上述的背景圖像的方法中,由于使用背景圖像和第一被攝體圖像的差分圖像、背景圖像和第二被攝體圖像的差分圖像,所以可以分別提取被攝體區(qū)域。被提取的被攝體區(qū)域分別成為第一被攝體區(qū)域和第二被攝體區(qū)域。即可以獨(dú)立提取第一被攝體區(qū)域和第二被攝體區(qū)域。但是,在本發(fā)明中不使用背景圖像,不能根據(jù)第一被攝體圖像和第二被攝體圖像的差分圖像獨(dú)立提取第一被攝體的區(qū)域和第二被攝體區(qū)域。即根據(jù)圖39(c)那樣的被除去干擾的標(biāo)示圖像,僅得到兩個(gè)被攝體區(qū)域112、113,被攝體區(qū)域提取部件27不能僅根據(jù)該情況判斷在兩個(gè)區(qū)域112、113中,哪個(gè)是第一被攝體區(qū)域,哪個(gè)是第二被攝體區(qū)域。所謂不能判斷哪個(gè)是第一被攝體區(qū)域,哪個(gè)是第二被攝體區(qū)域,是指如果改變觀察的方法,則被攝體區(qū)域提取部件27不能判斷是第一、第二被攝體的圖像還是背景部分的圖像。例如,從第一被攝體圖像(圖37(a))和第二被攝體圖像(圖38(a))分別提取相當(dāng)于圖39(c)的區(qū)域112、113的范圍后的圖是圖40(a)~(d)。即,圖49(a)是第一被攝體圖像的區(qū)域112的范圍,圖49(b)是第二被攝體圖像的區(qū)域112的范圍,圖49(c)是第一被攝體圖像的區(qū)域113的范圍,圖49(d)是第二被攝體圖像的區(qū)域113的范圍。由于前提是除了背景部分以外,在第一被攝體圖像中僅拍攝第一被攝體,在第二被攝體圖像中僅拍攝第二被攝體,所以實(shí)際上“圖49(a)是第一被攝體的圖像,圖49(d)是第二被攝體的圖像”,或者“圖49(b)是第一被攝體的圖像,圖49(c)是第二被攝體的圖像”的哪一個(gè)都正確。因此,為了區(qū)別第一被攝體區(qū)域和第二被攝體區(qū)域,最好識(shí)別圖49(a)、(d)和圖49(b)、(c)的哪一個(gè)是被攝體范圍的圖像。為了識(shí)別哪一個(gè)是被攝體范圍的圖像有各種方法,例如有如果預(yù)先知道被攝體和背景的特征,則利用該特征進(jìn)行區(qū)別的方法。例如,如果知道被攝體是人物,則在被攝體范圍的圖像中包含膚色較多的可能性高。因此,將包含膚色較多的一個(gè)作為被攝體范圍的圖像就可以。在識(shí)別顏色的方法中也有各種方法,例如有根據(jù)36的R、G、B的像素值求出色調(diào)H、色度S、亮度I,主要使用色調(diào)H進(jìn)行識(shí)別的方法。在求出色調(diào)H、色度S、亮度I的方法中有各種方式,記載在一般的圖像處理的書(shū)中(例如東京大學(xué)出版會(huì),1991年發(fā)行“圖像解析手冊(cè)”P(pán)485~491)中,所以這里省略細(xì)節(jié),例如在該書(shū)中的“HSI6角錐彩色模式的變換”方法中,色調(diào)H具有從0到2π的值域。具體來(lái)說(shuō),被攝體區(qū)域提取部件27決定成為標(biāo)準(zhǔn)的膚色的H的范圍。接著,相同部件27求出圖49(a)~(d)的區(qū)域的各像素的H,如果進(jìn)入標(biāo)準(zhǔn)膚色的H的范圍,則作為膚色計(jì)數(shù)。接著,相同部件27比較圖49(a)、(d)的膚色的計(jì)數(shù)值和圖49(b)、(c)的膚色的計(jì)數(shù)值哪個(gè)多,將多的一個(gè)作為被攝體范圍。作為使用特征量來(lái)判斷哪個(gè)是被攝體范圍的圖像的方法,除了使用膚色以外,例如還有通過(guò)是否與周?chē)谋尘安糠窒嗨苼?lái)識(shí)別的方法。這時(shí),首先被攝體區(qū)域提取部件27在第一被攝體圖像、第二被攝體圖像中求出被攝體區(qū)域中的特征量(后述)。接著,相同部件27求出被攝體區(qū)域周?chē)膮^(qū)域(例如周?chē)?0點(diǎn)等)的特征量。被攝體區(qū)域周?chē)潜尘安糠?,進(jìn)行修正使得背景部分重疊,所以有時(shí)這僅用一方就可以。然后,相同部件27將具有與背景部分的特征量接近的特征量的一方判斷為背景部分的圖像,將不接近的一方判斷為被攝體區(qū)域的圖像就可以。作為上述的特征量,除了上述那樣的R、G、B的像素值和色調(diào)H、色度S、亮度I,還可以利用結(jié)構(gòu)(texture)等??紤]各種將結(jié)構(gòu)作為特征量求出的方法,例如有亮度I的直方圖(histogram)。這是對(duì)某區(qū)域中的像素,取全體的和被歸一為1.0的亮度I的直方圖P(i),(i=0,1,2、…、n-1),被攝體區(qū)域提取部件27根據(jù)以下的式子求出平均μ、分散(2)、失真度Ts,峭度Tk。(X¢Y)是X的Y次方的意思。μ=Σi=0n-1i×P(i)]]>將以上的四個(gè)值作為特征量使用。作為特征量,此外還有使用同時(shí)關(guān)聯(lián)矩陣和差分統(tǒng)計(jì)量、掃描寬度矩陣、功率譜、這些的第二次統(tǒng)計(jì)量、高次統(tǒng)計(jì)量等的方法,但由于記載在一般的圖像處理書(shū)等(例如,東京大學(xué)出版會(huì),1991年發(fā)行“圖像解析手冊(cè)”P(pán)517~538)中,所以這里省略細(xì)節(jié)。由此,在圖49的情況下,圖49(a)、(d)被被攝體區(qū)域提取部件27判斷為被攝體范圍的圖像。這樣,區(qū)域112成為第一被攝體區(qū)域,區(qū)域113成為第二被攝體區(qū)域。而且,這里的處理由于是在S15-3中被攝體之間沒(méi)有重疊的情況下執(zhí)行的處理,所以應(yīng)該是圖39(c)那樣,成為第一被攝體和第二被攝體完全分離的狀態(tài)。不應(yīng)是圖42(c)那樣,成為第一被攝體和第二被攝體統(tǒng)一的狀態(tài)。在S15-5中,由于在S15-3中要拍攝/合成的被攝體的數(shù)量與被除去干擾的標(biāo)示圖像中的被攝體的區(qū)域數(shù)量一致,所以被攝體區(qū)域提取部件27將被除去干擾的標(biāo)示圖像中的被攝體的區(qū)域確定為統(tǒng)一了第一被攝體區(qū)域和第二被攝體區(qū)域的區(qū)域(以后稱(chēng)為“被攝體統(tǒng)一區(qū)域”,處理跳到p60。這時(shí),被攝體區(qū)域提取部件27不可能獨(dú)立提取第一被攝體區(qū)域和第二被攝體區(qū)域,而作為被統(tǒng)一的區(qū)域處理。而且,如上所述,在正確求出第一被攝體和第二被攝體的輪廓的情況下,不進(jìn)行S15-3和S15-5的處理,進(jìn)行S15-4的處理就可以。在以上S15-1到S15-5的處理中,進(jìn)行圖36的S15的被攝體區(qū)域提取處理。圖50是對(duì)圖36的S16的處理,即與重疊有關(guān)的處理的一個(gè)方法進(jìn)行說(shuō)明的流程圖。關(guān)于與重疊有關(guān)的其它的處理方法,在后面用圖51、23進(jìn)行說(shuō)明。在經(jīng)由p60的S16-1中,重疊警告部件31根據(jù)從重疊檢測(cè)部件28(S15)得到的是否存在重疊的信息,在存在重疊的情況下進(jìn)到S16A-2,在沒(méi)有重疊的情況下處理跳到p70。在S16A-2中,重疊警告部件31將第一被攝體和第二被攝體存在重疊的情況警告用戶(hù)(拍攝者)或者被攝體或者兩方,處理跳到p70。作為警告的通知方法考慮各種情況。例如,在利用合成圖像進(jìn)行通知的情況下,將合成區(qū)域醒目地重疊在合成圖像來(lái)顯示就可以。圖43是對(duì)其進(jìn)行說(shuō)明的例子。在圖43中,圖42(c)的區(qū)域202,即第一被攝體和第二被攝體重疊的區(qū)域被重疊在合成圖像上以半透明方式來(lái)顯示。如果將區(qū)域202的部分施加紅色等醒目的顏色的濾光器(在區(qū)域202上貼上色玻璃紙的圖像)則更好?;蛘呤箙^(qū)域202的區(qū)域及其輪廓等閃爍顯示也可以。這些合成方法在后面用圖53說(shuō)明。圖43是進(jìn)一步用文字進(jìn)行警告的例子。在圖43的上方,在合成圖像上重疊產(chǎn)生警告窗口,在其中顯示“被攝體重疊!”的信息。也可以使其醒目的配色或者閃爍。這些對(duì)于合成圖像的覆寫(xiě),可以按照重疊警告部件31的指示對(duì)重疊圖像生成部件29進(jìn)行,也可以對(duì)重疊圖像顯示部件30進(jìn)行。在使警告窗口閃爍等的情況下,可能需要使原來(lái)的合成圖像留下,所以有時(shí)對(duì)于重疊圖像顯示部件30,使例如從主存儲(chǔ)器74或者外部存儲(chǔ)器75間歇地讀出并提供警告窗口的數(shù)據(jù)的方法較多。如果在圖35(a)的監(jiān)視器141上顯示這些警告顯示,則可以一邊拍攝一邊確認(rèn)重疊的狀態(tài),在拍攝中很方便。這時(shí),可以產(chǎn)生拍攝者在將接著拍攝的圖像作為第二被攝體圖像等使用的情況下,對(duì)被攝體(人物(2))進(jìn)行“因?yàn)橹丿B,所以再向右方移動(dòng)”的指示,以便消除重疊狀態(tài)的優(yōu)點(diǎn)。而且,所謂在將接著拍攝的圖像作為第二被攝體圖像等使用的情況,考慮以下情況用戶(hù)通過(guò)菜單或者快門(mén)按鈕指示第二被攝體圖像的記錄(存儲(chǔ)器寫(xiě)入)的情況,或者如前所述那樣,成為將第二被攝體圖像活動(dòng)地拍攝,將修正重疊圖像基本上實(shí)時(shí)地顯示的反復(fù)處理的專(zhuān)用模式的情況。而且,圖35(a)的監(jiān)視器141朝向拍攝者的方向,但如果是監(jiān)視器可以朝向被攝體的方向的裝置,則被攝體也可以確認(rèn)重疊狀況,即使不被拍攝者指示,被攝體也可以自己移動(dòng)以便消除重疊。也可以準(zhǔn)備與監(jiān)視器141不同的監(jiān)視器,使其可以看見(jiàn)被攝體。而且,如果將如前所述作為專(zhuān)用模式說(shuō)明的圖36的S13到S17的處理進(jìn)行重復(fù),則可以基本上實(shí)時(shí)地了解當(dāng)前的重疊狀態(tài),所以基本上實(shí)時(shí)地了解是否通過(guò)被攝體的移動(dòng)而消除了重疊,可以使拍攝便利且有效率。從圖36的S13到S17的處理如果使用足夠快的CPU和邏輯電路,則不需要那么長(zhǎng)的時(shí)間。在實(shí)際使用中,如果可以實(shí)現(xiàn)1秒內(nèi)大于或等于1次的速度的重復(fù)處理,則可以說(shuō)是基本上實(shí)時(shí)地顯示。而且,在S14中生成修正圖像時(shí),如果將第一被攝體圖像設(shè)為基準(zhǔn)圖像,則合成圖像也是第一被攝體圖像為基礎(chǔ)。在監(jiān)視器141上描畫(huà)的背景的范圍稱(chēng)為第一被攝體圖像的背景的范圍。在實(shí)時(shí)地進(jìn)行上述的重復(fù)處理時(shí),如果照相機(jī)振動(dòng)則被拍攝的背景的范圍改變,但是被拍攝的圖像是第二被攝體圖像,不是第一被攝體圖像。因此,在監(jiān)視器141上描畫(huà)的背景的范圍原樣為第一被攝體圖像的背景的范圍而不改變。因此,拍攝的范圍不描畫(huà)/被反映在監(jiān)視器141上,作為用戶(hù)有不舒服感。對(duì)此,如果將第二被攝體圖像設(shè)為基準(zhǔn)圖像,則在監(jiān)視器141上描畫(huà)的背景的范圍為第二被攝體圖像的背景的范圍。在實(shí)時(shí)地進(jìn)行上述的重復(fù)處理時(shí),如果照相機(jī)振動(dòng)則被拍攝的背景的范圍改變,但是被拍攝的圖像是第二被攝體圖像(基準(zhǔn)圖像),因此,在監(jiān)視器141上描畫(huà)的背景的范圍為拍攝中的背景的范圍。因此,拍攝的范圍描畫(huà)/被反映在監(jiān)視器141上,所以產(chǎn)生作為用戶(hù)的不舒服感減少的效果。而且,只要觀察將重疊區(qū)域重疊在合成圖像而顯示的結(jié)果、被攝體之間的重疊狀況和合成圖像的框架之間的關(guān)系,可以判斷被攝體不論怎樣移動(dòng)都產(chǎn)生重疊,或者被攝體在框架之外,則可以判斷出根據(jù)第一被攝體圖像的拍攝重新進(jìn)行的方式較好。而且,作為警告的通知的方法,可以通過(guò)使圖35(a)的燈142點(diǎn)亮或者閃爍來(lái)進(jìn)行通知。由于是警告,所以如果將燈的顏色設(shè)為紅色或者橙色等顏色則容易明白。燈的閃爍等一般具有即使拍攝者不盯著監(jiān)視器141也容易引起注意的優(yōu)點(diǎn)。而且,可以如圖43那樣不將重疊區(qū)域重疊在合成圖像中進(jìn)行顯示,僅以燈通知也可以。這時(shí),雖然難以馬上了解重疊了多少,但是僅知道是否有重疊,但之后通過(guò)被攝體移動(dòng)等后觀察是否警告通知消失,則可以達(dá)到得到?jīng)]有重疊的合成圖像的目的,所以?xún)H通過(guò)燈也可以。由此,產(chǎn)生省略顯示重疊部分的處理的優(yōu)點(diǎn)。而且,雖然在圖35(a)中將燈142配置為僅拍攝者側(cè)可以看見(jiàn),但是不用說(shuō),也可以配置在圖35(b)的主體140的前面?zhèn)?,使得從被攝體側(cè)也可以了解。關(guān)于效果,與被攝體觀察監(jiān)視器的情況一樣。而且,雖然在圖35(a)中沒(méi)有,但存在與監(jiān)視器141不同的尋像器那樣可以確認(rèn)圖像的其它部件時(shí),也考慮進(jìn)而與監(jiān)視器141一樣顯示警告通知,或者在尋像器內(nèi)部安裝燈來(lái)進(jìn)行通知的方法。而且,在雖然在圖35(a)、圖35(b)中沒(méi)有表示,但是也可以使用圖34的揚(yáng)聲器80來(lái)進(jìn)行警告通知。在存在重疊時(shí),一邊使警告蜂鳴器鳴叫,一邊輸出“產(chǎn)生重疊”等的聲音等來(lái)進(jìn)行警告通知。這時(shí)也有望得到與燈相同的效果。在使用揚(yáng)聲器的情況下,與光不同,基本上沒(méi)有指向性,所以有通過(guò)一個(gè)揚(yáng)聲器可以向拍攝者和被攝體兩方通知重疊的狀態(tài)的優(yōu)點(diǎn)。在以上的S16-1到S16A-2的處理中,進(jìn)行與圖36的S16的重疊有關(guān)的處理。圖51是圖36的S16的處理,即對(duì)與重疊有關(guān)的處理的另一個(gè)方法進(jìn)行說(shuō)明的流程圖。在經(jīng)由p60的S16-1中,最佳快門(mén)通知部件32根據(jù)從重疊檢測(cè)部件28(S15)得到的信息判斷是否存在重疊,在存在重疊時(shí),處理跳到p70,在沒(méi)有的情況下處理進(jìn)入到S16B-2。在S16B-2中,最佳快門(mén)通知部件32向用戶(hù)(拍攝者)或者被攝體或者兩者通知第一被攝體和第二被攝體中沒(méi)有重疊的情況,處理跳到p70。實(shí)際上使用該通知的最一般的方法是,與通知無(wú)重疊的情況相比,進(jìn)一步通知沒(méi)有重疊而引起的下一步的操作,具體來(lái)說(shuō)是通知成為記錄第二被攝體的最佳鏡頭的情況。這時(shí),該通知主要針對(duì)拍攝者。關(guān)于最佳鏡頭的通知方法,基本上原樣使用在圖50中說(shuō)明的方法。例如,可以將圖43的信息改為“是最佳鏡頭!”等就可以。另外,對(duì)于燈、揚(yáng)聲器,顏色或者輸出的聲音的內(nèi)容也多少有些改變,但作為通知方法可以同樣利用。如果知道為最佳鏡頭,則拍攝者可以通過(guò)按壓快門(mén)在被攝體之間沒(méi)有重疊的狀態(tài)下進(jìn)行拍攝/記錄,而且產(chǎn)生被攝體也可以進(jìn)行可能按壓快門(mén)的準(zhǔn)備(例如視線(xiàn)的方向或者面部的表情等)的優(yōu)點(diǎn)。在以上的S16-1到S16B-1的處理中,進(jìn)行與圖36的S16的重疊有關(guān)的處理。圖52是對(duì)圖36的S16的處理,即與重疊有關(guān)的處理的再一個(gè)方法進(jìn)行說(shuō)明的流程圖。在經(jīng)由p60的S16-1中,自動(dòng)快門(mén)部件33根據(jù)從重疊檢測(cè)部件28(S15)得到的信息判斷是否存在重疊,如果存在重疊時(shí),處理跳到p70,在沒(méi)有重疊時(shí)處理進(jìn)入S16C-2。在S16C-2中,自動(dòng)快門(mén)部件33判斷是否按壓快門(mén)按鈕,如果按壓則進(jìn)入S16C-3,如果沒(méi)有按壓則處理跳到p70。在16C-3中,自動(dòng)快門(mén)部件33對(duì)第二被攝體圖像取得部件23指示記錄第二被攝體圖像,處理跳到p70。第二被攝體圖像取得部件23根據(jù)指示,將拍攝圖像存儲(chǔ)到主存儲(chǔ)器74、外部存儲(chǔ)器75等中。由此,如果在被攝體之間沒(méi)有重疊時(shí)按壓快門(mén)按鈕,則產(chǎn)生可以自動(dòng)記錄拍攝圖像的效果。同時(shí),也可以產(chǎn)生防止失誤地在重疊狀態(tài)下記錄拍攝圖像的效果。作為實(shí)際使用的方法,觀察被攝體的樣子等,在認(rèn)為目前也可以記錄拍攝圖像后,拍攝者按壓快門(mén)按鈕,但在該時(shí)刻也不一定被記錄,在產(chǎn)生重疊的情況下不被記錄。即,自動(dòng)快門(mén)部件33在判斷出存在重疊的情況下,即使拍攝者按壓快門(mén)按鈕,也禁止第二被攝體圖像的記錄,使得第二被攝體圖像取得部件23也不進(jìn)行記錄動(dòng)作。而且,在不被記錄的情況下,對(duì)該要旨進(jìn)行顯示,或者通過(guò)燈、揚(yáng)聲器等的通知部件通知拍攝者等的方法,只要明確雖然按壓了快門(mén),但沒(méi)有被拍攝的狀況就可以。然后,被攝體移動(dòng)等,從而成為沒(méi)有重疊的狀態(tài)時(shí),如果再次按壓快門(mén)按鈕,則此次被記錄。進(jìn)行顯示,或者通過(guò)燈、揚(yáng)聲器等的通知部件通知拍攝者等,使其了解被記錄的狀況。如果不每次按壓快門(mén)按鈕,而一直按壓,則從重疊狀態(tài)變?yōu)椴恢丿B狀態(tài)的瞬間自動(dòng)地被記錄。但是,如果在重疊消失的瞬間被攝體不靜止,則有時(shí)拍攝圖像晃動(dòng),或者未達(dá)到拍攝圖像的狀態(tài)(被攝體朝向其它位置時(shí)等),所以,這時(shí)在自動(dòng)記錄之前稍微隔開(kāi)一段時(shí)間較好。在以上的S16-1到S16C-3的處理中,進(jìn)行與圖36的S16的重疊有關(guān)的處理。而且,圖50~23的處理不是排他的處理,可以進(jìn)行任意的組合來(lái)處理。作為組合的例子,可以為以下那樣的利用情景?!霸诒粩z體之間重疊時(shí),警告‘重疊’,在這時(shí)即使按壓快門(mén)按鈕也不記錄拍攝圖像。被攝體根據(jù)警告移動(dòng),重疊消失以后,最佳鏡頭燈點(diǎn)亮。在最佳鏡頭燈點(diǎn)亮期間按壓快門(mén)按鈕以后記錄拍攝圖像?!苯又?,圖53是對(duì)圖36的S17的處理,即生成重疊圖像的處理的一個(gè)方法進(jìn)行說(shuō)明的流程圖。在經(jīng)由p70的S17-1中,重疊圖像生成部件29將生成的重疊圖像的最初的像素位置設(shè)為當(dāng)前像素,處理進(jìn)入S17-2。最初的像素位置例如多從左上等的角部開(kāi)始。而且,“像素位置”表示圖像上的特定的位置,多用將左上角設(shè)為原點(diǎn),將右方向設(shè)為+X軸,將下方設(shè)為+Y軸的X-Y坐標(biāo)系來(lái)表現(xiàn)。像素位置對(duì)應(yīng)于表示圖像的存儲(chǔ)器上的地址,像素值是該地址的存儲(chǔ)器的值。在S17-2中,重疊圖像生成部件29判斷當(dāng)前像素位置是否存在,如果存在則處理進(jìn)入S17-3,如果不存在則處理跳到p80。在S17-3中,重疊圖像生成部件29判斷當(dāng)前像素位置是否存在于第一被攝體區(qū)域內(nèi),如果存在于第一被攝體區(qū)域內(nèi)則處理進(jìn)入S17-4,如果不是這樣則處理進(jìn)入S17-5。是否存在于被攝體統(tǒng)一區(qū)域內(nèi),可以通過(guò)從重疊檢測(cè)部件28(S15-5)得到被攝體統(tǒng)一區(qū)域,并且被攝體統(tǒng)一區(qū)域圖像中當(dāng)前像素位置的像素值是否為黑(0)來(lái)判斷。在S17-4中,重疊圖像生成部件29生成對(duì)應(yīng)于設(shè)定的像素值,作為重疊圖像的當(dāng)前像素位置的像素值寫(xiě)入。上述的設(shè)定是指合成何種重疊圖像。例如,是如圖40(b)那樣將第一被攝體以半透明方式進(jìn)行合成,還是如圖40(a)的那樣以不透明的方式將第一被攝體原樣覆寫(xiě)來(lái)進(jìn)行合成,還是如圖43那樣第一被攝體和第二被攝體都以半透明方式合成等。這里,由于處理被攝體統(tǒng)一區(qū)域內(nèi),所以實(shí)質(zhì)上為與該區(qū)域的合成比例(透過(guò)率)有關(guān)的設(shè)定。如果決定合成比例(透過(guò)率),則得到第一被攝體圖像的當(dāng)前像素位置的像素值P1和從修正圖像生成部件25(S14)得到的修正第二被攝體圖像的當(dāng)前像素位置的像素值Pf2,用規(guī)定的透過(guò)率A(0.0到1.0之間的值)來(lái)求出合成像素值(P1×(1-A)+Pf2×A)就可以。例如,為了將如圖43那樣的被攝體統(tǒng)一區(qū)域設(shè)為半透明,將透過(guò)率A設(shè)為0.5就可以。在S17-5中,重疊圖像生成部件29在S17-3中判斷當(dāng)前像素位置不在被攝體統(tǒng)一區(qū)域內(nèi)時(shí),繼續(xù)判斷當(dāng)前像素位置是否在第一被攝體區(qū)域內(nèi),如果在第一被攝體區(qū)域內(nèi)則處理進(jìn)入S17-6,如果不是則處理進(jìn)入S17-7??梢酝ㄟ^(guò)使用被攝體區(qū)域提取部件27(S15)得到的第一被攝體區(qū)域圖像,以當(dāng)前像素位置是否為黑(0)來(lái)判斷是否在第一被攝體區(qū)域內(nèi)。而且,在存在被攝體統(tǒng)一區(qū)域時(shí),由于已知不存在第一被攝體區(qū)域,所以不能判斷是否在第一被攝體區(qū)域內(nèi)(省略S17-5),處理直接進(jìn)而S17-7就可以。而且,在不因是否為第一被攝體區(qū)域而特別改變處理的情況下,省略S17-5、S17-6,從S17-3進(jìn)入S17-7就可以。在S17-6中,重疊圖像生成部件29生成對(duì)應(yīng)于設(shè)定的合成像素,作為重疊圖像的當(dāng)前像素位置的像素值寫(xiě)入。這里的處理僅是將被攝體統(tǒng)一區(qū)域(圖像)變?yōu)榈谝槐粩z體區(qū)域(圖像),與S17-4相同。如果如圖40(b)那樣,將第一被攝體以半透明方式合成,則將第一被攝體的透過(guò)率設(shè)為0.5就可以,如果如圖40(a)那樣,將第一被攝體以不透明方式原樣覆寫(xiě)來(lái)合成,則將第一被攝體的透過(guò)率設(shè)為0.0就可以。在S17-7中,重疊圖像生成部件29在S17-5中判斷當(dāng)前像素位置不在第一被攝體區(qū)域內(nèi)時(shí),判斷當(dāng)前像素位置是否在第二被攝體區(qū)域內(nèi),如果在第二被攝體區(qū)域內(nèi),則進(jìn)入S17-8,如果不在,則處理進(jìn)入S17-9。這里的處理僅是第一被攝體區(qū)域改變?yōu)榈诙粩z體區(qū)域,與S17-5相同。在S17-8中,重疊圖像生成部件29生成對(duì)應(yīng)于設(shè)定的合成像素,作為重疊圖像的當(dāng)前像素位置的像素值寫(xiě)入。這里的處理僅是第一被攝體區(qū)域改變?yōu)榈诙粩z體區(qū)域,與S17-6相同。在S17-9中,重疊圖像生成部件29在S17-7中判斷當(dāng)前像素也不屬于第二被攝體區(qū)域時(shí),將第一被攝體圖像(基準(zhǔn)圖像)的當(dāng)前像素位置的像素值作為重疊圖像的當(dāng)前像素位置的像素值寫(xiě)入。即,這時(shí)的當(dāng)前像素位置不在被攝體統(tǒng)一區(qū)域內(nèi),也不在第一被攝體內(nèi),也不在第二被攝體區(qū)域內(nèi),所以結(jié)果相當(dāng)于背景部分。在S17-10中,重疊圖像生成部件29將當(dāng)前像素位置設(shè)定為下一個(gè)像素位置,處理返回S17-2。在以上的S17-1到S17-10的處理中,進(jìn)行了圖36的S17的與重疊圖像生成有關(guān)的處理。而且,在上述的處理中,在S17-4、S17-6和S17-9中對(duì)第一被攝體圖像和修正第二被攝體圖像進(jìn)行了處理,但是也考慮在生成的重疊圖像中,在S17-1之前最初將第一被攝體圖像或者修正第二被攝體圖像進(jìn)行全像素復(fù)制,之后,在各像素位置的處理中僅處理第一被攝體區(qū)域和/或第二被攝體區(qū)域的方法。全像素復(fù)制的方法雖然處理步驟簡(jiǎn)單,但是可能增加若干處理時(shí)間。而且,這里將合成圖像的大小設(shè)為基準(zhǔn)圖像的大小,但是也可以設(shè)為比其小或者比其大。例如在圖38(c)中生成修正圖像時(shí),切除一部分,但是如果放大修正圖像的尺寸從而不能切除時(shí),為了滿(mǎn)足擴(kuò)大合成圖像的情況,可以不切除地將剩余的圖像用于合成,由此擴(kuò)大背景。產(chǎn)生可以進(jìn)行所謂全景圖像合成那樣的效果。圖40(b)是僅將第一被攝體區(qū)域半透明地合成的重疊圖像。圖40(c)是僅將第二被攝體區(qū)域半透明地合成的重疊圖像。圖40(a)是兩者都不半透明,兩個(gè)都覆寫(xiě)生成的重疊圖像。而且,圖43是兩者都設(shè)為半透明而合成的重疊圖像。由于按照目的來(lái)決定采用哪個(gè)合成方法,所以用戶(hù)只要可以選擇對(duì)應(yīng)當(dāng)時(shí)的目的的合成方法就可以。例如,已經(jīng)拍攝/記錄第一被攝體圖像,為了無(wú)重疊地拍攝第二被攝體圖像時(shí),不需要第一被攝體的詳細(xì)的圖像,只要了解大致存在于何處,是否有重疊就可以,所以用半透明的合成也沒(méi)關(guān)系。而且,由于如果不能詳細(xì)地了解第二被攝體在拍攝的瞬間有什么樣的表情等,就不能很好的按壓快門(mén),所以不采用半透明方式,而用覆寫(xiě)方式來(lái)進(jìn)行合成的方法較好。因此,傾向圖40(b)那樣的合成方法。而且,如已經(jīng)說(shuō)明的那樣,由于合成圖像的背景的范圍成為拍攝中的圖像(第二被攝體)的背景的范圍的方式不舒服感少,所以將第二被攝體圖像設(shè)為基準(zhǔn)圖像,并且為了容易了解正在拍攝第二被攝體的情況,傾向圖40(b)那樣的合成方法。而且,作為認(rèn)為知道了合成的被攝體區(qū)域后容易拍攝的用戶(hù),可能存在在拍攝中將兩者以半透明的方式合成較好的情況,以及僅將第二被攝體設(shè)為半透明較好的情況。而且,在第二被攝體的拍攝/記錄完成,希望使用第一被攝體圖像、第二被攝體圖像來(lái)最終合成圖像的情況下,由于用半透明的被攝體很困難,所以任意一個(gè)都需要用覆寫(xiě)來(lái)進(jìn)行合成。因此,傾向于圖40(b)那樣的合成方法。而且,如果從被攝體區(qū)域提取部件27(S15)得到的被攝體區(qū)域如前所述已經(jīng)被膨脹,則不僅是被攝體,而且其周?chē)谋尘安糠忠惨黄鸷铣桑且呀?jīng)由修正圖像生成部件25(S14)進(jìn)行修正處理,使得背景部分一致,所以即使與實(shí)際的被攝體的輪廓的區(qū)域相比,提取被攝體區(qū)域變大,多少包含背景部分,但在合成邊界也產(chǎn)生不會(huì)變得不自然的效果。另外,如果是使被攝體區(qū)域膨脹進(jìn)行處理,則也有以下方法在也包含外部的被攝體區(qū)域的合成區(qū)域的合成邊界附近,或者僅在被攝體區(qū)域內(nèi)部的合成邊界附近,使透明度緩慢變化來(lái)進(jìn)行合成,從而使合成邊界看上去更加自然。例如有以下?tīng)顩r隨著進(jìn)入到被攝體區(qū)域的外部,使背景部分的圖像的比例增強(qiáng),隨著進(jìn)入到被攝體區(qū)域的內(nèi)部,使被攝體區(qū)域部分的圖像的比例增強(qiáng)。由此,即使假設(shè)在合成邊界附近存在由修正誤差造成的一些背景的偏差,也產(chǎn)生可使不自然不醒目的效果。而且即使假設(shè)不是修正誤差,而是各個(gè)被攝體區(qū)域的提取錯(cuò)誤的情況下,或者由于拍攝時(shí)間的偏差產(chǎn)生的背景部分的圖像的變化(例如由于風(fēng)產(chǎn)生樹(shù)木的移動(dòng),太陽(yáng)的陰影,無(wú)關(guān)的人的通過(guò)等),同樣可以產(chǎn)生可使不自然不醒目的效果。而且,不用說(shuō),本發(fā)明的目的也可以通過(guò)將記錄了實(shí)現(xiàn)前述的本實(shí)施方式的功能的軟件的程序碼的存儲(chǔ)介質(zhì)提供給系統(tǒng)或者裝置,該系統(tǒng)或者裝置的計(jì)算機(jī)(或者CPU或MPU)讀出存儲(chǔ)于存儲(chǔ)介質(zhì)的程序碼并執(zhí)行來(lái)達(dá)成。這時(shí),從存儲(chǔ)介質(zhì)讀出的程序碼自身實(shí)現(xiàn)前述的實(shí)施方式的功能,存儲(chǔ)了該程序碼的存儲(chǔ)介質(zhì)構(gòu)成本發(fā)明。這時(shí),從存儲(chǔ)介質(zhì)讀出的程序碼自身實(shí)現(xiàn)前述的實(shí)施方式的功能,存儲(chǔ)了該程序碼的存儲(chǔ)介質(zhì)構(gòu)成本發(fā)明。作為用于提供程序碼的存儲(chǔ)介質(zhì),例如可以使用軟盤(pán)、硬盤(pán)、光盤(pán)、光磁盤(pán)、磁帶、非易失性存儲(chǔ)卡等。而且,也可以是將上述程序碼通過(guò)圖像網(wǎng)絡(luò)那樣的傳送介質(zhì),從其他的計(jì)算機(jī)系統(tǒng)下載到圖像合成裝置的主存儲(chǔ)器74或者外部存儲(chǔ)器75的設(shè)備。而且,當(dāng)然也包括以下情況通過(guò)執(zhí)行計(jì)算機(jī)讀出的程序碼,不僅實(shí)現(xiàn)前述的實(shí)施方式的功能,而且根據(jù)該程序碼的指示,在計(jì)算機(jī)上工作的OS(操作系統(tǒng))等執(zhí)行實(shí)際的處理的一部分或者全部,通過(guò)該處理來(lái)實(shí)現(xiàn)前述的實(shí)施方式的功能。進(jìn)而,當(dāng)然也包括以下情況從存儲(chǔ)介質(zhì)讀出的程序碼在被寫(xiě)入插入計(jì)算機(jī)的功能擴(kuò)展接口或者與計(jì)算機(jī)連接的功能擴(kuò)展單元中具有的存儲(chǔ)器中后,根據(jù)該程序碼的指示,該功能擴(kuò)展接口或者功能擴(kuò)展單元中具有的CPU等執(zhí)行實(shí)際的處理的一部分或者全部,通過(guò)該處理來(lái)實(shí)現(xiàn)前述的實(shí)施方式的功能。在將本發(fā)明應(yīng)用于上述存儲(chǔ)介質(zhì)中的情況下,在該存儲(chǔ)介質(zhì)中,對(duì)與先前說(shuō)明的流程對(duì)應(yīng)的程序碼進(jìn)行存儲(chǔ)。本發(fā)明不限于上述的實(shí)施方式,在權(quán)利要求所示的范圍內(nèi)可以進(jìn)行各種變更。如上所述,本發(fā)明的第二圖像合成裝置,包括背景修正量計(jì)算部件,對(duì)第一被攝體圖像和第二被攝體圖像之間的背景部分的相對(duì)移動(dòng)量、旋轉(zhuǎn)量、放大縮小率、失真修正量的其中一個(gè)或者組合構(gòu)成的修正量進(jìn)行計(jì)算,或者對(duì)計(jì)算并存儲(chǔ)的修正量進(jìn)行讀取,所述第一被攝體圖像包括背景和第一被攝體,所述第二被攝體圖像包括所述背景的至少一部分和第二被攝體;以及重疊圖像生成部件,將第一被攝體圖像、第二被攝體圖像的其中之一作為基準(zhǔn)圖像,用由所述背景修正量計(jì)算部件得到的修正量對(duì)另一個(gè)圖像進(jìn)行修正,使得被攝體以外的背景部分至少部分重疊,并生成將基準(zhǔn)圖像和修正后的圖像重疊的圖像。由此,可以修正兩個(gè)圖像間的背景的偏差從而進(jìn)行合成,所以,除了與被攝體明顯不同的區(qū)域以外的部分(即背景部分)無(wú)論怎樣重疊,合成結(jié)果都基本一致,產(chǎn)生合成結(jié)果不會(huì)變得不自然的效果。例如,在僅要主要合成被攝體區(qū)域時(shí),即使被攝體區(qū)域的提取或者指定多少有些不正確,但由于被攝體區(qū)域的周?chē)谋尘安糠峙c合成目的的圖像的部分沒(méi)有偏差,所以被合成為不正確的區(qū)域的內(nèi)外連續(xù)的風(fēng)景,可以產(chǎn)生減輕視覺(jué)上不自然的效果。而且,由此,即使例如假設(shè)被攝體區(qū)域的提取以像素單位正確,如課題項(xiàng)說(shuō)明的那樣,雖然通過(guò)現(xiàn)有技術(shù)的方法,產(chǎn)生比一個(gè)像素更細(xì)微的水平上的不自然,但是在本發(fā)明中,使背景部分匹配后合成,所以輪廓的像素周?chē)南袼爻蔀橄嗤尘安糠值奈恢玫南袼?,即使合成也基本自然地連接。這樣,可以產(chǎn)生防止或者減輕比一個(gè)像素更細(xì)微的水平上的不自然的效果。而且,由于對(duì)背景的偏差進(jìn)行修正后合成,所以在拍攝第一/第二被攝體圖像時(shí),不需要用三角架固定照相機(jī)等,用手等匹配大致的方向就可以,產(chǎn)生拍攝變得簡(jiǎn)單的效果。而且,本發(fā)明的第二圖像合成裝置還可以是以下結(jié)構(gòu)還包括拍攝被攝體和風(fēng)景的拍攝部件,根據(jù)所述拍攝部件的輸出生成第一被攝體圖像或者第二被攝體圖像。按照上述的結(jié)構(gòu),生成重疊圖像的圖像合成裝置由于具有拍攝部件,用戶(hù)可以在拍攝了被攝體或者風(fēng)景的場(chǎng)所生成重疊圖像,所以作為用戶(hù)提高了便利性。而且,如果生成重疊圖像的結(jié)果如果存在被攝體之間有重疊等的不舒服,則產(chǎn)生可以在該場(chǎng)所重新拍攝的效果。而且,由拍攝部件得到的圖像通常記錄在不論是否內(nèi)置于圖像合成裝置中的主存儲(chǔ)器或者外部存儲(chǔ)器中,用戶(hù)利用快門(mén)按鈕指示記錄的定時(shí)。然后將記錄的圖像作為第一被攝體圖像、或者第二被攝體圖像用于合成處理。而且,本發(fā)明的第二圖像合成裝置還可以是以下結(jié)構(gòu)將第一被攝體圖像和第二被攝體圖像中后拍攝的一方作為基準(zhǔn)圖像。在上述的結(jié)構(gòu)中,例如按照第一被攝體圖像、第二被攝體圖像的順序進(jìn)行拍攝時(shí),將第二被攝體圖像作為基準(zhǔn)圖像。首先假設(shè)背景圖像以任何順序都可以。然后將第二被攝體圖像作為基準(zhǔn)圖像,對(duì)第一被攝體圖像進(jìn)行修正。這時(shí),計(jì)算第二被攝體圖像(基準(zhǔn)圖像)和第一被攝體圖像之間背景部分的移動(dòng)量等的修正量。利用該修正量對(duì)第一被攝體圖像進(jìn)行修正。利用第二被攝體圖像(基準(zhǔn)圖像)、被修正的第一被攝體圖像合成合成圖像。然后進(jìn)行該合成圖像的顯示等。其結(jié)果,被顯示的合成圖像剛在之前拍攝,或者使合成圖像在實(shí)時(shí)顯示的狀態(tài)下成為當(dāng)前拍攝中的第二被攝體圖像的背景的范圍,所以產(chǎn)生作為拍攝者沒(méi)有不適感的效果。如果將第一被攝體圖像作為基準(zhǔn)圖像,則合成圖像的背景的范圍為第一被攝體圖像的背景的范圍。第一被攝體圖像的背景的范圍,照相機(jī)的方向等改變,先拍攝的第二被攝體圖像的背景的范圍也可能改變,有時(shí)拍攝者也改變。這時(shí),由于后拍攝的背景的范圍和被顯示的合成圖像的背景的范圍不一致,所以作為拍攝者等產(chǎn)生不適感。進(jìn)而,如果實(shí)時(shí)地重復(fù)從上述的第二被攝體圖像的拍攝到合成圖像的顯示,則盡管將第二被攝體圖像繼續(xù)更新為拍攝圖像,但由于合成圖像的背景的范圍原樣為第一被攝體的背景的范圍,所以該不適感進(jìn)一步增加。本發(fā)明的第二圖像合成裝置還可以是以下結(jié)構(gòu)所述重疊圖像生成部件以分別規(guī)定的透過(guò)率將基準(zhǔn)圖像和修正后的圖像進(jìn)行重疊。在上述的結(jié)構(gòu)中,“規(guī)定的透過(guò)率”可以是被固定的值,也可以是根據(jù)區(qū)域而變化的值,或者在區(qū)域的邊界附近緩慢變化的值。前述重疊圖像生成部件決定重疊圖像的像素位置,得到基準(zhǔn)圖像上的像素位置的像素值和修正后的另一個(gè)圖像上像素位置的像素值,將在這兩個(gè)像素值上分別乘以規(guī)定的透過(guò)率的值的合計(jì)值作為重疊圖像的像素值。在重疊圖像的所有像素位置進(jìn)行該處理。而且,如果透過(guò)率根據(jù)像素位置而改變,則可以根據(jù)位置加強(qiáng)基準(zhǔn)圖像的比例,或者加強(qiáng)修正圖像的比例。使用以上方式,例如在僅將被修正的被攝體圖像中的被攝體區(qū)域重疊在基準(zhǔn)圖像中時(shí),在被攝體區(qū)域內(nèi)以不透明(即保持修正圖像中的被攝體的圖像的原樣)重疊,在被攝體區(qū)域的周邊根據(jù)離開(kāi)被攝體區(qū)域的程度加強(qiáng)基準(zhǔn)圖像的比例來(lái)進(jìn)行重疊。這樣,即使假設(shè)被攝體區(qū)域,即提取出的被攝體的輪廓錯(cuò)誤,其周邊的像素由于從修正圖像向基準(zhǔn)圖像緩慢變化,所以產(chǎn)生錯(cuò)誤變得不醒目的效果。而且,通過(guò)例如進(jìn)行僅對(duì)被攝體區(qū)域用一半的透過(guò)率進(jìn)行重疊等的合成顯示,可以產(chǎn)生用戶(hù)或者被攝體容易判斷被顯示的圖像的哪一部分是以前拍攝的合成對(duì)象部分,哪一部分是目前拍攝的被攝體的圖像的效果。而且,人通常具有通過(guò)使用常識(shí)(圖像理解)來(lái)區(qū)別圖像中的背景部分和被攝體部分(輪廓)的哪里。即使對(duì)被攝體區(qū)域用一半的透過(guò)率進(jìn)行重疊顯示,該能力一般也有效。因此,通過(guò)對(duì)被攝體區(qū)域用一半的透過(guò)率進(jìn)行重疊顯示,即使在重疊多個(gè)被攝體的區(qū)域時(shí),也可以用前述的能力區(qū)別各個(gè)被攝體,可以容易地判斷它們?cè)诤铣蓤D像上是否位置重疊。通過(guò)將第一被攝體圖像和第二被攝體圖像左右并排觀察也不是不能判斷是否存在重疊,但是這時(shí)必須用前述能力區(qū)別各個(gè)圖像中的被攝體區(qū)域,考慮各個(gè)圖像的背景部分的重疊,在頭腦中計(jì)算并判斷區(qū)別的被攝體區(qū)域之間是否重疊。僅在頭腦中正確地進(jìn)行這一連串的工作與區(qū)別合成圖像中的被攝體區(qū)域的先前的方法相比更困難。即,通過(guò)機(jī)械地進(jìn)行背景部分重疊的位置匹配,使用人的高度的圖像理解能力,作出容易判斷被攝體區(qū)域之間是否重疊的狀況。這樣,通過(guò)對(duì)被攝體區(qū)域用一半的透過(guò)率進(jìn)行重疊顯示,即使在被攝體之間存在重疊等的情況下,也可以產(chǎn)生容易判別目前拍攝的被攝體的位置的效果。而且,也可以將這里記載的結(jié)構(gòu)和前述的各結(jié)構(gòu)根據(jù)需要進(jìn)行任意的組合。而且,本發(fā)明的第一圖像合成裝置也可以是以下結(jié)構(gòu)所述重疊圖像生成部件將基準(zhǔn)圖像和修正后的圖像之間的差分圖像中存在差的區(qū)域作為與原來(lái)的像素值不同的像素值的圖像來(lái)生成。這里,所謂“差分圖像”是比較兩個(gè)圖像中的相同位置的像素值,將其差值作為像素值而作出的圖像。一般來(lái)說(shuō),差值多取絕對(duì)值。所謂“與原來(lái)的像素值不同的像素值”是例如實(shí)現(xiàn)改變透過(guò)率而變成半透明,或者使像素值的明暗或者色調(diào)等相反來(lái)反轉(zhuǎn)顯示,或者成為紅色或者白色、黑色等醒目的顏色的像素值。而且,在區(qū)域的邊界部分和內(nèi)部中還包括以下情況改變前述的像素值,或者用虛線(xiàn)包圍邊界部分,或者閃爍顯示(使像素值時(shí)間性地變化)。按照上述的結(jié)構(gòu),在基準(zhǔn)圖像和修正的其它圖像之間,得到相同像素位置的像素值,在存在其差時(shí),將該像素位置的重疊圖像的像素值設(shè)為與其它區(qū)域不同的像素值。通過(guò)對(duì)所有像素位置進(jìn)行該處理,可以將差分部分的區(qū)域生成為與原來(lái)的像素值不同的像素值的圖像。由此,產(chǎn)生使用戶(hù)容易了解兩個(gè)圖像間不一致的部分的效果。例如第一或第二被攝體的區(qū)域在基準(zhǔn)圖像上和修正圖像上,一方成為被攝體的圖像,另一方成為背景的圖像,所以作為差分圖像中存在差的區(qū)域被提取。通過(guò)將被提取的區(qū)域設(shè)為半透明,或者反轉(zhuǎn)顯示,或者設(shè)為醒目的顏色的像素值,用戶(hù)容易了解被攝體的區(qū)域,如果被攝體之間存在重疊等,則產(chǎn)生也容易了解該重疊的效果。而且,這里記載的結(jié)構(gòu)可以和前述的各結(jié)構(gòu)根據(jù)需要進(jìn)行任意的組合。本發(fā)明的第二圖像合成裝置還可以是以下結(jié)構(gòu)被攝體區(qū)域提取部件,從基準(zhǔn)圖像和修正后的圖像之間的差分圖像中提取第一被攝體的區(qū)域和第二被攝體的區(qū)域,所述重疊圖像生成部件將基準(zhǔn)圖像或者修正后的圖像和由所述被攝體區(qū)域提取部件得到的區(qū)域內(nèi)的圖像重疊,以取代將基準(zhǔn)圖像和修正后的圖像重疊。由此,可以產(chǎn)生在基準(zhǔn)圖像上,僅合成被修正的被攝體圖像中的被攝體區(qū)域的效果?;蛘咭部梢栽诒恍拚谋粩z體圖像上,僅合成基準(zhǔn)圖像中的被攝體區(qū)域。而且,通過(guò)與改變重疊圖像生成部件中的被攝體區(qū)域的透過(guò)率的處理進(jìn)行組合,則用戶(hù)容易了解要合成哪個(gè)區(qū)域,如果被攝體之間存在重疊,則產(chǎn)生也可以進(jìn)一步容易了解該狀況的效果。進(jìn)而,由此產(chǎn)生可以輔助拍攝的效果。如果存在重疊,則移動(dòng)被攝體或者照相機(jī),在沒(méi)有重疊的狀態(tài)下重新拍攝較好,這時(shí)的輔助為例如使用戶(hù)容易識(shí)別是否產(chǎn)生重疊,或者提供用戶(hù)判斷使被攝體或者照相機(jī)移動(dòng)多少可以消除產(chǎn)生重疊的材料(這里為合成圖像)的效果。而且,這里記載的結(jié)構(gòu)可以根據(jù)需要和前述的各結(jié)構(gòu)進(jìn)行任意的組合。而且,本發(fā)明的第二圖像合成裝置可以是以下結(jié)構(gòu)所述被攝體區(qū)域提取部件從第一被攝體圖像中或者從被修正的第一被攝體圖像中提取第一被攝體區(qū)域內(nèi)的圖像以及第二被攝體區(qū)域內(nèi)的圖像,同時(shí)從第二被攝體圖像中或者從被修正的第二被攝體圖像中提取第一被攝體的區(qū)域內(nèi)的圖像以及第二被攝體區(qū)域內(nèi)的圖像,進(jìn)而以皮膚色作為基準(zhǔn),對(duì)第一被攝體的圖像以及第二被攝體的圖像進(jìn)行選擇。在上述的結(jié)構(gòu)中,被攝體區(qū)域提取部件可知從差分圖像提取的被攝體區(qū)域是第一被攝體的區(qū)域或者是第二被攝體的區(qū)域,但是不知道各個(gè)被攝體的區(qū)域是第一被攝體的區(qū)域還是第二被攝體的區(qū)域,換言之,不知道該區(qū)域表示的被攝體的圖像是存在于第一被攝體圖像中,或者存在于第二被攝體圖像中。因此,如果知道被攝體是人物,則將各個(gè)區(qū)域中的像素的顏色與第一被攝體圖像(基準(zhǔn)圖像)和被修正的第二被攝體圖像、或者與第二被攝體圖像(基準(zhǔn)圖像)和被修正的第一被攝體圖像分別比較。這時(shí),在如何一種情況下,對(duì)于基準(zhǔn)圖像和被修正的圖像的每一個(gè),被攝體區(qū)域提取比較在提取第一被攝體的區(qū)域內(nèi)的圖像和第二被攝體的區(qū)域內(nèi)的圖像后,總共提取合計(jì)四個(gè)圖像部分。在提取的這四個(gè)圖像部分中,包括第一被攝體的圖像部分,成為第二被攝體的形狀的背景部分,成為第一被攝體的形狀的背景部分,第二被攝體圖像的圖像部分。因此,如果將膚色作為基準(zhǔn),則可以將具有膚色或與其接近的顏色的第一被攝體以及第二被攝體的各圖像部分選擇分離。由此,可以產(chǎn)生自動(dòng)簡(jiǎn)單地判斷提取出的圖像部分是哪個(gè)被攝體的效果。本發(fā)明的第二圖像合成裝置還可以是以下結(jié)構(gòu)所述被攝體區(qū)域提取部件從第一被攝體圖像中或者從被修正的第一被攝體圖像中提取第一被攝體區(qū)域內(nèi)的圖像以及第二被攝體區(qū)域內(nèi)的圖像,同時(shí)從第二被攝體圖像中或者從被修正的第二被攝體圖像中提取第一被攝體的區(qū)域內(nèi)的圖像以及第二被攝體區(qū)域內(nèi)的圖像,進(jìn)而以各區(qū)域外的圖像的特征作為基準(zhǔn),對(duì)第一被攝體的圖像以及第二被攝體的圖像進(jìn)行選擇。在上述的結(jié)構(gòu)中,被攝體區(qū)域提取部件提取四個(gè)圖像部分的部分如前所述。但是,作為將第一被攝體和第二被攝體的各圖像部分選擇分離的基準(zhǔn),不是如前所述使用膚色,而是使用各區(qū)域外的圖像的特征。這里,所謂“特征”是該區(qū)域的圖像具有的特性,作為特征量最好是可以數(shù)值化后表現(xiàn)的性質(zhì)。作為特征量,除了例如各色的像素值、其色調(diào)、色度、亮度,作為表示圖像的模樣和構(gòu)造的統(tǒng)計(jì)量,還有同時(shí)關(guān)聯(lián)矩陣和差分統(tǒng)計(jì)量、掃描寬度矩陣、功率譜、這些第二次統(tǒng)計(jì)量、高次統(tǒng)計(jì)量等。在各個(gè)區(qū)域中,即分別與基準(zhǔn)圖像和被修正的圖像一起求出提取出的圖像部分的特征量。而且,還和基準(zhǔn)圖像和被修正的圖像一起求出該區(qū)域周?chē)鷧^(qū)域的特征量。將區(qū)域中的特征量與其周?chē)膮^(qū)域的特征量的差與第一被攝體圖像和第二被攝體圖像進(jìn)行部件,將差大的一方作為被攝體區(qū)域的圖像。由此,可以產(chǎn)生自動(dòng)簡(jiǎn)單地判斷提取出的圖像部分是哪個(gè)被攝體的效果。本發(fā)明的第二圖像合成裝置還可以是以下結(jié)構(gòu)還包括重疊檢測(cè)部件,在由所述被攝體區(qū)域提取部件得到的第一被攝體或者第二被攝體的區(qū)域的數(shù)量與作為合成的被攝體的數(shù)量而被設(shè)置的值不一致時(shí),判斷第一被攝體的區(qū)域和第二被攝體的區(qū)域重疊。所謂“第一被攝體或者第二被攝體的區(qū)域”是從差分圖像等提取的被攝體的區(qū)域,對(duì)第一被攝體的區(qū)域或者第二被攝體的區(qū)域不加區(qū)別也可以的區(qū)域。所謂“合成的被攝體”不是在合成處理的過(guò)程中被求出的被攝體,而是實(shí)際存在的被攝體,是用戶(hù)要合成的被攝體。但是,如上所述,作為合成處理的單位總和處理的是一個(gè)“被攝體”,所以有時(shí)一個(gè)被攝體為多個(gè)人物或物體。而且,可以是將被攝體的數(shù)量預(yù)先固定地設(shè)定在圖像合成裝置中的形式,但是作為使用方便,重疊檢測(cè)部件在進(jìn)行重疊檢測(cè)之前,根據(jù)拍攝者等的用戶(hù)指示設(shè)定在圖像合成裝置中的方式較好。從差分圖像由被攝體區(qū)域提取部件提取出的被攝體區(qū)域,如果被攝體之間沒(méi)有重疊,則相互分離,如果被攝體之間重疊,則第一被攝體的區(qū)域和第二被攝體的區(qū)域作為連續(xù)的區(qū)域一塊被統(tǒng)一。因此,重疊檢測(cè)部件比較被提取的被攝體的區(qū)域的數(shù)量和被攝體的數(shù)量(設(shè)定值),如果一致,則判斷為被攝體之間沒(méi)有重疊,如果不一致,則判斷為重疊??稍谟煤铣蓤D像或者燈等向拍攝者或者被攝體通知、警告有無(wú)重疊時(shí)利用該判斷結(jié)果。由此,產(chǎn)生使用戶(hù)容易判別被攝體之間是否存在重疊的部分的效果。由此,關(guān)于輔助拍攝,從而不產(chǎn)生重疊的效果與前述相同。本發(fā)明的第二圖像合成裝置還可以是以下結(jié)構(gòu)重疊警告部件,在所述重疊檢測(cè)部件中檢測(cè)到重疊時(shí),向用戶(hù)或者被攝體或者兩者警告存在重疊的情況。這里,為了“警告”,包括在顯示部件等上以文字或者圖像進(jìn)行警告,還包括燈產(chǎn)生的光或者揚(yáng)聲器等產(chǎn)生的聲音,振動(dòng)器等產(chǎn)生的振動(dòng)等,只要是用戶(hù)或者被攝體可以感知的方法都可以。由此,在被攝體之間重疊的情況下,由于通過(guò)重疊警告部件的動(dòng)作被警告,所以可以防止用戶(hù)對(duì)該情況不注意地進(jìn)行拍攝/記錄,或者進(jìn)行合成處理,進(jìn)而產(chǎn)生馬上通知被攝體需要進(jìn)行位置調(diào)整等的情況的輔助拍攝的效果。本發(fā)明的第二圖像合成裝置還可以是以下結(jié)構(gòu)還包括最佳鏡頭通知部件,在所述重疊檢測(cè)部件中沒(méi)有檢測(cè)到重疊時(shí),向用戶(hù)或者被攝體或者向兩者通知不存在重疊的情況。這里,為了“通知”,和“警告”一樣,只要是用戶(hù)或者被攝體可以感知的方法都可以。由此,由于用戶(hù)可以知道被攝體之間沒(méi)有重疊的時(shí)刻,所以如果使拍攝或者拍攝圖像記錄、合成的定時(shí)與該時(shí)刻匹配進(jìn)行,則可以產(chǎn)生被攝體之間不重疊地進(jìn)行合成的輔助拍攝效果。而且,也可以對(duì)被攝體通知最佳鏡頭,所以可以得到馬上進(jìn)行擺姿勢(shì)或視線(xiàn)的準(zhǔn)備的輔助拍攝效果。而且,本發(fā)明的第二圖像合成裝置也可以是以下結(jié)構(gòu)還包括拍攝被攝體或者風(fēng)景的拍攝部件;以及自動(dòng)快門(mén)部件,在所述重疊檢測(cè)部件中沒(méi)有檢測(cè)到重疊時(shí),生成將所述拍攝部件得到的圖像作為第一被攝體圖像、或者第二被攝體圖像來(lái)進(jìn)行記錄的指示。在上述的結(jié)構(gòu)中,所謂將拍攝圖像作為第一被攝體圖像、第二被攝體圖像記錄,是例如通過(guò)記錄到主存儲(chǔ)器或者外部存儲(chǔ)器來(lái)實(shí)現(xiàn)。因此,自動(dòng)快門(mén)部件在從重疊檢測(cè)部件輸入了在第一被攝體的區(qū)域和第二被攝體的區(qū)域中沒(méi)有重疊的信號(hào)時(shí),輸出對(duì)主存儲(chǔ)器或者外部存儲(chǔ)器進(jìn)行記錄控制處理的指示。然后,背景修正量計(jì)算部件或者重疊圖像生成部件通過(guò)讀取被記錄在主存儲(chǔ)器或者外部存儲(chǔ)器中的圖像,可以得到第一被攝體圖像、第二被攝體圖像。而且,即使自動(dòng)快門(mén)部件自動(dòng)地生成指示,也不一定馬上記錄圖像。例如,也可以是同時(shí)還按壓快門(mén)按鈕,或者如果不成為自動(dòng)記錄模式等的狀態(tài)就不記錄。由此,由于在被攝體之間不重疊時(shí)自動(dòng)地進(jìn)行拍攝,所以產(chǎn)生用戶(hù)自己判斷是否存在重疊而可以不按壓快門(mén)的輔助拍攝效果。本發(fā)明的第二圖像合成裝置還可以是以下結(jié)構(gòu)還包括拍攝被攝體或者風(fēng)景的拍攝部件;以及自動(dòng)快門(mén)部件,在通過(guò)所述重疊檢測(cè)部件檢測(cè)重疊時(shí),生成禁止將所述拍攝部件得到的圖像作為第一被攝體圖像、或者第二被攝體圖像來(lái)進(jìn)行記錄的指示。按照上述的結(jié)構(gòu),自動(dòng)快門(mén)部件在從重疊檢測(cè)部件得到存在重疊的信號(hào)后,輸出禁止將從拍攝部件得到的圖像記錄到主存儲(chǔ)器或者外部存儲(chǔ)器等的指示。其結(jié)果,例如即使假設(shè)快門(mén)按鈕被按壓,也不記錄從拍攝部件得到的圖像。而且,也可以只要不是成為自動(dòng)禁止模式等的狀態(tài),就不進(jìn)行該禁止處理。由此,由于在被攝體之間存在重疊時(shí)不進(jìn)行拍攝,所以可以產(chǎn)生防止用戶(hù)錯(cuò)誤地在存在重疊的狀態(tài)下進(jìn)行拍攝/記錄的輔助拍攝效果。本發(fā)明的第二圖像合成方法包括背景修正量計(jì)算步驟,對(duì)第一被攝體圖像和第二被攝體圖像之間的背景部分的相對(duì)移動(dòng)量、旋轉(zhuǎn)量、放大縮小率、失真修正量的其中一個(gè)或者組合構(gòu)成的修正量進(jìn)行計(jì)算,或者對(duì)計(jì)算并存儲(chǔ)的修正量進(jìn)行讀取,所述第一被攝體圖像包括背景和第一被攝體,所述第二被攝體圖像包括所述背景的至少一部分和第二被攝體;以及重疊圖像生成步驟,將第一被攝體圖像、第二被攝體圖像的其中之一作為基準(zhǔn)圖像,用由所述背景修正量計(jì)算步驟得到的修正量對(duì)另一個(gè)圖像進(jìn)行修正,使得被攝體以外的背景部分至少部分重疊,并生成將基準(zhǔn)圖像和修正后的圖像重疊的圖像。由此產(chǎn)生的各種作用效果與前述相同。本發(fā)明的第二圖像合成程序是使計(jì)算機(jī)具有作為上述圖像合成裝置具有的各部件的功能的結(jié)構(gòu)。本發(fā)明的第二圖像合成程序是使計(jì)算機(jī)執(zhí)行上述圖像合成方法具有的各步驟的結(jié)構(gòu)。本發(fā)明的第二記錄介質(zhì)是記錄了上述圖像合成程序的結(jié)構(gòu)。由此,通過(guò)經(jīng)由上述記錄介質(zhì)或者網(wǎng)絡(luò),在一般的計(jì)算機(jī)中安裝圖像合成程序,利用該計(jì)算機(jī)實(shí)現(xiàn)上述的圖像合成方法,換言之,可以使計(jì)算機(jī)具有作為圖像合成裝置的功能。而且,本發(fā)明不限于上述的各實(shí)施方式,在權(quán)利要求所示的范圍內(nèi)可以進(jìn)行各種變更,對(duì)于將在不同的實(shí)施方式中分別公開(kāi)的技術(shù)手段進(jìn)行適當(dāng)組合得到的實(shí)施方式也包含在本發(fā)明的技術(shù)手段中。而且,在用于上述發(fā)明的最佳方式項(xiàng)目中的具體的實(shí)施方式或者實(shí)施例只是使本發(fā)明的技術(shù)內(nèi)容明了,不應(yīng)僅限定于這樣的具體例而進(jìn)行狹義的解釋?zhuān)诒景l(fā)明的精神和記載的權(quán)利要求的范圍內(nèi)可以進(jìn)行各種變更后實(shí)施。本發(fā)明的產(chǎn)業(yè)上的可利用性在于本發(fā)明可用于數(shù)字照相機(jī)或者具有拍攝功能的便攜電話(huà)、監(jiān)視照相機(jī)、Web照相機(jī)、掃描儀、復(fù)印機(jī)、FAX、圖像編集軟件等取入圖像,并加工圖像的設(shè)備或者軟件中。權(quán)利要求1.一種圖像合成裝置,包括背景修正量計(jì)算部件,對(duì)作為背景的圖像的背景圖像、第一被攝體圖像和第二被攝體圖像之間的背景的相對(duì)移動(dòng)量、旋轉(zhuǎn)量、放大縮小率、失真修正量的其中一個(gè)或者組合構(gòu)成的修正量進(jìn)行計(jì)算,或者對(duì)計(jì)算并存儲(chǔ)的修正量進(jìn)行讀取,所述第一被攝體圖像包括所述背景圖像的至少一部分和第一被攝體,所述第二被攝體圖像包括背景圖像的至少一部分和第二被攝體;以及重疊圖像生成部件,將背景圖像、第一被攝體圖像、第二被攝體圖像的其中之一作為基準(zhǔn)圖像,用由所述背景修正量計(jì)算部件得到的修正量對(duì)另外兩個(gè)圖像進(jìn)行修正,使得被攝體以外的背景的至少一部分重疊,并生成將基準(zhǔn)圖像和修正后的另外一個(gè)或者兩個(gè)圖像重疊的圖像。2.如權(quán)利要求1所述的圖像合成裝置,還包括拍攝被攝體和風(fēng)景的拍攝部件,根據(jù)所述拍攝部件的輸出來(lái)生成背景圖像、第一被攝體圖像或者第二被攝體圖像。3.如權(quán)利要求2所述的圖像合成裝置,在第一被攝體圖像和第二被攝體圖像中,將先拍攝的圖像作為基準(zhǔn)圖像。4.如權(quán)利要求3所述的圖像合成裝置,按照在基準(zhǔn)圖像之前或者之后的順序來(lái)拍攝背景圖像。5.如權(quán)利要求1所述的圖像合成裝置,其中所述重疊圖像生成部件以分別規(guī)定的透過(guò)率將基準(zhǔn)圖像和修正后的另一個(gè)或者另兩個(gè)圖像進(jìn)行重疊。6.如權(quán)利要求1所述的圖像合成裝置,其中所述重疊圖像生成部件將基準(zhǔn)圖像和修正后的另一個(gè)或者另兩個(gè)圖像之間的差分圖像中存在差異的區(qū)域作為與原來(lái)的像素值不同的像素值的圖像來(lái)生成。7.如權(quán)利要求1所述的圖像合成裝置,還包括被攝體區(qū)域提取部件,從基準(zhǔn)圖像和修正后的另一個(gè)或者另兩個(gè)圖像之間的差分圖像中提取第一被攝體的區(qū)域和第二被攝體的區(qū)域,所述重疊圖像生成部件將基準(zhǔn)圖像和由所述被攝體區(qū)域提取部件得到的區(qū)域內(nèi)的修正后的另一個(gè)或者另兩個(gè)圖像重疊,以取代將基準(zhǔn)圖像和修正后的另一個(gè)或者另兩個(gè)圖像重疊。8.如權(quán)利要求7所述的圖像合成裝置,還包括重疊檢測(cè)部件,對(duì)由所述被攝體區(qū)域提取部件得到的第一被攝體的區(qū)域和第二被攝體的區(qū)域的重疊進(jìn)行檢測(cè)。9.如權(quán)利要求8所述的圖像合成裝置,還包括重疊警告部件,在所述重疊檢測(cè)部件中檢測(cè)到重疊時(shí),向用戶(hù)或者被攝體或者向兩者警告存在重疊的情況。10.如權(quán)利要求8所述的圖像合成裝置,還包括最佳鏡頭通知部件,在所述重疊檢測(cè)部件中沒(méi)有檢測(cè)到重疊時(shí),向用戶(hù)或者被攝體或者向兩者通知不存在重疊的情況。11.如權(quán)利要求8所述的圖像合成裝置,還包括拍攝被攝體或者風(fēng)景的拍攝部件;以及自動(dòng)快門(mén)部件,在所述重疊檢測(cè)部件中沒(méi)有檢測(cè)到重疊時(shí),生成將所述拍攝部件得到的圖像作為背景圖像、或者第一被攝體圖像、或者第二被攝體圖像來(lái)進(jìn)行記錄的指示。12.如權(quán)利要求8所述的圖像合成裝置,還包括拍攝被攝體或者風(fēng)景的拍攝部件;以及自動(dòng)快門(mén)部件,在通過(guò)所述重疊檢測(cè)部件檢測(cè)重疊時(shí),生成禁止將所述拍攝部件得到的圖像作為背景圖像、或者第一被攝體圖像、或者第二被攝體圖像來(lái)進(jìn)行記錄的指示。13.如權(quán)利要求8所述的圖像合成裝置,所述重疊檢測(cè)部件提取第一被攝體的區(qū)域和第二被攝體的區(qū)域重疊的重疊區(qū)域。14.如權(quán)利要求13所述的圖像合成裝置,所述重疊圖像生成部件將所述重疊檢測(cè)部件提取的重疊區(qū)域作為與原來(lái)的像素值不同的像素值的圖像來(lái)生成。15.如權(quán)利要求8至14的任意一項(xiàng)所述的圖像合成裝置,還包括重疊回避方法計(jì)算部件,在所述重疊檢測(cè)部件檢測(cè)重疊時(shí),對(duì)減少重疊的第一被攝體或者第二被攝體的位置或者該位置的方向進(jìn)行計(jì)算;以及重疊回避方法通知部件,向用戶(hù)或者被攝體或者兩者通知由所述重疊回避方法計(jì)算部件得到的第一被攝體或者第二被攝體的位置或者該位置的方向。16.一種圖像合成方法,包括背景修正量計(jì)算步驟,對(duì)作為背景的圖像的背景圖像、第一被攝體圖像和第二被攝體圖像之間的背景的相對(duì)移動(dòng)量、旋轉(zhuǎn)量、放大縮小率、失真修正量的其中一個(gè)或者組合構(gòu)成的修正量進(jìn)行計(jì)算,或者對(duì)計(jì)算并存儲(chǔ)的修正量進(jìn)行讀取,所述第一被攝體圖像包括所述背景圖像的至少一部分和第一被攝體,所述第二被攝體圖像包括背景圖像的至少一部分和第二被攝體;以及重疊圖像生成步驟,將背景圖像、第一被攝體圖像、第二被攝體圖像的其中之一作為基準(zhǔn)圖像,用由所述背景修正量計(jì)算步驟得到的修正量對(duì)另外兩個(gè)圖像進(jìn)行修正,使得被攝體以外的背景的至少一部分重疊,并生成將基準(zhǔn)圖像和修正后的另外一個(gè)或者兩個(gè)圖像重疊的圖像。17.一種圖像合成裝置,包括背景修正量計(jì)算部件,對(duì)第一被攝體圖像和第二被攝體圖像之間的背景部分的相對(duì)移動(dòng)量、旋轉(zhuǎn)量、放大縮小率、失真修正量的其中一個(gè)或者組合構(gòu)成的修正量進(jìn)行計(jì)算,或者對(duì)計(jì)算并存儲(chǔ)的修正量進(jìn)行讀取,所述第一被攝體圖像包括背景和第一被攝體,所述第二被攝體圖像包括所述背景的至少一部分和第二被攝體;以及重疊圖像生成部件,將第一被攝體圖像、第二被攝體圖像的其中之一作為基準(zhǔn)圖像,用由所述背景修正量計(jì)算部件得到的修正量對(duì)另一個(gè)圖像進(jìn)行修正,使得被攝體以外的背景部分至少部分重疊,并生成將基準(zhǔn)圖像和修正后的圖像重疊的圖像。18.如權(quán)利要求17所述的圖像合成裝置,還包括拍攝被攝體和風(fēng)景的拍攝部件,根據(jù)所述拍攝部件的輸出生成第一被攝體圖像或者第二被攝體圖像。19.如權(quán)利要求18所述的圖像合成裝置,將第一被攝體圖像和第二被攝體圖像中后拍攝的一方作為基準(zhǔn)圖像。20.如權(quán)利要求17所述的圖像合成裝置,所述重疊圖像生成部件以分別規(guī)定的透過(guò)率將基準(zhǔn)圖像和修正后的圖像進(jìn)行重疊。21.如權(quán)利要求17所述的圖像合成裝置,所述重疊圖像生成部件將基準(zhǔn)圖像和修正后的圖像之間的差分圖像中存在差異的區(qū)域作為與原來(lái)的像素值不同的像素值的圖像來(lái)生成。22.如權(quán)利要求17所述的圖像合成裝置,還包括被攝體區(qū)域提取部件,從基準(zhǔn)圖像和修正后的圖像之間的差分圖像中提取第一被攝體的區(qū)域和第二被攝體的區(qū)域,所述重疊圖像生成部件將基準(zhǔn)圖像或者修正后的圖像和由所述被攝體區(qū)域提取部件得到的區(qū)域內(nèi)的圖像重疊,以取代將基準(zhǔn)圖像和修正后的圖像重疊。23.如權(quán)利要求22所述的圖像合成裝置,其中所述被攝體區(qū)域提取部件從第一被攝體圖像中或者從被修正的第一被攝體圖像中提取第一被攝體區(qū)域內(nèi)的圖像以及第二被攝體區(qū)域內(nèi)的圖像,同時(shí)從第二被攝體圖像中或者從被修正的第二被攝體圖像中提取第一被攝體的區(qū)域內(nèi)的圖像以及第二被攝體區(qū)域內(nèi)的圖像,進(jìn)而以皮膚色作為基準(zhǔn),對(duì)第一被攝體的圖像以及第二被攝體的圖像進(jìn)行選擇。24.如權(quán)利要求22所述的圖像合成裝置,其中所述被攝體區(qū)域提取部件從第一被攝體圖像中或者從被修正的第一被攝體圖像中提取第一被攝體區(qū)域內(nèi)的圖像以及第二被攝體區(qū)域內(nèi)的圖像,同時(shí)從第二被攝體圖像中或者從被修正的第二被攝體圖像中提取第一被攝體的區(qū)域內(nèi)的圖像以及第二被攝體區(qū)域內(nèi)的圖像,進(jìn)而以各區(qū)域外的圖像的特征作為基準(zhǔn),對(duì)第一被攝體的圖像以及第二被攝體的圖像進(jìn)行選擇。25.如權(quán)利要求22所述的圖像合成裝置,還包括重疊檢測(cè)部件,在由所述被攝體區(qū)域提取部件得到的第一被攝體或者第二被攝體的區(qū)域的數(shù)量與作為合成的被攝體的數(shù)量而被設(shè)置的值不一致時(shí),判斷第一被攝體的區(qū)域和第二被攝體的區(qū)域重疊。26.如權(quán)利要求25所述的圖像合成裝置,還包括重疊警告部件,在所述重疊檢測(cè)部件中檢測(cè)到重疊時(shí),向用戶(hù)或者被攝體或者兩者警告存在重疊的情況。27.如權(quán)利要求25所述的圖像合成裝置,還包括最佳鏡頭通知部件,在所述重疊檢測(cè)部件中沒(méi)有檢測(cè)到重疊時(shí),向用戶(hù)或者被攝體或者向兩者通知不存在重疊的情況。28.如權(quán)利要求25所述的圖像合成裝置,還包括拍攝被攝體或者風(fēng)景的拍攝部件;以及自動(dòng)快門(mén)部件,在所述重疊檢測(cè)部件中沒(méi)有檢測(cè)到重疊時(shí),生成將所述拍攝部件得到的圖像作為第一被攝體圖像、或者第二被攝體圖像來(lái)進(jìn)行記錄的指示。29.如權(quán)利要求25所述的圖像合成裝置,還包括拍攝被攝體或者風(fēng)景的拍攝部件;以及自動(dòng)快門(mén)部件,在通過(guò)所述重疊檢測(cè)部件檢測(cè)重疊時(shí),生成禁止將所述拍攝部件得到的圖像作為第一被攝體圖像、或者第二被攝體圖像來(lái)進(jìn)行記錄的指示。30.一種圖像合成方法,包括背景修正量計(jì)算步驟,對(duì)第一被攝體圖像和第二被攝體圖像之間的背景部分的相對(duì)移動(dòng)量、旋轉(zhuǎn)量、放大縮小率、失真修正量的其中一個(gè)或者組合構(gòu)成的修正量進(jìn)行計(jì)算,或者對(duì)預(yù)先計(jì)算的修正量進(jìn)行讀取,所述第一被攝體圖像包括背景和第一被攝體,所述第二被攝體圖像包括所述背景的至少一部分和第二被攝體;以及重疊圖像生成步驟,將第一被攝體圖像、第二被攝體圖像的其中之一作為基準(zhǔn)圖像,用由所述背景修正量計(jì)算步驟得到的修正量對(duì)另一個(gè)圖像進(jìn)行修正,使得被攝體以外的背景部分至少部分重疊,并生成將基準(zhǔn)圖像和修正后的圖像重疊的圖像。31.一種圖像合成程序,使計(jì)算機(jī)具有作為權(quán)利要求1至權(quán)利要求14、權(quán)利要求17至權(quán)利要求29的任意一項(xiàng)所述的圖像合成裝置所具有的各部件的功能。32.一種圖像合成程序,使計(jì)算機(jī)具有作為權(quán)利要求15所述的圖像合成裝置所具有的各部件的功能。33.一種圖像合成程序,用于使計(jì)算機(jī)執(zhí)行權(quán)利要求16或者權(quán)利要求30所述的圖像合成方法所具有的各步驟。34.一種記錄了權(quán)利要求31所述的圖像合成程序的記錄介質(zhì)。35.一種記錄了權(quán)利要求32所述的圖像合成程序的記錄介質(zhì)。36.一種記錄了權(quán)利要求33所述的圖像合成程序的記錄介質(zhì)。全文摘要本發(fā)明提供一種圖像合成裝置,通過(guò)第一被攝體圖像取得部件(1)、第二被攝體圖像取得部件(3)、背景圖像取得部件(2)取得第一被攝體圖像、第二被攝體圖像、背景圖像三張圖像,將其中一張作為基準(zhǔn)圖像,通過(guò)背景修正量計(jì)算部件(4)、修正圖像生成部件(5)生成背景部分一致的兩張修正圖像。重疊圖像生成部件(9)生成將兩張修正圖像之一或者兩個(gè)與基準(zhǔn)圖像重疊的圖像。由此,由于重疊圖像之間背景一致,所以可以將分別拍攝的第一被攝體和第二被攝體相對(duì)于背景無(wú)不適感地合成。文檔編號(hào)H04N5/235GK1682528SQ0382162公開(kāi)日2005年10月12日申請(qǐng)日期2003年7月3日優(yōu)先權(quán)日2002年8月9日發(fā)明者廣澤昌司申請(qǐng)人:夏普株式會(huì)社