專利名稱:攝像裝置、攝像方法及集成電路的制作方法
技術(shù)領(lǐng)域:
本發(fā)明涉及一種運(yùn)動(dòng)圖像的攝像裝置、攝像方法及集成電路,特別是涉及一種對(duì)攝像之后的運(yùn)動(dòng)圖像中的特定區(qū)域進(jìn)行記錄的攝像裝置、攝像方法及集成電路。
背景技術(shù):
在與運(yùn)動(dòng)圖像的攝影關(guān)聯(lián)的靜止畫的攝影中,有這樣的攝像裝置用戶只需進(jìn)行按下一次快門按鈕這一動(dòng)作(以后,稱為按下快門動(dòng)作),便能夠獲得構(gòu)圖互不相同的多個(gè)靜態(tài)圖像。將這樣通過(guò)用戶的1次快門按下操作,便獲得構(gòu)圖互不相同的多個(gè)靜態(tài)圖像的攝影稱為構(gòu)圖包圍曝光攝影(composition bracket photographing)。
作為進(jìn)行構(gòu)圖包圍曝光攝影的以往的攝像裝置,例如有專利文獻(xiàn)1中記載的以往的攝像裝置。圖13是表示專利文獻(xiàn)1中記載的以往的攝像裝置所進(jìn)行的構(gòu)圖包圍曝光攝影的圖。專利文獻(xiàn)1的攝像裝置在用戶選擇變焦連拍攝影模式時(shí),與被攝體的通過(guò)鏡頭圖像(through image) 一起預(yù)覽顯示多個(gè)變焦連拍框。然后,專利文獻(xiàn)1的攝像裝置按照用戶對(duì)十字鍵的操作對(duì)變焦連拍框的剪切位置的存儲(chǔ)進(jìn)行更新,并在該更新后所存儲(chǔ)的剪切位置顯示變焦連拍框(20a,20b)。當(dāng)用戶進(jìn)行快門按下操作時(shí),專利文獻(xiàn)1的攝像裝置開(kāi)始靜止畫攝影處理,將通過(guò)該靜止畫攝影處理而獲得的靜態(tài)圖像存儲(chǔ)在緩沖存儲(chǔ)器(Buffer memory)中。然后,專利文獻(xiàn)1的攝像裝置通過(guò)剪切處理,從該所獲得的靜態(tài)圖像中生成變焦連射框20a內(nèi)的靜態(tài)圖像及變焦連射框20b內(nèi)的靜態(tài)圖像,并分別存儲(chǔ)在緩沖存儲(chǔ)器中。 之后,專利文獻(xiàn)1的攝像裝置將通過(guò)撮影處理而獲得的靜態(tài)圖像及所生成的靜態(tài)圖像分別存儲(chǔ)在閃存(flash memory)中。此外,專利文獻(xiàn)1的攝像裝置將通過(guò)上述處理而獲得的多個(gè)靜態(tài)圖像作為一組圖像保存。像這樣,專利文獻(xiàn)1的攝像裝置通過(guò)用戶的1次快門按下動(dòng)作,獲得構(gòu)圖互不相同的多個(gè)靜態(tài)圖像。
此外,作為從原圖像中剪切部分圖像并進(jìn)行編碼的運(yùn)動(dòng)圖像攝像裝置,例如有專利文獻(xiàn)2中記載的以往的運(yùn)動(dòng)圖像攝像裝置。圖14是表示專利文獻(xiàn)2中記載的以往的攝像裝置的處理電路結(jié)構(gòu)的方框圖。專利文獻(xiàn)2的攝像裝置用基本圖像編碼前處理部22對(duì)基本圖像進(jìn)行塊分割,并按照參考?jí)K記述表中所記述的規(guī)則,對(duì)每塊求出含有最好的運(yùn)動(dòng)向量及正交變換系數(shù)的前處理數(shù)據(jù)并積累下來(lái)。部分圖像位置輸入部23輸入從基本圖像中剪切的部分圖像的初始位置及其運(yùn)動(dòng)速度。部分原圖像生成部M決定部分圖像的尺寸及其位置。此外,將該位置決定為以塊或宏塊為單位離開(kāi)基本圖像的基準(zhǔn)位置。部分圖像編碼部25通過(guò)從基本圖像編碼前處理部22中取得與部分圖像有關(guān)的前處理數(shù)據(jù),對(duì)其進(jìn)行量化及可變長(zhǎng)度編碼之后進(jìn)行傳輸,來(lái)減輕編碼處理的負(fù)載。
專利文獻(xiàn)1 日本專利文獻(xiàn)特開(kāi)2006-211489號(hào)公報(bào) 專利文獻(xiàn)2 日本專利文獻(xiàn)特開(kāi)2005-101720號(hào)公報(bào) 如上所述,專利文獻(xiàn)1的技術(shù)方案在用戶進(jìn)行1次快門按下動(dòng)作時(shí),取得多個(gè)靜態(tài)圖像。這里,考慮到將專利文獻(xiàn)1的技術(shù)方案適用于運(yùn)動(dòng)圖像攝像。此時(shí),是在不考慮構(gòu)成運(yùn)動(dòng)圖像的多個(gè)靜態(tài)圖像的相互關(guān)系的情況下,簡(jiǎn)單地取得多個(gè)動(dòng)態(tài)圖像。因此,運(yùn)動(dòng)圖像的數(shù)據(jù)量非常多。其結(jié)果是,在將專利文獻(xiàn)1的技術(shù)方案適用于運(yùn)動(dòng)圖像時(shí),需要極大的記錄容量,并且在經(jīng)由網(wǎng)絡(luò)等實(shí)時(shí)地發(fā)送所取得的運(yùn)動(dòng)圖像時(shí),需要較高的傳輸率。
專利文獻(xiàn)2的技術(shù)方案是在剪切原運(yùn)動(dòng)圖像中的部分圖像時(shí),減輕編碼的處理負(fù)載,而不是降低所剪切的部分圖像的數(shù)據(jù)量。由此可知,在通過(guò)專利文獻(xiàn)2的技術(shù)方案剪切多個(gè)區(qū)域時(shí),需要極大的記錄容量,并且,在經(jīng)由網(wǎng)絡(luò)等實(shí)時(shí)地發(fā)送所取得的運(yùn)動(dòng)圖像時(shí), 需要較高的傳輸率。
發(fā)明內(nèi)容
故而,為了解決上述課題,本發(fā)明的目的在于提供一種能夠削減在向記錄部記錄通過(guò)剪切運(yùn)動(dòng)圖像中的多個(gè)區(qū)域而成的記錄運(yùn)動(dòng)圖像時(shí)所需的記錄容量,并且,能夠降低傳輸記錄運(yùn)動(dòng)圖像所需的傳輸率的運(yùn)動(dòng)圖像的攝像裝置、攝像方法及集成電路。
本發(fā)明面向于運(yùn)動(dòng)圖像攝像裝置。為了達(dá)到上述目的,本發(fā)明的運(yùn)動(dòng)圖像攝像裝置包括攝像部和圖像處理部,攝像部拍攝被攝體,取得由多個(gè)幀構(gòu)成的攝像運(yùn)動(dòng)圖像,圖像處理部以每幀對(duì)攝像運(yùn)動(dòng)圖像進(jìn)行加工,制作記錄運(yùn)動(dòng)圖像,圖像處理部包括被攝體指定單元、被攝體剪切圖像設(shè)定單元、被攝體追蹤單元、第1剪切圖像設(shè)定單元、第2剪切圖像設(shè)定單元、第1數(shù)據(jù)量計(jì)算單元、第2數(shù)據(jù)量計(jì)算單元、比較單元以及選擇單元,該被攝體指定單元按照用戶的指示來(lái)指定攝像運(yùn)動(dòng)圖像中的多個(gè)被攝體像,該被攝體剪切圖像設(shè)定單元設(shè)定多個(gè)被攝體剪切圖像,該多個(gè)被攝體剪切圖像是從攝像運(yùn)動(dòng)圖像中剪切由被攝體指定單元所指定的多個(gè)被攝體像的每一個(gè)被攝體像而得到的圖像,該被攝體追蹤單元追蹤由被攝體指定單元所指定的多個(gè)被攝體像,并追隨該多個(gè)被攝體像以每幀為單位使多個(gè)被攝體剪切圖像移動(dòng),該第1剪切圖像設(shè)定單元對(duì)于每幀將多個(gè)被攝體剪切圖像設(shè)定為第1剪切圖像,該第2剪切圖像設(shè)定單元對(duì)于每幀將圍繞多個(gè)被攝體剪切圖像的一個(gè)圖像設(shè)定為第 2剪切圖像,該第1數(shù)據(jù)量計(jì)算單元對(duì)于每幀計(jì)算第1剪切圖像的數(shù)據(jù)量,該第2數(shù)據(jù)量計(jì)算單元對(duì)于每幀計(jì)算第2剪切圖像的數(shù)據(jù)量,該比較單元對(duì)于每幀比較第1剪切圖像的數(shù)據(jù)量與第2剪切圖像的數(shù)據(jù)量,該選擇單元對(duì)于每幀將第1剪切圖像和第2剪切圖像中的、 在比較單元中判斷為數(shù)據(jù)量較小的圖像選擇為記錄運(yùn)動(dòng)圖像。
因此,本發(fā)明的運(yùn)動(dòng)圖像攝像裝置能夠有效地削減記錄運(yùn)動(dòng)圖像的數(shù)據(jù)量。
此外,本發(fā)明的運(yùn)動(dòng)圖像攝像裝置還可以包括對(duì)記錄運(yùn)動(dòng)圖像進(jìn)行記錄的記錄部。
此時(shí),本發(fā)明的運(yùn)動(dòng)圖像攝像裝置能夠削減記錄部的記錄容量。
此外,圖像處理部也可以在制作記錄運(yùn)動(dòng)圖像的同時(shí),將該記錄運(yùn)動(dòng)圖像中制作完的部分發(fā)送給其它設(shè)備。
此時(shí),本發(fā)明的運(yùn)動(dòng)圖像攝像裝置能夠在經(jīng)由網(wǎng)絡(luò)等對(duì)記錄運(yùn)動(dòng)圖像進(jìn)行傳輸?shù)葧r(shí),降低數(shù)據(jù)的傳輸率。
此外,被攝體剪切圖像設(shè)定單元所設(shè)定的多個(gè)被攝體剪切圖像也可以都是方形, 第2剪切圖像設(shè)定單元所設(shè)定的第2剪切圖像也可以是方形。
此外,第2剪切圖像設(shè)定單元所設(shè)定的第2剪切圖像最好不包含不屬于多個(gè)被攝體剪切圖像中的任何一個(gè)的區(qū)域。
因此,本發(fā)明的運(yùn)動(dòng)圖像攝像裝置能夠更有效地削減記錄運(yùn)動(dòng)圖像的數(shù)據(jù)量。
此外,被攝體剪切圖像設(shè)定單元所設(shè)定的多個(gè)被攝體剪切圖像也可以都是方形, 選擇單元也可以在選擇了第1剪切圖像時(shí),進(jìn)一步對(duì)多個(gè)被攝體剪切圖像中的至少一個(gè)進(jìn)行擴(kuò)大或縮小,并將多個(gè)被攝體剪切圖像排列加工為一個(gè)方形第1剪切圖像。
因此,能夠提高用戶觀賞第1剪切圖像時(shí)的觀賞度。
此外,上述的圖像處理部所包括的各個(gè)單元實(shí)現(xiàn)構(gòu)成圖2、圖8及圖11的流程圖 (之后將詳述)的以下步驟的處理。被攝體指定單元實(shí)現(xiàn)步驟S102的處理。被攝體剪切圖像設(shè)定單元實(shí)現(xiàn)步驟S103的處理。被攝體追蹤單元實(shí)現(xiàn)步驟S104的處理。第1剪切圖像設(shè)定單元實(shí)現(xiàn)步驟S106的處理。第2剪切圖像設(shè)定單元實(shí)現(xiàn)步驟S108及S208的處理。 第1數(shù)據(jù)量計(jì)算單元實(shí)現(xiàn)步驟S107的處理。第2數(shù)據(jù)量計(jì)算單元實(shí)現(xiàn)步驟S109的處理。 比較單元實(shí)現(xiàn)步驟SllO及S210的處理。選擇單元實(shí)現(xiàn)步驟Sill、S112及S312的處理。
此外,本發(fā)明也涉及一種運(yùn)動(dòng)圖像攝像方法。為了達(dá)到上述目的,本發(fā)明的運(yùn)動(dòng)圖像攝像方法包括以下步驟攝像步驟,拍攝被攝體,并取得由多個(gè)幀構(gòu)成的攝像運(yùn)動(dòng)圖像; 以及圖像處理步驟,以每幀為單位對(duì)攝像運(yùn)動(dòng)圖像進(jìn)行加工,制作記錄運(yùn)動(dòng)圖像,圖像處理步驟包括以下步驟被攝體指定步驟,按照用戶的指示,來(lái)指定攝像運(yùn)動(dòng)圖像中的多個(gè)被攝體像;被攝體剪切圖像設(shè)定步驟,設(shè)定多個(gè)被攝體剪切圖像,該多個(gè)被攝體剪切圖像是從攝像運(yùn)動(dòng)圖像中剪切在被攝體指定步驟中所指定的多個(gè)被攝體像的每一個(gè)被攝體像而得到的圖像;被攝體追蹤步驟,追蹤在被攝體指定步驟中所指定的多個(gè)被攝體像,并追隨該多個(gè)被攝體像以每幀為單位使多個(gè)被攝體剪切圖像移動(dòng);第1剪切圖像設(shè)定步驟,對(duì)于每幀將多個(gè)被攝體剪切圖像設(shè)定為第1剪切圖像;第2剪切圖像設(shè)定步驟,對(duì)于每幀將圍繞多個(gè)被攝體剪切圖像的一個(gè)圖像設(shè)定為第2剪切圖像;第1數(shù)據(jù)量計(jì)算步驟,對(duì)于每幀計(jì)算第1剪切圖像的數(shù)據(jù)量;第2數(shù)據(jù)量計(jì)算步驟,對(duì)于每幀計(jì)算第2剪切圖像的數(shù)據(jù)量;比較步驟, 對(duì)于每幀比較第1剪切圖像的數(shù)據(jù)量與第2剪切圖像的數(shù)據(jù)量;以及選擇步驟,對(duì)于每幀將第1剪切圖像和第2剪切圖像中的、在比較步驟中判斷為數(shù)據(jù)量較小的圖像選擇為記錄運(yùn)動(dòng)圖像。
此外,本發(fā)明也涉及裝入運(yùn)動(dòng)圖像攝像裝置的集成電路,該運(yùn)動(dòng)圖像攝像裝置拍攝被攝體,對(duì)所取得的攝像運(yùn)動(dòng)圖像進(jìn)行加工,制作記錄運(yùn)動(dòng)圖像。為了達(dá)到上述目的,本發(fā)明的集成電路執(zhí)行作為信號(hào)處理/AD轉(zhuǎn)換電路、修正電路、圖像處理部以及控制部的功能,該信號(hào)處理/AD轉(zhuǎn)換電路對(duì)拍攝被攝體的CXD (Charge Coupled Device 電荷耦合器件)的輸出信號(hào)進(jìn)行噪聲降低處理及增益控制,由模擬信號(hào)轉(zhuǎn)換成數(shù)字信號(hào),該修正電路對(duì)信號(hào)處理/AD轉(zhuǎn)換電路的輸出信號(hào)進(jìn)行圖像修正處理,來(lái)獲得攝像運(yùn)動(dòng)圖像,該圖像處理部按照用戶的指示來(lái)指定在修正電路中所獲得的攝像運(yùn)動(dòng)圖像中的多個(gè)被攝體像,設(shè)定從該攝像運(yùn)動(dòng)圖像中剪切該多個(gè)被攝體像的每一個(gè)被攝體像而得到的多個(gè)被攝體剪切圖像,并追蹤該多個(gè)被攝體像,追隨該多個(gè)被攝體像以每幀為單位使該多個(gè)被攝體剪切圖像移動(dòng)之后,對(duì)于每幀將該多個(gè)被攝體剪切圖像設(shè)定為第1剪切圖像,將圍繞該多個(gè)被攝體剪切圖像的一個(gè)圖像設(shè)定為第2剪切圖像,計(jì)算該第1剪切圖像的數(shù)據(jù)量及該第2剪切圖像的數(shù)據(jù)量并進(jìn)行比較,將數(shù)據(jù)量較小的一方的圖像選擇為記錄運(yùn)動(dòng)圖像,該控制部至少控制信號(hào)處理/AD轉(zhuǎn)換電路、修正電路及圖像處理部。
(發(fā)明的效果) 如上所述,根據(jù)本發(fā)明的攝像裝置、攝像方法及集成電路,能夠削減在向記錄部記錄通過(guò)剪切運(yùn)動(dòng)圖像中的多個(gè)區(qū)域而成的記錄運(yùn)動(dòng)圖像時(shí)所需的記錄容量,并且,能夠降低傳輸記錄運(yùn)動(dòng)圖像所需的傳輸率。
圖1是表示本發(fā)明的第一實(shí)施方式所涉及的攝像裝置100的結(jié)構(gòu)例的方框圖。
圖2是用于說(shuō)明到拍攝被攝體,將運(yùn)動(dòng)圖像記錄在記錄部中為止本發(fā)明的攝像裝置100所進(jìn)行的特征處理的流程圖。
圖3是表示在圖2的步驟101中被拍攝的實(shí)時(shí)運(yùn)動(dòng)圖像40的一個(gè)例子的圖。
圖4是用于說(shuō)明圖3所示的對(duì)象幀40中沒(méi)有圖像重疊部分46時(shí)的圖。
圖5是用于說(shuō)明圖3所示的對(duì)象幀40中存在有圖像重疊部分46時(shí)的圖。
圖6是用于說(shuō)明圖3所示的對(duì)象幀40中存在有圖像重疊部分46時(shí)的圖。
圖7是用于說(shuō)明在兩個(gè)人的被攝體像44及45互相錯(cuò)過(guò)時(shí)是否將第1及第2剪切圖像中的任一個(gè)作為記錄運(yùn)動(dòng)圖像記錄下來(lái)的圖。
圖8是用于說(shuō)明到拍攝被攝體,將運(yùn)動(dòng)圖像記錄在記錄部中為止本發(fā)明的攝像裝置200所進(jìn)行的特征處理的流程圖。
圖9是用于說(shuō)明在圖8的步驟S208中DSP14-2所設(shè)定的第2剪切圖像的圖。
圖10是用于說(shuō)明在圖8的步驟S208中DSP14-2所設(shè)定的第2剪切圖像的圖。
圖11是到拍攝被攝體,將運(yùn)動(dòng)圖像記錄在記錄部中為止本發(fā)明的攝像裝置300所進(jìn)行的特征處理的流程圖。
圖12是用于說(shuō)明在圖11的步驟S310中DSP14-3所進(jìn)行的加工的圖。
圖13是表示以往的攝像裝置所進(jìn)行的構(gòu)圖包圍曝光攝影的圖。
圖14是表示以往的攝像裝置的處理電路結(jié)構(gòu)的方框圖。
(附圖標(biāo)記說(shuō)明) 1 鏡頭 2CCD (Charge Coupled Device 電荷耦合器件) 3信號(hào)處理/AD轉(zhuǎn)換電路 4修正電路 5SDRAM(Synchronous Dynamic Random Access Memory :同步動(dòng)態(tài)隨機(jī)存取存儲(chǔ)器) 6非易失存儲(chǔ)器 7存儲(chǔ)卡接口 8存儲(chǔ)卡 9操作部 10顯示部 11定時(shí)發(fā)生器 12鏡頭驅(qū)動(dòng)部 13CPU(Central Processing Unit:中央處理器) 14、14-2、14-3DSP (Digital Signal Processing 數(shù)字信號(hào)處理) I5 總線 16網(wǎng)絡(luò)接口 20a、20b變焦連拍框 21基本圖像輸入部 22基本圖像編碼前處理部 23部分圖像位置輸入部 M部分原圖像生成部 25部分圖像編碼部 40實(shí)時(shí)運(yùn)動(dòng)圖像(或?qū)ο髱? 41、42、43被攝體剪切圖像 44、45被攝體像 46圖像重疊部分 47 49擴(kuò)展區(qū)域 100、200、300 攝像裝置
具體實(shí)施例方式以下,參照附圖對(duì)本發(fā)明的各個(gè)實(shí)施方式進(jìn)行說(shuō)明。
(第一實(shí)施方式) 圖1是表示第一實(shí)施方式所涉及的攝像裝置100的結(jié)構(gòu)例的方框圖。如圖1所示,攝像裝置100具備鏡頭1、CCD (Charge Coupled Device) 2、信號(hào)處理/AD轉(zhuǎn)換電路3、 修正電路 4、SDRAM (Synchronous DynamicRandom Access Memory) 5、非易失存儲(chǔ)器 6、存儲(chǔ)卡接口 7、存儲(chǔ)卡8、操作部9、顯示部10、定時(shí)發(fā)生器11、鏡頭驅(qū)動(dòng)部12、CPU13、DSP14以及網(wǎng)絡(luò)接口 16。這里,總線15連接上述結(jié)構(gòu)要素中需要相互連接的結(jié)構(gòu)要素。此外,由于存儲(chǔ)卡8能夠從攝像裝置100上拆卸下來(lái),因此也可以認(rèn)為攝像裝置100中不含有存儲(chǔ)卡8。 此外,也可以將非易失存儲(chǔ)器6、存儲(chǔ)卡接口 7及存儲(chǔ)卡8總稱為記錄部。此外,也可以將鏡頭1、(XD2、信號(hào)處理/AD轉(zhuǎn)換電路3、修正電路4、定時(shí)發(fā)生器11及鏡頭驅(qū)動(dòng)部12總稱為攝像部。此外,也可以將CPU13稱為控制部。此外,也可以將DSP14稱為圖像處理部。此外,也可以將SDRAM5稱為暫時(shí)存儲(chǔ)部。
首先,參照?qǐng)D1對(duì)攝像裝置100的動(dòng)作進(jìn)行簡(jiǎn)單說(shuō)明。鏡頭1使被攝體(未圖示) 的像(以下,稱為被攝體像)成像于CCD2。CCD2通過(guò)將作為光信號(hào)成像的被攝體像轉(zhuǎn)換為電信號(hào),來(lái)拍攝被攝體。信號(hào)處理/AD轉(zhuǎn)換電路3對(duì)從CCD2輸出的電信號(hào)進(jìn)行噪聲降低處理及增益控制,將模擬信號(hào)轉(zhuǎn)換為數(shù)字信號(hào)。修正電路4對(duì)從信號(hào)處理/AD轉(zhuǎn)換電路3輸出的數(shù)字信號(hào)進(jìn)行白平衡(white balance)、灰度校正(gamma correction)、彩色校正等圖像修正處理。通過(guò)上述處理,獲得被攝體的實(shí)時(shí)的運(yùn)動(dòng)圖像(以下稱為實(shí)時(shí)運(yùn)動(dòng)圖像)的信號(hào)。SDRAM5依次以每幀為單位暫時(shí)存儲(chǔ)實(shí)時(shí)運(yùn)動(dòng)圖像的信號(hào)。這里,幀是構(gòu)成運(yùn)動(dòng)圖像的靜止畫??芍捎趯?shí)時(shí)運(yùn)動(dòng)圖像由多個(gè)幀構(gòu)成,所以也可以說(shuō)SDRAM5暫時(shí)存儲(chǔ)實(shí)時(shí)運(yùn)動(dòng)圖像。DSP14對(duì)存儲(chǔ)在SDRAM5中的實(shí)時(shí)運(yùn)動(dòng)圖像進(jìn)行之后將要詳述的特征處理,將其記錄在非易失存儲(chǔ)器6中,或經(jīng)由存儲(chǔ)卡接口 7記錄在存儲(chǔ)卡8中,或經(jīng)由網(wǎng)絡(luò)接口 16通過(guò)網(wǎng)絡(luò)(未圖示)等發(fā)送給其他設(shè)備(未圖示)。定時(shí)發(fā)生器11對(duì)(XD2向信號(hào)處理/AD轉(zhuǎn)換電路3輸出電信號(hào)的定時(shí)進(jìn)行控制。鏡頭驅(qū)動(dòng)部12通過(guò)控制鏡頭1的位置,來(lái)實(shí)現(xiàn)攝像裝置100的聚焦動(dòng)作及變焦動(dòng)作。顯示部10顯示暫時(shí)存儲(chǔ)在SDRAM5中的實(shí)時(shí)運(yùn)動(dòng)圖像。 此外,顯示部10顯示記錄在存儲(chǔ)卡8、非易失存儲(chǔ)器6或其他設(shè)備中的運(yùn)動(dòng)圖像。操作部9 是攝像開(kāi)始按鈕、錄像按鈕及光標(biāo)按鈕等,被輸入來(lái)自用戶的指示。此外,CPU13控制上述的攝像裝置100所進(jìn)行的一連串動(dòng)作。
圖2是用于說(shuō)明到拍攝被攝體,將運(yùn)動(dòng)圖像記錄在記錄部中為止攝像裝置100所進(jìn)行的特征處理的流程圖。以下,參照?qǐng)D2對(duì)攝像裝置100的動(dòng)作進(jìn)行說(shuō)明。
在用戶通過(guò)對(duì)操作部9進(jìn)行操作開(kāi)始攝像動(dòng)作時(shí),首先,在步驟SlOO中,SDRAM5依次以每幀為單位暫時(shí)存儲(chǔ)被拍攝的實(shí)時(shí)運(yùn)動(dòng)圖像,顯示部10顯示SDRAM5所存儲(chǔ)的實(shí)時(shí)運(yùn)動(dòng)圖像。
其次,在步驟SlOl中,用戶通過(guò)一邊觀看顯示部10所顯示的實(shí)時(shí)運(yùn)動(dòng)圖像,一邊對(duì)攝像裝置100的攝像方向進(jìn)行調(diào)節(jié),來(lái)使攝像裝置100將期望記錄成運(yùn)動(dòng)圖像的多個(gè)被攝體像作為實(shí)時(shí)運(yùn)動(dòng)圖像來(lái)拍攝。此外,被攝體例如是人物、動(dòng)物、機(jī)動(dòng)車、植物、建筑物等。
圖3是表示在圖2的步驟101中所拍攝的實(shí)時(shí)運(yùn)動(dòng)圖像40的一個(gè)例子的圖。以下,用圖3進(jìn)行說(shuō)明。
其次,在步驟S102中,DSP14到得到用戶指示為止處于待機(jī)狀態(tài),按照用戶指示, 來(lái)指定在步驟SlOl中所拍攝的實(shí)時(shí)運(yùn)動(dòng)圖像40中的多個(gè)被攝體像44及45。此時(shí),用戶一邊看顯示部10所顯示的實(shí)時(shí)運(yùn)動(dòng)圖像40,一邊用操作部9來(lái)進(jìn)行指定多個(gè)被攝體像44及 45的指示。在圖3中,作為一個(gè)例子,指定作為人像的被攝體像44以及作為人像的被攝體像45。
其次,在步驟S103中,DSP14將包含所指定的被攝體像44的被攝體剪切圖像41以及包含所指定的被攝體像45的被攝體剪切圖像42設(shè)定在實(shí)時(shí)運(yùn)動(dòng)圖像40中。這里,DSP14 通過(guò)對(duì)實(shí)時(shí)運(yùn)動(dòng)圖像40附加位置信息,來(lái)設(shè)定被攝體剪切圖像41及42。
此外,被攝體剪切圖像41及42既可以分別包含所有被攝體像44及45,也可以包含一部分(面部等)。此外,被攝體剪切圖像41及42既可以用實(shí)時(shí)運(yùn)動(dòng)圖像40中以用戶所指定的點(diǎn)為中心的方形來(lái)設(shè)定,也可以用其他公知的方法來(lái)設(shè)定。此外,被攝體剪切圖像 41及42也可以是多角形、橢圓形、圓形以及任意形狀等其他形狀。此外,多個(gè)被攝體剪切圖像41及42的大小、形狀也可以互不相同。此外,也可以指定3個(gè)以上的被攝體像,并且分別設(shè)定3個(gè)以上的被攝體剪切圖像。
其次,在步驟S104中,DSP14識(shí)別在步驟S102中指定的多個(gè)被攝體像44及45,并追蹤該多個(gè)被攝體像44及45。然后,DSP14追隨多個(gè)被攝體像44及45的運(yùn)動(dòng)來(lái)使被攝體剪切圖像41及42的位置在實(shí)時(shí)運(yùn)動(dòng)圖像40內(nèi)移動(dòng),以使被攝體剪切圖像41始終包含被攝體像44,并使被攝體剪切圖像42始終包含被攝體像45。此外,為了識(shí)別被攝體像44及 45并進(jìn)行追蹤,例如,可以采用模式匹配等公知的技術(shù)。
上述的步驟SlOO S104是錄像準(zhǔn)備動(dòng)作。以下,對(duì)作為錄像動(dòng)作的步驟S105 S115進(jìn)行說(shuō)明。
在步驟S105中,DSP14到檢測(cè)出用戶按下錄像按鈕為止處于待機(jī)狀態(tài),在檢測(cè)出錄像按鈕被按下時(shí),處理進(jìn)入步驟S106。
這里,下述步驟S106 Sl 15的動(dòng)作是對(duì)構(gòu)成實(shí)時(shí)運(yùn)動(dòng)圖像40的每幀進(jìn)行的。具體而言,對(duì)構(gòu)成實(shí)時(shí)運(yùn)動(dòng)圖像40的多個(gè)幀(靜止畫)的每一張進(jìn)行步驟S106 S115的處理。于是,在以下的步驟S106 S115的說(shuō)明中,將圖3所示的實(shí)時(shí)運(yùn)動(dòng)圖像40看作處理對(duì)象的幀40 (以下,稱為對(duì)象幀40),用圖3進(jìn)行說(shuō)明。
在步驟S106中,DSP14從在步驟SlOO中暫時(shí)存儲(chǔ)在SDRAM5中的對(duì)象幀40中分別提取被攝體剪切圖像41及42,并將其設(shè)定為第1剪切圖像。此時(shí),DSP14使用附加在對(duì)象幀40的被攝體剪切圖像41及42的位置信息。
其次,在步驟S107中,DSP14計(jì)算在步驟S106中設(shè)定的第1剪切圖像的數(shù)據(jù)量。 例如,DSP14通過(guò)計(jì)算被攝體剪切圖像41的面積及被攝體剪切圖像42的面積并進(jìn)行合計(jì), 來(lái)計(jì)算第1剪切圖像的數(shù)據(jù)量。此外,例如,被攝體剪切圖像41的面積是可以用構(gòu)成被攝體剪切圖像41的像素?cái)?shù)來(lái)計(jì)算的。被攝體剪切圖像42的面積也可以同樣計(jì)算。
其次,在步驟S108中,DSP14提取作為圍繞被攝體剪切圖像41及42的1個(gè)圖像的方形被攝體剪切圖像43,并將其設(shè)定為第2剪切圖像。
其次,在步驟S109中,DSP14計(jì)算在步驟S108中所設(shè)定的第2剪切圖像的數(shù)據(jù)量。 例如,DSP14通過(guò)計(jì)算第2剪切圖像的面積,來(lái)計(jì)算第2剪切圖像的數(shù)據(jù)量。此外,例如,第 2剪切圖像的面積是可以用構(gòu)成第2剪切圖像的像素?cái)?shù)來(lái)計(jì)算的。此外,第2剪切圖像也可以是多角形、橢圓形、圓形以及任意形狀等其他形狀。這里,第2剪切圖像(被攝體剪切圖像43)包含擴(kuò)展區(qū)域47及48,該擴(kuò)展區(qū)域47及48是不屬于被攝體剪切圖像41及42中的任一圖像的區(qū)域。此外,被攝體剪切圖像41與被攝體剪切圖像42重疊的部分被稱為圖像重疊部分46。
圖4是用于說(shuō)明圖3所示的對(duì)象幀40中不存在圖像重疊部分46時(shí)的圖。此夕卜, 圖4的對(duì)象幀40包含擴(kuò)展區(qū)域49。圖5及圖6是用于說(shuō)明圖3所示的對(duì)象幀40中存在圖像重疊部分46時(shí)的圖。以下,用圖3 圖6對(duì)步驟SllO進(jìn)行說(shuō)明。
在步驟SllO中,DSP14判斷在步驟S107中算出的第1剪切圖像的數(shù)據(jù)量是否大于步驟S109中算出的第2剪切圖像的數(shù)據(jù)量。例如,能夠通過(guò)比較第1剪切圖像的面積與第2剪切圖像的面積,來(lái)進(jìn)行步驟SllO中的判斷。具體而言,如圖6所示,在第1剪切圖像的面積(被攝體剪切圖像41的面積與被攝體剪切圖像42的面積的總和)大于第2剪切圖像的面積(被攝體剪切圖像43的面積)時(shí),判斷為第1剪切圖像的數(shù)據(jù)量大于第2剪切圖像的數(shù)據(jù)量,處理進(jìn)入步驟S111。另一方面,如圖4及圖5所示,在第1剪切圖像的面積小于第2剪切圖像的面積時(shí),判斷為第1剪切圖像的數(shù)據(jù)量小于第2剪切圖像的數(shù)據(jù)量,處理進(jìn)入步驟S112。此外,在步驟SllO中,在判斷出第1剪切圖像的面積與第2剪切圖像的面積相同時(shí),例如,可以使處理進(jìn)入預(yù)先設(shè)定的步驟。
在步驟Slll中,DSP14選擇在步驟S108中所設(shè)定的第2剪切圖像。換句話說(shuō),在步驟Slll中,DSP14選擇被攝體剪切圖像43。然后,處理進(jìn)入步驟Sl 13。
在步驟S112中,DSP14選擇在步驟S106中所設(shè)定的第1剪切圖像。換句話說(shuō),在步驟S112中,DSP14選擇被攝體剪切圖像41及被攝體剪切圖像42。然后,處理進(jìn)入步驟 S113。
在步驟Sl 13中,DSP14將步驟Slll或步驟Sl 12中所選擇的剪切圖像作為構(gòu)成應(yīng)該記錄下來(lái)的運(yùn)動(dòng)圖像(以下,稱為記錄運(yùn)動(dòng)圖像)的幀記錄在非易失存儲(chǔ)器6或存儲(chǔ)卡 8中。更具體而言,在處理從步驟Slll進(jìn)入步驟S113時(shí),DSP14將所選擇的第2剪切圖像 (被攝體剪切圖像4 作為構(gòu)成記錄運(yùn)動(dòng)圖像的1個(gè)幀記錄在非易失存儲(chǔ)器6或存儲(chǔ)卡8中。此外,在處理從步驟S112進(jìn)入步驟S113時(shí),DSP14將所選擇的第1剪切圖像(被攝體剪切圖像41及42)作為構(gòu)成記錄運(yùn)動(dòng)圖像的1個(gè)幀記錄在非易失存儲(chǔ)器6或存儲(chǔ)卡8中。 這里,DSP14也可以將被攝體剪切圖像41及42分別作為切片(slice)處理,既可以將其作為1個(gè)文件來(lái)記錄,也可以作為不同的文件分別記錄下來(lái)。在將被攝體剪切圖像41及42 作為不同的文件分別記錄下來(lái)時(shí),最好使各個(gè)文件相關(guān)聯(lián)。這樣一來(lái),在以后再現(xiàn)記錄運(yùn)動(dòng)圖像時(shí),能夠較容易地使被攝體像44及45的運(yùn)動(dòng)同步。此外,將第1及第2剪切圖像記錄在非易失存儲(chǔ)器6或存儲(chǔ)卡8中的哪一個(gè),既可以由用戶事先決定,也可以作為初始設(shè)定來(lái)事先決定。
其次,在步驟5114中,05 14在50肌115中所存儲(chǔ)的下一個(gè)對(duì)象幀40中識(shí)別出在步驟S102中所指定的多個(gè)被攝體像44及45,并追蹤該多個(gè)被攝體像44及45。然后,DSP14 在該下一個(gè)對(duì)象幀40中追隨多個(gè)被攝體像44及45的運(yùn)動(dòng)來(lái)移動(dòng)被攝體剪切圖像41及42 的位置,以使被攝體剪切圖像41始終包含被攝體像44,并使被攝體剪切圖像42始終包含被攝體像45。
其次,在步驟S115中,DSP14檢測(cè)用戶是否解除了錄像按鈕。在沒(méi)有檢測(cè)出錄像按鈕被解除時(shí),繼續(xù)進(jìn)行錄像動(dòng)作,處理返回步驟S106。在檢測(cè)出錄像按鈕被解除時(shí),錄像動(dòng)作結(jié)束,攝像結(jié)束。
圖7是用于說(shuō)明在兩個(gè)人的被攝體像44及45互相錯(cuò)過(guò)時(shí)是否將第1及第2剪切圖像中的任一個(gè)作為記錄運(yùn)動(dòng)圖像記錄下來(lái)的圖。在圖7中,(a) (e)分別是對(duì)象幀40, 各個(gè)對(duì)象幀40沿著時(shí)間推移,按照(a)、(b)、(c)、(d)及(e)的順序被進(jìn)行處理。首先,判斷出在(a)及(b)的對(duì)象幀40中第1剪切圖像的數(shù)據(jù)量并不大于第2剪切圖像的數(shù)據(jù)量 (步驟Sl 10),選擇第1剪切圖像(步驟Sl 12),并將該第1剪切圖像作為記錄運(yùn)動(dòng)圖像來(lái)記錄(步驟S113)。其次,判斷出在(c)的對(duì)象幀40中第1剪切圖像的數(shù)據(jù)量大于第2剪切圖像的數(shù)據(jù)量(步驟S110),選擇第2剪切圖像(步驟S111),并將該第2剪切圖像作為記錄運(yùn)動(dòng)圖像來(lái)記錄(步驟S113)。其次,判斷出在(d)及(e)的對(duì)象幀40中,第1剪切圖像的數(shù)據(jù)量并不大于第2剪切圖像的數(shù)據(jù)量(步驟S110),選擇第1剪切圖像(步驟S112),將該第1剪切圖像作為記錄運(yùn)動(dòng)圖像來(lái)記錄(步驟S113)。像這樣,在圖7的例子中,在(a)、 (b)、(d)、(e)的對(duì)象幀40中選擇且記錄第1剪切圖像,在(c)的對(duì)象幀40中選擇且記錄第2剪切圖像。其結(jié)果是,對(duì)記錄部始終進(jìn)行較小數(shù)據(jù)量的記錄。
如上所述,第一實(shí)施方式所涉及的攝像裝置100在構(gòu)成實(shí)時(shí)運(yùn)動(dòng)圖像的幀40中指定多個(gè)被攝體像44及45,設(shè)定包含各個(gè)被攝體像44及45的被攝體剪切圖像41及42,追蹤多個(gè)被攝體像44及45來(lái)移動(dòng)被攝體剪切圖像41及42。然后,在錄像動(dòng)作中,對(duì)于每個(gè)對(duì)象幀40比較多個(gè)被攝體剪切圖像41及42的合計(jì)數(shù)據(jù)量(第1剪切圖像的數(shù)據(jù)量)與圍繞多個(gè)被攝體剪切圖像41及42的1個(gè)被攝體剪切圖像43的數(shù)據(jù)量(第2剪切圖像的數(shù)據(jù)量)。然后,在第1剪切圖像的數(shù)據(jù)量大于第2剪切圖像的數(shù)據(jù)量時(shí),將第2剪切數(shù)據(jù)量記錄在作為記錄部的存儲(chǔ)卡8等中。在第1剪切圖像的數(shù)據(jù)量小于第2剪切圖像的數(shù)據(jù)量時(shí),將第1剪切圖像記錄在作為記錄部的存儲(chǔ)卡8等中。像這樣,第一實(shí)施方式所涉及的攝像裝置100對(duì)記錄部始終進(jìn)行較小數(shù)據(jù)量的記錄。
由此,第一實(shí)施方式所涉及的攝像裝置100能夠削減對(duì)實(shí)時(shí)運(yùn)動(dòng)圖像進(jìn)行加工且將其作為記錄運(yùn)動(dòng)圖像來(lái)記錄在記錄部中時(shí)所需的記錄容量。其結(jié)果是,第一實(shí)施方式所涉及的攝像裝置100與以往的攝像裝置相比,能夠削減記錄部的容量。此外,由于第一實(shí)施方式所涉及的攝像裝置100在經(jīng)由網(wǎng)絡(luò)接口 16將記錄在記錄部中的記錄運(yùn)動(dòng)圖像發(fā)送給其他設(shè)備時(shí),能夠削減記錄運(yùn)動(dòng)圖像的數(shù)據(jù)量,所以能夠降低數(shù)據(jù)的傳輸率。
并且,由于第一實(shí)施方式所涉及的攝像裝置100在經(jīng)由網(wǎng)絡(luò)等將記錄運(yùn)動(dòng)圖像實(shí)時(shí)地發(fā)送給其他設(shè)備時(shí)(在制作記錄運(yùn)動(dòng)圖像的同時(shí),將記錄運(yùn)動(dòng)圖像中已制作完的部分發(fā)送給其他設(shè)備時(shí)),能夠削減記錄運(yùn)動(dòng)圖像的數(shù)據(jù)量,所以能夠降低數(shù)據(jù)的傳輸率。此時(shí), 在圖2的步驟S113中,DSP14用網(wǎng)絡(luò)接口 16經(jīng)由網(wǎng)絡(luò)等將文件化的圖像發(fā)送給其他設(shè)備。
此外,在圖2的步驟S113中,圖像的數(shù)據(jù)既可以被壓縮后再記錄,也可以不被壓縮而記錄。作為壓縮算法,最好是以切片(slice)為單位的壓縮方法(H. 264/AVC規(guī)格)。
此外,也可以在圖2中,在步驟S106及S107的處理之前進(jìn)行步驟S108及S109的處理。
此外,以上,在圖2的步驟SllO中,DSP14直接比較了第1剪切圖像的數(shù)據(jù)量與第2 剪切圖像的數(shù)據(jù)量。然而,在圖2的步驟SllO中,例如,DSP14也可以在對(duì)第1剪切圖像的數(shù)據(jù)量或第2剪切圖像的數(shù)據(jù)量中的一個(gè)附加規(guī)定值后,再比較數(shù)據(jù)量。也就是說(shuō),DSP14 在比較數(shù)據(jù)量時(shí),也可以進(jìn)行加權(quán)(assign weight)。由此,在圖2的步驟SllO中,可以設(shè)定為使第1剪切圖像較容易地記錄在記錄部中,或使第2剪切圖像較容易地記錄在記錄部中。
此外,DSP14也可以通過(guò)在圖2的步驟SllO中,比較圖3所示的圖像重疊部分46 的面積和擴(kuò)展區(qū)域47及48的總和面積,來(lái)比較第1剪切圖像的數(shù)據(jù)量和第2剪切圖像的數(shù)據(jù)量。具體而言,也可以在圖像重疊部分46的面積大于擴(kuò)展區(qū)域47及48的總和面積時(shí), 將第2剪切圖像記錄在記錄部中,在圖像重疊部分46的面積小于擴(kuò)展區(qū)域47及48的總和面積時(shí)將第1剪切圖像記錄在記錄部中。此時(shí),DSP14不進(jìn)行圖2的步驟S107的處理,并且,通過(guò)進(jìn)行計(jì)算圖像重疊部分46的面積和擴(kuò)展區(qū)域47及48的總和面積的處理,來(lái)代替步驟S109的處理。
此外,以上說(shuō)明了對(duì)實(shí)時(shí)運(yùn)動(dòng)圖像進(jìn)行圖像處理的情況。然而,攝像裝置100也可以用上述方法來(lái)對(duì)事先記錄在記錄部或其他設(shè)備中的運(yùn)動(dòng)圖像進(jìn)行圖像處理。因此,攝像裝置100能夠以更少的存儲(chǔ)容量再次記錄事先記錄的運(yùn)動(dòng)圖像,并且,能夠以更低的傳輸率經(jīng)由網(wǎng)絡(luò)等進(jìn)行傳輸。
(第二實(shí)施方式) 第二實(shí)施方式所涉及的攝像裝置200與第一實(shí)施方式所涉及的攝像裝置100(參照?qǐng)D1)相比,不同之處僅在于DSP14的動(dòng)作。因此,沿用圖1對(duì)第二實(shí)施方式進(jìn)行說(shuō)明。此外,為了便于說(shuō)明,在第二實(shí)施方式中,將圖1中的DSP14作為DSP14-2進(jìn)行說(shuō)明。此外,關(guān)于第一實(shí)施方式中說(shuō)明過(guò)的構(gòu)成要素,對(duì)其說(shuō)明加以省略。
圖8是用于說(shuō)明到拍攝被攝體,將運(yùn)動(dòng)圖像記錄在記錄部中為止攝像裝置200所進(jìn)行的特征處理的流程圖。圖8的流程圖是對(duì)于說(shuō)明第一實(shí)施方式的攝像裝置100的處理的圖2中的流程圖,將步驟S108置換為步驟S208,步驟SllO置換為步驟S210的流程圖。 此外,在圖8中,對(duì)與圖2相同的步驟附上相同的參照符號(hào),并對(duì)其說(shuō)明加以省略。圖9及圖10是用于說(shuō)明在圖8的步驟S208中,DSP14-2所設(shè)定的第2剪切圖像的圖。圖9表示存在有圖像重疊部分46的情況。圖10表示沒(méi)有圖像重疊部分46的情況。
以下,參照?qǐng)D8 圖10,對(duì)攝像裝置200的動(dòng)作進(jìn)行說(shuō)明。在步驟S208中,DSP14-2 提取作為包含被攝體剪切圖像41及42的1個(gè)圖像的被攝體剪切圖像43,并將其設(shè)定為第 2剪切圖像。在圖10中,由于被攝體剪切圖像41與被攝體剪切圖像42分離,所以第2剪切圖像被設(shè)定為用沒(méi)有面積的線將被攝體剪切圖像41與被攝體剪切圖像42連接而成的1個(gè)圖像。如圖9及圖10所示,步驟S208中所設(shè)定的第2剪切圖像不包含第一實(shí)施方式中說(shuō)明過(guò)的擴(kuò)展區(qū)域47 49 (參照?qǐng)D3 圖7)。
在步驟S210中,DSP14-2判斷第1剪切圖像的數(shù)據(jù)量是否大于第2剪切圖像的數(shù)據(jù)量。以下,用例子對(duì)步驟S210的處理進(jìn)行說(shuō)明。
例如,步驟S210中的判斷是通過(guò)比較第1剪切圖像的面積與第2剪切圖像的面積來(lái)進(jìn)行的。具體而言,如圖9所示,當(dāng)?shù)?剪切圖像的面積(被攝體剪切圖像41的面積與被攝體剪切圖像42的面積的總和)大于第2剪切圖像的面積(被攝體剪切圖像43的面積)時(shí),DSP14-2判斷為第1剪切圖像的數(shù)據(jù)量大于第2剪切圖像的數(shù)據(jù)量,處理進(jìn)入步驟S111。另一方面,如圖10所示,當(dāng)?shù)?剪切圖像的面積與第2剪切圖像的面積相同時(shí), DSP14-2認(rèn)為第1剪切圖像的數(shù)據(jù)量小于第2剪切圖像的數(shù)據(jù)量,處理進(jìn)入步驟S112。
此外,例如,步驟S210中的判斷取決于是否存在圖9所示的圖像重疊部分46。具體而言,當(dāng)如圖9所示存在圖像重疊部分46時(shí),DSP14-2判斷為第1剪切圖像的數(shù)據(jù)量大于第2剪切圖像的數(shù)據(jù)量,處理進(jìn)入步驟S111。另一方面,當(dāng)如圖10所示不存在圖像重疊部分46時(shí)(當(dāng)?shù)?剪切圖像的數(shù)據(jù)量與第2剪切圖像的數(shù)據(jù)量相同時(shí)),DSP14-2認(rèn)為第1 剪切圖像的數(shù)據(jù)量小于第2剪切圖像的數(shù)據(jù)量,處理進(jìn)入步驟S112。此外,此時(shí),步驟S107 及S109的處理就不需要了。
如上所述,在第二實(shí)施方式所涉及的攝像裝置200的處理中,第2剪切圖像不包含擴(kuò)展區(qū)域(參照?qǐng)D3 圖7)。因此,第二實(shí)施方式的攝像裝置200在圖8的步驟S113的處理中,不將擴(kuò)展區(qū)域記錄在記錄部中。其結(jié)果是,第二實(shí)施方式的攝像裝置200比第一實(shí)施方式的攝像裝置100更能削減記錄部的容量。此外,由于第二實(shí)施方式所涉及的攝像裝置200在經(jīng)由網(wǎng)絡(luò)接口 16將記錄在記錄部中的記錄運(yùn)動(dòng)圖像發(fā)送給其他設(shè)備時(shí),比第一實(shí)施方式所涉及的攝像裝置100更能削減記錄運(yùn)動(dòng)圖像的數(shù)據(jù)量,所以更能降低數(shù)據(jù)的傳輸率。
此外,由于第二實(shí)施方式所涉及的攝像裝置200在經(jīng)由網(wǎng)絡(luò)等將記錄運(yùn)動(dòng)圖像實(shí)時(shí)地發(fā)送給其他設(shè)備時(shí)(在制作記錄運(yùn)動(dòng)圖像的同時(shí),將記錄運(yùn)動(dòng)圖像中已制作完的部分發(fā)送給其他設(shè)備時(shí)),比第一實(shí)施方式所涉及的攝像裝置100更能削減記錄運(yùn)動(dòng)圖像的數(shù)據(jù)量,所以更能降低數(shù)據(jù)的傳輸率。此時(shí),在圖8的步驟S113中,DSP14用網(wǎng)絡(luò)接口 16經(jīng)由網(wǎng)絡(luò)等將文件化的圖像發(fā)送給其他設(shè)備。
此外,在第二實(shí)施方式中,攝像裝置200通過(guò)進(jìn)行圖8的步驟210的處理,來(lái)記錄第1或第2剪切圖像。然而,由于第2剪切圖像的數(shù)據(jù)量始終在第1剪切圖像的數(shù)據(jù)量以下(參照?qǐng)D9及圖10),因此攝像裝置200也可以在圖8的步驟S113中始終記錄第2剪切圖像。此時(shí),圖8的步驟S106、S107及S109 Sl 12就不需要了,處理變得簡(jiǎn)潔。
此外,在圖8的步驟S113中,圖像的數(shù)據(jù)既可以被壓縮后再記錄,也可以不被壓縮而記錄。作為壓縮算法,最好是以切片(slice)為單位的壓縮方法(H. 264/AVC規(guī)格)。
此外,也可以在圖8中,步驟S106及S107的處理之前進(jìn)行步驟S208及S109的處理。
此外,在圖8的步驟S210中,DSP14-2也可以與第一實(shí)施方式的圖2的步驟SllO 相同,在比較數(shù)據(jù)量時(shí)進(jìn)行加權(quán)。
此外,以上說(shuō)明了對(duì)實(shí)時(shí)運(yùn)動(dòng)圖像進(jìn)行圖像處理的情況。然而,第二實(shí)施方式所涉及的攝像裝置200也可以用上述方法來(lái)對(duì)事先記錄在記錄部或其他設(shè)備中的運(yùn)動(dòng)圖像進(jìn)行圖像處理。這樣一來(lái),第二實(shí)施方式所涉及的攝像裝置200以比第一實(shí)施方式所涉及的攝像裝置100更少的存儲(chǔ)容量再次記錄事先記錄的運(yùn)動(dòng)圖像,并且,能夠以更低的傳輸率經(jīng)由網(wǎng)絡(luò)等進(jìn)行傳輸。
(第三實(shí)施方式) 第三實(shí)施方式所涉及的攝像裝置300與第一實(shí)施方式所涉及的攝像裝置100(參照?qǐng)D1)相比,不同之處僅在于DSP14的動(dòng)作。因此,沿用圖1對(duì)第三實(shí)施方式進(jìn)行說(shuō)明。此外,為了便于說(shuō)明,在第三實(shí)施方式中,將圖1中的DSP14作為DSP14-3進(jìn)行說(shuō)明。此外,關(guān)于第一實(shí)施方式中說(shuō)明過(guò)的構(gòu)成要素,對(duì)其說(shuō)明加以省略。
圖11是用于說(shuō)明到拍攝被攝體,將運(yùn)動(dòng)圖像記錄在記錄部中為止攝像裝置300所進(jìn)行的特征處理的流程圖。圖11的流程圖是對(duì)于用于說(shuō)明第一實(shí)施方式的攝像裝置100 所進(jìn)行的處理的圖2中的流程圖,在步驟S112之后追加了步驟S310的流程圖。此外,在圖 11中,對(duì)與圖2相同的步驟附上相同的參照符號(hào),并對(duì)其說(shuō)明加以省略。
在步驟S310中,DSP14-3對(duì)在步驟S112中選擇的第1剪切圖像進(jìn)行加工。圖12 是用于說(shuō)明在步驟S310中DSP14-3所進(jìn)行的加工的圖。圖12(a)表示在步驟S112中選擇的第1剪切圖像,圖12(b) (c)分別表示在步驟S310中加工之后的第1剪切圖像。以下, 參照?qǐng)D11及圖12,對(duì)攝像裝置300的動(dòng)作進(jìn)行說(shuō)明。
如圖12(a)所示,步驟S112中所選擇的第1剪切圖像是被攝體剪切圖像41與被攝體剪切圖像42分離狀態(tài)下的第1剪切圖像。在步驟S310中,DSP14-3對(duì)被攝體剪切圖像41與被攝體剪切圖像42進(jìn)行加工,以成為一個(gè)方形圖像。具體而言,例如,如圖12(b) 所示,DSP14-3擴(kuò)大被攝體剪切圖像41,將其與被攝體剪切圖像42排列而成為一個(gè)方形圖像。此外,例如,如圖12(c)所示,DSP14-3縮小被攝體剪切圖像42,將其與被攝體剪切圖像41排列而成為一個(gè)方形圖像。此外,例如,如圖12(d)所示,DSP14-3擴(kuò)大被攝體剪切圖像41的剪切范圍,將其與被攝體剪切圖像42排列而成為一個(gè)方形圖像。這樣,在步驟S310 中,DSP14-3對(duì)步驟S112中所選擇的第1剪切圖像進(jìn)行加工,使其為一個(gè)方形的第1剪切圖像。然后,在步驟S113中,DSP14-3對(duì)一個(gè)方形的第1剪切圖像進(jìn)行文件化,記錄在記錄部中(參照?qǐng)D1)。
能夠通過(guò)進(jìn)行上述處理,來(lái)在用戶將記錄在記錄部中的第1剪切圖像顯示在顯示器上進(jìn)行觀賞時(shí),使第1剪切圖像更加美觀。
這里,在步驟S310中,DSP14-3也可以將加工后的第1剪切圖像再加工為適合用戶所使用的觀賞方法的形狀。具體而言,DSP14-3在步驟S310中,既可以將加工后的第1剪切圖像剪切為例如寬屏幕顯示器的縱橫尺寸比,也可以剪切為例如打印紙的規(guī)格尺寸(A4尺寸等)的縱橫尺寸比。這樣一來(lái),能夠在用戶觀賞記錄在記錄部中的第1剪切圖像時(shí),使第 1剪切圖像更加美觀。
如上所述,第三實(shí)施方式所涉及的攝像裝置300在將第2剪切圖像記錄在記錄部中時(shí),能夠與第一實(shí)施方式所涉及的攝像裝置100 —樣,削減記錄容量。此外,第三實(shí)施方式的攝像裝置300在將第1剪切圖像的數(shù)據(jù)量縮小并記錄在記錄裝置中時(shí)(參照?qǐng)D 12(c)),比第一實(shí)施方式的攝像裝置100更能夠削減記錄部。此外,由于第三實(shí)施方式所涉及的攝像裝置300能夠在經(jīng)由網(wǎng)絡(luò)接口 16將記錄在記錄部中的記錄運(yùn)動(dòng)圖像發(fā)送給其它設(shè)備時(shí),削減記錄運(yùn)動(dòng)圖像的數(shù)據(jù)量,因此能夠削減數(shù)據(jù)傳輸所需的頻帶,或降低數(shù)據(jù)傳輸時(shí)間。并且,第三實(shí)施方式的攝像裝置300在用戶觀賞第1剪切圖像時(shí),能夠使第1剪切圖像更加美觀。
并且,由于第三實(shí)施方式所涉及的攝像裝置300在經(jīng)由網(wǎng)絡(luò)等將記錄運(yùn)動(dòng)圖像實(shí)時(shí)地發(fā)送給其他設(shè)備時(shí)(在制作記錄運(yùn)動(dòng)圖像的同時(shí),將記錄運(yùn)動(dòng)圖像中已制作完的部分發(fā)送給其他設(shè)備時(shí)),能夠削減記錄運(yùn)動(dòng)圖像的數(shù)據(jù)量,所以更能降低數(shù)據(jù)的傳輸率。此時(shí), 在圖11的步驟S113中,DSP14-3用網(wǎng)絡(luò)接口 16經(jīng)由網(wǎng)絡(luò)等將文件化的圖像發(fā)送給其他設(shè)備。
此外,以上,以在用于說(shuō)明第一實(shí)施方式的圖2的流程圖上追加步驟S310的情況為例進(jìn)行了說(shuō)明。也可以在用于說(shuō)明第二實(shí)施方式的圖8的流程圖中的步驟S112之后,追加步驟S310。此時(shí),由于如在第二實(shí)施方式中說(shuō)明過(guò)地那樣,不將擴(kuò)展區(qū)域記錄在記錄部中,所以更能削減記錄部的容量。
此外,在圖11的步驟S113中,圖像的數(shù)據(jù)既可以被壓縮后再記錄,也可以不被壓縮而記錄。作為壓縮算法,最好是以切片(slice)為單位的壓縮方法(H. 264/AVC規(guī)格)。
此外,也可以在圖11中,在步驟S106及S107之前進(jìn)行步驟S108及S109。
此外,在圖11的步驟SllO中,DSP14-3也可以與第一實(shí)施方式的圖2的步驟SllO 相同,在比較數(shù)據(jù)量時(shí)進(jìn)行加權(quán)。
此外,以上說(shuō)明了對(duì)實(shí)時(shí)運(yùn)動(dòng)圖像進(jìn)行圖像處理的情況。然而,攝像裝置300也可以用上述方法來(lái)對(duì)事先記錄在記錄部或其他設(shè)備中的運(yùn)動(dòng)圖像進(jìn)行圖像處理。因此,攝像裝置300能夠以更少的存儲(chǔ)容量再次記錄事先記錄的運(yùn)動(dòng)圖像,并且,能夠降低數(shù)據(jù)的傳輸率。
此外,各個(gè)實(shí)施方式中說(shuō)明過(guò)的攝像裝置(參照?qǐng)D1)所具備的信號(hào)處理/AD轉(zhuǎn)換電路3、修正電路4、CPU13、DSP14(14-2,14-3)以及定時(shí)發(fā)生器11 一般通過(guò)作為集成電路的LSI來(lái)實(shí)現(xiàn)。既可以使它們分別為1個(gè)芯片,也可以使它們?yōu)榘炕蛞徊糠值? 個(gè)芯片。在此使它為L(zhǎng)SI,根據(jù)集成度的不同,有時(shí)會(huì)被稱為IC、系統(tǒng)LSI、超級(jí)LSI及特大 LSI。此外,隨著集成技術(shù)的進(jìn)步,其它構(gòu)成要素也可以被集成電路化。此外,集成電路化的方法并不局限于LSI,也可以利用專用電路或通用處理器來(lái)實(shí)現(xiàn)。此外,也可以采用能在制造LSI之后進(jìn)行編程的FPGA(Field Programmable GateArray 元件可編程邏輯閘陣列)和 /或能夠?qū)SI內(nèi)部的電路單元(circuit cell)的連接、設(shè)定進(jìn)行再構(gòu)成的可重構(gòu)處理器。 并且,如果因半導(dǎo)體技術(shù)的進(jìn)步或派生出來(lái)的其它技術(shù)而出現(xiàn)代替LSI的集成電路化技術(shù)的話,當(dāng)然也可以利用該技術(shù)來(lái)進(jìn)行功能塊的集成化。生物工程技術(shù)等就有可能適用。
工業(yè)實(shí)用性 本發(fā)明能夠應(yīng)用于攝像裝置等,尤其對(duì)于在運(yùn)動(dòng)圖像的攝像裝置等中,削減從攝像圖像中剪切出的多個(gè)被攝體像的記錄容量,并且,降低將該多個(gè)被攝體像經(jīng)由網(wǎng)絡(luò)進(jìn)行數(shù)據(jù)傳輸時(shí)的傳輸率的情況等尤其有用。
權(quán)利要求
1.一種運(yùn)動(dòng)圖像攝像裝置,其特征在于 該運(yùn)動(dòng)圖像攝像裝置包括攝像部,拍攝被攝體,并取得由多個(gè)幀構(gòu)成的攝像運(yùn)動(dòng)圖像,以及圖像處理部,以每幀對(duì)上述攝像運(yùn)動(dòng)圖像進(jìn)行加工,制作記錄運(yùn)動(dòng)圖像; 上述圖像處理部包括被攝體指定單元,按照用戶的指示來(lái)指定上述攝像運(yùn)動(dòng)圖像中的多個(gè)被攝體像, 被攝體剪切圖像設(shè)定單元,設(shè)定多個(gè)被攝體剪切圖像,該多個(gè)被攝體剪切圖像是從上述攝像運(yùn)動(dòng)圖像中剪切由上述被攝體指定單元所指定的多個(gè)被攝體像的每一個(gè)被攝體像而得到的圖像,被攝體追蹤單元,追蹤由上述被攝體指定單元所指定的多個(gè)被攝體像,并追隨該多個(gè)被攝體像以每幀為單位使上述多個(gè)被攝體剪切圖像移動(dòng),第1剪切圖像設(shè)定單元,對(duì)于每幀將上述多個(gè)被攝體剪切圖像設(shè)定為第1剪切圖像, 第2剪切圖像設(shè)定單元,對(duì)于每幀將圍繞上述多個(gè)被攝體剪切圖像的一個(gè)圖像設(shè)定為第2剪切圖像,第1數(shù)據(jù)量計(jì)算單元,對(duì)于每幀計(jì)算上述第1剪切圖像的數(shù)據(jù)量, 第2數(shù)據(jù)量計(jì)算單元,對(duì)于每幀計(jì)算上述第2剪切圖像的數(shù)據(jù)量, 比較單元,對(duì)于每幀比較上述第1剪切圖像的數(shù)據(jù)量與上述第2剪切圖像的數(shù)據(jù)量,以及選擇單元,對(duì)于每幀將上述第1剪切圖像和上述第2剪切圖像中的、在上述比較單元中判斷為數(shù)據(jù)量較小的圖像選擇為上述記錄運(yùn)動(dòng)圖像。
2.根據(jù)權(quán)利要求1所述的運(yùn)動(dòng)圖像攝像裝置,其特征在于 該運(yùn)動(dòng)圖像攝像裝置還具備記錄上述記錄運(yùn)動(dòng)圖像的記錄部。
3.根據(jù)權(quán)利要求1或2所述的運(yùn)動(dòng)圖像攝像裝置,其特征在于上述圖像處理部在制作上述記錄運(yùn)動(dòng)圖像的同時(shí),將該記錄運(yùn)動(dòng)圖像中制作完的部分發(fā)送給其它設(shè)備。
4.根據(jù)權(quán)利要求1至3中任一項(xiàng)所述的運(yùn)動(dòng)圖像攝像裝置,其特征在于 上述被攝體剪切圖像設(shè)定單元所設(shè)定的上述多個(gè)被攝體剪切圖像都是方形; 上述第2剪切圖像設(shè)定單元所設(shè)定的上述第2剪切圖像是方形。
5.根據(jù)權(quán)利要求1至3中任一項(xiàng)所述的運(yùn)動(dòng)圖像攝像裝置,其特征在于上述第2剪切圖像設(shè)定單元所設(shè)定的上述第2剪切圖像不包含不屬于上述多個(gè)被攝體剪切圖像中的任何一個(gè)的區(qū)域。
6.根據(jù)權(quán)利要求5所述的運(yùn)動(dòng)圖像攝像裝置,其特征在于上述被攝體剪切圖像設(shè)定單元所設(shè)定的上述多個(gè)被攝體剪切圖像都是方形。
7.根據(jù)權(quán)利要求1至5中任一項(xiàng)所述的運(yùn)動(dòng)圖像攝像裝置,其特征在于 上述被攝體剪切圖像設(shè)定單元所設(shè)定的上述多個(gè)被攝體剪切圖像都是方形;上述選擇單元在選擇了上述第1剪切圖像時(shí),進(jìn)一步對(duì)上述多個(gè)被攝體剪切圖像中的至少一個(gè)進(jìn)行擴(kuò)大或縮小,并將上述多個(gè)被攝體剪切圖像排列加工為一個(gè)方形第1剪切圖像。
8.—種運(yùn)動(dòng)圖像攝像方法,其特征在于該運(yùn)動(dòng)圖像攝像方法包括以下步驟攝像步驟,拍攝被攝體,并取得由多個(gè)幀構(gòu)成的攝像運(yùn)動(dòng)圖像,以及圖像處理步驟,以每幀對(duì)上述攝像運(yùn)動(dòng)圖像進(jìn)行加工,制作記錄運(yùn)動(dòng)圖像; 上述圖像處理步驟包括以下步驟被攝體指定步驟,按照用戶的指示,來(lái)指定上述攝像運(yùn)動(dòng)圖像中的多個(gè)被攝體像, 被攝體剪切圖像設(shè)定步驟,設(shè)定多個(gè)被攝體剪切圖像,該多個(gè)被攝體剪切圖像是從上述攝像運(yùn)動(dòng)圖像中剪切在上述被攝體指定步驟中所指定的多個(gè)被攝體像的每一個(gè)被攝體像而得到的圖像,被攝體追蹤步驟,追蹤在上述被攝體指定步驟中所指定的多個(gè)被攝體像,追隨該多個(gè)被攝體像以每幀為單位使上述多個(gè)被攝體剪切圖像移動(dòng),第1剪切圖像設(shè)定步驟,對(duì)于每幀將上述多個(gè)被攝體剪切圖像設(shè)定為第1剪切圖像, 第2剪切圖像設(shè)定步驟,對(duì)于每幀將圍繞上述多個(gè)被攝體剪切圖像的一個(gè)圖像設(shè)定為第2剪切圖像,第1數(shù)據(jù)量計(jì)算步驟,對(duì)于每幀計(jì)算上述第1剪切圖像的數(shù)據(jù)量, 第2數(shù)據(jù)量計(jì)算步驟,對(duì)于每幀計(jì)算上述第2剪切圖像的數(shù)據(jù)量, 比較步驟,對(duì)于每幀比較上述第1剪切圖像的數(shù)據(jù)量與上述第2剪切圖像的數(shù)據(jù)量,以及選擇步驟,對(duì)于每幀將上述第1剪切圖像和上述第2剪切圖像中的、在上述比較步驟中判斷為數(shù)據(jù)量較小的圖像選擇為上述記錄運(yùn)動(dòng)圖像。
9.集成電路,是被裝入運(yùn)動(dòng)圖像攝像裝置的集成電路,該運(yùn)動(dòng)圖像攝像裝置拍攝被攝體,對(duì)所取得的攝像運(yùn)動(dòng)圖像進(jìn)行加工,制作記錄運(yùn)動(dòng)圖像,其特征在于該集成電路執(zhí)行作為信號(hào)處理/AD轉(zhuǎn)換電路、修正電路、圖像處理部以及控制部的功能,該信號(hào)處理/AD轉(zhuǎn)換電路對(duì)拍攝被攝體的電荷耦合器件的輸出信號(hào)進(jìn)行噪聲降低處理及增益控制,由模擬信號(hào)轉(zhuǎn)換成數(shù)字信號(hào),該修正電路對(duì)上述信號(hào)處理/AD轉(zhuǎn)換電路的輸出信號(hào)進(jìn)行圖像修正處理,來(lái)獲得上述攝像運(yùn)動(dòng)圖像,該圖像處理部按照用戶的指示來(lái)指定在上述修正電路中所獲得的攝像運(yùn)動(dòng)圖像中的多個(gè)被攝體像,設(shè)定從該攝像運(yùn)動(dòng)圖像中剪切該多個(gè)被攝體像的每一個(gè)被攝體像而得到的多個(gè)被攝體剪切圖像,并追蹤該多個(gè)被攝體像,追隨該多個(gè)被攝體像以每幀為單位使該多個(gè)被攝體剪切圖像移動(dòng),對(duì)于每幀將該多個(gè)被攝體剪切圖像設(shè)定為第1剪切圖像,將圍繞該多個(gè)被攝體剪切圖像的一個(gè)圖像設(shè)定為第2剪切圖像,計(jì)算該第1剪切圖像的數(shù)據(jù)量及該第2剪切圖像的數(shù)據(jù)量并進(jìn)行比較,將數(shù)據(jù)量較小的一方的圖像選擇為上述記錄運(yùn)動(dòng)圖像,該控制部至少控制上述信號(hào)處理/AD轉(zhuǎn)換電路、上述修正電路及上述圖像處理部。
全文摘要
本發(fā)明涉及一種運(yùn)動(dòng)圖像的攝像裝置、攝像方法及集成電路。包括取得攝像運(yùn)動(dòng)圖像的攝像部、和以每幀對(duì)攝像運(yùn)動(dòng)圖像進(jìn)行加工來(lái)制作記錄運(yùn)動(dòng)圖像的圖像處理部。圖像處理部按照用戶的指示來(lái)指定攝像運(yùn)動(dòng)圖像中的多個(gè)被攝體像,設(shè)定從攝像運(yùn)動(dòng)圖像中剪切多個(gè)被攝體像的每一個(gè)被攝體像而得到的多個(gè)被攝體剪切圖像,追蹤多個(gè)被攝體像,追隨多個(gè)被攝體像以每幀為單位使多個(gè)被攝體剪切圖像移動(dòng)之后,將多個(gè)被攝體剪切圖像設(shè)定為第1剪切圖像,圍繞多個(gè)被攝體剪切圖像的一個(gè)圖像設(shè)定為第2剪切圖像,計(jì)算第1及第2剪切圖像的數(shù)據(jù)量并進(jìn)行比較,將數(shù)據(jù)量較小的一方的圖像選擇為記錄運(yùn)動(dòng)圖像。
文檔編號(hào)H04N5/91GK102187663SQ20098000058
公開(kāi)日2011年9月14日 申請(qǐng)日期2009年4月10日 優(yōu)先權(quán)日2008年5月21日
發(fā)明者甲斐康司 申請(qǐng)人:松下電器產(chǎn)業(yè)株式會(huì)社