專利名稱：處理運(yùn)動(dòng)圖像數(shù)據(jù)的運(yùn)動(dòng)圖像處理裝置及運(yùn)動(dòng)圖像處理方法
技術(shù)領(lǐng)域：
本發(fā)明涉及能夠調(diào)整運(yùn)動(dòng)圖像數(shù)據(jù)的再現(xiàn)速度的運(yùn)動(dòng)圖像處理裝置、以及運(yùn)動(dòng)圖像處理方法。
背景技術(shù)：
在現(xiàn)有技術(shù)中，能夠?qū)z像幀速率切換為與通常攝像對(duì)應(yīng)的規(guī)定的攝像幀速率或比該攝像幀速率高速的攝像幀速率的攝像裝置被熟知(例如，參照J(rèn)P特開(kāi)2010-87778號(hào)公報(bào))。若以低速的再現(xiàn)幀速率對(duì)由該攝像裝置以高速的攝像幀速率拍攝到的運(yùn)動(dòng)圖像進(jìn)行再現(xiàn)，貝1J看起來(lái)成為以慢動(dòng)作(slow motion)拍攝的運(yùn)動(dòng)圖像。但是，在以與通常攝像對(duì)應(yīng)的規(guī)定的攝像幀速率進(jìn)行運(yùn)動(dòng)圖像的攝像的過(guò)程中， 為了拍攝想要以慢動(dòng)作來(lái)再現(xiàn)的鏡頭(scene)而進(jìn)行切換攝像幀速率的操作是很繁雜的。 而且，即使通過(guò)該操作來(lái)切換攝像幀速率，也存在如下問(wèn)題想要以該慢動(dòng)作來(lái)再現(xiàn)的鏡頭的前后的鏡頭也將以與慢動(dòng)作對(duì)應(yīng)的攝像幀速率被拍攝。期望即使在運(yùn)動(dòng)圖像數(shù)據(jù)的攝影記錄時(shí)用戶不進(jìn)行特別的操作，也能獲得能夠部分慢速再現(xiàn)的運(yùn)動(dòng)圖像數(shù)據(jù)。

發(fā)明內(nèi)容
本發(fā)明的I個(gè)形態(tài)，是一種運(yùn)動(dòng)圖像處理裝置，其特征在于，具備取得部，其取得以規(guī)定的攝像幀速率拍攝到的被攝體的運(yùn)動(dòng)圖像數(shù)據(jù)；確定部，其對(duì)由該取得部取得的所述運(yùn)動(dòng)圖像數(shù)據(jù)實(shí)施規(guī)定的解析處理，并在構(gòu)成該運(yùn)動(dòng)圖像數(shù)據(jù)的多個(gè)幀圖像內(nèi)，確定由作為慢速再現(xiàn)的對(duì)象的多個(gè)幀圖像構(gòu)成的慢速再現(xiàn)幀部分；和處理部，其對(duì)構(gòu)成所述運(yùn)動(dòng)圖像數(shù)據(jù)的多個(gè)幀圖像中、由所述確定部確定的所述慢速再現(xiàn)幀部分以外的規(guī)定數(shù)量的幀圖像，以規(guī)定的比例進(jìn)行抽除處理。此外，本發(fā)明的另一形態(tài)，是一種運(yùn)動(dòng)圖像處理方法，其使用了運(yùn)動(dòng)圖像處理裝置，所述運(yùn)動(dòng)圖像處理方法的特征在于，包含如下步驟取得以規(guī)定的攝像幀速率拍攝到的被攝體的運(yùn)動(dòng)圖像數(shù)據(jù)的步驟；對(duì)取得的所述運(yùn)動(dòng)圖像數(shù)據(jù)實(shí)施規(guī)定的解析處理，來(lái)在構(gòu)成該運(yùn)動(dòng)圖像數(shù)據(jù)的多個(gè)幀圖像內(nèi)，確定由作為慢速再現(xiàn)的對(duì)象的多個(gè)幀圖像構(gòu)成的慢速再現(xiàn)幀部分的步驟；和對(duì)構(gòu)成所述運(yùn)動(dòng)圖像數(shù)據(jù)的多個(gè)幀圖像中、確定的所述慢速再現(xiàn)幀部分以外的規(guī)定數(shù)量的幀圖像，以規(guī)定的比例進(jìn)行抽除處理的步驟。


圖I是表示應(yīng)用了本發(fā)明的實(shí)施方式I的攝像裝置的概略構(gòu)成的框圖。
圖2是表示由圖I的攝像裝置進(jìn)行的運(yùn)動(dòng)圖像數(shù)據(jù)生成處理所涉及的動(dòng)作的一例的流程圖。圖3A B是用于說(shuō)明圖2的運(yùn)動(dòng)圖像數(shù)據(jù)生成處理的圖。圖4是表示運(yùn)動(dòng)圖像數(shù)據(jù)生成處理的變形例所涉及的動(dòng)作的一例的流程圖。
具體實(shí)施例方式以下，針對(duì)本發(fā)明，利用附圖來(lái)對(duì)具體方式進(jìn)行說(shuō)明。但是，發(fā)明的范圍不限定于圖示例。圖I是表示應(yīng)用了本發(fā)明的一實(shí)施方式的攝像裝置100的概略構(gòu)成的框圖。本實(shí)施方式的攝像裝置100對(duì)運(yùn)動(dòng)圖像數(shù)據(jù)D實(shí)施規(guī)定的解析處理，來(lái)在構(gòu)成該運(yùn)動(dòng)圖像數(shù)據(jù)D的多個(gè)幀圖像f、...內(nèi)，確定由作為慢速再現(xiàn)的對(duì)象的多個(gè)幀圖像 f、...構(gòu)成的慢速再現(xiàn)幀部分S，并對(duì)該慢速再現(xiàn)幀部分S以外的規(guī)定數(shù)量的幀圖像f，以規(guī)定的比例進(jìn)行抽除處理。具體來(lái)說(shuō)，如圖I所示，攝像裝置100具備透鏡部I、電子攝像部2、單元電路部3、 攝像控制部4、圖像生成部5、圖像處理部6、顯示控制部7、顯示部8、記錄介質(zhì)控制部9、操作輸入部10、緩沖存儲(chǔ)器11、程序存儲(chǔ)器12、中央控制部13等。此外，攝像控制部4、圖像生成部5、圖像處理部6、顯示控制部7、記錄介質(zhì)控制部
9、緩沖存儲(chǔ)器11、程序存儲(chǔ)器12、中央控制部13通過(guò)總線線路14而連接。透鏡部1，雖省略圖示，但例如具有變焦透鏡、聚焦透鏡、光圈等，對(duì)通過(guò)了這些透鏡的被攝體的光學(xué)像進(jìn)行成像。電子攝像部2配置于透鏡部I的光軸上。此外，電子攝像部2例如由CXD (Charge Coupled Device)或 CMOS (Complementary Metal-oxide Semiconductor)等圖像傳感器構(gòu)成，按照每個(gè)規(guī)定的周期將通過(guò)了透鏡部I的各種透鏡的光學(xué)像變換為二維的圖像信號(hào) (RGB圖像數(shù)據(jù))，并輸出到單元電路部3。單元電路部3,雖省略圖示，但例如具備Q)S(Correlated Double SamplingJl^ 關(guān)雙米樣電路)、AGC(Auto Gain Control :增益調(diào)整放大器)、ADC(Analog to Digital Converter :模擬/數(shù)字變換器)等。該單元電路部3通過(guò)⑶S按照與攝像巾貞速率相應(yīng)的每個(gè)規(guī)定的周期來(lái)保持與從電子攝像部2輸出而被輸入的被攝體的光學(xué)像相應(yīng)的模擬的圖像信號(hào)，并通過(guò)AGC將該圖像信號(hào)放大后，通過(guò)ADC來(lái)將放大后的圖像信號(hào)變換為數(shù)字的圖像信號(hào)。然后，單元電路部3將數(shù)字的圖像信號(hào)發(fā)送到圖像生成部5。攝像控制部4對(duì)透鏡部I、電子攝像部2、單元電路部3等的動(dòng)作進(jìn)行控制。S卩、攝像控制部4，例如具備電動(dòng)機(jī)等驅(qū)動(dòng)源、和對(duì)該驅(qū)動(dòng)源進(jìn)行驅(qū)動(dòng)的驅(qū)動(dòng)器等 (全部省略圖示)，使透鏡部I的變焦透鏡和聚焦透鏡在光軸方向上驅(qū)動(dòng)。此外，攝像控制部4例如具備進(jìn)行透鏡部I的光圈的擴(kuò)徑或縮徑的光圈驅(qū)動(dòng)部(圖示略)，根據(jù)曝光調(diào)整條件來(lái)進(jìn)行光圈的擴(kuò)徑或縮徑。此外，攝像控制部4,例如具備TG(Timing Generator,定時(shí)脈沖發(fā)生器)、對(duì)電子攝像部2進(jìn)行驅(qū)動(dòng)的驅(qū)動(dòng)器等(全部省略圖示)，根據(jù)驅(qū)動(dòng)幀速率和攝像條件(例如，曝光時(shí)間等)，通過(guò)TG以及驅(qū)動(dòng)器來(lái)對(duì)電子攝像部2的動(dòng)作定時(shí)進(jìn)行控制。 此外，攝像控制部4按照攝像幀速率來(lái)對(duì)單元電路部3的動(dòng)作定時(shí)進(jìn)行控制。圖像生成部5根據(jù)從單元電路部3發(fā)送來(lái)的數(shù)字的圖像信號(hào)來(lái)生成數(shù)字值的亮度信號(hào)Y以及色差信號(hào)Cb、Cr (YUV數(shù)據(jù))。具體來(lái)說(shuō)，圖像生成部5按照與攝像幀速率相應(yīng)的每個(gè)規(guī)定的周期(例如，1/240 秒等)，用彩色處理電路(color process circuit)(圖示略)來(lái)對(duì)從單元電路部3發(fā)送來(lái)的各幀圖像f的數(shù)字的圖像數(shù)據(jù)分別進(jìn)行包括像素插值處理以及Y校正處理在內(nèi)的彩色處理，之后生成數(shù)字值的亮度信號(hào)Y以及色差信號(hào)Cb、Cr (YUV數(shù)據(jù))。然后，圖像生成部5 將生成的亮度色差信號(hào)的圖像數(shù)據(jù)輸出到攝像控制部4以及圖像處理部6。在此，作為拍攝運(yùn)動(dòng)圖像時(shí)的攝像幀速率而例示的240fps是一個(gè)例子，并不限定于此，可以適當(dāng)?shù)厝我庾兏D像處理部6具備圖像取得部6a、幀確定部6b、和抽除處理部6c。圖像取得部6a取得被攝體的運(yùn)動(dòng)圖像數(shù)據(jù)D。具體來(lái)說(shuō)，圖像取得部6a取得由圖像生成部5生成的圖像數(shù)據(jù)(YUV數(shù)據(jù))，即、由圖像生成部5根據(jù)在拍攝被攝體的運(yùn)動(dòng)圖像時(shí)，按照與攝像幀速率相應(yīng)的每個(gè)規(guī)定的周期 (例如，1/240秒等)從單元電路部3發(fā)送來(lái)的數(shù)字的圖像信號(hào)而生成的各幀圖像f的圖像數(shù)據(jù)(運(yùn)動(dòng)圖像數(shù)據(jù)D)。在此，運(yùn)動(dòng)圖像數(shù)據(jù)D的攝像幀速率比由顯示部8對(duì)運(yùn)動(dòng)圖像數(shù)據(jù)進(jìn)行再現(xiàn)時(shí)所設(shè)定的規(guī)定的再現(xiàn)幀速率高速，即、各幀圖像的攝像周期比與再現(xiàn)幀速率對(duì)應(yīng)的各幀圖像的切換(再現(xiàn))周期短。在此，圖像取得部6a構(gòu)成了取得由以規(guī)定的攝像幀速率拍攝到的多個(gè)幀圖像 f、...構(gòu)成的被攝體的運(yùn)動(dòng)圖像數(shù)據(jù)D的取得單元(取得部)。幀確定部6b在構(gòu)成運(yùn)動(dòng)圖像數(shù)據(jù)D的多個(gè)幀圖像f、...內(nèi)，確定慢速再現(xiàn)幀部分S。S卩、幀確定部6b具備對(duì)由圖像取得部6a取得的運(yùn)動(dòng)圖像數(shù)據(jù)D實(shí)施規(guī)定的解析處理的解析處理部bl，并基于該解析處理部bl的解析結(jié)果來(lái)確定慢速再現(xiàn)幀部分S。解析處理部bl進(jìn)行用于檢測(cè)在構(gòu)成運(yùn)動(dòng)圖像數(shù)據(jù)D的多個(gè)幀圖像f、...中的被攝體的狀態(tài)變化的規(guī)定的解析處理。具體來(lái)說(shuō)，解析處理部bl針對(duì)多個(gè)幀圖像f、...的每一個(gè)，計(jì)算在相鄰的幀圖像f (例如，攝像定時(shí)是前一個(gè)的幀圖像f等)之間對(duì)應(yīng)的各像素的差分。然后，解析處理部bl針對(duì)多個(gè)幀圖像f、...的每一個(gè)，基于算出的各像素的差分來(lái)進(jìn)行規(guī)定的運(yùn)算，從而生成代表各幀圖像f的差分值。在此，代表各幀圖像f的差分值可以列舉，例如、各像素的差分的最大值、中央值、 平均值等。另外，上述的解析處理是一個(gè)例子，而并非限定于此，只要是能夠檢測(cè)多個(gè)幀圖像 f>. · ·中的被攝體的狀態(tài)變化的處理方法,則可以適當(dāng)?shù)厝我獾刈兏?。例?解析處理部bl 也可以基于多個(gè)幀圖像f、...的亮度值，來(lái)檢測(cè)被攝體的明亮度的變化，作為該多個(gè)幀圖像f、...中的被攝體的狀態(tài)變化。幀確定部6b基于解析處理部bl的解析結(jié)果，在構(gòu)成運(yùn)動(dòng)圖像數(shù)據(jù)D的多個(gè)幀圖像f、...內(nèi)，將被攝體的狀態(tài)變化成為規(guī)定的大小以上的幀圖像f確定為慢速再現(xiàn)幀部分S。具體來(lái)說(shuō)，幀確定部6b首先基于由解析處理部bl生成的代表各幀圖像f的差分值，來(lái)確定最小差分值，并針對(duì)各幀圖像f的差分值來(lái)計(jì)算相對(duì)于最小差分值的比例。然
6后，幀確定部6b在多個(gè)幀圖像f、...內(nèi)，將具有相對(duì)于最小差分值的比例為規(guī)定大小(例如，2倍等)以上的差分值的幀圖像f確定為作為慢速再現(xiàn)對(duì)象的慢速再現(xiàn)幀部分S。在此，慢速再現(xiàn)幀部分S是指，由使運(yùn)動(dòng)圖像的看上去的再現(xiàn)速度比實(shí)際時(shí)間慢 (慢動(dòng)作)的幀圖像f構(gòu)成的部分，是由在對(duì)運(yùn)動(dòng)圖像數(shù)據(jù)進(jìn)行再現(xiàn)時(shí)再現(xiàn)各幀圖像的間隔比進(jìn)行運(yùn)動(dòng)圖像攝影時(shí)記錄各幀圖像的間隔長(zhǎng)的幀圖像f構(gòu)成的部分。例如，如圖3(a)所示，在以規(guī)定的攝像幀速率(例如，240fps等)拍攝了棒球的擊球姿勢(shì)而得到的多張(例如，40張等)幀圖像f、...所構(gòu)成的運(yùn)動(dòng)圖像數(shù)據(jù)D的情況下，揮棒開(kāi)始時(shí)的幀圖像Π具有最小差分值。然后，實(shí)際開(kāi)始球棒的揮棒后，每隔規(guī)定時(shí)間的被攝體的狀態(tài)變化(動(dòng)作)變大。在此情況下，與球棒揮棒開(kāi)始以后相對(duì)應(yīng)的幀圖像f2相對(duì)于最小差分值的比例(最小差分比)成為規(guī)定的大小(例如，2倍等)以上(參照?qǐng)D3(b))， 將該幀圖像f2確定為慢速再現(xiàn)幀部分S。像這樣，幀確定部6b構(gòu)成了對(duì)由圖像取得部6a取得的運(yùn)動(dòng)圖像數(shù)據(jù)D實(shí)施規(guī)定的解析處理，在構(gòu)成該運(yùn)動(dòng)圖像數(shù)據(jù)D的多個(gè)幀圖像f、...內(nèi)，確定由作為慢速再現(xiàn)對(duì)象的多個(gè)幀圖像f、...構(gòu)成的慢速再現(xiàn)幀部分S的確定單元(確定部)。抽除處理部6c對(duì)構(gòu)成運(yùn)動(dòng)圖像數(shù)據(jù)D的多個(gè)幀圖像f、...中、慢速再現(xiàn)幀部分S 以外的規(guī)定數(shù)量的幀圖像f，以規(guī)定的比例進(jìn)行抽除處理。S卩、抽除處理部6c針對(duì)慢速再現(xiàn)幀部分S以外的規(guī)定數(shù)量的幀圖像f，在以各幀圖像的切換(再現(xiàn))周期比與規(guī)定的攝像幀速率相對(duì)應(yīng)的各幀圖像的攝像周期短(低速) 的規(guī)定的再現(xiàn)幀速率進(jìn)行再現(xiàn)的情況下，按照使其再現(xiàn)時(shí)間與實(shí)際時(shí)間相對(duì)應(yīng)的方式進(jìn)行抽除處理。具體來(lái)說(shuō)，抽除處理部6c，在慢速再現(xiàn)幀部分S以外的規(guī)定數(shù)量的幀圖像f中， 即、以規(guī)定的攝像幀速率(例如，240fps等)拍攝到的多個(gè)幀圖像f、...中，根據(jù)規(guī)定的再現(xiàn)幀速率(例如，30fps)，對(duì)成為處理對(duì)象的幀圖像f，以與攝像幀速率和再現(xiàn)幀速率的比相應(yīng)的規(guī)定的比例(例如，1/8)進(jìn)行抽除來(lái)確定。例如，如圖3(a)所示，對(duì)于揮棒開(kāi)始時(shí)和揮棒結(jié)束時(shí)(圖示略)的規(guī)定數(shù)量的幀圖像Π，由于每隔規(guī)定時(shí)間的被攝體的狀態(tài)變化 (動(dòng)作)較小，因此在該規(guī)定數(shù)量的幀圖像Π中，根據(jù)規(guī)定的再現(xiàn)幀速率，對(duì)作為處理對(duì)象的幀圖像fl以規(guī)定的比例進(jìn)行抽除來(lái)確定。由此，對(duì)于慢速再現(xiàn)幀部分S以外的規(guī)定數(shù)量的幀圖像f，以規(guī)定的再現(xiàn)幀速率 (例如，30fps)進(jìn)行再現(xiàn)時(shí)的再現(xiàn)時(shí)間與以規(guī)定的攝像幀速率(例如，240fps等)對(duì)該規(guī)定數(shù)量的幀圖像f進(jìn)行攝像時(shí)的實(shí)際時(shí)間相對(duì)應(yīng)。另外，抽除處理部6c對(duì)于慢速再現(xiàn)幀部分S的幀圖像f不進(jìn)行抽除處理，對(duì)于慢速再現(xiàn)幀部分S以外的規(guī)定數(shù)量的幀圖像f，按照使以規(guī)定的再現(xiàn)幀速率再現(xiàn)時(shí)的再現(xiàn)時(shí)間與實(shí)際時(shí)間相對(duì)應(yīng)的方式進(jìn)行抽除處理，由此，能夠更自然且有效地控制再現(xiàn)速度，但抽除的有無(wú)和抽除率的控制是一個(gè)例子，并非限定于此，可以適當(dāng)?shù)厝我庾兏?。即、只要至少按照慢速再現(xiàn)幀部分S的再現(xiàn)速度比慢速再現(xiàn)幀部分S以外的幀部分的再現(xiàn)速度慢的方式來(lái)決定抽除的有無(wú)和抽除率即可，也可以以比對(duì)慢速再現(xiàn)幀部分S以外的幀圖像進(jìn)行抽除時(shí)的比例低的比例來(lái)對(duì)慢速再現(xiàn)幀部分S進(jìn)行抽除處理，或者按照慢速再現(xiàn)幀部分S以外的幀部分的再現(xiàn)時(shí)間與實(shí)際時(shí)間不同的方式來(lái)決定抽除率。例如，抽除處理部6c也可以對(duì)慢速再現(xiàn)幀部分S或慢速再現(xiàn)幀部分S以外的規(guī)定數(shù)量的幀圖像f，按照規(guī)定的解析處理的結(jié)果動(dòng)作越大(快)的幀圖像f抽除比例越小的方式來(lái)控制抽除率。具體來(lái)說(shuō)，例如，抽除處理部6c基于由幀確定部6b的解析處理部bl生成的代表各幀圖像f的差分值(例如，各像素的差分的最大值)，來(lái)確定各幀圖像f的動(dòng)作的大小，并按照動(dòng)作越大的幀圖像f抽除比例越小的方式來(lái)控制抽除率。像這樣，抽除處理部6c構(gòu)成了對(duì)構(gòu)成運(yùn)動(dòng)圖像數(shù)據(jù)D的多個(gè)幀圖像f、...中的、 由幀確定部6b確定的慢速再現(xiàn)幀部分S以外的規(guī)定數(shù)量的幀圖像f，以規(guī)定的比例進(jìn)行抽除處理的處理單元(處理部)。此外，圖像處理部6具備編碼部和解碼部等(全部省略圖示)。編碼部通過(guò)規(guī)定的編碼方式(例如，Motion-JPEG方式等)來(lái)對(duì)由圖像生成部5生成的圖像數(shù)據(jù)(YUV數(shù)據(jù))進(jìn)行壓縮/編碼。即、編碼部通過(guò)規(guī)定的編碼方式來(lái)對(duì)由抽除處理部6c進(jìn)行抽除處理后的運(yùn)動(dòng)圖像數(shù)據(jù)D進(jìn)行壓縮/編碼。解碼部例如在對(duì)記錄在記錄介質(zhì)M中的已編碼的圖像數(shù)據(jù)進(jìn)行再現(xiàn)時(shí)，以與該編碼方式相對(duì)應(yīng)的解碼方式來(lái)對(duì)從記錄介質(zhì)控制部9讀出的已編碼的圖像數(shù)據(jù)進(jìn)行解碼。顯示控制部7進(jìn)行讀出暫時(shí)存儲(chǔ)在緩沖存儲(chǔ)器11中的顯示用的圖像數(shù)據(jù)并使其顯示于顯示部8的控制。具體來(lái)說(shuō),顯示控制部7具備VRAM (Video Random Access Memory,視頻隨機(jī)存取存儲(chǔ)器)、VRAM控制器、數(shù)字視頻編碼器等。并且，數(shù)字視頻編碼器經(jīng)由VRAM控制器以規(guī)定的再現(xiàn)幀速率(例如，30fps)從VRAM中讀出從緩沖存儲(chǔ)器11中讀出而存儲(chǔ)在VRAM(圖示略)中的構(gòu)成運(yùn)動(dòng)圖像的多個(gè)幀圖像f、...的亮度信號(hào)Y以及色差信號(hào)Cb、Cr，并基于這些數(shù)據(jù)來(lái)產(chǎn)生視頻信號(hào)并輸出到顯示部8。在此，在再現(xiàn)幀速率被固定于規(guī)定的值的情況下，運(yùn)動(dòng)圖像的看起來(lái)的再現(xiàn)速度根據(jù)運(yùn)動(dòng)圖像數(shù)據(jù)D的幀圖像f的每秒的輸入幀數(shù)而可變。即、例如，若輸入攝像間隔與再現(xiàn)間隔一致的幀圖像f，則看起來(lái)成為與實(shí)際時(shí)間相對(duì)應(yīng)的通常的再現(xiàn)速度，另一方面，若輸入攝像間隔比再現(xiàn)間隔短的幀圖像f，則看起來(lái)成為比實(shí)際時(shí)間慢的慢動(dòng)作的再現(xiàn)速度。顯示部8例如是液晶顯示面板，基于來(lái)自顯示控制部7的視頻信號(hào)來(lái)將由電子攝像部2拍攝到的圖像等顯示在顯示畫(huà)面中。具體來(lái)說(shuō)，顯示部8在靜止圖像拍攝模式和運(yùn)動(dòng)圖像拍攝模式下，對(duì)由電子攝像部2以及攝像控制部4通過(guò)被攝體的攝像而生成的多個(gè)幀圖像f、...，以規(guī)定的幀速率依次進(jìn)行更新，同時(shí)顯示實(shí)時(shí)取景圖像。此外，顯示部8作為運(yùn)動(dòng)圖像顯示記錄中的多個(gè)幀圖像f、...，或者作為靜止圖像顯示被記錄的圖像(記錄瀏覽(rec view)圖像)。記錄介質(zhì)控制部9構(gòu)成為記錄介質(zhì)M能夠自由裝卸,對(duì)從安裝的記錄介質(zhì)M讀出數(shù)據(jù)和向記錄介質(zhì)M寫(xiě)入數(shù)據(jù)進(jìn)行控制。S卩、記錄介質(zhì)控制部9將由圖像處理部6的編碼部(圖示略)以規(guī)定的壓縮形式 (例如，Motion-JPEG形式等)編碼后的記錄用的圖像數(shù)據(jù)記錄在記錄介質(zhì)M中。另外，記錄介質(zhì)M例如由非揮發(fā)性存儲(chǔ)器(閃存)等構(gòu)成，但這是一個(gè)例子，并非限定于此，能夠適當(dāng)?shù)厝我庾兏?。操作輸入?0用于進(jìn)行該攝像裝置100的規(guī)定操作。具體來(lái)說(shuō)，操作輸入部10 具備與被攝體的攝影指示有關(guān)的、能夠進(jìn)行半按以及全按操作的快門(mén)按鈕；與攝像模式和功能等的選擇指示有關(guān)的選擇決定用按鈕；與變焦量的調(diào)整指示有關(guān)的變焦按鈕(全部省略圖示)等，根據(jù)這些按鈕的操作來(lái)將規(guī)定的操作信號(hào)輸出到中央控制部13。
緩沖存儲(chǔ)器11除了作為暫時(shí)保存圖像數(shù)據(jù)等的緩沖器之外，也作為中央控制部 13的工作存儲(chǔ)器等來(lái)使用。在程序存儲(chǔ)器12中保存有與該攝像裝置100的功能有關(guān)的各種程序和數(shù)據(jù)。中央控制部13對(duì)攝像裝置100的各部進(jìn)行控制。具體來(lái)說(shuō)，中央控制部13具備對(duì)攝像裝置100的各部進(jìn)行控制的CPU(圖示略)，按照各種處理程序(圖示略)來(lái)進(jìn)行各種控制動(dòng)作。接下來(lái)，參照?qǐng)D2以及圖3來(lái)對(duì)攝像裝置100所進(jìn)行的運(yùn)動(dòng)圖像數(shù)據(jù)生成處理進(jìn)行說(shuō)明。圖2是表示運(yùn)動(dòng)圖像數(shù)據(jù)生成處理所涉及的動(dòng)作的一例的流程圖。此外，圖3是用于說(shuō)明運(yùn)動(dòng)圖像數(shù)據(jù)生成處理的圖。另外，以下的運(yùn)動(dòng)圖像數(shù)據(jù)生成處理，基于用戶所進(jìn)行的操作輸入部10的選擇決定用按鈕的規(guī)定操作，在被指示了從多個(gè)攝像模式中選擇運(yùn)動(dòng)圖像數(shù)據(jù)D的生成模式的情況下、或在拍攝被攝體的運(yùn)動(dòng)圖像后自動(dòng)地被執(zhí)行。如圖2所示，首先，圖像處理部6的圖像取得部6a取得由以規(guī)定的攝像幀速率拍攝到的多個(gè)幀圖像f、...構(gòu)成的已記錄的運(yùn)動(dòng)圖像數(shù)據(jù)D(步驟SI)。具體來(lái)說(shuō)，圖像取得部6a在攝像控制部4的控制下，取得通過(guò)透鏡部I、電子攝像部2、單元電路部3以規(guī)定的攝像幀速率(例如，240fps等)而拍攝，并通過(guò)圖像生成部5 而生成的各幀圖像f的圖像數(shù)據(jù)(YUV數(shù)據(jù))。即、取得通過(guò)圖像生成部5根據(jù)按照與攝像幀速率相應(yīng)的每個(gè)規(guī)定的周期(例如，1/240秒等)從單元電路部3發(fā)送來(lái)的數(shù)字的圖像信號(hào)而生成、并通過(guò)編碼部而被壓縮/編碼并記錄在記錄介質(zhì)M中的運(yùn)動(dòng)圖像數(shù)據(jù)D，并通過(guò)解碼部對(duì)該取得的運(yùn)動(dòng)圖像數(shù)據(jù)D進(jìn)行解壓/解碼，由此取得構(gòu)成該運(yùn)動(dòng)圖像數(shù)據(jù)D的各幀圖像f的圖像數(shù)據(jù)。接下來(lái)，幀確定部6b的解析處理部bl對(duì)構(gòu)成運(yùn)動(dòng)圖像數(shù)據(jù)D的多個(gè)幀圖像 f>...進(jìn)行規(guī)定的解析處理(步驟S2)。具體來(lái)說(shuō)，解析處理部bl針對(duì)多個(gè)幀圖像f、...的每一個(gè)，計(jì)算與相鄰的幀圖像 f (例如，前一個(gè)攝像定時(shí)的幀圖像f等)之間對(duì)應(yīng)的各像素的差分，并基于算出的各像素的差分來(lái)進(jìn)行規(guī)定的運(yùn)算，從而生成代表各幀圖像f的差分值。接著，幀確定部6b基于解析處理部bl的解析結(jié)果，來(lái)確定慢速再現(xiàn)幀部分S (步驟 S3)。具體來(lái)說(shuō)，幀確定部6b基于由解析處理部bl生成的代表各幀圖像f的差分值，來(lái)計(jì)算相對(duì)于最小差分值的比例，并在多個(gè)幀圖像f、...內(nèi)，將具有相對(duì)于最小差分值的比例(最小差分比)為規(guī)定的大小(例如，2倍等)以上的差分值的幀圖像f (例如，揮棒開(kāi)始后，上半身的動(dòng)作變大后的幀圖像f等；參照?qǐng)D3(a))確定為慢速再現(xiàn)幀部分S。接下來(lái)，抽除處理部6c對(duì)構(gòu)成運(yùn)動(dòng)圖像數(shù)據(jù)D的多個(gè)幀圖像f、...中的、慢速再現(xiàn)幀部分S以外的規(guī)定數(shù)量的幀圖像f，按照使得以規(guī)定的再現(xiàn)幀速率再現(xiàn)時(shí)的再現(xiàn)時(shí)間與實(shí)際時(shí)間相對(duì)應(yīng)的方式來(lái)進(jìn)行抽除處理(步驟S4)。具體來(lái)說(shuō)，抽除處理部6c，在慢速再現(xiàn)幀部分S以外的規(guī)定數(shù)量的幀圖像f(例如， 揮棒開(kāi)始時(shí)和揮棒結(jié)束時(shí)的規(guī)定數(shù)量的幀圖像f等)中，根據(jù)規(guī)定的再現(xiàn)幀速率(例如， 30fps)對(duì)成為處理對(duì)象的幀圖像f以與攝像幀速率和再現(xiàn)幀速率的比相應(yīng)的規(guī)定的比例(例如，1/8)進(jìn)行抽除來(lái)確定。之后，圖像處理部6的編碼部，在通過(guò)規(guī)定的編碼方式對(duì)由抽除處理部6c進(jìn)行的抽除處理后的運(yùn)動(dòng)圖像數(shù)據(jù)D進(jìn)行壓縮/編碼之后，將其傳送到記錄介質(zhì)控制部9，記錄介質(zhì)控制部9將該運(yùn)動(dòng)圖像數(shù)據(jù)D再次記錄在記錄介質(zhì)M中(步驟S5)。也可以使用戶能夠選擇該再記錄是覆蓋原來(lái)的運(yùn)動(dòng)圖像數(shù)據(jù)D來(lái)進(jìn)行保存，還是保存為新建的運(yùn)動(dòng)圖像數(shù)據(jù)。由此，運(yùn)動(dòng)圖像數(shù)據(jù)生成處理結(jié)束。另外，解析處理部bl所進(jìn)行的解析處理、幀確定部6b所進(jìn)行的確定處理、抽除處理部6c所進(jìn)行的抽除處理、圖像處理部6所進(jìn)行的壓縮/編碼處理、以及向記錄介質(zhì)M的再記錄處理，既可以在對(duì)運(yùn)動(dòng)圖像數(shù)據(jù)D所包含的所有的幀圖像f進(jìn)行解壓/解碼之后進(jìn)行，也可以一邊對(duì)運(yùn)動(dòng)圖像數(shù)據(jù)D所包含的各幀圖像f依次進(jìn)行解壓一邊依次進(jìn)行解析處理、確定處理、抽除處理、壓縮/編碼處理、再記錄處理。此外，這些一系列的處理也可以與運(yùn)動(dòng)圖像數(shù)據(jù)D的再現(xiàn)顯示并行地執(zhí)行。在不并行地進(jìn)行運(yùn)動(dòng)圖像數(shù)據(jù)D的再現(xiàn)顯示的情況下，各幀圖像f的處理的順序不需要從最前面開(kāi)始進(jìn)行，是任意的。如上所述，根據(jù)實(shí)施方式I的攝像裝置100，在進(jìn)行運(yùn)動(dòng)圖像數(shù)據(jù)的攝影記錄時(shí)， 以比對(duì)該運(yùn)動(dòng)圖像數(shù)據(jù)進(jìn)行再現(xiàn)時(shí)設(shè)定的規(guī)定的再現(xiàn)幀速率高速的規(guī)定的攝像幀速率來(lái)對(duì)運(yùn)動(dòng)圖像數(shù)據(jù)的整體進(jìn)行記錄，從而在得到無(wú)論是該運(yùn)動(dòng)圖像數(shù)據(jù)的哪個(gè)部分都能夠不降低再現(xiàn)幀速率(維持流暢的影像)地進(jìn)行慢速再現(xiàn)(相對(duì)于實(shí)際時(shí)間以慢動(dòng)作進(jìn)行再現(xiàn))的形態(tài)的運(yùn)動(dòng)圖像數(shù)據(jù)D之后，對(duì)該運(yùn)動(dòng)圖像數(shù)據(jù)D實(shí)施規(guī)定的解析處理，在構(gòu)成該運(yùn)動(dòng)圖像數(shù)據(jù)D的多個(gè)幀圖像f、...內(nèi)，確定成為慢速再現(xiàn)的對(duì)象的慢速再現(xiàn)幀部分S，并對(duì)該慢速再現(xiàn)幀部分S以外的規(guī)定數(shù)量的幀圖像f，以規(guī)定的比例進(jìn)行抽除處理。因此，即使用戶在拍攝運(yùn)動(dòng)圖像時(shí)不進(jìn)行攝像幀速率的切換操作等，也能夠得到被編輯為能夠部分慢速再現(xiàn)的形態(tài)的運(yùn)動(dòng)圖像數(shù)據(jù)，而且，即使在預(yù)先使攝像幀速率高速地進(jìn)行了攝影記錄的情況下，也能夠?qū)崿F(xiàn)最終需要的運(yùn)動(dòng)圖像數(shù)據(jù)的數(shù)據(jù)量的削減。特別是，對(duì)于慢速再現(xiàn)幀部分S，按照即使不進(jìn)行抽除處理，也能夠以合適的慢速再現(xiàn)速度進(jìn)行慢速再現(xiàn)的方式，來(lái)設(shè)定再現(xiàn)時(shí)的幀速率和攝影時(shí)的攝像幀速率的比，對(duì)于慢速再現(xiàn)幀部分S以外的規(guī)定數(shù)量的幀圖像f，按照使以規(guī)定的再現(xiàn)幀速率進(jìn)行再現(xiàn)時(shí)的再現(xiàn)時(shí)間，與以規(guī)定的攝像幀速率對(duì)該規(guī)定數(shù)量的幀圖像f進(jìn)行拍攝時(shí)的實(shí)際時(shí)間相對(duì)應(yīng)的方式進(jìn)行抽除，由此不僅能夠高效地削減運(yùn)動(dòng)圖像數(shù)據(jù)D的數(shù)據(jù)量，而且能夠減輕對(duì)運(yùn)動(dòng)圖像數(shù)據(jù)D進(jìn)行再現(xiàn)時(shí)的視覺(jué)上的不協(xié)調(diào)感。此外，被編輯為能夠部分慢速再現(xiàn)的形態(tài)后的運(yùn)動(dòng)圖像數(shù)據(jù)，覆蓋原來(lái)的運(yùn)動(dòng)圖像數(shù)據(jù)D來(lái)進(jìn)行保存，或者保存為新建的運(yùn)動(dòng)圖像數(shù)據(jù)，因此在對(duì)編輯后的運(yùn)動(dòng)圖像數(shù)據(jù)進(jìn)行再現(xiàn)時(shí)，不需要再次進(jìn)行解析處理和抽除處理等，即使在不具有本攝像裝置100這樣的功能的其他的一般運(yùn)動(dòng)圖像再現(xiàn)裝置中，對(duì)上述編輯后的運(yùn)動(dòng)圖像數(shù)據(jù)進(jìn)行再現(xiàn)的情況下,也能夠同樣地使其部分慢速再現(xiàn)。此外，在構(gòu)成運(yùn)動(dòng)圖像數(shù)據(jù)D的多個(gè)幀圖像f、...中，將這些幀圖像f、...中的被攝體的狀態(tài)變化為規(guī)定的大小以上的幀圖像f確定為慢速再現(xiàn)幀部分S。具體來(lái)說(shuō)，將構(gòu)成運(yùn)動(dòng)圖像數(shù)據(jù)D的多個(gè)幀圖像f、...間的具有相對(duì)于差分最小值的比例為規(guī)定大小以上的差分的幀圖像f確定為慢速再現(xiàn)幀部分S，因此能夠考慮到多個(gè)幀圖像f、...中的被攝體的狀態(tài)變化，恰當(dāng)?shù)卮_定應(yīng)以低速的再現(xiàn)幀速率進(jìn)行再現(xiàn)的慢速再現(xiàn)幀部分S。
此外，也可以不明確地區(qū)分慢速再現(xiàn)幀部分S和慢速再現(xiàn)幀部分S以外的幀部分， 即、不區(qū)分不進(jìn)行抽除處理的幀部分、和以再現(xiàn)速度與實(shí)際時(shí)間相對(duì)應(yīng)的抽除率來(lái)進(jìn)行抽除處理的幀部分，而對(duì)構(gòu)成運(yùn)動(dòng)圖像數(shù)據(jù)D的各幀圖像，確定慢速再現(xiàn)的程度，并根據(jù)該慢速再現(xiàn)的程度來(lái)使幀圖像f的抽除比例多階段地變化。S卩、對(duì)于慢速再現(xiàn)幀部分S和慢速再現(xiàn)幀部分S以外的幀圖像f，按照動(dòng)作越大的幀圖像f抽除比例越小的方式來(lái)多階段地控制抽除率，由此能夠生成考慮了被攝體的動(dòng)作的變化的運(yùn)動(dòng)圖像數(shù)據(jù)D。具體來(lái)說(shuō)，例如，在被攝體的動(dòng)作斷續(xù)地變化，或者被攝體的動(dòng)作流暢地變動(dòng)等情況下，能夠減輕通過(guò)不進(jìn)行對(duì)慢速再現(xiàn)幀部分S的抽除處理，或者對(duì)慢速再現(xiàn)幀部分S以外的幀圖像f一律以規(guī)定的比例進(jìn)行抽除處理而生成的運(yùn)動(dòng)圖像的再現(xiàn)時(shí)的視覺(jué)上的不協(xié)調(diào)感。另外，本發(fā)明不限定于上述實(shí)施方式，在不脫離本發(fā)明的主旨的范圍內(nèi)，可以進(jìn)行各種改良以及設(shè)計(jì)的變更。以下，對(duì)攝像裝置100的變形例進(jìn)行說(shuō)明。<變形例1>該變形例I的攝像裝置100，在構(gòu)成運(yùn)動(dòng)圖像數(shù)據(jù)D的多個(gè)幀圖像f、...中，基于各幀圖像f中動(dòng)作最大的部分的動(dòng)作的大小，來(lái)確定慢速再現(xiàn)幀部分S。S卩、幀確定部6b的解析處理部bl，作為規(guī)定的解析處理，在計(jì)算出構(gòu)成運(yùn)動(dòng)圖像數(shù)據(jù)D的多個(gè)幀圖像f、...的每一個(gè)中特征較高的規(guī)定數(shù)量的塊區(qū)域(特征點(diǎn))的動(dòng)作向量之后，進(jìn)行確定這些動(dòng)作向量中動(dòng)作最大的塊區(qū)域的處理。然后，解析處理部bl將確定的塊區(qū)域的動(dòng)作向量確定為各幀圖像f的動(dòng)作的大小。特征較高的塊區(qū)域的提取，例如，在圖3所示的球棒揮棒的例子中，通過(guò)輪廓提取處理或圖像識(shí)別處理等來(lái)提取幀圖像內(nèi)的人臉部分、球棒部分、球部分等。此外，也可以預(yù)先由用戶選擇性地指定“球棒部分”等對(duì)象部分。幀確定部6b，在多個(gè)幀圖像f、...內(nèi)，將動(dòng)作的大小為規(guī)定大小以上的幀圖像f 確定為慢速再現(xiàn)幀部分S。具體來(lái)說(shuō)，幀確定部6b計(jì)算出由解析處理確定的各幀圖像f的動(dòng)作向量的大小中的最大值和最小值，并在這些最大值和最小值間根據(jù)最大值將規(guī)定比例 (例如，10%程度)設(shè)定為閾值。然后，幀確定部6b，在多個(gè)幀圖像f、...中，將具有閾值以下的動(dòng)作向量的幀圖像f連續(xù)規(guī)定時(shí)間以上的部分確定為慢速再現(xiàn)幀部分S。接下來(lái)，參照?qǐng)D4，對(duì)該變形例所涉及的運(yùn)動(dòng)圖像數(shù)據(jù)生成處理進(jìn)行說(shuō)明。如圖4所示，首先，圖像處理部6的圖像取得部6a與上述實(shí)施方式同樣地取得由以規(guī)定的攝像幀速率拍攝到的多個(gè)幀圖像f、...構(gòu)成的運(yùn)動(dòng)圖像數(shù)據(jù)D(步驟SI)。接下來(lái)，幀確定部6b的解析處理部bl對(duì)構(gòu)成運(yùn)動(dòng)圖像數(shù)據(jù)D的多個(gè)幀圖像 f>...進(jìn)行規(guī)定的解析處理(步驟S21)。具體來(lái)說(shuō),解析處理部bl對(duì)多個(gè)巾貞圖像f、...的每一個(gè)計(jì)算出特征較高的規(guī)定數(shù)量的塊區(qū)域(特征點(diǎn))的動(dòng)作向量。之后，解析處理部bl確定算出的動(dòng)作向量中動(dòng)作最大的塊區(qū)域，并將確定的塊區(qū)域的動(dòng)作向量確定為各幀圖像f的動(dòng)作的大小。接著,巾貞確定部6b基于解析處理部bl的解析結(jié)果,計(jì)算出各巾貞圖像f的動(dòng)作向量的大小中的最大值和最小值(步驟S22)，之后，在這些最大值和最小值間根據(jù)最大值將規(guī)定比例(例如，10%程度)的值設(shè)定為慢速再現(xiàn)幀部分S的判定用的相對(duì)閾值(步驟S23)。
然后,巾貞確定部6b在多個(gè)巾貞圖像f、...中，確定具有慢速再現(xiàn)巾貞部分S的判定用閾值以下的動(dòng)作向量的幀圖像f，將對(duì)該幀圖像f連續(xù)拍攝規(guī)定時(shí)間以上的部分確定為慢速再現(xiàn)幀部分S (步驟S24)。接著，抽除處理部6c與上述實(shí)施方式同樣地，對(duì)構(gòu)成運(yùn)動(dòng)圖像數(shù)據(jù)D的多個(gè)幀圖像f、. · ·中的、慢速再現(xiàn)幀部分S以外的規(guī)定數(shù)量的幀圖像f，按照使得以規(guī)定的再現(xiàn)幀速率進(jìn)行再現(xiàn)時(shí)的再現(xiàn)時(shí)間與實(shí)際時(shí)間像對(duì)應(yīng)的方式進(jìn)行抽除處理(步驟S4)。之后，圖像處理部6的編碼部與上述實(shí)施方式同樣地，在通過(guò)規(guī)定的編碼方式對(duì)由抽除處理部6c進(jìn)行抽除處理后的運(yùn)動(dòng)圖像數(shù)據(jù)D進(jìn)行壓縮/編碼之后，將其傳送到記錄介質(zhì)控制部9，記錄介質(zhì)控制部9將該運(yùn)動(dòng)圖像數(shù)據(jù)D記錄在記錄介質(zhì)M中(步驟S5)。由此，運(yùn)動(dòng)圖像數(shù)據(jù)生成處理結(jié)束。因此，根據(jù)該變形例I的攝像裝置100，在構(gòu)成運(yùn)動(dòng)圖像數(shù)據(jù)D的多個(gè)幀圖像 f、...的每一個(gè)中檢測(cè)動(dòng)作最大的部分，在構(gòu)成運(yùn)動(dòng)圖像數(shù)據(jù)D的多個(gè)幀圖像f、...內(nèi)，將檢測(cè)出的動(dòng)作最大的部分的動(dòng)作的大小為規(guī)定的大小以上的幀圖像f確定為慢速再現(xiàn)幀部分S，因此能夠考慮到各幀圖像f內(nèi)的特征部分的動(dòng)作，來(lái)恰當(dāng)?shù)卮_定應(yīng)以低速的再現(xiàn)幀速率進(jìn)行再現(xiàn)的慢速再現(xiàn)幀部分S?！醋冃卫?>在上述實(shí)施方式中，為了能夠在攝影記錄后任意指定進(jìn)行慢速再現(xiàn)的部分，而無(wú)條件地以高速的攝像幀速率對(duì)運(yùn)動(dòng)圖像數(shù)據(jù)進(jìn)行記錄，但若在攝影前已經(jīng)知道不需要進(jìn)行部分慢速再現(xiàn)，則沒(méi)有必要以高速的攝像幀速率進(jìn)行攝像。因此，設(shè)置記錄通常的運(yùn)動(dòng)圖像數(shù)據(jù)的第I運(yùn)動(dòng)圖像記錄模式和記錄與部分慢速再現(xiàn)相對(duì)應(yīng)的運(yùn)動(dòng)圖像數(shù)據(jù)的第2運(yùn)動(dòng)圖像記錄模式，使得在開(kāi)始運(yùn)動(dòng)圖像攝影前能夠由用戶基于操作輸入部10的規(guī)定操作來(lái)選擇并設(shè)定任意一種模式。并且，在設(shè)定了第2運(yùn)動(dòng)圖像記錄模式的情況下，中央控制部13自動(dòng)地設(shè)定比再現(xiàn)幀速率高速的攝像幀速率來(lái)記錄運(yùn)動(dòng)圖像數(shù)據(jù)，并且自動(dòng)地對(duì)該記錄的運(yùn)動(dòng)圖像數(shù)據(jù)執(zhí)行在上述實(shí)施方式中進(jìn)行的慢速再現(xiàn)幀部分S的確定處理、和對(duì)慢速再現(xiàn)幀部分S以外進(jìn)行抽除的抽除處理。另一方面，在設(shè)定了第I運(yùn)動(dòng)圖像記錄模式的情況下，中央控制部13在以與再現(xiàn)幀速率相同的攝像幀速率記錄了運(yùn)動(dòng)圖像數(shù)據(jù)之后，不自動(dòng)執(zhí)行在上述實(shí)施方式中進(jìn)行的慢速再現(xiàn)幀部分S的確定處理、和對(duì)慢速再現(xiàn)幀部分S以外進(jìn)行抽除的抽除處理。因此，根據(jù)本變形例2的攝像裝置100，僅通過(guò)根據(jù)部分慢速再現(xiàn)的必要性來(lái)進(jìn)行模式選擇，就能夠自動(dòng)地設(shè)定高速的攝像幀速率，因此能夠容易地得到能夠進(jìn)行部分慢速再現(xiàn)的運(yùn)動(dòng)圖像數(shù)據(jù)，并且能夠防止在不需要進(jìn)行部分慢速再現(xiàn)的情況下也記錄包含無(wú)用的幀的運(yùn)動(dòng)圖像數(shù)據(jù)從而壓迫存儲(chǔ)器容量。另外，上述實(shí)施方式以及變形例I、2中的慢速再現(xiàn)幀部分S的確定方法是一例，并非限定于此，能夠適當(dāng)?shù)厝我庾兏卩、在上述實(shí)施方式中，使得慢速再現(xiàn)幀部分S的確定方法，以各幀圖像f的差分值相對(duì)于最小差分值的比例為基準(zhǔn)來(lái)進(jìn)行，但例如，也可以以各幀圖像f的差分值相對(duì)于最大差分值的比例為基準(zhǔn)，將具有相對(duì)于最大差分值的比例為規(guī)定的大小以下的差分值的幀圖像f確定為慢速再現(xiàn)幀部分S。
此外，在上述變形例I中，在確定慢速再現(xiàn)幀部分S時(shí)，基于動(dòng)作向量的大小的最大值和最小值，來(lái)設(shè)定慢速再現(xiàn)幀部分S的判定用的相對(duì)閾值，但例如，也可以以動(dòng)作向量的大小的最大值以及最小值中的、任意一個(gè)值為基準(zhǔn)，來(lái)設(shè)定慢速再現(xiàn)幀部分S的判定用的絕對(duì)閾值。此外，在上述實(shí)施方式中，抽除處理部6c也可以基于慢速再現(xiàn)幀部分S以外的規(guī)定數(shù)量的幀圖像f，來(lái)生成以規(guī)定的再現(xiàn)幀速率被再現(xiàn)的一個(gè)代表幀圖像f。即、抽除處理部6c基于規(guī)定數(shù)量的幀圖像f的各像素的像素值來(lái)進(jìn)行規(guī)定的運(yùn)算，生成具有代表規(guī)定數(shù)量的幀圖像f 的像素值(例如，平均值或中央值等)的代表幀圖像。由此，對(duì)于慢速再現(xiàn)幀部分S以外的規(guī)定數(shù)量的幀圖像f，通過(guò)以規(guī)定的再現(xiàn)幀速率來(lái)再現(xiàn)代表幀圖像，能夠使被攝體的動(dòng)作平滑，能夠減輕對(duì)運(yùn)動(dòng)圖像數(shù)據(jù)D進(jìn)行再現(xiàn)時(shí)的視覺(jué)上的不協(xié)調(diào)感。并且，在上述實(shí)施方式中作為運(yùn)動(dòng)圖像處理裝置而例示的攝像裝置100的構(gòu)成是一個(gè)例子，并非限定于此，只要為至少具備取得單元(取得部)、確定單元(確定部)、處理單元(處理部)的構(gòu)成則可以適當(dāng)?shù)厝我庾兏６?，在上述?shí)施方式中，采用了通過(guò)在中央控制部13的控制下，由圖像取得部 6a、幀確定部6b、抽除處理部6c進(jìn)行驅(qū)動(dòng)，而實(shí)現(xiàn)了取得單元、確定單元、處理單元的功能的構(gòu)成，但并非限定于此，也可以采用通過(guò)由中央控制部13的CPU執(zhí)行規(guī)定的程序等來(lái)實(shí)現(xiàn)的構(gòu)成。S卩、在存儲(chǔ)程序的程序存儲(chǔ)器12中，預(yù)先存儲(chǔ)包含取得處理例行程序、確定處理例行程序、抽除處理例行程序的程序。并且，也可以通過(guò)取得處理例行程序，使中央控制部 13的CPU發(fā)揮取得以規(guī)定的攝像幀速率拍攝到的被攝體的運(yùn)動(dòng)圖像數(shù)據(jù)D的取得單元的功能。此外，也可以通過(guò)確定處理例行程序，使中央控制部13的CPU發(fā)揮對(duì)由取得單元取得的所述運(yùn)動(dòng)圖像數(shù)據(jù)D實(shí)施規(guī)定的解析處理，并在構(gòu)成該運(yùn)動(dòng)圖像數(shù)據(jù)D的多個(gè)幀圖像 f、...內(nèi)，確定由作為慢速再現(xiàn)的對(duì)象的多個(gè)幀圖像f、...構(gòu)成的慢速再現(xiàn)幀部分S的確定單元的功能。此外，也可以通過(guò)抽除處理例行程序，使中央控制部13的CPU發(fā)揮對(duì)構(gòu)成運(yùn)動(dòng)圖像數(shù)據(jù)D的多個(gè)幀圖像f、...中的、由確定單元確定的慢速再現(xiàn)幀部分S以外的規(guī)定數(shù)量的幀圖像f，以規(guī)定的比例進(jìn)行抽除處理的處理單元的功能。并且，作為保存了用于執(zhí)行上述各處理的程序的計(jì)算機(jī)可讀取的介質(zhì)，除了 ROM、 硬盤(pán)等之外，也可以應(yīng)用閃存等非揮發(fā)性存儲(chǔ)器、CD-ROM等可移動(dòng)型記錄介質(zhì)。此外，作為經(jīng)由規(guī)定的通信線路來(lái)提供程序數(shù)據(jù)的介質(zhì)，也可以應(yīng)用載波(carrier wave)。而且，本次公開(kāi)的實(shí)施方式，應(yīng)當(dāng)認(rèn)為在所有的點(diǎn)上均為例示，而不是限制性的描述。本發(fā)明的范圍，由權(quán)利要求書(shū)而非上述說(shuō)明而示出，旨在包含與權(quán)利要求書(shū)均等的含意以及范圍內(nèi)的所有的變更。以下，附記在本申請(qǐng)最初的權(quán)利要求書(shū)中記載的發(fā)明。S卩、攝像裝置采用了如下結(jié)構(gòu)，具備取得部，其取得以規(guī)定的攝像幀速率拍攝到的被攝體的運(yùn)動(dòng)圖像數(shù)據(jù)；確定部，其對(duì)由該取得部取得的所述運(yùn)動(dòng)圖像數(shù)據(jù)實(shí)施規(guī)定的解析處理，并在構(gòu)成該運(yùn)動(dòng)圖像數(shù)據(jù)的多個(gè)幀圖像內(nèi)，確定由作為慢速再現(xiàn)的對(duì)象的多個(gè)幀圖像構(gòu)成的慢速再現(xiàn)幀部分；和處理部，其對(duì)構(gòu)成所述運(yùn)動(dòng)圖像數(shù)據(jù)的多個(gè)幀圖像中、由所述確定部確定的所述慢速再現(xiàn)幀部分以外的規(guī)定數(shù)量的幀圖像，以規(guī)定的比例進(jìn)行抽除處理。此外，也可以還具備記錄部，所述記錄部記錄被壓縮/編碼后的運(yùn)動(dòng)圖像數(shù)據(jù)， 所述取得部取得記錄在所述記錄部中的運(yùn)動(dòng)圖像數(shù)據(jù)，所述確定部對(duì)通過(guò)對(duì)由所述取得部取得的所述運(yùn)動(dòng)圖像數(shù)據(jù)進(jìn)行解壓/解碼而得到的多個(gè)幀圖像實(shí)施規(guī)定的解析處理，來(lái)確定由作為慢速再現(xiàn)的對(duì)象的多個(gè)幀圖像構(gòu)成的慢速再現(xiàn)幀部分，所述處理部對(duì)進(jìn)行了所述抽除處理后的運(yùn)動(dòng)圖像數(shù)據(jù)再次進(jìn)行壓縮/編碼并記錄在所述記錄部中。此外，也可以所述取得部還取得以比對(duì)運(yùn)動(dòng)圖像數(shù)據(jù)進(jìn)行再現(xiàn)時(shí)設(shè)定的規(guī)定的再現(xiàn)幀速率高速的規(guī)定的攝像幀速率拍攝到的被攝體的運(yùn)動(dòng)圖像數(shù)據(jù)，所述處理部，作為所述抽除處理，還按照使以所述再現(xiàn)幀速率進(jìn)行再現(xiàn)時(shí)的再現(xiàn)時(shí)間與實(shí)際時(shí)間相對(duì)應(yīng)的方式，以與所述攝像幀速率和所述再現(xiàn)幀速率的比相應(yīng)的比例，對(duì)由所述確定部確定的所述慢速再現(xiàn)幀部分以外的規(guī)定數(shù)量的幀圖像進(jìn)行抽除。此外，也可以所述處理部還對(duì)由所述確定部確定的所述慢速再現(xiàn)幀部分的幀圖像不進(jìn)行抽除，或者，以比對(duì)所述慢速再現(xiàn)幀部分以外的幀圖像進(jìn)行抽除時(shí)的比例低的比例進(jìn)行抽除。此外，也可以所述確定部還通過(guò)所述規(guī)定的解析處理來(lái)檢測(cè)構(gòu)成所述運(yùn)動(dòng)圖像數(shù)據(jù)的多個(gè)幀圖像中的被攝體的狀態(tài)變化，并在構(gòu)成該運(yùn)動(dòng)圖像數(shù)據(jù)的多個(gè)幀圖像內(nèi)，將檢測(cè)出的被攝體的狀態(tài)變化為規(guī)定的大小以上的幀圖像確定為所述慢速再現(xiàn)幀部分。此外，也可以所述確定部還通過(guò)所述規(guī)定的解析處理來(lái)確定各幀圖像內(nèi)的特征部分，并將該確定的特征部分的狀態(tài)變化為規(guī)定的大小以上的幀圖像確定為所述慢速再現(xiàn)中貞部分。此外，也可以所述確定部還按照所述確定的特征部分的狀態(tài)變化的大小越大的幀圖像部分，慢速再現(xiàn)的程度越強(qiáng)的方式，來(lái)多階段地確定慢速再現(xiàn)的程度，所述處理部按照由所述確定部確定的慢速再現(xiàn)的程度越強(qiáng)則抽除率越小的方式，來(lái)多階段地改變抽除率。此外，也可以所述確定部還通過(guò)所述規(guī)定的解析處理來(lái)計(jì)算構(gòu)成所述運(yùn)動(dòng)圖像數(shù)據(jù)的多個(gè)幀圖像間的差分，并在構(gòu)成所述運(yùn)動(dòng)圖像數(shù)據(jù)的多個(gè)幀圖像內(nèi)，將具有相對(duì)于計(jì)算出的差分最小值的比例為規(guī)定的大小以上的差分的幀圖像確定為所述慢速再現(xiàn)幀部分。此外，也可以所述確定部還通過(guò)所述規(guī)定的解析處理來(lái)在構(gòu)成所述運(yùn)動(dòng)圖像數(shù)據(jù)的多個(gè)幀圖像的每一個(gè)中檢測(cè)動(dòng)作最大的部分，并在構(gòu)成所述運(yùn)動(dòng)圖像數(shù)據(jù)的多個(gè)幀圖像內(nèi)，將檢測(cè)出的動(dòng)作最大的部分的動(dòng)作大小為規(guī)定的大小以上的幀圖像確定為所述慢速再現(xiàn)幀部分。此外，也可以所述確定部還對(duì)構(gòu)成該運(yùn)動(dòng)圖像數(shù)據(jù)的各幀圖像確定慢速再現(xiàn)的程度，所述處理部還根據(jù)由所述確定部確定的慢速再現(xiàn)的程度來(lái)改變對(duì)幀圖像進(jìn)行抽除的比例。此外，也可以所述處理部還按照根據(jù)所述規(guī)定的解析處理的結(jié)果，動(dòng)作越大的幀圖像抽除比例越小的方式，來(lái)對(duì)構(gòu)成所述運(yùn)動(dòng)圖像數(shù)據(jù)的多個(gè)幀圖像中、由所述確定部確定的所述慢速再現(xiàn)幀部分的幀圖像控制抽除率。此外，也可以所述處理部還通過(guò)所述抽除處理，基于由所述確定部確定的所述慢速再現(xiàn)幀部分以外的規(guī)定數(shù)量的幀圖像，來(lái)生成以所述再現(xiàn)幀速率被再現(xiàn)的一個(gè)代表幀圖像。此外，也可以還具備模式設(shè)定部，其選擇性地設(shè)定記錄通常的運(yùn)動(dòng)圖像數(shù)據(jù)的第 I運(yùn)動(dòng)圖像記錄模式、和記錄與部分慢速再現(xiàn)相對(duì)應(yīng)的運(yùn)動(dòng)圖像數(shù)據(jù)的第2運(yùn)動(dòng)圖像記錄模式的任意一種；和控制部，其在通過(guò)該模式設(shè)定部設(shè)定了所述第2運(yùn)動(dòng)圖像記錄模式的情況下，控制為自動(dòng)地設(shè)定比所述規(guī)定的再現(xiàn)幀速率高速的攝像幀速率來(lái)記錄運(yùn)動(dòng)圖像數(shù)據(jù)，并且由所述取得部取得該記錄的運(yùn)動(dòng)圖像數(shù)據(jù)來(lái)自動(dòng)地執(zhí)行所述確定部以及所述處理部的處理；在通過(guò)所述模式設(shè)定部設(shè)定了所述第I運(yùn)動(dòng)圖像記錄模式的情況下，控制為在以與所述規(guī)定的再現(xiàn)幀速率相同的攝像幀速率記錄了運(yùn)動(dòng)圖像數(shù)據(jù)之后，不自動(dòng)地執(zhí)行所述確定部以及所述處理部的處理。此外，使用了運(yùn)動(dòng)圖像處理裝置的運(yùn)動(dòng)圖像處理方法，采用了包含如下步驟的構(gòu)成取得以規(guī)定的攝像幀速率拍攝到的被攝體的運(yùn)動(dòng)圖像數(shù)據(jù)的步驟；對(duì)取得的所述運(yùn)動(dòng)圖像數(shù)據(jù)實(shí)施規(guī)定的解析處理，來(lái)在構(gòu)成該運(yùn)動(dòng)圖像數(shù)據(jù)的多個(gè)幀圖像內(nèi)，確定由作為慢速再現(xiàn)的對(duì)象的多個(gè)幀圖像構(gòu)成的慢速再現(xiàn)幀部分的步驟；和對(duì)構(gòu)成所述運(yùn)動(dòng)圖像數(shù)據(jù)的多個(gè)幀圖像中、確定的所述慢速再現(xiàn)幀部分以外的規(guī)定數(shù)量的幀圖像，以規(guī)定的比例進(jìn)行抽除處理的步驟。
權(quán)利要求
1.一種運(yùn)動(dòng)圖像處理裝置，其特征在于，具備取得部，其取得以規(guī)定的攝像幀速率拍攝到的被攝體的運(yùn)動(dòng)圖像數(shù)據(jù)；確定部，其對(duì)由該取得部取得的所述運(yùn)動(dòng)圖像數(shù)據(jù)實(shí)施規(guī)定的解析處理，并在構(gòu)成該運(yùn)動(dòng)圖像數(shù)據(jù)的多個(gè)幀圖像內(nèi)，確定由作為慢速再現(xiàn)的對(duì)象的多個(gè)幀圖像構(gòu)成的慢速再現(xiàn)中貞部分；和處理部，其對(duì)構(gòu)成所述運(yùn)動(dòng)圖像數(shù)據(jù)的多個(gè)幀圖像中、由所述確定部確定的所述慢速再現(xiàn)幀部分以外的規(guī)定數(shù)量的幀圖像，以規(guī)定的比例進(jìn)行抽除處理。
2.根據(jù)權(quán)利要求I所述的運(yùn)動(dòng)圖像處理裝置，其特征在于，還具備記錄部，所述記錄部記錄被壓縮/編碼后的運(yùn)動(dòng)圖像數(shù)據(jù)，所述取得部取得記錄在所述記錄部中的運(yùn)動(dòng)圖像數(shù)據(jù)，所述確定部對(duì)通過(guò)對(duì)由所述取得部取得的所述運(yùn)動(dòng)圖像數(shù)據(jù)進(jìn)行解壓/解碼而得到的多個(gè)幀圖像實(shí)施規(guī)定的解析處理，來(lái)確定由作為慢速再現(xiàn)的對(duì)象的多個(gè)幀圖像構(gòu)成的慢速再現(xiàn)幀部分，所述處理部對(duì)進(jìn)行了所述抽除處理后的運(yùn)動(dòng)圖像數(shù)據(jù)再次進(jìn)行壓縮/編碼并記錄在所述記錄部中。
3.根據(jù)權(quán)利要求I或2所述的運(yùn)動(dòng)圖像處理裝置，其特征在于，所述取得部還取得以比對(duì)運(yùn)動(dòng)圖像數(shù)據(jù)進(jìn)行再現(xiàn)時(shí)設(shè)定的規(guī)定的再現(xiàn)幀速率高速的規(guī)定的攝像幀速率拍攝到的被攝體的運(yùn)動(dòng)圖像數(shù)據(jù)，所述處理部，作為所述抽除處理，還按照使以所述再現(xiàn)幀速率進(jìn)行再現(xiàn)時(shí)的再現(xiàn)時(shí)間與實(shí)際時(shí)間相對(duì)應(yīng)的方式，以與所述攝像幀速率和所述再現(xiàn)幀速率的比相應(yīng)的比例，對(duì)由所述確定部確定的所述慢速再現(xiàn)幀部分以外的規(guī)定數(shù)量的幀圖像進(jìn)行抽除。
4.根據(jù)權(quán)利要求I或2所述的運(yùn)動(dòng)圖像處理裝置，其特征在于，所述處理部還對(duì)由所述確定部確定的所述慢速再現(xiàn)幀部分的幀圖像不進(jìn)行抽除，或者，以比對(duì)所述慢速再現(xiàn)幀部分以外的幀圖像進(jìn)行抽除時(shí)的比例低的比例進(jìn)行抽除。
5.根據(jù)權(quán)利要求I或2所述的運(yùn)動(dòng)圖像處理裝置，其特征在于，所述確定部還通過(guò)所述規(guī)定的解析處理來(lái)檢測(cè)構(gòu)成所述運(yùn)動(dòng)圖像數(shù)據(jù)的多個(gè)幀圖像中的被攝體的狀態(tài)變化，并在構(gòu)成該運(yùn)動(dòng)圖像數(shù)據(jù)的多個(gè)幀圖像內(nèi)，將檢測(cè)出的被攝體的狀態(tài)變化為規(guī)定的大小以上的幀圖像確定為所述慢速再現(xiàn)幀部分。
6.根據(jù)權(quán)利要求5所述的運(yùn)動(dòng)圖像處理裝置，其特征在于，所述確定部還通過(guò)所述規(guī)定的解析處理來(lái)確定各幀圖像內(nèi)的特征部分，并將該確定的特征部分的狀態(tài)變化為規(guī)定的大小以上的幀圖像確定為所述慢速再現(xiàn)幀部分。
7.根據(jù)權(quán)利要求6所述的運(yùn)動(dòng)圖像處理裝置，其特征在于，所述確定部還按照所述確定的特征部分的狀態(tài)變化的大小越大的幀圖像部分，慢速再現(xiàn)的程度越強(qiáng)的方式，來(lái)多階段地確定慢速再現(xiàn)的程度，所述處理部按照由所述確定部確定的慢速再現(xiàn)的程度越強(qiáng)則抽除率越小的方式，來(lái)多階段地改變抽除率。
8.根據(jù)權(quán)利要求5所述的運(yùn)動(dòng)圖像處理裝置，其特征在于，所述確定部還通過(guò)所述規(guī)定的解析處理來(lái)計(jì)算構(gòu)成所述運(yùn)動(dòng)圖像數(shù)據(jù)的多個(gè)幀圖像間的差分，并在構(gòu)成所述運(yùn)動(dòng)圖像數(shù)據(jù)的多個(gè)幀圖像內(nèi)，將具有相對(duì)于計(jì)算出的差分最小值的比例為規(guī)定的大小以上的差分的幀圖像確定為所述慢速再現(xiàn)幀部分。
9.根據(jù)權(quán)利要求5所述的運(yùn)動(dòng)圖像處理裝置，其特征在于，所述確定部還通過(guò)所述規(guī)定的解析處理來(lái)在構(gòu)成所述運(yùn)動(dòng)圖像數(shù)據(jù)的多個(gè)幀圖像的每一個(gè)中檢測(cè)動(dòng)作最大的部分，并在構(gòu)成所述運(yùn)動(dòng)圖像數(shù)據(jù)的多個(gè)幀圖像內(nèi)，將檢測(cè)出的動(dòng)作最大的部分的動(dòng)作大小為規(guī)定的大小以上的幀圖像確定為所述慢速再現(xiàn)幀部分。
10.根據(jù)權(quán)利要求I或2所述的運(yùn)動(dòng)圖像處理裝置，其特征在于，所述確定部還對(duì)構(gòu)成該運(yùn)動(dòng)圖像數(shù)據(jù)的各幀圖像確定慢速再現(xiàn)的程度，所述處理部還根據(jù)由所述確定部確定的慢速再現(xiàn)的程度來(lái)改變對(duì)幀圖像進(jìn)行抽除的比例。
11.根據(jù)權(quán)利要求10所述的運(yùn)動(dòng)圖像處理裝置，其特征在于，所述處理部還按照根據(jù)所述規(guī)定的解析處理的結(jié)果，動(dòng)作越大的幀圖像抽除比例越小的方式，來(lái)對(duì)構(gòu)成所述運(yùn)動(dòng)圖像數(shù)據(jù)的多個(gè)幀圖像中、由所述確定部確定的所述慢速再現(xiàn)幀部分的幀圖像控制抽除率。
12.根據(jù)權(quán)利要求I或2所述的運(yùn)動(dòng)圖像處理裝置，其特征在于，所述處理部還通過(guò)所述抽除處理，基于由所述確定部確定的所述慢速再現(xiàn)幀部分以外的規(guī)定數(shù)量的幀圖像，來(lái)生成以所述再現(xiàn)幀速率被再現(xiàn)的一個(gè)代表幀圖像。
13.根據(jù)權(quán)利要求I或2所述的運(yùn)動(dòng)圖像處理裝置，其特征在于，還具備模式設(shè)定部，其選擇性地設(shè)定記錄通常的運(yùn)動(dòng)圖像數(shù)據(jù)的第I運(yùn)動(dòng)圖像記錄模式、和記錄與部分慢速再現(xiàn)相對(duì)應(yīng)的運(yùn)動(dòng)圖像數(shù)據(jù)的第2運(yùn)動(dòng)圖像記錄模式的任意一種；和控制部，其在通過(guò)該模式設(shè)定部設(shè)定了所述第2運(yùn)動(dòng)圖像記錄模式的情況下，控制為自動(dòng)地設(shè)定比所述規(guī)定的再現(xiàn)幀速率高速的攝像幀速率來(lái)記錄運(yùn)動(dòng)圖像數(shù)據(jù)，并且由所述取得部取得該記錄的運(yùn)動(dòng)圖像數(shù)據(jù)來(lái)自動(dòng)地執(zhí)行所述確定部以及所述處理部的處理；在通過(guò)所述模式設(shè)定部設(shè)定了所述第I運(yùn)動(dòng)圖像記錄模式的情況下，控制為在以與所述規(guī)定的再現(xiàn)幀速率相同的攝像幀速率記錄了運(yùn)動(dòng)圖像數(shù)據(jù)之后，不自動(dòng)地執(zhí)行所述確定部以及所述處理部的處理。
14.一種運(yùn)動(dòng)圖像處理方法，使用了運(yùn)動(dòng)圖像處理裝置，所述運(yùn)動(dòng)圖像處理方法的特征在于，包含如下步驟取得以規(guī)定的攝像幀速率拍攝到的被攝體的運(yùn)動(dòng)圖像數(shù)據(jù)的步驟；對(duì)取得的所述運(yùn)動(dòng)圖像數(shù)據(jù)實(shí)施規(guī)定的解析處理，來(lái)在構(gòu)成該運(yùn)動(dòng)圖像數(shù)據(jù)的多個(gè)幀圖像內(nèi)，確定由作為慢速再現(xiàn)的對(duì)象的多個(gè)幀圖像構(gòu)成的慢速再現(xiàn)幀部分的步驟；和對(duì)構(gòu)成所述運(yùn)動(dòng)圖像數(shù)據(jù)的多個(gè)幀圖像中、確定的所述慢速再現(xiàn)幀部分以外的規(guī)定數(shù)量的幀圖像，以規(guī)定的比例進(jìn)行抽除處理的步驟。
全文摘要
本發(fā)明的攝像裝置(100)具備幀確定部(6b)，其對(duì)運(yùn)動(dòng)圖像數(shù)據(jù)實(shí)施規(guī)定的解析處理，在構(gòu)成該運(yùn)動(dòng)圖像數(shù)據(jù)的多個(gè)幀圖像內(nèi)，確定由作為慢速再現(xiàn)的對(duì)象的多個(gè)幀圖像構(gòu)成的慢速再現(xiàn)幀部分；和抽除處理部(6c)，其以規(guī)定的比例，對(duì)構(gòu)成運(yùn)動(dòng)圖像數(shù)據(jù)的多個(gè)幀圖像中、確定的慢速再現(xiàn)幀部分以外的規(guī)定數(shù)量的幀圖像進(jìn)行抽除處理。由此，即使用戶在運(yùn)動(dòng)圖像數(shù)據(jù)的攝影記錄時(shí)不進(jìn)行特別的操作，也可得到能夠部分慢速再現(xiàn)的運(yùn)動(dòng)圖像數(shù)據(jù)。
文檔編號(hào)H04N5/783GK102611865SQ20121000173
公開(kāi)日2012年7月25日 申請(qǐng)日期2012年1月5日 優(yōu)先權(quán)日2011年1月20日
發(fā)明者大谷大輔 申請(qǐng)人:卡西歐計(jì)算機(jī)株式會(huì)社