專利名稱：影像再生裝置及方法
技術(shù)領(lǐng)域：
本發(fā)明涉及用于一種影像再生裝置及方法。具體而言，本發(fā)明涉及一種通過顯示由影像生成的縮小圖像并且從這些縮小圖像中選擇一幅或者多幅來再生感興趣的影像的裝置和方法。
背景技術(shù)：
過去，已經(jīng)提出了很多種迅速再生感興趣影像的方法，它們通過顯示由各個場景中的第一幀圖像生成的縮小圖像(縮略圖)作為用于檢索感興趣影像的索引。
另外，為了顯示作為用于檢索感興趣影像的索引的縮略圖，已知有這樣一種用于記錄影像的方法，它在記錄影像(活動圖像)時獲取組成活動圖像的多個幀的亮度直方圖；如果當(dāng)前幀和先前幀之間的直方圖的差值超過了預(yù)定的閾值，則確定場景已經(jīng)改變；由代表這個場景的幀生成縮略圖，并將縮略圖與它們的場景改變點(diǎn)一同記錄下來。
當(dāng)根據(jù)這種現(xiàn)有的影像再生方法再生作為記錄在諸如數(shù)字化通用光盤(DVD)上的內(nèi)容的影像時，如果感興趣場景的縮略圖被從多幅縮略圖(這多幅縮略圖被再生并顯示為用于檢索感興趣影像的索引)中選擇出來，則每一幅圖像從相應(yīng)于場景起始點(diǎn)的場景改變點(diǎn)處開始再生。因此，只要選定縮略圖就能從起始點(diǎn)開始觀看感興趣的場景，從而掌握場景的內(nèi)容(見日本專利申請公開第2002-27411號)。

發(fā)明內(nèi)容
如圖1所示，用于檢索感興趣影像的各個縮略圖Th和再生影像M11顯示在同一屏幕上，在該屏幕上，各個縮略圖Th和影像M11彼此同步，使得再生影像M11之前和之后的場景可以在快進(jìn)或快倒動作之前觀看，從而便于用戶執(zhí)行快進(jìn)或快倒動作。在如圖1所示的再生影像的情況下，即使已經(jīng)通過選擇縮略圖Th11再生了影像M11，也可以通過選擇縮略圖Th12來迅速改變再生起始點(diǎn)。因此，任何在再生影像M11已經(jīng)被記錄之前記錄的場景可以被快速地再生并顯示，從而提高了便利性。
使記錄內(nèi)容中的影像(視頻影像)和縮略圖彼此同步地顯示而進(jìn)行的處理對CPU施加了很大的負(fù)荷。這要求具有很高運(yùn)算速度的CPU。嵌入式裝置，例如結(jié)合在電視接收機(jī)等中的影像記錄/再生裝置，通常使用的是具有較低運(yùn)算速度的CPU。因此，可能難以在各個縮略圖與視頻影像同步的情況下，再生并顯示所有已經(jīng)與視頻影像一起作為記錄內(nèi)容記錄到記錄介質(zhì)上的縮略圖。
如果使用的是具有相對較慢的運(yùn)算速度的CPU，則為了再生并顯示每一個具有100像素的縮略圖，需要大概一秒鐘的處理時間。因此，當(dāng)通過將影像顯示屏幕的水平掃描方向作為時間軸再生并顯示縮略圖時，如果各個縮略圖大約為120像素，則可以在各幅縮略圖均與視頻影像同步的情況下顯示五至七幅縮略圖。
圖2示出的圖表G10中設(shè)定了固定的閾值，用于從所有記錄的縮略圖中選擇能夠顯示的縮略圖的數(shù)目。在圖2中，水平軸作為時間T，垂直軸為當(dāng)前幀和先前幀之間的亮度直方圖的差值，從而示出了場景改變點(diǎn)之間的差值。
例如，如果從在時間T內(nèi)作為內(nèi)容記錄的所有縮略圖中選擇六幅能夠顯示的縮略圖，則可以想到，將固定閾值TF設(shè)為圖2的圖表G10中的任一亮度直方圖的差值，并提取出與超過固定閾值TF的差值D13～D18相對應(yīng)的縮略圖Th13～Th18。避免再生并顯示出與沒有超過固定閾值TF的差值相對應(yīng)的縮略圖，可以減少能夠與視頻影像在屏幕上同步顯示的縮略圖的數(shù)目。這可以減小CPU的負(fù)荷。
然而，如果在整個內(nèi)容上設(shè)置固定閾值TF來限制縮略圖的數(shù)目，則如圖2所示，記錄內(nèi)容將包括A部分和B部分，其中，A部分中僅僅具有低差值(場景改變值)，B部分中具有高差值?？梢詮腂部分中提取出縮略圖，但從A部分中無法提取出縮略圖。因此，如圖3所示，當(dāng)將與時間長度T對應(yīng)的縮略圖再生并顯示到顯示屏幕的水平幀長度時，縮略圖Th13～Th18將密集地顯示在時間長度T的后半部分。
當(dāng)多個場景發(fā)生改變而使多幅縮略圖在短時間內(nèi)顯示時，縮略圖將彼此重疊。因此，Th13、Th14、Th15、以及Th17等縮略圖只能部分顯示。特別地，很難從縮略圖來掌握場景的內(nèi)容，并選擇感興趣的場景，比如說縮略圖Th15，它的大部分被另一縮略圖Th16所覆蓋。
如果設(shè)置單一的固定閾值TF，則在場景頻繁改變的過程中可以減少所顯示的縮略圖的數(shù)目，從而降低CPU的負(fù)荷。在場景逐漸改變的過程中，盡管根據(jù)CPU的處理能力可以顯示更多的縮略圖，但是根據(jù)固定閾值TF，將沒有縮略圖可以顯示出來。因此，根據(jù)場景改變點(diǎn)數(shù)目的不均衡，出現(xiàn)了一個問題，即出現(xiàn)了縮略圖顯示的時間上的不均勻性。
希望提出一種影像再生裝置和方法，通過該裝置和方法，能夠減小在縮略圖顯示處理過程中的負(fù)荷，并且降低由于場景改變點(diǎn)數(shù)目的不均衡引起的縮略圖顯示時間上的不均勻性。
根據(jù)本發(fā)明的一個實(shí)施例，提供了一種用于影像再生裝置。該影像與場景改變點(diǎn)處的相鄰幀間差異和用于檢索場景改變點(diǎn)的縮小圖像一同記錄。該裝置具有用來確定與顯示裝置所具有的屏幕的幀長度相對應(yīng)的縮小圖像顯示的時間長度的時間長度確定裝置。該裝置還具有圖像數(shù)目確定裝置，用來確定在由時間長度確定裝置所確定的時間長度內(nèi)顯示的縮小圖像的數(shù)目。該裝置進(jìn)一步具有閾值設(shè)定裝置，用于針對相鄰幀間差異設(shè)定閾值。在該時間長度記錄該差異。這樣就使得可以提取出與由圖像數(shù)目確定裝置確定的縮小圖像的數(shù)目相等的數(shù)目的縮小圖像。該裝置還具有控制裝置。該控制裝置控制顯示裝置的操作，以使相應(yīng)于場景改變點(diǎn)的縮小圖像與影像同步再生并顯示?？s小圖像具有至少為由閾值設(shè)定裝置設(shè)定的閾值的相鄰幀間差異。
在本發(fā)明的實(shí)施例中，當(dāng)再生與場景改變點(diǎn)處的相鄰幀間差異和用于檢索場景改變點(diǎn)的縮小圖像一同記錄的影像時，時間長度確定裝置確定與在其上再生并顯示影像的屏幕的幀長度相對應(yīng)的縮小圖像顯示的時間長度。圖像數(shù)目確定裝置確定在這樣確定的時間長度期間內(nèi)顯示的縮小圖像的數(shù)目。閾值設(shè)定裝置隨后針對在該時間長度內(nèi)記錄的相鄰幀間差異設(shè)定閾值，從而允許提取出與由圖像數(shù)目確定裝置確定的縮小圖像的數(shù)目相等的數(shù)目的縮小圖像?？刂蒲b置控制顯示裝置的操作，從而使相應(yīng)于場景改變點(diǎn)的縮小圖像與影像同步再生并顯示?？s小圖像具有至少為由閾值設(shè)定裝置設(shè)定的閾值的相鄰幀間差異。
因此，僅有相應(yīng)于場景改變點(diǎn)的、并且具有至少為已設(shè)定閾值的相鄰幀間差異的縮小圖像能與影像同步再生并顯示。與再生并顯示所有記錄的縮小影像的情況相比較，這種方法使得縮小圖像的顯示處理過程的負(fù)荷減小。它還使得由場景改變點(diǎn)數(shù)目的不均衡引起的的縮小圖像顯示時間的不均勻性減小。
另外，根據(jù)本發(fā)明的一個實(shí)施例，提供了一種影像再生方法。該影像與場景改變點(diǎn)處的相鄰幀間差異和用于檢索場景改變點(diǎn)的縮小圖像一同記錄。該方法包括確定與在其上再生并顯示影像的屏幕的幀長度相對應(yīng)的縮小圖像進(jìn)行顯示的時間長度的步驟。該方法還包括確定在已確定的時間長度內(nèi)顯示的縮小圖像的數(shù)目的步驟。該方法進(jìn)一步包括針對相鄰幀間差異設(shè)定閾值的步驟。在所確定的時間長度內(nèi)記錄該差異。這使得能夠提取出與已確定的縮小圖像的數(shù)目相等的數(shù)目的縮小圖像。該方法進(jìn)一步包括使相應(yīng)于場景改變點(diǎn)的縮小圖像與影像同步再生并顯示的步驟?？s小圖像具有至少為已設(shè)定的閾值的相鄰幀間差異。
根據(jù)本發(fā)明的一個實(shí)施例，提供了一種計算機(jī)程序產(chǎn)品，允許計算機(jī)執(zhí)行影像再生方法。該影像與場景改變點(diǎn)處的相鄰幀間差異和用于檢索場景改變點(diǎn)的縮小圖像一同記錄。該方法包括確定與在其上再生并顯示影像的屏幕的幀長度相對應(yīng)的縮小圖像進(jìn)行顯示的時間長度的步驟。該方法還包括確定在已確定的時間長度內(nèi)顯示的縮小圖像的數(shù)目的步驟。該方法進(jìn)一步包括針對相鄰幀間差異設(shè)定閾值的步驟。在所確定的時間長度內(nèi)記錄該差異。這使得能夠提取出與已確定的縮小圖像的數(shù)目相等的數(shù)目的縮小圖像。該方法進(jìn)一步包括使相應(yīng)于場景改變點(diǎn)的縮小圖像與影像同步再生并顯示的步驟?？s小圖像具有至少為已設(shè)定的閾值的相鄰幀間差異。
在本發(fā)明的這些實(shí)施例中，通過影像再生方法和用于允許計算機(jī)執(zhí)行該方法的計算機(jī)程序產(chǎn)品，只有相應(yīng)于場景改變點(diǎn)和具有至少為已設(shè)定的閾值的相鄰幀間差異的縮小圖像才能與影像同步再生并顯示。與再生并顯示所有記錄的縮小圖像的情況相比較，這種方法使得縮小圖像的顯示處理過程的負(fù)荷減小。這種方法也使得由場景改變點(diǎn)數(shù)目的不均衡引起的縮小圖像的顯示時間的不均勻性減小。
根據(jù)本發(fā)明的裝置和方法等的這些實(shí)施例，為了再生與場景改變點(diǎn)處的相鄰幀間差異和用于檢索場景改變點(diǎn)的縮小圖像一同記錄的影像，確定與在其上再生并顯示影像的屏幕的幀長度相對應(yīng)的縮小圖像顯示的時間長度，確定在這樣確定的時間長度期間內(nèi)顯示的縮小圖像的數(shù)目，并且針對在已確定的時間長度內(nèi)記錄的相鄰幀間差異設(shè)定閾值，使得能夠提取出與已確定的縮小的圖像的數(shù)目相等的數(shù)目的縮小圖像。
通過上述配置，只有相應(yīng)于場景改變點(diǎn)并具有至少為已設(shè)定的閾值的相鄰幀間差異的縮小圖像才能與影像同步再生并顯示。與再生并顯示所有記錄的縮小圖像的情況相比較，這種方法使得縮小圖像的顯示處理過程的負(fù)荷減小。因此，即使在具有較低運(yùn)算速度的圖像處理系統(tǒng)中，也可以在同一屏幕上將作為用于檢索再生起始點(diǎn)的索引的有限數(shù)目的縮小圖像與影像同步再生并顯示。與現(xiàn)有裝置相比，本發(fā)明能給出一種更便宜的影像再生裝置。
根據(jù)本發(fā)明的裝置和方法的這些實(shí)施例，可以根據(jù)將被記錄并顯示縮小圖像的時間長度來設(shè)定不同的閾值。這使得無論場景改變點(diǎn)的數(shù)目如何不均衡，都能使固定數(shù)目的縮小圖像與影像同步再生并顯示。因此，使得由場景改變點(diǎn)的數(shù)目的不均衡引起的縮小圖像的顯示時間的不均勻性減小了。
本說明書的結(jié)論部分明確指出并直接聲明了本發(fā)明的主旨。然而，通過參照附圖閱讀本說明書的剩余部分，本領(lǐng)域技術(shù)人員能夠更好地理解本發(fā)明的操作結(jié)構(gòu)和操作方法，在附圖中，相同的附圖標(biāo)號表示相同的部件。


圖1是粗略示出影像再生的實(shí)例的概念圖(第一)；圖2是粗略示出設(shè)定固定閾值的實(shí)例的概念圖；圖3是粗略示出影像再生的實(shí)例的概念圖(第二)；圖4是示出根據(jù)本發(fā)明的影像再生裝置的實(shí)施例的結(jié)構(gòu)的框圖；圖5是示出根據(jù)本發(fā)明的影像再生裝置的硬件的實(shí)施例的結(jié)構(gòu)的框圖；圖6是粗略示出根據(jù)本發(fā)明的實(shí)施例的設(shè)定固定閾值的實(shí)例的概念圖；圖7是粗略示出根據(jù)本發(fā)明的實(shí)施例的顯示縮略圖的實(shí)例的概念圖；圖8A是示出根據(jù)本發(fā)明的影像再生方法的實(shí)施例的流程圖(第一)；以及圖8B是示出根據(jù)本發(fā)明的影像再生方法的實(shí)施例的流程圖(第二)。
具體實(shí)施例方式
以下將參照附圖，參考本發(fā)明的影像再生裝置和方法的和用于使計算機(jī)執(zhí)行影像再生的計算機(jī)程序產(chǎn)品的優(yōu)選實(shí)施例，對本發(fā)明進(jìn)行詳細(xì)說明。
在本發(fā)明的優(yōu)選實(shí)施例中，對在與在其上再生并顯示影像的屏幕的幀長度相對應(yīng)的時間長度期間內(nèi)記錄的相鄰幀間差異設(shè)定閾值，使得能夠提取出與將在該時間長度內(nèi)顯示的縮小圖像的數(shù)目相等的數(shù)目的縮小圖像。因此，只有相應(yīng)于場景改變點(diǎn)并且具有至少為已設(shè)定的閾值的相鄰幀間差異的縮小圖像才能與影像同步再生并顯示。
圖4示出了根據(jù)本發(fā)明的影像再生裝置100的實(shí)施例的結(jié)構(gòu)。該裝置100可以再生與場景改變點(diǎn)處的相鄰幀間差異和用于檢索場景改變點(diǎn)的各個縮小圖像(縮略圖)一同記錄的影像(視頻影像)。如圖4所示，裝置100具有顯示裝置1、時間長度確定裝置2、圖像數(shù)目確定裝置3、閾值設(shè)定裝置4、時間長度劃分裝置5、和控制裝置6。
顯示裝置1連接到控制裝置6上，并且在控制裝置6的控制下，在屏幕上再生并顯示視頻影像。時間長度確定裝置2在控制裝置6的控制下，確定與顯示裝置1具有的屏幕的幀長度相對應(yīng)的縮略圖顯示的時間長度。圖像數(shù)目確定裝置3連接到控制裝置6上，并且確定在由時間長度確定裝置2確定的時間長度內(nèi)顯示的縮略圖的數(shù)目。
閾值設(shè)定裝置4與控制裝置6連接，并且對在由時間長度確定裝置2確定的時間長度期間內(nèi)記錄的相鄰幀間差異設(shè)定閾值，使得可以提取出與由圖像數(shù)目確定裝置3確定的縮略圖數(shù)目相等的數(shù)目的縮略圖。
在這個實(shí)施例中，將具有超過預(yù)置標(biāo)準(zhǔn)(閾值)的當(dāng)前幀和先前幀之間的亮度直方圖的差值的幀確定為場景改變點(diǎn)。與場景改變點(diǎn)相關(guān)的幀和先前幀之間的差值隨之被用作相鄰幀間差異。因此，閾值設(shè)定裝置4可針對場景改變點(diǎn)處的當(dāng)前幀和先前幀之間的亮度差值設(shè)定動態(tài)變化的閾值，。
時間長度劃分裝置5與控制裝置6連接，進(jìn)一步對時間長度確定裝置2確定的時間長度進(jìn)行劃分。如果時間長度劃分裝置5劃分了時間長度，則圖像數(shù)目確定裝置3確定將在由時間長度劃分裝置5劃分的時間長度內(nèi)顯示的縮略圖的數(shù)目，并且閾值設(shè)定裝置4對在由時間長度劃分裝置5劃分的時間長度內(nèi)記錄的亮度差值設(shè)定閾值。
控制裝置6分別與顯示裝置1、時間長度確定裝置2、圖像數(shù)目確定裝置3、閾值設(shè)定裝置4、和時間長度劃分裝置5連接。控制裝置6控制顯示裝置1的操作，使相應(yīng)于場景改變點(diǎn)并且具有至少為由閾值設(shè)定裝置4設(shè)定的閾值的相鄰幀間差異的縮略圖與視頻影像同步再生并顯示。
例如，具有這種結(jié)構(gòu)的根據(jù)本發(fā)明的影像再生裝置100的一個實(shí)施例通過將其結(jié)合到圖5所示的硬件結(jié)構(gòu)中而實(shí)施。在裝置100中，天線11指的是一種周知的用于電視廣播信號的接收天線，并且連接在調(diào)諧器12上。天線11可接收任意電視廣播信號，并將接收到的信號傳送給調(diào)諧器12。
調(diào)諧器12與天線11和Y/C分離電路13相連接。調(diào)諧器12將從天線11接收的電視廣播波接收信號調(diào)諧成為需要的頻道信號，并將該頻道信號傳送給Y/C分離電路13。
Y/C分離電路13與調(diào)諧器12和NTSC(國家電視標(biāo)準(zhǔn)委員會)解碼器14連接。電路13將從調(diào)諧器12接收的頻道信號中的影像信號分離成亮度信號(Y信號)和色彩信號(C信號)，并將分離后的影像信號傳送到NTSC解碼器14中。
NTSC解碼器14與Y/C分離電路13和影像信號預(yù)處理電路15連接。解碼器14對從Y/C分離電路13接收的影像信號執(zhí)行A/D轉(zhuǎn)換處理、色度編碼處理等，并將處理過的信號轉(zhuǎn)換成為數(shù)字分量視頻信號(下文稱作“DCV信號”)，并將該DCV信號傳輸?shù)接跋裥盘栴A(yù)處理電路15中。
影像信號預(yù)處理電路15分別與NTSC解碼器14、MPEG(運(yùn)動圖像專家組)視頻編碼器16、和影像信號后處理電路21連接。電路15根據(jù)從NTSC解碼器14接收的DCV信號產(chǎn)生各個區(qū)域的亮度直方圖，并且檢出在時間上相鄰的幀之間的直方圖差值超過預(yù)置標(biāo)準(zhǔn)的所有場景改變點(diǎn)，并將位于該場景改變點(diǎn)處的幀的圖像數(shù)據(jù)傳送給影像信號后處理電路21。
影像信號預(yù)處理電路15還將DCV信號與在該場景改變點(diǎn)處的幀的圖像數(shù)據(jù)一起傳送給MPEG視頻編碼器16。
MPEG視頻編碼器16分別與影像信號預(yù)處理電路15和多路信號復(fù)用/分離器17連接。編碼器16對從影像信號預(yù)處理電路15接收的DCV信號執(zhí)行諸如離散余弦變換(DCT)的編碼處理，并且生成基于MPEG標(biāo)準(zhǔn)的影像打包基本碼流(影像PES)，并將該影像PES傳送給多路信號復(fù)用/分離器17。
多路信號復(fù)用/分離器17分別與MPEG視頻編碼器16、緩沖控制器18、MPEG-AV解碼器20、MPEG音頻編碼器(沒有示出)等等相連接。
當(dāng)記錄視頻影像時，多路信號復(fù)用/分離器17對從MPEG視頻編碼器16、MPEG音頻編碼器等接收的影像PES、音頻PES、各種控制信號等執(zhí)行多路復(fù)用處理，產(chǎn)生基于MPEG標(biāo)準(zhǔn)的傳輸流，并且將該傳輸流傳送給緩沖控制器18。
當(dāng)再生視頻影像時，多路信號復(fù)用/分離器17還對從緩沖控制器18接收的傳輸流執(zhí)行信號分離處理，從中分理出影像PES和音頻PES，并且將這些分離出的PES傳送給MPEG-AV解碼器20。
緩沖控制器18分別與多路信號復(fù)用/分離器17和HDD(硬盤驅(qū)動器)19連接。緩沖控制器18斷續(xù)地傳送從多路信號復(fù)用/分離器17連續(xù)接收到的傳輸流，來控制HDD 19，使其可以記錄到HDD19上。緩沖控制器18還通過在緩沖過程中控制從HDD 19斷續(xù)接收到的數(shù)據(jù)，將從HDD 19中讀出的傳輸流連續(xù)地傳送給多路信號復(fù)用/分離器17，使得數(shù)據(jù)可以互相結(jié)合在一起。
HDD 19與緩沖控制器18相連。HDD 19在其所設(shè)定的地址上記錄從緩沖控制器18斷續(xù)接收到的數(shù)據(jù)流，并且從所設(shè)定的地址中讀出記錄的傳輸流，將其傳送給緩沖控制器18。
MPEG-AV解碼器20分別與多路信號復(fù)用/分離器17和影像信號后處理電路21連接。解碼器20將從多路信號復(fù)用/分離器17接收的PES分離成影像PES和音頻PES，并對影像PES和音頻PES執(zhí)行預(yù)期的解碼處理，隨后分別將基帶圖像數(shù)據(jù)傳送給影像信號后處理電路21，以及將基帶音頻數(shù)據(jù)傳送給音頻信號處理電路(沒有示出)。
影像信號后處理電路21分別與影像信號預(yù)處理電路15、MPEG-AV解碼器20、和OSD(屏幕顯示)電路22連接。影像信號后處理電路21對從影像信號預(yù)處理電路15接收的各個場景改變點(diǎn)處的圖像數(shù)據(jù)執(zhí)行壓縮處理，產(chǎn)生全部的縮略圖。影像信號后處理電路21隨后產(chǎn)生圖像顯示窗口等等作為GUI(圖形用戶界面)，并將縮略圖與圖像顯示窗口結(jié)合，使得它們可以顯示出來，并將它們與從MPEG-AV解碼器20接收的基帶圖像數(shù)據(jù)一起傳送給OSD電路22。
OSD電路22分別與影像信號后處理電路21和顯示器23連接。OSD電路22將在影像信號后處理電路21中結(jié)合了縮略圖的圖像顯示窗口疊加在基帶的圖像數(shù)據(jù)上，并且將它們傳送給顯示器23。
所示顯示器23為具有圖像顯示功能的液晶顯示器(LCD)，并且連接到OSD電路22上。顯示器23通過改變其基于從OSD電路22接收的圖像數(shù)據(jù)的顯示，將作為用于在其屏幕上檢索圖像的索引疊加在視頻影像上進(jìn)行再生并顯示。
上面的各個單元通過總線10分別連接到系統(tǒng)控制器24上，使得系統(tǒng)控制器24可以控制它們的操作。輸入/輸出界面25也與總線10相連。
系統(tǒng)控制器24包括CPU(中央處理單元)24a、RAM(隨機(jī)存儲器)24b、和ROM(只讀存儲器)24c。系統(tǒng)控制器24以RAM24b作為工作區(qū)執(zhí)行存儲在ROM 24c中的控制程序，使得系統(tǒng)控制器24可以通過總線10控制影像再生裝置100中的各個單元的操作。
輸入/輸出界面25分別與輸入單元26、驅(qū)動單元27、和總線10連接。所示輸入單元26可以是鍵盤、鼠標(biāo)、遙控器、和結(jié)合在顯示器23的屏幕上的透明觸摸面板。輸入單元26用作對影像再生裝置100進(jìn)行操作的用戶界面。因此，輸入/輸出界面25可將來自輸入單元26的輸入傳送給系統(tǒng)控制器24。
驅(qū)動單元27與輸入/輸出界面25相連。在驅(qū)動單元27中，可插入諸如CD-ROM和DVD的光學(xué)記錄介質(zhì)28、諸如軟盤的磁記錄介質(zhì)29、或諸如存儲棒的半導(dǎo)體存儲器30，并從中讀取數(shù)據(jù)。因此，驅(qū)動單元27可以從記錄媒介28、29、30中讀出記錄的數(shù)據(jù)，以使讀出的數(shù)據(jù)可通過輸入/輸出界面25提供給系統(tǒng)控制器24。
因此，影像再生裝置100除了可以再生并顯示通過天線12接收的電視廣播波的影像和從HDD 19讀出的影像之外，還可以再生并顯示諸如記錄在光學(xué)記錄介質(zhì)28、磁記錄介質(zhì)29、半導(dǎo)體存儲器30中的運(yùn)動畫面的各種類型的內(nèi)容。
下面將詳細(xì)描述圖4和圖5中所示的框圖之間的關(guān)系。在影像再生裝置100的實(shí)施例中，影像信號預(yù)處理電路15、影像信號后處理電路21、OSD電路22、和顯示器23行使顯示裝置1的功能。
ROM 24c預(yù)先存儲有根據(jù)本發(fā)明的程序的實(shí)施例。CPU 24a執(zhí)行存儲在ROM 24c中的程序，這樣它可以行使時間長度確定裝置2、圖像數(shù)目確定裝置3、閾值設(shè)定裝置4、時間長度劃分裝置5、和控制裝置6的功能。CPU 24a、RAM 24b、和ROM 24c可以使用周知的計算機(jī)系統(tǒng)實(shí)現(xiàn)。
如果向具有這種結(jié)構(gòu)的影像再生裝置100給電，并且用戶通過諸如遙控器的輸入單元26對裝置100進(jìn)行操作，來選擇存儲在HDD19上的內(nèi)容，并且使其再生，則與通過遙控器選擇的內(nèi)容有關(guān)，時間長度確定裝置2確定與在其上再生并顯示視頻影像的屏幕的幀長度相對應(yīng)的縮略圖的顯示時間長度T，從而使每個用于檢索場景改變點(diǎn)的縮略圖與視頻影像同步再生并顯示。
接下來，時間長度劃分裝置5將時間長度T劃分為兩部分，使得可以確定比時間長度T短的時間長度“t”(t＝T/2)。如圖6所示，記錄內(nèi)容被劃分為具有相同的時間長度“t”的兩部分，A部分和B部分。圖像數(shù)目確定裝置3隨后確定在時間長度“t”內(nèi)顯示的縮略圖的數(shù)目，例如，3幅圖像。
閾值設(shè)定裝置4檢測出在被劃分為A部分和B部分的內(nèi)容中的每個部分中記錄的場景改變點(diǎn)處的場景改變值。所有的場景改變點(diǎn)都以場景改變值的升序進(jìn)行排序。因此，閾值設(shè)定裝置4可以針對時間長度“t”內(nèi)記錄的場景改變值設(shè)定閾值，使得可以提取出與圖像數(shù)目確定裝置3所確定的縮略圖的數(shù)目一致的三幅縮略圖。
在A部分中，閾值設(shè)定裝置4針對在A部分中記錄的場景改變值設(shè)定閾值TA，從而將具有A部分中第三高場景改變點(diǎn)的當(dāng)前幀與先前幀之間的差值包含進(jìn)來。這就使得能夠提取出與從第三高場景改變點(diǎn)D1到最高場景改變點(diǎn)D3相對應(yīng)的縮略圖Th1、Th2、和Th3。
類似地，在B部分中，閾值設(shè)定裝置4針對在B部分中記錄的場景改變值設(shè)定閾值TB，從而將具有B部分中第三高場景改變點(diǎn)的當(dāng)前幀與先前幀之間的差值包含進(jìn)來。這就使得能夠提取出分別與第一高場景改變點(diǎn)D5、第二高場景改變點(diǎn)D6、和第三高場景改變點(diǎn)D4相對應(yīng)的縮略圖Th5、Th6、和Th4。
因此，根據(jù)在時間長度為“t”的A部分和B部分中記錄的場景改變值而動態(tài)改變的閾值使得能夠針對A部分和B部分提取出三幅縮略圖。即使通過低速CPU，也可以毫無問題地執(zhí)行將總共六幅縮略圖分別與視頻影像同步再生的處理。用于嵌入式系統(tǒng)的較低速的CPU(例如，具有大約300MHz的運(yùn)算速度的CPU)可以執(zhí)行使縮略圖與視頻影像同步再生的處理。從而能夠提供一種廉價的影像再生裝置。
圖7粗略地示出了顯示根據(jù)上面的方法提取出的縮略圖的例子。如圖7所示，當(dāng)時間長度T相應(yīng)于顯示器23的屏幕的水平幀長度時，分別相應(yīng)于A部分中超過閾值TA的場景改變點(diǎn)D1、D2、和D3的縮略圖Th1、Th2、和Th3和分別相應(yīng)于B部分中超過閾值TB的場景改變點(diǎn)D4、D5、和D6的縮略圖Th4、Th5、和Th6可以與視頻影像M1在同一屏幕上同步再生并顯示。
因此，在圖7中所示顯示縮略圖的例子中，在平穩(wěn)的A部分中出現(xiàn)諸如新聞廣播員播報新聞的一系列場景改變，則可根據(jù)場景改變值來設(shè)定較低的閾值TA，使得新聞廣播員的縮略圖Th1、Th2、和Th3可以顯示出來。與設(shè)置固定的閾值TF的情況相比較，這使得由隨著場景改變值的變化而變化的場景改變點(diǎn)的數(shù)目的不均衡引起的縮略圖顯示時間的不均勻性降低。
另一方面，在發(fā)生許多場景改變的B部分中，可設(shè)置較高的閾值TB，使得可以顯示限定數(shù)目的縮略圖。這樣防止了多個縮略圖重疊顯示的情況。因此，可根據(jù)內(nèi)容的記錄情況來顯示適當(dāng)數(shù)目的縮略圖，使得用戶可以了解相應(yīng)于每個縮略圖的場景的內(nèi)容。
例如，用戶通過觀看正在再生的視頻影像M1可以了解基于縮略圖Th2的內(nèi)容的再生位置。另外，通過使用諸如遙控器的驅(qū)動單元27來選擇縮略圖Th4，能夠?qū)⒃偕鹗嘉恢酶淖冎料鄳?yīng)于縮略圖Th4的場景改變點(diǎn)，因此在前進(jìn)或后退方向的再生中獲得很高的操作質(zhì)量，例如，增加了用戶的便利。
下面將參照圖8A和8B的流程圖，描述通過上述的影像再生裝置100再生影像的例子，作為影像再生方法的實(shí)施例，并描述用于允許計算機(jī)執(zhí)行根據(jù)本發(fā)明的方法的程序。
假設(shè)在ROM 24c中預(yù)先存儲了用于允許計算機(jī)執(zhí)行根據(jù)本發(fā)明的影像再生方法的實(shí)施例的程序。CPU 24a啟動該程序而執(zhí)行該影像再生方法，使得可以再生與各個場景改變點(diǎn)處的當(dāng)前幀和先前幀之間的亮度直方圖差值和用于檢索場景改變點(diǎn)的縮略圖一起記錄的影像。
以上述內(nèi)容為前提，在示于圖8A的流程圖中的處理步驟S1中，時間長度確定裝置2確定與在其上再生并顯示視頻影像的屏幕的幀長度相對應(yīng)的縮略圖的顯示時間長度T。時間長度劃分裝置5劃分時間長度T，確定時間長度“t”。
在步驟S2中，圖像數(shù)目確定裝置3確定在被劃分為具有時間長度“t”的A部分中顯示的縮略圖的數(shù)目N。在步驟S3中，提取出在時間長度“t”內(nèi)記錄的縮略圖。在步驟S4中，如果在t分鐘內(nèi)記錄的縮略圖數(shù)目n等于由圖像數(shù)目確定裝置3確定的縮略圖的數(shù)目N，則處理過程進(jìn)入步驟S5，在該步驟中，在時間長度“t”期間內(nèi)顯示N個縮略圖，它們與視頻影像同步顯示。然后處理過程進(jìn)入步驟S6。
在步驟S6中，如果通過輸入單元26給出結(jié)束再生的指令，則影像再生結(jié)束。如果在步驟S6中沒有結(jié)束再生，則處理返回步驟S3，在該步驟中，提取出在下一個時間長度“t”期間內(nèi)作為內(nèi)容記錄的縮略圖。
在步驟S4中，如果在t分鐘內(nèi)記錄的縮略圖的數(shù)目n不等于通過圖像數(shù)目確定裝置3確定的縮略圖數(shù)目N，則處理過程進(jìn)入圖8B中所示的流程圖的步驟S7。
在步驟S7中，閾值設(shè)定裝置4檢出與時間長度“t”期間內(nèi)記錄的縮略圖相對應(yīng)的場景改變值。在步驟S8中，將已檢出場景改變值的縮略圖按場景改變值的升序進(jìn)行排序。
在步驟S9中，閾值設(shè)定裝置4設(shè)定閾值TA，使得在t分鐘內(nèi)記錄的縮略圖的數(shù)目n等于通過圖像數(shù)目確定裝置3確定的將要顯示出的縮略圖的數(shù)目N。在步驟S10中，選出分別相應(yīng)于超過閾值TA的場景改變值D1、D2、和D3的縮略圖Th1、Th2、和Th3，處理過程返回圖8A中所示的流程圖的步驟S5。
在步驟S5中，使N幅(本例中為3)縮略圖Th1、Th2、和Th3在時間長度“t”內(nèi)與視頻影像M1同步顯示，然后處理過程進(jìn)入步驟S6。
在步驟S6中，如果通過輸入單元26給出結(jié)束再生的指令，則影像再生結(jié)束。如果在步驟S6中沒有結(jié)束再生，則處理過程回到步驟S3，在該步驟中，提取出在下一個時間長度“t”的B部分中作為內(nèi)容記錄的縮略圖。運(yùn)行與上面A部分中相同的影像再生處理。
因此，只有對應(yīng)于超過根據(jù)某一時間點(diǎn)的內(nèi)容的記錄位置而設(shè)定的閾值TA和TB的場景改變點(diǎn)的縮略圖才能與視頻影像同步顯示。與再生并顯示所有記錄的縮略圖的情況相比較，這使得在顯示縮略圖處理過程中的負(fù)荷減少了。
如果CPU具有相對較慢的運(yùn)算速度，則可以使有限數(shù)目的并作為檢索再生起始點(diǎn)的索引的縮略圖與視頻影像在屏幕上同步再生并顯示。與過去的裝置相比較，提供了一種廉價的影像再生裝置。
也可以在縮略圖的顯示時間長度“t”的基礎(chǔ)上可變地設(shè)置閾值TA和TB。這使得不管場景改變點(diǎn)的數(shù)目如何不均衡，都可以使設(shè)定數(shù)目的縮略圖與視頻影像同步再生并顯示。因此，減少了由場景改變點(diǎn)的數(shù)目的不均衡造成的縮略圖顯示時間的不均勻性。
通過參照具體實(shí)施例以及以裝置100、影像再生方法、和使計算機(jī)執(zhí)行該方法的程序?yàn)樾问降谋景l(fā)明的顯著效果，對本發(fā)明進(jìn)行了詳細(xì)的描述。本領(lǐng)域技術(shù)人員應(yīng)該了解，本發(fā)明并不限于這些實(shí)施例，本發(fā)明可以同樣應(yīng)用于其他類型的用于將用來檢索影像的縮略圖與視頻影像同步再生的視頻再生裝置。雖然本說明書的前述部分已經(jīng)描述了本發(fā)明的優(yōu)選實(shí)施例，但是本領(lǐng)域技術(shù)人員在不脫離本發(fā)明要求的范圍的情況下，可以對這些優(yōu)選實(shí)施例進(jìn)行多種修改、組合、從屬組合和變更。因此，本發(fā)明的權(quán)利要求書旨在將所有這些修改、組合、從屬組合和變更都涵蓋在本發(fā)明的范圍之中。
因此，盡管在根據(jù)本發(fā)明的上面的實(shí)施例中，將當(dāng)前幀和先前幀之間的亮度直方圖差值用作相鄰幀間差異，然而相鄰幀間差異并不限于這種亮度差值?？梢酝ㄟ^使用任意的周知運(yùn)動矢量的微分方法來檢出相鄰幀之間的運(yùn)動矢量差值，將其用作相鄰幀間差異，并對檢出的矢量差值設(shè)定可隨意變化的閾值。
盡管根據(jù)本發(fā)明的上述實(shí)施例的程序預(yù)先存儲在ROM 24c中，但存儲程序的記錄介質(zhì)并不限于ROM 24c。HDD 19也可以存儲。此外，可以插入到驅(qū)動單元27中的記錄介質(zhì)28、29、30也可以存儲，并從中讀出程序。
此外，盡管在根據(jù)本發(fā)明的上述實(shí)施例中，時間長度T與影像在其上再生并顯示的屏幕的水平幀長度相對應(yīng)，但并不是說，時間長度T等于屏幕的垂直幀長度相對應(yīng)的話，根據(jù)本發(fā)明的實(shí)施例的優(yōu)異效果就會發(fā)生改變。
以上所述僅為本發(fā)明的優(yōu)選實(shí)施例而已，并不用于限制本發(fā)明，對于本領(lǐng)域的技術(shù)人員來說，本發(fā)明可以有各種更改和變化。凡在本發(fā)明的精神和原則之內(nèi)，所作的任何修改、等同替換、改進(jìn)等，均應(yīng)包含在本發(fā)明的保護(hù)范圍之內(nèi)。
權(quán)利要求
1.一種影像再生裝置，所述影像與場景改變點(diǎn)處的相鄰幀間差異和用于檢索所述場景改變點(diǎn)的縮小圖像一同記錄，所述裝置包括時間長度確定裝置，用于確定與顯示裝置具有的屏幕的幀長度相對應(yīng)的所述縮小圖像顯示的時間長度；圖像數(shù)目確定裝置，用于確定在由所述時間長度確定裝置確定的所述時間長度內(nèi)顯示的所述縮小圖像的數(shù)目；閾值設(shè)定裝置，用于針對所述相鄰幀間差異設(shè)定閾值，在所述時間長度內(nèi)記錄的所述差異使得能夠提取出與由所述圖像數(shù)目確定裝置確定的縮小圖像的數(shù)目相等的數(shù)目的縮小圖像；以及控制裝置，用于控制所述顯示裝置的操作，以使相應(yīng)于所述場景改變點(diǎn)的縮小圖像與所述影像同步再生并顯示，所述縮小圖像具有至少為由所述閾值設(shè)定裝置設(shè)定的閾值的所述相鄰幀間差異。
2.根據(jù)權(quán)利要求1所述的裝置，其中，所述閾值設(shè)定裝置針對作為相鄰幀之間的差異記錄的相鄰幀之間的亮度差值設(shè)定閾值。
3.根據(jù)權(quán)利要求1所述的裝置，進(jìn)一步包括時間長度劃分裝置，所述時間長度劃分裝置用于劃分由所述時間長度確定裝置確定的時間長度，其中，所述圖像數(shù)目確定裝置確定在由所述時間長度劃分裝置劃分的時間長度內(nèi)顯示的縮小圖像的數(shù)目；以及其中，所述閾值設(shè)定裝置針對相鄰幀間差異設(shè)定閾值，所述差異在由所述時間長度劃分裝置劃分的時間長度內(nèi)被記錄。
4.一種影像再生方法，所述影像與場景改變點(diǎn)處的相鄰幀間差異和用于檢索所述場景改變點(diǎn)的縮小圖像一同記錄，所述方法包括如下步驟確定與在其上再生并顯示所述影像的屏幕的幀長度相對應(yīng)的所述縮小圖像顯示的時間長度；確定在所確定的時間長度內(nèi)顯示的所述縮小圖像的數(shù)目；針對所述相鄰幀間差異設(shè)定閾值，在所述時間長度內(nèi)記錄所述差異，使得能夠提取出與所確定的縮小圖像的數(shù)目相等的數(shù)目的縮小圖像；以及使相應(yīng)于所述場景改變點(diǎn)的縮小圖像與所述影像同步再生并顯示，所述縮小圖像具有至少為所設(shè)定的閾值的相鄰幀間差異。
5.根據(jù)權(quán)利要求4所述的方法，其中，當(dāng)針對所述相鄰幀間差異設(shè)定閾值時，所述差異在所述時間長度內(nèi)被記錄，使得能夠提取出與所確定的縮小圖像的數(shù)目相等的數(shù)目的縮小圖像，針對作為相鄰幀間差異記錄的相鄰幀之間的亮度差值設(shè)定閾值。
6.根據(jù)權(quán)利要求4所述的方法，進(jìn)一步包括以下步驟在確定與在其上再生并顯示所述影像的屏幕的幀長度相對應(yīng)的縮小圖像進(jìn)行顯示的時間長度之后，對已確定的時間長度進(jìn)行劃分；以及確定在所劃分的時間長度內(nèi)顯示的縮小圖像的數(shù)目。
7.一種用于使計算機(jī)能夠執(zhí)行影像再生方法的計算機(jī)程序產(chǎn)品，所述影像與場景改變點(diǎn)處的相鄰幀間差異和用于檢索所述場景改變點(diǎn)的縮小圖像一同記錄，所述方法包括如下步驟確定與在其上再生并顯示所述影像的屏幕的幀長度相對應(yīng)的縮小圖像進(jìn)行顯示的時間長度；確定在所確定的時間長度內(nèi)顯示的縮小圖像的數(shù)目；針對所述相鄰幀間差異設(shè)定閾值，在所述時間長度內(nèi)記錄所述差異，使得能夠提取出與所確定的縮小圖像的數(shù)目相等的數(shù)目的縮小圖像；以及使相應(yīng)于所述場景改變點(diǎn)的縮小圖像與所述影像同步再生并顯示，所述縮小圖像具有至少為所設(shè)定的閾值的相鄰幀間差異。
全文摘要
本發(fā)明提供了一種用于再生與在場景改變點(diǎn)處的相鄰幀間差異和用于檢索場景改變點(diǎn)的縮小圖像一同記錄的影像的裝置。時間長度確定裝置確定與顯示裝置的屏幕的幀長度相對應(yīng)的縮小圖像進(jìn)行顯示的時間長度。圖像數(shù)目確定裝置確定在所確定的時間長度內(nèi)顯示的縮小圖像的數(shù)目。閾值設(shè)定裝置針對在該時間長度內(nèi)記錄的差異設(shè)定閾值，使得能夠提取出與由圖像數(shù)目確定裝置確定的數(shù)目相等的數(shù)目的縮小圖像。控制裝置控制顯示裝置的操作，以使與場景改變點(diǎn)相對應(yīng)并且具有至少為由閾值設(shè)定裝置設(shè)定的閾值的相鄰幀間差異的縮小圖像與視頻影像同步再生并顯示。
文檔編號G11B27/10GK1665293SQ200510051580
公開日2005年9月7日 申請日期2005年3月7日 優(yōu)先權(quán)日2004年3月5日
發(fā)明者松本敏彥 申請人:索尼公司