專利名稱：圖像處理裝置、圖像處理方法和程序的制作方法
技術(shù)領(lǐng)域：
本公開(kāi)涉及圖像處理裝置、圖像處理方法和程序，更具體地，涉及能夠改善例如所產(chǎn)生的用于編輯的圖像信號(hào)的圖像質(zhì)量的圖像處理裝置、圖像處理方法和程序。
背景技術(shù)：
例如存在用于將新的幀內(nèi)插在包括多個(gè)幀(或場(chǎng))的運(yùn)動(dòng)圖像并且改善幀速的幀內(nèi)插處理(例如，參見(jiàn)日本專利申請(qǐng)?zhí)亻_(kāi)No. 2007-288681)。根據(jù)幀內(nèi)插處理，由于內(nèi)插了構(gòu)成運(yùn)動(dòng)圖像的幀之間的新幀，因此每個(gè)幀上的對(duì)象可以平滑地運(yùn)動(dòng)。同時(shí)，代表運(yùn)動(dòng)圖像的圖像信號(hào)主要包括所產(chǎn)生的用于顯示的圖像信號(hào)(下文稱 為用于顯示的圖像信號(hào))和所產(chǎn)生的用于編輯的圖像信號(hào)(下文稱為用于編輯的圖像信號(hào))。如圖IA中所示，產(chǎn)生用于顯示的圖像信號(hào)，以使得運(yùn)動(dòng)圖像包括多個(gè)不同的幀。此外，例如，如圖IB中所示，由于產(chǎn)生出現(xiàn)在電影膠片中的顫動(dòng)(不平滑的動(dòng)作)，因此相同幀交替地重復(fù)三次和兩次作為使得相同幀依次顯現(xiàn)的重復(fù)數(shù)目。根據(jù)幀內(nèi)插處理，當(dāng)如圖IA中所示的運(yùn)動(dòng)圖像經(jīng)歷幀內(nèi)插時(shí)，可以使得幀上對(duì)象的運(yùn)動(dòng)更平滑。此外，例如，當(dāng)圖IB中所示的運(yùn)動(dòng)圖像經(jīng)歷幀內(nèi)插時(shí)，可以在保持原始顫動(dòng)的同 時(shí)使得幀上對(duì)象的運(yùn)動(dòng)更平滑。這里，如圖IC中所示，作為重復(fù)數(shù)目，用于編輯的圖像信號(hào)包括四次、兩次、兩次和兩次的重復(fù)圖案。此外,例如,如圖ID中所示，重復(fù)數(shù)目包括五次、三次和兩次的重復(fù)圖案。可替換地，例如，在所謂的3維(3D)運(yùn)動(dòng)圖像中，用于編輯的圖像信號(hào)包括兩次、一次、一次和一次的重復(fù)圖案作為由用戶的左眼識(shí)別的幀的重復(fù)數(shù)目以及兩次、一次、一次和一次的重復(fù)圖案作為由用戶的右眼識(shí)別的幀的重復(fù)數(shù)目。

發(fā)明內(nèi)容
依據(jù)編輯的便利、壓縮編碼的效率等，如圖IC 圖IE中所示那樣配置用于編輯的圖像信號(hào)，以便不考慮圖像信號(hào)中包括的幀的顯示。于是，當(dāng)顯示用于編輯的圖像信號(hào)中包括的幀時(shí)，產(chǎn)生不規(guī)則(不自然)的顫動(dòng)。因此，通常期望對(duì)用于編輯的圖像信號(hào)進(jìn)行諸如編輯之類的工作并且將編輯后的圖像信號(hào)轉(zhuǎn)換為用于顯示的圖像信號(hào)以進(jìn)行廣播等。然而，當(dāng)前，由于諸如成本和工時(shí)之類的原因，在許多情況下，用于編輯的圖像信號(hào)未被轉(zhuǎn)換為用于顯示的圖像信號(hào)并且被廣播。因此，例如，當(dāng)用于編輯的圖像信號(hào)在接收要廣播的圖像信號(hào)的電視接收器等中經(jīng)歷幀內(nèi)插處理時(shí)，可能不可以獲得使得幀上對(duì)象的運(yùn)動(dòng)更平滑的效果。
此外，由于用于編輯的圖像信號(hào)經(jīng)歷幀內(nèi)插處理，不規(guī)則的顫動(dòng)被加強(qiáng)，使得可能不可以清楚地看到運(yùn)動(dòng)圖像。進(jìn)而，例如，同樣在用于編輯的圖像信號(hào)經(jīng)歷對(duì)用于顯示的圖像信號(hào)所進(jìn)行的降噪、隔行逐行(IP)轉(zhuǎn)換等的情況下，可能不可以獲得與幀內(nèi)插處理一樣的期望效果，從而難以清楚地看到運(yùn)動(dòng)圖像。已經(jīng)鑒于上述情形設(shè)想出本公開(kāi)，以便改善所產(chǎn)生的用于編輯的圖像信號(hào)的圖像質(zhì)量。根據(jù)本公開(kāi)的實(shí)施例，提供了一種對(duì)由多個(gè)圖像構(gòu)成的圖像信號(hào)進(jìn)行圖像處理的圖像處理裝置，包含確定單元，其配置為確定出現(xiàn)圖案是否是用于顯示圖像信號(hào)的預(yù)定規(guī)則圖案，在所述出現(xiàn)圖案中，在構(gòu)成所述圖像信號(hào)的多個(gè)圖像中出現(xiàn)表示相同圖像的序列數(shù)目的重復(fù)數(shù)目；以及圖像處理單元，其配置為根據(jù)確定單元的確定結(jié)果對(duì)所述圖像信號(hào)進(jìn)行圖像處理。 所述圖像處理裝置可以還包括轉(zhuǎn)換單元，其配置為響應(yīng)于所述出現(xiàn)圖案是與規(guī)則圖案不同的圖案的確定單元的確定結(jié)果，將具有不同圖案的第一圖像信號(hào)轉(zhuǎn)換為具有規(guī)則圖案的第二圖像信號(hào)，其中所述圖像處理單元可以對(duì)所述第二圖像信號(hào)進(jìn)行規(guī)則圖案的圖像處理。所述圖像處理裝置可以還包括檢測(cè)單元，其配置為檢測(cè)表示在構(gòu)成所述第二圖像信號(hào)的多個(gè)圖像之中依次出現(xiàn)相同圖像的定時(shí)的定時(shí)信號(hào)；以及調(diào)節(jié)單元，其配置為調(diào)節(jié)所述定時(shí)信號(hào)并且將所述定時(shí)之間的間隔改變?yōu)橄嗟鹊拈g隔，其中所述圖像處理單元可以基于調(diào)節(jié)后的定時(shí)信號(hào)進(jìn)行用于從所述第二圖像信號(hào)中產(chǎn)生由所述多個(gè)不同圖像構(gòu)成的第三圖像信號(hào)的圖像處理。所述調(diào)節(jié)單元可以調(diào)節(jié)所述定時(shí)信號(hào)，并且將用于再現(xiàn)所述第二圖像信號(hào)的再現(xiàn)時(shí)間內(nèi)產(chǎn)生的定時(shí)之間的間隔改變到相等的間隔。所述轉(zhuǎn)換單元可以根據(jù)基于出現(xiàn)圖案的轉(zhuǎn)換規(guī)則，將所述第一圖像信號(hào)轉(zhuǎn)換為所述第二圖像信號(hào)。所述圖像處理單元可以執(zhí)行作為圖像處理的如下處理中的至少一個(gè)將隔行圖像轉(zhuǎn)換為逐行圖像的IP轉(zhuǎn)換處理、降低圖像中產(chǎn)生的噪聲的降噪處理、將圖像分辨率轉(zhuǎn)換為更高分辨率的分辨率創(chuàng)建處理、將新圖像內(nèi)插至所述圖像信號(hào)的內(nèi)插處理。根據(jù)本公開(kāi)的一實(shí)施例，提供了一種圖像處理裝置的圖像處理方法，所述圖像處理裝置對(duì)由多個(gè)圖像構(gòu)成的圖像信號(hào)進(jìn)行圖像處理，所述方法包含通過(guò)所述圖像處理裝置，確定出現(xiàn)圖案是否是用于顯示圖像信號(hào)的預(yù)定規(guī)則圖案，在所述出現(xiàn)圖案中，在構(gòu)成所述圖像信號(hào)的多個(gè)圖像中出現(xiàn)表示相同圖像的序列數(shù)目的重復(fù)數(shù)目；以及根據(jù)確定的確定結(jié)果對(duì)所述圖像信號(hào)進(jìn)行圖像處理。根據(jù)本公開(kāi)的一實(shí)施例，提供了一種程序，其使得對(duì)由多個(gè)圖像構(gòu)成的圖像信號(hào)進(jìn)行圖像處理的圖像處理裝置的計(jì)算機(jī)用作確定單元，其配置為確定出現(xiàn)圖案是否是用于顯示圖像信號(hào)的預(yù)定規(guī)則圖案，在所述出現(xiàn)圖案中，在構(gòu)成所述圖像信號(hào)的多個(gè)圖像中出現(xiàn)表示相同圖像的序列數(shù)目的重復(fù)數(shù)目；以及圖像處理單元，其配置為根據(jù)確定單元的確定結(jié)果對(duì)所述圖像信號(hào)進(jìn)行圖像處理。
根據(jù)本公開(kāi)的實(shí)施例，確定出現(xiàn)圖案是否是用于顯示圖像信號(hào)的預(yù)定規(guī)則圖案，在所述出現(xiàn)圖案中，在構(gòu)成所述圖像信號(hào)的多個(gè)圖像中出現(xiàn)表示相同圖像的序列數(shù)目的重復(fù)數(shù)目，并且根據(jù)所述確定結(jié)果對(duì)所述圖像信號(hào)進(jìn)行圖像處理。根據(jù)本公開(kāi)的實(shí)施例，可以改善所產(chǎn)生的用于編輯的圖像信號(hào)的圖像質(zhì)量。本公開(kāi)的這些和其它目標(biāo)、特征和優(yōu)點(diǎn)將鑒于附圖中圖示的本公開(kāi)的具體實(shí)施方式
的以下詳細(xì)描述而變得更加明顯。


圖IA IE是示出用于顯示的圖像信號(hào)和用于編輯的圖像信號(hào)的示例的示圖；圖2是示出根據(jù)第一實(shí)施例的圖像處理裝置的配置示例的方框示圖；圖3是示出序列確定單元進(jìn)行的處理的細(xì)節(jié)的示圖； 圖4是用于說(shuō)明第一圖像處理的流程圖；圖5是示出圖2中的圖像處理裝置的另一配置示例的方框示圖；圖6是示出根據(jù)第二實(shí)施例的圖像處理裝置的配置示例的方框示圖；圖7是用于說(shuō)明將規(guī)則序列轉(zhuǎn)換為不規(guī)則序列的轉(zhuǎn)換方法的第一示圖；圖8是用于說(shuō)明將規(guī)則序列轉(zhuǎn)換為不規(guī)則序列的轉(zhuǎn)換方法的第二示圖；圖9是用于說(shuō)明將規(guī)則序列轉(zhuǎn)換為不規(guī)則序列的轉(zhuǎn)換方法的第三示圖；圖10是用于說(shuō)明將規(guī)則序列轉(zhuǎn)換為不規(guī)則序列的轉(zhuǎn)換方法的第四示圖；圖11是用于說(shuō)明第二圖像處理的流程圖；圖12是示出根據(jù)第三實(shí)施例的圖像處理裝置的示例的方框示圖；圖13是示出由圖12中的轉(zhuǎn)換單元和幀內(nèi)插單元進(jìn)行的處理的示例的示圖；圖14是示出由圖12中的轉(zhuǎn)換單元和幀內(nèi)插單元進(jìn)行的處理所改變的顫動(dòng)的示例的示圖；圖15是示出由圖12中的轉(zhuǎn)換單元和幀內(nèi)插單元進(jìn)行的處理的另一示例的示圖；圖16是示出由圖12中的轉(zhuǎn)換單元和幀內(nèi)插單元進(jìn)行的處理的又一個(gè)示例的示圖；圖17是用于說(shuō)明第三圖像處理的流程圖；以及圖18是示出計(jì)算機(jī)的配置示例的方框示圖。
具體實(shí)施例方式下文描述用于實(shí)施本公開(kāi)的實(shí)施例(下文稱為實(shí)施例)。這里，將按下列順序進(jìn)行說(shuō)明。I.第一實(shí)施例(根據(jù)要輸入的圖像信號(hào)的出現(xiàn)圖案是否是規(guī)則序列的圖像處理的示例)2.第二實(shí)施例(將不規(guī)則序列轉(zhuǎn)換為規(guī)則序列的示例)3.第三實(shí)施例(將產(chǎn)生顫動(dòng)的圖像信號(hào)校正為平滑運(yùn)動(dòng)的圖像信號(hào)的示例)4.修正示例I.第一實(shí)施例[圖像處理裝置21的配置示例]
圖2示出根據(jù)第一實(shí)施例的圖像處理裝置21的配置示例。這里，圖像處理裝置21檢測(cè)其中在構(gòu)成要輸入的圖像信號(hào)的多個(gè)幀(或場(chǎng))之中出現(xiàn)表示相同巾貞的序列的數(shù)目的重復(fù)數(shù)目的出現(xiàn)圖案(appearance pattern)。此外，圖像處理裝置21確定檢測(cè)到的出現(xiàn)圖案是表示用于顯示的預(yù)定出現(xiàn)圖案的規(guī)則序列，還是表示用于編輯的預(yù)定出現(xiàn)圖案的不規(guī)則序列。然后，當(dāng)圖像處理裝置21確定要輸入的圖像信號(hào)的出現(xiàn)圖案是不規(guī)則序列時(shí)，圖像處理裝置21輸出要輸入的圖像信號(hào)。此外，當(dāng)圖像處理裝置21確定要輸入的圖像信號(hào)的出現(xiàn)圖案是規(guī)則序列時(shí)，圖像處理裝置21將新的幀插入至要輸入的圖像信號(hào)中包括的每個(gè)幀并且將其輸出。
圖像處理裝置21包括幀存儲(chǔ)器41、差異計(jì)算單元42、序列確定單元43、控制單元44、操作單元45和幀內(nèi)插單元46。圖像處理裝置21接收來(lái)自外部的幀η作為圖像信號(hào)。這里，幀η是第η個(gè)輸入的幀。幀存儲(chǔ)器41接收來(lái)自外部的幀η。幀存儲(chǔ)器41將來(lái)自外部的幀η相對(duì)于從外部提供給差異計(jì)算單元42的幀η延遲一個(gè)幀，并且將其提供給差異計(jì)算單元42。即，當(dāng)差異計(jì)算單元42接收幀η時(shí)，幀存儲(chǔ)器41將一幀前的幀η_1提供給差異計(jì)算單元42。差異計(jì)算單元42計(jì)算來(lái)自外部的幀η和來(lái)自幀存儲(chǔ)器41的幀η_1之間的差異D (η, η-1)，并且將其提供給序列確定單元43。序列確定單元43基于來(lái)自差異計(jì)算單元42的差異D(η，η-i)確定要輸入的圖像信號(hào)的出現(xiàn)圖案是規(guī)則序列還是不規(guī)則序列，并且將確定結(jié)果提供給控制單元44。這里，稍后將參照?qǐng)D3詳細(xì)描述序列確定單元43進(jìn)行的處理?？刂茊卧?4基于來(lái)自序列確定單元43的確定結(jié)果控制幀內(nèi)插單元46。即，例如，當(dāng)控制單元44接收要輸入的圖像信號(hào)的出現(xiàn)圖案是規(guī)則序列的確定結(jié)果時(shí)，控制單元44使得幀內(nèi)插單元46進(jìn)行幀內(nèi)插處理。此外，例如，當(dāng)控制單元44接收要輸入的圖像信號(hào)的出現(xiàn)圖案是不規(guī)則序列的確定結(jié)果時(shí)，控制單元44控制幀內(nèi)插單元46不進(jìn)行幀內(nèi)插處理。此外，例如，控制單元44響應(yīng)于來(lái)自操作單元45的操作信號(hào)控制幀存儲(chǔ)器41、差異計(jì)算單元42、序列確定單元43和幀內(nèi)插單元46。操作單元45例如包括操作按鈕等，并且由用戶操作。然后，操作單元45根據(jù)用戶的操作將對(duì)應(yīng)的操作信號(hào)提供給控制單元44。幀內(nèi)插單元46從外部接收幀η。例如，幀內(nèi)插單元46在要輸入的幀η_1和幀η之間內(nèi)插新的幀，并且根據(jù)控制單元44的控制輸出幀。此外，例如，幀內(nèi)插單元46根據(jù)控制單元44的控制輸出要輸入的幀η。[序列確定單元43進(jìn)行的處理的細(xì)節(jié)]接下來(lái)，圖3示出序列確定單元43進(jìn)行的處理的細(xì)節(jié)。圖3示出表示相同幀A的四個(gè)序列、相同幀B的兩個(gè)序列、相同幀C的兩個(gè)序列和相同幀D的兩個(gè)序列的出現(xiàn)圖案的4-2-2-2不規(guī)則序列的示例。序列確定單元43根據(jù)來(lái)自差異計(jì)算單元42的差異D (η, η-1)(的絕對(duì)值)是否低于預(yù)定閾值，檢測(cè)巾貞η和巾貞η-I是否是相同的中貞。
SM列如，當(dāng)幀η和幀η-1是相同幀時(shí)，來(lái)自差異計(jì)算單元42的差異D(n，n_l)(幾乎)為零并且低于預(yù)定閾值。在此情況下，序列確定單元43檢測(cè)幀η和幀η-I是相同的幀。此外，例如，當(dāng)幀η和幀η-I是不同幀時(shí)，來(lái)自差異計(jì)算單元42的差異D(n，n_l)是相對(duì)高的值并且大于或等于該閾值。在此情況下，序列確定單元43檢測(cè)幀η和幀η-I是不同的幀。序列確定單元43根據(jù)來(lái)自差異計(jì)算單元42的與兩個(gè)不同幀的組合對(duì)應(yīng)的多個(gè)差異D，計(jì)算要輸入至圖像處理裝置21的圖像信號(hào)的出現(xiàn)圖案。然后，序列確定單元43確定計(jì)算出的出現(xiàn)圖案是規(guī)則序列還是不規(guī)則序列，并且將確定結(jié)果提供至控制單元44。 [圖像處理裝置2I的操作的細(xì)節(jié)]接下來(lái)，參照?qǐng)D4中的流程圖，描述圖像處理裝置21進(jìn)行的圖像處理(下文稱為第一圖像處理)。這里，第一圖像處理例如在圖像處理裝置21從外部接收?qǐng)D像信號(hào)時(shí)開(kāi)始。在步驟S21中，幀存儲(chǔ)器41將來(lái)自外部的圖像信號(hào)中包括的幀η相對(duì)于從外部提供給差異計(jì)算單元42的幀η延遲一個(gè)幀，并且將其提供給差異計(jì)算單元42。即，當(dāng)差異計(jì)算單元42接收幀η時(shí)，幀存儲(chǔ)器41將一幀前的幀η_1提供給差異計(jì)算單元42。在步驟S22中，差異計(jì)算單元42計(jì)算來(lái)自外部的幀η和來(lái)自幀存儲(chǔ)器41的幀η_1之間的差異D (η，η-1)，并且將其提供至序列確定單元43。通過(guò)步驟S21和步驟S22中的處理，當(dāng)序列確定單元43從差異計(jì)算單元42接收與兩個(gè)不同幀的組合對(duì)應(yīng)的多個(gè)差異D時(shí)，處理前進(jìn)至步驟S23。在步驟S23中，序列確定單元43基于來(lái)自差異計(jì)算單元42的多個(gè)差異D確定要輸入的圖像信號(hào)的出現(xiàn)圖案是規(guī)則序列還是不規(guī)則序列。然后，在步驟S23中，當(dāng)序列確定單元43基于來(lái)自差異計(jì)算單元42的多個(gè)差異D確定要輸入的圖像信號(hào)的出現(xiàn)圖案是規(guī)則序列時(shí)，序列確定單元43將確定結(jié)果提供給控制單元44并且處理前進(jìn)至步驟S24。在步驟S24中，控制單元44根據(jù)來(lái)自序列確定單元43的確定結(jié)果控制幀內(nèi)插單元46，并且使得幀內(nèi)插單元46對(duì)規(guī)則序列進(jìn)行圖像處理。即，例如，幀內(nèi)插單元46在來(lái)自外部的幀η和幀η_1之間內(nèi)插新的幀，并且根據(jù)控制單元44的控制將其輸出。此外，在步驟S23中，當(dāng)序列確定單元43基于來(lái)自差異計(jì)算單元42的多個(gè)差異D確定要輸入的圖像信號(hào)的出現(xiàn)圖案是不規(guī)則序列時(shí)，序列確定單元43將確定結(jié)果提供至控制單元44并且處理前進(jìn)至步驟S25。在步驟S25中，控制單元44根據(jù)來(lái)自序列確定單元43的確定結(jié)果控制幀內(nèi)插單元46，并且使得幀內(nèi)插單元46對(duì)不規(guī)則序列進(jìn)行圖像處理。即，例如，幀內(nèi)插單元46不在來(lái)自外部的幀η和幀η-I之間內(nèi)插新的幀，并且根據(jù)控制單元44的控制輸出來(lái)自外部的幀η。這里，例如，當(dāng)輸入至圖像處理裝置21的圖像信號(hào)經(jīng)歷圖像處理并且構(gòu)成由圖像處理獲得的圖像信號(hào)的所有幀被輸出時(shí)，第一圖像處理完成。
如上所述，根據(jù)第一圖像處理，當(dāng)要輸入的圖像信號(hào)的出現(xiàn)圖案是規(guī)則序列時(shí)內(nèi)插幀，而當(dāng)要輸入的圖像信號(hào)的出現(xiàn)圖案是不規(guī)則序列時(shí)不內(nèi)插幀。因此，在第一圖像處理中，例如，當(dāng)圖像信號(hào)的出現(xiàn)圖案是不規(guī)則序列時(shí)內(nèi)插幀，從而可以防止不自然顫動(dòng)的加重。此外，例如，當(dāng)圖像信號(hào)的出現(xiàn)圖案是規(guī)則序列時(shí)內(nèi)插幀，從而可以在圖像信號(hào)的再現(xiàn)時(shí)使得幀上對(duì)象的運(yùn)動(dòng)更平滑。這里，在步驟S23中，序列確定單元43進(jìn)行用于基于來(lái)自差異計(jì)算單元42的多個(gè)差異D確定要輸入的圖像信號(hào)的出現(xiàn)圖案是否是規(guī)則序列的確定處理。在確定處理中，可以通過(guò)優(yōu)化用于確定的差異D的數(shù)目和參照?qǐng)D3描述的要與差 異D比較的閾值等來(lái)改善確定精度和穩(wěn)定操作。此外，例如，當(dāng)確定處理中確定要輸入的圖像信號(hào)的出現(xiàn)圖案是規(guī)則序列的確定的數(shù)目達(dá)到預(yù)定數(shù)目時(shí)，可最終確定要輸入的圖像信號(hào)的出現(xiàn)圖案是規(guī)則序列。同樣在此情況下，可以通過(guò)優(yōu)化用于確定的差異D的數(shù)目、參照?qǐng)D3描述的要與差異D比較的閾值等以及此外的預(yù)定數(shù)目來(lái)改善確定精度和穩(wěn)定操作。此外，在第一實(shí)施例中，對(duì)圖像信號(hào)進(jìn)行作為圖像處理的幀內(nèi)插，然而圖像處理不限于此。S卩，例如，如圖5中所示的圖像處理裝置61 —樣，除了幀內(nèi)插單元46之外還可以提供IP轉(zhuǎn)換單元81、圖像處理單元82等并且進(jìn)行各種處理。圖5示出除了包括巾貞內(nèi)插單元46之外還包括IP轉(zhuǎn)換單元81和圖像處理單元82的圖像處理裝置61的配置示例。在圖5中，將相同的附圖標(biāo)記給予以與圖2中所示的圖像處理裝置21相同方式配置的組成部分，因此，下面將省略其說(shuō)明。S卩，除了新提供IP轉(zhuǎn)換單元81和圖像處理單元82之外，以與圖2中所示的圖像處理裝置21相同方式配置圖像處理裝置61。當(dāng)來(lái)自外部的圖像信號(hào)的出現(xiàn)圖案是規(guī)則序列時(shí)，IP轉(zhuǎn)換單元81根據(jù)控制單元44的控制對(duì)來(lái)自外部的圖像信號(hào)進(jìn)行IP轉(zhuǎn)換，并且將IP轉(zhuǎn)換獲得的圖像信號(hào)提供給圖像處理單元82。這里，IP轉(zhuǎn)換是將以隔行模式顯示的隔行圖像(場(chǎng))轉(zhuǎn)換為以逐行模式顯示的逐行圖像(幀)的處理。因此，當(dāng)輸入場(chǎng)作為來(lái)自外部的圖像信號(hào)時(shí)，IP轉(zhuǎn)換單元81進(jìn)行IP轉(zhuǎn)換。這里，當(dāng)輸入幀作為來(lái)自外部的圖像信號(hào)時(shí)，IP轉(zhuǎn)換單元81不進(jìn)行IP轉(zhuǎn)換并且將幀提供給圖像處理單元82。此外，當(dāng)來(lái)自外部的圖像信號(hào)的出現(xiàn)圖案是不規(guī)則序列(不是規(guī)則序列)時(shí)，IP轉(zhuǎn)換單元81根據(jù)控制單元44的控制對(duì)來(lái)自外部的圖像信號(hào)進(jìn)行加強(qiáng)梳狀噪聲的抑制的IP轉(zhuǎn)換，并且將通過(guò)IP轉(zhuǎn)換獲得的圖像信號(hào)提供給圖像處理單元82。這是由于這樣的原因當(dāng)圖像信號(hào)的出現(xiàn)圖案是不規(guī)則序列時(shí)，圖像信號(hào)經(jīng)歷IP轉(zhuǎn)換，從而容易地產(chǎn)生梳狀噪聲。此外，例如，當(dāng)圖像信號(hào)的出現(xiàn)圖案是規(guī)則序列時(shí)，IP轉(zhuǎn)換單元81可以使用基于每個(gè)場(chǎng)檢測(cè)到的運(yùn)動(dòng)矢量進(jìn)行IP轉(zhuǎn)換，而當(dāng)圖像信號(hào)的出現(xiàn)圖案是不規(guī)則序列時(shí)，IP轉(zhuǎn)換單元81可以在不使用運(yùn)動(dòng)矢量的情況下進(jìn)行IP轉(zhuǎn)換。這是由于這樣的原因當(dāng)圖像信號(hào)的出現(xiàn)圖案是不規(guī)則序列時(shí)，減小了運(yùn)動(dòng)矢量的檢測(cè)精度?？商鎿Q地，例如，代之IP轉(zhuǎn)換，IP轉(zhuǎn)換單元81可以進(jìn)行用于將電視廣播中使用的每秒30幀(60場(chǎng))的第一圖像信號(hào)轉(zhuǎn)換(下拉，pull-down)為以每秒24幀記錄的第二圖像信號(hào)(如，電影)的下拉處理。在此情況下，例如，當(dāng)要輸入的圖像信號(hào)的出現(xiàn)圖案是規(guī)則序列時(shí)，IP轉(zhuǎn)換單元81進(jìn)行上面描述的下拉處理，而當(dāng)要輸入的圖像信號(hào)的出現(xiàn)圖案是不規(guī)則序列時(shí)，IP轉(zhuǎn)換單元81不進(jìn)行上面描述的下拉處理。此外，例如，代之下拉處理，IP轉(zhuǎn)換單元81可以進(jìn)行用于將第二圖像信號(hào)反向轉(zhuǎn)換為第一圖像信號(hào)的反向下拉處理。 同樣在此情況下，當(dāng)要輸入的圖像信號(hào)的出現(xiàn)圖案是規(guī)則序列時(shí)，IP轉(zhuǎn)換單元81進(jìn)行反向下拉處理，而當(dāng)要輸入的圖像信號(hào)的出現(xiàn)圖案是不規(guī)則序列時(shí)，IP轉(zhuǎn)換單元81不進(jìn)行反向下拉處理。圖像處理單元82對(duì)來(lái)自IP轉(zhuǎn)換單元81的圖像信號(hào)進(jìn)行用于降低噪聲的降噪處理、用于將圖像信號(hào)分辨率轉(zhuǎn)換為更高分辨率的分辨率創(chuàng)建處理等。S卩，例如，圖像處理單元82基于來(lái)自外部的圖像信號(hào)的出現(xiàn)圖案是否是不規(guī)則序列，利用不同的降噪濾波器等進(jìn)行降噪處理?？商鎿Q地，例如，圖像處理單元82可以根據(jù)出現(xiàn)圖案中的重復(fù)數(shù)目動(dòng)態(tài)地改變降噪濾波器等以進(jìn)行降噪處理。此外，例如，圖像處理單元82基于來(lái)自外部的圖像信號(hào)的出現(xiàn)圖案是否是不規(guī)則序列，利用不同的參數(shù)進(jìn)行分辨率創(chuàng)建處理。圖像處理單元82將處理后的圖像信號(hào)提供給幀內(nèi)插單元46。這里，圖像處理裝置61通過(guò)IP轉(zhuǎn)換單元81進(jìn)行IP轉(zhuǎn)換處理，通過(guò)圖像處理單元82進(jìn)行降噪處理和分辨率創(chuàng)建處理，并通過(guò)幀內(nèi)插單元46進(jìn)行幀內(nèi)插處理，并且例如通過(guò)省略圖像處理單元82和幀內(nèi)插單元46，還可以只進(jìn)行IP轉(zhuǎn)換處理。S卩，例如，圖像處理裝置61可以進(jìn)行IP轉(zhuǎn)換處理、降噪處理、分辨率創(chuàng)建處理和幀內(nèi)插處理中的至少一個(gè)。這里，這也類似地適用于下面討論的第二實(shí)施例和第三實(shí)施例。2.第二實(shí)施例[圖像處理裝置101的配置示例]接下來(lái)，圖6示出根據(jù)第二實(shí)施例的圖像處理裝置101的配置示例。這里，在圖像處理裝置101中，將相同的附圖標(biāo)記給予以與圖2中所示的圖像處理裝置21相同方式配置的組成部分，因此，下面將省略其說(shuō)明。S卩，除了提供控制單元121而不是圖2中所示的控制單元44并且還新提供了轉(zhuǎn)換單元122之外，以與圖2中所示的圖像處理裝置21相同方式配置圖像處理裝置101。控制單元121基于來(lái)自序列確定單元43的確定結(jié)果控制轉(zhuǎn)換單元122。S卩，例如，當(dāng)控制單元121接收到要輸入的圖像信號(hào)的出現(xiàn)圖案是規(guī)則序列的確定結(jié)果時(shí)，控制單元121控制轉(zhuǎn)換單元122將圖像信號(hào)提供給幀內(nèi)插單元46。此外，例如，當(dāng)控制單元121接收要輸入的圖像信號(hào)的出現(xiàn)圖案是不規(guī)則序列的確定結(jié)果時(shí)，控制單元121控制轉(zhuǎn)換單元122將具有不規(guī)則序列的出現(xiàn)圖案的圖像信號(hào)轉(zhuǎn)換為具有規(guī)則序列的出現(xiàn)圖案的圖像信號(hào)并將其提供給幀內(nèi)插單元46。此外，例如，控制單元121控制幀內(nèi)插單元46，并且針對(duì)規(guī)則序列進(jìn)行圖像處理，而不管來(lái)自序列確定單元43的確定結(jié)果。在此情況下，例如，幀內(nèi)插單元46根據(jù)控制單元121的控制對(duì)來(lái)自轉(zhuǎn)換單元122的規(guī)則序列的圖像信號(hào)進(jìn)行幀內(nèi)插，并且輸出內(nèi)插的圖像信號(hào)。當(dāng)要輸入的圖像信號(hào)的出現(xiàn)圖案是不規(guī)則序列時(shí)，轉(zhuǎn)換單元122根據(jù)控制單元121的控制將不規(guī)則序列的圖像信號(hào)轉(zhuǎn)換為規(guī)則序列的圖像信號(hào)，并且將其提供給幀內(nèi)插單元46。這里，稍后將參照?qǐng)D7到圖10詳細(xì)描述轉(zhuǎn)換單元122進(jìn)行的處理。在此情況下，在圖6中所示的圖像處理裝置101中，例如，可以在轉(zhuǎn)換單元122之前提供IP轉(zhuǎn)換單元81并且將經(jīng)IP轉(zhuǎn)換單元81IP轉(zhuǎn)換的圖像信號(hào)提供給轉(zhuǎn)換單元122。 可替代地，例如，可以將對(duì)轉(zhuǎn)換單元122處理的圖像信號(hào)進(jìn)行降噪處理和分辨率創(chuàng)建處理的圖像處理單元82提供在轉(zhuǎn)換單元122和幀內(nèi)插單元46之間。[轉(zhuǎn)換單元122進(jìn)行的第一轉(zhuǎn)換方法]接下來(lái)，圖7示出轉(zhuǎn)換單元122將不規(guī)則序列的圖像信號(hào)轉(zhuǎn)換為規(guī)則序列的圖像信號(hào)并且將其輸出的第一轉(zhuǎn)換方法。圖7的A示出表示相同幀A的五個(gè)序列、相同幀B的三個(gè)序列和相同幀C的兩個(gè)序列的出現(xiàn)圖案5-3-2的5-3-2不規(guī)則序列的圖像信號(hào)。圖7的B示出表示相同幀A的四個(gè)序列、相同幀B的三個(gè)序列和相同幀C的三個(gè)序列的出現(xiàn)圖案4_3_3的4_3_3規(guī)則序列的圖像信號(hào)。如圖7的A中所示，轉(zhuǎn)換單元122根據(jù)控制單元121的控制，使得將包括來(lái)自外部的圖像信號(hào)的多個(gè)幀之中的十個(gè)幀(例如，圖7的五個(gè)幀A、三個(gè)幀B和兩個(gè)幀C)存儲(chǔ)于內(nèi)置存儲(chǔ)器(未不出)。然后，如圖7的B中所示，例如，轉(zhuǎn)換單元122將存儲(chǔ)的十個(gè)幀的出現(xiàn)圖案5_3_2轉(zhuǎn)換為表示出現(xiàn)圖案4-3-3的4-3-3規(guī)則序列，并且將轉(zhuǎn)換后的十個(gè)幀輸出至幀內(nèi)插單元46。這里，例如將稍后參照?qǐng)D8描述出現(xiàn)圖案的轉(zhuǎn)換方法。由此，轉(zhuǎn)換單元122將對(duì)于每十個(gè)幀的出現(xiàn)圖案5-3-2轉(zhuǎn)換為出現(xiàn)圖案4-3-3。這里，如圖7中所示，轉(zhuǎn)換單元122例如將出現(xiàn)圖案5-3-2的圖像信號(hào)轉(zhuǎn)換為出現(xiàn)圖案4-3-3的圖像信號(hào)。S卩，轉(zhuǎn)換單元122基于重復(fù)數(shù)目的量度關(guān)系轉(zhuǎn)換到與要輸入的圖像信號(hào)的出現(xiàn)圖案5-3-2類似的出現(xiàn)圖案4-3-3的圖像信號(hào)。確切地，例如，如圖7的A中所示，在要輸入的圖像信號(hào)中，幀A的重復(fù)數(shù)目(在此情況下，五次)大于幀B的重復(fù)數(shù)目(在此情況下，三次)。因此，如圖7的B中所示，轉(zhuǎn)換單元122將要輸入的圖像信號(hào)轉(zhuǎn)換為圖像信號(hào)，使得幀A的重復(fù)數(shù)目(在此情況下，四次)大于幀B的重復(fù)數(shù)目(在此情況下，三次)。因此，由于轉(zhuǎn)換單元122將要輸入的圖像的出現(xiàn)圖案轉(zhuǎn)換為類似的出現(xiàn)圖案，因此可以減小轉(zhuǎn)換中所使用的時(shí)間。這將在稍后通過(guò)參照?qǐng)D10詳細(xì)加以描述。接下來(lái)，圖8示出轉(zhuǎn)換單元122將5-3-2不規(guī)則序列的圖像信號(hào)轉(zhuǎn)換為4_3_3規(guī)則序列的圖像信號(hào)的情況的示例。
轉(zhuǎn)換單元122以十幀為單元將如圖8的A中所示的5_3_2不規(guī)則序列的圖像信號(hào)存儲(chǔ)至內(nèi)置存儲(chǔ)器(未示出)。即，例如，轉(zhuǎn)換單元122將圖8的A中所示的五個(gè)幀A、三個(gè)幀B和兩個(gè)幀C存儲(chǔ)至內(nèi)置存儲(chǔ)器(未不出)。然后，例如，如圖8的B中所示，轉(zhuǎn)換單元122從內(nèi)置存儲(chǔ)器中存儲(chǔ)的五個(gè)幀A、三個(gè)幀B和兩個(gè)幀C提取頂部幀A、頂部幀B和頂部幀C。如圖8的C中所示，轉(zhuǎn)換單元122基于所提取的頂部幀A產(chǎn)生四個(gè)幀A。同樣地，轉(zhuǎn)換單元122基于所提取的頂部幀B產(chǎn)生三個(gè)幀B，并且基于所提取的頂部幀C產(chǎn)生兩個(gè)幀C0由此，轉(zhuǎn)換單元122將如圖8的A中所示的5_3_2不規(guī)則序列的圖像信號(hào)轉(zhuǎn)換為如圖8的C中所示的以十個(gè)幀為單位的4-3-3規(guī)則序列的圖像信號(hào)。然后，轉(zhuǎn)換單元122 將轉(zhuǎn)換后的4-3-3規(guī)則序列的圖像信號(hào)提供給幀內(nèi)插單元46。這里，轉(zhuǎn)換單元122不僅可以將5-3-2不規(guī)則序列的圖像信號(hào)而且可以將不同出現(xiàn)圖案的不規(guī)則序列的圖像轉(zhuǎn)換為規(guī)則序列的圖像信號(hào)。S卩，例如，轉(zhuǎn)換單元122可以將4-2-2-2不規(guī)則序列的圖像信號(hào)轉(zhuǎn)換為3_2規(guī)則序列的圖像信號(hào)。確切地，例如，轉(zhuǎn)換單元122以十幀為單位將如圖9的A中所示的4_2_2_2不規(guī)則序列的圖像信號(hào)存儲(chǔ)至內(nèi)置存儲(chǔ)器(未示出)。S卩，例如，轉(zhuǎn)換單元122將圖9的A中所示的四個(gè)幀A、兩個(gè)幀B和兩個(gè)幀C以及兩個(gè)幀D存儲(chǔ)至內(nèi)置存儲(chǔ)器(未示出)。然后，例如，如圖9的B中所示，轉(zhuǎn)換單元122從內(nèi)置存儲(chǔ)器中存儲(chǔ)的四個(gè)幀A、兩個(gè)幀B和兩個(gè)幀C以及兩個(gè)幀D提取頂部幀A、頂部幀B、頂部幀C和頂部幀D。如圖9的C中所示，轉(zhuǎn)換單元122基于所提取出的頂部幀A產(chǎn)生三個(gè)幀A。同樣地，轉(zhuǎn)換單元122基于所提取出的頂部幀B產(chǎn)生兩個(gè)幀B，基于所提取出的頂部幀C產(chǎn)生三個(gè)幀C，并且基于所提取出的頂部幀D產(chǎn)生兩個(gè)幀D。由此，轉(zhuǎn)換單元122將如圖9的A中所示的4_2_2_2不規(guī)則序列的圖像信號(hào)轉(zhuǎn)換為如圖9的C中所示的以十個(gè)幀為單位的3-2規(guī)則序列的圖像信號(hào)。這里，轉(zhuǎn)換單元122不限于圖7中描述的第一轉(zhuǎn)換方法，而是也可以進(jìn)行例如參照?qǐng)D10描述的第二轉(zhuǎn)換方法的轉(zhuǎn)換。[轉(zhuǎn)換單元122進(jìn)行的第二轉(zhuǎn)換方法]接下來(lái)，圖10示出轉(zhuǎn)換單元122將不規(guī)則序列的圖像信號(hào)轉(zhuǎn)換為規(guī)則序列的圖像信號(hào)并且將其輸出的第二轉(zhuǎn)換方法。例如，當(dāng)控制單元121從序列確定單元43接收?qǐng)D像信號(hào)的出現(xiàn)圖案具有5_3_2不規(guī)則序列的確定結(jié)果時(shí)，控制單元121控制轉(zhuǎn)換單元122通過(guò)基于5-3-2不規(guī)則序列的轉(zhuǎn)換規(guī)則進(jìn)行轉(zhuǎn)換。轉(zhuǎn)換單元122例如接收如圖10的A中所示的5_3_2不規(guī)則序列的圖像信號(hào)。轉(zhuǎn)換單元122根據(jù)控制單元121的控制，通過(guò)使用基于5_3_2不規(guī)則序列的轉(zhuǎn)換規(guī)則將要從外部提供的5-3-2不規(guī)則序列轉(zhuǎn)換為如圖10的B中所示的4-3-3規(guī)則序列的圖像信號(hào)，并且將其輸出至幀內(nèi)插單元46。
S卩，例如，如圖10的A中所示，當(dāng)轉(zhuǎn)換單元122接收其重復(fù)數(shù)目為五的幀(例如，幀D)之中的頂部幀時(shí)，轉(zhuǎn)換單元122根據(jù)圖10的B中所示的轉(zhuǎn)換規(guī)則將在前一個(gè)幀提供的幀(例如，幀C)而不是頂部幀輸出至幀內(nèi)插單元46。此外，例如，如圖10的A中所示，當(dāng)轉(zhuǎn)換單元122接收其重復(fù)數(shù)目為五的幀(例如，幀D)之中的除了頂部幀之外的幀時(shí)，轉(zhuǎn)換單元122根據(jù)圖10的B中所示的轉(zhuǎn)換規(guī)則將其輸出至幀內(nèi)插單元46。此外，例如，如圖10的A中所示，當(dāng)轉(zhuǎn)換單元122接收其重復(fù)數(shù)目為三的幀(例如，幀B)時(shí)，轉(zhuǎn)換單元122根據(jù)如圖10的B中所示的轉(zhuǎn)換規(guī)則將幀輸出至幀內(nèi)插單元46。此外，例如，如圖10的A中所示，當(dāng)轉(zhuǎn)換單元122接收其重復(fù)數(shù)目為二的幀(例如，
幀C)時(shí)，轉(zhuǎn)換單元122根據(jù)圖10的B中所示的轉(zhuǎn)換規(guī)則將幀輸出至幀內(nèi)插單元46。因此，例如，如圖7中所示，轉(zhuǎn)換單元122無(wú)需包括用于存儲(chǔ)十個(gè)幀的內(nèi)置存儲(chǔ)器，從而防止由于幀轉(zhuǎn)換引起的延遲。此外，由于轉(zhuǎn)換單元122將要輸入的圖像的出現(xiàn)圖案轉(zhuǎn)換為類似的出現(xiàn)圖案，因此相比于例如轉(zhuǎn)換與要輸入的圖像的出現(xiàn)圖案不類似的任意出現(xiàn)圖案的情況，可以以更簡(jiǎn)單的轉(zhuǎn)換規(guī)則進(jìn)行轉(zhuǎn)換。因此，根據(jù)第二轉(zhuǎn)換規(guī)則，可以進(jìn)一步降低轉(zhuǎn)換中使用的時(shí)間。因此，例如，相比于例如轉(zhuǎn)換與要輸入的圖像的出現(xiàn)圖案不類似的出現(xiàn)圖案的情況，轉(zhuǎn)換單元122可以可靠地防止由于幀轉(zhuǎn)換引起的延遲。[圖像處理裝置101的操作的描述]接下來(lái)參照?qǐng)D11的流程圖，描述圖像處理裝置101進(jìn)行的圖像處理(下文稱為第二圖像處理)。這里，第二圖像處理例如在圖像處理裝置101從外部接收?qǐng)D像信號(hào)時(shí)開(kāi)始。在步驟S41到S43中，進(jìn)行與圖4中的步驟S21 S23的處理類似的處理。這里，在步驟S43中，當(dāng)序列確定單元43基于來(lái)自差異計(jì)算單元42的多個(gè)差異D確定要輸入的圖像信號(hào)的出現(xiàn)圖案不是規(guī)則序列(不規(guī)則序列)時(shí)，序列確定單元43將確定結(jié)果提供給控制單元121?？刂茊卧?21根據(jù)來(lái)自序列確定單元43的確定結(jié)果控制轉(zhuǎn)換單元122和幀內(nèi)插單元46以進(jìn)行步驟S44和S45的處理。S卩，在步驟S44中，轉(zhuǎn)換單元122根據(jù)控制單元121的控制將不規(guī)則序列的圖像信號(hào)轉(zhuǎn)換為規(guī)則序列的圖像信號(hào)，并且將其提供給幀內(nèi)插單元46。在步驟S45中，幀內(nèi)插單元46根據(jù)控制單元121的控制，對(duì)來(lái)自轉(zhuǎn)換單元122的圖像信號(hào)進(jìn)行幀內(nèi)插處理。此外，在步驟S43中，當(dāng)序列確定單元43基于來(lái)自差異計(jì)算單元42的多個(gè)差異D確定要輸入的圖像信號(hào)的出現(xiàn)圖案是規(guī)則序列時(shí)，序列確定單元43將確定結(jié)果提供給控制單元121。控制單元121根據(jù)來(lái)自序列確定單元43的確定結(jié)果控制轉(zhuǎn)換單元122和幀內(nèi)插單元46。轉(zhuǎn)換單元122根據(jù)控制單元121的控制將規(guī)則序列的圖像信號(hào)提供給幀內(nèi)插單元46。此外，在步驟S45中，幀內(nèi)插單元46根據(jù)控制單元121的控制，對(duì)來(lái)自轉(zhuǎn)換單元122的規(guī)則序列的圖像信號(hào)進(jìn)行幀內(nèi)插處理。這里，例如，當(dāng)輸入至圖像處理裝置101的圖像信號(hào)經(jīng)歷圖像處理并且包括通過(guò)圖像處理獲得的圖像信號(hào)的所有幀被輸出時(shí)，完成第二圖像處理。如上所述，根據(jù)第二圖像處理，當(dāng)要輸入的圖像信號(hào)的出現(xiàn)圖案是不規(guī)則序列時(shí)，要輸入的圖像信號(hào)被轉(zhuǎn)換為規(guī)則序列的圖像信號(hào)。因此，例如，不規(guī)則序列的圖像信號(hào)經(jīng)歷幀內(nèi)插等，從而可以防止不自然顫動(dòng)的加重。3.第三實(shí)施例[圖像處理裝置141的配置示例]接下來(lái)，圖12示出根據(jù)第三實(shí)施例的圖像處理裝置141的配置示例。這里，在圖像處理裝置141中，將相同的附圖標(biāo)記給予以與圖6中所示的圖像處理裝置101相同方式配置的組成部分，因此，下面將省略其說(shuō)明。 即，除了提供轉(zhuǎn)換單元161和幀內(nèi)插單元162而不是圖6中所示的轉(zhuǎn)換單元122和 幀內(nèi)插單元46之外，以與圖6中所示的圖像處理裝置101相同方式配置圖像處理裝置141。轉(zhuǎn)換單元161進(jìn)行與轉(zhuǎn)換單元122的處理類似的處理。S卩，例如，當(dāng)來(lái)自外部的圖像信號(hào)的出現(xiàn)圖案是不規(guī)則序列時(shí)，轉(zhuǎn)換單元161根據(jù)控制單元121的控制將不規(guī)則序列的圖像信號(hào)轉(zhuǎn)換為規(guī)則序列的圖像信號(hào)，并且將其提供給幀內(nèi)插單元162。 此外，轉(zhuǎn)換單元161基于從轉(zhuǎn)換單元161輸出的規(guī)則序列的圖像信號(hào)，檢測(cè)表示相同幀依次出現(xiàn)的定時(shí)的定時(shí)信號(hào)。S卩，例如，轉(zhuǎn)換單元161基于從轉(zhuǎn)換單元161輸出的規(guī)則序列的圖像信號(hào)，檢測(cè)作為定時(shí)信號(hào)的頂部幀相位信號(hào)。這里，頂部幀相位信號(hào)表示頂部幀(最早出現(xiàn)的幀)在相同序列幀之中出現(xiàn)的時(shí)刻。然后，轉(zhuǎn)換單元161將檢測(cè)到的頂部幀相位信號(hào)與輸出至幀內(nèi)插單元162的圖像信號(hào)同步，并且將其提供給幀內(nèi)插單元162。這里，例如，轉(zhuǎn)換單元161使用就硬件而言的低電壓差分信令(LVDS)來(lái)將頂部幀相位信號(hào)與輸出至幀內(nèi)插單元162的圖像信號(hào)同步，并且將其提供給幀內(nèi)插單元162。幀內(nèi)插單元162基于來(lái)自轉(zhuǎn)換單元161的頂部幀相位信號(hào)，產(chǎn)生并輸出具有比從轉(zhuǎn)換單元161獲得的圖像信號(hào)的幀速更高的幀速的圖像信號(hào)。接下來(lái)，圖13是示出轉(zhuǎn)換單元161和幀內(nèi)插單元162進(jìn)行的處理的示例。圖13的A示出作為輸入至圖像處理裝置141的圖像信號(hào)的示例的5_3_2不規(guī)則序列的圖像信號(hào)。圖13的B示出通過(guò)利用轉(zhuǎn)換單元122的轉(zhuǎn)換所獲得的4_3_3規(guī)則序列的圖像信號(hào)。圖13的C示出具有比響應(yīng)于頂部幀相位信號(hào)產(chǎn)生的4-3-3規(guī)則序列的圖像信號(hào)的幀速更高幀速的圖像信號(hào)。例如，轉(zhuǎn)換單元161將如圖13的A中所示的從外部提供5_3_2不規(guī)則序列的圖像信號(hào)轉(zhuǎn)換為如圖13的B中所示的4-3-3規(guī)則序列的圖像信號(hào)，并且將其提供給幀內(nèi)插單元162。此外，例如，如圖13的B中所示，轉(zhuǎn)換單元161基于通過(guò)轉(zhuǎn)換獲得的4_3_3規(guī)則序列的圖像信號(hào)檢測(cè)頂部幀相位信號(hào)，并且與4-3-3規(guī)則序列的信號(hào)同步地將其轉(zhuǎn)換給幀內(nèi)插單元162。
如圖13的C中所示，幀內(nèi)插單元162調(diào)節(jié)來(lái)自轉(zhuǎn)換單元161的頂部幀相位信號(hào)，并且將由頂部幀相位信號(hào)表示的凸出部分(頂部幀出現(xiàn)在圖13的B中的時(shí)刻)改變到相等的間隔。即，例如，幀內(nèi)插單元162調(diào)節(jié)來(lái)自轉(zhuǎn)換單元161的頂部幀相位信號(hào)，并且在用于再現(xiàn)如圖13的B中所示的4-3-3規(guī)則序列的圖像信號(hào)的再現(xiàn)時(shí)間的范圍內(nèi)將頂部幀相位信號(hào)表示的凸出部分改變到相等的間隔。然后，幀內(nèi)插單元162基于調(diào)節(jié)后的頂部幀相位信號(hào)，確定構(gòu)成通過(guò)幀內(nèi)插等新產(chǎn)生的圖像信號(hào)的每個(gè)幀上對(duì)象的位置。S卩，例如，當(dāng)通過(guò)改變后的凸出部分顯示幀時(shí)，幀內(nèi)插單元162確定幀上對(duì)象的位置對(duì)應(yīng)于與凸出部分對(duì)應(yīng)的頂部幀A、B、C、D、E···上顯示的對(duì)象的位置。幀內(nèi)插單元162產(chǎn)生并輸出包括其上在確定位置繪制對(duì)象的每個(gè)幀的新圖像信 號(hào)。接下來(lái)，圖14示出在圖13的k C中所示的每個(gè)圖像信號(hào)中產(chǎn)生的顫動(dòng)的示例。在如圖13的A中所示的圖像信號(hào)的情況下，如圖14的曲線圖181中所示那樣，幀上對(duì)象的位置隨著時(shí)間經(jīng)過(guò)不規(guī)則地改變。這是由于圖13的A中所示的圖像信號(hào)的出現(xiàn)圖案是不規(guī)則序列的原因。在如圖13的B中所示的圖像信號(hào)的情況下，如圖14的曲線圖182中所示那樣，幀上對(duì)象的位置隨著時(shí)間經(jīng)過(guò)規(guī)則地改變。這是由于圖13的B中所示的圖像信號(hào)的出現(xiàn)圖案是規(guī)則序列的原因。在如圖13的C中所示的圖像信號(hào)的情況下，如圖14的曲線圖183中所示那樣，幀上對(duì)象的位置隨著時(shí)間經(jīng)過(guò)平滑地改變。這是由于圖13的C中所示的圖像信號(hào)是由不同幀構(gòu)成的規(guī)則序列的圖像信號(hào)的原因。這里，在上述圖13中，已經(jīng)針對(duì)來(lái)自外部的圖像信號(hào)的出現(xiàn)圖案是5-3-2不規(guī)則序列的情況給出了描述。同時(shí)，同樣在來(lái)自外部的圖像信號(hào)的出現(xiàn)圖案與5-3-2不規(guī)則序列不同的不規(guī)則序列的情況下，進(jìn)行與圖13中的描述的處理類似的處理。SM列如，如圖15的A中所示，當(dāng)轉(zhuǎn)換單元161從外部接收4-2_2_2不規(guī)則序列的圖像信號(hào)時(shí)，轉(zhuǎn)換單元161將其轉(zhuǎn)換為如圖15的B中所示的3-2規(guī)則序列的圖像信號(hào)，并且檢測(cè)對(duì)應(yīng)的頂部幀相位信號(hào)。然后，如圖15的C中所示，幀內(nèi)插單元162將來(lái)自轉(zhuǎn)換單元161的頂部幀相位信號(hào)所表示的凸出部分改變到相等的間隔，并且基于改變后的頂部幀相位信號(hào)，對(duì)凸出部分進(jìn)行幀內(nèi)插。此外，例如，如圖16的A中所示，當(dāng)轉(zhuǎn)換單元161從外部接收5-3-2不規(guī)則序列的圖像信號(hào)時(shí)，轉(zhuǎn)換單元161將其轉(zhuǎn)換為如圖16的B中所示的4-3-3規(guī)則序列的圖像信號(hào)，并且檢測(cè)對(duì)應(yīng)的頂部幀相位信號(hào)。然后，如圖16的C中所示，幀內(nèi)插單元162將來(lái)自轉(zhuǎn)換單元161的頂部幀相位信號(hào)所表示的凸出部分改變到相等的間隔，并且基于改變后的頂部幀相位信號(hào)，對(duì)凸出部分進(jìn)行幀內(nèi)插。[圖像處理裝置141的操作的描述]接下來(lái)，參照?qǐng)D17中的流程圖，描述圖像處理裝置141進(jìn)行的圖像處理(下文稱為第三圖像處理)。這里，第三圖像處理例如在圖像處理裝置141從外部接收?qǐng)D像信號(hào)時(shí)開(kāi)始。在步驟S61 S64中，進(jìn)行與圖11中的步驟S41 S44的處理類似的處理。這里，在步驟S64之后或者當(dāng)在步驟S63中將要輸入的圖像信號(hào)的出現(xiàn)圖案確定為規(guī)則序列時(shí)，進(jìn)行步驟S65。在步驟S65中，轉(zhuǎn)換單元161基于從轉(zhuǎn)換單元161輸出的圖像信號(hào)檢測(cè)頂部幀相位信號(hào)，并且與通過(guò)步驟S64中的處理所獲得的規(guī)則序列的圖像信號(hào)或者來(lái)自外部的規(guī)則序列的圖像信號(hào)同步地將其提供給幀內(nèi)插單元162。在步驟S66中，幀內(nèi)插單元162調(diào)節(jié)來(lái)自轉(zhuǎn)換單元161的頂部幀相位信號(hào)，并且將頂部幀相位信號(hào)表示的定時(shí)(凸出部分)改變到相等的間隔。
在步驟S67中，幀內(nèi)插單元162基于調(diào)節(jié)后的頂部幀相位信號(hào)確定構(gòu)成由幀內(nèi)插新生成的圖像信號(hào)的每個(gè)幀上對(duì)象的位置。然后，幀內(nèi)插單元162產(chǎn)生并輸出由其上在確定位置繪制對(duì)象的每個(gè)幀構(gòu)成的新圖像信號(hào)。這里，例如，當(dāng)輸入至圖像處理裝置141的圖像信號(hào)經(jīng)歷圖像處理并且構(gòu)成由圖像處理獲得的圖像信號(hào)的所有幀被輸出時(shí)，第三圖像處理完成。如上所述，根據(jù)第三圖像處理，基于其中將頂部幀相位信號(hào)表示的定時(shí)改變?yōu)橄嗟乳g隔的頂部幀相位信號(hào)來(lái)內(nèi)插幀。因此，可以使得構(gòu)成圖像信號(hào)的每個(gè)幀上對(duì)象的運(yùn)動(dòng)更平滑而沒(méi)有顫動(dòng)。4.修正示例在第一實(shí)施例 第三實(shí)施例中，當(dāng)要輸入的圖像信號(hào)的出現(xiàn)圖案是不規(guī)則序列時(shí)，進(jìn)行針對(duì)不規(guī)則序列的圖像處理(例如，第二實(shí)施例中將不規(guī)則序列轉(zhuǎn)換為規(guī)則序列)。然而，例如，當(dāng)出現(xiàn)圖案是不規(guī)則序列的圖像信號(hào)被輸入作為所謂的測(cè)試圖案時(shí)，期望暫時(shí)關(guān)閉用于對(duì)不規(guī)則序列進(jìn)行圖像處理的每個(gè)功能。因此，圖像處理裝置21、61、101、141等中提供的操作單元45可以開(kāi)啟或關(guān)閉每個(gè)功能。確切地，例如，準(zhǔn)備第一操作模式到第三操作模式，并且可以根據(jù)對(duì)于操作單元45的用戶操作改變操作模式。這里，例如，第一操作模式對(duì)應(yīng)于利用第一實(shí)施例描述的內(nèi)容，并且是根據(jù)要輸入的圖像信號(hào)的出現(xiàn)圖案是否為規(guī)則序列來(lái)進(jìn)行IP轉(zhuǎn)換、分辨率創(chuàng)建處理、降噪處理等的操作模式。此外，例如，第二操作模式對(duì)應(yīng)于利用第二實(shí)施例描述的內(nèi)容，并且是當(dāng)輸入不規(guī)則序列的圖像信號(hào)時(shí)將不規(guī)則序列的圖像信號(hào)轉(zhuǎn)換為規(guī)則序列的圖像信號(hào)并且進(jìn)行對(duì)于規(guī)則序列的圖像處理的操作模式。進(jìn)一步，例如，第三操作模式對(duì)應(yīng)于利用第三實(shí)施例描述的內(nèi)容，并且是圖像處理還包括用于除了第二操作模式的內(nèi)容之外還基于頂部幀相位信號(hào)產(chǎn)生高幀速的圖像信號(hào)的處理的操作模式。這里，可以使得圖像處理裝置21、61、101和141用作電視接收器、硬盤記錄器等。此外，本公開(kāi)可以按照如下這樣配置。
(I) 一種對(duì)由多個(gè)圖像構(gòu)成的圖像信號(hào)進(jìn)行圖像處理的圖像處理裝置，包含確定單元，其配置為確定出現(xiàn)圖案是否是用于顯示圖像信號(hào)的預(yù)定規(guī)則圖案，在所述出現(xiàn)圖案中，在構(gòu)成所述圖像信號(hào)的多個(gè)圖像中出現(xiàn)表示相同圖像的序列數(shù)目的重復(fù)數(shù)目；以及圖像處理單元，其配置為根據(jù)確定單元的確定結(jié)果對(duì)所述圖像信號(hào)進(jìn)行圖像處理。(2)如項(xiàng)⑴所述的圖像處理裝置，還包括轉(zhuǎn)換單元，其配置為響應(yīng)于所述出現(xiàn)圖案是與規(guī)則圖案不同的圖案的確定單元的確定結(jié)果，將具有不同圖案的第一圖像信號(hào)轉(zhuǎn)換為具有規(guī)則圖案的第二圖像信號(hào)，其中所述圖像處理單元對(duì)所述第二圖像信號(hào)進(jìn)行規(guī)則圖案的圖像處理。(3)如項(xiàng)(2)所述的圖像處理裝置，還包括檢測(cè)單元，其配置為檢測(cè)表示在構(gòu)成所述第二圖像信號(hào)的多個(gè)圖像之中依次出現(xiàn)相同圖像的定時(shí)的定時(shí)信號(hào)；以及調(diào)節(jié)單元，其配置為調(diào)節(jié)所述定時(shí)信號(hào)并且將所述定時(shí)之間的間隔改變?yōu)橄嗟鹊拈g隔，其中所述圖像處理單元基于調(diào)節(jié)后的定時(shí)信號(hào)進(jìn)行用于從所述第二圖像信號(hào)中產(chǎn)生由所述多個(gè)不同圖像構(gòu)成的第三圖像信號(hào)的圖像處理。(4)如項(xiàng)(3)所述的圖像處理裝置，其中所述調(diào)節(jié)單元調(diào)節(jié)所述定時(shí)信號(hào)，并且將 用于再現(xiàn)所述第二圖像信號(hào)的再現(xiàn)時(shí)間內(nèi)產(chǎn)生的定時(shí)之間的間隔改變到相等的間隔。(5)如項(xiàng)(2)所述的圖像處理裝置，其中所述轉(zhuǎn)換單元根據(jù)基于出現(xiàn)圖案的轉(zhuǎn)換規(guī)則，將所述第一圖像信號(hào)轉(zhuǎn)換為所述第二圖像信號(hào)。(6)如項(xiàng)(I)所述的圖像處理裝置，其中，所述圖像處理單元執(zhí)行作為圖像處理的如下處理中的至少一個(gè)將隔行圖像轉(zhuǎn)換為逐行圖像的IP轉(zhuǎn)換處理、降低圖像中產(chǎn)生的噪聲的降噪處理、將圖像分辨率轉(zhuǎn)換為更高分辨率的分辨率創(chuàng)建處理、將新圖像內(nèi)插至所述圖像信號(hào)的內(nèi)插處理。應(yīng)當(dāng)注意，上述一系列處理可以通過(guò)硬件執(zhí)行，或者通過(guò)軟件執(zhí)行。當(dāng)通過(guò)軟件執(zhí)行這一序列處理時(shí)，例如，將構(gòu)成軟件的程序從程序記錄介質(zhì)安裝至專用硬件里所并入的計(jì)算機(jī)中或者能夠安裝用于運(yùn)行各種功能的各種程序的通用計(jì)算機(jī)中。[計(jì)算機(jī)的配置示例]圖18是示出用于利用程序?qū)嵤┥鲜鲆幌盗刑幚淼挠?jì)算機(jī)的硬件的配置示例的框圖。中央處理單元(CPU) 201根據(jù)只讀存儲(chǔ)器(ROM) 202或存儲(chǔ)單元208中存儲(chǔ)的程序運(yùn)行各種處理。要由CPU 201運(yùn)行的程序、數(shù)據(jù)等適當(dāng)?shù)卮鎯?chǔ)在隨機(jī)存取存儲(chǔ)器(RAM)203中。CPU 201、ROM 202和RAM 203通過(guò)總線204彼此連接。此外，輸入/輸出接口 205通過(guò)總線204連接至CPU 201。輸入單元(其包括鍵盤、鼠標(biāo)、麥克風(fēng)等)和輸出單元207 (其包括顯示單元、揚(yáng)聲器等)連接至輸入/輸出接口205。CPU 201根據(jù)從輸入單元206輸入的指令運(yùn)行各種處理。然后，CPU 201將處理的結(jié)果輸出至輸出單元207。連接至輸入/輸出接口 205的存儲(chǔ)單元208例如由硬盤構(gòu)成，并且存儲(chǔ)要由CPU201運(yùn)行的程序和各種數(shù)據(jù)。通信單元209與通過(guò)網(wǎng)絡(luò)(如，因特網(wǎng)和/或局域網(wǎng))與之連接的外部裝置通信。程序可以通過(guò)通信單元209獲取并且存儲(chǔ)在存儲(chǔ)單元208中。驅(qū)動(dòng)器210連接至輸入/輸出接口 205。當(dāng)將可移除介質(zhì)211 (如，磁盤、光盤、磁光盤、半導(dǎo)體存儲(chǔ)器等)記載至驅(qū)動(dòng)器210時(shí)，驅(qū)動(dòng)器210驅(qū)動(dòng)可移除介質(zhì)211。隨即，驅(qū)動(dòng)器210獲取可移除介質(zhì)211上記錄的程序、數(shù)據(jù)等。所獲取的程序或數(shù)據(jù)按場(chǎng)合需要被傳輸或存儲(chǔ)至存儲(chǔ)單元208。例如，如圖18中所示，記錄(存儲(chǔ))了要安裝至計(jì)算機(jī)或者通過(guò)計(jì)算機(jī)置入可執(zhí)行條件的程序的程序記錄介質(zhì)可以是由磁盤(軟盤)、光盤(包括CD-ROM (CompactDisc-Read Only Memory,致密盤只讀存儲(chǔ)器)和 DVD (Digital Versatile Disc,數(shù)字多功能盤))、磁光盤(包括MD (Mini-Disc，迷你盤))或者半導(dǎo)體存儲(chǔ)器構(gòu)成的封裝介質(zhì)形式的可移除介質(zhì)211，或者可以由其中暫時(shí)或永久存儲(chǔ)程序的ROM 202、存儲(chǔ)單元208中包括的硬盤等構(gòu)成。按場(chǎng)合需要，利用有線或無(wú)線通信介質(zhì)( 如，局域網(wǎng)、因特網(wǎng)和數(shù)字衛(wèi)星廣播)，通過(guò)作為接口(如，路由器和調(diào)制解調(diào)器)的通信單元209實(shí)施程序記錄介質(zhì)上程序的記錄。應(yīng)當(dāng)注意，在本說(shuō)明書(shū)中，描述上述一系列處理的步驟可以但不一定以上面描述的次序按時(shí)間順序加以處理，而是可以包括并行或單獨(dú)運(yùn)行的處理而不按時(shí)間順序處理。進(jìn)一步，本公開(kāi)不限于上文描述的第一到第三實(shí)施例，可以在不脫離本公開(kāi)的精神和范圍的情況下進(jìn)行各種變更和修正。本公開(kāi)包含與2011年6月6日向日本專利局提交的日本優(yōu)先權(quán)專利申請(qǐng)JP2011-126404中公開(kāi)的主題有關(guān)的主題，其全部?jī)?nèi)部通過(guò)引用的方式合并在此。
權(quán)利要求
1.一種對(duì)由多個(gè)圖像構(gòu)成的圖像信號(hào)進(jìn)行圖像處理的圖像處理裝置，包含 確定單元，其配置為確定出現(xiàn)圖案是否是用于顯示圖像信號(hào)的預(yù)定規(guī)則圖案，在所述出現(xiàn)圖案中，在構(gòu)成所述圖像信號(hào)的多個(gè)圖像中出現(xiàn)表示相同圖像的序列數(shù)目的重復(fù)數(shù)目；以及 圖像處理單元，其配置為根據(jù)確定單元的確定結(jié)果對(duì)所述圖像信號(hào)進(jìn)行圖像處理。
2.如權(quán)利要求I所述的圖像處理裝置，還包括 轉(zhuǎn)換單元，其配置為響應(yīng)于所述出現(xiàn)圖案是與規(guī)則圖案不同的圖案的確定單元的確定結(jié)果，將具有不同圖案的第一圖像信號(hào)轉(zhuǎn)換為具有規(guī)則圖案的第二圖像信號(hào)，其中 所述圖像處理單元對(duì)所述第二圖像信號(hào)進(jìn)行規(guī)則圖案的圖像處理。
3.如權(quán)利要求2所述的圖像處理裝置，還包括 檢測(cè)單元，其配置為檢測(cè)表示在構(gòu)成所述第二圖像信號(hào)的多個(gè)圖像之中依次出現(xiàn)相同圖像的定時(shí)的定時(shí)信號(hào)；以及 調(diào)節(jié)單元，其配置為調(diào)節(jié)所述定時(shí)信號(hào)并且將所述定時(shí)之間的間隔改變?yōu)橄嗟鹊拈g隔，其中 所述圖像處理單元基于調(diào)節(jié)后的定時(shí)信號(hào)進(jìn)行用于從所述第二圖像信號(hào)中產(chǎn)生由所述多個(gè)不同圖像構(gòu)成的第三圖像信號(hào)的圖像處理。
4.如權(quán)利要求3所述的圖像處理裝置，其中 所述調(diào)節(jié)単元調(diào)節(jié)所述定時(shí)信號(hào)，并且將用于再現(xiàn)所述第二圖像信號(hào)的再現(xiàn)時(shí)間內(nèi)產(chǎn)生的定時(shí)之間的間隔改變到相等的間隔。
5.如權(quán)利要求2所述的圖像處理裝置，其中 所述轉(zhuǎn)換単元根據(jù)基于出現(xiàn)圖案的轉(zhuǎn)換規(guī)則，將所述第一圖像信號(hào)轉(zhuǎn)換為所述第二圖像信號(hào)。
6.如權(quán)利要求I所述的圖像處理裝置，其中， 所述圖像處理單元執(zhí)行作為圖像處理的如下處理中的至少ー個(gè)將隔行圖像轉(zhuǎn)換為逐行圖像的IP轉(zhuǎn)換處理、降低圖像中產(chǎn)生的噪聲的降噪處理、將圖像分辨率轉(zhuǎn)換為更高分辨率的分辨率創(chuàng)建處理、以及將新圖像內(nèi)插至所述圖像信號(hào)的內(nèi)插處理。
7.ー種圖像處理裝置的圖像處理方法，所述圖像處理裝置對(duì)由多個(gè)圖像構(gòu)成的圖像信號(hào)進(jìn)行圖像處理，所述方法包含通過(guò)所述圖像處理裝置， 確定出現(xiàn)圖案是否是用于顯示圖像信號(hào)的預(yù)定規(guī)則圖案，在所述出現(xiàn)圖案中，在構(gòu)成所述圖像信號(hào)的多個(gè)圖像中出現(xiàn)表示相同圖像的序列數(shù)目的重復(fù)數(shù)目；以及 根據(jù)確定的確定結(jié)果對(duì)所述圖像信號(hào)進(jìn)行圖像處理。
8.ー種程序，其使得對(duì)由多個(gè)圖像構(gòu)成的圖像信號(hào)進(jìn)行圖像處理的圖像處理裝置的計(jì)算機(jī)用作 確定單元，其配置為確定出現(xiàn)圖案是否是用于顯示圖像信號(hào)的預(yù)定規(guī)則圖案，在所述出現(xiàn)圖案中，在構(gòu)成所述圖像信號(hào)的多個(gè)圖像中出現(xiàn)表示相同圖像的序列數(shù)目的重復(fù)數(shù) 目；以及 圖像處理單元，其配置為根據(jù)確定單元的確定結(jié)果對(duì)所述圖像信號(hào)進(jìn)行圖像處理。
全文摘要
本發(fā)明公開(kāi)了圖像處理裝置、圖像處理方法和程序。對(duì)由多個(gè)圖像構(gòu)成的圖像信號(hào)進(jìn)行圖像處理的圖像處理裝置包含確定單元，其配置為確定其中在構(gòu)成圖像信號(hào)的多個(gè)圖像之中出現(xiàn)表示相同圖像的序列的數(shù)目的重復(fù)數(shù)目的出現(xiàn)圖案是否是用于顯示所述圖像信號(hào)的預(yù)定規(guī)則圖案；以及圖像處理單元，其配置為根據(jù)確定單元的確定結(jié)果對(duì)所述圖像信號(hào)進(jìn)行圖像處理。
文檔編號(hào)H04N7/01GK102821264SQ20121018533
公開(kāi)日2012年12月12日 申請(qǐng)日期2012年6月6日 優(yōu)先權(quán)日2011年6月6日
發(fā)明者濱崎浩樹(shù) 申請(qǐng)人:索尼公司