圖像處理裝置、圖像處理方法及程序的制作方法
【專利摘要】本發(fā)明涉及圖像處理裝置、該裝置中執(zhí)行的圖像處理方法以及使計(jì)算機(jī)執(zhí)行該圖像處理方法的程序。所述圖像處理裝置包括：布置判定單元，其判定用于形成顯示屏的像素的子像素的布置是所述子像素的短邊方向布置在所述顯示屏的水平方向上的第一布置還是所述子像素的長(zhǎng)邊方向布置在所述顯示屏的水平方向上的第二布置；視差確定單元，其確定所述子像素的所判定的布置的視差；和圖像生成單元，其生成一幅或兩幅或多幅其他視點(diǎn)的圖像，所述其他視點(diǎn)不同于由所述圖像信號(hào)表示的圖像的視點(diǎn)。根據(jù)本發(fā)明，能夠減少用戶在用于形成顯示屏像素的子像素的布置狀態(tài)已經(jīng)改變時(shí)可感受到的奇異感。
【專利說(shuō)明】圖像處理裝置、圖像處理方法及程序
【技術(shù)領(lǐng)域】
[0001 ] 本發(fā)明涉及圖像處理裝置、圖像處理方法及程序。
【背景技術(shù)】
[0002]使用戶將顯示屏上所顯示的圖像識(shí)別為三維圖像的方法的示例包括諸如利用用戶的視差使用戶能夠觀看到三維圖像的視差屏障方法(parallax barrier method或disparity barrier method)和透鏡方法。通過(guò)采用這些方法,用戶能夠在沒(méi)有使用諸如偏光眼鏡(polarized glasses)或液晶快門(mén)眼鏡(liquid crystal shutter glasses)等外部設(shè)備的情況下觀看到所呈現(xiàn)出的三維圖像。
[0003]此外，例如，能夠在顯示屏旋轉(zhuǎn)時(shí)與顯示屏上所顯示的圖像一起旋轉(zhuǎn)的裝置近年來(lái)得到推廣。在這樣的裝置中，例如當(dāng)顯示屏旋轉(zhuǎn)90°時(shí)，通過(guò)使顯示屏上所顯示的圖像也旋轉(zhuǎn)90°來(lái)切換顯示屏的長(zhǎng)邊方向與圖像的水平方向一致的狀態(tài)(以下稱為“水平放置狀態(tài)”)和顯示屏的短邊方向與圖像的水平方向一致的狀態(tài)(以下稱為“垂直放置狀態(tài)”)。
[0004]在這樣的情形下，使用戶在兩個(gè)不同的顯示屏狀態(tài)中的任一狀態(tài)下都能識(shí)別出三維圖像的技術(shù)正得到發(fā)展。例如，日本特開(kāi)第JP2011-17788A號(hào)專利申請(qǐng)描述了在視差屏障方法中使用戶在兩個(gè)不同的顯示屏狀態(tài)中的任一狀態(tài)下都能識(shí)別出三維圖像的技術(shù)。
[0005]例如，當(dāng)采用在日本特開(kāi)第JP2011-17788A號(hào)專利申請(qǐng)中所描述的技術(shù)時(shí)，用戶能夠在例如水平放置狀態(tài)和垂直放置狀態(tài)下識(shí)別出三維圖像。這里，水平放置狀態(tài)和垂直放置狀態(tài)分別對(duì)應(yīng)于用于用于形成顯示屏像素的子像素的布置狀態(tài)。
[0006]然而，在日本特開(kāi)第JP2011-17788A號(hào)專利申請(qǐng)中所描述的技術(shù)沒(méi)有對(duì)當(dāng)例如切換水平放置狀態(tài)和垂直放置狀態(tài)時(shí)用戶可感受到的視差變化做任何特別的考慮。因此，當(dāng)采用在日本特開(kāi)第JP2011-17788A號(hào)專利申請(qǐng)中所描述的技術(shù)時(shí)，例如當(dāng)切換水平放置狀態(tài)和垂直放置狀態(tài)時(shí)，用戶可感受到由視差變化造成的奇異感(sense of strangeness)。

【發(fā)明內(nèi)容】

[0007]本發(fā)明實(shí)施例，提出了新穎和改進(jìn)的圖像處理裝置、圖像處理方法及程序，這能夠減少當(dāng)用于形成顯示屏像素的子像素的布置狀態(tài)已經(jīng)改變時(shí)用戶可感受到的奇異感。
[0008]本發(fā)明實(shí)施例提出的圖像處理裝置包括:布置判定單元，所述布置判定單元判定子像素的布置是第一布置還是第二布置，所述子像素用于形成顯示屏的像素，在所述第一布置中所述子像素的短邊方向布置在所述顯示屏的水平方向上，在所述第二布置中所述子像素的長(zhǎng)邊方向布置在所述顯示屏的水平方向上；視差確定單元，所述視差確定單元基于用于表示視差元件相對(duì)于所述顯示屏的參考方向設(shè)置的角度的角度信息以及基于所述子像素的布置的判定結(jié)果來(lái)確定所述子像素的所判定的布置的視差；和圖像生成單元，所述圖像生成單元基于圖像信號(hào)和所確定的視差來(lái)生成一幅或兩幅或多幅其他視點(diǎn)的圖像，所述其他視點(diǎn)不同于由所述圖像信號(hào)表示的圖像的視點(diǎn)。所述視差確定單元將在所述子像素的布置被判定為所述第二布置時(shí)所確定的視差設(shè)定為大于在所述子像素的布置被判定為所述第一布置時(shí)所確定的視差。
[0009]此外，本發(fā)明實(shí)施例提出的圖像處理裝置包括:布置判定單元，所述布置判定單元判定子像素的布置是第一布置還是第二布置，所述子像素用于形成顯示屏的像素，在所述第一布置中所述子像素的短邊方向布置在所述顯示屏的水平方向上，在所述第二布置中所述子像素的長(zhǎng)邊方向布置在所述顯示屏的水平方向上；和視差確定單元，所述視差確定單元基于用于表示視差元件相對(duì)于所述顯示屏的參考方向設(shè)置的角度的角度信息以及基于所述子像素的布置的判定結(jié)果來(lái)確定所述子像素的所判定的布置的視差?；谠谒鲎酉袼氐牟贾帽慌卸樗龅诙贾脮r(shí)所確定的視差的相鄰視點(diǎn)圖像的視差大于基于在所述子像素的布置被判定為所述第一布置時(shí)所確定的視差的相鄰視點(diǎn)圖像的視差。
[0010]此外，本發(fā)明實(shí)施例提出的圖像處理方法包括:判定用于子像素的布置是第一布置還是第二布置，所述子像素用于形成顯示屏的像素，在所述第一布置中所述子像素的短邊方向布置在所述顯示屏的水平方向上，在所述第二布置中所述子像素的長(zhǎng)邊方向布置在所述顯示屏的水平方向上；基于用于表示視差元件相對(duì)于所述顯示屏的參考方向設(shè)置的角度的角度信息以及基于所述子像素的布置的判定結(jié)果來(lái)確定所述子像素的所判定的布置的視差；和基于圖像信號(hào)和所確定的視差來(lái)生成一幅或兩幅或多幅其他視點(diǎn)的圖像，所述其他視點(diǎn)不同于由所述圖像信號(hào)表示的圖像的視點(diǎn)。在確定所述視差時(shí)，將在所述子像素的布置被判定為所述第二布置時(shí)所確定的視差設(shè)定為大于在所述子像素的布置被判定為所述第一布置時(shí)所確定的視差。
[0011]此外，本發(fā)明實(shí)施例提出了使計(jì)算機(jī)執(zhí)行以下步驟的程序:判定子像素的布置是第一布置還是第二布置，所述子像素用于形成顯示屏的像素，在所述第一布置中所述子像素的短邊方向布置在所述顯示屏的水平方向上，在所述第二布置中所述子像素的長(zhǎng)邊方向布置在所述顯示屏的水平方向上；基于用于表示視差元件相對(duì)于所述顯示屏的參考方向設(shè)置的角度的角度信息以及基于所述子像素的布置的判定結(jié)果來(lái)確定所述子像素的所判定的布置的視差；和基于圖像信號(hào)和所確定的視差來(lái)生成一幅或兩幅或多幅其他視點(diǎn)的圖像，所述其他視點(diǎn)不同于由所述圖像信號(hào)表示的圖像的視點(diǎn)。在確定所述視差時(shí)，將在所述子像素的布置被判定為所述第二布置時(shí)所確定的視差設(shè)定為大于在所述子像素的布置被判定為所述第一布置時(shí)所確定的視差。
[0012]根據(jù)上述本發(fā)明實(shí)施例，能夠減少用戶在形成所述顯示屏的所述子像素的布置狀態(tài)已經(jīng)發(fā)生改變時(shí)可感受到的奇異感。
【專利附圖】

【附圖說(shuō)明】
[0013]圖1是表示用于形成顯示屏上像素的子像素的布置的示例以及視差元件的布置的示例的說(shuō)明圖；
[0014]圖2是表示用戶在用于形成顯示屏像素的子像素的布置狀態(tài)已經(jīng)改變時(shí)可感受到由視差變化造成的奇異感的原因的說(shuō)明圖；
[0015]圖3是表示視差元件相對(duì)于顯示屏的參考方向設(shè)置的角度的示例的說(shuō)明圖；
[0016]圖4是表示本發(fā)明實(shí)施例的第一布置和本發(fā)明實(shí)施例的第二布置的說(shuō)明圖；
[0017]圖5是表示由本發(fā)明實(shí)施例的圖像處理裝置執(zhí)行的視差確定處理的另一個(gè)示例的說(shuō)明圖；[0018]圖6是表示由本發(fā)明實(shí)施例的圖像處理裝置執(zhí)行的視點(diǎn)圖像生成處理的示例的說(shuō)明圖；
[0019]圖7是表示在本發(fā)明實(shí)施例的圖像處理方法中執(zhí)行的處理示例的流程圖；
[0020]圖8是表示本發(fā)明實(shí)施例的圖像處理裝置的構(gòu)造示例的框圖；和
[0021]圖9是表示本發(fā)明實(shí)施例的圖像處理裝置的硬件構(gòu)造示例的說(shuō)明圖。
【具體實(shí)施方式】
[0022]在下文中，將參照附圖對(duì)本發(fā)明的優(yōu)選實(shí)施例進(jìn)行詳細(xì)地說(shuō)明。應(yīng)注意，在說(shuō)明書(shū)和附圖中，用同樣的附圖標(biāo)記表示實(shí)質(zhì)上具有同樣功能和結(jié)構(gòu)的結(jié)構(gòu)元件，且省略了對(duì)這些結(jié)構(gòu)元件的重復(fù)說(shuō)明。
[0023]此外，在下文中，將按照如下的順序進(jìn)行說(shuō)明:
[0024]1.本實(shí)施例的圖像處理方法
[0025]2.本實(shí)施例的圖像處理裝置
[0026]3.本實(shí)施例的程序
[0027]1.本實(shí)施例的圖像處理方法
[0028]在說(shuō)明本實(shí)施例的圖像處理裝置的構(gòu)造之前，將首先說(shuō)明本實(shí)施例的圖像處理方法。在下文中，將基于本實(shí)施例的圖像處理裝置執(zhí)行本實(shí)施例的圖像處理方法中所執(zhí)行的處理的示例，對(duì)本實(shí)施例的圖像處理方法進(jìn)行說(shuō)明。
[0029](I)用戶可感受到由視差變化造成的奇異感的原因
[0030]如上所述，例如，當(dāng)切換水平放置狀態(tài)和垂直放置狀態(tài)時(shí)，即，當(dāng)用于形成顯示屏像素的子像素的布置狀態(tài)已經(jīng)發(fā)生改變時(shí)，用戶可感受到由視差變化造成的奇異感。在說(shuō)明本實(shí)施例的圖像處理方法中所執(zhí)行的處理之前，將首先說(shuō)明用戶在用于形成顯示屏像素的子像素已經(jīng)改變的情況下可感受到由視差變化造成的奇異感的原因。
[0031]圖1是表示用于形成顯示屏上像素的子像素的布置的示例以及視差元件的布置的示例的說(shuō)明圖。在圖1中，示出了如下示例:由R(紅色)、G(綠色)和B(藍(lán)色)三種子像素形成顯示屏像素。此外，圖1還示出了在顯示屏上顯示9視點(diǎn)圖像(多視點(diǎn)圖像的示例)的情形。在圖1中，由數(shù)字“I”標(biāo)記的子像素表示其上顯示有第I視點(diǎn)圖像的子像素，且在圖1中用于標(biāo)記各個(gè)子像素的數(shù)字“2”至“9”分別表示其上顯示有第2至第9視點(diǎn)圖像的子像素。
[0032]如圖1所示，在用于形成顯示屏像素的子像素上重復(fù)顯示I視點(diǎn)圖像至9視點(diǎn)圖像。此外，圖1中由字母A標(biāo)記的三個(gè)RGB子像素形成一個(gè)像素(在圖1中，作為像素的示例，其上顯示有第2視點(diǎn)圖像的像素由附圖標(biāo)記A標(biāo)記，且這也適用于其他像素)。
[0033]此外，將用于形成視差屏障的視差元件具有相對(duì)于顯示屏參考方向(例如，水平放置狀態(tài)下的水平方向或垂直放置狀態(tài)下的垂直方向)設(shè)置的角度Θ。
[0034]這里，從防止圖像質(zhì)量劣化的角度看，角度Θ可以例如與由顯示屏的參考方向和用于形成一個(gè)像素的子像素的布置方向形成的角度一致。注意，角度Θ可以例如與由顯示屏的參考方向和用于形成一個(gè)像素的子像素的布置方向形成的角度相同或不同。此外，從在水平放置狀態(tài)和垂直放置狀態(tài)下都產(chǎn)生視差的角度看，例如，角度Θ排除0°和90°。
[0035]在文中，作為示例，將說(shuō)明如下情況:顯示屏的參考方向是水平放置狀態(tài)下的水平方向，并且角度Θ與由顯示屏的參考方向和用于形成一個(gè)像素的子像素的布置方向形成的角度相同。
[0036]圖2是表示用戶在用于形成顯示屏像素的子像素的布置狀態(tài)已經(jīng)改變時(shí)可感受到由視差變化造成的奇異感的原因的說(shuō)明圖。圖2中的字母A表示觀看水平放置狀態(tài)下的顯示屏上所顯示的圖像的用戶。此外，圖2中的字母B表示觀看垂直放置狀態(tài)下的顯示屏上所顯示的圖像的用戶。此外，類似于圖1，圖2中的角度Θ表示視差元件相對(duì)于顯示屏的參考方向設(shè)置的角度。
[0037]此外，圖2示出了如下情形:對(duì)于由圖2中字母A標(biāo)記的用戶而言，下述公式I所表示的用戶的眼間距視點(diǎn)數(shù)(eye gap viewpoint number)為“2”。這里，由下述公式I所表示的眼間距視點(diǎn)數(shù)是對(duì)應(yīng)于用戶所感知的視差的指標(biāo)。為了使觀看顯示屏上所顯示圖像的用戶更加正常地感知到三維圖像，期望的是用戶的眼間距視點(diǎn)數(shù)例如是0.5或更大。然而，即使眼間距視點(diǎn)數(shù)小于0.5，仍能夠使觀看顯示屏上所顯示圖像的用戶正常地感受到三維圖像。
[0038]眼間距視點(diǎn)數(shù)=(用戶的雙眼間距)/ (相鄰視點(diǎn)成像點(diǎn)距離)(公式I)
[0039]如圖2中的字母A和B所表示，例如，當(dāng)切換水平放置狀態(tài)和垂直放置狀態(tài)時(shí)(當(dāng)顯示屏旋轉(zhuǎn)90°時(shí))，眼間距視點(diǎn)數(shù)發(fā)生改變，使得在理想狀態(tài)下(在下文中，稱作“最佳觀看距離”或“設(shè)計(jì)觀看距離”)觀看三維圖像的觀看距離不發(fā)生改變。更具體地，例如，在由圖2中的A標(biāo)記的水平放置狀態(tài)下的眼間距視點(diǎn)數(shù)和由圖2中的B標(biāo)記的垂直放置狀態(tài)下的眼間距視點(diǎn)數(shù)之間保持了下面的公式2所表示的關(guān)系。這里，公式2中的“ngap h”表示水平放置狀態(tài)下的放置狀態(tài)，且公式中的“ngap /’表示垂直放置狀態(tài)下的放置狀態(tài)。
[0040]η卿—h = η卿—v X (1/tan θ )(公式 2)
[0041]例如，如果公式2中的tan Θ為“3”(例如，當(dāng)角度Θ與圖1所示的典型RGB陣列的子像素的布置方向所形成的角度一致時(shí))，那么在圖2所示的示例中，圖2中A的眼間距視點(diǎn)數(shù)為“2”，而圖2中B的眼間距視點(diǎn)數(shù)大約為“0.67”。
[0042]圖3是表示視差元件相對(duì)于顯示屏的參考方向設(shè)置的角度的示例的說(shuō)明圖。圖3示出了視差元件相對(duì)于如下情形下的顯示屏的參考方向設(shè)置的角度，該顯示屏的參考方向是水平放置狀態(tài)下的水平方向。圖3中的A示出了角度Θ不是0°和90°的示例。此外，圖3中的B示出了角度Θ是90°的示例，且圖3中的C示出了角度Θ是0°的示例。
[0043]這里，如圖3B所示，當(dāng)角度Θ是90°時(shí)，在垂直放置狀態(tài)下不會(huì)出現(xiàn)視差。此外，如圖3C所示，當(dāng)角度Θ是0°時(shí)，在水平放置狀態(tài)下不會(huì)出現(xiàn)視差。因此，如上所述，從在水平放置狀態(tài)和垂直放置狀態(tài)下都產(chǎn)生視差的角度看，例如，視差元件相對(duì)于顯示屏的參考方向設(shè)置的角度Θ排除了 0°和90°。
[0044]如上所述，例如，當(dāng)切換水平放置狀態(tài)和垂直放置狀態(tài)時(shí)，即，當(dāng)用于形成顯示屏像素的子像素的布置狀態(tài)已經(jīng)發(fā)生改變時(shí)，由于眼間距視點(diǎn)數(shù)在最佳觀看距離不改變的情況下變化，所以視差發(fā)生變化。因此，例如，當(dāng)切換水平放置狀態(tài)和垂直放置狀態(tài)時(shí)，即，當(dāng)用于形成顯示屏像素的子像素的布置狀態(tài)已經(jīng)發(fā)生改變時(shí)，用戶可感受到由視差變化造成的奇異感。
[0045](2)本實(shí)施例的圖像處理方法中所執(zhí)行的處理的概要
[0046]接著，將說(shuō)明本實(shí)施例的圖像處理方法中所執(zhí)行的處理的概要。[0047]如上述公式2所示，在用于形成顯示屏像素的子像素的布置狀態(tài)已經(jīng)發(fā)生改變時(shí)的眼間距視點(diǎn)數(shù)取決于視差元件相對(duì)于顯示屏的參考方向設(shè)置的角度Θ的正切函數(shù)。相應(yīng)地，例如，如果將視差元件設(shè)置成使得角度Θ為45。，那么基于公式2，水平放置狀態(tài)下的眼間距視點(diǎn)數(shù)與垂直放置狀態(tài)下的眼間距視點(diǎn)數(shù)一致，使得能夠消除視差在用于形成顯示屏像素的子像素的布置狀態(tài)已經(jīng)發(fā)生改變時(shí)的變化。
[0048]然而，例如，如圖1所示，用于形成顯示屏像素的典型子像素具有短邊方向(對(duì)應(yīng)于圖1中的水平方向)和長(zhǎng)邊方向(對(duì)應(yīng)于圖1中的垂直方向)。因此，當(dāng)顯示屏由圖1所示的像素構(gòu)造時(shí)，如果將視差元件設(shè)置成使得角度Θ為45°，那么顯示屏上所顯示的圖像質(zhì)量劣化。
[0049]一種不僅消除視差在用于形成顯示屏像素的子像素的布置狀態(tài)已經(jīng)發(fā)生改變時(shí)出現(xiàn)的變化而且防止顯示屏上所顯示的圖像質(zhì)量劣化的措施是:將視差元件設(shè)置成使得角度Θ為45°，并且用于形成顯示屏像素的子像素中的每一個(gè)采用方形子像素。通過(guò)采用這種措施，例如，即使當(dāng)用于形成顯示屏像素的子像素的布置狀態(tài)已經(jīng)發(fā)生改變時(shí)，眼間距視點(diǎn)數(shù)或設(shè)計(jì)觀看距離沒(méi)有變化，且深度感也能夠保持不變。因此，能夠?qū)崿F(xiàn)更加自然的三維圖像顯示。
[0050]然而，如圖1所示，用于形成顯示屏像素的典型子像素不是方形子像素。因此，生產(chǎn)具有方形子像素的像素結(jié)構(gòu)將會(huì)導(dǎo)致成本增加。
[0051]相應(yīng)地，當(dāng)用于形成顯示屏像素的子像素如圖1所示的不是方形時(shí)，本實(shí)施例的圖像處理裝置通過(guò)例如進(jìn)行下面的處理來(lái)減少用戶在用于形成顯示屏像素的子像素的布置狀態(tài)已經(jīng)發(fā)生改變時(shí)可感受到的奇異感:(I)判定處理、(2)視差確定處理和(3)視點(diǎn)圖像生成處理。
[0052](I)判定處理
[0053]本實(shí)施例的圖像處理裝置判定用于形成顯示屏像素的子像素的布置是第一布置還是第二布置。這里，本實(shí)施例的顯示屏可以是但不限于本實(shí)施例的圖像處理裝置中所包含的顯示單元(在下面說(shuō)明)的顯示屏。例如，本實(shí)施例的顯示屏可以是本實(shí)施例的圖像處理裝置的外部設(shè)備中所包含的顯示面板的顯示屏。
[0054]圖4是表示本發(fā)明實(shí)施例的第一布置和本發(fā)明實(shí)施例的第二布置的說(shuō)明圖。圖4中的字母A表示本實(shí)施例的第一布置，且圖4中的字母B表示本實(shí)施例的第二布置。此外，圖4示出了由R(紅色)、G (綠色)和B (藍(lán)色)三種子像素形成的顯示屏像素的示例。
[0055]如圖4的A所示，本實(shí)施例的第一布置是如下布置:將子像素布置成使得用于形成顯示屏像素的子像素的短邊方向位于顯示屏的水平方向上。此外，如圖4的B所示，本實(shí)施例的第二布置是如下布置:將子像素布置成使得用于形成顯示屏像素的子像素的長(zhǎng)邊方向位于顯示屏的水平方向上。這里，本實(shí)施例的第一布置對(duì)應(yīng)于例如實(shí)現(xiàn)了上述水平放置狀態(tài)的布置，且本實(shí)施例的第二布置對(duì)應(yīng)于例如實(shí)現(xiàn)了上述垂直放置狀態(tài)的布置。
[0056]更具體地，本實(shí)施例的圖像處理裝置基于例如由一個(gè)或兩個(gè)或多個(gè)諸如加速度傳感器、角速度傳感器和地磁傳感器之類的能夠檢測(cè)顯示屏狀態(tài)的傳感器得到的用于表示檢測(cè)結(jié)果的檢測(cè)信號(hào)來(lái)判定子像素的布置是第一布置(對(duì)應(yīng)于水平放置狀態(tài))還是第二布置(對(duì)應(yīng)于垂直放置狀態(tài))。本實(shí)施例的圖像處理裝置基于例如從該裝置中所包含的各個(gè)傳感器中傳送的檢測(cè)信號(hào)或從對(duì)應(yīng)于顯示屏的外部設(shè)備(例如，外部顯示設(shè)備)中傳送的檢測(cè)信號(hào)來(lái)執(zhí)行處理。
[0057]注意，由本實(shí)施例的圖像處理裝置執(zhí)行的判定處理并不限于上述內(nèi)容。例如，本實(shí)施例的圖像處理裝置可以基于從外部設(shè)備中傳送的用于表示顯示屏狀態(tài)(例如，水平放置狀態(tài)或垂直放置狀態(tài))的狀態(tài)信息(數(shù)據(jù))來(lái)判定子像素的布置是第一布置(對(duì)應(yīng)于水平放置狀態(tài))還是第二布置(對(duì)應(yīng)于垂直放置狀態(tài))。
[0058](2)視差確定處理
[0059]基于上述處理(I)的判定結(jié)果和用于表示視差元件相對(duì)于顯示屏的參考方向設(shè)置的角度Θ的角度信息，本實(shí)施例的圖像處理裝置確定由上述處理(I)(判定處理)判定的子像素布置的視差。
[0060]這里，本實(shí)施例的圖像處理裝置通過(guò)例如讀取存儲(chǔ)在存儲(chǔ)單元(在下面說(shuō)明)中的角度信息、讀取來(lái)自所連接的外部記錄介質(zhì)的角度信息或接收從外部設(shè)備(例如，外部顯示設(shè)備、服務(wù)器等)中傳送的角度信息來(lái)獲得角度信息。例如，本實(shí)施例的圖像處理裝置通過(guò)把角度信息傳送請(qǐng)求(其包括使外部設(shè)備傳送角度信息的傳送指令)傳送到外部設(shè)備來(lái)從外部設(shè)備獲取角度信息。
[0061]此外，本實(shí)施例的圖像處理裝置將在布置狀態(tài)被判定為第二布置(對(duì)應(yīng)于垂直放置狀態(tài)的布置)時(shí)所確定的視差設(shè)定為大于在子像素的布置被判定為第一布置(對(duì)應(yīng)于水平放置狀態(tài)的布置)時(shí)所確定的視差。從另一個(gè)角度來(lái)說(shuō)，基于本實(shí)施例的圖像處理裝置按照上述方法做出的確定，將基于在布置狀態(tài)被判定為第二布置(對(duì)應(yīng)于垂直放置狀態(tài)的布置)時(shí)所確定的視差的相鄰視點(diǎn)圖像視差設(shè)定為大于基于在布置狀態(tài)被判定為第一布置(對(duì)應(yīng)于水平放置狀態(tài)的布置)時(shí)所確定的視差的相鄰視點(diǎn)圖像視差。
[0062]如上述公式2所示，在布置對(duì)應(yīng)于第一布置的水平放置狀態(tài)下的眼間距視點(diǎn)數(shù)是在布置對(duì)應(yīng)于第二布置的垂直放置狀態(tài)下的眼間距視點(diǎn)數(shù)的“Ι/tan Θ ”。因此，如上所述，本實(shí)施例的圖像處理裝置通過(guò)將在布置狀態(tài)被判定為第二布置(對(duì)應(yīng)于垂直放置狀態(tài)的布置)時(shí)所確定的視差設(shè)定為大于在布置狀態(tài)被判定為第一布置(對(duì)應(yīng)于水平放置狀態(tài)的布置)時(shí)所確定的視差能夠減少在用于形成顯示屏像素的子像素的布置狀態(tài)已經(jīng)發(fā)生改變時(shí)出現(xiàn)的視差變化。
[0063]因此，如上所述，通過(guò)將在布置狀態(tài)被判定為第二布置(對(duì)應(yīng)于垂直放置狀態(tài)的布置)時(shí)所確定的視差設(shè)定為大于在布置狀態(tài)被判定為第一布置(對(duì)應(yīng)于水平放置狀態(tài)的布置)時(shí)所確定的視差，本實(shí)施例的圖像處理裝置能夠減少用戶在用于形成顯示屏像素的子像素的布置狀態(tài)已經(jīng)發(fā)生改變時(shí)可感受到的奇異感。
[0064](2-1)視差確定處理的第一示例
[0065]更具體地，例如，本實(shí)施例的圖像處理裝置以如下方式確定所判定的子像素布置的視差:如下述公式3所示，“通過(guò)將用于表示在子像素布置被判定為第一布置時(shí)的視差的值與角度信息所表示的角度的正切函數(shù)的絕對(duì)值相乘而獲得的值”與“用于表示在子像素的布置被判定為第二布置時(shí)的視差的值”為相同的數(shù)值。
[0066]Dispv = Disph.| tan θ | (公式 3)
[0067]這里，公式3中的“Dispv”表示在布置狀態(tài)被判定為第二布置狀態(tài)時(shí)所確定的視差的值，且公式3中的“Disph”表示在布置狀態(tài)被判定為第一布置狀態(tài)時(shí)的視差的值。本實(shí)施例的視差值的不例包括相鄰視點(diǎn)圖像之間的相位差。這里，例如，本實(shí)施例的相位差是如下指標(biāo)，該指標(biāo)表示在用于形成三維圖像的左眼圖像(在下文中，有時(shí)被稱作“L圖像”)與用于形成三維圖像的右眼圖像(在下文中，有時(shí)被稱作“R圖像”)之間的視差量為“1.0”時(shí)的相鄰視點(diǎn)圖像之間的視差量。
[0068]注意，本實(shí)施例的視差值并不限于相位差。例如，本實(shí)施例的視差值可以是通過(guò)把相鄰視點(diǎn)圖像之間的視差量轉(zhuǎn)換為像素而獲得的數(shù)值。在文中，將基于本實(shí)施例的視差值是相位差的不例來(lái)說(shuō)明。
[0069]此外，公式3中的“ Θ ”是由角度信息表示的視差元件相對(duì)于顯示屏的參考方向設(shè)置的角度。
[0070]例如，通過(guò)采用基于處理目標(biāo)圖像信號(hào)估計(jì)出的視差值、預(yù)設(shè)視差值和由用戶操作設(shè)定的視差值選擇性地計(jì)算公式3，本實(shí)施例的圖像處理裝置確定由上述處理(I)(判定處理)判定出的子像素布置的視差。這里，基于處理目標(biāo)圖像信號(hào)所估計(jì)的視差值的示例包括用于在處理目標(biāo)圖像信號(hào)所指示的圖像是平面圖像的情況下表示深度估計(jì)結(jié)果的值和用于在處理目標(biāo)圖像信號(hào)所指示的圖像是三維圖像的情況下表示視差估計(jì)結(jié)果的值。
[0071]例如，如果估計(jì)或設(shè)定了用于表示在布置狀態(tài)被判定為第一布置時(shí)的視差的值，且布置狀態(tài)經(jīng)在上述處理(I)(判定處理)中被判定為第一布置(對(duì)應(yīng)于水平放置狀態(tài)的布置)，那么本實(shí)施例的圖像處理裝置將用于表示視差的設(shè)定值確定為用于表示在布置狀態(tài)被判定為第一布置情況下的視差的值。此外，例如，如果估計(jì)或設(shè)定了用于表示在布置狀態(tài)被判定為第二布置時(shí)的視差的值，且布置狀態(tài)在上述處理(I)(判定處理)中被判定為第二布置(對(duì)應(yīng)于垂直放置狀態(tài)的布置)，那么本實(shí)施例的圖像處理裝置將用于表示視差的設(shè)定值確定為用于在布置狀態(tài)被判定為第二布置情況下的視差的值。
[0072]具體地，例如，當(dāng)與用于表示所估計(jì)或設(shè)定的視差相對(duì)應(yīng)的子像素布置和在上述處理(I)(判定處理)中判定出的子像素布置一致時(shí)，本實(shí)施例的圖像處理裝置不進(jìn)行如在公式3所示的計(jì)算。
[0073]此外，例如，如果估計(jì)或設(shè)定了用于表示在布置狀態(tài)被判定為第一布置(對(duì)應(yīng)于水平放置狀態(tài)的布置)時(shí)的視差的值，且布置狀態(tài)經(jīng)在上述處理(I)(判定處理)中被判定為第二布置(對(duì)應(yīng)于垂直放置狀態(tài)的布置)，那么本實(shí)施例的圖像處理裝置通過(guò)基于上述公式3計(jì)算用于表示在布置狀態(tài)被判定為第二布置情況下的視差的值來(lái)確定用于在判定為第二布置情況下的視差的值。另外，例如，如果估計(jì)或設(shè)定了用于表示在布置狀態(tài)被判定為第二布置時(shí)的視差的值，且布置狀態(tài)在上述處理(I)(判定處理)中被判定為第一布置(對(duì)應(yīng)于水平放置狀態(tài)的布置)，那么本實(shí)施例的圖像處理裝置通過(guò)根據(jù)上述公式3計(jì)算用于表示在布置狀態(tài)被判定為第一布置情況下的視差的值來(lái)確定用于表示在布置狀態(tài)被判定為第一布置情況下的視差的值。
[0074]具體地，例如，當(dāng)與用于表示所估計(jì)或設(shè)定的視差的值相對(duì)應(yīng)的子像素布置與在上述處理(I)(判定處理)中被判定的子像素布置不一致時(shí)，本實(shí)施例的圖像處理裝置進(jìn)行公式3所示的計(jì)算。這里，當(dāng)執(zhí)行公式3所示的計(jì)算時(shí)，如果針對(duì)用于表示在布置狀態(tài)被判定為第一布置(對(duì)應(yīng)于水平放置狀態(tài)的布置)時(shí)的視差的值或針對(duì)用于表示在布置狀態(tài)被判定為第二布置(對(duì)應(yīng)于垂直放置狀態(tài)的布置)時(shí)的視差的值來(lái)設(shè)定視差值，那么本實(shí)施例的圖像處理裝置能夠確定其他視差值。
[0075]如上所述，本實(shí)施例的圖像處理裝置通過(guò)采用預(yù)設(shè)視差值和由用戶設(shè)定的視差值選擇性地計(jì)算公式3來(lái)確定在上述處理(I)(判定處理)中所判定的子像素布置的視差。例如，通過(guò)確定所判定的子像素布置的視差使得如上面公式3所示的“通過(guò)將用于表示在子像素布置被判定為第一布置時(shí)的視差的值與角度信息所表示的角度的正切函數(shù)的絕對(duì)值相乘而得到的值”與“用于表示在子像素布置被判定為第二布置時(shí)的視差的值”是相同的值，本實(shí)施例的圖像處理裝置能夠消除在用于形成顯示屏像素的子像素的布置狀態(tài)已經(jīng)發(fā)生改變時(shí)出現(xiàn)的視差變化。
[0076]因此，通過(guò)確定在上述處理(I)(判定處理)中被判定的子像素布置的視差使得滿足上面的公式3，本實(shí)施例的圖像處理裝置能夠消除用戶在用于形成顯示屏像素的子像素的布置狀態(tài)已經(jīng)發(fā)生改變時(shí)可感受到的奇異感。
[0077]注意，由本實(shí)施例的圖像處理裝置執(zhí)行的視差確定處理并不限于采用上面公式3的處理。
[0078](2-2)視差確定處理的第二示例
[0079]圖5是表示由本發(fā)明實(shí)施例的圖像處理裝置執(zhí)行的視差確定處理的另一個(gè)示例的說(shuō)明圖。圖5中的Al表示第一布置狀態(tài)下(對(duì)應(yīng)于水平放置狀態(tài)的布置)的顯示屏上所顯示的圖像的示例。圖5中的A2表示圖5中的Al的視差的示例。圖5中的BI表示第二布置狀態(tài)下(對(duì)應(yīng)于垂直放置狀態(tài)的布置)的顯示屏上所顯示的圖像的第一示例，其中圖5中Al所表示的圖像被顯示在顯示屏上的同時(shí)保持了由圖5中Al所表示的圖像的分辨率。此外，圖5中的B2表示圖5中BI的視差的示例。圖5中的Cl表示第二布置狀態(tài)下(對(duì)應(yīng)于垂直放置狀態(tài)的布置)的顯示屏上所顯示的圖像的第二示例，其中由圖5中Al所表示的圖像已經(jīng)按比例縮放以便顯示在整個(gè)顯示屏上。此外，圖5中的C2表示圖5中Cl的視差的示例。
[0080]例如,如圖5中BI所表示，當(dāng)圖5中Al所表示的圖像被顯示在顯示屏上的同時(shí)保持了圖5中Al所表示的圖像的分辨率時(shí)，本實(shí)施例的圖像處理裝置通過(guò)選擇性地采用公式3來(lái)確定用于表示與在上述處理(I)的處理中判定的布置相對(duì)應(yīng)的視差的值。
[0081]此外，例如，如圖5中Cl所表示，當(dāng)圖5中的Al所表示的圖像按比例縮放以便顯示在整個(gè)顯示屏上時(shí)，本實(shí)施例的圖像處理裝置將用于表示通過(guò)選擇性地采用公式3確定的視差的值與基于圖2的Al所表示的圖像的分辨率的值相乘(在圖5所示的示例中，為“720/1280”)，從而確定出用于表示與在上述處理(I)(判定處理)中所判定的布置相對(duì)應(yīng)的視差的值。例如，如圖5中的Cl所示，當(dāng)由圖5中的Al所示的圖像按比例縮放以便顯示在整個(gè)顯示屏上時(shí)，通過(guò)以上述方式確定用于表示視差的值，本實(shí)施例的圖像處理裝置能夠?yàn)橛脩籼峁┝丝紤]到縮放比例的三維圖像。
[0082](2-3)視差確定處理的第三示例
[0083]此外，當(dāng)圖像經(jīng)放大并且被顯示在顯示屏上時(shí)，雙眼視差角度增加，除非進(jìn)行某種視差調(diào)節(jié)。因此，當(dāng)圖像被放大并且被顯示在顯示屏上時(shí)，本實(shí)施例的圖像處理裝置可以調(diào)節(jié)視差量(由(2-1)中的上述第一示例中執(zhí)行的處理或由上述(2-2)中的第二示例中執(zhí)行的處理確定的視差值，或?qū)?yīng)于此視差值的量)。
[0084]這里，使用本實(shí)施例的圖像處理裝置調(diào)節(jié)視差量的一個(gè)示例是調(diào)節(jié)視差量使得雙眼視差角度不超過(guò)I度(60分)，這是3D協(xié)會(huì)(3D Consortium)出版的指南中設(shè)定的標(biāo)準(zhǔn)。注意，本實(shí)施例的圖像處理裝置在調(diào)節(jié)視差量中使用的標(biāo)準(zhǔn)顯然不限于I度(60分)。[0085](3)視點(diǎn)圖像生成處理
[0086]基于在上述處理(2)(視差確定處理)中確定的視差以及處理目標(biāo)圖像信號(hào)，本實(shí)施例的圖像處理裝置生成一幅或兩幅或多幅其他視點(diǎn)的圖像，所述其他視點(diǎn)不同于由圖像信號(hào)表示的圖像的視點(diǎn)。
[0087]這里，本實(shí)施例的處理目標(biāo)圖像信號(hào)的示例包括表示平面圖像的圖像信號(hào)和表示三維圖像(左眼圖像信號(hào)和右眼圖像信號(hào))的圖像信號(hào)。此外，由本實(shí)施例的處理目標(biāo)圖像信號(hào)表示的圖像可以是例如靜止圖像或由多幀圖像構(gòu)成的移動(dòng)圖像。
[0088]本實(shí)施例的處理目標(biāo)圖像信號(hào)的另一示例包括由本實(shí)施例的圖像處理裝置從存儲(chǔ)單元(在下文中說(shuō)明)或外部記錄介質(zhì)中讀取的對(duì)應(yīng)于圖像數(shù)據(jù)的信號(hào)。注意，本實(shí)施例的處理目標(biāo)圖像信號(hào)可以是由通信單元接收的信號(hào)(在下文中說(shuō)明)或表示由成像單元(在下文中說(shuō)明)捕獲的圖像的信號(hào)。
[0089]圖6是表示由本發(fā)明實(shí)施例的圖像處理裝置執(zhí)行的視點(diǎn)圖像生成處理的示例的說(shuō)明圖。圖6中的字母A表示由處理目標(biāo)圖像信號(hào)表示的圖像的示例，其示出了用于形成三維圖像的左眼圖像和用于形成三維圖像的右眼圖像。此外，圖6中的B表示當(dāng)相位差是“0.125”時(shí)由本實(shí)施例的視點(diǎn)圖像生成處理生成的另一個(gè)視點(diǎn)圖像的示例,該相位差是在上述處理(2)(視差確定處理)中確定的視差值。此外，圖6中的C表不當(dāng)相位差是“0.200”時(shí)由本實(shí)施例的視點(diǎn)圖像生成處理生成的另一個(gè)視點(diǎn)圖像的另一個(gè)示例，該相位差是在上述處理(2)(視差確定處理)中確定的視差值。此外，在圖6中的B和C中，示出了通過(guò)視點(diǎn)圖像生成處理獲得的從第I視點(diǎn)圖像(圖6中的視點(diǎn)I)到第9視點(diǎn)圖像(圖6中的視點(diǎn)9)的9視點(diǎn)圖像的示例。
[0090]本實(shí)施例的圖像處理裝置將由處理目標(biāo)圖像信號(hào)表示的一幅或兩幅圖像設(shè)定為參考圖像，并生成由于參考圖像偏移在上述處理(2)(視差確定處理)中所確定的相位差而形成的圖像，由此生成另一個(gè)視點(diǎn)的圖像。注意，本實(shí)施例的圖像處理裝置能夠通過(guò)執(zhí)行例如基于能夠生成其他視點(diǎn)圖像的任何視點(diǎn)圖像生成處理(例如，多視點(diǎn)圖像生成處理)的處理來(lái)生成另一個(gè)視點(diǎn)圖像。
[0091]這里，例如，當(dāng)布置狀態(tài)在上述處理(I)(判定處理)中被判定為第一布置(對(duì)應(yīng)于水平放置狀態(tài)的布置)時(shí)，本實(shí)施例的圖像處理裝置生成與當(dāng)布置狀態(tài)在上述處理(I)(判定處理)中被判定為第二布置(對(duì)應(yīng)于垂直放置狀態(tài)的布置)時(shí)相同數(shù)量的其他視點(diǎn)圖像。由本實(shí)施例的圖像處理裝置生成的其他視點(diǎn)圖像的數(shù)量是例如預(yù)設(shè)的數(shù)量或由用戶設(shè)定的數(shù)量。
[0092]注意，由本實(shí)施例的圖像處理裝置執(zhí)行的視點(diǎn)圖像生成處理并不限于上述內(nèi)容。例如，當(dāng)布置狀態(tài)在上述處理(I)(判定處理)中被判定為第二布置(對(duì)應(yīng)于垂直放置狀態(tài)的布置)時(shí)，本實(shí)施例的圖像處理裝置生成的其他視點(diǎn)圖像的數(shù)量要小于當(dāng)布置狀態(tài)在上述處理(I)(判定處理)中被判定為第一布置(對(duì)應(yīng)于水平放置狀態(tài)的布置)時(shí)生成的其他視點(diǎn)圖像的數(shù)量。
[0093]一般地，垂直放置狀態(tài)下的顯示屏在水平方向上的長(zhǎng)度比水平放置狀態(tài)下的顯示屏在水平方向上的長(zhǎng)度短。因此，即使當(dāng)布置狀態(tài)在上述處理(I)(判定處理)中被判定為第一布置(對(duì)應(yīng)于水平放置狀態(tài)的布置)時(shí)，本實(shí)施例的圖像處理裝置生成的其他視點(diǎn)圖像比當(dāng)布置狀態(tài)被判定為第二布置(對(duì)應(yīng)于垂直放置狀態(tài)的布置)時(shí)生成的其他視點(diǎn)圖像少，正在觀看顯示屏上所顯示的圖像的用戶將感受到奇異感的可能性也很小。此外，本實(shí)施例的圖像處理裝置在布置狀態(tài)被判定為第一布置時(shí)生成的其他視點(diǎn)圖像的數(shù)量少于在布置狀態(tài)被判定為第二布置時(shí)生成的其他視點(diǎn)圖像的數(shù)量，由此甚至能夠更多地減少視點(diǎn)圖像生成處理中所執(zhí)行的處理的數(shù)量。
[0094]對(duì)于本實(shí)施例的圖像處理方法執(zhí)行的處理，本實(shí)施例的圖像處理裝置執(zhí)行例如上述處理(I)(判定處理)、上述處理(2)(視差確定處理)和上述處理(3)(視點(diǎn)圖像生成處理)。在上述處理(2)(視差確定處理)中，本實(shí)施例的圖像處理裝置確定由上述處理(I)(確定處理)判定的子像素布置的視差，且如果布置狀態(tài)被判定為第二布置(對(duì)應(yīng)于垂直放置狀態(tài)的布置)，那么將視差設(shè)定為大于在布置狀態(tài)被判定為第一布置(對(duì)應(yīng)于水平放置狀態(tài)的布置)時(shí)的視差。此外，在上述處理(3)(視點(diǎn)圖像生成處理)中，根據(jù)處理目標(biāo)圖像信號(hào)和在上述處理(2)(視差確定處理)中確定的視差，本實(shí)施例的圖像處理裝置生成一幅或兩幅或多幅其他視點(diǎn)圖像。
[0095]這里，例如，當(dāng)切換水平放置狀態(tài)和垂直放置狀態(tài)時(shí)，即，當(dāng)用于形成顯示屏像素的子像素的布置狀態(tài)已經(jīng)在第一布置(對(duì)應(yīng)于水平放置狀態(tài)的布置)和第二布置(對(duì)應(yīng)于垂直放置狀態(tài)的布置)之間發(fā)生改變時(shí)，那么盡管設(shè)計(jì)觀看距離沒(méi)有變化，但是眼間距視點(diǎn)數(shù)的確發(fā)生了變化。如上所述，在上述處理(2)(視差確定處理)中，本實(shí)施例的圖像處理裝置確定視差，以對(duì)應(yīng)于眼間距視點(diǎn)數(shù)變化的量，且在上述處理(3)(視點(diǎn)圖像生成處理)中，基于在上述處理(2)(視差確定處理)中確定的視差生成其他視點(diǎn)圖像。因此，本實(shí)施例的圖像處理裝置能夠使用戶在水平放置狀態(tài)下感受到的三維效果和用戶在垂直放置狀態(tài)下感受到的三維效果變得更接近，且進(jìn)一步地也能夠統(tǒng)一這些效果。
[0096]因此，本實(shí)施例的圖像處理裝置能夠減少用戶在用于形成顯示屏像素的子像素的布置狀態(tài)已經(jīng)發(fā)生改變時(shí)可感受到的奇異感。
[0097]此外，在上述處理(I)(判定處理)中，本實(shí)施例的圖像處理裝置判定布置狀態(tài)是第一布置(對(duì)應(yīng)于水平放置狀態(tài)的布置)還是第二布置(對(duì)應(yīng)于垂直放置狀態(tài)的布置)，然后進(jìn)行上述處理(2)(視差確定處理)和上述處理(3)(視點(diǎn)圖像生成處理)。因此，例如，如圖1所示，即使當(dāng)用于形成顯示屏像素的子像素不是方形子像素時(shí)，本實(shí)施例的圖像處理裝置也能夠減少用戶在用于形成顯示屏像素的子像素的布置狀態(tài)已經(jīng)發(fā)生改變時(shí)可感受到的奇異感。
[0098]因此，因?yàn)楸緦?shí)施例的圖像處理裝置的使用不會(huì)由于方形子像素的生產(chǎn)導(dǎo)致成本增加，所以本實(shí)施例的圖像處理裝置能夠抑制顯示屏的像素構(gòu)造相關(guān)的成本增加。
[0099]注意，本實(shí)施例的圖像處理方法中執(zhí)行的處理并不限于上述(I)(確定處理)到
(3)(視點(diǎn)圖像生成處理)的處理。
[0100]例如，本實(shí)施例的圖像處理裝置可以將由處理目標(biāo)圖像信號(hào)表示的圖像和在上述處理(3)(視點(diǎn)圖像生成處理)中生成的圖像顯示在顯示屏上(顯示控制處理)。
[0101]這里，當(dāng)將圖像顯示在外部設(shè)備上的顯示屏上時(shí)，本實(shí)施例的圖像處理裝置通過(guò)經(jīng)由通信單元(也沒(méi)有圖示)例如將由處理目標(biāo)圖像信號(hào)表示的圖像、用于表示所生成圖像的圖像信號(hào)(或圖像數(shù)據(jù))和用于執(zhí)行與外部設(shè)備上的顯示相關(guān)的處理的處理指令傳送到外部設(shè)備而將圖像顯示在顯示屏上。此外，當(dāng)將圖像顯示在顯示單元(在下文中說(shuō)明)的顯示屏上時(shí)，本實(shí)施例的圖像處理裝置通過(guò)例如將由處理目標(biāo)圖像信號(hào)表示的圖像和用于表示生成圖像的圖像信號(hào)(或圖像數(shù)據(jù))傳送到顯示單元(未圖示)而將圖像顯示在顯示屏上。
[0102]注意，本實(shí)施例的顯示控制處理可以例如由能夠與本實(shí)施例的圖像處理裝置通信的外部設(shè)備執(zhí)行。當(dāng)由外部設(shè)備執(zhí)行本實(shí)施例的顯示控制處理時(shí)，本實(shí)施例的圖像處理裝置將例如由處理目標(biāo)圖像信號(hào)表示的圖像和在上述處理(3)(視點(diǎn)圖像生成處理)中生成的圖像傳送到外部設(shè)備。
[0103](3)本實(shí)施例的圖像處理方法中所執(zhí)行的處理的具體示例
[0104]接著，將更加詳細(xì)地說(shuō)明本實(shí)施例的圖像處理方法中執(zhí)行上述處理的示例。下面的說(shuō)明是基于本實(shí)施例的如下圖像處理裝置，該圖像處理裝置執(zhí)行本實(shí)施例的圖像處理方法中所執(zhí)行的處理。
[0105]圖7是表示本發(fā)明實(shí)施例的圖像處理方法中所執(zhí)行的處理的示例的流程圖。這里，在圖7中，例如，步驟S102中執(zhí)行的處理對(duì)應(yīng)于上述處理(I)(判定處理)，且步驟S104至SllO中所執(zhí)行的處理對(duì)應(yīng)于上述處理(2)(視差確定處理)。此外，在圖7中，例如，步驟S112中所執(zhí)行的處理對(duì)應(yīng)于上述處理(3)(視點(diǎn)圖像生成處理)，且步驟S114中所執(zhí)行的處理對(duì)應(yīng)于上述顯示控制處理。
[0106]本實(shí)施例的圖像處理裝置確定是否已經(jīng)檢測(cè)到處理目標(biāo)圖像信號(hào)(S100)。如果在步驟SlOO中確定出還沒(méi)有檢測(cè)到處理目標(biāo)圖像信號(hào)，那么不繼續(xù)處理，直至本實(shí)施例的圖像處理裝置已經(jīng)檢測(cè)到處理目標(biāo)圖像信號(hào)。
[0107]如果在步驟SlOO中確定已經(jīng)檢測(cè)到處理目標(biāo)圖像信號(hào)，那么本實(shí)施例的圖像處理裝置判定子像素布置(S102)?；诶顼@示屏的狀態(tài)(例如，水平放置狀態(tài)或垂直放置狀態(tài))以及能夠檢測(cè)顯示屏狀態(tài)的一個(gè)或兩個(gè)或多個(gè)傳感器獲得的用于表示檢測(cè)結(jié)果的檢測(cè)信號(hào)，本實(shí)施例的圖像處理裝置判定子像素的布置是第一布置(對(duì)應(yīng)于水平放置狀態(tài))還是第二布置(對(duì)應(yīng)于垂直放置狀態(tài))。
[0108]本實(shí)施例的圖像處理裝置確定由處理目標(biāo)圖像信號(hào)表示的圖像是否是平面圖像(S104)。例如，如果處理目標(biāo)圖像信號(hào)不是用于表示三維圖像(左眼圖像信號(hào)，右眼圖像信號(hào))的圖像信號(hào)，那么本實(shí)施例的圖像處理裝置確定出由處理目標(biāo)圖像信號(hào)表示的圖像是平面圖像。
[0109]如果在步驟S104中確定出由處理目標(biāo)圖像信號(hào)表示的圖像是平面圖像，那么本實(shí)施例的圖像處理裝置基于圖像信號(hào)進(jìn)行深度估計(jì)(S106)。這里，通過(guò)例如使用一個(gè)或兩個(gè)或多個(gè)結(jié)果(諸如采用多幅時(shí)序圖像進(jìn)行的運(yùn)動(dòng)檢測(cè)處理的結(jié)果或從圖像中檢測(cè)特定目標(biāo)(例如，人或物)的目標(biāo)檢測(cè)處理的結(jié)果)，本實(shí)施例的圖像處理裝置估計(jì)由處理目標(biāo)圖像信號(hào)表示的圖像的深度。注意，本實(shí)施例的圖像處理裝置也能夠采用任何能夠執(zhí)行深度估計(jì)的技術(shù)來(lái)執(zhí)行步驟S106的處理。
[0110]此外，在步驟S104中，如果確定出由處理目標(biāo)圖像彳目號(hào)表不的圖像不是平面圖像，那么本實(shí)施例的圖像處理裝置基于圖像信號(hào)(右眼圖像和左眼圖像)執(zhí)行視差估計(jì)(S108)。這里,通過(guò)例如基于塊一致(block matching)或諸如此類的技術(shù)對(duì)右眼圖像和左眼圖像進(jìn)行比較并對(duì)右眼圖像與左眼圖像之間的視差的量進(jìn)行計(jì)算，本實(shí)施例的圖像處理裝置由此估計(jì)視差。注意，本實(shí)施例的圖像處理裝置也能夠采用任何能夠執(zhí)行視差估計(jì)的技術(shù)來(lái)執(zhí)行步驟S108的處理。[0111]注意，在圖7中，盡管示出了在步驟S102的處理之后執(zhí)行步驟S104至S108的處理的示例，但是本實(shí)施例的圖像處理裝置能夠獨(dú)立地進(jìn)行步驟S102的處理和步驟S104至S108的處理。因此，本實(shí)施例的圖像處理裝置可以例如在步驟S104至S108的處理之后執(zhí)行步驟S102的處理或同時(shí)執(zhí)行步驟S102的處理與步驟S104至S108的處理。
[0112]當(dāng)完成步驟S102的處理和步驟S104至S108的處理時(shí)，基于在步驟S102中獲得的布置的判定結(jié)果和在步驟S106或步驟S108(S110)中獲得的估計(jì)結(jié)果，本實(shí)施例的圖像處理裝置確定在步驟S102中所判定的子像素布置的視差。本實(shí)施例的圖像處理裝置通過(guò)例如選擇性地計(jì)算公式3來(lái)確定在步驟S102中所判定的子像素布置的視差。
[0113]當(dāng)在步驟SllO中確定出視差時(shí)，基于所確定的視差和處理目標(biāo)圖像信號(hào)，本實(shí)施例的圖像處理裝置生成另一個(gè)視點(diǎn)圖像(S112)。通過(guò)將由處理目標(biāo)圖像信號(hào)表示的一幅或兩幅圖像設(shè)定為參考圖像，且生成由于參考圖像偏移在步驟SllO中所確定的視差值(例如，相位差)而形成的圖像，本實(shí)施例的圖像處理裝置生成另一視點(diǎn)圖像。
[0114]當(dāng)完成步驟S112的處理時(shí)，本實(shí)施例的圖像處理裝置將由處理目標(biāo)圖像信號(hào)表示的圖像和在步驟S112中生成的圖像顯示中顯示屏上(S114)。
[0115]例如，本實(shí)施例的圖像處理裝置執(zhí)行圖7所示的本實(shí)施例的處理。基于7所示的處理，實(shí)現(xiàn)了上述處理(I)(判定處理)至處理(3)(視點(diǎn)圖像生成處理)以及上述顯示控制處理。因此，例如，通過(guò)執(zhí)行圖7所示的處理，本實(shí)施例的圖像處理裝置能夠減少用戶在用于形成顯示屏像素的子像素的布置狀態(tài)已經(jīng)發(fā)生改變時(shí)可感受到的奇異感。此外，通過(guò)執(zhí)行圖7所示的處理，本實(shí)施例的圖像處理裝置能夠抑制與顯示屏構(gòu)造相關(guān)的成本的增加。注意，本實(shí)施例的圖像處理裝置所執(zhí)行的本實(shí)施例的圖像處理方法中的處理顯然并不限于圖7所示的處理。
[0116]2.本實(shí)施例的圖像處理裝置
[0117]接著，將說(shuō)明本實(shí)施例的圖像處理裝置的構(gòu)造的示例，該圖像處理裝置能夠執(zhí)行本實(shí)施例的圖像處理方法中所執(zhí)行的上述處理。
[0118]圖8是表示本發(fā)明實(shí)施例的圖像處理裝置100的構(gòu)造示例的框圖。圖像處理裝置100包括例如通信單元102和控制單元104。
[0119]此外，圖像處理裝置100也可以包括例如ROM(只讀存儲(chǔ)器；未圖示)、RAM(隨機(jī)存取存儲(chǔ)器；未圖示)、存儲(chǔ)單元(未圖示)、用戶可操作的操作單元(未圖示)和能夠在顯示屏等上顯示各種畫(huà)面的顯示單元(未圖示)。圖像處理裝置100使用作為數(shù)據(jù)傳送路徑的總線把這些組成部件彼此連接。
[0120]這里，ROM(未圖示)存儲(chǔ)例如由控制單元104使用的程序和計(jì)算參數(shù)等控制數(shù)據(jù)。RAM(未圖示)臨時(shí)存儲(chǔ)能夠由控制單元104執(zhí)行的程序或諸如此類的數(shù)據(jù)。
[0121]存儲(chǔ)單元(未圖示)是包含在圖像處理裝置100內(nèi)的存儲(chǔ)設(shè)備，例如，存儲(chǔ)單元存儲(chǔ)諸如圖像數(shù)據(jù)和應(yīng)用程序等各種數(shù)據(jù)。這里，存儲(chǔ)單元(未圖示)的示例包括諸如硬盤(pán)等磁記錄介質(zhì)、諸如閃存存儲(chǔ)器等非易失性存儲(chǔ)器等等。此外，存儲(chǔ)單元(未圖示)可以從圖像處理裝置100中拆卸。此外，操作單元(未圖示)的示例包括下述操作輸入設(shè)備。顯示單元(未圖示)的示例可以包括下述顯示設(shè)備。
[0122](圖像處理裝置100的硬件構(gòu)造的示例)
[0123]圖9是表示本發(fā)明實(shí)施例的圖像處理裝置100的硬件構(gòu)造的示例的說(shuō)明圖。例如，圖像處理裝置100包括MPU150、ROMl52, RAM154、記錄介質(zhì)156、輸入/輸出接口 158、操作輸入設(shè)備160、顯示設(shè)備162和通信接口 164。此外，圖像處理裝置100使用作為數(shù)據(jù)傳送路徑的總線166將這些組成部件彼此連接。
[0124]例如，MPU150由MPU(微處理單元)、各種處理電路等構(gòu)造而成。MPU150充當(dāng)用于對(duì)整個(gè)圖像處理裝置100進(jìn)行控制的控制單元104。此外，在圖像處理裝置100中，例如，MPU150充當(dāng)用于上述布置判定單元110、視差確定單元112和圖像生成單元114。
[0125]ROMl52存儲(chǔ)諸如MPU150所使用的程序和計(jì)算參數(shù)等控制數(shù)據(jù)。例如，RAMl54臨時(shí)存儲(chǔ)MPU150所執(zhí)行的程序和諸如此類的數(shù)據(jù)。
[0126]記錄介質(zhì)156充當(dāng)存儲(chǔ)單元,例如,記錄介質(zhì)156存儲(chǔ)諸如圖像數(shù)據(jù)和應(yīng)用程序等各種數(shù)據(jù)。這里，記錄介質(zhì)156的示例包括諸如硬盤(pán)等磁記錄介質(zhì)、諸如閃存存儲(chǔ)器的非易失性存儲(chǔ)器等等。此外，記錄介質(zhì)156可以從圖像處理裝置100中拆卸。
[0127]例如，輸入/輸出接口 158連接操作輸入設(shè)備160和顯示設(shè)備162。操作輸入設(shè)備160充當(dāng)操作單元(未圖示)，且顯示設(shè)備162充當(dāng)顯示單元(未圖示)。這里，輸入/輸出接口 158包括USB (通用串行總線)端子、DVI (數(shù)字視頻接口)端子、HDMI (高清晰多媒體接口)端子和各種處理電路等等。此外，例如，操作輸入設(shè)備160被包含在圖像處理裝置100上，且與圖像處理裝置100中的輸入/輸出接口 158連接。操作輸入設(shè)備160的示例包括按鈕、方向鍵和諸如轉(zhuǎn)點(diǎn)通(jog dial)等旋轉(zhuǎn)式選擇器以及這些組合。此外，例如，顯示設(shè)備162被包含在圖像處理裝置100上，且與圖像處理裝置100中的輸入/輸出接口 158連接。輸入/輸出接口 158的示例包括液晶顯示器(LCD)、有機(jī)電致發(fā)光平板顯示器(有機(jī)電致發(fā)光平板顯示器，也稱作OLED (有機(jī)電致發(fā)光二極管))等等。
[0128]注意，對(duì)于圖像處理裝置100的外部設(shè)備，輸入/輸出接口 158顯然也與諸如操作輸入設(shè)備(例如，鍵盤(pán)、鼠標(biāo)等)或顯示設(shè)備連接。此外，顯示設(shè)備162也可以是能夠執(zhí)行顯示和用戶操作的裝置。
[0129]通信接口 164是被包含在圖像處理裝置100中的通信單元，通信接口 164充當(dāng)通信單元102，其通過(guò)網(wǎng)絡(luò)(或直接地)與顯示設(shè)備或諸如服務(wù)器或成像設(shè)備等外部設(shè)備進(jìn)行無(wú)線/有線通信。這里，通信接口 164的示例包括通信天線和RF (射頻)電路(無(wú)線通信)、IEEE802.15.1端口和傳送/接收電路(無(wú)線通信)、IEEE802.1lb端口和傳送/接收電路(無(wú)線通信)或LAN(局域網(wǎng))端子和傳送/接收電路(無(wú)線通信)等等。此外，本發(fā)明的網(wǎng)絡(luò)的示例包括諸如LAN或WAN(廣域網(wǎng))等有線網(wǎng)絡(luò)、諸如無(wú)線LAN(無(wú)線局域網(wǎng))和無(wú)線WAN(無(wú)線廣域網(wǎng))等經(jīng)由基站的無(wú)線網(wǎng)絡(luò)或采用諸如TCP/IP(傳送控制協(xié)議/互聯(lián)網(wǎng)協(xié)議)通信協(xié)議的因特網(wǎng)等。
[0130]例如，基于圖9所示的構(gòu)造，圖像處理裝置100執(zhí)行本實(shí)施例的圖像處理方法中所執(zhí)行的處理。注意，本實(shí)施例的圖像處理裝置的硬件構(gòu)造并不限于圖9所示的構(gòu)造。例如，圖像處理裝置100可以包括具有捕獲靜止圖像或移動(dòng)圖像的成像單元(未圖示)的功能的成像設(shè)備。例如，如果包含有成像設(shè)備，那么圖像處理裝置100能夠?qū)λ东@的圖像(該圖像是通過(guò)采用成像設(shè)備進(jìn)行成像而生成的)進(jìn)行處理。
[0131]本實(shí)施例的成像設(shè)備的示例包括透鏡/成像元件和信號(hào)處理電路。透鏡/成像元件是由光學(xué)系統(tǒng)透鏡和采用諸如CMOS (互補(bǔ)金屬氧化物半導(dǎo)體)等多個(gè)成像元件的圖像傳感器構(gòu)造而成的。此外，信號(hào)處理電路包括例如AGC(自動(dòng)增益控制)電路和ADC(模數(shù)轉(zhuǎn)換器)電路。信號(hào)處理電路將成像元件生成的模擬信號(hào)轉(zhuǎn)換為數(shù)字信號(hào)(圖像數(shù)據(jù))，且進(jìn)行各種信號(hào)處理。由信號(hào)處理電路進(jìn)行的信號(hào)處理的示例包括白平衡校正、色調(diào)校正、伽馬(gamma)校正處理、YCbCr轉(zhuǎn)換處理和邊緣增強(qiáng)處理等等。
[0132]此外，例如，當(dāng)圖像處理裝置100作為獨(dú)立的構(gòu)造執(zhí)行處理時(shí)，圖像處理裝置100的構(gòu)造可以沒(méi)有通信接口 164。此外，圖像處理裝置100的構(gòu)造也可以沒(méi)有操作輸入設(shè)備160或顯示設(shè)備162。
[0133]將參照?qǐng)D8再次說(shuō)明圖像處理裝置100的構(gòu)造示例。通信單元102是被包含在圖像處理裝置100內(nèi)的通信單元，通信單元102通過(guò)網(wǎng)絡(luò)(或直接地)與顯示設(shè)備或諸如服務(wù)器或成像設(shè)備等外部設(shè)備進(jìn)行無(wú)線/有線通信。此外，例如，控制單元104控制通信單元
102的通信。這里，通信單元102的示例包括通信天線和RF (射頻)電路、LAN終端和傳送/接收電路等等。然而，通信單元102的構(gòu)造并不限于這些示例。例如，通信單元102可以具有支持諸如USB端子和傳送/接收電路等能夠進(jìn)行通信的任何標(biāo)準(zhǔn)的構(gòu)造或具有通過(guò)網(wǎng)絡(luò)能夠與外部設(shè)備通信的任何構(gòu)造。
[0134]例如，控制單元104由MPU構(gòu)造而成，控制單元104具有對(duì)整個(gè)圖像處理裝置100進(jìn)行控制的功能。此外，例如，包括布置判定單元110、視差確定單元112和圖像生成單元114的控制單元104在本實(shí)施例的圖像處理方法中所執(zhí)行的處理中起到主導(dǎo)作用。
[0135]在上述處理(I)(判定處理)中起到主導(dǎo)作用的布置判定單元110判定用于形成顯示屏像素的子像素的布置是第一布置(對(duì)應(yīng)于水平放置狀態(tài)的布置)還是第二布置(對(duì)應(yīng)于垂直放置狀態(tài)的布置)。更具體地，基于例如顯示屏的狀態(tài)(例如，水平放置狀態(tài)或垂直放置狀態(tài))以及用于表示由能夠檢測(cè)顯示屏狀態(tài)的一個(gè)或兩個(gè)或多個(gè)傳感器得到的檢測(cè)結(jié)果的檢測(cè)信號(hào)，布置判定單元110判定子像素布置是第一布置還是第二布置。
[0136]基于角度信息和從布置判定單元110中傳送的對(duì)子像素布置的判定結(jié)果，在上述處理(2)(視差確定處理)中起到主導(dǎo)作用的視差確定單元112確定由布置判定單元110判定的子像素布置的視差。更具體地，例如，通過(guò)執(zhí)行在上述(2-1)至(2-3)中所述的任意處理，視差確定單元112確定由布置判定單元110判定的子像素布置的視差。
[0137]基于處理目標(biāo)圖像信號(hào)和由視差確定單元112確定的視差，在上述處理(3)(視點(diǎn)圖像生成處理)中起到主導(dǎo)作用的圖像生成單元114生成一幅或兩幅或多幅其他視點(diǎn)圖像，該其他視點(diǎn)是不同于由圖像信號(hào)表示的圖像的視點(diǎn)。
[0138]更具體地，通過(guò)將由處理目標(biāo)圖像信號(hào)表示的一幅或兩幅圖像設(shè)定為參考圖像，且生成由于參考圖像偏移視差確定單元112所確定的視差(相位差)而形成的圖像，圖像生成單元114生成另一個(gè)視點(diǎn)的圖像。這里，例如，視差確定單元112可以基于從布置判定單元110傳送的子像素布置的判定結(jié)果來(lái)改變將要生成的其他視點(diǎn)的數(shù)量或可以不考慮子像素布置的判定結(jié)果來(lái)生成預(yù)定數(shù)量的其他視點(diǎn)圖像。此外，可以預(yù)先設(shè)定或由用戶設(shè)定該預(yù)定數(shù)量。
[0139]例如，由于控制單元104包括布置判定單元110、視差確定單元112和圖像生成單元114，所以制單元104在執(zhí)行本實(shí)施例的圖像處理方法中所執(zhí)行的處理(例如，上述(I)(判定處理)至(3)(視點(diǎn)圖像生成處理)的處理)時(shí)起到主導(dǎo)作用。
[0140]注意，本實(shí)施例的控制單元的構(gòu)造并不限于圖8所示的構(gòu)造。例如，本實(shí)施例的控制單元還可以包括執(zhí)行上述顯示控制處理的顯示控制單元(未圖示)。[0141]例如，基于圖8所示的構(gòu)造，圖像處理裝置100執(zhí)行本實(shí)施例的圖像處理方法中所執(zhí)行的處理(例如，上述(I)(判定處理)至(3)(視點(diǎn)圖像生成處理)的處理))。因此，例如，基于圖8所示的構(gòu)造，圖像處理裝置100能夠減少用戶在用于形成顯示屏像素的子像素的布置狀態(tài)已經(jīng)發(fā)生改變時(shí)可感受到的奇異感。此外，基于圖8所示的構(gòu)造，圖像處理裝置100能夠抑制顯示屏結(jié)構(gòu)的相關(guān)成本的增加。
[0142]注意，本實(shí)施例的圖像處理裝置的構(gòu)造并不限于圖8所示的構(gòu)造。
[0143]例如，本實(shí)施例的圖像處理裝置可以單獨(dú)地包括(例如，通過(guò)個(gè)體的處理電路實(shí)現(xiàn))圖8所示的布置判定單元110、視差確定單元112和圖像生成單元114以及未圖示的顯示控制單元。
[0144]此外，例如，本實(shí)施例的圖像處理裝置的構(gòu)造也能夠不包括在執(zhí)行上述處理(3)(視點(diǎn)圖像生成處理)時(shí)起到主導(dǎo)作用的圖像生成單元114的構(gòu)造。即使不包括圖像生成單元114，本實(shí)施例的圖像處理裝置能夠仍能夠通過(guò)與可以執(zhí)行上述處理(3)(視點(diǎn)圖像生成處理)的外部設(shè)備一起執(zhí)行處理，由此進(jìn)行本實(shí)施例的處理(例如，上述處理(I)(判定處理)至處理(3)(視點(diǎn)圖像生成處理))。更具體地，本實(shí)施例的圖像處理裝置執(zhí)行上述處理(I)(判定處理)和上述處理(2)(視差確定處理)，且把用于表示所確定的視差的視差信息(數(shù)據(jù))傳送到外部設(shè)備。然后，外部設(shè)備接收視差信息且執(zhí)行上述處理(3)(視點(diǎn)圖像生成處理)。
[0145]此外，例如，本實(shí)施例的圖像處理裝置能夠包括成像單元(未圖示)。如果不包括成像單元，本實(shí)施例的圖像處理裝置能夠?qū)诔上駟卧?未圖示)的成像而生成的圖像進(jìn)行處理。成像設(shè)備(未圖示)的示例包括上述本實(shí)施例的成像設(shè)備。
[0146]此外，例如，當(dāng)本實(shí)施例的圖像處理裝置作為獨(dú)立的構(gòu)造執(zhí)行處理時(shí)，圖像處理裝置的構(gòu)造可以沒(méi)有通信單元102。
[0147]因此，對(duì)于本實(shí)施例的圖像處理方法中所執(zhí)行的處理，本實(shí)施例的圖像處理裝置執(zhí)行例如上述處理(I)(判定處理)、上述處理(2)(視差確定處理)和上述處理(3)(視點(diǎn)圖像生成處理)。這里，例如，當(dāng)切換水平放置狀態(tài)和垂直放置狀態(tài)時(shí)，即，當(dāng)用于形成顯示屏像素的子像素的布置已經(jīng)在第一布置(對(duì)應(yīng)于水平放置狀態(tài)的布置)和第二布置(對(duì)應(yīng)于垂直放置狀態(tài)的布置)之間改變時(shí)，盡管設(shè)計(jì)觀看距離沒(méi)有變化，但是眼間距視點(diǎn)數(shù)的確發(fā)生變化。如上所述，在上述處理(2)(視差確定處理)中，本實(shí)施例的圖像處理裝置確定視差以對(duì)應(yīng)于眼間距視點(diǎn)數(shù)變化的量，且在上述處理(3)(視點(diǎn)圖像生成處理)中，根據(jù)在上述處理(2)(視差確定處理)中所確定的視差來(lái)生成其他視點(diǎn)圖像。因此，本實(shí)施例的圖像處理裝置能夠?qū)⒂脩粼谒椒胖脿顟B(tài)下感受到的三維效果和用戶在垂直放置狀態(tài)下感受到的三維效果變得更接近，且還能夠統(tǒng)一這些效果。
[0148]因此，本實(shí)施例的圖像處理裝置能夠減少用戶在用于形成顯示屏像素的子像素的布置狀態(tài)已經(jīng)發(fā)生改變時(shí)可感受到的奇異感。
[0149]此外，在上述處理(I)(確定處理)中，本實(shí)施例的圖像處理裝置判定布置狀態(tài)是第一布置(對(duì)應(yīng)于水平放置狀態(tài)的布置)還是第二布置(對(duì)應(yīng)于垂直放置狀態(tài)的布置)，然后執(zhí)行上述處理(2)(視差確定處理)和上述處理(3)(視點(diǎn)圖像生成處理)。因此，例如，如圖1所示，即使當(dāng)用于形成顯示屏像素的子像素不是方形子像素，本實(shí)施例的圖像處理裝置也能夠減少用戶在用于形成顯示屏像素的子像素的布置狀態(tài)已經(jīng)發(fā)生改變時(shí)可感受到的奇異感。
[0150]因此，由于本實(shí)施例的圖像處理裝置的使用不會(huì)由于生產(chǎn)方形子像素而導(dǎo)致成本增加，所以本實(shí)施例的圖像處理裝置能夠抑制顯示屏結(jié)構(gòu)的相關(guān)成本的增加。
[0151]盡管上文將圖像處理裝置作為本發(fā)明實(shí)施例進(jìn)行了說(shuō)明，但是本實(shí)施例并不限于這個(gè)示例。本實(shí)施例也能夠用于能夠處理圖像的各種設(shè)備，例如平板式設(shè)備、諸如移動(dòng)電話或智能手機(jī)等通信設(shè)備、視頻/音頻播放設(shè)備(或視頻/音頻記錄和播放設(shè)備)、游戲設(shè)備、諸如PC (個(gè)人計(jì)算機(jī))等計(jì)算機(jī)和諸如數(shù)碼相機(jī)或數(shù)碼攝像機(jī)等成像設(shè)備等等。此外，本實(shí)施例也能夠應(yīng)用在處理能夠包含在這樣設(shè)備中的IC(集成電路)。
[0152]3.本實(shí)施例的程序
[0153]通過(guò)在計(jì)算機(jī)上執(zhí)行程序(例如，能夠執(zhí)行中本實(shí)施例的圖像處理方法中執(zhí)行的處理的程序，例如“上述處理(I)(判定處理)至處理(3)(視點(diǎn)圖像生成處理)”、“上述處理
(I)(判定處理)至處理(3)(視點(diǎn)圖像生成處理)和上述顯示控制處理”等)使計(jì)算機(jī)起到本實(shí)施例的圖像處理裝置的作用，由此能夠減少用戶在用于形成顯示屏像素的子像素的布置狀態(tài)已經(jīng)發(fā)生改變時(shí)可感受到的奇異感。此外，通過(guò)在計(jì)算機(jī)上執(zhí)行這樣的程序使計(jì)算機(jī)起到本實(shí)施例的圖像處理裝置的作用，能夠抑制顯示屏的像素結(jié)構(gòu)的相關(guān)成本增加。
[0154]本領(lǐng)域技術(shù)人員應(yīng)當(dāng)理解，依據(jù)設(shè)計(jì)要求和其他因素，可以在本發(fā)明隨附的權(quán)利要求或其等同物的范圍內(nèi)進(jìn)行各種修改、組合、次組合以及改變。
[0155]例如，盡管上面說(shuō)明了使計(jì)算機(jī)起到本實(shí)施例的圖像處理裝置的作用的程序(計(jì)算機(jī)程序)，但是本實(shí)施例還能夠進(jìn)一步提供用于存儲(chǔ)這程序的記錄介質(zhì)。
[0156]上述構(gòu)造示出了本實(shí)施例的一個(gè)示例，且自然歸入本發(fā)明實(shí)施例的技術(shù)范圍。
[0157]此外，本技術(shù)也可以由如下的內(nèi)容構(gòu)造:
[0158](I) 一種圖像處理裝置，其包括:
[0159]布置判定單元，所述布置判定單元判定用于形成顯示屏的像素的子像素的布置是第一布置還是第二布置，在所述第一布置中所述子像素的短邊方向布置在所述顯示屏的水平方向上，在所述第二布置中所述子像素的長(zhǎng)邊方向布置在所述顯示屏的水平方向上；
[0160]視差確定單元，所述視差確定單元基于用于表示視差元件相對(duì)于所述顯示屏的參考方向設(shè)置的角度的角度信息以及基于所述子像素的布置的判定結(jié)果來(lái)確定所述子像素的所判定的布置的視差；和
[0161]圖像生成單元，所述圖像生成單元基于圖像信號(hào)和所確定的視差來(lái)生成一幅或兩幅或多幅其他視點(diǎn)的圖像，所述其他視點(diǎn)不同于由所述圖像信號(hào)表示的圖像的視點(diǎn)，
[0162]其中，所述視差確定單元將在所述子像素的布置被判定為所述第二布置時(shí)所確定的視差設(shè)定為大于在所述子像素的布置被判定為所述第一布置時(shí)所確定的視差。
[0163](2)根據(jù)項(xiàng)I所述的圖像處理裝置，其中，所述視差確定單元確定所述子像素的所判定的布置的所述視差，使得通過(guò)將用于表示在所述子像素的布置被判定為所述第一布置時(shí)的所述視差的值乘以由所述角度信息表示的角度的正切函數(shù)的絕對(duì)值而得到的值與用于表示在所述子像素的布置被判定為所述第二布置時(shí)的所述視差的值是相同值。
[0164](3)根據(jù)項(xiàng)I所述的圖像處理裝置，其中，所述視差確定單元確定所述子像素的所判定的布置的所述視差，使得滿足下面的公式:
[0165]Dispv = Disph.tan Θ[0166]其中，0匕隊(duì)表示在所述子像素的布置被判定為所述第二布置時(shí)的所述視差，Disph表示在所述子像素的布置被判定為所述第一布置時(shí)的所述視差，且Θ表示所述視差元件的所述角度。
[0167](4)根據(jù)項(xiàng)1-3中任一項(xiàng)所述的圖像處理裝置，其中，所述圖像生成單元在所述子像素的布置被判定為所述第一布置時(shí)生成的其他視點(diǎn)的圖像的數(shù)量與在所述子像素的布置被判定為所述第二布置時(shí)生成的其他視點(diǎn)的圖像的數(shù)量相同。
[0168](5)根據(jù)項(xiàng)1-3中任一項(xiàng)所述的圖像處理裝置，其中，所述圖像生成單元在所述子像素的布置被判定為所述第二布置時(shí)生成的其他視點(diǎn)的圖像的數(shù)量比在所述子像素的布置被判定為所述第一布置時(shí)生成的其他視點(diǎn)的圖像的數(shù)量少。
[0169](6) 一種圖像處理裝置，其包括:
[0170]布置判定單元，所述布置判定單元判定用于形成顯示屏的像素的子像素的布置是第一布置還是第二布置，在所述第一布置中所述子像素的短邊方向布置在所述顯示屏的水平方向上，在所述第二布置中所述子像素的長(zhǎng)邊方向布置在所述顯示屏的水平方向上；和
[0171]視差確定單元，所述視差確定單元基于用于表示視差元件相對(duì)于所述顯示屏的參考方向設(shè)置的角度的角度信息以及基于所述子像素的布置的判定結(jié)果來(lái)確定所述子像素的所判定的布置的視差，
[0172]其中，基于在所述子像素的布置被判定為所述第二布置時(shí)所確定的視差的相鄰視點(diǎn)圖像的視差大于基于在所述子像素的布置被判定為所述第一布置時(shí)所確定的視差的相鄰視點(diǎn)圖像的視差。
[0173](7) 一種圖像處理方法，其包括:
[0174]判定用于形成顯示屏的像素的子像素的布置是第一布置還是第二布置，在所述第一布置中所述子像素的短邊方向布置在所述顯示屏的水平方向上，在所述第二布置中所述子像素的長(zhǎng)邊方向布置在所述顯示屏的水平方向上；
[0175]基于用于表示視差元件相對(duì)于所述顯示屏的參考方向設(shè)置的角度的角度信息以及基于所述子像素的布置的判定結(jié)果來(lái)確定所述子像素的所判定的布置的視差；和
[0176]基于圖像信號(hào)和所確定的視差來(lái)生成一幅或兩幅或多幅其他視點(diǎn)的圖像，所述其他視點(diǎn)不同于由所述圖像信號(hào)表示的圖像的視點(diǎn)，
[0177]其中，在確定所述視差時(shí)，將在所述子像素的布置被判定為所述第二布置時(shí)所確定的視差設(shè)定為大于在所述子像素的布置被判定為所述第一布置時(shí)所確定的視差。
[0178](8) 一種使計(jì)算機(jī)執(zhí)行以下步驟的程序:
[0179]判定用于形成顯示屏的像素的子像素的布置是第一布置還是第二布置，在所述第一布置中所述子像素的短邊方向布置在所述顯示屏的水平方向上，在所述第二布置中所述子像素的長(zhǎng)邊方向布置在所述顯示屏的水平方向上；
[0180]基于用于表示視差元件相對(duì)于所述顯示屏的參考方向設(shè)置的角度的角度信息以及基于所述子像素的布置的判定結(jié)果來(lái)確定所述子像素的所判定的布置的視差；和
[0181]基于圖像信號(hào)和所確定的視差來(lái)生成一幅或兩幅或多幅其他視點(diǎn)的圖像，所述其他視點(diǎn)不同于由所述圖像信號(hào)表示的圖像的視點(diǎn)，
[0182]其中，在確定所述視差時(shí)，將在所述子像素的布置被判定為所述第二布置時(shí)所確定的視差設(shè)定為大于在所述子像素的布置被判定為所述第一布置時(shí)所確定的視差。[0183]本申請(qǐng)包含與2012年7月31日向日本專利局提交的日本優(yōu)先權(quán)專利申請(qǐng)JP2012-169563所公開(kāi)的內(nèi)容相關(guān)的主題，因此將該日本優(yōu)先權(quán)申請(qǐng)的全部?jī)?nèi)容以引用的方式并入本文。
【權(quán)利要求】
1.一種圖像處理裝置，其包括: 布置判定單元，所述布置判定單元判定子像素的布置是第一布置還是第二布置，所述子像素用于形成顯示屏的像素，在所述第一布置中所述子像素的短邊方向布置在所述顯示屏的水平方向上，在所述第二布置中所述子像素的長(zhǎng)邊方向布置在所述顯示屏的水平方向上； 視差確定單元，所述視差確定單元基于用于表示視差元件相對(duì)于所述顯示屏的參考方向設(shè)置的角度的角度信息以及基于所述子像素的布置的判定結(jié)果來(lái)確定所述子像素的所判定的布置的視差；和 圖像生成單元，所述圖像生成單元基于圖像信號(hào)和所確定的視差來(lái)生成一幅或兩幅或多幅其他視點(diǎn)的圖像，所述其他視點(diǎn)不同于由所述圖像信號(hào)表示的圖像的視點(diǎn)， 其中，所述視差確定單元將在所述子像素的布置被判定為所述第二布置時(shí)所確定的視差設(shè)定為大于在所述子像素的布置被判定為所述第一布置時(shí)所確定的視差。
2.根據(jù)權(quán)利要求1所述的圖像處理裝置，其中，所述視差確定單元確定所述子像素的所判定的布置的所述視差，使得通過(guò)將用于表示在所述子像素的布置被判定為所述第一布置時(shí)的所述視差的值乘以由所述角度信息表示的角度的正切函數(shù)的絕對(duì)值而得到的值與用于表示在所述子像素的布置被判定為所述第二布置時(shí)的所述視差的值是相同值。
3.根據(jù)權(quán)利要求1所述的圖像處理裝置，其中，所述視差確定單元確定所述子像素的所判定的布置的所述視差，使得滿足下面的公式:
Dispv = Disph.I tan Θ 其中，Dispv表示在所述子像素的布置被判定為所述第二布置時(shí)的所述視差，Disph表示在所述子像素的布置被判定為所述第一布置時(shí)的所述視差，且Θ表示所述視差元件的所述角度。
4.根據(jù)權(quán)利要求1-3中任一項(xiàng)所述的圖像處理裝置，其中，所述圖像生成單元在所述子像素的布置被判定為所述第一布置時(shí)生成的其他視點(diǎn)的圖像的數(shù)量與在所述子像素的布置被判定為所述第二布置時(shí)生成的其他視點(diǎn)的圖像的數(shù)量相同。
5.根據(jù)權(quán)利要求1-3中任一項(xiàng)所述的圖像處理裝置，其中，所述圖像生成單元在所述子像素的布置被判定為所述第二布置時(shí)生成的其他視點(diǎn)的圖像的數(shù)量比在所述子像素的布置被判定為所述第一布置時(shí)生成的其他視點(diǎn)的圖像的數(shù)量少。
6.根據(jù)權(quán)利要求1或2所述的圖像處理裝置，其中，所述視差確定單元進(jìn)一步調(diào)節(jié)所確定的視差，使得雙眼視差角度不超過(guò)I度。
7.一種圖像處理裝置，其包括: 布置判定單元，所述布置判定單元判定子像素的布置是第一布置還是第二布置，所述子像素用于形成顯示屏的像素，在所述第一布置中所述子像素的短邊方向布置在所述顯示屏的水平方向上，在所述第二布置中所述子像素的長(zhǎng)邊方向布置在所述顯示屏的水平方向上；和 視差確定單元，所述視差確定單元基于用于表示視差元件相對(duì)于所述顯示屏的參考方向設(shè)置的角度的角度信息以及基于所述子像素的布置的判定結(jié)果來(lái)確定所述子像素的所判定的布置的視差， 其中，基于在所述子像素的布置被判定為所述第二布置時(shí)所確定的視差的相鄰視點(diǎn)圖像的視差大于基于在所述子像素的布置被判定為所述第一布置時(shí)所確定的視差的相鄰視點(diǎn)圖像的視差。
8.一種圖像處理方法，其包括: 判定用于子像素的布置是第一布置還是第二布置，所述子像素用于形成顯示屏的像素，在所述第一布置中所述子像素的短邊方向布置在所述顯示屏的水平方向上，在所述第二布置中所述子像素的長(zhǎng)邊方向布置在所述顯示屏的水平方向上； 基于用于表示視差元件相對(duì)于所述顯示屏的參考方向設(shè)置的角度的角度信息以及基于所述子像素的布置的判定結(jié)果來(lái)確定所述子像素的所判定的布置的視差；和 基于圖像信號(hào)和所確定的視差來(lái)生成一幅或兩幅或多幅其他視點(diǎn)的圖像，所述其他視點(diǎn)不同于由所述圖像信號(hào)表示的圖像的視點(diǎn)， 其中，在確定所述視差時(shí)，將在所述子像素的布置被判定為所述第二布置時(shí)所確定的視差設(shè)定為大于在所述子像素的布置被判定為所述第一布置時(shí)所確定的視差。
9.一種使計(jì)算機(jī)執(zhí)行以下步驟的程序: 判定子像素的布置是第一布置還是第二布置，所述子像素用于形成顯示屏的像素，在所述第一布置中所述子像素的短邊方向布置在所述顯示屏的水平方向上，在所述第二布置中所述子像素的長(zhǎng)邊方向布置在所述顯示屏的水平方向上； 基于用于表示視差元件相對(duì)于所述顯示屏的參考方向設(shè)置的角度的角度信息以及基于所述子像素的布置的判定結(jié)果來(lái)確定所述子像素的所判定的布置的視差；和 基于圖像信號(hào)和所確定的視差來(lái)生成一幅或兩幅或多幅其他視點(diǎn)的圖像，所述其他視點(diǎn)不同于由所述圖像信號(hào)表示的圖像的視點(diǎn)， 其中，在確定所述視差時(shí)，將在所述子像素的布置被判定為所述第二布置時(shí)所確定的視差設(shè)定為大于在所述子像素的布置被判定為所述第一布置時(shí)所確定的視差。
【文檔編號(hào)】G02B27/22GK103581644SQ201310311244
【公開(kāi)日】2014年2月12日 申請(qǐng)日期:2013年7月23日 優(yōu)先權(quán)日:2012年7月31日
【發(fā)明者】石川慶太, 大橋功 申請(qǐng)人:索尼公司