專利名稱：臉圖像制作裝置和方法
技術(shù)領(lǐng)域：
本發(fā)明涉及基于輸入的臉圖像制作根據(jù)該臉圖像的新的臉圖像的技術(shù)，尤其是有關(guān)用于使構(gòu)成制作的臉圖像的各臉部件的配置依據(jù)輸入的臉圖像中的各臉部件的配置的技術(shù)。
背景技術(shù)：
以前，在臉圖像制作裝置中，取得對(duì)象者的臉的圖像數(shù)據(jù)，基于取得的圖像數(shù)據(jù)所示出的臉的特征，從臉圖像制作裝置中預(yù)先記錄著的示出臉的各部位的圖例的臉部件中，選擇臉部件制作臉圖像。
專利文獻(xiàn)1中公開了一種基于從對(duì)象者取得的臉圖像，制作改變了表情和畫風(fēng)格的臉圖像的技術(shù)。
這樣，由于能夠從1個(gè)輸入圖像制作圖像和表情不同的多個(gè)臉圖像，因此，用戶能夠享受制作富有變化的各種各樣的臉圖像。
但是，在專利文獻(xiàn)1中公開的技術(shù)中有下述問題，在臉圖像制作裝置中，在每次重新附加表情和畫風(fēng)格不同的臉圖像的臉部件時(shí)，加在該臉部件的設(shè)定中，為了在該臉圖像中使其反映輸入圖像中示出的臉部件的配置，都需要設(shè)定復(fù)雜的臉部件配置規(guī)則，設(shè)定操作很麻煩。
因此，本發(fā)明的目的在于提供一種不設(shè)定復(fù)雜的臉部件配置規(guī)則，能進(jìn)行基于輸入的臉圖像的臉部件的配置制作臉圖像的臉圖像制作裝置和方法。
專利文獻(xiàn)1日本特開平10-240919號(hào)公報(bào)發(fā)明內(nèi)容為了解決上述已有的課題，本發(fā)明是一種臉圖像制作裝置，制作將第一臉圖像制作用的臉部件配置在了依據(jù)第二臉圖像中的各臉部件的位置的位置上的第一臉圖像；
具有接收部，接收第二臉圖像的輸入；位置算出部，從輸入的第二臉圖像提取各臉部件，算出第二臉圖像中的各臉部件的位置；參照位置存儲(chǔ)部，存儲(chǔ)著參照臉圖像中的各臉部件的參照位置；默認(rèn)位置存儲(chǔ)部，存儲(chǔ)第一臉圖像制作用的各臉部件的第一臉圖像中的默認(rèn)位置；配置決定部，基于算出的第二臉圖像中的各臉部件的位置與參照臉圖像中的各臉部件的位置的比較結(jié)果和關(guān)于特定的臉部件的組的，默認(rèn)位置間的距離與參照位置間的距離的比較結(jié)果，決定配置第一臉圖像制作用的各臉部件的位置。
并且，本發(fā)明是一種臉圖像制作方法，在制作將第一臉圖像制作用的臉部件配置在了依據(jù)第二臉圖像中的各臉部件的位置的位置上的第一臉圖像的臉圖像制作裝置中使用，上述臉圖像制作裝置具有存儲(chǔ)著參照臉圖像中的各臉部件的參照位置的參照位置存儲(chǔ)部，存儲(chǔ)第一臉圖像制作用的各臉部件和該第一臉圖像中的默認(rèn)位置的默認(rèn)位置存儲(chǔ)部；上述臉圖像制作方法包括接收第二臉圖像的輸入的接收步驟，從輸入的第二臉圖像提取各臉部件，算出第二臉圖像中的各臉部件的位置的位置算出步驟，基于算出的第二臉圖像中的各臉部件的位置與參照臉圖像中的各臉部件的位置的比較結(jié)果，和關(guān)于特定的臉部件的組的，默認(rèn)位置間的距離與參照位置間的距離的比較結(jié)果，決定配置第一臉圖像制作用的各臉部件的位置的配置決定步驟。
并且，本發(fā)明的一種程序，使制作將第一臉圖像制作用的臉部件配置在了依據(jù)第二臉圖像中的各臉部件的位置的位置上的第一臉圖像的臉圖像制作裝置執(zhí)行臉圖像制作處理；上述臉圖像制作裝置具有存儲(chǔ)著參照臉圖像中的各臉部件的參照位置的參照位置存儲(chǔ)部，存儲(chǔ)第一臉圖像制作用的各臉部件和該第一臉圖像中的默認(rèn)位置的默認(rèn)位置存儲(chǔ)部；上述臉圖像制作處理也可包括接收第二臉圖像的輸入的接收步驟；從輸入的第二臉圖像提取各臉部件，算出第二臉圖像中的各臉部件的位置的位置算出步驟；基于算出的第二臉圖像中的各臉部件的位置與參照臉圖像中的各臉部件的位置的比較結(jié)果和關(guān)于特定的臉部件的組的，默認(rèn)位置間的距離與參照位置間的距離的比較結(jié)果，決定配置第一臉圖像制作用的各臉部件的位置的配置決定步驟。
再有，本發(fā)明的一種計(jì)算機(jī)可讀取的記錄媒體，其記錄了這樣的程序，使制作將第一臉圖像制作用的臉部件配置在了依據(jù)第二臉圖像中的各臉部件的位置的位置上的第一臉圖像的臉圖像制作裝置，執(zhí)行臉圖像制作處理；上述臉圖像制作裝置具有存儲(chǔ)著參照臉圖像中的各臉部件的參照位置的參照位置存儲(chǔ)部，存儲(chǔ)第一臉圖像制作用的各臉部件和該第一臉圖像中的默認(rèn)位置的默認(rèn)位置存儲(chǔ)部；上述臉圖像制作處理包括接收第二臉圖像的輸入的接收步驟；從輸入的第二臉圖像提取各臉部件，算出第二臉圖像中的各臉部件的位置的位置算出步驟，基于算出的第二臉圖像中的各臉部件的位置與參照臉圖像中的各臉部件的位置的比較結(jié)果，和關(guān)于特定的臉部件的組的，默認(rèn)位置間的距離與參照位置間的距離的比較結(jié)果，決定配置第一臉圖像制作用的各臉部件的位置的配置決定步驟。
通過具有上述結(jié)構(gòu)，由于僅預(yù)先設(shè)定第一臉圖像制作用的各臉部件的默認(rèn)位置，就能夠制作反映了輸入的第二臉圖像的配置的第一臉圖像，因此，不設(shè)定復(fù)雜的臉部件配置規(guī)則，而能夠容易地制作基于輸入的臉圖像中的臉部件的配置的臉圖像。
在此，上述配置決定部具有變更參數(shù)決定部，決定關(guān)于各臉部件算出的第二臉圖像中的各臉部件的位置和關(guān)于該臉部件的參照位置之間的水平方向的距離，作為水平方向的變更參數(shù)，決定關(guān)于各臉部件中的某一個(gè)和除此以外的各臉部件的組的上述位置間的垂直方向的距離的，對(duì)于關(guān)于該組的參照位置間的垂直方向的距離的比，作為垂直方向的變更參數(shù)；默認(rèn)位置變更部，該部分決定將各臉部件的默認(rèn)位置分別向水平方向和垂直方向移動(dòng)了如下距離，作為配置第一臉圖像制作用的各臉部件的位置，所述向水平方向移動(dòng)的距離相當(dāng)于在關(guān)于該臉部件決定的水平方向的參數(shù)上，乘以對(duì)基于各臉部件的默認(rèn)位置特定的外接矩形的寬度的，基于各臉部件的參照位置特定的外接矩形的寬度的比的值，向垂直方向移動(dòng)后，使得上述各組中的默認(rèn)位置間的垂直方向的距離被變更為相當(dāng)于在乘以了關(guān)于該組決定的垂直方向的變更參數(shù)的值的距離。
這樣，使輸入的第二臉圖像中的各臉部件的位置關(guān)系能夠利用運(yùn)算反映在第一臉圖像中的各臉部件的位置關(guān)系上，因此，能夠制作更正確地反映了輸入的臉圖像中的各臉部件的位置關(guān)系的臉圖像。
在此，上述默認(rèn)位置存儲(chǔ)部存儲(chǔ)多個(gè)表現(xiàn)形態(tài)的第一圖像制作用的各臉部件和其默認(rèn)位置，上述接收部多次接收表情不同的對(duì)象者的臉圖像的輸入，上述圖像制作裝置具有從輸入的上述各臉圖像提取構(gòu)成各臉圖像的臉部件的物理特征量的提取部；將收到的臉圖像內(nèi)的一個(gè)作為第二臉圖像，基于構(gòu)成第二臉圖像的臉部件的物理特征量和除了第二臉圖像以外的收到的構(gòu)成各臉圖像的臉部件的物理特征量的比較結(jié)果，特定第一臉圖像制作用的臉部件的表現(xiàn)形態(tài)的表現(xiàn)形態(tài)特定部，上述配置決定部對(duì)特定后的表現(xiàn)形態(tài)的第一圖像制作用的各臉部件，決定進(jìn)行配置的位置。
這樣，由于在輸入的臉圖像中，通過使表情變化，自動(dòng)地制作與表情相應(yīng)的表現(xiàn)形態(tài)的臉圖像，因此，用戶能夠通過拍攝輸入改變了表情的臉圖像，來享受制作各種各樣的表現(xiàn)形態(tài)的臉圖像。
在此，上述臉圖像制作裝置由臉圖像輸入裝置和臉圖像繪畫裝置構(gòu)成。上述臉圖像輸入裝置具有上述接收部；上述位置算出部；上述參照位置存儲(chǔ)部；上述變更參數(shù)決定部；向上述臉圖像繪畫裝置發(fā)送決定后的水平方向和垂直方向的變更參數(shù)的發(fā)送部；接收從上述臉圖像繪畫裝置發(fā)送的第一臉圖像的接收部。上述臉圖像繪畫裝置具有接收被決定了的水平方向和垂直方向的變更參數(shù)的接收部；上述默認(rèn)位置存儲(chǔ)部；上述默認(rèn)位置變更部；制作在由上述默認(rèn)位置變更部決定了的位置上配置了第一臉圖像制作用的各臉部件的第一臉圖像的臉圖像制作裝置；將制成的第一臉圖像發(fā)送給上述臉圖像輸入裝置的發(fā)送部。
這樣，由于能夠讓臉圖像繪畫裝置進(jìn)行要很多存儲(chǔ)容量的臉圖像繪畫處理，因此，通過使存儲(chǔ)容量有限的便攜式機(jī)器具有臉圖像輸入裝置的功能，即便在便攜式機(jī)器中也能夠制作各種各樣表現(xiàn)形態(tài)的臉圖像。


圖1是示出臉圖像制作裝置100的結(jié)構(gòu)的功能方框圖。
圖2是示出關(guān)于各臉部件提取的物理特征量的圖表。
圖3是用影像表示了關(guān)于從臉圖像數(shù)據(jù)提取的各臉部件的物理特征量的圖。
圖4是示出配置變更量與中心坐標(biāo)的關(guān)系的圖。
圖5示出繪畫規(guī)則存儲(chǔ)部106中存儲(chǔ)著的繪畫規(guī)則的具體例。
圖6是示出了似臉繪畫像中的似臉繪用臉部件的水平方向和垂直方向配置的決定方法的圖。
圖7是示出臉圖像制作裝置100進(jìn)行的似臉繪制作處理的工作的流程圖。
圖8是示出臉特征提取部103進(jìn)行的特征信息決定處理的工作的流程圖。
圖9是示出似臉繪合成部108進(jìn)行的似臉繪繪畫處理的工作的流程圖。
圖10是示出臉圖像制作裝置200的結(jié)構(gòu)的功能方框圖。
圖11是示出臉圖像制作裝置200進(jìn)行的似臉繪制作處理的工作的流程圖。
圖12是示出臉圖像制作裝置200進(jìn)行的表現(xiàn)形態(tài)選擇處理的工作的流程圖。
圖13是示出臉圖像制作裝置200進(jìn)行的似臉繪繪畫處理的工作的流程圖。
圖14示出臉圖像制作裝置結(jié)構(gòu)的變形例。
圖15是示出似臉繪條件輸入裝置301進(jìn)行的似臉繪制作條件發(fā)送處理的工作的流程圖。
圖16是示出似臉繪條件輸入裝置301進(jìn)行的個(gè)人特征信息決定處理的工作的流程圖。
圖17是示出似臉繪繪畫裝置302進(jìn)行的似臉繪繪畫處理的工作的流程圖。
圖18是示出臉特征存儲(chǔ)部104的結(jié)構(gòu)的功能方框圖。
圖19示出關(guān)于臉部件A的臉部件分類表的具體例。
圖20示出關(guān)于各臉部件的表示基準(zhǔn)位置的中心坐標(biāo)的具體例。
具體實(shí)施例方式
(實(shí)施方式1)<結(jié)構(gòu)>
以下，對(duì)本實(shí)施方式涉及的臉圖像制作裝置100進(jìn)行說明。
圖1是示出臉圖像制作裝置100的結(jié)構(gòu)的功能方框圖。臉圖像制作裝置100由圖像輸入部101、物理特征提取部102、臉特征提取部103、臉特征存儲(chǔ)部104、表現(xiàn)形態(tài)輸入部105、繪畫規(guī)則存儲(chǔ)部106、繪畫規(guī)則讀出部107、似臉繪合成部108和圖像輸出部109構(gòu)成。
在此，所謂“似臉繪”是指依據(jù)構(gòu)成從圖像輸入部101輸入的對(duì)象者的臉圖像的各臉部件在該臉圖像中的配置進(jìn)行合成的臉圖像的繪畫。
臉圖像制作裝置100由CPU、ROM、RAM、硬盤設(shè)備、CD驅(qū)動(dòng)器、軟磁盤和存儲(chǔ)卡等可拆式媒體、照相機(jī)、鍵盤、鼠標(biāo)、監(jiān)視器等構(gòu)成，在ROM或上述硬盤設(shè)備中存儲(chǔ)計(jì)算機(jī)程序，上述CPU按照上述計(jì)算機(jī)程序進(jìn)行工作，這樣上述裝置實(shí)現(xiàn)其功能。關(guān)于后述的實(shí)施方式2中的臉圖像制作裝置200也同樣。
(圖像輸入部101)由錄像機(jī)和數(shù)字照相機(jī)等能攝像被攝體的裝置構(gòu)成，取入對(duì)象者的臉圖像，將取入的臉圖像變換為臉圖像數(shù)據(jù)后輸出到物理特征提取部102中。
(物理特征提取部102)圖像處理由圖像輸入部101輸入的臉圖像數(shù)據(jù)后，提取各臉部件，關(guān)于提取的各臉部件算出物理特征量，輸出到臉特征提取部103中。具體來說，提取臉圖像數(shù)據(jù)中包含的各臉部件的圖像數(shù)據(jù)，基于提取的圖像數(shù)據(jù)，檢測(cè)眉、眼、鼻、口、臉輪廓的各臉部件的上下端和左右端，關(guān)于提取的各臉部件，將邊上含有的矩形(以下稱作“部件外接矩形”)的寬、高、傾斜度和部件外接矩形的中心坐標(biāo)作為物理特征量，算出上下端左右端的各點(diǎn)，輸出到臉特征提取部103中。
再有，關(guān)于提取的頭發(fā)的臉部件，取得構(gòu)成頭發(fā)區(qū)域的各像素的像素?cái)?shù)據(jù)作為物理特征量，輸出到臉特征提取部103中。
在此，關(guān)于臉部件的提取和檢測(cè)方法，可以使用例如專利文獻(xiàn)(日本特開平10-255017)中公開的方法。
圖2是示出關(guān)于各臉部件提取的物理特征量的圖表，圖3是用影像表示了關(guān)于從臉圖像數(shù)據(jù)提取的各臉部件的物理特征量的圖。
圖3的1～7示出各臉部件的部件外接矩形，8示出頭發(fā)區(qū)域的像素，11、21、33、42、51、61、73示出各臉部件的上端，31、44、53、63、71示出各臉部件的下端，12、32、43、52、62、74示出各臉部件的左端，22、34、41、54、64、72示出各臉部件的右端，13示出臉部件(左眉)的右端與下端重合，23示出臉部件(右眉)的左端與下端重合。
在此，所謂“部件外接矩形的寬”是指部件外接矩形的底邊的長(zhǎng)度，所謂“部件外接矩形的高”是指部件外接矩形的縱向的邊的長(zhǎng)度，所謂“部件外接矩形的傾斜度”是指以臉部件的右端為起點(diǎn)，以左端為終點(diǎn)的直線(例如，圖3的連結(jié)13和12的直線)，和平行于以右端為起點(diǎn)的該部件外接矩形的底邊的直線(平行于從圖3的13向12側(cè)的底邊的直線)所構(gòu)成的角度，在臉部件是右眉和右眼的情況下，上述是指交替了左端和右端的情況下的上述角度。
在此，以連結(jié)右端和左端的直線對(duì)于平行于上述底邊的直線呈順時(shí)針方向的情況下的上述角度為正的角度，以呈逆時(shí)針方向的情況下的上述角度為負(fù)的角度。
再有，所謂“中心坐標(biāo)”是指各臉部件的部件外接矩形的中心點(diǎn)(對(duì)角線的交點(diǎn))的坐標(biāo)。
(臉特征存儲(chǔ)部104)圖18是示出臉特征存儲(chǔ)部104的結(jié)構(gòu)的功能方框圖。
臉特征存儲(chǔ)部104由個(gè)人特征信息存儲(chǔ)部1041、臉部件分類表存儲(chǔ)部1042、臉部件基準(zhǔn)位置存儲(chǔ)部1043構(gòu)成。
(個(gè)人特征信息存儲(chǔ)部1041)存儲(chǔ)著個(gè)人特征信息。
在此，所謂“個(gè)人特征信息”是指包括各臉部件的分類和配置變更量的信息，所述配置變更量基于有關(guān)各臉部件的物理特征量和臉部件基準(zhǔn)位置存儲(chǔ)部1043中存儲(chǔ)著的，有關(guān)后述的各臉部件的基準(zhǔn)位置，由臉特征提取部103算出來。
所謂“配置變更量”由水平方向的配置變更量和垂直方向的配置變更量構(gòu)成。
所謂“水平方向的配置變更量”是指關(guān)于各臉部件算出的中心坐標(biāo)的X坐標(biāo)值(水平方向的坐標(biāo)值)與示出與該臉部件相對(duì)應(yīng)的臉部件(例如眼)的基準(zhǔn)位置的中心坐標(biāo)的X坐標(biāo)值的差分。在如“眼”、“眉”之類這樣的臉部件有多個(gè)的情況下，關(guān)于各X坐標(biāo)值(例如左眼與右眼的X坐標(biāo)值)的平均值算出差分。
所謂“垂直方向的配置變更量”是指基準(zhǔn)點(diǎn)(例如眉的中心坐標(biāo))的Y坐標(biāo)值(垂直方向的坐標(biāo)值)與關(guān)于各臉部件(例如眼)算出的中心坐標(biāo)的Y坐標(biāo)值的差分的，對(duì)于基準(zhǔn)點(diǎn)的Y坐標(biāo)值和示出與該臉部件相對(duì)應(yīng)的臉部件(例如眼)的基準(zhǔn)位置的中心坐標(biāo)的Y坐標(biāo)值的差分的比。在如“眼”、“眉”之類這樣的臉部件有多個(gè)的情況下，關(guān)于各Y坐標(biāo)值的平均值算出差分和比。
在此，所謂“基準(zhǔn)點(diǎn)”是指位于成算出對(duì)象的臉部件的中心坐標(biāo)周圍的某個(gè)臉部件的中心坐標(biāo)。
圖4是示出配置變更量與中心坐標(biāo)的關(guān)系的圖。圖4(a)是表示示出各臉部件的基準(zhǔn)位置的中心坐標(biāo)的影像圖。圖4(a)的A、A’示出眉的基準(zhǔn)位置的中心坐標(biāo)，B、B’示出眼的基準(zhǔn)位置的中心坐標(biāo)，C示出鼻的基準(zhǔn)位置的中心坐標(biāo)，D示出口的基準(zhǔn)位置的中心坐標(biāo)。
圖4(b)是示出關(guān)于各臉部件算出的中心坐標(biāo)的影像圖。圖4(b)的a、a’表示出眉的中心坐標(biāo)，b、b’示出眼的中心坐標(biāo)，c示出鼻的中心坐標(biāo)，d示出口的中心坐標(biāo)。
圖4(c)是基于圖4(a)和圖4(b)中示出的中心坐標(biāo)，關(guān)于各臉部件算出的水平方向的配置變更量的具體例。
圖4(d)是基于圖4(a)和圖4(b)中示出的中心坐標(biāo)，關(guān)于各臉部件算出的垂直方向的配置變更量的具體例。圖4(d)的括弧示出成為基準(zhǔn)點(diǎn)的臉部件名。
(臉部件分類表存儲(chǔ)部1042)存儲(chǔ)著關(guān)于各臉部件的臉部件分類表。
在此，所謂“臉部件分類表”是指示出算出的物理特征量與臉部件的分類的對(duì)應(yīng)關(guān)系的表，具體來說，是指基于傾斜度和對(duì)于部件外接矩形寬度的高度之比(以下稱作“寬高比”)的對(duì)應(yīng)關(guān)系，用于決定提取的臉部件的分類的表，按照決定的分類，選擇后述的似臉繪用臉部件。
再有，在臉部件是頭發(fā)的情況下，通過將頭發(fā)區(qū)域中的各像素的像素?cái)?shù)據(jù)的分布圖形與規(guī)定的多種頭發(fā)的頭發(fā)區(qū)域中的像素?cái)?shù)據(jù)的分布圖形相比較，來決定分類。
圖19示出關(guān)于臉部件A的臉部件分類表的具體例。
(臉部件基準(zhǔn)位置存儲(chǔ)部1043)存儲(chǔ)著示出從標(biāo)準(zhǔn)人的臉圖像數(shù)據(jù)中提取的各臉部件的基準(zhǔn)位置的中心坐標(biāo)。各臉部件基準(zhǔn)位置，例如，圖像處理多個(gè)標(biāo)準(zhǔn)人的臉圖像數(shù)據(jù)，基于各人的臉圖像數(shù)據(jù)，算出各臉部件的位置，對(duì)每個(gè)臉部件可平均求出算出的位置。
圖20示出關(guān)于各臉部件的示出基準(zhǔn)位置的中心坐標(biāo)的具體例。圖20的各中心坐標(biāo)與示出在圖4(a)的影像圖中表示的各臉部件的基準(zhǔn)位置的中心坐標(biāo)相對(duì)應(yīng)。
(臉特征提取部103)基于從物理特征提取部102輸入的物理特征量，決定提取的各臉部件的分類，進(jìn)一步?jīng)Q定水平方向和垂直方向的配置變更量。
具體來說，從提取的各臉部件的部件外接矩形的寬和高算出寬高比，基于提取的各臉部件的傾斜度和關(guān)于該臉部件算出的寬高比，從有關(guān)該的臉部件的臉部件分類表決定該臉部件的分類，進(jìn)一步基于提取的各臉部件的中心坐標(biāo)和示出與該臉部件相對(duì)應(yīng)的臉部件的基準(zhǔn)位置的中心坐標(biāo)，關(guān)于該臉部件決定水平方向和垂直方向的配置變更量，將決定后的各臉部件的分類和配置變更量作為個(gè)人特征信息記錄在臉特征存儲(chǔ)部104中。
(表現(xiàn)形態(tài)輸入部105)從用戶接收似臉繪的表現(xiàn)形態(tài)的指定，輸出到繪畫規(guī)則讀出部107中。
在此，所謂“表現(xiàn)形態(tài)”是指似臉繪的種類，例如是指動(dòng)物風(fēng)格的似臉繪、漫畫的卡通風(fēng)格的似臉繪、各表情的似臉繪(例如，生氣臉的似臉繪、笑臉的似臉繪、哭臉的似臉繪、困惑臉的似臉繪)等，通過指定表現(xiàn)形態(tài)，特定似臉繪的種類，指定繪畫規(guī)則存儲(chǔ)部106中存儲(chǔ)著的后述的繪畫規(guī)則。
各繪畫規(guī)則與似臉繪的種類相對(duì)應(yīng)。
(繪畫規(guī)則存儲(chǔ)部106)存儲(chǔ)著對(duì)每種似臉繪的種類設(shè)置的繪畫規(guī)則。
在此，所謂“繪畫規(guī)則”是指包括似臉繪的各臉部件的圖像數(shù)據(jù)群(包括臉部件的大小信息(寬、高))和似臉繪用臉部件基準(zhǔn)位置信息的信息，所述似臉繪用臉部件基準(zhǔn)位置信息表示示出各臉部件的似臉繪圖像中的基準(zhǔn)位置的中心坐標(biāo)(在臉部件是臉輪廓的情況下，其中心坐標(biāo)加之其外接矩形的寬和高)。
各繪畫規(guī)則關(guān)于各臉部件，相應(yīng)其分類，包括多個(gè)臉部件的圖像數(shù)據(jù)群。與在臉部件分類表中使用的分類基準(zhǔn)同樣地，基于傾斜度與似臉繪用臉部件的部件外接矩形的寬高比的對(duì)應(yīng)關(guān)系來決定在此的分類，分配著符合決定后的分類的似臉繪用臉部件的圖像數(shù)據(jù)。
這樣，就能夠從各繪畫規(guī)則中包含的多個(gè)臉部件的圖像數(shù)據(jù)群中，選擇與由臉特征提取部103決定的各臉部件的分類相對(duì)應(yīng)的臉部件的圖像數(shù)據(jù)。
圖5示出繪畫規(guī)則存儲(chǔ)部106中存儲(chǔ)著的繪畫規(guī)則的具體例。圖5的501示出繪畫規(guī)則，502示出似臉繪用臉部件基準(zhǔn)位置信息，503示出關(guān)于各臉部件的圖像數(shù)據(jù)群。
再有，圖5的5031示出臉部件屬于眼的各分類中的圖像數(shù)據(jù)群，圖5的5032示出臉部件屬于眉的各分類的圖像數(shù)據(jù)群。
(繪畫規(guī)則讀出部107)一從表現(xiàn)形態(tài)輸入部105指定表現(xiàn)形態(tài)，特定繪畫規(guī)則，就從繪畫規(guī)則存儲(chǔ)部106讀出特定后的繪畫規(guī)則，輸出到似臉繪合成部108中。
(似臉繪合成部108)由臉部件配置計(jì)算部110、似臉繪用臉部件選擇部111、似臉繪用臉部件配置部112構(gòu)成。
(臉部件配置計(jì)算部110)決定似臉繪圖像中的似臉繪用臉部件的水平方向和垂直方向的配置。首先關(guān)于水平方向的配置的決定方法進(jìn)行說明。
臉部件配置計(jì)算部110取得示出在臉部件基準(zhǔn)位置存儲(chǔ)部1043中存儲(chǔ)著的各臉部件的基準(zhǔn)位置的中心坐標(biāo)，基于取得的中心坐標(biāo)的坐標(biāo)值，分別特定位于正交坐標(biāo)上的右端、左端、上端、下端的臉部件的中心坐標(biāo)，算出邊中含有特定后的各中心坐標(biāo)的矩形(以下稱作“中心坐標(biāo)外接矩形A”)的寬(W1)。
接著，臉部件配置計(jì)算部110取得繪畫規(guī)則存儲(chǔ)部106中存儲(chǔ)著的，特定后的繪畫規(guī)則中包含的似臉繪用臉部件基準(zhǔn)位置信息，與上述同樣地，基于似臉繪用臉部件基準(zhǔn)位置信息所示出的各中心坐標(biāo)的坐標(biāo)值，分別特定位于正交坐標(biāo)上的右端、左端、上端、下端上的似臉繪用臉部件的中心坐標(biāo)，算出邊中含有特定后的各中心坐標(biāo)的矩形(以下稱作“中心坐標(biāo)外接矩形B”)的寬(W2)。
圖6(b)的603示出中心坐標(biāo)外接矩形A的具體例，604示出中心坐標(biāo)外接矩形B的具體例，603和604中包含的各黑色圓表示各中心坐標(biāo)外接矩形中包含的各臉部件的中心坐標(biāo)。
接著，臉部件配置計(jì)算部110取得臉特征存儲(chǔ)部1041中存儲(chǔ)著的水平方向的配置變更量，對(duì)取得的各臉部件的水平方向的配置變更量乘以算出的W2對(duì)于W1的比(W2/W1)，算出坐標(biāo)值的水平方向的變更量，將示出與該臉部件相對(duì)應(yīng)的似臉繪用臉部件的基準(zhǔn)位置的中心坐標(biāo)的X坐標(biāo)值僅用算出的變更量部分進(jìn)行變更(加法或減法)，決定將該似臉繪用臉部件配置在似臉繪圖像中時(shí)的中心坐標(biāo)的X坐標(biāo)值。
圖6(b)的606示出作為物理特征量算出的臉部件的中心坐標(biāo)，605表示示出關(guān)于該中心坐標(biāo)成為水平方向的配置變更量的算出對(duì)象的基準(zhǔn)位置的中心坐標(biāo)，d示出兩者的中心坐標(biāo)間的水平方向的配置變更量，607表示示出構(gòu)成似臉繪圖像的臉部件的基準(zhǔn)位置的中心坐標(biāo)，608表示示出決定后的該臉部件的配置的中心坐標(biāo)，d’示出坐標(biāo)值的水平方向的變更量，609示出d’的計(jì)算式。
圖6(c)示出關(guān)于各似臉繪用臉部件的d’的計(jì)算式。再有，下面各序號(hào)分別表示下述情況時(shí)的水平方向的配置變更量，d1表示臉部件是眉時(shí)，d2表示臉部件是眼時(shí)，d3表示臉部件是鼻時(shí)，d4表示臉部件是口時(shí)。
再有，在605～608示出的各中心坐標(biāo)中，為了方便說明，垂直方向的坐標(biāo)值相同。
下面，關(guān)于垂直方向的配置的決定方法進(jìn)行說明。
臉部件配置計(jì)算部110取得關(guān)于臉特征存儲(chǔ)部104中存儲(chǔ)著的各臉部件算出的垂直方向的配置變更量和繪畫規(guī)則存儲(chǔ)部106中存儲(chǔ)著的，特定后的繪畫規(guī)則中包含的似臉繪用臉部件基準(zhǔn)位置信息，對(duì)取得的垂直方向的各配置變更量乘以成為該配置變更量的算出對(duì)象的示出相當(dāng)于基準(zhǔn)點(diǎn)的似臉繪制作用臉部件的基準(zhǔn)位置的中心坐標(biāo)(例如，在眼的中心坐標(biāo)是成為算出對(duì)象的基準(zhǔn)點(diǎn)的情況下，似臉繪用臉部件就是眼的中心坐標(biāo)，以下稱作“基準(zhǔn)中心坐標(biāo)”)的Y坐標(biāo)值與成為該配置變更量的算出對(duì)象的示出相當(dāng)于臉部件的似臉繪用臉部件的基準(zhǔn)位置的中心坐標(biāo)的Y坐標(biāo)值的差分(以下稱作“垂直方向差分”)，算出各似臉繪用臉部件的Y坐標(biāo)值的變更量，決定關(guān)于該似臉繪用臉部件已變更了從基準(zhǔn)中心坐標(biāo)的Y坐標(biāo)值算出的變更量部分的Y坐標(biāo)值，作為將該似臉繪用臉部件配置在似臉繪圖像中時(shí)的中心坐標(biāo)的Y坐標(biāo)值。
圖6(a)的601表示在將似臉繪用臉部件是眉的中心坐標(biāo)作為基準(zhǔn)坐標(biāo)的情況下的、與示出周邊的各似臉繪用臉部件的基準(zhǔn)位置的中心坐標(biāo)的垂直方向差分。具體來說，α表示眉眼間的垂直方向差分，β表示眉鼻間的垂直方向差分，γ表示眉口間的垂直方向差分。該情況下，以眼為基準(zhǔn)中心坐標(biāo)時(shí)的眼鼻間的垂直方向差分可以用(β-α)表示，以鼻為基準(zhǔn)中心坐標(biāo)時(shí)的鼻口間的垂直方向差分可以用(γ-β)表示。
再有，圖6(a)的602表示關(guān)于各似臉繪用臉部件算出的Y坐標(biāo)值的變更量。具體來說，α’表示似臉繪用臉部件是眼時(shí)的Y坐標(biāo)值的變更量，β’表示似臉繪用臉部件是鼻時(shí)的Y坐標(biāo)值的變更量，γ’表示似臉繪用臉部件是口時(shí)的Y坐標(biāo)值的變更量。
利用以下示出的各式算出α’、β’、γ’。
α’＝α(眉眼間的垂直方向的配置變更量)[數(shù)2]β’＝β(眉鼻間的垂直方向的配置變更量)[數(shù)3]γ’＝γ(眉口間的垂直方向的配置變更量)[數(shù)4]β’-α’＝(β-α)×(眼鼻間的垂直方向的配置變更量)[數(shù)5]γ’-β’＝(γ-β)×(鼻口間的垂直方向的配置變更量)在此，由于α’由[數(shù)1]和[數(shù)4]這2個(gè)式子算出得到2個(gè)α’，因此，通過算出其平均值來算出α’。具體來說，從以下示出的[數(shù)6]算出α’。
α’＝1/2{α(眉眼間的垂直方向的配置變更量)+β’-(β-α)×(眼鼻間的垂直方向的配置變更量)}再有，也可以不依靠[數(shù)6]，從[數(shù)1]或[數(shù)4]的某一個(gè)算出α’。
再有，關(guān)于β’也同樣，由于從[數(shù)2]、[數(shù)4]、[數(shù)5]這3個(gè)式子算出得到3個(gè)β’，因此，通過算出其平均值算出β’。具體來說，從以下示出的[數(shù)7]算出β’。
β’＝1/3{β(眉鼻間的垂直方向的配置變更量)+α’+(β-α)×(眼鼻間的垂直方向的配置變更量)}+γ’-(γ-β)(鼻口間的垂直方向的配置變更量)}再有，也可以不依靠[數(shù)7]，從[數(shù)2]、[數(shù)4]、[數(shù)5]的某一個(gè)算出β’。
再有，關(guān)于γ’也同樣，由于從[數(shù)3]和[數(shù)5]這2個(gè)式子算出得到2個(gè)γ’，因此，通過算出其平均值算出γ’。具體來說，從以下示出的[數(shù)8]算出γ’。
γ’＝1/2{γ(眉口間的垂直方向的配置變更量)+β’+(γ-β)×(鼻口間的垂直方向的配置變更量)}再有，也可以不依靠[數(shù)8]，從[數(shù)3]或[數(shù)5]的某一個(gè)算出γ’。
(似臉繪用臉部件選擇部111)讀出有關(guān)臉特征存儲(chǔ)部104中存儲(chǔ)著的各臉部件決定的分類，從有關(guān)繪畫規(guī)則讀出部107輸入的繪畫規(guī)則中包含的各似臉繪用臉部件的圖像數(shù)據(jù)群，選擇屬于與讀出的各分類相對(duì)應(yīng)的分類中的似臉繪用臉部件的圖像數(shù)據(jù)。
(似臉繪用臉部件配置部112)關(guān)于各似臉繪用臉部件，基于選擇的圖像數(shù)據(jù)和決定后的中心坐標(biāo)，合成在決定后的中心坐標(biāo)上配置了各似臉繪用臉部件的似臉繪圖像后，輸出到圖像輸出部109中。
(圖像輸出部109)將從似臉繪合成部108輸入的似臉繪圖像輸出到外部顯示裝置(無圖示)中，使其顯示似臉繪圖像。
<工作>
(似臉繪制作處理)下面，關(guān)于臉圖像制作裝置100所進(jìn)行的似臉繪制作處理的工作進(jìn)行說明。圖7是示出上述工作的流程圖。
從圖像輸入部101一輸入對(duì)象者的臉圖像的臉圖像數(shù)據(jù)(步驟S701)，物理特征提取部102就圖像處理輸入的臉圖像數(shù)據(jù)，提取各臉部件的物理特征量(步驟S702)，輸出到臉特征提取部102中。
接著，表現(xiàn)形態(tài)輸入部105從用戶接收似臉繪的表現(xiàn)形態(tài)的指定(步驟S703)，輸出到繪畫規(guī)則讀出部107中。
接著，臉特征提取部103進(jìn)行后述的個(gè)人特征信息決定處理(步驟S704)，然后，繪畫規(guī)則讀出部107和似臉繪合成部108進(jìn)行后述的似臉繪繪畫處理(步驟S705)。
(個(gè)人特征信息決定處理)下面，對(duì)有關(guān)臉特征提取部103進(jìn)行的個(gè)人特征信息決定處理的工作進(jìn)行說明。圖8是示出上述工作的流程圖。
臉特征提取部103基于由物理特征提取部102提取的各臉部件的物理特征量，決定被提取的各臉部件的分類(步驟S801)，從提取的物理特征量中取得各臉部件的中心坐標(biāo)，比較該中心坐標(biāo)和示出有關(guān)與該臉部件相對(duì)應(yīng)的臉部件的基準(zhǔn)位置的中心坐標(biāo)(步驟S802)，關(guān)于該臉部件，決定水平方向和垂直方向的配置變更量(步驟S803、步驟S804)，在臉特征存儲(chǔ)部104中記錄決定后的各臉部件的分類和水平方向及垂直方向的配置變更量，作為個(gè)人特征信息(步驟S805)。
(似臉繪繪畫處理)下面，關(guān)于似臉繪合成部108進(jìn)行的似臉繪繪畫處理的工作進(jìn)行說明。圖9是示出上述工作的流程圖。
繪畫規(guī)則讀出部107從表現(xiàn)形態(tài)輸入部105一輸入指定的表現(xiàn)形態(tài)，就從繪畫規(guī)則存儲(chǔ)部106讀出與輸入的表現(xiàn)形態(tài)相對(duì)應(yīng)的繪畫規(guī)則(步驟S901)，輸出到似臉繪合成部108中。
似臉繪合成部108分別讀出臉特征存儲(chǔ)部104中存儲(chǔ)著的示出各臉部件的基準(zhǔn)位置的中心坐標(biāo)、關(guān)于各臉部件決定的分類、水平方向和垂直方向的配置變更量(步驟S902)，關(guān)于各似臉繪用臉部件，從讀出的繪畫規(guī)則中包含的分類后的該似臉繪用臉部件的圖像數(shù)據(jù)中，選擇屬于與讀出的各分類相對(duì)應(yīng)的分類的似臉繪用臉部件的圖像數(shù)據(jù)(步驟S903)，基于讀出的繪畫規(guī)則中包含的各似臉繪用臉部件的中心坐標(biāo)、示出各臉部件的基準(zhǔn)位置的中心坐標(biāo)、水平方向和垂直方向的配置變更量，決定配置各似臉繪用臉部件的中心坐標(biāo)(步驟S904)，關(guān)于各似臉繪用臉部件，基于選擇后的圖像數(shù)據(jù)和決定后的中心坐標(biāo)，合成在決定后的中心坐標(biāo)上配置了各似臉繪用臉部件的似臉繪圖像，輸出到圖像輸出部109中(步驟S905)。
接著，繪畫規(guī)則讀出部107判定是否從表現(xiàn)形態(tài)輸入部105具有表現(xiàn)形態(tài)的再輸入(步驟S906)，當(dāng)存在的情況下(步驟S906)，轉(zhuǎn)移到步驟S901的處理。
(實(shí)施方式2)以下，關(guān)于本實(shí)施方式涉及的臉圖像制作裝置200進(jìn)行說明。
圖10是示出臉圖像制作裝置200的結(jié)構(gòu)的功能方框圖。臉圖像制作裝置200由圖像輸入部101、物理特征提取部102、臉特征提取部103、臉特征存儲(chǔ)部104、表現(xiàn)形態(tài)選擇部205、繪畫規(guī)則存儲(chǔ)部106、繪畫規(guī)則讀出部107、似臉繪合成部108、圖像輸出部109構(gòu)成。
在上述結(jié)構(gòu)中，關(guān)于與實(shí)施方式1中的臉圖像制作裝置100相同的結(jié)構(gòu)要素，標(biāo)記相同的符號(hào)，以下，以與臉圖像制作裝置100不同點(diǎn)為中心進(jìn)行說明，關(guān)于相同的結(jié)構(gòu)要素，省略說明。
(表現(xiàn)形態(tài)選擇部205)關(guān)于從對(duì)象者的表情不同的多個(gè)臉圖像中提取的各臉部件的物理特征量，算出表情間的差，通過將算出的差與預(yù)先保存的各閾值(閾值1～4、閾值1＞閾值4＞閾值2＞閾值3)相比較，進(jìn)行選擇表現(xiàn)形態(tài)的處理。
具體來說，根據(jù)有關(guān)從最初輸入的對(duì)象者的臉圖像提取的眼的臉部件的部件外接矩形的寬(w0)和高(h0)算出寬高比(h0/w0)，再取得關(guān)于口的臉部件的部件外接矩形的寬(w’0)，之后，每輸入一次表情不同的臉圖像，就基于從輸入的臉圖像提取的物理特征量，同樣地算出眼的寬高比(設(shè)定為h1/w1)，然后取得口的部件外接矩形的寬(設(shè)為w’1)，關(guān)于寬高比及口的部件外接矩形的寬，算出與最初的差分(h1/w1-h0/w0、W’1-w’0)，基于與保存著的閾值的比較結(jié)果，決定應(yīng)該選擇的表現(xiàn)形態(tài)。
<工作>
(似臉繪制作處理)下面，對(duì)臉圖像制作裝置200進(jìn)行的似臉繪制作處理的工作進(jìn)行說明。圖11是示出上述工作的流程圖。
如圖11所示，臉圖像制作裝置200進(jìn)行的似臉繪制作處理的工作與圖7中示出的臉圖像制作裝置100進(jìn)行的似臉繪制作處理的工作的不同點(diǎn)在于，不是從用戶接收表現(xiàn)形態(tài)的輸入，而是通過進(jìn)行后述的表現(xiàn)形態(tài)選擇處理，選擇表現(xiàn)形態(tài)。
(表現(xiàn)形態(tài)選擇處理)下面，對(duì)臉圖像制作裝置200進(jìn)行的表現(xiàn)形態(tài)選擇處理的工作進(jìn)行說明。圖12是示出上述工作的流程圖。
在此，為了方便說明，圖12的流程圖表示了已經(jīng)從圖像輸入部101輸入最初的對(duì)象者的臉圖像，利用物理特征提取部102，從該臉圖像提取物理特征量，利用表現(xiàn)形態(tài)選擇部205算出眼的臉部件的寬高比，取得了口的臉部件的部件外接矩形的寬度后的工作。
從圖像輸入部101一有對(duì)象者的臉圖像的再輸入(步驟S1201)，物理特征提取部102就從再輸入的臉圖像提取各臉部件的物理特征量(步驟S1202)，輸出到表現(xiàn)形態(tài)選擇部205中。
表現(xiàn)形態(tài)選擇部205從輸入的物理特征量算出再輸入的臉圖像的眼的臉部件的寬高比(h1/w1)，再取得口的臉部件的部件外接矩形的寬(w’1)，算出與最初輸入的臉圖像的眼的臉部件的寬高比(h0/w0)及口的臉部件的部件外接矩形的寬(w’0)的各自的差(h1/w1-h0/w0)、(w’1-w’0)(步驟S1203)，在算出的寬高比的差大于0的情況下(步驟S1204Y)，進(jìn)一步判定是否大于保存著的閾值1(步驟S1205)，在大的情況下(步驟S1205Y)，決定表現(xiàn)形態(tài)為“吃驚”(步驟S1206)，在不大于的情況下(S1205N)，判定算出的寬度的差是否大于閾值4(步驟S1211)，在大的情況下(步驟S1211Y)，決定表現(xiàn)形態(tài)為“困惑”(步驟S1212)。在步驟S1204的判定是否定的情況下(步驟S1204N)，表現(xiàn)形態(tài)選擇部205判定寬高比的差是否小于保存著的閾值2(步驟S1207)，在小的情況下(步驟S1207Y)，進(jìn)一步判定寬高比的差是否小于閾值3(步驟S1208)，在小的情況下(步驟S1208Y)，決定表現(xiàn)形態(tài)為“悲傷”(步驟S1209)，在不小的情況下(步驟S1208N)，決定表現(xiàn)形態(tài)為“高興”(步驟S1210)。
在步驟S1207、步驟S1211的判定分別是否定的情況下，表現(xiàn)形態(tài)選擇部205決定表現(xiàn)形態(tài)為“標(biāo)準(zhǔn)”(步驟S1213)。
(似臉繪繪畫處理)下面，對(duì)臉圖像制作裝置200進(jìn)行的似臉繪繪畫處理的工作進(jìn)行說明。圖13是示出上述工作的流程圖。
繪畫規(guī)則讀出部107從繪畫規(guī)則存儲(chǔ)部106讀出與由表現(xiàn)形態(tài)選擇部205決定的表現(xiàn)形態(tài)相對(duì)應(yīng)的繪畫規(guī)則(步驟S1301)，輸出到似臉繪合成部108中。步驟S1302～步驟S1305的處理與圖9的步驟S902～步驟S905的處理相同，故省略說明。
在進(jìn)行了步驟S1305后，圖像輸入部101判定是否有對(duì)象者的圖像的再輸入(步驟S1306)，在有的情況下(步驟S1306Y)，重復(fù)復(fù)圖12中示出的表現(xiàn)形態(tài)選擇處理(步驟S1307)。
<補(bǔ)充>
以上對(duì)本發(fā)明的實(shí)施方式1、2進(jìn)行了說明，但本發(fā)明不限于這些實(shí)施方式。
(1)例如，在實(shí)施方式1和2中，從1個(gè)臉圖像制作裝置輸入的對(duì)象者的臉圖像提取物理特征量，基于提取的物理特征量，合成了似臉繪圖像，但也可以另外的裝置分別進(jìn)行物理特征量提取過程和似臉繪合成過程。
具體來說，如圖14所示，其結(jié)構(gòu)也可以將臉圖像制作裝置分離為似臉繪條件輸入裝置301和似臉繪繪畫裝置302。所述似臉繪條件輸入裝置301由圖像輸入部101、物理特征提取部102、臉特征提取部103、表現(xiàn)形態(tài)輸入部105(或者表現(xiàn)形態(tài)選擇部205)、通信部309、臉部件分類表存儲(chǔ)部1042、臉部件基準(zhǔn)位置存儲(chǔ)部1043構(gòu)成；所述似臉繪繪畫裝置302由通信部310、繪畫規(guī)則存儲(chǔ)部106、個(gè)人特征信息存儲(chǔ)部1041、繪畫規(guī)則讀出部107、似臉繪合成部108、圖像輸出部109構(gòu)成。條件發(fā)送裝置301通過通信部309向似臉繪繪畫裝置302發(fā)送臉特征提取部103決定的個(gè)人特征信息和從表現(xiàn)形態(tài)輸入部105輸出的用戶指定的表現(xiàn)形態(tài)，似臉繪繪畫裝置302基于發(fā)送的個(gè)人特征信息和表現(xiàn)形態(tài)，合成似臉繪圖像，也可將合成的似臉繪圖像發(fā)送到似臉繪條件輸入裝置中。
圖15示出似臉繪條件輸入裝置301進(jìn)行的似臉繪制作條件發(fā)送處理的工作的流程圖。圖15的步驟S1501～步驟S1504的處理與圖7的步驟S701～步驟S704的處理相同。在步驟S1504的處理后，通信部309將由步驟S1504的處理決定的分類、配置變更量和從表現(xiàn)形態(tài)輸入部105輸出的用戶指定的表現(xiàn)形態(tài)發(fā)送給似臉繪繪畫裝置302(步驟S1505)。
圖16是示出似臉繪條件輸入裝置301進(jìn)行的個(gè)人特征信息決定處理的工作的流程圖。
圖16的步驟S1601～步驟S1604的處理與圖8的步驟S801～步驟S804相同。
圖17是示出似臉繪繪畫裝置302進(jìn)行的似臉繪繪畫處理的流程圖。圖17的步驟S1704～步驟S1706的處理與圖9的步驟S902～步驟S904的處理相同。
在步驟S1701中，通信部310從似臉繪條件輸入裝置301接收決定后的個(gè)人特征信息和用戶指定的表現(xiàn)形態(tài)，將接收到的個(gè)人特征信息記錄在臉特征存儲(chǔ)部104中(步驟S1702)。
接著，似臉繪繪畫裝置302通過繪畫規(guī)則讀出部107，從繪畫規(guī)則存儲(chǔ)部106讀出與接收到的表現(xiàn)形態(tài)相對(duì)應(yīng)的繪畫規(guī)則(步驟S1703)，其后，進(jìn)行步驟S1704～步驟S1706的處理。
似臉繪繪畫裝置302通過似臉繪合成部108，對(duì)于各似臉繪用臉部件，基于選擇的圖像數(shù)據(jù)和決定的中心坐標(biāo)，合成在決定后的中心坐標(biāo)上配置了各似臉繪用臉部件的似臉繪圖像，將合成后的似臉繪圖像發(fā)送到似臉繪條件輸入裝置301中(步驟S1707)，從似臉繪條件輸入裝置301判定是否有表現(xiàn)形態(tài)的再輸入(步驟S1708)，在有的情況下(步驟S1708Y)，轉(zhuǎn)移到步驟S1703的處理。
(2)在(1)中，也可以不在似臉繪條件輸入裝置301中設(shè)置表現(xiàn)形態(tài)輸入部105，而設(shè)置表現(xiàn)形態(tài)選擇部205，不在表現(xiàn)形態(tài)輸入部105進(jìn)行表現(xiàn)形態(tài)的輸出，而由表現(xiàn)形態(tài)選擇部205進(jìn)行表現(xiàn)形態(tài)的輸出。
(3)將臉圖像制作裝置分離為多個(gè)裝置的結(jié)構(gòu)也可以是(1)中示出的結(jié)構(gòu)以外的其他結(jié)構(gòu)。例如，也可以將繪畫規(guī)則存儲(chǔ)部106和繪畫規(guī)則讀出部107構(gòu)成為一個(gè)裝置，將圖像輸入部101、物理特征提取部102、臉特征提取部103、臉特征存儲(chǔ)部104、表現(xiàn)形態(tài)輸入部105、似臉繪合成部108、圖像輸出部109構(gòu)成為另一個(gè)裝置，與(1)同樣地通過通信部進(jìn)行數(shù)據(jù)的收發(fā)。
并且，也可以將圖像輸入部101、物理特征提取部102和臉特征提取部103構(gòu)成為一個(gè)裝置，將臉特征存儲(chǔ)部104、表現(xiàn)形態(tài)輸入部105、繪畫規(guī)則存儲(chǔ)部106、繪畫規(guī)則讀出部107、似臉繪合成部108、圖像輸出部109構(gòu)成為一個(gè)裝置，與(1)同樣地通過通信部進(jìn)行數(shù)據(jù)的收發(fā)。
并且，也可以分別構(gòu)成為包括圖像輸入部101、物理特征提取部102和臉特征提取部103的裝置、包括表現(xiàn)形態(tài)選擇部205的裝置、包括繪畫規(guī)則存儲(chǔ)部106、臉特征存儲(chǔ)部104、繪畫規(guī)則讀出部107、似臉繪合成部108、圖像輸出部109的裝置，與(1)同樣地通過通信部在各裝置之間進(jìn)行數(shù)據(jù)的收發(fā)。
(4)并且，在實(shí)施方式2中，表現(xiàn)形態(tài)選擇部205將從最初輸入的臉圖像提取的物理特征量作為差分算出對(duì)象的物理特征量，算出該物理特征量和從其后輸入的多個(gè)臉圖像提取的物理特征量的差分，但也可以將從除了最初以外的輸入臉圖像提取的物理特征量作為差分算出對(duì)象的物理特征量，算出與從其他輸入臉圖像提取的物理特征量的差分，通過將算出的差與預(yù)先保存的各閾值相比較，來進(jìn)行選擇表現(xiàn)形態(tài)的處理，再有，關(guān)于差分算出對(duì)象的物理特征量，進(jìn)行圖11的步驟S1104中示出的個(gè)人臉特征信息決定處理。
本發(fā)明能夠利用作基于輸入的臉圖像制作基于該臉圖像的新的臉圖像的技術(shù)。
權(quán)利要求
1.一種臉圖像制作裝置，其特征在于，作成這樣的第一臉圖像，將第一臉圖像制作用的臉部件配置在依據(jù)第二臉圖像中的各臉部件的位置的位置上；上述臉圖像制作裝置具有接收部，接收第二臉圖像的輸入，位置算出部，從輸入的第二臉圖像提取各臉部件，算出第二臉圖像中的各臉部件的位置，參照位置存儲(chǔ)部，存儲(chǔ)著參照臉圖像中的各臉部件的參照位置，默認(rèn)位置存儲(chǔ)部，存儲(chǔ)第一臉圖像制作用的各臉部件的第一臉圖像中的默認(rèn)位置，配置決定部，基于算出的第二臉圖像中的各臉部件的位置與參照臉圖像中的各臉部件的位置的比較結(jié)果和關(guān)于特定的臉部件的組的，默認(rèn)位置間的距離與參照位置間的距離的比較結(jié)果，決定配置第一臉圖像制作用的各臉部件的位置。
2.如權(quán)利要求1所述的臉圖像制作裝置，其特征在于，上述配置決定部具有變更參數(shù)決定部，決定關(guān)于各臉部件算出的第二臉圖像中的各臉部件的位置與關(guān)于該臉部件的參照位置之間的水平方向的距離，作為水平方向的變更參數(shù)，決定關(guān)于各臉部件中的某一個(gè)與除此以外的各臉部件的組的上述位置間的垂直方向的距離的，對(duì)于關(guān)于該組的參照位置間的垂直方向的距離的比，作為垂直方向的變更參數(shù)；默認(rèn)位置變更部，該部分決定將各臉部件的默認(rèn)位置分別向水平方向和垂直方向移動(dòng)了如下距離，作為配置第一臉圖像制作用的各臉部件的位置，所述向水平方向移動(dòng)的距離相當(dāng)于在關(guān)于該臉部件決定的水平方向的參數(shù)上，乘以對(duì)基于各臉部件的默認(rèn)位置特定的外接矩形的寬度的，基于各臉部件的參照位置特定的外接矩形的寬度的比的值，向垂直方向移動(dòng)后，使得上述各組中的默認(rèn)位置間的垂直方向的距離被變更為相當(dāng)于在乘以了關(guān)于該組決定的垂直方向的變更參數(shù)的值的距離。
3.如權(quán)利要求1或2所述的臉圖像制作裝置，其特征在于，上述默認(rèn)位置存儲(chǔ)部存儲(chǔ)多個(gè)表現(xiàn)形態(tài)的第一圖像制作用的各臉部件及其默認(rèn)位置，上述接收部多次接收表情不同的對(duì)象者的臉圖像的輸入；上述圖像制作裝置具有從輸入的上述各臉圖像提取構(gòu)成各臉圖像的臉部件的物理特征量的提取部，將收到的臉圖像內(nèi)的一個(gè)作為第二臉圖像，基于構(gòu)成第二臉圖像的臉部件的物理特征量與構(gòu)成除了第二臉圖像以外收到的各臉圖像的臉部件的物理特征量的比較結(jié)果，特定第一臉圖像制作用的臉部件的表現(xiàn)形態(tài)的表現(xiàn)形態(tài)特定部；上述配置決定部對(duì)于特定后的表現(xiàn)形態(tài)的第一圖像制作用的各臉部件，決定進(jìn)行配置的位置。
4.如權(quán)利要求2或3所述的臉圖像制作裝置，其特征在于，上述臉圖像制作裝置由臉圖像輸入裝置和臉圖像繪畫裝置構(gòu)成；上述臉圖像輸入裝置具有上述接收部，上述位置算出部，上述參照位置存儲(chǔ)部，上述變更參數(shù)決定部，向上述臉圖像繪畫裝置發(fā)送決定的水平方向和垂直方向的變更參數(shù)的發(fā)送部，接收從上述臉圖像繪畫裝置發(fā)送的第一臉圖像的接收部；上述臉圖像繪畫裝置具有接收所決定的水平方向和垂直方向的變更參數(shù)的接收部，上述默認(rèn)位置存儲(chǔ)部，上述默認(rèn)位置變更部，制作在由上述默認(rèn)位置變更部決定了的位置上配置了第一臉圖像制作用的各臉部件的第一臉圖像的臉圖像制作部，將制成的第一臉圖像發(fā)送給上述臉圖像輸入裝置的發(fā)送部。
5.一種臉圖像制作方法，其特征在于，在制作將第一臉圖像制作用的臉部件配置在依據(jù)第二臉圖像中的各臉部件的位置的位置上的第一臉圖像的臉圖像制作裝置中使用；上述臉圖像制作裝置具有存儲(chǔ)著參照臉圖像中的各臉部件的參照位置的參照位置存儲(chǔ)部，存儲(chǔ)第一臉圖像制作用的各臉部件和該第一臉圖像中的默認(rèn)位置的默認(rèn)位置存儲(chǔ)部；上述臉圖像制作方法包括接收第二臉圖像的輸入的接收步驟，從輸入的第二臉圖像提取各臉部件，算出第二臉圖像中的各臉部件的位置的位置算出步驟，基于算出的第二臉圖像中的各臉部件的位置與參照臉圖像中的各臉部件的位置的比較結(jié)果和關(guān)于特定的臉部件的組的，默認(rèn)位置間的距離與參照位置間的距離的比較結(jié)果，決定配置第一臉圖像制作用的各臉部件的位置的配置決定步驟。
6.一種程序，其特征在于，在制作將第一臉圖像制作用的臉部件配置在依據(jù)第二臉圖像中的各臉部件位置的位置上的第一臉圖像的臉圖像制作裝置上執(zhí)行臉圖像制作處理；上述臉圖像制作裝置具有存儲(chǔ)著參照臉圖像中的各臉部件的參照位置的參照位置存儲(chǔ)部，存儲(chǔ)第一臉圖像制作用的各臉部件和該第一臉圖像中的默認(rèn)位置的默認(rèn)位置存儲(chǔ)部；上述臉圖像制作處理包括接收第二臉圖像的輸入的接收步驟，從輸入的第二臉圖像提取各臉部件，算出第二臉圖像中的各臉部件的位置的位置算出步驟，基于算出的第二臉圖像中的各臉部件的位置與參照臉圖像中的各臉部件的位置的比較結(jié)果和關(guān)于特定的臉部件的組的，默認(rèn)位置間的距離與參照位置間的距離的比較結(jié)果，決定配置第一臉圖像制作用的各臉部件的位置的配置決定步驟。
7.一種計(jì)算機(jī)可讀取的記錄媒體，記錄了這樣的程序，在使作成將第一臉圖像制作用的臉部件，配置在依據(jù)第二臉圖像中的各臉部件的位置的位置上的第一臉圖像的臉圖像制作裝置上，執(zhí)行臉圖像制作處理；其特征在于，上述臉圖像制作裝置具有存儲(chǔ)著參照臉圖像中的各臉部件的參照位置的參照位置存儲(chǔ)部，存儲(chǔ)第一臉圖像制作用的各臉部件和其第一臉圖像中的默認(rèn)位置的默認(rèn)位置存儲(chǔ)部；上述臉圖像制作處理包括接收第二臉圖像的輸入的接收步驟，從輸入的第二臉圖像提取各臉部件，算出第二臉圖像中的各臉部件的位置的位置算出步驟，基于算出的第二臉圖像中的各臉部件的位置與參照臉圖像中的各臉部件的位置的比較結(jié)果和關(guān)于特定的臉部件的組的，默認(rèn)位置間的距離與參照位置間的距離的比較結(jié)果，決定配置第一臉圖像制作用的各臉部件的位置的配置決定步驟。
全文摘要
本發(fā)明的臉圖像制作裝置(100)，制作將第一臉圖像制作用的臉部件配置在了依據(jù)第二臉圖像中的各臉部件的位置的位置上的第一臉圖像，具有接收第二臉圖像的輸入，從第二臉圖像提取各臉部件，算出第二臉圖像中的各臉部件的位置的位置算出物理特征提取部(103)；存儲(chǔ)著參照臉圖像中的各臉部件的參照位置的臉特征存儲(chǔ)部(104)；存儲(chǔ)第一臉圖像制作用的各臉部件的第一臉圖像中的默認(rèn)位置的繪畫規(guī)則存儲(chǔ)部(106)；基于算出的第二臉圖像中的各臉部件的位置與參照臉圖像中的各臉部件的位置的比較結(jié)果和關(guān)于特定的臉部件的組的，默認(rèn)位置間的距離與參照位置間的距離的比較結(jié)果，決定配置第一臉圖像制作用的各臉部件的位置的似臉繪合成部(108)。
文檔編號(hào)H04N1/387GK1942899SQ200580011109
公開日2007年4月4日 申請(qǐng)日期2005年4月15日 優(yōu)先權(quán)日2004年4月15日
發(fā)明者西森崇, 前田茂則 申請(qǐng)人:松下電器產(chǎn)業(yè)株式會(huì)社