專利名稱：面部圖像提取設(shè)備和方法、電子廣告設(shè)備以及計(jì)算機(jī)可讀記錄介質(zhì)的制作方法
技術(shù)領(lǐng)域：
本發(fā)明涉及用于從捕獲一個(gè)或多個(gè)人的圖像中提取滿足特定條件的面部圖像的 設(shè)備，并且涉及提供有這樣的設(shè)備的電子廣告設(shè)備等等。
背景技術(shù)：
公知的是，可以將被稱為電子廣告設(shè)備或數(shù)字標(biāo)牌的設(shè)備安裝在商店或類似的位 置中，以使得訪問(wèn)商店或類似位置的顧客能夠觀看廣告圖像。例如，電子廣告設(shè)備可以被提 供有諸如液晶顯示器的圖像顯示設(shè)備。該電子廣告設(shè)備顯示其中所記錄的廣告圖像，或者 顯示從主機(jī)傳遞設(shè)備電子地傳遞到該電子廣告設(shè)備的廣告圖像。 未經(jīng)審查的日本專利申請(qǐng)KOKAI申請(qǐng)No. 2005-251170 (專利文獻(xiàn)1)公開了一種 顯示設(shè)備，其中，電子廣告設(shè)備被提供有照相機(jī)，并且從由該照相機(jī)獲取的圖像中檢測(cè)觀看 電子廣告設(shè)備的屏幕的人的面部部分的圖像(在下文中稱為面部圖像)。專利文獻(xiàn)l提出， 對(duì)諸如人的性別和年齡的屬性進(jìn)行估計(jì)，并且然后顯示與該人的性別、年齡和其它屬性相 對(duì)應(yīng)的廣告圖像，使得提高電子廣告設(shè)備的廣告效果。 未經(jīng)審查的日本專利申請(qǐng)KOKAI公開No. 2006-251300 (專利文獻(xiàn)2)公開了一種 電子廣告顯示設(shè)備，該電子廣告顯示設(shè)備被提供有在安裝在街上的廣告顯示器附近的照相 機(jī)。專利文獻(xiàn)2提出，該照相機(jī)捕獲經(jīng)過(guò)顯示器附近的路人，并且在該顯示器上顯示包含路 人的圖像的合成圖像。 未經(jīng)審查的日本專利申請(qǐng)KOKAI公開No. 2006-254274(專利文獻(xiàn)3)公開了一種
廣告輔助系統(tǒng)，該廣告輔助系統(tǒng)將圖像獲取器并入顯示器中，該圖像獲取器捕獲觀看顯示
器上所顯示的廣告圖像或其它內(nèi)容的人。專利文獻(xiàn)3提出，確定諸如人的性別和年齡范圍
的屬性，并且計(jì)算關(guān)于該廣告圖像的根據(jù)個(gè)人屬性的收看情況(viewership)。 另外，未經(jīng)審查的日本專利申請(qǐng)K0KAI公開No. 2000-222576 (專利文獻(xiàn)4)提出了
一種方法和設(shè)備，該方法和設(shè)備用于從由圖像獲取器獲取的圖像中檢測(cè)人的頭部，并且從
通過(guò)上述方法和設(shè)備檢測(cè)到的頭部的局部圖像中獲取正面面部圖像。 另外，未經(jīng)審查的日本專利申請(qǐng)K0KAI公開No. 2004-094491 (專利文獻(xiàn)5)提出了
一種用于估計(jì)圖像中面部的定位的面部定位估計(jì)方法和設(shè)備。 在專利文獻(xiàn)1和3中公開的發(fā)明捕獲觀看廣告或其它圖像的人、估計(jì)該人的屬性、 并且然后顯示與那些屬性相對(duì)應(yīng)的廣告圖像，或者替選地，將該估計(jì)的屬性用作用于評(píng)估 廣告或其它圖像的效果的數(shù)據(jù)。在專利文獻(xiàn)2中公開的設(shè)備在顯示器上顯示捕獲的人的 圖像，以引起觀看廣告或其它圖像的人的注意，從而提高廣告的效果。換言之，在專利文獻(xiàn)1至3中所公開的發(fā)明通過(guò)直接地或間接地使用捕獲觀看廣告或其它圖像的人的圖像來(lái)提 高通過(guò)電子廣告設(shè)備廣告的效應(yīng)。 在上述專利文獻(xiàn)1至3中所公開的發(fā)明中，如果可以僅提取表達(dá)出對(duì)廣告或其它 圖像有特殊興趣的人的面部圖像，則可以進(jìn)一步提高專利文獻(xiàn)1至3中所公開的技術(shù)的優(yōu)點(diǎn)。 另一方面，通常必需使很人看到電子廣告設(shè)備。因此，將數(shù)字標(biāo)牌安裝在有許多路 人的地方。因此，可想而知，在電子廣告設(shè)備中所提供的圖像獲取器的視野包含了剛好碰巧 處于該位置的很多人，或者換言之，包含了沒(méi)有表達(dá)出對(duì)廣告或其它圖像有特殊興趣的人。
然而，專利文獻(xiàn)1至3中所公開的發(fā)明缺少下述裝置該裝置用于從由并入電子廣 告設(shè)備中的圖像獲取器獲取的圖像中僅提取表達(dá)出對(duì)廣告或其它圖像有特殊興趣的人的 面部圖像，而排除剛好碰巧處于該位置的人的面部圖像。因此，如果可以在電子廣告設(shè)備中 實(shí)現(xiàn)并且提供這樣的裝置，則可以進(jìn)一步提高電子廣告設(shè)備的廣告效果。

發(fā)明內(nèi)容
按照前述情況進(jìn)行設(shè)計(jì)，本發(fā)明的目的在于提供一種面部圖像提取設(shè)備，該面部 圖像提取設(shè)備從捕獲圖像顯示設(shè)備前的人的圖像中提取僅表達(dá)出對(duì)由圖像顯示設(shè)備呈現(xiàn) 的圖像有特殊興趣的人，而排除剛好碰巧處于該位置的人的面部圖像。另外，本發(fā)明還提供 一種提供有這樣的面部圖像提取設(shè)備的電子廣告設(shè)備。 為了解決上述問(wèn)題，本發(fā)明的示例性目的的面部圖像提取設(shè)備是被配置成接收從 圖像獲取器發(fā)送的圖像的面部圖像提取設(shè)備，該圖像獲取器獲取觀看由圖像顯示設(shè)備顯示 的圖像的人的圖像，該面部圖像提取設(shè)備包括 提取區(qū)域裁剪器，該提取區(qū)域裁剪器被配置成從發(fā)送的圖像中裁剪出特定的圖像 區(qū)域；以及 正面面部圖像提取器，該正面面部圖像提取器被配置成從由該提取區(qū)域裁剪器裁 剪出的圖像中提取正面面對(duì)的面部圖像。 另外，本發(fā)明的第二示例性方面的電子廣告設(shè)備被提供有
圖像顯示設(shè)備，包括 圖像獲取器，該圖像獲取器被配置成獲取觀看由圖像顯示設(shè)備顯示的圖像的人的 圖像； 提取區(qū)域裁剪器，該提取區(qū)域裁剪器被配置成從由圖像獲取器獲取的原始圖像中 裁剪出特定的圖像區(qū)域；以及 正面面部圖像提取器，該正面面部圖像提取器被配置成從由提取區(qū)域裁剪器裁剪 出的圖像中提取正面面對(duì)的面部圖像。 根據(jù)本發(fā)明的面部圖像提取方法是用于從由圖像獲取器獲取的圖像中提取人的 面部圖像的面部圖像提取方法，該圖像獲取器獲取觀看由圖像顯示設(shè)備顯示的圖像的人的 圖像，該方法包括下述步驟 從獲取的圖像中裁剪出特定的圖像區(qū)域；以及 從在裁剪步驟中裁剪出的圖像中提取正面面對(duì)的面部圖像。 另外，根據(jù)本發(fā)明的另一個(gè)示例性方面的程序是安裝在計(jì)算機(jī)上的計(jì)算機(jī)程序，并且該程序使計(jì)算機(jī)從由圖像獲取器獲取的圖像中提取人的面部圖像，該圖像獲取器獲取 觀看由圖像顯示設(shè)備顯示的圖像的人的圖像，并且使計(jì)算機(jī)用作 提取區(qū)域裁剪器，該提取區(qū)域裁剪器被配置成從獲取的圖像中裁剪出特定的圖像 區(qū)域；以及 正面面部圖像提取器，該正面面部圖像提取器被配置成從由提取區(qū)域裁剪器裁剪 出的圖像中提取正面面對(duì)的面部圖像。 根據(jù)本發(fā)明的實(shí)施例，從原始圖像的特定區(qū)域(諸如在圖像獲取器的視野的中心 附近)提取面向圖像獲取器的人的面部圖像。因此，能夠準(zhǔn)確地提取表達(dá)出對(duì)由電子廣告 設(shè)備顯示的圖像有特殊興趣的人的面部圖像。此外，如果這樣的面部圖像提取設(shè)備被提供 在電子廣告設(shè)備中，則能夠提取表達(dá)出對(duì)由電子廣告設(shè)備呈現(xiàn)的廣告或其它圖像有特殊興 趣的人的面部圖像。因此，然后能夠?qū)拿娌繄D像獲得的信息用作對(duì)電子廣告設(shè)備的反饋， 或者用作營(yíng)銷信息。


當(dāng)閱讀下面的詳細(xì)描述和附圖時(shí)，本發(fā)明的這些目標(biāo)以及其它目標(biāo)和優(yōu)點(diǎn)將會(huì)變 得更加明顯，在附圖中 圖1是提供有面部圖像提取設(shè)備的電子廣告設(shè)備的示意圖； 圖2示出了電子廣告設(shè)備的物理配置； 圖3是面部圖像提取設(shè)備的示意圖； 圖4解釋了提取區(qū)域設(shè)置單元的功能； 圖5解釋了提取區(qū)域裁剪器的功能； 圖6解釋了正面面部圖像提取的原理； 圖7解釋了附近面部圖像選擇的原理； 圖8是圖示示例性面部圖像提取程序的流程圖； 圖9是視頻控制器的示意圖； 圖10圖示了傳遞安排表的示例性結(jié)構(gòu)； 圖11圖示了廣告圖像數(shù)據(jù)的示例性結(jié)構(gòu)；以及 圖12是圖示示例性廣告圖像改變處理程序的流程圖。
具體實(shí)施例方式
在下文中，將描述本發(fā)明的優(yōu)選實(shí)施例。 如圖1中所示，根據(jù)本發(fā)明的實(shí)施例的電子廣告設(shè)備1被提供有顯示器2和圖像 獲取器3。 顯示器2由視頻控制器4來(lái)控制，并且是基于從視頻控制器4提供的視頻信號(hào)來(lái) 顯示廣告或其它圖像的液晶顯示器或者其它裝置。 圖像獲取器3是具有平行于顯示器2的光軸排列的光軸的視頻照相機(jī)(換言之， 使得面對(duì)顯示器2的人5也平行于圖像獲取器3)。因此，圖像獲取器3能夠獲取觀看由顯 示器2顯示的廣告或其它圖像的人5。 將由圖像獲取器3獲取的圖像發(fā)送到面部圖像提取設(shè)備6。該面部圖像提取設(shè)備
66處理該圖像，并且提取被估計(jì)成表達(dá)出對(duì)由顯示器2顯示的廣告或其它圖像有興趣的人5 中的一個(gè)人的面部圖像(在下文中，該人被稱為特定人)。該提取的面部圖像被發(fā)送到個(gè)人 屬性估計(jì)器7。 基于從面部圖像提取設(shè)備6發(fā)送的特定人的面部圖像，個(gè)人屬性估計(jì)器7估計(jì)該 特定人的屬性(性別和年齡)。例如，在專利文獻(xiàn)1或者專利文獻(xiàn)3中公開了用于估計(jì)特定 人的屬性的方法。由個(gè)人屬性估計(jì)器7估計(jì)的特定人的性別和年齡被用作對(duì)視頻控制器4 的反饋。然后，該視頻控制器4使顯示器2顯示與該特定人的性別和年齡相對(duì)應(yīng)的廣告或 其它圖像(例如，如果特定人是男性，顯示用于面向男性的產(chǎn)品的廣告圖像)。
圖2示出了電子廣告設(shè)備1的物理配置。在圖2中，將相同的附圖標(biāo)記給予已經(jīng) 在圖1中出現(xiàn)的那些元件。圖2中描繪的配置僅僅被示作一個(gè)示例，而不意在將電子廣告 設(shè)備1的物理配置的范圍限制成該確切描述的圖片。 CPU(中央處理單元)10讀出存儲(chǔ)在RAM 11或存儲(chǔ)器12中的控制程序，以作為如 圖1中所示的視頻控制器4、面部圖像提取設(shè)備6、個(gè)人屬性估計(jì)器7和其它裝置來(lái)操作。該 CPU IO執(zhí)行各種計(jì)算。 RAM(隨機(jī)存取存儲(chǔ)器)11臨時(shí)地存儲(chǔ)由圖像獲取器3獲取的圖像，并且將該圖像 發(fā)送到CPU 10;從存儲(chǔ)器12中讀取廣告圖像等，并且將該圖像發(fā)送到顯示器2。該RAM 11 臨時(shí)地存儲(chǔ)在CPU IO中使用的控制程序或其它數(shù)據(jù)。 存儲(chǔ)器12由例如ROM(只讀存儲(chǔ)器)組成，并且存儲(chǔ)在CPU 10中使用的控制程序 以及在顯示器2上顯示的廣告圖像的數(shù)據(jù)。該存儲(chǔ)器12按需要存儲(chǔ)由圖像獲取器3捕獲 的數(shù)據(jù)等。 控制單元13控制圖像獲取器3。例如，控制單元13控制圖像獲取器3來(lái)縮小/放 大對(duì)象，或者根據(jù)周圍的亮度來(lái)改變圖像獲取器3的感光度等。 圖3示出了面部圖像提取設(shè)備6的概念性結(jié)構(gòu)。如圖1中所示的面部圖像提取設(shè) 備6具有如圖3中所示的配置。 面部圖像提取設(shè)備6是下述計(jì)算機(jī)該計(jì)算機(jī)從由圖像獲取器3獲取的圖像中提 取特定人的面部圖像，或者換言之，僅提取表達(dá)出對(duì)由顯示器2顯示的廣告或其它圖像有 特殊興趣的人的面部圖像。該面部圖像提取設(shè)備6被提供有提取區(qū)域設(shè)置單元61、提取區(qū) 域裁剪器62、正面面部圖像提取器63、以及附近面部圖像選擇器64。 提取區(qū)域設(shè)置單元61是輸入設(shè)備，該輸入設(shè)備輸入指定區(qū)域的設(shè)置，以便于將取 決于特定人的面部圖像的提取的區(qū)域限制成由圖像獲取器3獲取的圖像8的一部分，如例 如圖4和圖5中所示。在本實(shí)施例中，如圖4中所示，在矩形坐標(biāo)系中，將圖像8的中心取 為坐標(biāo)原點(diǎn)(0， 0)，同時(shí)將從左到右的X坐標(biāo)限定為從-50到50，并且將從下到上的Y坐標(biāo) 限定為從-50到50。通過(guò)提取區(qū)域的中心處的坐標(biāo)和它的側(cè)面的長(zhǎng)度來(lái)指定該提取區(qū)域。
例如，如果將(0，0，50，50)輸入提取區(qū)域設(shè)置單元61中，則在圖4中被標(biāo)注A的 矩形區(qū)域被設(shè)置為以坐標(biāo)原點(diǎn)(O，O)為中心并且在水平方向上延伸50且在垂直方向上延 伸50的提取區(qū)域。如果輸入(25，0，50，100)，則在圖4中被標(biāo)注B的圖像8的右半邊被設(shè) 置為提取區(qū)域。另外，如果輸入(0，0，100，100)，則整個(gè)圖像8被設(shè)置為提取區(qū)域。
還可以使用圓形區(qū)域取替矩形區(qū)域來(lái)定義提取區(qū)域。在該情況下，可以通過(guò)在圓 形的中心處的坐標(biāo)和圓形的半徑來(lái)定義提取區(qū)域。
替選地，可以使用關(guān)于圖像8的面積的比率來(lái)定義提取區(qū)域。例如，如果將(25) 輸入提取區(qū)域設(shè)置單元61中，則以坐標(biāo)原點(diǎn)(O，O)為中心并且具有關(guān)于整個(gè)圖像8的25% 的比例面積的局部圖像可以被設(shè)置為提取區(qū)域。 替選地，可以省略提取區(qū)域設(shè)置單元61，并且可以將提取區(qū)域固定成提前確定的 區(qū)域。該提取區(qū)域的中心通常被設(shè)置在坐標(biāo)原點(diǎn)(O，O)。這是因?yàn)楸磉_(dá)出對(duì)由顯示器2顯 示的廣告或其它圖像有特殊興趣的大多數(shù)人將可能站立在顯示器2的前面并且在顯示器2 的中心，或者換言之，圖像獲取器3的視野的中心。 在提取區(qū)域裁剪器62中，從由圖像獲取器3獲取的圖像中裁剪出由提取區(qū)域設(shè)置 單元61設(shè)置的提取區(qū)域中的圖像。例如，在已經(jīng)將(0，0，50，50)輸入提取區(qū)域設(shè)置單元61 的情況下，提取區(qū)域裁剪器62從捕獲由圖像獲取器3獲取的如圖5A中所示的五個(gè)人的圖 像8中裁剪出如圖5B中所示的局部圖像9。 在正面面部圖像提取器63中，搜索該局部圖像9，并且提取正面面對(duì)的面部圖像。 這是因?yàn)?，盡管在局部圖像9中捕獲了三個(gè)人，但是表達(dá)出對(duì)由顯示器2顯示的廣告或其它 圖像有特殊興趣的大多數(shù)人將使他們的面部直接面對(duì)顯示器2。 可以選擇用于提取正面面對(duì)的面部圖像的各種方法。例如，可以在正面面部圖像 提取器63中內(nèi)部地提供參考正面面部圖像，并且在從圖像9中提取的面部圖像與參考正面 面部圖像之間的相似度可以通過(guò)獲得它們之間的相互關(guān)系來(lái)計(jì)算。替選地，方法可以利用 下述事實(shí)在如圖6A中所示的正面面部圖像中，人眼虛擬地關(guān)于面部輪廓的中心線對(duì)稱， 并且如圖6B中所示，如果斜向地觀看面部，則眼睛變成關(guān)于中心線不對(duì)稱。如此一來(lái)，可以 通過(guò)由微分濾波器獲得邊緣來(lái)確定面部線條，并且可以通過(guò)眼睛的虹膜和眼白的顏色來(lái)確 定眼睛的位置。另外，還可以設(shè)置用于提取正面面對(duì)的面部圖像的容許范圍。換言之，方法 可以被配置使得如果面部圖像偏向中心的左邊或者右邊，并且正面面對(duì)的位置在預(yù)定容許 范圍內(nèi)，則如正面面對(duì)來(lái)處理該面部圖像。 為了避免混淆，省略了用于提取正面面對(duì)的面部圖像的裝置的詳細(xì)解釋。如前所 述，專利文獻(xiàn)3公開了下述裝置該裝置用于從圖像檢測(cè)人的頭部，并且從檢測(cè)到的頭部的 局部圖像中僅獲取正面面部圖像。專利文獻(xiàn)4公開了用于估計(jì)圖像中的面部的定向的裝 置。在可能被考慮的各種其它的文獻(xiàn)中公布了其它的裝置。 在提取多個(gè)正面面對(duì)的面部圖像的情況下，必需選擇單個(gè)面部圖像。因此，附近面 部圖像選擇器64從由正面面部圖像提取器63提取的正面面對(duì)的面部圖像中選擇位于最接 近顯示器2的人5中的一個(gè)的面部圖像。這是因?yàn)椋磉_(dá)出對(duì)由顯示器2顯示的廣告或者 其它圖像有特殊興趣的大多數(shù)人將可能非常接近顯示器2地觀看廣告或其它圖像。
面部圖像中的左眼和右眼之間的間隔可以用于估計(jì)人5中的每一個(gè)和顯示器2之 間的距離。如圖7中所示，如果人5中的一個(gè)接近顯示器2( S卩，圖像獲取器3)，則在獲取的 圖像中他的或她的左眼和右眼之間的間隔變大。 替選地，可以在左邊和右邊布置兩個(gè)圖像獲取器3以進(jìn)行所謂的立體圖像獲取。 然后可以基于由于視差而導(dǎo)致的圖像差來(lái)估計(jì)距離。 另外，在面部圖像提取設(shè)備6中，執(zhí)行如圖8中所示的面部圖像提取程序。 當(dāng)電子廣告設(shè)備1的圖像獲取器3獲取圖像時(shí)，執(zhí)行該面部圖像提取程序。首先，
從由圖像獲取器3獲取的圖像中裁剪出特定提取區(qū)域(或者通過(guò)使用提取區(qū)域設(shè)置單元61設(shè)置的提取區(qū)域)中的圖像(步驟l)。 接下來(lái)，從裁剪的圖像中提取正面面對(duì)圖像獲取器3(并且因此也面向顯示器2) 的人的面部圖像(步驟2)。這是因?yàn)椋茢啾磉_(dá)出對(duì)廣告或其它圖像有特殊興趣的人將面 向顯示器2 (對(duì)于盡管在裁剪的圖像中但沒(méi)有正面面對(duì)的人就不能這么說(shuō))。
如果不存在正面面對(duì)的人的面部圖像(步驟3 :否)，則該程序終止。如果提取到 面部圖像(步驟3:是)，則該程序前進(jìn)到步驟4。 在正面面對(duì)的人的面部圖像中，選擇最接近顯示器2(并且因此也最接近圖像獲 取器3)的面部圖像，并且將該面部圖像輸出到個(gè)人屬性估計(jì)器7，并且該程序終止。這是 因?yàn)椋茢啾磉_(dá)出對(duì)由顯示器2顯示的廣告或者其它圖像有特殊興趣的人將接近顯示器2。 然而，如果只存在一個(gè)正面面對(duì)的人的面部圖像，則選擇該個(gè)圖像。 現(xiàn)在將描述視頻控制器4的配置。如圖9中所示，視頻控制器4物理上包括安排 表數(shù)據(jù)庫(kù)(DB)41，廣告圖像數(shù)據(jù)庫(kù)42，輸入/輸出接口 (1/F)43，輸入/輸出單元44，以及 控制器45。 安排表數(shù)據(jù)庫(kù)41存儲(chǔ)用于將廣告圖像傳遞(g卩，顯示)到顯示器2的傳遞安排表。
如圖10中所示，該傳遞安排表包括用于要顯示的廣告圖像(諸如具有包括的音頻的視頻)
的存儲(chǔ)位置的地址(即，URL(統(tǒng)一資源定位)和時(shí)間(時(shí)分秒)。 如圖11中所示，廣告圖像數(shù)據(jù)庫(kù)42存儲(chǔ)用于要顯示的廣告圖像的圖像數(shù)據(jù)(諸
如具有包括的音頻的MPEG格式的視頻)。通過(guò)URL來(lái)指定圖像數(shù)據(jù)的每個(gè)集合。該傳遞安
排表使用這樣的URL來(lái)指定要傳遞的圖像數(shù)據(jù)。關(guān)于目標(biāo)觀眾的屬性信息和ID(圖像ID)
也被附于每個(gè)廣告圖像。 輸入/輸出接口 43是通信接口 ，該通信接口將廣告圖像的圖像數(shù)據(jù)輸出到顯示器 2，并且接收由個(gè)人屬性估計(jì)器7輸出的關(guān)于人5的屬性信息。 輸入/輸出單元44包括諸如鍵盤，鼠標(biāo)和顯示器的裝置，并且用于將各種命令和 數(shù)據(jù)輸入控制器45，并且另外，顯示來(lái)自控制器45的輸出。 控制器45包括諸如處理器的組件，該控制器45被提供有計(jì)時(shí)器TC，并且通過(guò)遵循 控制程序來(lái)操作。更具體地，該控制器45遵循在安排表數(shù)據(jù)庫(kù)41中登記的傳遞安排表、從 廣告圖像數(shù)據(jù)庫(kù)42中讀出要在顯示器2上顯示的廣告圖像、以及從輸入/輸出接口 43提 供廣告圖像。另外，該控制器45還響應(yīng)于來(lái)自輸入/輸出單元44的命令來(lái)編輯或更新傳 遞安排表。 此外，基于從個(gè)人屬性估計(jì)器7輸入的關(guān)于人5的屬性信息，控制器45還修改該 傳遞安排表。然后，控制器45從廣告圖像數(shù)據(jù)庫(kù)42中讀出與該屬性信息相對(duì)應(yīng)的廣告圖 像，并且從輸入/輸出接口 43提供該廣告圖像。
接下來(lái)，將描述如上配置的電子廣告設(shè)備1的操作。 首先，視頻控制器4的控制器45通過(guò)下述來(lái)操作遵循由計(jì)時(shí)器TC測(cè)量的當(dāng)前時(shí) 間以及在安排表數(shù)據(jù)庫(kù)41中登記的傳遞安排表、從廣告圖像數(shù)據(jù)庫(kù)42中讀出要顯示的廣 告圖像、以及將廣告圖像提供給顯示器2。然后，顯示器2顯示所提供的廣告圖像。
同時(shí)，圖像獲取器3獲取前面的圖像。例如，圖像獲取器3可以以1/30秒的幀周 期來(lái)獲取幀圖像，并且然后將該獲取的圖像傳送到面部圖像提取設(shè)備6。該面部圖像提取設(shè) 備6執(zhí)行前述的過(guò)程，并且將結(jié)果(即，面部圖像)傳送到個(gè)人屬性估計(jì)器7。基于該面部
9圖像，個(gè)人屬性估計(jì)器7對(duì)與該面部圖像相對(duì)應(yīng)的人5的年齡和性別(即，屬性信息)進(jìn)行 估計(jì)，并且將結(jié)果傳送到視頻控制器4。 —旦視頻控制器4從個(gè)人屬性估計(jì)器7接收到屬性信息，控制器45就執(zhí)行如圖12 中所示的過(guò)程。 首先，控制器45暫停根據(jù)在安排表數(shù)據(jù)庫(kù)41中規(guī)定的傳遞安排表的廣告圖像的 傳遞(步驟ll)。 接下來(lái)，控制器45搜索廣告圖像數(shù)據(jù)庫(kù)42、讀出具有與從個(gè)人屬性估計(jì)器7接收 到的屬性信息相對(duì)應(yīng)的屬性信息的廣告圖像(即，對(duì)應(yīng)的圖像)(步驟12)、以及將該對(duì)應(yīng)的 圖像傳遞到顯示器2(步驟13)。當(dāng)完成該對(duì)應(yīng)的圖像的顯示(步驟14;是)時(shí)，控制器45 恢復(fù)根據(jù)傳遞安排表的廣告圖像的傳遞(步驟15)，并且結(jié)束該過(guò)程。 如前述中所描述的，電子廣告設(shè)備1被提供有面部圖像提取設(shè)備6，通過(guò)該面部圖 像提取設(shè)備6從由圖像獲取器3獲取的圖像中提取表達(dá)出對(duì)由電子廣告設(shè)備1顯示的廣告 圖像有特殊興趣的人的面部圖像。然后，經(jīng)由個(gè)人屬性估計(jì)器7，諸如人5的年齡和性別的 屬性可以被用作對(duì)于視頻控制器4的反饋。因此，能夠提高電子廣告設(shè)備1的廣告效果。
應(yīng)當(dāng)明顯領(lǐng)會(huì)到，本發(fā)明的技術(shù)范圍不限于本實(shí)施例，并且可以在權(quán)利要求中所 表達(dá)的技術(shù)理念的范圍內(nèi)做出各種實(shí)用的修改。 另外，為了便于描述本發(fā)明的實(shí)施例，如提供有獨(dú)立硬件來(lái)圖示面部圖像提取設(shè) 備6的各個(gè)組成元件(諸如提取區(qū)域裁剪器62)。然而，根據(jù)本發(fā)明的實(shí)施例的面部圖像提 取設(shè)備6不限于上述配置。當(dāng)然，還能夠以軟件來(lái)實(shí)現(xiàn)各個(gè)組成元件，并且能夠在單個(gè)計(jì)算 機(jī)中配置該面部圖像提取設(shè)備。類似地，顯然還能夠以軟件來(lái)實(shí)現(xiàn)所有或者部分的電子廣 告設(shè)備的組成元件，并且能夠?qū)㈦娮訌V告設(shè)備配置為單個(gè)計(jì)算機(jī)。 另外，在本實(shí)施例中，描述了下述示例，在該示例中，個(gè)人屬性估計(jì)器7基于由面 部圖像提取設(shè)備6提取的面部圖像來(lái)估計(jì)人5的諸如性別和年齡的屬性，同時(shí)，然后將屬性 信息用作對(duì)于視頻控制器4的反饋。然而，根據(jù)本發(fā)明的實(shí)施例的電子廣告設(shè)備不限于這 樣的配置。換言之，通過(guò)其中使用由面部圖像提取設(shè)備6提取面部圖像的方法不限制本發(fā) 明的技術(shù)范圍。替選地，可以將由面部圖像提取設(shè)備6提取的面部圖像記錄在介質(zhì)上，或者 通過(guò)使用通信方法在外部系統(tǒng)(即，除了電子廣告設(shè)備l之外的系統(tǒng))中利用該面部圖像。 這樣的替代也被包括在本發(fā)明的技術(shù)范圍內(nèi)。 在不脫離本發(fā)明的廣泛精神和范圍的情況下，可以對(duì)本發(fā)明做出各種實(shí)施例和改 變。上述實(shí)施例意在說(shuō)明本發(fā)明，而非限制本發(fā)明的范圍。通過(guò)所附權(quán)利要求而不是實(shí)施 例來(lái)示出本發(fā)明的范圍。在本發(fā)明的權(quán)利要求的等同含義內(nèi)以及在權(quán)利要求內(nèi)所做出的各 種修改應(yīng)當(dāng)認(rèn)為處于本發(fā)明的范圍中。
權(quán)利要求
一種面部圖像提取設(shè)備，所述面部圖像提取設(shè)備被配置成接收從圖像獲取器發(fā)送的圖像，所述圖像獲取器獲取觀看由圖像顯示設(shè)備顯示的圖像的人的圖像，所述面部圖像提取設(shè)備包括提取區(qū)域裁剪器，所述提取區(qū)域裁剪器被配置成從所發(fā)送的圖像中裁剪出特定的圖像區(qū)域；以及正面面部圖像提取器，所述正面面部圖像提取器被配置成從由所述提取區(qū)域裁剪器裁剪出的圖像中提取正面面對(duì)的面部圖像。
2. 根據(jù)權(quán)利要求1所述的面部圖像提取設(shè)備，其中，所述正面面對(duì)的面部圖像被發(fā)送 到估計(jì)所述人的屬性的個(gè)人屬性估計(jì)器。
3. 根據(jù)權(quán)利要求1所述的面部圖像提取設(shè)備，進(jìn)一步包括附近面部圖像選擇器，所述附近面部圖像選擇器被配置成從由所述正面面部圖像提取 器提取的一個(gè)或者多個(gè)面部圖像中選擇最接近獲取所發(fā)送的圖像的所述圖像獲取器的面 部圖像。
4. 根據(jù)權(quán)利要求1所述的面部圖像提取設(shè)備，其中，由所述提取區(qū)域裁剪器裁剪出的 所述圖像是以原始圖像的中心為中心的局部圖像。
5. 根據(jù)權(quán)利要求1所述的面部圖像提取設(shè)備，進(jìn)一步包括提取區(qū)域設(shè)置單元，用戶通過(guò)所述提取區(qū)域設(shè)置單元來(lái)任意地設(shè)置所述特定區(qū)域。
6. —種電子廣告設(shè)備，包括 圖像顯示設(shè)備；圖像獲取器，所述圖像獲取器被配置成獲取觀看由所述圖像顯示設(shè)備顯示的圖像的人 的圖像；提取區(qū)域裁剪器，所述提取區(qū)域裁剪器被配置成從由所述圖像獲取器獲取的圖像中裁 剪出特定的圖像區(qū)域；以及正面面部圖像提取器，所述正面面部圖像提取器被配置成從由所述提取區(qū)域裁剪器裁 剪出的圖像中提取正面面對(duì)的面部圖像。
7. 根據(jù)權(quán)利要求6所述的電子廣告設(shè)備，進(jìn)一步包括個(gè)人屬性估計(jì)器，所述個(gè)人屬性 估計(jì)器基于所述正面面對(duì)的面部圖像來(lái)估計(jì)所述人的屬性。
8. 根據(jù)權(quán)利要求6所述的電子廣告設(shè)備，進(jìn)一步包括附近面部圖像選擇器，所述附近 面部圖像選擇器從由所述正面面部圖像提取器提取的所述面部圖像中選擇最接近獲取所 述圖像的所述圖像獲取器的面部圖像。
9. 一種面部圖像提取方法，所述面部圖像提取方法用于從由圖像獲取器獲取的圖像中 提取人的面部圖像，所述圖像獲取器獲取觀看由圖像顯示設(shè)備顯示的圖像的人的圖像，所 述方法包括下述步驟從所獲取的圖像中裁剪出特定的圖像區(qū)域；以及從在所述裁剪步驟中裁剪出的所述圖像中提取正面面對(duì)的面部圖像。
10. 根據(jù)權(quán)利要求9所述的面部圖像提取方法，進(jìn)一步包括下述步驟基于所述正面面 對(duì)的面部圖像來(lái)估計(jì)所述人的屬性。
11. 一種記錄程序的計(jì)算機(jī)可讀記錄介質(zhì)，所述程序使所述計(jì)算機(jī)從由圖像獲取器獲 取的圖像中提取人的面部圖像，所述圖像獲取器獲取觀看由圖像顯示設(shè)備顯示的圖像的人的圖像，并且使所述計(jì)算機(jī)用作提取區(qū)域裁剪器，所述提取區(qū)域裁剪器被配置成從所獲取的圖像中裁剪出特定的圖像 區(qū)域；以及正面面部圖像提取器，所述正面面部圖像提取器被配置成從由所述提取區(qū)域裁剪器裁 剪出的圖像中提取正面面對(duì)的面部圖像。
12. 根據(jù)權(quán)利要求11所述的計(jì)算機(jī)可讀記錄介質(zhì)，所述程序使所述計(jì)算機(jī)用作個(gè)人屬 性估計(jì)器，所述個(gè)人屬性估計(jì)器基于所述正面面對(duì)的面部圖像來(lái)估計(jì)所述人的屬性。
13. —種面部圖像提取設(shè)備，所述面部圖像提取設(shè)備被配置成接收從圖像獲取裝置發(fā) 送的圖像，所述圖像獲取裝置獲取觀看由圖像顯示裝置顯示的圖像的人的圖像，所述面部 圖像提取設(shè)備包括提取區(qū)域裁剪裝置，所述提取區(qū)域裁剪裝置被配置成從所發(fā)送的圖像中裁剪出特定的 圖像區(qū)域；以及正面面部圖像提取裝置，所述正面面部圖像提取裝置被配置成從由所述提取區(qū)域裁剪 裝置裁剪出的圖像中提取正面面對(duì)的面部圖像。
全文摘要
本發(fā)明提供了一種面部圖像提取設(shè)備和方法、電子廣告設(shè)備以及計(jì)算機(jī)可讀記錄介質(zhì)。面部圖像提取設(shè)備被提供有提取區(qū)域裁剪器，該提取區(qū)域裁剪器被配置成從原始圖像中裁剪出特定圖像區(qū)域；以及正面面部圖像提取器，該正面面部提取器被配置成從由提取區(qū)域裁剪器裁剪出的圖像中提取正面面對(duì)的面部圖像。如此一來(lái)，能夠從捕獲圖像顯示設(shè)備前面的人的圖像中提取表達(dá)出對(duì)由圖像顯示設(shè)備呈現(xiàn)的圖像有特殊興趣的人，而排除剛好碰巧處于該位置的人的面部圖像。
文檔編號(hào)G09F19/00GK101739562SQ20091021213
公開日2010年6月16日 申請(qǐng)日期2009年11月10日 優(yōu)先權(quán)日2008年11月10日
發(fā)明者梅田一秀 申請(qǐng)人:Nec九州軟件株式會(huì)社