專利名稱：帶有圖像修改的攝像機裝置的制作方法
技術(shù)領(lǐng)域：
本發(fā)明涉及帶有集成的圖像修改功能的攝像機裝置和對應的方法。術(shù)語“攝像機裝置”在這旨在不僅指代攝像機裝置，而且還指代集成在其它移動電子設備中的攝像機裝置，例如，集成在移動電話、個人數(shù)字助理、便攜式游戲設備或者膝上型計算機中的攝像機。
背景技術(shù)：
近年來，數(shù)字照相廣泛代替了膠卷照相。用數(shù)字攝像機裝置拍攝的照片即圖像例如可在計算機上被后處理。這種后處理可以包括對記錄圖像的輕微修改，而且包括顯著改變或者修改以給予圖像不同的效果。然而，這種后處理需要使用計算機和對應的圖像處理軟件，這些并不總是很好操作。另外，特別是隨著移動電話中集成的數(shù)字攝像機裝置的使用日益增多，人們經(jīng)常期望在記錄圖像之后立即向例如朋友發(fā)送圖像，例如通過SMS、MMS或者e-mail并且仍能夠一定程度地修改圖像。

發(fā)明內(nèi)容
根據(jù)一個實施方式，本發(fā)明提供了一種攝像機裝置，該攝像機裝置包括數(shù)字攝像機單元，其被配置為數(shù)字地記錄至少一個圖像；以及分析電路，其被配置為確定所記錄的至少一個圖像的主體(subject)的姿勢并根據(jù)所確定的姿勢來決定照片修改。根據(jù)一個實施方式，所述分析電路可以進一步被配置以與所決定的修改相對應地來修改所述至少一個圖像。根據(jù)一個實施方式，所述攝像機單元還可以被配置為記錄至少一個另外的 (further)圖像，并且其中，所述分析電路還被配置為與所決定的修改相對應地來修改所述至少一個額外圖像。根據(jù)一個實施方式，所述攝像機裝置還可以包括用戶輸入裝置，其中，所述分析電路還被配置為基于從所述用戶輸入裝置接收的輸入來決定所述修改。根據(jù)一個實施方式，所述分析電路還可以被配置為基于所選擇的圖像記錄模式來決定所述修改。根據(jù)一個實施方式，所述修改可以包括用基于先前存儲的圖像素材的一部分來替換所記錄圖像的一部分。根據(jù)一個實施方式，所述所記錄圖像的一部分可以包括從由所記錄圖像的背景、 所記錄圖像的主體的衣著部分和所記錄圖像的框(frame)部分構(gòu)成的組中選擇的一部分。根據(jù)一個實施方式，所述修改可以包括對圖像的一部分應用算法來改變所述所記錄圖像的一部分的外觀。根據(jù)一個實施方式，所述所記錄圖像的一部分可以包括圖像的主體的面部部分。根據(jù)一個實施方式，所述算法可以包括從由變形(morphing)算法和模糊算法構(gòu)成的組中選擇的算法。根據(jù)一個實施方式，所述修改可以包括調(diào)整大小(resize)和重定心(recenter)的組合操作。根據(jù)一個實施方式，所述姿勢可以從由所記錄圖像的主體的面部前的手部運動、 所記錄圖像的主體描繪了矩形、所記錄圖像的主體拉動頭部的耳朵、所記錄圖像的主體用手指形成加號、所記錄圖像的主體敬禮和所記錄圖像的主體擺出的武術(shù)姿勢所構(gòu)成的組中選擇。根據(jù)一個實施方式，所述攝像機裝置可以是從由移動電話、便攜式游戲設備、個人數(shù)字助理、智能電話和膝上型計算機構(gòu)成的組中選擇的電子設備的一部分。根據(jù)一個實施方式，所述分析電路可以被配置為在進行所述分析之前增強所述至少一個圖像的對比度。根據(jù)另一個實施方式，本發(fā)明提供了一種方法，該方法包括以下步驟記錄至少一個圖像；分析所述至少一個圖像以識別所述至少一個圖像的主體的姿勢；以及根據(jù)所識別的姿勢來決定修改。根據(jù)一個實施方式，所述修改可以包括用基于先前存儲的圖像素材的一部分來替換所記錄圖像的一部分。根據(jù)一個實施方式，所述修改可以包括執(zhí)行改變所記錄圖像的一部分的外觀的算法。根據(jù)一個實施方式，所述方法還可以包括以下步驟在所述分析之前增強所述至少一個圖像的對比度。根據(jù)一個實施方式，所述方法還可以包括以下步驟對從由所述至少一個圖像和另外的所記錄圖像構(gòu)成的組中選擇的圖像進行所述修改。應注意上述特征可以彼此自由組合除非明確地相反說明。


圖1示出了根據(jù)一個實施方式的攝像機裝置；圖2示出了根據(jù)一個實施方式的方法；圖3示出根據(jù)另一個實施方式的方法；圖4A到圖9示出了用于說明一些實施方式的功能的照片。
具體實施例方式下面將參照附圖來詳細地描述本發(fā)明的各個實施方式。應理解以下描述和附圖僅為了例示而給出并且理解為限制。應理解在附圖中按照向本領(lǐng)域技術(shù)人員給出對各個實施方式的清楚理解的方式描繪各個元件，并且不一定表示大小。另外，不同的附圖盡管示出相同或者類似的元件，不一定表示彼此大小。應理解附圖中所示的結(jié)構(gòu)元件中塊之間的耦合或者連接可以通過直接連接(即沒有中間元件)和通過間接連接(即經(jīng)過一個或者更多個中間元件連接)實現(xiàn)。另外，應連接盡管為了例示，功能塊可以示出為單獨的單元，但是除非相反說明，對應的功能還可以在公共單元中實現(xiàn)，例如，在公共電路或者芯片中實現(xiàn)。應注意描述實施方式包括多個具體元件不理解為指示這些元件的全部對于實現(xiàn)本發(fā)明是必需的。相反，在其它實施方式中，可以提供更少的元件和/或代替的元件。另外， 可以存在對附圖所示的元件的附加元件。各個實施方式的特征可以彼此組合處分相反說明。本發(fā)明的范圍不旨在被下文描述的實施方式限制，而旨在僅被所附的權(quán)利要求和等同物限制。圖1中示出了根據(jù)本發(fā)明實施方式的攝像機裝置15的框圖。圖1所示的攝像機裝置15可以是專用數(shù)字攝像機的一部分，但是也可以合并在任何其它電子移動設備中，例如，移動電話、個人數(shù)字助理、便攜式游戲設備、智能電話或者膝上型計算機。應注意未描繪這種設備中的不直接涉及下文說明的所示實施方式的功能的部件。例如，如果攝像機裝置 15是移動電話的一部分，則移動電話中涉及進行電話功能的部分未被示出。圖1的實施方式的攝像機裝置15包括用于拍攝數(shù)字照片即記錄數(shù)字圖像的數(shù)字攝像機單元10。數(shù)字攝像機單元10可以按照任何現(xiàn)有方式實現(xiàn)，并且通常包括用于將光轉(zhuǎn)換為電信號的圖像傳感器，例如CCD傳感器(電荷耦合器件)或者CMOS傳感器(互補金屬氧化物半導體)；以及用于光聚焦到圖像傳感器上的一個或者更多個透鏡。圖像傳感器記錄的圖像可以存儲在存儲器11中。存儲器11可以包括閃存型存儲器、隨機存取存儲器和/或其它類型的存儲器，并且可以實現(xiàn)為攝像機裝置15的內(nèi)置存儲器、可移除芯片卡的存儲器，或者其組合?？刂茊卧?2可以包括例如微處理器，可以訪問存儲器11，即對存儲器11讀和寫， 并且控制數(shù)字攝像機單元10。用戶可以經(jīng)過輸入部14進行輸入以影響控制單元12施加的控制。例如，通過按壓輸入部14的特定按鈕，用戶可以使控制單元12控制數(shù)字攝像機單元10以記錄圖像。其它輸入可以包括針對記錄圖像的各種設定，例如曝光時間、閃光燈激活、光圈、分辨率、自拍激活或者激活特定圖像記錄模式，例如用于黑白拍攝、夜間拍攝的圖像模式，或者還用于基于主體的姿勢的圖像修改，這些將在下面更詳細描述。攝像機裝置15還包括用于對存儲在存儲器11中的由數(shù)字攝像機10記錄的圖像進行處理和分析的圖像處理器13。在對應的圖像記錄模式中，圖像處理器13可以準備要分析的圖像并且分析以識別要拍照的主體(特別是人)的特定預定姿勢，盡管在一些實施方式中還可以識別動物的姿勢。基于這些姿勢，可以進行特定圖像操縱或者修改，下面將說明其示例。在圖1的實施方式中圖像處理器13被控制單元12控制以在對應的圖像記錄模式下進行上述分析和修改。應注意盡管在圖1的實施方式中示出單獨的圖像處理器13作為分析電路，但是在其它實施方式中圖像處理器13的功能可以被控制單元12執(zhí)行，例如通過使用控制單元12 的微處理器。取決于所分析的姿勢而進行的圖像修改在一些實施方式中可以包括用存儲器11 中存儲的素材或者圖像部分來代替圖像部分，或者可以包括使用例如變形算法或者模糊算法的算法來修改照片的部分。在一些實施方式中，在通過分析圖像而識別了姿勢之后，記錄額外圖像，并且在該額外圖像上進行修改。圖2示出了對應方法的實施方式。下面參照圖2描述的方法可以但是不必在參照圖1討論的攝像機裝置15中實現(xiàn)。在20，記錄一個或者更多個圖像。對于單個圖像，可以例如識別靜止姿勢，另外通過記錄和分析超過一個圖像還可以識別移動姿勢，例如手部移動。應注意，可以通過記錄電影來記錄超過一個圖像，電影通常是快速連續(xù)的圖像，或者還記錄超過一個靜止圖像。在21，準備對在20記錄的一個或者更多個圖像進行分析。例如，可以增強圖像的對比度來幫助檢測姿勢。在22，分析圖像以識別姿勢。在23，取決于所識別的姿勢，決定是否要根據(jù)一個或者更多個修改來修改圖像。應注意該決定不一定僅基于所識別的姿勢，而且可以額外地取決于其它因素，例如所選擇的圖像記錄模式或者用戶輸入。例如，如果識別了指示特定修改的姿勢，則可以詢問攝像機裝置的用戶是否實際要進行該修改。在M，記錄額外圖像，在25，與在23決定的修改相對應地對該額外圖像進行修改。 應注意，該額外圖像可以是多個額外圖像中的一個，例如電影的圖像，可以修改電影的全部
或者一些。在其它實施方式中，所分析的圖像與接著要修改的圖像是同一個。圖3示出了對應于這種實施方式的方法的示例。在30，記錄至少一個圖像。在31，準備要分析的所記錄圖像。這可以但是不必通過復制圖像來實現(xiàn)以保留原始圖像。準備分析可以包括對比度增強，類似于參照圖2進行的說明。在32，分析圖像以識別圖像的主體的姿勢。在33，取決于所確定的姿勢以及類似于圖2的實施方式可能取決于例如用戶輸入的其它因素，來決定修改。在34，根據(jù)所決定的修改來修改圖像。圖2的22和圖3的32的圖像分析可以包括進行一個或者更多個算法，例如皮膚顏色識別、對主體的手指數(shù)進行計數(shù)、圖案識別、神經(jīng)網(wǎng)絡、面部檢測算法或者身體形態(tài)識別。應注意在圖2和圖3的實施方式中，可以省略步驟，或者可以改變步驟的順序。例如，在一些實施方式中可以省略準備要分析的圖像的步驟。在其它實施方式中，可以省略基于圖像記錄模式來確定修改的步驟，而可以是只有選擇了對應的圖像記錄模式才進行完整方法。在圖2的實施方式中，在20記錄了多個圖像的情況下，從20到22的方法可以針對每個圖像依次地單獨進行。下面，將參照圖4到圖9說明例如在圖2的22或者在圖3的32識別的預定姿勢和接著進行的修改的示例。圖4到圖7具體地示出了可以在參照圖2討論的方法中使用的示例，圖8和圖9的示例涉及圖3的方法。然而，該示例劃分僅構(gòu)成一種可能性，并且圖4 到圖7所示的姿勢和修改還可以用于圖3的實施方式，并且圖8和圖9所示的姿勢和修改還可以用于圖2的實施方式。在圖4A中，示出了要拍攝的主體將手在面部前方向下移動?？梢岳缤ㄟ^在圖2 的20記錄手處于不同位置的多個圖像，接著在22分析圖像期間重構(gòu)該運動來識別這種姿勢。在實施方式中，如果識別了這種姿勢，則在移動之后，例如，移動之后一定時間，記錄額外圖像，并且在該額外圖像中，如圖4B所示識別并且模糊了主體的頭部，從而在照片中不能輕易地識別主體。在圖5A和圖5B中，示出了又一個示例。在圖5A中，主體交叉兩個手指以形成十字符號。當該姿勢被識別時，在實施方式中，記錄額外圖像，并且該圖像被定心并且調(diào)整大小使得主體在照片的中部，如圖5B所示。圖6A和圖6B示出了另一個示例。在圖6A中，示出主體用手或者手指描繪矩形框的姿勢的示例。當這種姿勢被識別時，在實施方式中，記錄額外圖像，并且如圖6B所示在圖像上添加邊框。圖6B所示的圖像的邊框部分可以是在例如圖1的存儲器11的存儲器中存儲的預定圖案。在這種情況下，圖像可以進一步被調(diào)整大小和/或定心從而使主體定位在邊框的中部。在圖7中，示出了另一個實施方式。作為預定姿勢，在圖7A中圖像的主體拉他的耳朵。這可以例如通過檢測如圖7A的線指示的手臂的特征部分來檢測。如果這種姿勢被識別，則記錄額外圖像，并且對主體的面部執(zhí)行變形算法以提供如圖7B所示的類似于漫畫的圖像。圖8A示出了另一個示例。在本示例中，姿勢是軍禮。在實施方式中，當這種姿勢被識別時，如圖8B所示，用軍服替代所記錄圖像中人的衣服。在另一個實施方式中，如圖8C 所示，圖像的背景變?yōu)檐娛卤尘?。圖8B和圖8C的兩種可能還可以被組合，即，可以向主體提供軍服，并且可以插入軍事背景。服裝和軍事背景的素材均可以先前存儲在攝像機裝置中，例如圖1的存儲器11中。圖9示出了另一個可能的姿勢。在圖9中，主體擺出了類似于功夫的姿勢。在這種實施方式中，當標識了這種姿勢時，可以用武術(shù)服替換主體的衣服，和/或背景可以替換為遠東背景。圖6、圖8和圖9的示例是所記錄圖像的一部分被預定素材、圖案或者圖像部分替代的示例。圖4和圖7的示例是在照片的一部分上執(zhí)行算法的情況，在所示的示例中為模糊算法或者變形算法。以上討論的姿勢和修改僅用作示例。此外，實施方式可以實現(xiàn)這些可能中的一個、 超過一個或者全部。在一些實施方式中，檢測到對應的姿勢可以馬上就進行所討論的全部修改，在其它實施方式中，可以在進行修改之前詢問攝影師。一些實施方式中已說明的姿勢識別和修改可以僅當攝像機裝置設定為對應圖像記錄模式時才進行，但是在其它實施方式中可以還不管設定的圖像記錄模式而進行。從以上描述可見，可能有多種變型例，因此本申請旨在不被上述實施方式限制，僅被所附的權(quán)利要求和等同物限制。
權(quán)利要求
1.一種攝像機裝置，該攝像機裝置包括數(shù)字攝像機單元，其被配置為數(shù)字地記錄至少一個圖像；以及分析電路，其被配置為確定所記錄的至少一個圖像的主體的姿勢并根據(jù)所確定的姿勢來決定照片修改。
2.根據(jù)權(quán)利要求1所述的攝像機裝置，其中，所述分析電路還被配置為與所決定的修改相對應地來修改所述至少一個圖像。
3.根據(jù)權(quán)利要求1或2所述的攝像機裝置，其中，所述攝像機單元還被配置為記錄至少一個額外圖像，并且其中，所述分析電路還被配置為與所決定的修改相對應地來修改所述至少一個額外圖像。
4.根據(jù)權(quán)利要求1至3中任意一項所述的攝像機裝置，該攝像機裝置還包括用戶輸入裝置，其中，所述分析電路還被配置為基于從所述用戶輸入裝置接收的輸入來決定所述修改。
5.根據(jù)權(quán)利要求1至4中任意一項所述的攝像機裝置，其中，所述分析電路還被配置為基于所選擇的圖像記錄模式來決定所述修改。
6.根據(jù)權(quán)利要求1至5中任意一項所述的攝像機裝置，其中，所述修改包括用基于先前存儲的圖像素材的一部分來替換所記錄圖像的一部分。
7.根據(jù)權(quán)利要求6所述的攝像機裝置，其中，所述所記錄圖像的一部分包括從由所記錄圖像的背景、所記錄圖像的主體的衣著部分和所記錄圖像的邊框部分構(gòu)成的組中選擇的一部分。
8.根據(jù)權(quán)利要求1至7中任意一項所述的攝像機裝置，其中，所述修改包括對所述圖像的一部分應用改變所述所記錄圖像的一部分的外觀的算法。
9.根據(jù)權(quán)利要求8所述的攝像機裝置，其中，所述所記錄圖像的一部分包括所述圖像的主體的面部部分。
10.根據(jù)權(quán)利要求9所述的攝像機裝置，其中，所述算法包括從由變形算法和模糊算法構(gòu)成的組中選擇的算法。
11.根據(jù)權(quán)利要求1至10中任意一項所述的攝像機裝置，其中，所述修改包括調(diào)整大小和重定心的組合操作。
12.根據(jù)權(quán)利要求1至11中任意一項所述的攝像機裝置，其中，所述姿勢是從由所記錄圖像的主體的面部前的手部移動、所記錄圖像的主體描繪矩形、所記錄圖像的主體拉扯頭部的耳朵、所記錄圖像的主體用手指形成加號、所記錄圖像的主體敬禮和所記錄圖像的主體擺出的武術(shù)姿勢構(gòu)成的組中選擇的。
13.根據(jù)權(quán)利要求1至12中任意一項所述的攝像機裝置，其中，所述攝像機裝置是從由移動電話、便攜式游戲設備、個人數(shù)字助理、智能電話和膝上型計算機構(gòu)成的組中選擇的電子設備的一部分。
14.根據(jù)權(quán)利要求1至13中任意一項所述的攝像機裝置，其中，所述分析電路被配置為在進行所述分析之前增強所述至少一個圖像的對比度。
15.一種方法，該方法包括以下步驟記錄至少一個圖像；分析所述至少一個圖像以識別所述至少一個圖像的主體所擺出的姿勢；以及根據(jù)所識別的姿勢來決定修改。
16.根據(jù)權(quán)利要求15所述的方法，其中，所述修改包括用基于先前存儲的圖像素材的一部分來替換所記錄圖像的一部分。
17.根據(jù)權(quán)利要求15或16所述的方法，其中，所述修改包括執(zhí)行改變所記錄圖像的一部分的外觀的算法。
18.根據(jù)權(quán)利要求15至17中任意一項所述的方法，該方法還包括以下步驟在所述分析之前增強所述至少一個圖像的對比度。
19.根據(jù)權(quán)利要求15至18中任意一項所述的方法，該方法還包括以下步驟對從由所述至少一個圖像和所記錄的額外圖像構(gòu)成的組中選擇的圖像進行所述修改。
全文摘要
本發(fā)明提供了一種攝像機裝置和對應的方法。實施方式中的攝像機裝置包括用于分析所記錄圖像以確定姿勢并基于所識別的姿勢來決定圖像修改的電路。
文檔編號G06T11/60GK102422320SQ200980159274
公開日2012年4月18日 申請日期2009年11月3日 優(yōu)先權(quán)日2009年5月14日
發(fā)明者斯特凡·奧爾松, 達呂斯·卡茨 申請人:索尼愛立信移動通訊有限公司