用于生成自動(dòng)化動(dòng)畫(huà)的方法和裝置的制造方法
【技術(shù)領(lǐng)域】
[0001]本公開(kāi)一般地涉及圖像處理的領(lǐng)域，更具體地，涉及用于自動(dòng)化動(dòng)畫(huà)的方法和裝置。
【背景技術(shù)】
[0002]該部分意圖提供用于本公開(kāi)中所描述的技術(shù)的各個(gè)實(shí)施例的背景。該部分中的描述可以包括能夠?qū)嵭械臉?gòu)思，但不一定是先前已經(jīng)構(gòu)想或?qū)嵭械臉?gòu)思。因此，除非在此另外指示，該部分中描述的內(nèi)容不是對(duì)于本公開(kāi)的描述和/或權(quán)利要求的現(xiàn)有技術(shù)，并且不被認(rèn)為通過(guò)僅包括在該部分中而成為現(xiàn)有技術(shù)。
[0003]諸如PowerPoint或PulpMot1n這樣的很多工具提供了幻燈片放映的創(chuàng)建以呈現(xiàn)靜止圖片或者提供了從靜止圖片、視頻或其它媒體文件創(chuàng)建動(dòng)畫(huà)。
[0004]此外，例如PulpMot1n或MemoryMiner這樣的工具提供了以下可能性:選擇圖片中的點(diǎn)/區(qū)以定義位置目標(biāo)，使得動(dòng)畫(huà)被創(chuàng)建來(lái)可視化從其總大小到聚焦于該點(diǎn)/區(qū)的圖像或者從聚焦點(diǎn)/區(qū)到全局視圖的圖像。在一些情況下，還可以定義一組點(diǎn)以及相關(guān)聯(lián)的排序，以便定義將用來(lái)移動(dòng)虛擬相機(jī)并且生成合成的視頻序列的軌跡。這些工具一般要求人工動(dòng)作來(lái)選擇點(diǎn)以及在動(dòng)畫(huà)中使用這些點(diǎn)的次序。

【發(fā)明內(nèi)容】

[0005]除其它外，本公開(kāi)旨在提供用于自動(dòng)化動(dòng)畫(huà)的方法和裝置，通過(guò)所述方法和裝置可能以自動(dòng)化方式創(chuàng)建動(dòng)畫(huà)。
[0006]根據(jù)本公開(kāi)的第一方面，提供了一種方法。所述方法可以包括:至少部分地基于圖像中的一個(gè)或多個(gè)興趣區(qū)域(ROI)的顯著性值來(lái)檢測(cè)所述一個(gè)或多個(gè)R0I;確定呈現(xiàn)所述一個(gè)或多個(gè)ROI的順序；以及基于所述ROI和所述順序生成動(dòng)畫(huà)，其中，確定以所述順序在相鄰ROI之間移動(dòng)顯示區(qū)所沿的動(dòng)畫(huà)路徑，以使得沿著所述路徑的所述一個(gè)或多個(gè)ROI的顯著性值之和最大化。
[0007]在實(shí)施例中，所述ROI和所述顯示區(qū)各自可以是矩形區(qū)域。
[0008]在實(shí)施例中，所述矩形區(qū)域可以各自具有與用于顯示所述圖像的屏幕的寬高比對(duì)應(yīng)的寬高比。
[0009]在實(shí)施例中，當(dāng)將所述顯示區(qū)從第一ROI移動(dòng)到第二ROI時(shí)，所述顯示區(qū)使其大小從所述第一 ROI的大小改變?yōu)樗龅诙?ROI的大小。
[0010]在實(shí)施例中，可以根據(jù)線(xiàn)性函數(shù)或任何其它連續(xù)函數(shù)來(lái)改變所述顯示區(qū)的大小。
[0011]在實(shí)施例中，可以選擇所述一個(gè)或多個(gè)ROI以具有相對(duì)高的顯著性值。
[0012]在實(shí)施例中，該方法還可以包括:基于所述圖像來(lái)計(jì)算顯著性映射，其中基于所述顯著性映射來(lái)檢測(cè)所述ROI。
[0013]在實(shí)施例中，可以至少部分地基于各個(gè)ROI的大小來(lái)確定所述順序。
[0014]在實(shí)施例中，可以至少部分地基于各個(gè)ROI的平均顯著性值來(lái)確定所述順序。
[0015]在實(shí)施例中，所述ROI的順序可以以完整圖像開(kāi)始和/或結(jié)束。
[0016]在實(shí)施例中，所述順序可以包括:從最大ROI開(kāi)始到最小ROI;或從最小ROI開(kāi)始到最大ROI。
[0017]在實(shí)施例中，確定所述順序的操作還可以包括:每隔一圖像來(lái)交替ROI的順序。
[0018]在實(shí)施例中，可以至少部分地基于各個(gè)ROI的位置來(lái)確定所述順序。
[0019]在實(shí)施例中，所述順序可以包括:從當(dāng)前ROI去往最靠近當(dāng)前ROI的下一個(gè)R0I。
[0020]在實(shí)施例中，確定所述順序的操作還可以包括:在第一圖像以相對(duì)小的ROI結(jié)束的情況下，然后所述順序中的緊鄰第一圖像的第二圖像以與該結(jié)束ROI靠近的一 ROI開(kāi)始。
[0021]在實(shí)施例中，確定所述順序的操作還可以包括:在所述一個(gè)或多個(gè)ROI之前或之后，布置全圖像。
[0022]根據(jù)本公開(kāi)的第二方面，提供了一種裝置。所述裝置可以包括:存儲(chǔ)器，被配置為存儲(chǔ)用于所述裝置的操作所要求的圖像和數(shù)據(jù)；以及處理器，被配置為:至少部分地基于所述圖像中的一個(gè)或多個(gè)興趣區(qū)域(ROI)的顯著性值來(lái)檢測(cè)所述一個(gè)或多個(gè)R0I;確定呈現(xiàn)所述一個(gè)或多個(gè)ROI的順序；以及基于所述ROI和所述順序生成動(dòng)畫(huà)，其中，確定以所述順序在相鄰ROI之間移動(dòng)顯示區(qū)所沿的動(dòng)畫(huà)路徑，以使得沿著所述路徑的所述一個(gè)或多個(gè)ROI的顯著性值之和最大化。因此，以所述順序呈現(xiàn)或顯示所述ROI (以及還有所述全圖像)以用于進(jìn)行動(dòng)畫(huà)是可能的。
[0023]在實(shí)施例中，所述處理器可以進(jìn)一步被配置為:至少部分地基于顯著性來(lái)確定以所述順序在相鄰ROI之間移動(dòng)顯示區(qū)所沿的動(dòng)畫(huà)路徑。
[0024]在實(shí)施例中，所述裝置還可以包括輸入設(shè)備，該輸入設(shè)備被配置為接收定義確定所述順序的規(guī)則和/或確定所述動(dòng)畫(huà)路徑的規(guī)則的輸入。
[0025]在實(shí)施例中，所述裝置還可以包括接口，該接口被配置為從外部設(shè)備接收所述圖像。
[0026]根據(jù)一些實(shí)施例，可以選擇所述ROI以具有相對(duì)高的顯著性值。例如，具有最高顯著性值的區(qū)域或區(qū)可以被確定為R0I。
[0027]根據(jù)一些實(shí)施例，可以基于所述圖像計(jì)算顯著性映射，并且可以基于所述顯著性映射檢測(cè)所述R0I。可以進(jìn)一步執(zhí)行臉部檢測(cè)以發(fā)現(xiàn)具有人臉的R0I。
[0028]此外，可以至少部分地基于顯著性來(lái)確定以所述順序在相鄰ROI之間移動(dòng)顯示區(qū)所沿的動(dòng)畫(huà)路徑。在示例中，可以確定所述動(dòng)畫(huà)路徑，以使得沿著所述路徑的顯著性最大化。因此，在呈現(xiàn)第一ROI與緊鄰第一ROI的第二ROI之間，還可以呈現(xiàn)沿著橋接所述第一ROI和所述第二ROI的動(dòng)畫(huà)路徑的伸展(stretch)的與所述ROI不同的圖像的一些區(qū)域或區(qū)(SP，當(dāng)顯示區(qū)在圖像上沿著所述路徑從所述第一 ROI移動(dòng)到所述第二 ROI時(shí)該顯示區(qū)所包圍的區(qū)域或區(qū))?？梢赃x擇路徑，使得(與所述ROI不同的)所述區(qū)域或區(qū)能夠具有最高顯著性。
[0029]所述ROI和所述顯示區(qū)各自可以是矩形區(qū)域(例如，具有與用于顯示所述圖像/ROI的屏幕的寬高比對(duì)應(yīng)的寬高比的矩形區(qū)域)。當(dāng)將所述顯示區(qū)從第一 ROI移動(dòng)到第二 ROI時(shí)，所述顯示區(qū)可以使其大小從所述第一ROI的大小改變?yōu)樗龅诙OI的大小。在示例中，可以根據(jù)線(xiàn)性函數(shù)或任何其它連續(xù)函數(shù)來(lái)改變所述顯示區(qū)的大小。
[0030]根據(jù)一些實(shí)施例，可以至少部分地基于各個(gè)ROI的大小確定所述順序。例如，所述動(dòng)畫(huà)路徑可以包括:從最大ROI開(kāi)始到最小ROI，或反之亦然。
[0031]根據(jù)一些實(shí)施例，(除了或替代大小準(zhǔn)則)可以至少部分地基于各個(gè)ROI的位置確定所述順序。例如，所述順序可以包括:從當(dāng)前ROI去往最靠近當(dāng)前ROI的下一個(gè)R0I。
[0032]此外，所述動(dòng)畫(huà)路徑還可以包括:在所述一個(gè)或多個(gè)ROI之前或之后布置(全)圖像?？商娲?，所述全圖像也可以被看作ROI，并且因此，可以相對(duì)于所述ROI和所述全圖像(或所述最大ROI)兩者來(lái)確定所述順序。
[0033]可以存在將要以順序呈現(xiàn)以用于幻燈片放映的多個(gè)圖像?？梢匀缟咸幚硭鰣D像中的至少一些。因此，在呈現(xiàn)圖像中的每一個(gè)時(shí)，可以呈現(xiàn)用于該圖像的動(dòng)畫(huà)。此外，可以為幻燈片放映中的相鄰圖像不同地確定順序，使得第一圖像可以具有與緊鄰第一圖像的第二圖像的第二順序不同的第一順序。例如，可以每隔一圖像來(lái)交替ROI的呈現(xiàn)順序。在第一圖像以相對(duì)小的ROI結(jié)束的情況下，然后緊鄰第一圖像的第二圖像可以以與第一圖像的該結(jié)束ROI靠近的一 ROI開(kāi)始。
[0034]可以意圖在固定大小的屏幕上顯示動(dòng)畫(huà)。在這種情況下，可以對(duì)沿著動(dòng)畫(huà)路徑的ROI和/或全圖像進(jìn)行剪切和/或放大/縮小?？梢詫⒂糜诩羟泻?或縮放的因子內(nèi)插在動(dòng)畫(huà)路徑中的兩個(gè)位置之間。
[0035]根據(jù)本公開(kāi)的第三方面，提供了一種計(jì)算機(jī)程序，其包括可由處理器執(zhí)行以實(shí)現(xiàn)如本公開(kāi)的第一方面所述的方法的步驟的程序代碼指令。
[0036]根據(jù)本公開(kāi)的第四方面，提供了一種計(jì)算機(jī)程序產(chǎn)品，其被存儲(chǔ)在非瞬時(shí)計(jì)算機(jī)可讀介質(zhì)上，并且包括可由處理器執(zhí)行以實(shí)現(xiàn)如本公開(kāi)的第一方面所述的方法的步驟的程序代碼指令。
[0037]根據(jù)本公開(kāi)的實(shí)施例，可以在甚至不涉及手動(dòng)交互的情況下通過(guò)計(jì)算設(shè)備自動(dòng)地執(zhí)行檢測(cè)、確定和生成的操作。
【附圖說(shuō)明】
[0038]根據(jù)參照附圖而對(duì)本公開(kāi)的實(shí)施例進(jìn)行的以下描述，本公開(kāi)的以上和其它目的、特征和優(yōu)點(diǎn)將變得更加顯而易見(jiàn)，其中:
[0039]圖1是示意性示出根據(jù)本公開(kāi)的實(shí)施例的裝置的框圖；
[0040]圖2是示意性示出根據(jù)本公開(kāi)的實(shí)施例的方法的流程圖；
[0041]圖3(a)、圖3(b)、圖3(c)和圖3(d)示意性地示出根據(jù)本公開(kāi)的實(shí)施例的圖像以及所處理的圖像的結(jié)果；
[0042]圖4示意性地示出根據(jù)本公開(kāi)的實(shí)施例的圖像、在圖像中檢測(cè)到的ROI以及各ROI之間的動(dòng)畫(huà)路徑；
[0043]圖5(a)、圖5(b)和圖5(b’)示意性地示出在相鄰圖像之間切換的順序；以及
[0044]圖6是示意性示出可能的應(yīng)用的流程的流程圖。
【具體實(shí)施方式】
[0045]下文中，參照附圖中所示的實(shí)施例來(lái)描述本公開(kāi)。然而，應(yīng)理解，僅為了說(shuō)明的目的而非限制本公開(kāi)而提供這些描述。此外，在下面，省略已知結(jié)構(gòu)和技術(shù)的描述，以免不必要地模糊本公開(kāi)的構(gòu)思。
[0046]在此所使用的術(shù)語(yǔ)僅用于描述特定實(shí)施例的目的，而并非意圖限制本公開(kāi)。正如在此所使用的，單數(shù)形式“一”、“一個(gè)”以及“這個(gè)”意圖同樣包括復(fù)數(shù)形式，除非上下文清楚指明相反情況。此外，