一種視頻中貼片廣告的檢測(cè)方法和裝置的制造方法
【技術(shù)領(lǐng)域】
[0001]本發(fā)明涉及信號(hào)處理技術(shù)領(lǐng)域，特別是涉及一種視頻中貼片廣告的檢測(cè)方法和裝置。
【背景技術(shù)】
[0002]為了增加商業(yè)利益，在電影或者電視劇等視頻中均會(huì)插入貼片廣告。然而，對(duì)于購買了視頻版權(quán)的視頻網(wǎng)站而言，貼片廣告與其經(jīng)范圍的毫不相干，嚴(yán)重地影響了視頻網(wǎng)站的經(jīng)濟(jì)利益。
[0003]目前需要本領(lǐng)域技術(shù)人員迫切解決的一個(gè)技術(shù)問題就是:現(xiàn)有技術(shù)無法對(duì)視頻中插入的貼片廣告進(jìn)行檢測(cè)，使得用戶觀看帶有貼片廣告的視頻體驗(yàn)差，并且由于貼片廣告的存在嚴(yán)重影響了購買該視頻版權(quán)的用戶利益。

【發(fā)明內(nèi)容】

[0004]本發(fā)明實(shí)施例所要解決的技術(shù)問題是提供一種視頻中貼片廣告的檢測(cè)方法，能夠達(dá)到從視頻中檢測(cè)出貼片廣告的目的。
[0005]相應(yīng)的，本發(fā)明實(shí)施例還提供了一種視頻中貼片廣告的檢測(cè)裝置，用以保證上述方法的實(shí)現(xiàn)及應(yīng)用。
[0006]為了解決上述問題，本發(fā)明公開了一種視頻中貼片廣告的檢測(cè)方法，包括:根據(jù)預(yù)先設(shè)置的第一卷積神經(jīng)網(wǎng)絡(luò)模型對(duì)視頻幀進(jìn)行處理，獲取包含貼片廣告的視頻幀;根據(jù)預(yù)先設(shè)置的第二卷積神經(jīng)網(wǎng)絡(luò)模型對(duì)所述包含貼片廣告的視頻幀進(jìn)行回歸處理，獲取所述包含貼片廣告的視頻幀中貼片廣告的頂點(diǎn)坐標(biāo);根據(jù)所述頂點(diǎn)坐標(biāo)確定所述貼片廣告在所述包含貼片廣告的視頻幀中的位置。
[0007]進(jìn)一步地，所述根據(jù)預(yù)先設(shè)置的第一卷積神經(jīng)網(wǎng)絡(luò)模型對(duì)視頻幀進(jìn)行處理包括:根據(jù)預(yù)先設(shè)置的采樣間隔對(duì)所述視頻幀進(jìn)行采樣，獲取關(guān)鍵幀;根據(jù)預(yù)先設(shè)置的第一卷積神經(jīng)網(wǎng)絡(luò)模型對(duì)所述關(guān)鍵幀進(jìn)行檢測(cè)，獲取所述關(guān)鍵幀中包含貼片廣告的關(guān)鍵幀;根據(jù)所述包含貼片廣告的關(guān)鍵幀，獲取包含貼片廣告的視頻幀。
[0008]進(jìn)一步地，所述根據(jù)預(yù)先設(shè)置的采樣間隔對(duì)所述視頻幀進(jìn)行采樣，獲取關(guān)鍵幀之前，還包括:從預(yù)測(cè)的貼片廣告出現(xiàn)時(shí)間段內(nèi)獲取待檢測(cè)的視頻幀；則所述根據(jù)預(yù)先設(shè)置的采樣間隔對(duì)所述視頻幀進(jìn)行采樣，獲取關(guān)鍵幀替換為:根據(jù)預(yù)先設(shè)置的采樣間隔對(duì)所述待檢測(cè)的視頻幀進(jìn)行采樣，獲取關(guān)鍵幀。
[0009]進(jìn)一步地，本發(fā)明實(shí)施例提供的視頻中貼片廣告的檢測(cè)方法，還包括:根據(jù)預(yù)先設(shè)置的內(nèi)容，對(duì)所述包含貼片廣告的視頻幀中的貼片廣告進(jìn)行替換處理。
[0010]進(jìn)一步地，所述第一卷積神經(jīng)網(wǎng)絡(luò)模型由第一子卷積神經(jīng)網(wǎng)絡(luò)模型和第二子卷積神經(jīng)網(wǎng)絡(luò)模型構(gòu)成;其中，所述第一子卷積神經(jīng)網(wǎng)絡(luò)模型根據(jù)預(yù)先設(shè)置的包含貼片廣告的視頻幀訓(xùn)練生成，所述第二子卷積神經(jīng)網(wǎng)絡(luò)模型根據(jù)預(yù)先設(shè)置的未包含貼片廣告的視頻幀訓(xùn)練生成。
[0011]進(jìn)一步地，所述第二卷積神經(jīng)網(wǎng)絡(luò)模型根據(jù)預(yù)先設(shè)置的包含貼片廣告的視頻幀訓(xùn)練生成;其中，所述包含貼片廣告的視頻幀中每個(gè)視頻幀的貼片廣告位置不相同。
[0012]為了解決上述問題，本發(fā)明公開了一種視頻中貼片廣告的檢測(cè)裝置，包括:
[0013]第一獲取模塊，用于根據(jù)預(yù)先設(shè)置的第一卷積神經(jīng)網(wǎng)絡(luò)模型對(duì)視頻幀進(jìn)行處理，獲取包含貼片廣告的視頻幀；
[0014]第二獲取模塊，用于根據(jù)預(yù)先設(shè)置的第二卷積神經(jīng)網(wǎng)絡(luò)模型對(duì)所述第一獲取模塊獲取的包含貼片廣告的視頻幀進(jìn)行回歸處理，獲取所述包含貼片廣告的視頻幀中貼片廣告的頂點(diǎn)坐標(biāo)；
[0015]確定模塊，用于根據(jù)所述第二獲取模塊獲取的頂點(diǎn)坐標(biāo)確定所述貼片廣告在所述包含貼片廣告的視頻幀中的位置。
[0016]進(jìn)一步地，所述第一獲取模塊包括:
[0017]第一獲取子模塊，用于根據(jù)預(yù)先設(shè)置的采樣間隔對(duì)所述視頻幀進(jìn)行采樣，獲取關(guān)鍵幀；
[0018]第二獲取子模塊，用于根據(jù)預(yù)先設(shè)置的第一卷積神經(jīng)網(wǎng)絡(luò)模型對(duì)所述第一獲取子模塊獲取的關(guān)鍵幀進(jìn)行檢測(cè)，獲取所述關(guān)鍵幀中包含貼片廣告的關(guān)鍵幀；
[0019]第三獲取子模塊，用于根據(jù)所述第二獲取子模塊獲取的包含貼片廣告的關(guān)鍵幀，獲取包含貼片廣告的視頻幀。
[0020]進(jìn)一步地，所述第一獲取模塊還包括:
[0021]第四獲取子模塊，用于從預(yù)測(cè)的貼片廣告出現(xiàn)時(shí)間段內(nèi)獲取待檢測(cè)的視頻幀；
[0022]則所述第一獲取子模塊，還用于根據(jù)預(yù)先設(shè)置的采樣間隔對(duì)所述第四獲取子模塊獲取的待檢測(cè)的視頻幀進(jìn)行采樣，獲取關(guān)鍵幀。
[0023]進(jìn)一步地，本發(fā)明實(shí)施例提供的視頻中貼片廣告的檢測(cè)裝置，還包括:
[0024]處理模塊，用于根據(jù)預(yù)先設(shè)置的內(nèi)容，對(duì)所述包含貼片廣告的視頻幀中的貼片廣告進(jìn)行替換處理。
[0025]與現(xiàn)有技術(shù)相比，本發(fā)明實(shí)施例提供的視頻中貼片廣告的檢測(cè)方法和裝置，能夠根據(jù)第一卷積神經(jīng)網(wǎng)絡(luò)模型獲取包含貼片廣告的視頻幀，并根據(jù)第二卷積神經(jīng)網(wǎng)絡(luò)模型獲取視頻幀中貼片廣告的頂點(diǎn)坐標(biāo)，從而確定貼片廣告在視頻幀中的位置，達(dá)到了從視頻中檢測(cè)出貼片廣告的目的，解決了現(xiàn)有技術(shù)無法檢測(cè)視頻中存在的貼片廣告的問題。
【附圖說明】
[0026]圖1是本發(fā)明的一種視頻中貼片廣告的檢測(cè)方法流程圖一；
[0027]圖2是圖1所示的視頻中貼片廣告的檢測(cè)方法中步驟101的流程圖一；
[0028]圖3是圖1所示的視頻中貼片廣告的檢測(cè)方法中步驟101的流程圖二；
[0029]圖4是本發(fā)明的一種視頻中貼片廣告的檢測(cè)方法流程圖二；
[0030]圖5是本發(fā)明實(shí)施例提供的一種視頻中貼片廣告的檢測(cè)裝置結(jié)構(gòu)示意圖一；
[0031]圖6是圖5所示的視頻中貼片廣告的檢測(cè)裝置中第一獲取模塊501的結(jié)構(gòu)示意圖 ，
[0032]圖7是圖5所示的視頻中貼片廣告的檢測(cè)裝置中第一獲取模塊501的結(jié)構(gòu)示意圖-* *
[0033]圖8是本發(fā)明實(shí)施例提供的一種視頻中貼片廣告的檢測(cè)裝置結(jié)構(gòu)示意圖二。
【具體實(shí)施方式】
[0034]為使本發(fā)明的上述目的、特征和優(yōu)點(diǎn)能夠更加明顯易懂，下面結(jié)合附圖和【具體實(shí)施方式】對(duì)本發(fā)明作進(jìn)一步詳細(xì)的說明。
[0035]為了解決現(xiàn)有技術(shù)無法從視頻中檢測(cè)出貼片廣告的問題，本發(fā)明實(shí)施例提供一種視頻中貼片廣告的檢測(cè)方法和裝置。
[0036]如圖1所示，本發(fā)明實(shí)施例提供的視頻中貼片廣告的檢測(cè)方法，包括:
[0037]步驟101，根據(jù)預(yù)先設(shè)置的第一卷積神經(jīng)網(wǎng)絡(luò)模型對(duì)視頻幀進(jìn)行處理，獲取包含貼片廣告的視頻幀。
[0038]為了減少計(jì)算量，加快處理速度，在本實(shí)施例中，如圖2所示，步驟101具體可以包括:
[0039]步驟1011，根據(jù)預(yù)先設(shè)置的采樣間隔對(duì)視頻幀進(jìn)行采樣，獲取關(guān)鍵幀。
[0040]需要說明的是，本實(shí)施例不對(duì)采樣間隔進(jìn)行具體的限定，在實(shí)際的使用過程中，用戶可以根據(jù)實(shí)際需要設(shè)定采樣間隔。
[0041]步驟1012，根據(jù)預(yù)先設(shè)置的第一卷積神經(jīng)網(wǎng)絡(luò)模型對(duì)關(guān)鍵幀進(jìn)行檢測(cè)，獲取關(guān)鍵幀中包含貼片廣告的關(guān)鍵幀。
[0042]具體地，本實(shí)施例所述的第一卷積神經(jīng)網(wǎng)絡(luò)模型由第一子卷積神經(jīng)網(wǎng)絡(luò)模型和第二子卷積神經(jīng)網(wǎng)絡(luò)模型構(gòu)成，其中，第一子卷積神經(jīng)網(wǎng)絡(luò)模型根據(jù)預(yù)先設(shè)置的包含貼片廣告的視頻幀訓(xùn)練生成，第二子卷積神經(jīng)網(wǎng)絡(luò)模型根據(jù)預(yù)先設(shè)置的未包含貼片廣告的視頻幀訓(xùn)練生成。
[0043]步驟1012采用第一卷積神經(jīng)網(wǎng)絡(luò)模型對(duì)關(guān)鍵幀進(jìn)行分類檢測(cè)，從中獲取包含貼片廣告的類對(duì)應(yīng)的關(guān)鍵幀。
[0044]步驟1013，根據(jù)包含貼片廣告的關(guān)鍵幀，獲取包含貼片廣告的視頻幀。
[0045]具體地，步驟1013可以根據(jù)包含貼片廣告的關(guān)鍵幀，按照預(yù)先設(shè)置的跳幀策略和貼片廣告的連續(xù)性，確定包含貼片廣告的起始視頻幀和結(jié)束視頻幀，獲取起始視頻幀和結(jié)束視頻幀之間的視頻幀為包含貼片廣告的視頻幀。
[0046]本發(fā)明實(shí)施例提供的視頻中貼片廣告的檢測(cè)方法為了進(jìn)一步減小計(jì)算量，加快處理速度，如圖3所示，在步驟1011之前，還可以包括:
[0047]步驟1010，從預(yù)測(cè)的貼片廣告出現(xiàn)時(shí)間段內(nèi)獲取待檢測(cè)的視頻幀。
[0048]在本實(shí)施例中，可以根據(jù)貼片廣告出現(xiàn)的一慣性確定貼片廣告出現(xiàn)的時(shí)間段，例如:一般在視頻開頭5分鐘之內(nèi)，或者結(jié)束10分鐘之內(nèi)會(huì)出現(xiàn)貼片廣告，所以步驟1010可以根據(jù)該預(yù)測(cè)時(shí)間段獲取待檢測(cè)的視頻幀。
[0049]則此時(shí)，步驟1011可以替換為步驟1011’，根據(jù)預(yù)先設(shè)置的采樣間隔對(duì)待檢測(cè)的視頻幀進(jìn)行采樣，獲取關(guān)鍵幀。
[0050]通過以上圖2或圖3所示的步驟可以將對(duì)視頻幀的操作轉(zhuǎn)化為對(duì)關(guān)鍵幀的操作，從而可以達(dá)到減少計(jì)算量，加快處理速度的目的。
[0051]步驟102，根據(jù)預(yù)先設(shè)置的第二卷積神經(jīng)網(wǎng)絡(luò)模型對(duì)包含貼片廣告的視頻幀進(jìn)行回歸處理，獲取包含貼片廣告的視頻中貼片廣告的頂點(diǎn)坐標(biāo)。
[0052]在本實(shí)施例中，第二卷積神經(jīng)網(wǎng)絡(luò)模型根據(jù)預(yù)先設(shè)置的包含貼片廣告的視頻幀訓(xùn)練生成，其中，包含貼片廣告的視頻幀中每個(gè)視頻幀的貼片廣告位置不相同，視頻內(nèi)容相同。
[0053]步驟102采用第二卷積神經(jīng)網(wǎng)絡(luò)模型對(duì)包含貼片廣告的視頻幀進(jìn)行處理，，獲取包含貼片廣告的視頻中貼片廣告的頂點(diǎn)坐標(biāo)的方式，處理問題更直接、準(zhǔn)確率更高。
[0054]步驟103，根據(jù)頂點(diǎn)坐標(biāo)確定貼片廣告在包含貼片廣告的視頻中的位置。
[0055]進(jìn)一步地，如圖4所示，由于步驟101-103可以檢測(cè)出視頻幀中的貼片廣告，使得本發(fā)明實(shí)施例提供的視頻中貼片廣告的檢測(cè)方法，還可以包括:
[0056]步驟104，根據(jù)預(yù)先設(shè)置的內(nèi)容，對(duì)包含貼片廣告的視頻幀中的貼片廣告進(jìn)行替換處理。
[0057]具體地，步驟101-103可以確定出包含貼片廣告的視頻幀以及貼片廣告在該視頻幀中的具體位置，可以根據(jù)檢測(cè)出的貼片廣告的位置信息設(shè)置對(duì)應(yīng)的替換內(nèi)容，步驟104可以用該內(nèi)容替換視頻中原本存在的貼片廣告。
[0058]本實(shí)施例并不對(duì)預(yù)先設(shè)置的內(nèi)容進(jìn)行限定，該內(nèi)容可以是其他貼片廣告，也可以為空，當(dāng)然還可以為其他形式，此處不再一一贅述。
[0059]需要說明的是，對(duì)于方法實(shí)施例，為了簡單描述，故將其都表述為一系列的動(dòng)作組合，但是本領(lǐng)域技術(shù)人員應(yīng)該知悉，本發(fā)明實(shí)施例并不受所描述的動(dòng)作順序的限制，因?yàn)橐罁?jù)本發(fā)明實(shí)施例，某些步驟可以采用其他順序或者同時(shí)進(jìn)行。其次，本領(lǐng)域技術(shù)人員也應(yīng)該知悉，說