專利名稱:一種輸出圖像的方法及裝置的制作方法
技術(shù)領(lǐng)域:
本發(fā)明涉及計(jì)算機(jī)及多媒體處理領(lǐng)域,特別是涉及輸出圖像的方法及裝置。
背景技術(shù):
隨著信息技術(shù)的快速發(fā)展、信息高速公路的建設(shè)和互聯(lián)網(wǎng)技術(shù)的推廣應(yīng) 用,人們正快步走近信息化社會(huì)。在信息化社會(huì)中,網(wǎng)絡(luò)為用戶提供了大量的 可用資源,如文本、圖像、視頻、音頻等?;ヂ?lián)網(wǎng)資源也成為教育資源庫建設(shè) 的重要來源。但是互聯(lián)網(wǎng)上的信息種類繁多,排列錯(cuò)綜復(fù)雜,這就給相應(yīng)的信 息檢索帶來一定的困難。近幾年來,基于內(nèi)容的圖像分類檢索技術(shù)有了長足的 發(fā)展,主要是基于低層次視覺特征的圖像檢索。在基于內(nèi)容的多媒體信息分類 檢索技術(shù)研究中,基于理解的文本分類檢索已經(jīng)有比較好的研究成果,但基于 視覺特征和語義特征的圖像、音視頻分類檢索尚處于研究的初始階段。目前, 在圖像分類方面,還沒有比較成熟的方法能夠?qū)λ械膱D像類型都進(jìn)行有效的 分類。圖像分類就是利用計(jì)算機(jī)對圖像進(jìn)行定量分析,把圖像或圖像中的每個(gè)像元或區(qū)域劃歸為若干個(gè)類別中的某一種,以代替人的^L覺判讀。圖像分類方法 可分為圖像空間的分類方法——利用圖像的灰度、顏色、紋理、形狀、位置 等底層特征對圖像進(jìn)行分類。但目前各種圖像分類方法中,尚無通過圖像反映的情感進(jìn)行圖像分類的解 決方案,以及無基于情感圖像的應(yīng)用。發(fā)明內(nèi)容本發(fā)明實(shí)施例提供一種輸出圖像的方法及裝置,用于實(shí)現(xiàn)在顯示圖像時(shí),根據(jù)圖像表達(dá)的情感播放與之相關(guān)的多媒體內(nèi)容,以提高用戶體驗(yàn)。一種輸出圖像的方法,包括以下步驟 分析獲得的圖像的內(nèi)容,并確定該圖像對應(yīng)的情感類別; 根據(jù)所述圖像對應(yīng)的情感類別及情感類別與多媒體內(nèi)容的對應(yīng)關(guān)系,確定 需要的多媒體內(nèi)容;在輸出所述圖像時(shí)輸出確定的多媒體內(nèi)容。 一種用于輸出圖像的裝置,包括歸類模塊,用于分析獲得的圖像的內(nèi)容,并將該圖像歸入相應(yīng)的情感類另'J;控制模塊,用于根據(jù)所述圖像歸入的情感類別及情感類別與多媒體內(nèi)容的 對應(yīng)關(guān)系,確定需要的多媒體內(nèi)容;輸出模塊,用于在輸出所述圖像時(shí)輸出確定的多媒體內(nèi)容。本發(fā)明實(shí)施例通過分析圖像的內(nèi)容獲知了圖像所表達(dá)的情感,并輸出與該 情感有關(guān)的多媒體內(nèi)容,以提高用戶體驗(yàn)。
圖1為本發(fā)明實(shí)施例中用于圖像分類的裝置的結(jié)構(gòu)圖; 圖2為本發(fā)明實(shí)施例中用于輸出圖像的裝置的結(jié)構(gòu)圖; 圖3為本發(fā)明實(shí)施例中用于輸出圖像的襲置的詳細(xì)結(jié)構(gòu)圖; 圖4為本發(fā)明實(shí)施例中圖像分類的主要方法流程圖; 圖5為本發(fā)明實(shí)施例中圖像分類的具體方法流程圖; 圖6為本發(fā)明實(shí)施例中輸出圖像的主要方法流程圖; 圖7為本發(fā)明實(shí)施例中輸出圖像的具體方法流程圖; 圖8為本發(fā)明實(shí)施例中表達(dá)"柔和"情感的圖片的示意圖。
具體實(shí)施方式
本發(fā)明實(shí)施例通過提取圖像中的顏色或顏色相間所構(gòu)成的形狀來分析該 圖像反映的情感,并將其歸入相應(yīng)的情感類別,實(shí)現(xiàn)了依據(jù)情感特征進(jìn)行圖像分類。本發(fā)明實(shí)施例中的圖像包括靜態(tài)的圖片和動(dòng)態(tài)的視頻圖像等。多媒體內(nèi)容包括文字、動(dòng)畫(如flash格式)、視頻類和音頻類(如歌曲)等。本發(fā)明實(shí)施 例中的形狀包括線條、圖形和輪廓等。本發(fā)明實(shí)施例中的樣本包括顏色類樣本 (稱為樣本顏色)、形狀類樣本(稱為樣本形狀)和詞語類樣本(稱為樣本詞)。本發(fā)明實(shí)施例主要包括兩個(gè)環(huán)節(jié), 一是分析圖像從而得到相應(yīng)的情感類 別,二是輸出與該情感類別有關(guān)的多媒體內(nèi)容。下面首先介紹分析圖像從而得 到相應(yīng)的情感類別的過程。參見圖1,本實(shí)施例中用于圖像分類的裝置IOO主要包括提取模塊101、 匹配模塊102和分類模塊103。提取模塊101用于獲得圖像內(nèi)的顏色和/或形狀??筛鶕?jù)分類時(shí)采用的機(jī)制 確定提取顏色、形狀或提取顏色和形狀。匹配模塊102用于將所述顏色和/或形狀與對應(yīng)的樣本顏色和/或樣本形狀 進(jìn)行匹配。具體應(yīng)用時(shí),根據(jù)提取模塊101提取到的顏色、形狀或提取顏色和 形狀與對應(yīng)的樣本進(jìn)4亍匹配。分類模塊103用于在匹配成功時(shí)根據(jù)樣本顏色和/或樣本形狀對應(yīng)的情感 類別,將所述圖像歸入該情感類別,同時(shí)形成了圖^f象與歸入的情感類別的對應(yīng) 關(guān)系。裝置IOO還可包括用于存儲樣本、圖像和圖像與情感類別的對應(yīng)關(guān)系等的 存儲模塊,本圖未示出。該存儲模塊可以是軟盤、硬盤、光盤和閃存等存儲介質(zhì)。裝置100實(shí)現(xiàn)了將圖像歸入情感類別,有了這種基于情感的分類,可以在多種應(yīng)用場景中采用該裝置,如進(jìn)一步根據(jù)圖像對應(yīng)的情感,輸出與該情感有 關(guān)的多媒體內(nèi)容,或者如為用戶提供輸入接口,根據(jù)用戶輸入的情感方面的詞 語來選擇圖像。針對輸出與該情感有關(guān)的多媒體內(nèi)容的情況,本實(shí)施例提供一種用于輸出圖像的裝置200,參見圖2所示,其包括歸類模塊201、控制模塊202和輸出 模塊203。裝置200可具體是一種用于瀏覽或播放圖像的軟件或插件等。歸類模塊201用于分析獲得的圖像的內(nèi)容,并將該圖像歸入相應(yīng)的情感類 別。歸類模塊201相當(dāng)于裝置100中的提取模塊101 、匹配模塊102和分類模 塊103??刂颇K202用于根據(jù)所述圖像歸入的情感類別及情感類別與多媒體內(nèi)容 的對應(yīng)關(guān)系,查找并確定多媒體內(nèi)容。由于多媒體內(nèi)容包括文字、動(dòng)畫、視頻 和音樂,所以控制模塊202可同時(shí)查找到相應(yīng)的文字、動(dòng)畫、視頻和音樂內(nèi)容。 其中,情感類別與多々某體內(nèi)容的對應(yīng)關(guān)系是手工建立的,或者是自動(dòng)識別和建 立的。用于建立情感類別與動(dòng)畫或視頻的對應(yīng)關(guān)系的模塊可參見歸類模塊201 或裝置100,本實(shí)施例提供用于建立情感類別與音樂的對應(yīng)關(guān)系的音樂模塊, 及用于識別文字并建立情感類別與文字的對應(yīng)關(guān)系的文字識別模塊。該音樂模 塊從音樂的音頻數(shù)據(jù)中提取出播放速度、力度、節(jié)奏、旋律、音色等各種音樂 基本元素;將從音頻數(shù)據(jù)中提取出的音樂基本元素與預(yù)設(shè)的各心理模型進(jìn)行匹 配,根據(jù)音頻數(shù)據(jù)匹配到的心理模型分入相應(yīng)的情感類別,并存儲情感類別與 音樂的對應(yīng)關(guān)系。輸出模塊203用于在輸出所述圖像時(shí)輸出確定的多媒體內(nèi)容。輸出模塊 203具體用于顯示文字、動(dòng)畫和視頻等,以及播放音樂,并且這兩個(gè)動(dòng)作可同 時(shí)進(jìn)行。輸出方式還可包括刻錄等。裝置200還可包括用于存儲圖像、多媒體內(nèi)容和情感類別與多媒體內(nèi)容的 對應(yīng)關(guān)系等的存儲模塊。裝置200還可包括圖像解碼模塊204、多媒體解碼模塊205、緩沖模塊206 和輸出處理模塊207,參見圖3所示。當(dāng)所述圖像是經(jīng)過編碼后的編碼數(shù)據(jù)時(shí),圖像解碼模塊204用于將所述圖 像的編碼數(shù)據(jù)解碼成原始數(shù)據(jù)。在輸出確定的多媒體內(nèi)容時(shí),若所述多媒體內(nèi)容是經(jīng)過編碼后的編碼數(shù)據(jù)時(shí),多媒體解碼模塊205用于將所述多媒體內(nèi)容的編碼數(shù)據(jù)解碼成原始數(shù)據(jù)。 緩沖模塊206用于緩存所述圖像和/或所述多媒體內(nèi)容。輸出模塊203從該 緩沖模塊中獲得所述圖像和/或所述多媒體內(nèi)容并輸出。緩沖模塊206可被進(jìn)一 步細(xì)化,其包括第一緩沖單元和第二緩沖單元。第一緩沖單元,用于緩存所述 圖像;第二緩沖單元,用于緩存所述多媒體內(nèi)容。當(dāng)所述多媒體內(nèi)容包括文字、動(dòng)畫和視頻中的至少一種內(nèi)容時(shí),輸出處理 模塊207用于在輸出所述圖像和所述多i某體內(nèi)容前,將所述多々某體內(nèi)容疊加在 所述圖像上。疊加方式包括覆蓋式(Overlay)和半透明式(Alpha blending )。 以上主要介紹了本發(fā)明實(shí)施例中的裝置部分,下面對具體實(shí)現(xiàn)過程進(jìn)行介紹。參見圖4,本實(shí)施例中圖像分類的主要方法流程如下步驟401:獲得圖像內(nèi)的顏色和/或形狀。可根據(jù)分類時(shí)采用的機(jī)制確定提 取顏色、形狀或提取顏色和形狀。步驟402:將所述顏色和/或形狀與對應(yīng)的樣本顏色和/或樣本形狀進(jìn)行匹 配。具體應(yīng)用時(shí),根據(jù)提取到的顏色、形狀或提取顏色和形狀與對應(yīng)的樣本進(jìn) 4亍匹配。步驟403:在匹配成功時(shí)根據(jù)樣本顏色和/或樣本形狀對應(yīng)的情感類別,將 所述圖像歸入該情感類別,同時(shí)形成了圖像與歸入的情感類別的對應(yīng)關(guān)系。當(dāng)沒有與圖像匹配成功的樣本時(shí),結(jié)束流程,也可將該圖像作為一個(gè)樣本, 人為的歸入一個(gè)情感類別,或?yàn)槠湫陆ㄒ磺楦蓄悇e。本實(shí)施例以3個(gè)情感類別為例進(jìn)行說明,例如,依據(jù)人類的3見覺體驗(yàn),將 紅色和黃色作為"熱烈"情感類別的樣本顏色,將藍(lán)色和綠色作為"柔和"情 感類別的樣本顏色,將黑色和白色作為"壓抑"情感類別的樣本顏色。參見圖5,關(guān)于顏色的情感分類的實(shí)現(xiàn)方法流程如下步驟501:獲得一幀圖像內(nèi)的顏色。步驟502: —幀圖像內(nèi)的顏色可能非常豐富,可通過各顏色占該幀圖像數(shù)據(jù)的百分比和統(tǒng)一相似顏色等手段確定至少一種主要顏色。例如,將不同程度的綠色,如RGB(O, 100,0)、 RGB(0,200,0) 、 RGB(50,200.25)等,都統(tǒng)一為 RGB(0,200,0),若只有RGB(0,100,0)和RGB(50,200.25)兩種,則將兩者的色度 取平均,或者依據(jù)兩者占圖像數(shù)據(jù)量的百分比取百分比較大的顏色。將占圖像 數(shù)據(jù)量百分比最大的顏色確定為主要顏色,也可確定更多的主要顏色。步驟503:將確定的主要顏色與樣本顏色進(jìn)行匹配。例如,主要顏色為淺 綠色,確定淺綠分別到紅、黃、藍(lán)、綠、黑和白的距離,最低的距離對應(yīng)的樣 本顏色即為匹配到的顏色,如匹配到綠色。或者,預(yù)先設(shè)定相似度閾值,淺綠 分別到紅、黃、藍(lán)、綠、黑和白的距離(相當(dāng)于相似度)是否有大于相似度閾 值,符合條件的距離對應(yīng)的樣本顏色即為匹配到的顏色。步驟504:在匹配成功時(shí)根據(jù)樣本顏色對應(yīng)的情感類別,確定所述圖像對 應(yīng)該情感類別。步驟505:可能存在主要顏色與多個(gè)樣本顏色匹配成功的情況,尤其是多 個(gè)樣本顏色對應(yīng)不同的情感類別,至少將圖像歸入對應(yīng)的情感類別中的一個(gè)。 此時(shí)有多種處理方式,如將該圖像歸入匹配到的多個(gè)情感類別;或者將該圖像 歸入其中一個(gè)情感類別。歸入其中之一時(shí),可以有多種選擇方式,如隨機(jī)選擇, 或者如選擇靠近"熱烈,,情感類別的一項(xiàng),或者如選擇靠近"壓抑"情感類別 的一項(xiàng),或者如選擇中間的情感類別(如"柔和"情感類別);還可以為各情 感類別設(shè)定優(yōu)先級,優(yōu)先級越高越靠近"熱烈"情感類別,將對應(yīng)的多個(gè)情感 類別的優(yōu)先級取平均值,根據(jù)該平均值與各優(yōu)先級的距離確定歸入的情感類 別。根據(jù)形狀的情感類別的歸類與依據(jù)顏色的方法類似,比如,完全是直線的 形狀對應(yīng)"壓抑"情感類別,完全是曲線的形狀對應(yīng)"熱烈"情感類別,兩者 之間的形狀都對應(yīng)"柔和"情感類別。或者,例如,清晰的^^廓對應(yīng)"明快直 爽"(相當(dāng)于"熱烈")的情感類別,而緩慢過渡的邊緣對應(yīng)"朦朧柔和"(相 當(dāng)于柔和)的情感類別等。當(dāng)同時(shí)依據(jù)顏色和形狀來進(jìn)行圖像分類時(shí),如果匹配的結(jié)果對應(yīng)同 一情感類別,則可將圖像直接歸入該情感類別;如果匹配的結(jié)果對應(yīng)不同的情感類別, 則處理方式可參見步驟505中的描述。關(guān)于圖像的情感分類方法不限于此,可對圖像內(nèi)容作深入分析。如通過才莫 式識別獲知圖像中的具體內(nèi)容,如其包含有大海、沙灘和白云等,本實(shí)施例將 這類自然景觀都?xì)w為"柔和"情感類別。如果分析得到圖像中包含有人,可以 進(jìn)一步分析人臉表情或動(dòng)作,如大笑歸為"熱烈"情感類別,微笑歸為"柔和,, 情感類別,悲傷和哭泣歸為"壓抑"情感類別等。與裝置的描述對應(yīng)的,針對輸出與該情感有關(guān)的多々某體內(nèi)容的情況,參見 圖6所示,本實(shí)施例中輸出圖像的主要方法流程如下步驟601:分析獲得的圖像的內(nèi)容,并確定與該圖像對應(yīng)的情感類別。此 步驟的具體實(shí)現(xiàn)過程可參見圖4或圖5所示的流程。步驟602:根據(jù)所述圖像對應(yīng)的情感類別及情感類別與多媒體內(nèi)容的對應(yīng) 關(guān)系,確定需要的多媒體內(nèi)容。步驟603:在輸出所述圖像時(shí)輸出確定的多媒體內(nèi)容。輸出的形式包括顯 示、播放和刻錄等。多媒體內(nèi)容的種類和個(gè)數(shù)都可能不唯一 ,所以在輸出多媒體內(nèi)容時(shí)有多種 具體的處理方式,參見圖7所示,具體輸出圖像的過程如下步驟701:獲得圖像并分析圖像的內(nèi)容。例如,參見圖8所示,圖像的內(nèi) 容主要是明媚的風(fēng)景和可愛的動(dòng)物。步驟702:確定該圖像對應(yīng)的情感類別。例如,本實(shí)施例中確定風(fēng)景和可 愛的動(dòng)物都屬于"柔和"情感類別。步驟703:根據(jù)圖像對應(yīng)的情感類別,查找情感類別與多媒體內(nèi)容的對應(yīng) 關(guān)系,并獲得相應(yīng)的多媒體內(nèi)容。若查找失敗則可直接結(jié)束流程。例如,通過 "柔和"情感類別查找到動(dòng)畫和曲調(diào)舒緩的音樂。本實(shí)施例是以獲得與圖像表 達(dá)的情感一致的多媒體內(nèi)容為例進(jìn)行的說明,也可以獲得與圖像表達(dá)的情感相反的多媒體內(nèi)容。多媒體內(nèi)容包括多種形式,獲得的多媒體內(nèi)容若至少存在兩種,如既有視頻又有音樂,則具體的處理方式有多種,繼續(xù)步驟704。步驟704:根據(jù)多媒體內(nèi)容的性質(zhì)確定輸出多々某體內(nèi)容的形式。如視頻不 不包括音樂,則可同時(shí)顯示視頻內(nèi)容和播放音樂;若視頻包括音樂,則優(yōu)先輸 出視頻內(nèi)容,或者優(yōu)先輸出音樂。步驟705:按照確定的方式輸出獲得的多媒體內(nèi)容。例如,在用戶瀏覽風(fēng) 景圖片時(shí),在圖片的右下角顯示使用戶感到輕松的動(dòng)畫,并同時(shí)播放舒緩的音 樂。多媒體內(nèi)容可能有多個(gè),多個(gè)視頻和多個(gè)音樂,此時(shí)可以隨機(jī)輸出該多個(gè) 多媒體內(nèi)容,或者循環(huán)輸出該多個(gè)多媒體內(nèi)容等。其中,在步驟703中提到了情感類別與多々某體內(nèi)容的對應(yīng)關(guān)系,該對應(yīng)關(guān) 系可以是手工建立的,也可以是自動(dòng)建立的。自動(dòng)建立圖像與情感類別的對應(yīng) 關(guān)系的方式可參見圖4和圖5所示的流程。下面簡單介紹自動(dòng)建立音樂與情感 類別的對應(yīng)關(guān)系。從音頻數(shù)據(jù)中提取播放速度、力度、節(jié)奏、旋律、音色等各種音樂基本元 素;將從各音頻數(shù)據(jù)中提取出的音樂基本元素分別與預(yù)設(shè)的各心理模型進(jìn)行匹 配,將解碼后的音頻數(shù)據(jù)對應(yīng)到匹配的心理模型所對應(yīng)的情感類別,并存儲情 感類別與該音樂的對應(yīng)關(guān)系。以節(jié)奏為例,獲得音樂與情感類別的對應(yīng)關(guān)系的 過程如下以幀為單位接收音頻解碼后的音頻數(shù)據(jù),對當(dāng)前接收到的一幀音頻數(shù)據(jù) (包括1024個(gè)采樣點(diǎn)的時(shí)域信號)使用FFT變換將信號從時(shí)域編換到頻域,得到頻域復(fù)信號a"+jbn, n為大于等于0且小于等于511的正整數(shù)。 計(jì)算頻域復(fù)信號的幅度A[n^^a +、2 。按照預(yù)先劃分的多個(gè)子帶,分別計(jì)算每個(gè)子帶的幅度,作為瞬時(shí)能量。例如,可以按照50 200、 200~400、 400~800、 800~1600、 1600 3200、 3200Hz以上,共劃分6個(gè)子帶。邵]=—Z剩實(shí)際應(yīng)用中,瞬時(shí)能量可按照如下公式來計(jì)算 『'"=s,,其中,表示第i個(gè)子帶的瞬時(shí)能量、^表示第i個(gè)子帶的寬度、《表示第i個(gè)子帶的 起始鐠線,i為大于1的正整數(shù)。每次執(zhí)行402c之后,均存儲當(dāng)前幀的各子帶瞬時(shí)能量,并按照先進(jìn)先出 的原則,刪除最先存儲的一個(gè)幀的各子帶瞬時(shí)能量。讀取已存儲的m個(gè)幀的各子帶的瞬時(shí)能量^0[。,分別計(jì)算m個(gè)幀在每個(gè)子帶的瞬時(shí)能量£/w的平均值"w和方差。其中,m為1秒內(nèi)緩存在歷史能量緩沖子單元2054的幀數(shù)量,m的取值 通常為43。實(shí)際應(yīng)用中,第i個(gè)子帶的瞬時(shí)能量平均值^^']和第i個(gè)子帶的瞬時(shí)能量五4。=丄§五0;[/]方差£叩]可以分別按照如下公式來計(jì)算 m戶。,j為大于等于i且小于等于m的正整數(shù)、£^[/]為讀取的第j個(gè)幀的第i個(gè)子帶的瞬時(shí)能量;附)=0根據(jù)計(jì)算得到的和£F[。,判斷當(dāng)前幀每個(gè)子帶的瞬時(shí)能量£/w是否為 峰值能量,如果是,則將判斷為峰值能量的^w確定為提取的音樂基本元素并 輸出,即實(shí)現(xiàn)了音樂基本元素中節(jié)奏的提取。其中,當(dāng)^[。大于cx ^w、且^「w大于v時(shí),判斷^w為峰值能量,c和V是兩個(gè)由實(shí)驗(yàn)確定的常數(shù),通常情況下,C=250, V=150。用于實(shí)現(xiàn)本發(fā)明實(shí)施例的軟件可存儲于軟盤、硬盤、光盤和閃存等存儲介質(zhì)中。本發(fā)明實(shí)施例通過分析圖像的內(nèi)容獲知了圖像所表達(dá)的情感,并輸出與該 情感有關(guān)的多媒體內(nèi)容,以提高用戶體驗(yàn)。本發(fā)明實(shí)施例具體提供了多種分析圖像情感的方法,并且多媒體內(nèi)容的形式多樣,用戶可根據(jù)實(shí)際需要隨意選擇。 本發(fā)明實(shí)施例可在多種實(shí)際場景中應(yīng)用,如電子相框、動(dòng)畫影視制作中的輔助 工具等。明的精神和范圍。這樣,倘若對本發(fā)明的這些修改和變型屬于本發(fā)明權(quán)利要求 及其等同技術(shù)的范圍之內(nèi),則本發(fā)明也意圖包含這些改動(dòng)和變型在內(nèi)。
權(quán)利要求
1、一種輸出圖像的方法,其特征在于,包括以下步驟分析獲得的圖像的內(nèi)容,并確定該圖像對應(yīng)的情感類別;根據(jù)所述圖像對應(yīng)的情感類別及情感類別與多媒體內(nèi)容的對應(yīng)關(guān)系,確定需要的多媒體內(nèi)容;在輸出所述圖像時(shí)輸出確定的多媒體內(nèi)容。
2、 如權(quán)利要求1所述的方法,其特征在于,分析獲得的圖像的內(nèi)容并確 定與該圖像對應(yīng)的情感類別的步驟包括獲得圖像內(nèi)的顏色和/或形狀;在匹配成功時(shí)根據(jù)樣本顏色和/或樣本形狀對應(yīng)的情感類別,將所述圖像歸 入該情感類別。
3、 如權(quán)利要求2所述的方法,其特征在于,將所述顏色與樣本顏色進(jìn)行 匹配并匹配成功的步驟包括確定所述顏色與樣本顏色的相似度,并確定該相 似度大于預(yù)設(shè)的相似度閾值。
4、 如權(quán)利要求2所述的方法,其特征在于,所述樣本顏色為多個(gè);將所 述顏色與樣本顏色進(jìn)行匹配并匹配成功的步驟包括確定所述顏色到各樣本顏 色的距離,距離最近的樣本顏色為匹配成功的樣本顏色。
5、 如權(quán)利要求2所述的方法,其特征在于,將所述形狀與樣本形狀進(jìn)行 匹配并匹配成功的步驟包括確定所述形狀與樣本形狀的相似度,并確定該相 似度大于預(yù)設(shè)的相似度閾值。
6、 如權(quán)利要求2所述的方法,其特征在于,當(dāng)所述顏色與樣本顏色對應(yīng) 到第一情感類別、所述形狀與樣本形狀對應(yīng)到第二情感類別時(shí),根據(jù)第一情感 類別和第二情感類別的優(yōu)先級確定所述圖像歸入該情感類別。
7、 如權(quán)利要求1至6中任一項(xiàng)所述的方法,其特征在于,所述多媒體內(nèi) 容包括文字、動(dòng)畫、音頻和視頻中的至少一種內(nèi)容。
8、 如權(quán)利要求7中任一項(xiàng)所述的方法,其特征在于,當(dāng)所述圖像歸入的 情感類別對應(yīng)至少兩種多媒體內(nèi)容時(shí),同時(shí)輸出該至少兩種多媒體內(nèi)容。
9、 如權(quán)利要求1至6中任一項(xiàng)所述的方法,其特征在于,確定的多々某體 內(nèi)容為多個(gè);隨機(jī)輸出該多個(gè)多媒體內(nèi)容,或者循環(huán)輸出該多個(gè)多媒體內(nèi)容。
10、 如權(quán)利要求1至6中任一項(xiàng)所述的方法,其特征在于,情感類別與多 媒體內(nèi)容的對應(yīng)關(guān)系是自動(dòng)識別和建立的;或者情感類別與多Jf某體內(nèi)容的對應(yīng)關(guān)系是手工建立的,
11、 如權(quán)利要求1至6中任一項(xiàng)所述的方法,其特征在于,所述多々某體內(nèi) 容包括文字、動(dòng)畫和視頻中的至少一種內(nèi)容;以疊加顯示的方式在所述圖像上 輸出所述多媒體內(nèi)容。
12、 如權(quán)利要求11所述的方法,其特征在于,所述疊加顯示的方式包括 覆蓋或半透明。
13、 一種用于輸出圖像的裝置,其特征在于,包括歸類模塊,用于分析獲得的圖像的內(nèi)容,并將該圖像歸入相應(yīng)的情感類別; 控制模塊,用于根據(jù)所述圖像歸入的情感類別及情感類別與多媒體內(nèi)容的 對應(yīng)關(guān)系,確定需要的多士某體內(nèi)容;輸出模塊,用于在輸出所述圖像時(shí)輸出確定的多媒體內(nèi)容。
14、 如權(quán)利要求13所述的裝置,其特征在于,所述多媒體內(nèi)容包括文字、 動(dòng)畫、音頻和視頻中的至少一種內(nèi)容。
15、 如權(quán)利要求14所述的裝置,其特征在于,還至少包括下列模塊之一 用于分析音樂表達(dá)的情感,并建立情感類別與音樂內(nèi)容的對應(yīng)關(guān)系的模塊;用于分析動(dòng)畫或一見頻表達(dá)的情感,并建立情感類別與動(dòng)畫或視頻內(nèi)容的對 應(yīng)關(guān)系的模塊;用于分析文字表達(dá)的情感,并建立情感類別與文字內(nèi)容的對應(yīng)關(guān)系的模塊。
全文摘要
本發(fā)明公開了一種輸出圖像的方法,用于實(shí)現(xiàn)在輸出圖像時(shí),根據(jù)圖像表達(dá)的情感播放與這種情感相關(guān)的多媒體內(nèi)容,提高了用戶體驗(yàn)。所述方法為分析獲得的圖像的內(nèi)容,并確定該圖像對應(yīng)的情感類別;根據(jù)所述圖像對應(yīng)的情感類別及情感類別與多媒體內(nèi)容的對應(yīng)關(guān)系,確定需要的多媒體內(nèi)容;在輸出所述圖像時(shí)輸出確定的多媒體內(nèi)容。本發(fā)明還公開了與輸出圖像的方法對應(yīng)的裝置。
文檔編號G06F17/30GK101271528SQ20081010392
公開日2008年9月24日 申請日期2008年4月11日 優(yōu)先權(quán)日2008年4月11日
發(fā)明者律 謝 申請人:北京中星微電子有限公司