專(zhuān)利名稱:標(biāo)記多個(gè)數(shù)字圖像的系統(tǒng)和方法
技術(shù)領(lǐng)域:
本發(fā)明涉及呈現(xiàn)數(shù)字圖像的電子裝置,具體地說(shuō),涉及下述系統(tǒng)和方法,其以方便且高效的方式標(biāo)記多個(gè)數(shù)字圖像以提供用于數(shù)字圖像的數(shù)據(jù)庫(kù)的改進(jìn)的組織機(jī)制。
背景技術(shù):
除常規(guī)的圖像采集電路之外,當(dāng)代的數(shù)字照相機(jī)通常還包括嵌入的數(shù)字照片簿或數(shù)字照片管理應(yīng)用。此外,隨著數(shù)字成像電路已經(jīng)變得越來(lái)越便宜,包括移動(dòng)電話、便攜式數(shù)據(jù)助理(PDA)和其它移動(dòng)電子裝置的其它便攜式裝置除了包括常規(guī)的移動(dòng)電話應(yīng)用外, 通常也包括嵌入的圖像采集電路(例如,數(shù)字照相機(jī))和數(shù)字照片簿或數(shù)字照片管理應(yīng)用。流行的數(shù)字照片管理應(yīng)用包括用于組織數(shù)字照片的若干功能。標(biāo)記是一種這樣的功能,其中用戶選擇數(shù)字照片或其一部分并且將選擇的數(shù)字照片或者其一部分與文本條目關(guān)聯(lián)。文本條目通常指“文本標(biāo)記”,并且可以為數(shù)字圖像或數(shù)字圖像內(nèi)描述的具體主題提供識(shí)別標(biāo)簽(label)。標(biāo)記可以存儲(chǔ)在包含數(shù)字圖像的數(shù)據(jù)文件中,這包括例如將標(biāo)記并入圖像文件的元數(shù)據(jù)中的方式。額外地或替代地,標(biāo)記可以存儲(chǔ)在單獨(dú)的數(shù)據(jù)庫(kù)中,該單獨(dú)的數(shù)據(jù)庫(kù)鏈接到相應(yīng)的數(shù)字圖像的數(shù)據(jù)庫(kù)。給定的數(shù)字照片或圖像可以包含多個(gè)標(biāo)記,并且/或者標(biāo)記可以與多個(gè)數(shù)字圖像關(guān)聯(lián)。每個(gè)標(biāo)記可以與數(shù)字照片中的不同主題關(guān)聯(lián),一個(gè)主題可以具有多個(gè)標(biāo)記,并且/或者一個(gè)給定的標(biāo)記可以與單個(gè)數(shù)字照片中的多個(gè)主題關(guān)聯(lián)或與多個(gè)照片中的多個(gè)主題關(guān)聯(lián)。例如,假設(shè)拍攝一張包括一個(gè)主題人物的數(shù)字照片,其中主題人物為用戶的父親。 用戶可以將與數(shù)字圖像關(guān)聯(lián)的諸如“父親”、“家庭”和“假期”(例如,如果用戶的父親在休假時(shí)被拍攝)的一個(gè)或多個(gè)標(biāo)記應(yīng)用于該照片。該數(shù)字照片可以包括每一個(gè)與其自己的標(biāo)記關(guān)聯(lián)的其它主題人物。例如,如果該照片還包括用戶的兄弟,則該照片也可以被標(biāo)記為“兄弟”。包含用戶的父親的圖像的其它照片可以與第一照片共享標(biāo)記,并缺少其它標(biāo)記。例如, 在家拍攝的用戶的父親的照片可以被標(biāo)記為“父親”和“家庭”,但沒(méi)有標(biāo)記為“假期”。作為另一示例,僅包括用戶的母親的假期照片也可以被標(biāo)記為“家庭”和“假期”,但沒(méi)有標(biāo)記為 “父親”。因此,將理解的是,標(biāo)記的網(wǎng)絡(luò)可以應(yīng)用于數(shù)字圖像的數(shù)據(jù)庫(kù)以生成數(shù)據(jù)庫(kù)的綜合組織結(jié)構(gòu)。具體地說(shuō),數(shù)字圖像的標(biāo)記已經(jīng)成為用于為了在可經(jīng)由互聯(lián)網(wǎng)或其它通信網(wǎng)絡(luò)訪問(wèn)的社交網(wǎng)絡(luò)站點(diǎn)上發(fā)布、與其它電子裝置共享、打印和操作等而對(duì)朋友、家庭、目的、 事件和其它主題的照片進(jìn)行組織的有用工具。一旦數(shù)據(jù)庫(kù)中的數(shù)字圖像與標(biāo)記完全關(guān)聯(lián), 則可以通過(guò)傳統(tǒng)方法來(lái)進(jìn)行搜索以訪問(wèn)類(lèi)似的照片。在以上描述的示例中,希望在社交網(wǎng)絡(luò)站點(diǎn)上發(fā)布假期照片的用戶可以簡(jiǎn)單地通過(guò)“假期”標(biāo)記搜索數(shù)字圖像數(shù)據(jù)庫(kù)以一次性地識(shí)別和訪問(wèn)他假期的所有用戶照片,然后可以將這些照片發(fā)布在社交網(wǎng)絡(luò)站點(diǎn)上。類(lèi)似地,如果用戶想要訪問(wèn)和/或發(fā)布他母親的照片,則用戶可以通過(guò)“母親”標(biāo)記來(lái)搜索數(shù)據(jù)庫(kù),以此類(lèi)推。盡管用于為了操作而組織數(shù)字照片的標(biāo)記的普及和越來(lái)越多的使用,但是用于添
5加標(biāo)記的當(dāng)前系統(tǒng)已經(jīng)證實(shí)是有缺陷的。一種標(biāo)記方法是用戶手動(dòng)輸入。如果數(shù)字圖像和包含的主題的數(shù)據(jù)庫(kù)相對(duì)較大,那么手動(dòng)標(biāo)記是耗時(shí)和麻煩的。在減少與手動(dòng)標(biāo)記相關(guān)的工作的嘗試中,一些標(biāo)記應(yīng)用可以保持用戶可以較容易從其選擇標(biāo)記的最近的標(biāo)記、常用的標(biāo)記等等的列表。即使在這樣的改進(jìn)的情況下,對(duì)于大量的數(shù)字圖像而言,手動(dòng)標(biāo)記仍然被證明是麻煩的。為了克服與手動(dòng)標(biāo)記相關(guān)的負(fù)擔(dān),已經(jīng)開(kāi)發(fā)了自動(dòng)標(biāo)記技術(shù),其應(yīng)用識(shí)別算法以識(shí)別數(shù)字圖像的數(shù)據(jù)庫(kù)中描述的主題。在識(shí)別算法中,在數(shù)字圖像中描述的主題可以與圖像的參考數(shù)據(jù)庫(kù)進(jìn)行比較以嘗試識(shí)別主題。這種識(shí)別算法尤其已經(jīng)被以臉部識(shí)別的形式應(yīng)用于主題人物。然而,臉部識(shí)別也被證實(shí)是有缺陷的。臉部識(shí)別的準(zhǔn)確性仍是受限的,尤其是在大的參考數(shù)據(jù)庫(kù)的情況下。很可能的是,即使共享公共的整體特征的普通“相似”可能被錯(cuò)誤識(shí)別,并且因此被錯(cuò)誤地標(biāo)記。當(dāng)然,錯(cuò)誤標(biāo)記將破壞任何自動(dòng)標(biāo)記系統(tǒng)的有用性。 因?yàn)槟繕?biāo)識(shí)別已經(jīng)被證實(shí)難以準(zhǔn)確地執(zhí)行,因此當(dāng)這樣的算法總體地應(yīng)用于對(duì)象時(shí)當(dāng)前的自動(dòng)標(biāo)記系統(tǒng)的準(zhǔn)確性進(jìn)一步降低。此外,常規(guī)的手動(dòng)和識(shí)別標(biāo)記系統(tǒng)通常一次僅標(biāo)記一個(gè)數(shù)字圖像。然而,如上所述,為了提供數(shù)字圖像數(shù)據(jù)庫(kù)的綜合組織結(jié)構(gòu),常常需要多個(gè)數(shù)字圖像共享一個(gè)或多個(gè)公共標(biāo)記。即使當(dāng)使用識(shí)別或其它自動(dòng)標(biāo)記系統(tǒng)時(shí),單個(gè)地標(biāo)記每個(gè)數(shù)字圖像也是麻煩和耗時(shí)的。
發(fā)明內(nèi)容
因此,在本領(lǐng)域中需要用于呈現(xiàn)在電子裝置上的數(shù)字圖像(以及數(shù)字圖像的部分)的操作和組織的改進(jìn)的系統(tǒng)和方法。具體地說(shuō),在本領(lǐng)域中需要利用一個(gè)或多個(gè)公共標(biāo)記一次對(duì)多個(gè)數(shù)字圖像進(jìn)行文本標(biāo)記的改進(jìn)的系統(tǒng)和方法。因此,一種用于標(biāo)記多個(gè)數(shù)字圖像的系統(tǒng)包括具有用于呈現(xiàn)多個(gè)數(shù)字圖像的顯示器的電子裝置。電子裝置中的接口接收對(duì)呈現(xiàn)的圖像中的一個(gè)圖像內(nèi)的關(guān)注區(qū)域的輸入, 并接收對(duì)呈現(xiàn)的圖像中將與關(guān)注區(qū)域關(guān)聯(lián)的圖像的選擇。在一種實(shí)施方式中,接口可以是顯示器上的表面或者觸摸屏接口,并且可以通過(guò)利用觸摸筆、手指或者其它適合的輸入裝置與觸摸屏表面交互來(lái)提供對(duì)關(guān)注區(qū)域的輸入和對(duì)關(guān)聯(lián)圖像的選擇。電子裝置中的輸入裝置接收基于關(guān)注區(qū)域輸入的標(biāo)記,然后將該標(biāo)記應(yīng)用于關(guān)聯(lián)圖像。在一種實(shí)施方式中,輸入裝置是接收標(biāo)記文本的手動(dòng)輸入的鍵盤(pán)。 替代地,可以執(zhí)行自動(dòng)標(biāo)記操作。在自動(dòng)標(biāo)記中,可以向網(wǎng)絡(luò)標(biāo)記生成服務(wù)器發(fā)送呈現(xiàn)的圖像的部分。服務(wù)器可以將圖像部分與圖像的參考數(shù)據(jù)庫(kù)進(jìn)行比較以識(shí)別圖像部分的公共主題。服務(wù)器可以生成基于公共主題的多個(gè)建議標(biāo)記,并向電子裝置發(fā)送建議標(biāo)記。 用戶可以接受建議標(biāo)記中的一個(gè),并可以將接受的標(biāo)記應(yīng)用于關(guān)聯(lián)圖像中的每一個(gè)。因此,根據(jù)本發(fā)明的一方面,電子裝置包括用于呈現(xiàn)多個(gè)數(shù)字圖像的顯示器。接口接收對(duì)呈現(xiàn)的所述多個(gè)圖像中的至少一個(gè)圖像內(nèi)的關(guān)注區(qū)域的輸入,并接收對(duì)呈現(xiàn)的所述多個(gè)圖像中將與關(guān)注區(qū)域關(guān)聯(lián)的圖像的選擇。輸入裝置接收基于關(guān)注區(qū)域的將應(yīng)用于關(guān)聯(lián)圖像的標(biāo)記輸入,并且控制器被構(gòu)造為接收標(biāo)記輸入,并將標(biāo)記應(yīng)用于關(guān)聯(lián)圖像中的每一個(gè)。根據(jù)電子裝置的一種實(shí)施方式,輸入裝置被構(gòu)造為接收標(biāo)記的手動(dòng)輸入。
根據(jù)電子裝置的一種實(shí)施方式,控制器被構(gòu)造為從關(guān)聯(lián)圖像中的每一個(gè)提取圖像部分,所述圖像部分包含基于關(guān)注區(qū)域的公共主題。電子裝置包括通信電路,該通信電路用于向標(biāo)記生成服務(wù)器發(fā)送圖像部分,并用于接收基于公共主題的來(lái)自標(biāo)記生成服務(wù)器的多個(gè)標(biāo)記建議。輸入裝置接收對(duì)建議的標(biāo)記中的一個(gè)的輸入,并且控制器被進(jìn)一步構(gòu)造為將接受的標(biāo)記應(yīng)用于關(guān)聯(lián)圖像中的每一個(gè)。根據(jù)電子裝置的一種實(shí)施方式,每個(gè)圖像部分包括分別從每個(gè)關(guān)聯(lián)圖像提取的縮略圖部分。根據(jù)電子裝置的一種實(shí)施方式,每個(gè)圖像部分包括公共主題的對(duì)象印章。根據(jù)電子裝置的一種實(shí)施方式,接口包括顯示器上的觸摸屏表面,并且通過(guò)在觸摸屏表面的位于至少一個(gè)呈現(xiàn)的圖像內(nèi)的部分上繪制關(guān)注區(qū)域來(lái)輸入關(guān)注區(qū)域。根據(jù)電子裝置的一種實(shí)施方式,通過(guò)與觸摸屏表面的位于將被關(guān)聯(lián)的每個(gè)圖像內(nèi)的部分交互從所呈現(xiàn)的所述多個(gè)圖像中選擇關(guān)聯(lián)圖像。根據(jù)電子裝置的一種實(shí)施方式,該電子裝置還包括觸摸筆,該觸摸筆用于向觸摸屏表面提供輸入。根據(jù)電子裝置的一種實(shí)施方式,接口包括顯示器上的觸摸屏表面,并且顯示器具有顯示部分,該顯示部分用于顯示輸入的關(guān)注區(qū)域,并且通過(guò)與觸摸屏表面交互來(lái)選擇關(guān)聯(lián)圖像以將顯示的關(guān)注區(qū)域應(yīng)用于將關(guān)聯(lián)的每個(gè)圖像。根據(jù)電子裝置的一種實(shí)施方式,分別為多個(gè)呈現(xiàn)的圖像輸入相應(yīng)的多個(gè)關(guān)注區(qū)域,并且控制器被構(gòu)造為將標(biāo)記應(yīng)用于與至少一個(gè)關(guān)注區(qū)域關(guān)聯(lián)的每個(gè)圖像。根據(jù)電子裝置的一種實(shí)施方式,至少第一標(biāo)記和第二標(biāo)記被應(yīng)用于至少一個(gè)關(guān)聯(lián)圖像,其中第一標(biāo)記對(duì)應(yīng)于總圖像分類(lèi),并且第二標(biāo)記對(duì)應(yīng)于總圖像分類(lèi)中的具體圖像分類(lèi)。根據(jù)本發(fā)明的另一方面,標(biāo)記生成服務(wù)器包括網(wǎng)絡(luò)接口,該網(wǎng)絡(luò)接口用于從電子裝置接收多個(gè)圖像部分,每個(gè)圖像部分是分別從多個(gè)關(guān)聯(lián)圖像提取的。數(shù)據(jù)庫(kù)包括多個(gè)參考圖像??刂破鞅粯?gòu)造為將接收的圖像部分與參考圖像進(jìn)行比較以識(shí)別圖像部分的公共主題,并被構(gòu)造為生成將應(yīng)用于每個(gè)關(guān)聯(lián)圖像的基于公共主題的多個(gè)標(biāo)記建議,其中,標(biāo)記建議經(jīng)由網(wǎng)絡(luò)接口發(fā)送給電子裝置。根據(jù)標(biāo)記生成服務(wù)器的一種實(shí)施方式,如果控制器不能識(shí)別公共主題,則控制器被構(gòu)造為生成無(wú)法標(biāo)記指示,其中所述無(wú)法標(biāo)記指示經(jīng)由網(wǎng)絡(luò)接口發(fā)送給電子裝置。根據(jù)標(biāo)記生成服務(wù)器的一種實(shí)施方式,網(wǎng)絡(luò)接口從電子裝置接收每一個(gè)都從第一組關(guān)聯(lián)圖像提取的第一組圖像部分,以及每一個(gè)都從第二組關(guān)聯(lián)圖像提取的第二組圖像部分??刂破鞅粯?gòu)造為將第一組圖像部分與參考圖像進(jìn)行比較以識(shí)別第一組圖像部分的第一公共主題,并被構(gòu)造為生成將應(yīng)用于每個(gè)第一關(guān)聯(lián)圖像的基于第一公共主題的第一多個(gè)標(biāo)記建議??刂破鬟€被構(gòu)造為將第二組圖像部分與參考圖像進(jìn)行比較以識(shí)別第二組圖像部分的第二公共主題,并被構(gòu)造為生成將應(yīng)用于每個(gè)第二關(guān)聯(lián)圖像的基于第二公共主題的第二多個(gè)標(biāo)記建議。第一多個(gè)標(biāo)記建議和第二多個(gè)標(biāo)記建議經(jīng)由網(wǎng)絡(luò)接口發(fā)送給電子裝置。根據(jù)標(biāo)記生成服務(wù)器的一種實(shí)施方式,每個(gè)參考圖像分別包括數(shù)字圖像的對(duì)象印早。根據(jù)本發(fā)明的另一方面,一種標(biāo)記多個(gè)數(shù)字圖像的方法包括以下步驟在顯示器上呈現(xiàn)多個(gè)數(shù)字圖像;接收對(duì)所述多個(gè)數(shù)字圖像中的至少一個(gè)圖像內(nèi)的關(guān)注區(qū)域的輸入; 接收對(duì)呈現(xiàn)的所述多個(gè)圖像中的圖像的選擇并將選擇的圖像與關(guān)注區(qū)域關(guān)聯(lián);接收對(duì)將應(yīng)用于關(guān)聯(lián)圖像的標(biāo)記的輸入;以及將輸入的標(biāo)記應(yīng)用于關(guān)聯(lián)圖像中的每一個(gè)。根據(jù)該方法的一種實(shí)施方式,接收標(biāo)記輸入包括接收標(biāo)記的手動(dòng)輸入。根據(jù)該方法的一種實(shí)施方式,該方法還包括從關(guān)聯(lián)圖像中的每一個(gè)提取圖像部分,各圖像部分包含基于關(guān)注區(qū)域的公共主題;向標(biāo)記生成服務(wù)器發(fā)送圖像部分;從標(biāo)記生成服務(wù)器接收基于公共主題的多個(gè)標(biāo)記建議;以及將至少一個(gè)建議標(biāo)記應(yīng)用于關(guān)聯(lián)圖像中的每一個(gè)。根據(jù)該方法的一種實(shí)施方式,該方法還包括接收分別用于多個(gè)呈現(xiàn)的圖像的相應(yīng)多個(gè)關(guān)注區(qū)域的輸入;以及將標(biāo)記應(yīng)用于與至少一個(gè)關(guān)注區(qū)域關(guān)聯(lián)的每個(gè)圖像。根據(jù)該方法的一種實(shí)施方式,該方法還包括將至少第一標(biāo)記和第二標(biāo)記應(yīng)用于至少一個(gè)關(guān)聯(lián)圖像,其中第一標(biāo)記對(duì)應(yīng)于總圖像分類(lèi),并且第二標(biāo)記對(duì)應(yīng)于總圖像分類(lèi)中的具體圖像分類(lèi)。參照以下描述和附圖,本發(fā)明的這些特征以及進(jìn)一步特征將是顯而易見(jiàn)的。在說(shuō)明書(shū)和附圖中,已經(jīng)詳細(xì)地公開(kāi)了本發(fā)明的特定實(shí)施方式,如其中可以采用本發(fā)明的原則的一些方式所表示的,然而理解的是,本發(fā)明沒(méi)有在范圍上受相應(yīng)的限制。相反地,本發(fā)明包括落入所附的權(quán)利要求的精神和范圍內(nèi)的所有變化、修改和等同物。對(duì)于一種實(shí)施方式中描述和/或示出的特征可以以同樣的方式或相似的方式用于一個(gè)或多個(gè)其它實(shí)施方式和/或與其它實(shí)施方式結(jié)合或替代其它實(shí)施方式的特征。應(yīng)當(dāng)強(qiáng)調(diào)的是,說(shuō)明書(shū)中使用的術(shù)語(yǔ)“包括”用來(lái)指明所述特征、部件、步驟或組件的存在,但并不排除一個(gè)或更多其它特征、部件、步驟、組件或其組合的存在或者添加。
圖1是作為包括標(biāo)記應(yīng)用的示例性電子裝置的移動(dòng)電話的示意性正視圖。圖2是圖1的移動(dòng)電話的操作部分的示意性框圖。圖3是描述利用公共標(biāo)記來(lái)標(biāo)記多個(gè)數(shù)字圖像的示例性方法的概況的流程圖。圖4描述電子裝置的顯示器上將標(biāo)記的多個(gè)圖像的示例性呈現(xiàn)。圖5和圖6均描述了關(guān)聯(lián)多個(gè)圖像以便于進(jìn)行標(biāo)記的示例性處理。圖7描述了示例性組織標(biāo)記樹(shù),其表示標(biāo)記可以彼此相關(guān)的方式的示例。圖8是其中可以運(yùn)行圖1的移動(dòng)電話的通信系統(tǒng)的示意圖。圖9描述了示例性標(biāo)記生成服務(wù)器的操作部分的功能框圖。圖10是從用戶電子裝置的視角描繪利用公共標(biāo)記自動(dòng)標(biāo)記多個(gè)數(shù)字圖像的示例性方法的概況的流程圖。圖11描述了示例性自動(dòng)標(biāo)記操作。圖12是從網(wǎng)絡(luò)標(biāo)記生成服務(wù)器的視角描繪利用公共標(biāo)記自動(dòng)標(biāo)記多個(gè)數(shù)字圖像的示例性方法的概況的流程圖。圖13描述了基于對(duì)象識(shí)別的示例性自動(dòng)標(biāo)記操作。圖14描述了基于用戶定義的標(biāo)準(zhǔn)的示例性自動(dòng)標(biāo)記操作。
8
具體實(shí)施例方式現(xiàn)在將參考附圖描述本發(fā)明的實(shí)施方式,在整個(gè)附圖中,相同的附圖標(biāo)記用于表示相同的元件。將理解的是,附圖不必按比例。在示出的實(shí)施方式中,作為移動(dòng)電話的操作的一部分,可以呈現(xiàn)并且操作數(shù)字圖像。將理解的是,本發(fā)明的方面不意在限于移動(dòng)電話的環(huán)境中,并且本發(fā)明的各方面可以涉及任何類(lèi)型的適當(dāng)?shù)碾娮友b置,其示例包括單機(jī)數(shù)字照相機(jī)、媒體播放機(jī)、游戲裝置、膝上或臺(tái)式電腦等。為了此處描述的目的,可互相替換的術(shù)語(yǔ)“電子器材”和“電子裝置”還可以包括便攜式無(wú)線通信器材。有時(shí)被稱為“移動(dòng)無(wú)線終端”的術(shù)語(yǔ)“便攜式無(wú)線通信裝置”包括諸如移動(dòng)電話、尋呼機(jī)、通信器、電子記事本、個(gè)人數(shù)字助理(PDA)、智能電話和任何通信裝置等的所有裝置。所有這樣的裝置可以根據(jù)此處描述的原理進(jìn)行操作。圖1是移動(dòng)電話的形式的電子裝置10的示意性正視圖,并且圖2是電子裝置/移動(dòng)電話10的操作部分的示意性框圖。雖然示例性移動(dòng)電話被描述為具有“方塊”或“磚”構(gòu)造,但是移動(dòng)電話可以具有如本領(lǐng)域所公知的諸如翻蓋、樞轉(zhuǎn)(pivot)、回轉(zhuǎn)(swivel)和/ 或滑蓋構(gòu)造的其它構(gòu)造。電子裝置10包括顯示器22,顯示器22用于向用戶顯示移動(dòng)電話10的運(yùn)行狀態(tài)和各種特征的信息。顯示器22還顯示由移動(dòng)電話10接收和/或從存儲(chǔ)器90檢索到的可視內(nèi)容。作為本發(fā)明的一部分,顯示器22可以呈現(xiàn)并且顯示用于標(biāo)記的數(shù)字圖像。在一種實(shí)施方式中,顯示器22可以用作照相機(jī)組件12的電子取景器。以鍵盤(pán)M的形式提供的輸入裝置包括為各種用戶輸入操作提供的按鈕26。例如,鍵盤(pán)24/按鈕沈通常包括字母數(shù)字鍵,用于允許輸入諸如電話號(hào)碼、電話列表、聯(lián)系人信息、筆記等的字母數(shù)字信息。此外,鍵盤(pán)24/按鈕沈通常包括特殊功能鍵,例如用于發(fā)起或應(yīng)答呼叫的“發(fā)送”鍵等。特殊功能鍵還可以包括用于訪問(wèn)移動(dòng)電話10內(nèi)的菜單信息的導(dǎo)航和選擇操作的各種鍵。例如,如圖1中所示,特殊功能鍵可以包括五向?qū)Ш江h(huán),該五向?qū)Ш江h(huán)包含四方向表面和可以用作“輸入鍵”選擇按鈕的中心按鈕。鍵中的一些或全部可以與顯示器結(jié)合用作軟鍵。此外,鍵盤(pán)M和/或按鈕沈可以與照相機(jī)系統(tǒng)12的方面相關(guān)聯(lián)。例如,鍵盤(pán)M的一個(gè)鍵或按鈕沈中的一個(gè)可以是用戶可以按下以命令拍照的快門(mén)鍵。 一個(gè)或多個(gè)鍵還可以與進(jìn)入操作的照相機(jī)模式關(guān)聯(lián),例如通過(guò)從常規(guī)菜單進(jìn)行選擇或通過(guò)推動(dòng)用于照相機(jī)功能的專(zhuān)用鍵來(lái)進(jìn)入照相機(jī)模式。鍵或鍵類(lèi)功能性也可以實(shí)施為與顯示器 22關(guān)聯(lián)的觸摸屏。在一種實(shí)施方式中,可以利用攝像頭組件12拍攝將根據(jù)此處描述的原理標(biāo)記的數(shù)字圖像。然而,將被理解的是,如此處描述的將被標(biāo)記的數(shù)字圖像不需要來(lái)自照相機(jī)組件 12。例如,數(shù)字圖像可以存儲(chǔ)在存儲(chǔ)器90中,并從存儲(chǔ)器90檢索。此外,可以經(jīng)由任何常規(guī)的有線或無(wú)線網(wǎng)絡(luò)接口從外部或網(wǎng)絡(luò)資源訪問(wèn)數(shù)字圖像。因此,將被標(biāo)記的數(shù)字圖像的資源的精度可以改變。再參照?qǐng)D2,電子裝置10可以包括被構(gòu)造為執(zhí)行裝置10的功能和操作的整體控制的主控制電路30??刂齐娐?0可以包括處理裝置92,例如CPU、微控制器或微處理器。在功能當(dāng)中,為了實(shí)施本發(fā)明的特征,控制電路30和/或處理裝置92可以包括控制器,該控制器可以執(zhí)行存儲(chǔ)在機(jī)器可讀介質(zhì)上的實(shí)施為標(biāo)記生成應(yīng)用38的程序代碼。應(yīng)用38可以是獨(dú)立的軟件應(yīng)用或形成執(zhí)行與電子裝置10相關(guān)的附加任務(wù)的軟件應(yīng)用的一部分。對(duì)于計(jì)算機(jī)編程領(lǐng)域中,尤其是移動(dòng)電話、服務(wù)器或其它電子裝置的應(yīng)用編程領(lǐng)域中的普通技術(shù)人員而言,如何對(duì)電子裝置進(jìn)行編程以進(jìn)行操作和執(zhí)行與應(yīng)用38關(guān)聯(lián)的邏輯功能是顯而易見(jiàn)的。因此,為了簡(jiǎn)潔起見(jiàn)省去關(guān)于具體編程代碼的細(xì)節(jié)。此外,應(yīng)用38及其各種組成可以實(shí)施為硬件模塊、固件或其組合,或與軟件代碼的組合。而且,雖然根據(jù)示例性實(shí)施例可以由控制電路30執(zhí)行代碼,但是在不偏離本發(fā)明的范圍的情況下,也可以經(jīng)由專(zhuān)用硬件、固件、軟件或其組合執(zhí)行這樣的控制器功能。應(yīng)用38可以用于以比常規(guī)標(biāo)記系統(tǒng)更有效的方式將公共文本標(biāo)記應(yīng)用于多個(gè)數(shù)字圖像。圖3是描述利用公共文本標(biāo)記來(lái)標(biāo)記多個(gè)數(shù)字圖像的示例性方法的概況的流程圖。盡管以執(zhí)行功能邏輯步驟的特定順序描述示例性方法,但可以相對(duì)于描述的順序改變執(zhí)行這些步驟的順序。而且,可以同時(shí)或者部分同時(shí)執(zhí)行順序描述的兩個(gè)或更多步驟。理解的是所有這些變化都在本發(fā)明的范圍內(nèi)。如所提到的,圖3中描述的方法示出了概況,并與以下闡述的各種示例提供額外的細(xì)節(jié)。該方法可以開(kāi)始于呈現(xiàn)多個(gè)數(shù)字圖像的步驟100。例如,可以通過(guò)任何傳統(tǒng)手段在電子裝置10的顯示器22上呈現(xiàn)多個(gè)數(shù)字圖像,或者也可以通過(guò)下述方法來(lái)進(jìn)行利用照相機(jī)組件12拍攝多個(gè)圖像,從存儲(chǔ)器90檢索圖像,從外部或網(wǎng)絡(luò)資源訪問(wèn)圖像。在步驟 110,電子裝置可以接收輸入,該輸入限定了呈現(xiàn)的多個(gè)圖像中的一個(gè)圖像內(nèi)的特定關(guān)注區(qū)域。輸入的關(guān)注區(qū)域可以限定想要的標(biāo)記可以基于的代表性主題。在步驟120,電子裝置可以接收將彼此關(guān)聯(lián)作為圖像組的多個(gè)圖像的用戶輸入選擇。在步驟130,電子裝置可以接收可以基于如上限定的關(guān)注區(qū)域的標(biāo)記的輸入。在步驟140,可以將標(biāo)記應(yīng)用于關(guān)聯(lián)圖像中的每一個(gè)。將理解的是,步驟130 (標(biāo)記的輸入)特別地可以在標(biāo)記生成處理內(nèi)的任意點(diǎn)處發(fā)生。例如,標(biāo)記輸入可以替代地在本方法的開(kāi)端,在呈現(xiàn)圖像之后,在限定關(guān)注區(qū)域之后或在任何適合的時(shí)間由電子裝置接收。在一種實(shí)施方式中,可以將多個(gè)圖像存儲(chǔ)或者鏈接為關(guān)聯(lián)圖像組,并稍后對(duì)其進(jìn)行標(biāo)記。在這樣的實(shí)施方式中,可以在各種裝置和/或圖像數(shù)據(jù)庫(kù)之間共享或者發(fā)送關(guān)聯(lián)圖像組,并且每個(gè)對(duì)應(yīng)的用戶將他或她自己的標(biāo)記應(yīng)用于關(guān)聯(lián)圖像組。如上所述,圖3呈現(xiàn)了標(biāo)記多個(gè)數(shù)字圖像的示例性方法的概況?,F(xiàn)在將對(duì)于以下示例描述額外的細(xì)節(jié)。為了解釋變化和特定實(shí)施方式的示出目的提供示例,并且將理解的是,這些示例不意在限制本發(fā)明的范圍。具體地說(shuō),此處描述的與標(biāo)記生成應(yīng)用關(guān)聯(lián)的圖形用戶接口的具體形式和內(nèi)容可以改變。圖4描述了在電子裝置的顯示器22上呈現(xiàn)多個(gè)數(shù)字圖像12a_12f的示例。電子裝置可以首先接收如圖中的指示線所示的關(guān)注區(qū)域16的輸入。在描述的實(shí)施方式中,電子裝置可以具有并入到顯示器22中的觸摸屏表面22a的形式的接口。用戶可以利用本領(lǐng)域中公知的諸如觸摸筆、手指或者其它適合的輸入工具的輸入工具14在觸摸屏接口上繪制關(guān)注區(qū)域16。為了方便,輸入工具14將隨后被稱為觸摸筆14。將理解的是,也可以使用其它形式的輸入。例如,可以利用語(yǔ)音命令、眼睛追蹤、照相機(jī)檢測(cè)手勢(shì)等產(chǎn)生輸入。因此,雖然此處的許多示例利用與觸摸屏交互的觸摸筆,但是輸入機(jī)制還可以有實(shí)質(zhì)上的變化。一旦限定了關(guān)注區(qū)域,關(guān)注區(qū)域可以被表示或者近似為顯示在顯示器22的上部20中的縮略圖18。一旦限定了關(guān)注區(qū)域,可以關(guān)聯(lián)多個(gè)圖像lh-f以便于以下述方式進(jìn)行標(biāo)記。
圖5描述了關(guān)聯(lián)多個(gè)圖像lh-f以便于進(jìn)行標(biāo)記的示例性處理。圖5的四個(gè)子圖像可以被視為表示顯示器22的觸摸屏接口 2 和/或其中呈現(xiàn)的圖像的順序操作或交互。 左上圖可與圖3進(jìn)行比較,并且示出通過(guò)利用觸摸筆14在觸摸屏接口 2 上進(jìn)行繪制來(lái)限定關(guān)注區(qū)域16。在顯示器22的上部20中再次在縮略圖18中描述了關(guān)注區(qū)域。圖5中描述的虛線箭頭意在示出經(jīng)由觸摸屏表面或接口 2 對(duì)顯示器22順序操作或交互。將理解的是,箭頭提供說(shuō)明性指示,但通常不會(huì)實(shí)際顯示在顯示器22上。如圖5中看到的,用戶可以將顯示的關(guān)注區(qū)域應(yīng)用于將被關(guān)聯(lián)的每個(gè)圖像。例如,用戶可以利用觸摸筆14來(lái)選擇縮略圖18。然后,用戶可以在觸摸屏表面上點(diǎn)擊或拖拽該縮略圖,從而選擇一個(gè)或多個(gè)圖像 12a-f。在圖5中,通過(guò)跟隨虛線箭頭示出圖像12d、12b和12e的順序選擇。雖然為了簡(jiǎn)化而沒(méi)有具體示出,但將理解的是,可以以類(lèi)似的方式選擇圖像12c和12f。一旦完成了圖像的選擇,標(biāo)記生成應(yīng)用38(見(jiàn)圖幻可以將選擇的圖像自動(dòng)地互相關(guān)聯(lián)并與從其生成縮略圖 18的圖像12a關(guān)聯(lián)。然后,可以基于關(guān)注區(qū)域16的縮略圖18接收標(biāo)記的輸入。如圖5的右下子圖中看到的,在一種實(shí)施方式中,可以通過(guò)請(qǐng)求標(biāo)記生成輸入的提示23提示用戶。用戶可以使用鍵盤(pán)、觸摸屏或通過(guò)任何常規(guī)手段選擇輸入生成方法。用戶可以選擇通過(guò)利用電子裝置的諸如鍵盤(pán)的輸入裝置鍵入或者輸入想要的標(biāo)記文本來(lái)在文本框25中手動(dòng)輸入標(biāo)記。在此示例中,用戶已經(jīng)基于限定的關(guān)注區(qū)域輸入標(biāo)記文本“菊花”。也可以利用“自動(dòng)標(biāo)記”選項(xiàng)提示用戶以嘗試自動(dòng)生成或建議標(biāo)記。以下將詳細(xì)描述自動(dòng)標(biāo)記特征。在圖5中,標(biāo)記輸入被示出為發(fā)生在圖像關(guān)聯(lián)之后。如上所述,這并不是必須的。在一種實(shí)施方式中,圖像可以被存儲(chǔ)或者鏈接為關(guān)聯(lián)圖像組,可以在以后的時(shí)間進(jìn)行訪問(wèn)以便于進(jìn)行標(biāo)記。圖6描述了關(guān)聯(lián)多個(gè)數(shù)字圖像以便于進(jìn)行標(biāo)記的另一示例性處理。在此示例中, 在電子裝置的顯示器22中呈現(xiàn)三個(gè)數(shù)字圖像32a-c。如圖中的指示線所示,觸摸筆14已經(jīng)用于在觸摸屏表面2 上限定用于數(shù)字圖像32a_c的三個(gè)各自的關(guān)注區(qū)域34a_c。標(biāo)記生成應(yīng)用已經(jīng)相稱地產(chǎn)生顯示在顯示器22的上部20中的用于關(guān)注區(qū)域34a-c的三個(gè)縮略圖 37a_c0在此示例中,用戶具有多種標(biāo)記選項(xiàng)。例如,與圖4和圖5的處理類(lèi)似地,可以通過(guò)顯示部分20內(nèi)的提示23提示用戶以在公共標(biāo)記下標(biāo)記所有三個(gè)圖像。用戶可以采用諸如鍵盤(pán)的輸入裝置在文本框25中輸入諸如“花”的標(biāo)記文本,以在用戶限定的公共標(biāo)記下對(duì)圖像進(jìn)行分組,或者用戶可以選擇自動(dòng)標(biāo)記選項(xiàng)(在下面更詳細(xì)地描述)以利用公共標(biāo)記來(lái)標(biāo)記三個(gè)圖像。替代地或附加地,可以經(jīng)由與每個(gè)圖像分別關(guān)聯(lián)的單獨(dú)提示/框?qū)?33a/35a,33b/35b和33c/35c提示用戶單獨(dú)地標(biāo)記每個(gè)圖像。以這種方式,每個(gè)圖像可以與多個(gè)標(biāo)記相關(guān)聯(lián),每個(gè)圖像可以與其它圖像具有公共標(biāo)記,也可以不與其它圖像具有公共標(biāo)記。根據(jù)上文所述,圖7描述了表示標(biāo)記可以彼此相關(guān)的方式的組織標(biāo)記樹(shù)36。例如, 可以通過(guò)以如上所述的方式之一將諸如“植物”的總標(biāo)記應(yīng)用于關(guān)聯(lián)圖像組來(lái)組織圖像。可以通過(guò)總分類(lèi)內(nèi)的更具體的標(biāo)記進(jìn)一步組織圖像的子組。在圖7的示例中,可以通過(guò)一般性地將更具體的標(biāo)記“花”施加到花的圖像來(lái)對(duì)植物圖像進(jìn)行細(xì)分??梢酝ㄟ^(guò)為每個(gè)給定類(lèi)型的花(例如,“菊花”、“郁金香”、“玫瑰花”應(yīng)用更具體的標(biāo)記來(lái)對(duì)花圖像進(jìn)行進(jìn)一步細(xì)分。 如圖3-6所展現(xiàn)的,關(guān)于多圖像的組,可以為該組分配一個(gè)或多個(gè)公共標(biāo)記。將理解的是,
11組和子組的組織組成以及關(guān)聯(lián)的標(biāo)記可以進(jìn)行各種改變,并且不受到圖7的示例的限制。在該情況下,可以以更高效的方式將標(biāo)記應(yīng)用于多個(gè)圖像。系統(tǒng)可以以“自上而下”的方式操作。通過(guò)選擇標(biāo)記花,隨后在更具體的標(biāo)記菊花、郁金香或玫瑰下自動(dòng)分組的圖像也將被標(biāo)記為花。系統(tǒng)也可以以“自下而上”的方式操作。通過(guò)限定相關(guān)但不相同的菊花、郁金香和玫瑰的主題的關(guān)注區(qū)域,系統(tǒng)可以根據(jù)標(biāo)記樹(shù)為該組自動(dòng)生成標(biāo)記花。類(lèi)似地,在一種實(shí)施方式中,僅一個(gè)標(biāo)記為菊花的圖像將需要被標(biāo)記為花。通過(guò)利用標(biāo)記花來(lái)標(biāo)記一個(gè)標(biāo)記為菊花的圖像,標(biāo)記花也可以自動(dòng)應(yīng)用于每個(gè)其它標(biāo)記為菊花的圖像。結(jié)果,基本上以各種形式提高了多個(gè)圖像的公共標(biāo)記的效率。各種標(biāo)記可以與每個(gè)數(shù)字圖像的圖像數(shù)據(jù)文件合并或關(guān)聯(lián)。例如,如本領(lǐng)域所公知的,可以將標(biāo)記并入到圖像文件的元數(shù)據(jù)中。附加地或替代地,標(biāo)記可以存儲(chǔ)在具有到關(guān)聯(lián)圖像文件的鏈接的單獨(dú)的數(shù)據(jù)庫(kù)中。然后,可以訪問(wèn)并搜索標(biāo)記以為存儲(chǔ)的圖像的數(shù)據(jù)庫(kù)提供組織結(jié)構(gòu)。例如,如圖2中所示,電子裝置10可以包括照片管理應(yīng)用39,該照片管理應(yīng)用39可以是單獨(dú)的功能,其可以并入到照相機(jī)組件12中,并入到標(biāo)記生成應(yīng)用38中或存在于電子裝置10中。如果用戶想要訪問(wèn)關(guān)聯(lián)數(shù)字圖像組(例如用于打印,在社區(qū)網(wǎng)絡(luò)站點(diǎn)上發(fā)布,與朋友分享或其它操作),用戶可以通過(guò)任何常規(guī)手段執(zhí)行應(yīng)用39。應(yīng)用39可以包括搜索功能,該搜索功能允許用戶輸入對(duì)于例如“花”的標(biāo)記的搜索查詢,根據(jù)該搜索對(duì)所有標(biāo)記為“花”的數(shù)字圖像進(jìn)行分組以用于進(jìn)一步的操作。在如上的特定示例中,使用花標(biāo)記的查詢將提供圖4和圖5的六個(gè)菊花圖像以及圖6的郁金香和玫瑰圖像作為結(jié)果。在以上示例中的每一個(gè)中,通過(guò)用戶利用諸如鍵盤(pán)的輸入裝置輸入的手動(dòng)輸入, 電子裝置接收特定標(biāo)記輸入。然后,標(biāo)記被自動(dòng)應(yīng)用于關(guān)聯(lián)圖像組。在其它實(shí)施方式中,可以自動(dòng)接收(圖3的步驟130)標(biāo)記輸入本身。具體地說(shuō),可以將與限定的關(guān)注區(qū)域相關(guān)的多個(gè)圖像部分與數(shù)字圖像(或數(shù)字圖像的部分)的參考數(shù)據(jù)庫(kù)相比較來(lái)自動(dòng)生成多個(gè)建議的標(biāo)記。用戶可以選擇接受建議的標(biāo)記之一,或如上所述手動(dòng)輸入標(biāo)記。在一種實(shí)施方式中,參考數(shù)據(jù)庫(kù)可以被包含在電子裝置10中,并由內(nèi)部控制器(如圖2中所描述的控制電路30和/或處理器9 執(zhí)行上述比較。然而,由于期望參考數(shù)據(jù)庫(kù)很大,所以為了增強(qiáng)存儲(chǔ)容量和處理能力,參考數(shù)據(jù)庫(kù)可以存儲(chǔ)在網(wǎng)絡(luò)服務(wù)器上,該網(wǎng)絡(luò)服務(wù)器具有其自己的控制器以執(zhí)行所要求的處理?;氐綀D2,電子裝置10可以包括與通信電路96耦合的天線94。通信電路96可以包括射頻發(fā)送器和接收器,用于如傳統(tǒng)那樣經(jīng)由天線94發(fā)送和接收信號(hào)。根據(jù)本發(fā)明,通信電路是網(wǎng)絡(luò)接口形式的標(biāo)記輸入裝置,其可以用于如下面所述地在通信網(wǎng)絡(luò)上發(fā)送和接收?qǐng)D像或圖像部分、標(biāo)記建議和/或相關(guān)數(shù)據(jù)。參照?qǐng)D8,電子裝置(移動(dòng)電話)10可以被構(gòu)造為用作通信系統(tǒng)68的一部分。系統(tǒng)68可以包括具有服務(wù)器72的通信網(wǎng)絡(luò)70,用于管理由移動(dòng)電話10發(fā)起的或者以移動(dòng)電話10為目標(biāo)的呼叫、向移動(dòng)電話10發(fā)送數(shù)據(jù)并執(zhí)行任何其他支持功能。服務(wù)器72經(jīng)由傳輸介質(zhì)與移動(dòng)電話10通信。傳輸介質(zhì)可以是任何適當(dāng)?shù)难b置或者組件,包括例如通信塔 (例如,小區(qū)塔)、另一移動(dòng)電話、無(wú)線接入點(diǎn)、衛(wèi)星等。網(wǎng)絡(luò)的部分可以包括無(wú)線傳輸路徑。 網(wǎng)絡(luò)70可以支持多個(gè)移動(dòng)電話10和其它類(lèi)型終端用戶裝置的通信活動(dòng)。如將理解的是, 服務(wù)器72可以被構(gòu)造為用于執(zhí)行服務(wù)器功能的典型計(jì)算機(jī)系統(tǒng),并且可以包括被構(gòu)造為執(zhí)行包含實(shí)施服務(wù)器72的功能的邏輯指令的軟件的處理器和存儲(chǔ)這樣的軟件的存儲(chǔ)器。
通信網(wǎng)絡(luò)70也可以包括標(biāo)記生成服務(wù)器75以執(zhí)行本發(fā)明相關(guān)的操作。雖然將標(biāo)記生成服務(wù)器75或其部件描述為單獨(dú)的服務(wù)器,但標(biāo)記生成服務(wù)器75或其部件可以并入到通信服務(wù)器72中一個(gè)或多個(gè)中。圖9描述了示例性標(biāo)記生成服務(wù)器75的操作部分的功能框圖。標(biāo)記生成服務(wù)器可以包括控制器76,制器76用于執(zhí)行并協(xié)調(diào)服務(wù)器的各種功能。標(biāo)記生成服務(wù)器也可以包括圖像數(shù)據(jù)庫(kù)78,圖像數(shù)據(jù)庫(kù)78用于存儲(chǔ)多個(gè)參考數(shù)字圖像。標(biāo)記生成服務(wù)器75還可以包括網(wǎng)絡(luò)接口 77,網(wǎng)絡(luò)接口 77用于通過(guò)網(wǎng)絡(luò)與電子裝置通信。標(biāo)記生成服務(wù)器75還可以包括圖片識(shí)別功能79,該圖片識(shí)別功能79可以由控制器執(zhí)行以嘗試在圖像內(nèi)識(shí)別主題以便于進(jìn)行標(biāo)記。圖片識(shí)別功能79可以實(shí)施為駐留在標(biāo)記生成服務(wù)器75中并由標(biāo)記生成服務(wù)器75執(zhí)行的可執(zhí)行代碼。例如,功能79可以由控制器76執(zhí)行。圖片識(shí)別功能79可以是獨(dú)立的軟件應(yīng)用或形成軟件應(yīng)用的執(zhí)行與服務(wù)器75相關(guān)的附加任務(wù)的部分。對(duì)計(jì)算機(jī)編程領(lǐng)域、尤其是移動(dòng)電話或其他電子裝置產(chǎn)品的應(yīng)用程序編程方面的技術(shù)人員來(lái)說(shuō),如何對(duì)服務(wù)器75進(jìn)行編程以進(jìn)行操作并且執(zhí)行與圖片識(shí)別功能79關(guān)聯(lián)的邏輯功能將是顯而易見(jiàn)的。因此,為了簡(jiǎn)潔省去關(guān)于具體編程代碼的細(xì)節(jié)。而且,雖然根據(jù)實(shí)施方式,功能79 可以由各處理裝置執(zhí)行,這樣的功能也可以經(jīng)由專(zhuān)用硬件或固件,或硬件、固件和/或軟件的某組合來(lái)執(zhí)行。圖10是從用戶電子裝置的角度描述利用公共標(biāo)記自動(dòng)標(biāo)記多個(gè)數(shù)字圖像的示例性方法的概況的流程圖。盡管以執(zhí)行功能邏輯步驟的特定順序描述了示例性方法,但對(duì)于描述的順序,可以改變執(zhí)行這些步驟的順序。而且,可以同時(shí)或者部分同時(shí)地執(zhí)行順序描述的兩個(gè)或更多步驟。理解的是,所有這樣的變化都處于本發(fā)明的范圍內(nèi)。如所提到的,圖10 中描述的方法呈現(xiàn)了概況,并結(jié)合以下提出的各種示例提供額外的細(xì)節(jié)。該方法可以開(kāi)始于呈現(xiàn)多個(gè)數(shù)字圖像的步驟200。在步驟210,電子裝置可以接收輸入,該輸入限定呈現(xiàn)的圖像中的一個(gè)圖像內(nèi)的特定關(guān)注區(qū)域。輸入的關(guān)注區(qū)域可以限定想要的標(biāo)記可以基于的代表圖像部分。在步驟220,電子裝置可以接收將彼此關(guān)聯(lián)作為圖像組的多個(gè)圖像的用戶輸入選擇。注意,步驟200、210和220可對(duì)應(yīng)于圖3的步驟100、110 和120,并且可以用相同或相似的方式執(zhí)行。作為步驟230,可以從電子裝置將每個(gè)關(guān)聯(lián)圖像的一部分發(fā)送到外部或諸如標(biāo)記生成服務(wù)器75的網(wǎng)絡(luò)標(biāo)記生成服務(wù)器。在一種實(shí)施方式中,圖像部分可以包括整個(gè)圖像。 回到圖4和圖5,例如,電子裝置可以發(fā)送圖像lh-f中的每一個(gè)。然而,由于發(fā)送和處理整個(gè)圖像所需要的處理能力,因此優(yōu)選的是僅發(fā)送每個(gè)關(guān)聯(lián)圖像的一部分。因此,在另一實(shí)施方式中,可以根據(jù)每個(gè)關(guān)聯(lián)圖像限定局部圖像部分并從每個(gè)關(guān)聯(lián)圖像提取局部圖像部分。例如,基于圖像中用戶使用觸摸筆14在觸摸屏表面2 上觸摸圖像的點(diǎn),可以從每個(gè)關(guān)聯(lián)圖像提取縮略圖像部分。例如,如在圖5中看到的,用戶已在這里描述的菊花中的一個(gè)處觸摸了每個(gè)關(guān)聯(lián)圖像。因此,將分別在每個(gè)雛菊的中心提取具有較小的輪廓面積的縮略圖。在另一實(shí)施方式中,應(yīng)用38可以進(jìn)一步生成從每個(gè)關(guān)聯(lián)圖像 12a-f提取的提取圖像部分的“對(duì)象印章”。如這里使用的,術(shù)語(yǔ)“對(duì)象印章”指在數(shù)字圖像中描述的對(duì)象的代表,其占據(jù)比較大的數(shù)字圖像本身小的存儲(chǔ)容量。例如,對(duì)象印章可以是基于足以識(shí)別對(duì)象的圖像特征的圖像內(nèi)的對(duì)象或者圖像的數(shù)學(xué)描述或模型。例如,特征可以包括例如對(duì)象邊緣、顏色、紋理、呈現(xiàn)的文本、圖像縮微(縮略圖)等。對(duì)象的數(shù)學(xué)描述或模型是本領(lǐng)域公知的,并可以用于各種圖像操作應(yīng)用。對(duì)象印章有時(shí)在本領(lǐng)域中可以被稱為“特征向量”。通過(guò)向標(biāo)記生成服務(wù)器發(fā)送對(duì)象印章,而不是發(fā)送整個(gè)圖像,可以更有效率地使用處理能力。如以下將要詳細(xì)解釋的,標(biāo)記生成服務(wù)器可以分析發(fā)送的圖像部分以確定用于圖像的多個(gè)建議的公共標(biāo)記。與僅生成一個(gè)標(biāo)記建議的情況相比較,標(biāo)記生成服務(wù)器可以生成多個(gè)標(biāo)記建議以增強(qiáng)將識(shí)別主題的可能性??梢陨扇魏螖?shù)量的標(biāo)記建議。在一種實(shí)施方式中,標(biāo)記建議的數(shù)量可以是5-10個(gè)標(biāo)記建議。此外,可以按照主題的匹配的幾率或比例對(duì)標(biāo)記建議進(jìn)行分級(jí)或排序以增加標(biāo)記建議的有用性。因此,在圖10的步驟M0,電子裝置可以從標(biāo)記建議服務(wù)器接收多個(gè)標(biāo)記建議。在步驟250,電子裝置可以接收關(guān)于是否接受標(biāo)記建議之一的用戶輸入。如果標(biāo)記建議之一被接受,則電子裝置可以將接受的標(biāo)記自動(dòng)應(yīng)用于每個(gè)關(guān)聯(lián)圖像。如果在步驟250沒(méi)有標(biāo)記建議被接受,則在步驟270,電子裝置可以返回手動(dòng)標(biāo)記模式,通過(guò)手動(dòng)標(biāo)記模式,以上文描述的方式之一接收標(biāo)記的手動(dòng)輸入。在步驟260,可以將接受的或輸入的標(biāo)記應(yīng)用于關(guān)聯(lián)圖像中的每一個(gè)。不論標(biāo)記建議被接受還是標(biāo)記被手動(dòng)輸入,在步驟觀0,電子裝置都可以將應(yīng)用的標(biāo)記發(fā)送到標(biāo)記生成服務(wù)器,該標(biāo)記生成服務(wù)器關(guān)于應(yīng)用的標(biāo)記更新參考數(shù)據(jù)庫(kù)。然后,在接下來(lái)的自動(dòng)標(biāo)記操作中,可以訪問(wèn)應(yīng)用的標(biāo)記以提高這樣的隨后的自動(dòng)標(biāo)記操作的效率和準(zhǔn)確性。例如,圖11描述了圖5的變化,其中已選擇了自動(dòng)標(biāo)記操作。與圖5相似,圖11描述了用戶如何限定關(guān)注區(qū)域16,然后,關(guān)注區(qū)域16可以與圖像lh-f中的每一個(gè)關(guān)聯(lián)。如上文所解釋的,基于每個(gè)圖像中用戶使用觸摸筆14在觸摸屏表面2 上觸摸的菊花,可以從每個(gè)關(guān)聯(lián)圖像提取縮略圖像部分和/或?qū)ο笥≌隆?梢詫栈▓D像的圖像部分發(fā)送給標(biāo)記生成服務(wù)器,該標(biāo)記生成服務(wù)器可以嘗試識(shí)別圖像部分的公共主題。例如,在右下方圖像中,提示23現(xiàn)在是自動(dòng)標(biāo)記提示,其包含“菊花、玫瑰花或花”的多個(gè)建議的標(biāo)記文本。 文字框25現(xiàn)在包含接收接受或拒絕建議的標(biāo)記文本的輸入(“Y/N”)的提示。在圖中所描述的示例中,用戶已接受“菊花”標(biāo)記建議,并將接受的標(biāo)記“菊花”應(yīng)用于關(guān)聯(lián)圖像12a-f 中的每一個(gè)。如果標(biāo)記建議沒(méi)有被接受(輸入“N”),則顯示器22的顯示可以變?yōu)榕c圖5 的顯示類(lèi)似的形式,其中可以提示用戶在文字框25中手動(dòng)輸入標(biāo)記文字。如上所述,不論接受標(biāo)記建議還是手動(dòng)輸入標(biāo)記,電子裝置都可以向標(biāo)記生成服務(wù)器發(fā)送應(yīng)用的標(biāo)記。然后,在接下來(lái)的自動(dòng)標(biāo)記操作中可以訪問(wèn)應(yīng)用的標(biāo)記。類(lèi)似的處理可以應(yīng)用于圖6中描述的數(shù)字圖像。在這樣的示例中,可以分別生成包含菊花、郁金香和玫瑰花的圖像部分。注意,公共主題現(xiàn)在是“花”,并且每個(gè)圖像部分描述了特定類(lèi)型的花。圖像部分可以被發(fā)送給標(biāo)記生成服務(wù)器,標(biāo)記生成服務(wù)器可以如上所述地識(shí)別公共主題并發(fā)送多個(gè)標(biāo)記建議。在該示例中,用戶可以從建議標(biāo)記中接受建議標(biāo)記“花”,并將建議標(biāo)記“花”并入到關(guān)聯(lián)圖像中的每一個(gè)中。圖12是從諸如標(biāo)記生成服務(wù)器75的網(wǎng)絡(luò)標(biāo)記生成服務(wù)器的角度描述利用公共文字標(biāo)記自動(dòng)標(biāo)記多個(gè)數(shù)字圖像的示例性方法的概況的流程圖。因此,圖12可以被視為對(duì)應(yīng)于圖10中的方法的方法,只是從標(biāo)記生成服務(wù)器的角度進(jìn)行示出。盡管以執(zhí)行功能邏輯步驟的特定順序描述了示例性方法,但對(duì)于描述的順序,可以改變執(zhí)行步驟的順序。而且,可以同時(shí)或者部分同時(shí)地執(zhí)行順序描述的兩個(gè)或更多步驟。理解的是所有這些變化都在本發(fā)明的范圍內(nèi)。如所提到的,圖12中描述的方法示出了概況,并結(jié)合以下提出的各種示例提供額外的細(xì)節(jié)。該方法可以開(kāi)始于步驟300,在該步驟300,服務(wù)器從電子裝置接收每個(gè)分別提取自在電子裝置上呈現(xiàn)的關(guān)聯(lián)數(shù)字圖像的多個(gè)圖像部分。如上所述,圖像部分可以是從數(shù)字圖像提取的縮略圖部分、圖像中描述的主題的對(duì)象印章,或者次優(yōu)選地為整個(gè)圖像本身。在步驟310,標(biāo)記生成服務(wù)器可以將接收的圖像部分與參考圖像數(shù)據(jù)庫(kù)相比較。與接收的圖像部分類(lèi)似,參考圖像可以是整個(gè)數(shù)字圖像,但為了保留處理能力,參考圖像類(lèi)似地可以是提取自較大的數(shù)字圖像的主題的對(duì)象印章或縮略圖部分。在步驟320,可以確定是否能夠基于與參考圖像數(shù)據(jù)庫(kù)的比較識(shí)別接收的圖像部分中的公共主題。如果確定的結(jié)果為肯定,那么在步驟325,可以生成基于公共主題的多個(gè)標(biāo)記建議,并在步驟330,可以向電子裝置發(fā)送多個(gè)標(biāo)記建議。如以上結(jié)合電子裝置的鏡像操作所描述的,用戶可以接受應(yīng)用建議標(biāo)記或手動(dòng)輸入標(biāo)記。無(wú)論如何,在步驟333,標(biāo)記生成服務(wù)器可以接收識(shí)別應(yīng)用的標(biāo)記的信息的發(fā)送。在步驟335,標(biāo)記生成服務(wù)器可以更新參考數(shù)據(jù)庫(kù),所以應(yīng)用的標(biāo)記可以用在接下來(lái)的自動(dòng)標(biāo)記操作中。如果在步驟320中沒(méi)有識(shí)別出公共主題,則在步驟340中,標(biāo)記生成服務(wù)器可以生成“無(wú)法標(biāo)記”的指示,該指示在步驟350中被發(fā)送給電子裝置。然后,用戶電子裝置可以返回手動(dòng)標(biāo)記模式,通過(guò)手動(dòng)標(biāo)記模式可以用上文所述的方式之一輸入標(biāo)記的手動(dòng)輸入。在這種情況下,標(biāo)記生成服務(wù)器仍然可以接收識(shí)別應(yīng)用的標(biāo)記的信息的發(fā)送,并相應(yīng)地更新參考數(shù)據(jù)庫(kù)(步驟333和335)。利用標(biāo)記生成服務(wù)器的自動(dòng)標(biāo)記也可以用于提供多個(gè)標(biāo)記建議,每個(gè)標(biāo)記建議涉及不同的主題。例如,服務(wù)器可以從電子裝置接收分別提取自第一組關(guān)聯(lián)圖像的第一組圖像部分,以及分別提取自第二組關(guān)聯(lián)圖像的第二組圖像部分??梢詫⒌谝唤M和第二組圖像部分與參考數(shù)據(jù)庫(kù)進(jìn)行比較來(lái)識(shí)別每組的公共主題??梢詾榈谝唤M圖像部分生成第一多個(gè)標(biāo)記建議,并且為第二組圖像部分生成第二多個(gè)標(biāo)記建議。此外,在以上示例中,圖像的主題多是普通對(duì)象。假設(shè)參考數(shù)據(jù)庫(kù)的內(nèi)容足夠豐富,則即使用戶不知道正在處理的圖像中描述的精確主題,也可以生成標(biāo)記建議。例如,圖13描述了當(dāng)用戶沒(méi)有識(shí)別出圖像的精確主題時(shí)自動(dòng)標(biāo)記描述多個(gè)主題的圖像的示例。在圖13的示例中,電子裝置已呈現(xiàn)了兩輛汽車(chē)位于各種位置的多個(gè)圖像, 但是用戶可能不知道每個(gè)車(chē)的精確車(chē)型。如以下進(jìn)一步描述的,這里描述的自動(dòng)標(biāo)記系統(tǒng)可以識(shí)別特定車(chē)型并為用戶生成相應(yīng)的標(biāo)記。與前面的圖類(lèi)似地,圖13描述了顯示器22,其中呈現(xiàn)了編號(hào)為13a_f的六個(gè)圖像。 可以利用施加于顯示器22上的觸摸屏接口或表面22a的觸摸筆14對(duì)圖像進(jìn)行操作??梢栽陲@示器22的上顯示部分20中提供自動(dòng)標(biāo)記信息。在此示例中,用戶已用觸摸筆14在觸摸屏表面2 上限定了兩個(gè)關(guān)注區(qū)域16a和16b。每個(gè)關(guān)注區(qū)域可以描述用戶感關(guān)注的車(chē),但用戶可能不知道每輛車(chē)的精確車(chē)型。例如,關(guān)注區(qū)域16a可以描述特定的轎車(chē),而關(guān)注區(qū)域16b可以描述特定的貨車(chē)。與前述示例類(lèi)似地,限定的關(guān)注區(qū)域16a被以關(guān)注區(qū)域 16a(轎車(chē))的縮略圖表示的形式重新生成為圖像部分18a。此外,限定的關(guān)注區(qū)域16b被以關(guān)注區(qū)域16b (貨車(chē))的縮略圖表示的形式重新生成為圖像部分18b。圖像13b-f中的每一個(gè)描述了由縮略圖18a(轎車(chē))或18b (貨車(chē))之一表示的汽車(chē)之一。
在圖13中,分別通過(guò)實(shí)線和箭頭與虛線和箭頭區(qū)分基于關(guān)注區(qū)域16a和16b的圖像操作。圖13中描述的箭頭旨在示出對(duì)于顯示器22的觸摸屏接口 2 的順序的操作或交互。將理解的是,箭頭提供說(shuō)明性指示,但通常不會(huì)實(shí)際顯示在顯示器22上。如圖13中看到的,用戶可以利用觸摸筆14來(lái)選擇轎車(chē)的第一縮略圖18a。然后,用戶可以通過(guò)點(diǎn)擊或拖拽縮略圖從而選擇將與轎車(chē)關(guān)聯(lián)的一個(gè)或多個(gè)圖像Ub-f來(lái)應(yīng)用顯示的關(guān)注區(qū)域。例如, 在圖13中,通過(guò)跟隨實(shí)線箭頭示出對(duì)將與轎車(chē)關(guān)聯(lián)的圖像13d和13f的順序選擇。類(lèi)似地,用戶可以利用觸摸筆14來(lái)選擇貨車(chē)的第二縮略圖18b。然后,用戶可以點(diǎn)擊或拖拽該縮略圖從而選擇將與貨車(chē)關(guān)聯(lián)的一個(gè)或多個(gè)圖像13b-f。例如,在圖13中, 通過(guò)跟隨虛線箭頭示出對(duì)將與貨車(chē)關(guān)聯(lián)的圖像i:3e、i;3b和13c的順序選擇。以這種方式, 用戶已限定了兩個(gè)關(guān)聯(lián)圖像組,用于轎車(chē)(13a、13d和13f)的第一組關(guān)聯(lián)圖像和用于貨車(chē) (13a、13e、13b和13c)的第二組關(guān)聯(lián)圖像。與圖10和12的方法類(lèi)似的方法可以應(yīng)用到每個(gè)關(guān)聯(lián)圖像組??梢詫⒂糜谵I車(chē)的第一組圖像部分發(fā)送給標(biāo)記生成服務(wù)器,并與參考圖像進(jìn)行比較。在識(shí)別出主題轎車(chē)時(shí),可以為轎車(chē)生成第一標(biāo)記建議。類(lèi)似地,可以將用于貨車(chē)的第二組圖像部分發(fā)送給標(biāo)記生成服務(wù)器,并與參考圖像進(jìn)行比較。在識(shí)別出主題貨車(chē)時(shí),可以為貨車(chē)生成第二標(biāo)記建議。如圖13中看到的,系統(tǒng)已識(shí)別出轎車(chē)和貨車(chē)中的每一個(gè)的型號(hào),并已建議了分別對(duì)應(yīng)于每個(gè)型號(hào)的標(biāo)記文本。在顯示部分20中的對(duì)話框25中可以顯示自動(dòng)標(biāo)記建議。如果接受,則 “轎車(chē)XJ500”標(biāo)記將自動(dòng)應(yīng)用于與轎車(chē)關(guān)聯(lián)的每個(gè)圖像,且“貨車(chē)350LTD”標(biāo)記將自動(dòng)應(yīng)用于與貨車(chē)關(guān)聯(lián)的每個(gè)圖像。因此,即使在用戶不知道數(shù)字圖像中描述的精確主題時(shí),也可以為描述多種主題的圖像自動(dòng)生成標(biāo)記。相對(duì)于傳統(tǒng)自動(dòng)標(biāo)記系統(tǒng),描述的系統(tǒng)具有優(yōu)點(diǎn)。這里描述的系統(tǒng)生成多個(gè)圖像部分,每個(gè)圖像部分包含特定主題,以與參考圖像進(jìn)行比較,這與傳統(tǒng)系統(tǒng)中通常處理的非特定單個(gè)大圖像相比。通過(guò)比較多個(gè)特定圖像部分與參考圖像,這里描述的系統(tǒng)具有高于常規(guī)系統(tǒng)的準(zhǔn)確性。此外,在以上示例中,對(duì)于兩組圖像自動(dòng)執(zhí)行標(biāo)記。將理解的是,這樣的標(biāo)記操作可以應(yīng)用于任意數(shù)量的多組圖像(例如五、十、十二等)。在以上示例中,標(biāo)記基本上對(duì)應(yīng)于相關(guān)主題的識(shí)別。這并不是必須的。例如,用戶可以完全不應(yīng)用任何標(biāo)記。在這種情況下,電子裝置可以生成標(biāo)記。裝置生成的標(biāo)記可以是隨機(jī)數(shù)、縮略圖、圖標(biāo)或其它標(biāo)識(shí)符。然后,用戶可以用上文所述的方式中的一種將裝置生成的標(biāo)記應(yīng)用于多個(gè)圖像。用戶也可以基于個(gè)人描述、感覺(jué)、態(tài)度、特征或任何其它用戶定義的標(biāo)準(zhǔn)來(lái)定義標(biāo)記。圖14描述了可以基于用戶定義的標(biāo)準(zhǔn)對(duì)多個(gè)圖像進(jìn)行標(biāo)記的示例。在圖14的示例中, 電子裝置已呈現(xiàn)出藝術(shù)作品的圖像,但用戶并不特別了解藝術(shù)。用戶更愿意基于用戶定義的特征或描述組織圖像,而不是基于每件作品的諸如標(biāo)題、藝術(shù)家、流派等的信息來(lái)組織圖像。如以下進(jìn)一步描述的,這里描述的標(biāo)記系統(tǒng)為用戶提供一種基于這樣的用戶定義的標(biāo)準(zhǔn)來(lái)組織圖像的方法。與前述附圖類(lèi)似地,圖14描述了顯示器22,其中呈現(xiàn)了編號(hào)為lfe-e的多個(gè)圖像。 可以利用施加于顯示器22上的觸摸屏接口或者表面22a的觸摸筆14對(duì)圖像進(jìn)行操作。與前述附圖類(lèi)似地,用戶已經(jīng)選擇圖1 中的一個(gè),以提供圖像15a的縮略圖表示的形式的圖像部分18a的內(nèi)容,此外,用于已經(jīng)選擇了圖像15c中的另外一個(gè),以提供圖像15c的縮略圖表示的形式的圖像部分18c的內(nèi)容。用戶希望將其它圖像15b、lk和15c中的每一個(gè)與分別由縮略圖18a或18b表示的一個(gè)或另一個(gè)圖像關(guān)聯(lián)。在圖14中,分別通過(guò)實(shí)線和箭頭與虛線和箭頭來(lái)區(qū)分基于縮略圖18a和18b的圖像操作。圖14中描述的箭頭旨在示出對(duì)于顯示器22的順序操作或交互。將理解的是,箭頭提供說(shuō)明性指示,但通常不會(huì)實(shí)際顯示在顯示器22上。如圖14中看到的,用戶可以利用觸摸筆14來(lái)選擇第一縮略圖18a。然后,用戶可以在觸摸屏表面上點(diǎn)擊或拖拽該縮略圖從而選擇將與縮略圖18a關(guān)聯(lián)的一個(gè)或多個(gè)圖像15b-f。例如,在圖14中,通過(guò)跟隨實(shí)線箭頭示出將與縮略圖18a關(guān)聯(lián)的圖像15d的選擇。類(lèi)似地,用戶可以利用觸摸筆14選擇第二縮略圖18b。然后,用戶可以在觸摸屏表面上點(diǎn)擊或拖拽該縮略圖從而選擇將與縮略圖18b關(guān)聯(lián)的一個(gè)或多個(gè)圖像15b-f。例如,在圖14中,通過(guò)跟隨虛線箭頭示出將與縮略圖18b關(guān)聯(lián)的圖像1 和15e的順序選擇。以這種方式,用戶已定義了兩個(gè)關(guān)聯(lián)圖像組,一個(gè)用于縮略圖18a (圖像1 和15b),一個(gè)用于縮略圖18b(圖像Mb、15c和15e)。然后,對(duì)話框25可以用于輸入將自動(dòng)地應(yīng)用于每個(gè)關(guān)聯(lián)組中的圖像的標(biāo)記文本。在此示例中,用戶希望將一組藝術(shù)作品的圖像標(biāo)記為“經(jīng)典”,將另一組標(biāo)記為“陌生”。因此,可以基于用戶特征或其它定義的標(biāo)準(zhǔn)為均包含多個(gè)圖像的不同組自動(dòng)生成標(biāo)記。如上所述,這里描述的各種示例僅用于說(shuō)明性目的。圖形用戶接口、數(shù)據(jù)庫(kù)和數(shù)字圖像的具體形式和內(nèi)容可以在不背離本發(fā)明的精神下進(jìn)行各種變化。將理解的是,這里描述的標(biāo)記系統(tǒng)和方法相對(duì)于傳統(tǒng)標(biāo)記系統(tǒng)具有優(yōu)點(diǎn)。由于標(biāo)記可以基于數(shù)字圖像內(nèi)具體的用戶定義的關(guān)注區(qū)域,所以描述的系統(tǒng)具有增強(qiáng)的準(zhǔn)確性并且提供更多的信息。因此,圖像的哪一部分應(yīng)提供標(biāo)記的基礎(chǔ)將不是問(wèn)題。因?yàn)槭謩?dòng)輸入的標(biāo)記可以應(yīng)用于很多關(guān)聯(lián)圖像的子區(qū)域,所以改進(jìn)了手動(dòng)標(biāo)記。 因此,用戶不需要單獨(dú)標(biāo)記每張照片。鑒于這種情況,通過(guò)將數(shù)字圖像與不同風(fēng)格的分類(lèi)標(biāo)記關(guān)聯(lián),可以很容易地產(chǎn)生數(shù)字照片的分級(jí)組織。分級(jí)分類(lèi)標(biāo)記也可以用于同時(shí)產(chǎn)生給定分類(lèi)內(nèi)的多個(gè)圖像的標(biāo)記。用戶也可以基于內(nèi)容的特征或其它的用戶定義的標(biāo)準(zhǔn)來(lái)標(biāo)記圖像,消除了用戶了解描述的主題的具體內(nèi)容的需要。與傳統(tǒng)識(shí)別標(biāo)記系統(tǒng)相比,自動(dòng)標(biāo)記也得到了改善。與傳統(tǒng)系統(tǒng)中通常處理非特定的單個(gè)大圖相比,這里描述的系統(tǒng)提供了包含具體主題的用于與參考圖像比較的多個(gè)圖像部分。通過(guò)比較包含特定主題的多個(gè)圖像部分與參考圖像,這里描述的系統(tǒng)具有高于傳統(tǒng)識(shí)別標(biāo)記系統(tǒng)的準(zhǔn)確性。因此,即使在用戶不知道描述的準(zhǔn)確主題時(shí),也可以為描述各種主題的圖像自動(dòng)生成準(zhǔn)確的標(biāo)記。 盡管已參考數(shù)字照片對(duì)本發(fā)明進(jìn)行了描述,但這些實(shí)施方式也可以利用數(shù)字圖像的其它分類(lèi)來(lái)實(shí)施。例如,可以將類(lèi)似的原理應(yīng)用于數(shù)字動(dòng)畫(huà)或其幀或部分、從互聯(lián)網(wǎng)或其它網(wǎng)絡(luò)下載的網(wǎng)頁(yè)或任何其它數(shù)字圖像。再參照?qǐng)D2,將對(duì)移動(dòng)電話10的附加部件進(jìn)行描述。為了簡(jiǎn)明,這里將不詳細(xì)描述移動(dòng)電話10的傳統(tǒng)特征。移動(dòng)電話10包括使移動(dòng)電話10能夠與被叫/主叫裝置(通常是另一移動(dòng)電話或有線電話或其它電子裝置)建立通話和/或交換信號(hào)的通話電路。移動(dòng)電話10還可以被構(gòu)造為發(fā)送、接收和/或處理數(shù)據(jù),例如文本信息(例如,通俗地稱為“SMS”,其代表短消息服務(wù))、電子郵件消息、多媒體消息(例如,通俗地稱為“匪S”,其代表多媒體短消息服務(wù))、 圖像文件、視頻文件、音頻文件、電話鈴音、流音頻、流視頻、數(shù)據(jù)輸送(包括播客)等等。處理這樣的數(shù)據(jù)可以包括將數(shù)據(jù)存儲(chǔ)在存儲(chǔ)器90中、執(zhí)行應(yīng)用以允許用戶與數(shù)據(jù)交互、顯示與數(shù)據(jù)關(guān)聯(lián)的視頻和/或圖像內(nèi)容、輸出與數(shù)據(jù)關(guān)聯(lián)的音頻聲音等等。移動(dòng)電話10還包括用于處理由無(wú)線電路96發(fā)送或從無(wú)線電路96接收的音頻信號(hào)的聲音信號(hào)處理電路98。如傳統(tǒng)上那樣,使用戶能夠通過(guò)移動(dòng)電話10聆聽(tīng)和講話的揚(yáng)聲器60和麥克風(fēng)62耦合到聲音處理電路(也參見(jiàn)圖1)。顯示器22可以通過(guò)將視頻數(shù)據(jù)轉(zhuǎn)換成用于驅(qū)動(dòng)顯示器的視頻信號(hào)的視頻處理電路64耦合到控制電路30。視頻處理電路64可以包括任何適合的緩沖器、解碼器、視頻數(shù)據(jù)處理器等。視頻數(shù)據(jù)可以由控制電路30生成、從存儲(chǔ)器90中存儲(chǔ)的視頻文件檢索或者從由無(wú)線電路96接收的輸入視頻數(shù)據(jù)流獲得或通過(guò)任何其它適當(dāng)?shù)姆椒ǐ@得。移動(dòng)電話10還可以包括用于與附件、另一移動(dòng)無(wú)線終端、計(jì)算機(jī)或其它裝置建立無(wú)線通信的本地?zé)o線接口 69,例如紅外收發(fā)器、RF適配器、藍(lán)牙適配器或類(lèi)似的部件。在本發(fā)明的實(shí)施方式中,本地?zé)o線接口 69可以用做用于相對(duì)較近的范圍內(nèi)的裝置之間的圖像或圖像部分、標(biāo)記建議和/或相關(guān)數(shù)據(jù)的短距離無(wú)線傳輸?shù)耐ㄐ烹娐贰R苿?dòng)電話10還可以包括允許連接到各種傳統(tǒng)I/O裝置的I/O接口 67。一個(gè)這樣的裝置是電源充電器,該電源充電器能夠用于為內(nèi)部供電單元(PSU)68充電。在本發(fā)明的實(shí)施方式中,I/O接口 67可以用做用于共享有線連接的裝置之間的圖像或圖像部分、標(biāo)記建議和/或相關(guān)數(shù)據(jù)的有線傳輸?shù)耐ㄐ烹娐?。盡管已經(jīng)示出本發(fā)明并對(duì)特定優(yōu)選實(shí)施方式進(jìn)行了描述,但是應(yīng)理解的是,在閱讀并理解了本說(shuō)明書(shū)的情況下,本領(lǐng)域的技術(shù)人員可以想到各種等同物或修改。本發(fā)明包括所有這樣的等同物和修改,并且本發(fā)明僅由以下權(quán)利要求的范圍來(lái)限制。
18
權(quán)利要求
1.一種電子裝置(10),該電子裝置包括顯示器(22),所述顯示器(22)用于呈現(xiàn)多個(gè)數(shù)字圖像;接口(22a),所述接口(22a)用于接收對(duì)所呈現(xiàn)的所述多個(gè)圖像中的至少一個(gè)圖像內(nèi)的關(guān)注區(qū)域的輸入,并用于接收對(duì)所呈現(xiàn)的所述多個(gè)圖像中將與所述關(guān)注區(qū)域關(guān)聯(lián)的圖像的選擇;輸入裝置(24),所述輸入裝置(24)用于接收對(duì)將應(yīng)用于關(guān)聯(lián)圖像的基于所述關(guān)注區(qū)域的標(biāo)記的輸入;以及控制器(30、92),所述控制器(30、92)被構(gòu)造為接收標(biāo)記輸入,并將所述標(biāo)記應(yīng)用于關(guān)聯(lián)圖像中的每一個(gè)。
2.根據(jù)權(quán)利要求1所述的電子裝置(10),其中,所述輸入裝置(24)被構(gòu)造為接收所述標(biāo)記的手動(dòng)輸入。
3.根據(jù)權(quán)利要求1-2中的任一項(xiàng)所述的電子裝置(10),其中,所述控制器(30、92)被構(gòu)造為從所述關(guān)聯(lián)圖像中的每一個(gè)提取圖像部分,所述圖像部分包含基于所述關(guān)注區(qū)域的公共主題;并且所述電子裝置包括通信電路(96),所述通信電路(96)用于向標(biāo)記生成服務(wù)器(75)發(fā)送所述圖像部分,并用于從所述標(biāo)記生成服務(wù)器接收基于所述公共主題的多個(gè)標(biāo)記建議; 其中所述輸入裝置(24)接收對(duì)建議的標(biāo)記中的一個(gè)標(biāo)記的接受的標(biāo)記輸入,并且所述控制器進(jìn)一步構(gòu)造為將接受的標(biāo)記應(yīng)用于所述關(guān)聯(lián)圖像中的每一個(gè)。
4.根據(jù)權(quán)利要求3所述的電子裝置(10),其中,每個(gè)圖像部分包括分別提取自每個(gè)關(guān)聯(lián)圖像的縮略圖部分。
5.根據(jù)權(quán)利要求3所述的電子裝置(10),其中,每個(gè)圖像部分包括所述公共主題的對(duì)象印章。
6.根據(jù)權(quán)利要求1-5中的任一項(xiàng)所述的電子裝置(10),其中,所述接口(22a)包括所述顯示器(22)上的觸摸屏表面,并且通過(guò)在所述觸摸屏表面的位于至少一個(gè)呈現(xiàn)的圖像內(nèi)的部分上繪制所述關(guān)注區(qū)域來(lái)輸入所述關(guān)注區(qū)域。
7.根據(jù)權(quán)利要求6所述的電子裝置(10),其中,通過(guò)與所述觸摸屏表面(22a)的位于將關(guān)聯(lián)的每一個(gè)圖像內(nèi)的部分交互來(lái)從所呈現(xiàn)的所述多個(gè)圖像中選擇所述關(guān)聯(lián)圖像。
8.根據(jù)權(quán)利要求6-7中的任一項(xiàng)所述的電子裝置(10),所述電子裝置(10)還包括觸摸筆(14),所述觸摸筆(14)用于將輸入提供到所述觸摸屏表面(22a)。
9.根據(jù)權(quán)利要求1所述的電子裝置(10),其中,所述接口(22a)包括所述顯示器(22) 上的觸摸屏表面,并且所述顯示器具有顯示部分(20),所述顯示部分(20)用于顯示輸入的關(guān)注區(qū)域,并且通過(guò)與所述觸摸屏表面交互以將顯示的關(guān)注區(qū)域應(yīng)用于將被關(guān)聯(lián)的每一個(gè)圖像來(lái)選擇所述關(guān)聯(lián)圖像。
10.根據(jù)權(quán)利要求1-9中的任一項(xiàng)所述的電子裝置(10),其中,分別為多個(gè)呈現(xiàn)的圖像輸入相應(yīng)的多個(gè)關(guān)注區(qū)域,并且所述控制器(30、92)被構(gòu)造為將所述標(biāo)記應(yīng)用于與至少一個(gè)關(guān)注區(qū)域關(guān)聯(lián)的每個(gè)圖像。
11.根據(jù)權(quán)利要求10所述的電子裝置(10),其中,至少第一標(biāo)記和第二標(biāo)記被應(yīng)用于至少一個(gè)關(guān)聯(lián)圖像,其中所述第一標(biāo)記對(duì)應(yīng)于總圖像分類(lèi),并且所述第二標(biāo)記對(duì)應(yīng)于所述總圖像分類(lèi)內(nèi)的具體圖像分類(lèi)。
12.—種標(biāo)記生成服務(wù)器(75),所述標(biāo)記生成服務(wù)器(75)包括網(wǎng)絡(luò)接口(77),所述網(wǎng)絡(luò)接口(77)用于從電子裝置(10)接收多個(gè)圖像部分,所述圖像部分中的每一個(gè)是分別從相應(yīng)的多個(gè)關(guān)聯(lián)圖像中提取的; 數(shù)據(jù)庫(kù)(78),所述數(shù)據(jù)庫(kù)(78)包括多個(gè)參考圖像;以及控制器(76),所述控制器(76)被構(gòu)造為將接收的圖像部分與所述參考圖像進(jìn)行比較以識(shí)別所述圖像部分的公共主題,并且所述控制器(76)被構(gòu)造為生成將應(yīng)用于所述關(guān)聯(lián)圖像中的每一個(gè)的基于所述公共主題的多個(gè)標(biāo)記建議;其中,所述標(biāo)記建議經(jīng)由所述網(wǎng)絡(luò)接口發(fā)送給所述電子裝置。
13.根據(jù)權(quán)利要求12所述的標(biāo)記生成服務(wù)器(75),其中,如果所述控制器(76)不能識(shí)別所述公共主題,則所述控制器被構(gòu)造為生成無(wú)法標(biāo)記指示,其中所述無(wú)法標(biāo)記指示經(jīng)由所述網(wǎng)絡(luò)接口(77)發(fā)送給所述電子裝置(10)。
14.根據(jù)權(quán)利要求12-13中的任一項(xiàng)所述的標(biāo)記生成服務(wù)器(75),其中,所述網(wǎng)絡(luò)接口(77)從所述電子裝置(10)接收每個(gè)圖像部分都提取自第一組關(guān)聯(lián)圖像的第一組圖像部分,以及每個(gè)圖像部分都提取自第二組關(guān)聯(lián)圖像的第二組圖像部分;所述控制器(76)被構(gòu)造為將所述第一組圖像部分與所述參考圖像進(jìn)行比較以識(shí)別所述第一組圖像部分的第一公共主題,并且所述控制器(76)被構(gòu)造為生成將應(yīng)用于所述第一關(guān)聯(lián)圖像中的每一個(gè)的基于所述第一公共主題的第一多個(gè)標(biāo)記建議;并且所述控制器被構(gòu)造為將所述第二組圖像部分與所述參考圖像進(jìn)行比較以識(shí)別第二組圖像部分的第二公共主題,并且所述控制器被構(gòu)造為生成將應(yīng)用于所述第二關(guān)聯(lián)圖像中的每一個(gè)的基于所述第二公共主題的第二多個(gè)標(biāo)記建議;其中,所述第一多個(gè)標(biāo)記建議和所述第二多個(gè)標(biāo)記建議經(jīng)由所述網(wǎng)絡(luò)接口發(fā)送給所述電子裝置。
15.根據(jù)權(quán)利要求12-14中的任一項(xiàng)所述的標(biāo)記生成服務(wù)器(75),其中,每個(gè)參考圖像包括相應(yīng)數(shù)字圖像的對(duì)象印章。
16.一種標(biāo)記多個(gè)數(shù)字圖像的方法,所述方法包括以下步驟 在顯示器(22)上呈現(xiàn)多個(gè)數(shù)字圖像;接收對(duì)所述多個(gè)數(shù)字圖像中的至少一個(gè)內(nèi)的關(guān)注區(qū)域的輸入;接收對(duì)所呈現(xiàn)的所述多個(gè)圖像中的圖像的選擇并且將選擇的圖像與所述關(guān)注區(qū)域關(guān)聯(lián);接收對(duì)將應(yīng)用于關(guān)聯(lián)圖像的標(biāo)記的輸入;以及將輸入的標(biāo)記應(yīng)用于所述關(guān)聯(lián)圖像中的每一個(gè)。
17.根據(jù)權(quán)利要求16所述的方法,其中,接收標(biāo)記輸入包括接收所述標(biāo)記的手動(dòng)輸入。
18.根據(jù)權(quán)利要求16-17中的任一項(xiàng)所述的方法,所述方法還包括以下步驟從所述關(guān)聯(lián)圖像中的每一個(gè)提取圖像部分,所述圖像部分分別包含基于所述關(guān)注區(qū)域的公共主題;向標(biāo)記生成服務(wù)器(75)發(fā)送所述圖像部分;從所述標(biāo)記生成服務(wù)器接收基于所述公共主題的多個(gè)標(biāo)記建議;以及將至少一個(gè)建議的標(biāo)記應(yīng)用于所述關(guān)聯(lián)圖像中的每一個(gè)。
19.根據(jù)權(quán)利要求16-18中的任一項(xiàng)所述的方法,所述方法還包括以下步驟接收分別用于多個(gè)呈現(xiàn)的圖像的多個(gè)關(guān)注區(qū)域的輸入,以及將所述標(biāo)記應(yīng)用于與至少一個(gè)關(guān)注區(qū)域關(guān)聯(lián)的每個(gè)圖像。
20.根據(jù)權(quán)利要求19所述的方法,所述方法還包括以下步驟將至少第一標(biāo)記和第二標(biāo)記應(yīng)用于至少一個(gè)關(guān)聯(lián)圖像,其中所述第一標(biāo)記對(duì)應(yīng)于總圖像分類(lèi),并且所述第二標(biāo)記對(duì)應(yīng)于所述總圖像分類(lèi)中的具體圖像分類(lèi)。
全文摘要
一種用于標(biāo)記多個(gè)數(shù)字圖像的系統(tǒng)包括具有用于呈現(xiàn)數(shù)字圖像的顯示器(22)的電子裝置(10)。電子裝置中的接口(22a)接收對(duì)呈現(xiàn)的圖像中的一個(gè)圖像內(nèi)的關(guān)注區(qū)域的輸入,并接收對(duì)呈現(xiàn)的圖像中將與關(guān)注區(qū)域關(guān)聯(lián)的圖像的選擇。電子裝置中的輸入裝置(24)接收將應(yīng)用于關(guān)聯(lián)圖像的基于關(guān)注區(qū)域的標(biāo)記輸入。在一種實(shí)施方式中,輸入裝置是接收手動(dòng)標(biāo)記輸入的鍵盤(pán)?;蛘撸梢韵蚓W(wǎng)絡(luò)服務(wù)器(75)發(fā)送呈現(xiàn)的圖像的部分。服務(wù)器可以將圖像部分與參考數(shù)據(jù)庫(kù)進(jìn)行比較以識(shí)別圖像部分的主題,并生成基于該主題的多個(gè)建議標(biāo)記。
文檔編號(hào)G06F17/30GK102473186SQ201080032714
公開(kāi)日2012年5月23日 申請(qǐng)日期2010年1月15日 優(yōu)先權(quán)日2009年7月20日
發(fā)明者J·恩斯特羅姆, 布·拉爾森 申請(qǐng)人:索尼愛(ài)立信移動(dòng)通訊有限公司