基于優(yōu)先級(jí)的圖像處理方法
【專利說明】
[0001] 相關(guān)申請(qǐng)的奪叉引用
[0002] 本申請(qǐng)是在2014年5月1日遞交的具有申請(qǐng)?zhí)?4/267,840的名為"圖像處理" 的美國非臨時(shí)申請(qǐng)的部分延續(xù)，其繼而要求在2013年5月1日遞交的臨時(shí)申請(qǐng)61/956, 927 的優(yōu)先權(quán)；本申請(qǐng)進(jìn)一步要求以下美國臨時(shí)專利申請(qǐng)的優(yōu)先權(quán)和權(quán)益：
[0003] 在2014年4月4日遞交并具有申請(qǐng)?zhí)?1/975, 691的"視覺搜索"；
[0004] 在2014年4月7日遞交并具有申請(qǐng)?zhí)?1/976, 494的"視覺搜索廣告"；
[0005] 在2014年5月1日遞交并具有申請(qǐng)?zhí)?1/987, 156的"圖像處理"；
[0006] 在2014年7月31日遞交并具有申請(qǐng)?zhí)?2/031，397的"圖像處理中的實(shí)時(shí)目標(biāo)選 擇"；
[0007] 在2014年10月27日遞交并具有申請(qǐng)?zhí)?2/069, 160的"分布式圖像處理"；以及
[0008] 在2014年11月25日遞交并具有申請(qǐng)?zhí)?2/084, 509的"選擇性圖像處理"。
[0009] 所有以上專利申請(qǐng)通過引用被并入本文。
技術(shù)領(lǐng)域
[0010] 本申請(qǐng)?zhí)幱趫D像處理的領(lǐng)域，更具體地，處于特征化圖像的內(nèi)容的領(lǐng)域。
【背景技術(shù)】
[0011] 通常從圖像中提取信息比從文本數(shù)據(jù)中提取信息更難。然而，一大部分信息在圖 像中被找到。自動(dòng)的圖像辨識(shí)系統(tǒng)的可靠度高度取決于圖像的內(nèi)容。例如，光學(xué)字符辨識(shí) 比面部辨識(shí)更可靠。圖像辨識(shí)的目標(biāo)是對(duì)圖像添加標(biāo)簽。標(biāo)簽指的是特征化圖像的內(nèi)容的 標(biāo)簽（單詞）的識(shí)別。例如，汽車的圖像可以被添加有單詞"汽車"、"福特格拉納達(dá)（Ford Granada) "或"具有損壞前燈的白色1976年福特格拉納達(dá)"的標(biāo)簽。這些標(biāo)簽包括不同數(shù) 量的信息，并可由此在用途上變化。

【發(fā)明內(nèi)容】

[0012] 本申請(qǐng)的實(shí)施例包括添加圖像標(biāo)簽的雙管齊下的方法。第一個(gè)方法是在圖像上執(zhí) 行自動(dòng)的圖像辨識(shí)。該自動(dòng)的圖像辨識(shí)導(dǎo)致圖像的審核（review)。該圖像審核包括識(shí)別圖 像的內(nèi)容的一個(gè)或多個(gè)標(biāo)簽并且可選地還包括表示自動(dòng)圖像識(shí)別的可靠度的置信度的度 量。該對(duì)圖像添加標(biāo)簽的方法中的第二個(gè)方法包括圖像的手動(dòng)添加標(biāo)簽。手動(dòng)添加標(biāo)簽包 括人觀看每個(gè)圖像、考慮圖像的內(nèi)容并且手動(dòng)地提供表示圖像內(nèi)容的標(biāo)簽。自動(dòng)的圖像辨 識(shí)具有分析每個(gè)圖像的時(shí)間上或金錢上的成本可以相對(duì)低的優(yōu)點(diǎn)。圖像的手動(dòng)標(biāo)簽添加具 有更高的準(zhǔn)確度和可靠度的優(yōu)點(diǎn)。
[0013] 本發(fā)明的實(shí)施例結(jié)合了自動(dòng)圖像辨識(shí)和手動(dòng)圖像辨識(shí)兩者。在一些實(shí)施例中，自 動(dòng)圖像辨識(shí)首先被執(zhí)行。產(chǎn)生的圖像審核通常既包括特征化圖像的一個(gè)或多個(gè)標(biāo)簽也包括 這些標(biāo)簽在準(zhǔn)確度上的置信度的度量。如果置信度高于預(yù)定閾值，那么這些標(biāo)簽與該圖像 關(guān)聯(lián)并被提供作為添加標(biāo)簽過程的輸出。如果置信度低于預(yù)定閾值，那么該圖像的手動(dòng)審 核被執(zhí)行。手動(dòng)審核導(dǎo)致特征化圖像的內(nèi)容的附加和/或不同標(biāo)簽。在一些實(shí)施例中，自 動(dòng)的圖像辨識(shí)和圖像的手動(dòng)審核被并行地執(zhí)行。如果自動(dòng)圖像辨識(shí)導(dǎo)致一個(gè)或多個(gè)標(biāo)簽具 有高于預(yù)定閾值的置信度則手動(dòng)審核被可選地取消或終止。
[0014] 在一些實(shí)施例中，圖像的辨識(shí)可以被升級(jí)。圖像辨識(shí)過程的升級(jí)包括針對(duì)表示圖 像的內(nèi)容的進(jìn)一步或改進(jìn)的標(biāo)簽的要求。例如，如果自動(dòng)圖像辨識(shí)導(dǎo)致標(biāo)簽"白車"，該辨識(shí) 的升級(jí)可以導(dǎo)致標(biāo)簽"白色福特格拉納達(dá)"。在一些實(shí)施例中，升級(jí)的審核利用專家人類審 核者。例如，以上示例可以包括利用具有汽車的專業(yè)知識(shí)的人類審核者。人類審核者的專 業(yè)知識(shí)的其它示例在本文的其它地方被討論。
[0015] 本發(fā)明的各種實(shí)施例包括導(dǎo)向改進(jìn)圖像辨識(shí)的準(zhǔn)確度同時(shí)還最小化成本的特征。 通過舉例的方式，這些特征包括人口審核者的有效利用、圖像標(biāo)簽的實(shí)時(shí)遞送、和/或圖像 辨識(shí)的無縫升級(jí)。本文公開的圖像辨識(shí)的方法被可選地用來生成適于執(zhí)行互聯(lián)網(wǎng)搜索和/ 或選擇廣告的圖像標(biāo)簽。例如，在一些實(shí)施例中，圖像標(biāo)簽被自動(dòng)地用來執(zhí)行谷歌搜索和/ 或基于谷歌的AdWords而賣廣告。
[0016] 本發(fā)明的各種實(shí)施例包括圖像處理系統(tǒng)，該圖像處理系統(tǒng)包括被配置為在通信網(wǎng) 絡(luò)上傳送圖像和圖像標(biāo)簽的I/O ;自動(dòng)識(shí)別接口，被配置為將圖像向自動(dòng)識(shí)別系統(tǒng)傳送并 且接收來自自動(dòng)識(shí)別系統(tǒng)的圖像的計(jì)算機(jī)生成的審核，該計(jì)算機(jī)生成的審核包括識(shí)別圖像 的內(nèi)容的一個(gè)或多個(gè)標(biāo)簽；目的地邏輯，被配置為確定將圖像發(fā)送到的第一目的地，以用于 由第一人類審核員對(duì)該圖像進(jìn)行第一手動(dòng)審核；圖像張貼邏輯，被配置為將圖像張貼至目 的地；審核邏輯，被配置為接收來自目的地的圖像的手動(dòng)審核并且接收計(jì)算機(jī)生成的審核， 該手動(dòng)審核包括識(shí)別圖像的內(nèi)容的一個(gè)或多個(gè)圖像標(biāo)簽；響應(yīng)邏輯，被配置為向通信網(wǎng)絡(luò) 提供計(jì)算機(jī)生成的審核的圖像標(biāo)簽以及手動(dòng)審核的圖像標(biāo)簽；存儲(chǔ)器，被配置為存儲(chǔ)圖像； 以及微處理器，被配置為至少執(zhí)行目的地邏輯。
[0017] 本發(fā)明的各種實(shí)施例包括處理圖像的方法，該方法包括接收來自圖像源的圖像； 向自動(dòng)圖像識(shí)別系統(tǒng)分配圖像；接收來自自動(dòng)圖像識(shí)別系統(tǒng)的計(jì)算機(jī)生成的審核，該計(jì)算 機(jī)生成的審核包括被自動(dòng)圖像識(shí)別系統(tǒng)指派給該圖像的一個(gè)或多個(gè)圖像標(biāo)簽和置信度的 度量，該置信度的度量是被指派至圖像的圖像標(biāo)簽正確地特征化圖像的內(nèi)容的置信度的度 量；將圖像置于圖像隊(duì)列中；確定目的地；將用于手動(dòng)審核的圖像張貼至第一目的地，該第 一目的地包括人類圖像審核員的顯示設(shè)備；以及接收來自目的地的圖像的手動(dòng)圖像審核， 該圖像審核包括被人類圖像審核員指派至圖像的一個(gè)或多個(gè)圖像標(biāo)簽，該一個(gè)或多個(gè)圖像 標(biāo)簽特征化圖像的內(nèi)容。
[0018] 本申請(qǐng)的各種實(shí)施例包括圖像源，其包括被配置為采集圖像的相機(jī)；顯示器，被配 置為向用戶呈現(xiàn)圖像；眼跟蹤邏輯，被配置為檢測(cè)用戶的一個(gè)或多個(gè)眼睛的動(dòng)作；可選的 圖像標(biāo)記邏輯，被配置為將標(biāo)記置于圖像上，該標(biāo)記被配置為指示圖像的特定子集并且響 應(yīng)于所檢測(cè)的動(dòng)作；顯示邏輯，被配置為實(shí)時(shí)地將標(biāo)記顯示在圖像上；1/0,被配置為提供 圖像至計(jì)算機(jī)網(wǎng)絡(luò)；以及處理器，被配置為至少執(zhí)行顯示邏輯。
[0019] 本申請(qǐng)的各種實(shí)施例包括圖像源，其包括被配置為采集圖像的相機(jī)；顯示器，被配 置為向用戶呈現(xiàn)圖像；眼跟蹤邏輯，被配置為檢測(cè)用戶的一個(gè)或多個(gè)眼睛的動(dòng)作；圖像標(biāo) 記邏輯，被配置使用戶指示圖像的特定子集并且突出該子集內(nèi)的對(duì)象，該指示響應(yīng)于所檢 測(cè)的動(dòng)作；顯示邏輯，被配置為實(shí)時(shí)地將所突出的顯示在圖像上；1/0,被配置為向計(jì)算機(jī) 網(wǎng)絡(luò)提供圖像和特定子集的指示；以及處理器，被配置為至少執(zhí)行顯示邏輯。
[0020] 本發(fā)明的各種實(shí)施例包括圖像源，其包括被配置為采集圖像的相機(jī)；顯示器，被配 置為向用戶呈現(xiàn)圖像；選擇邏輯，被配置用于選擇；圖像標(biāo)記邏輯，被配置使用戶指示圖像 的特定子集并且突出該子集內(nèi)的對(duì)象，該指示響應(yīng)于所檢測(cè)的手指；1/0,被配置為向計(jì)算 機(jī)網(wǎng)絡(luò)提供圖像和特定子集的指示；顯示邏輯，被配置為實(shí)時(shí)地顯示圖像并且響應(yīng)于圖像 顯示從計(jì)算機(jī)網(wǎng)絡(luò)接收的圖像標(biāo)簽，該圖像標(biāo)簽特征化圖像的內(nèi)容；以及處理器，被配置為 執(zhí)行至少顯示邏輯。
[0021] 本發(fā)明的各種實(shí)施例包括圖像處理系統(tǒng)，該圖像處理系統(tǒng)包括被配置為在通信網(wǎng) 絡(luò)上傳送圖像序列和圖像標(biāo)簽的I/O ;可選的自動(dòng)識(shí)別接口，被配置為將圖像序列向自動(dòng) 識(shí)別系統(tǒng)傳送并且接收來自自動(dòng)識(shí)別系統(tǒng)的圖像的計(jì)算機(jī)生成的審核，該計(jì)算機(jī)生成的審 核包括識(shí)別圖像的內(nèi)容的一個(gè)或多個(gè)標(biāo)簽；目的地邏輯，被配置為確定將圖像序列發(fā)送至 的第一目的地，以用于由第一人類審核者對(duì)該圖像序列進(jìn)行第一手動(dòng)審核；圖像張貼邏輯， 被配置為將圖像序列張貼至目的地；審核邏輯，被配置為接收來自目的地的圖像序列的手 動(dòng)審核并且可選地接收計(jì)算機(jī)生成的審核，該手動(dòng)審核包括識(shí)別圖像序列內(nèi)的動(dòng)作的一個(gè) 或多個(gè)圖像標(biāo)簽；響應(yīng)邏輯，被配置為向通信網(wǎng)絡(luò)提供計(jì)算機(jī)生成的審核的圖像標(biāo)簽以及 手動(dòng)審核的圖像標(biāo)簽；存儲(chǔ)器，被配置為存儲(chǔ)圖像序列；以及微處理器，被配置為至少執(zhí)行 目的地邏輯。
[0022] 本發(fā)明的各種實(shí)施例包括處理圖像的方法，該方法包括：在圖像處理服務(wù)器經(jīng)由 通信網(wǎng)絡(luò)接收來自遠(yuǎn)程客戶端的圖像的一個(gè)或多個(gè)第一描述符；將所接收的第一描述符與 本地存儲(chǔ)在圖像處理服務(wù)器的第二描述符比較以確定是否第一描述符匹配第二描述符的 集合；響應(yīng)于第一描述符與第二描述符的集合相匹配，獲取與第二描述符的集合相關(guān)聯(lián)而 存儲(chǔ)的一個(gè)或多個(gè)圖像標(biāo)簽；并且向客戶端提供一個(gè)或多個(gè)圖像標(biāo)簽。
[0023] 本發(fā)明的各種實(shí)施例包括在圖像處理服務(wù)器處理圖像的方法，該方法包括：接收 來自遠(yuǎn)程客戶端的圖像和特征化該圖像的數(shù)據(jù)；確定針對(duì)圖像的目的地，該目的地與人類 圖像審核者相關(guān)聯(lián)，該目的地的確定基于特征化圖像的數(shù)據(jù)與人類審核者的專長之間的 匹配；將圖像張貼至所確定的目的地；接收來自目的地的特征化圖像的一個(gè)或多個(gè)圖像標(biāo) 簽；并且向客戶端提供一個(gè)或多個(gè)圖像標(biāo)簽。
[0024] 本發(fā)明的各個(gè)實(shí)施例包括處理圖像的方法，該方法包括：接收來自移動(dòng)設(shè)備的特 征化圖像的數(shù)據(jù)，該數(shù)據(jù)特征化包括所識(shí)別的圖像的或圖像的描述符的特征的圖像；基于 特征化圖像的數(shù)據(jù)生成圖像標(biāo)簽；向移動(dòng)設(shè)備提供圖像標(biāo)簽。
[0025] 本發(fā)明的各種實(shí)施例包括處理圖像的方法，該方法包括：使用便攜設(shè)備接收?qǐng)D像； 使用便攜設(shè)備的處理器識(shí)別圖像的特征；經(jīng)由通信網(wǎng)絡(luò)向遠(yuǎn)程圖像處理服務(wù)器提供特征； 接收來自圖像處理服務(wù)器的基于特征的圖像標(biāo)簽；并且在便攜設(shè)備的顯示器上顯示圖像標(biāo) 簽。
[0026] 本發(fā)明的各種實(shí)施例包括處理圖像的方法，該方法包括：使用便攜設(shè)備接收?qǐng)D像； 使用便攜設(shè)備的處理器識(shí)別圖像的特征；基于所識(shí)別的特征導(dǎo)出圖像描述符；經(jīng)由通信網(wǎng) 絡(luò)向遠(yuǎn)程圖像處理服務(wù)器提供描述符；接收來自圖像處理服務(wù)器的基于描述符的圖像標(biāo) 簽；并且在便攜設(shè)備的顯示器上顯示圖像標(biāo)簽。
[0027] 本發(fā)明的各種實(shí)施例包括處理圖像的方法，該方法包括：使用便攜設(shè)備接收?qǐng)D像； 使用便攜設(shè)備的處理器識(shí)別圖像的特征；基于所識(shí)別的特征導(dǎo)出圖像描述符；將圖像描述 符與之前存儲(chǔ)在便攜設(shè)備上的圖像描述符的集合比較以確定是否在圖像描述符與所存儲(chǔ) 的圖像描述符的集合之間存在匹配；如果在圖像描述符與所存儲(chǔ)的圖像描述符的集合之間 存在匹配則從便攜設(shè)備的存儲(chǔ)器獲取與圖像描述符的集合相關(guān)聯(lián)的一個(gè)或多個(gè)圖像標(biāo)簽； 將所獲取的一個(gè)或多個(gè)圖形標(biāo)簽顯示在便攜設(shè)備的顯示器上。
[0028] 本發(fā)明的各種實(shí)施例包括處理圖像的方法，該方法包括：使用便攜設(shè)備接收?qǐng)D像； 使用便攜設(shè)備的處理器識(shí)別圖像的特征；基于所識(shí)別的特征導(dǎo)出圖像描述符；將圖像描述 符與之前存儲(chǔ)在便攜設(shè)備上的圖像描述符的集合比較以確定是否在圖像描述符與所存儲(chǔ) 的圖像描述符的集合之間存在匹配；基于在圖像描述符與所存儲(chǔ)的圖像描述符的集合之間 的匹配分類圖像；向遠(yuǎn)程圖像處理服務(wù)器發(fā)送圖像和圖像的分類；接收基于圖像的一個(gè)或 多個(gè)圖像標(biāo)簽；并且將一個(gè)或多個(gè)圖像標(biāo)簽顯示在便攜設(shè)備的顯示器上。
[0029] 本發(fā)明的各種實(shí)施例包括圖像處理系統(tǒng)，其包括被配置為在通信網(wǎng)絡(luò)上傳送圖像 和圖像標(biāo)簽的I/O ;圖像分級(jí)器，被配置為確定用于對(duì)圖像添加標(biāo)簽的優(yōu)先級(jí)；目的地邏 輯，被配置為確定將圖像發(fā)送到的第一目的地以用于被第一人類審核者對(duì)圖像的第一手動(dòng) 審核；圖像張貼邏輯，被配置為將圖像張貼至目的地；審核邏輯，被配置為接收來自目的地 的圖像的手動(dòng)審核，該手動(dòng)審核包括識(shí)別圖像的內(nèi)容的一個(gè)或多個(gè)圖像標(biāo)簽；存儲(chǔ)器，被配 置為將一個(gè)或多個(gè)圖像標(biāo)簽存儲(chǔ)在數(shù)據(jù)結(jié)構(gòu)中；以及微處理器，被配置為至少執(zhí)行圖像分 級(jí)器。
[0030] 本發(fā)明的各種實(shí)施例包括圖像處理系統(tǒng)，其包括被配置為在通信網(wǎng)絡(luò)上接收?qǐng)D像 的I/O ;圖像分級(jí)器，被配置為確定圖像的優(yōu)先級(jí)并且確定是否基于該優(yōu)先級(jí)對(duì)圖像添加 標(biāo)簽和/或如何對(duì)圖像添加標(biāo)簽；用于對(duì)圖像添加標(biāo)簽以產(chǎn)生特征化圖像的一個(gè)或多個(gè)圖 像標(biāo)簽的手動(dòng)或自動(dòng)裝置；存儲(chǔ)器，被配置為在數(shù)據(jù)結(jié)構(gòu)中存儲(chǔ)圖像以及特征化圖像的一 個(gè)或多個(gè)圖像標(biāo)簽；以及微處理器，被配置為至少執(zhí)行圖像分級(jí)器。
[0031] 本發(fā)明的各種實(shí)施例包括圖像處理系統(tǒng)，其包括被配置為在通信網(wǎng)絡(luò)上接收?qǐng)D像 的I/O ;圖像分級(jí)器，被配置為確定圖像的優(yōu)先級(jí)并且基于該優(yōu)先級(jí)選擇對(duì)圖像添加標(biāo)簽 的過程；用于對(duì)圖像添加標(biāo)簽以產(chǎn)生特征化圖像的一個(gè)或多個(gè)圖像標(biāo)簽的裝置；存儲(chǔ)器， 被配置為在數(shù)據(jù)結(jié)構(gòu)中存儲(chǔ)圖像以及特征化圖像的一個(gè)或多個(gè)圖像標(biāo)簽；以及被配置為至 少執(zhí)行圖像分級(jí)器的微處理器。
[0032] 本發(fā)明的各種實(shí)施例包括圖像處理系統(tǒng)，其包括被配置為在通信網(wǎng)絡(luò)上傳送圖像 和圖像標(biāo)簽的I/O ;圖像分級(jí)器，被配置為確定用于基于包括圖像的視頻被觀看多少次來 對(duì)圖像添加標(biāo)簽的優(yōu)先級(jí)；目的地邏輯，被配置為確定將圖像發(fā)送到的目的地以用于被人 類審核者對(duì)圖像的手動(dòng)審核；圖像張貼邏輯，被配置為將圖像張貼至目的地；審核邏輯，被 配置為接收來自目的地的圖像的手動(dòng)審核，該手動(dòng)審核包括識(shí)別圖像的內(nèi)容的一個(gè)或多個(gè) 圖像標(biāo)簽；存儲(chǔ)器，被配置為將一個(gè)或多個(gè)圖像標(biāo)簽存儲(chǔ)在數(shù)據(jù)結(jié)構(gòu)中；以及微處理器，被 配置為至少執(zhí)行圖像分級(jí)器。
[0033] 本發(fā)明的各種實(shí)施例包括處理圖像的方法，該方法包括接收來自圖像源的圖像； 向自動(dòng)圖像識(shí)別系統(tǒng)分配圖像；接收來自自動(dòng)圖像識(shí)別系統(tǒng)的計(jì)算機(jī)生成的審核，該計(jì)算 機(jī)生成的審核包括被自動(dòng)圖像識(shí)別系統(tǒng)指派至該圖像的一個(gè)或多個(gè)圖像標(biāo)簽和置信度的 度量，該置信度的度量是被指派至圖像的圖像標(biāo)簽正確地特征化圖像的內(nèi)容的置信度的度 量；基于置信度的度量將優(yōu)先級(jí)指派至圖像；基于優(yōu)先級(jí)確定圖像應(yīng)當(dāng)被手動(dòng)標(biāo)簽；將用 于手動(dòng)審核的圖像張貼至第一目的地，該第一目的地包括人類圖像審核員的顯示設(shè)備；以 及接收來自目的地的圖像的手動(dòng)圖像審核，該圖像審核包括被人類圖像審核者指派至圖像 的一個(gè)或多個(gè)圖像標(biāo)簽，被人類圖像審核者指派的該一個(gè)或多個(gè)圖像標(biāo)簽特征化圖像的內(nèi) 容。
[0034] 本發(fā)明的各種實(shí)施例包括處理圖像的方法，該方法包括接收來自圖像源的圖像； 使用微處理器自動(dòng)地確定圖像的優(yōu)先級(jí)；基于優(yōu)先級(jí)確定圖像應(yīng)當(dāng)怎樣被添加標(biāo)簽；對(duì)圖 像添加標(biāo)簽以產(chǎn)生一個(gè)或多個(gè)標(biāo)簽，該一個(gè)或多個(gè)標(biāo)簽特征化圖像的內(nèi)容；并且將該圖像 和該一個(gè)或多個(gè)標(biāo)簽存儲(chǔ)在數(shù)據(jù)結(jié)構(gòu)中。
【附圖說明】
[0035] 圖1圖示了根據(jù)本發(fā)明的各種實(shí)施例的圖像處理系統(tǒng)。
[0036] 圖2圖示了根據(jù)本發(fā)明的各種實(shí)施例的圖像采集屏幕。
[0037] 圖3圖示了根據(jù)本發(fā)明的各種實(shí)施例的基于圖像分析的搜索結(jié)果。
[0038] 圖4圖示了根據(jù)本發(fā)明的各種實(shí)施例的處理圖像的方法。
[0039] 圖5圖示了根據(jù)本發(fā)明的各種實(shí)施例的處理圖像的可替代方法。
[0040] 圖6圖示了根據(jù)本發(fā)明的各種實(shí)施例的管理審核者池的方法。
[0041] 圖7圖示了根據(jù)本發(fā)明的各種實(shí)施例的實(shí)時(shí)地接收?qǐng)D像標(biāo)簽的方法。
[0042] 圖8圖示了根據(jù)本發(fā)明的各種實(shí)施例的升級(jí)圖像審核的方法。
[0043] 圖9圖示了根據(jù)本發(fā)明的各種實(shí)施例的包括電子眼鏡的圖像源120A的示例。
[0044] 圖10圖示了根據(jù)本發(fā)明的各種實(shí)施例的處理圖像源上的圖像的方法。
[0045] 圖11圖示了根據(jù)本發(fā)明的各種實(shí)施例的基于圖像描述符處理圖像的方法。
[0046] 圖12圖示了根據(jù)本發(fā)明的各種實(shí)施例的使用反饋處理圖像的方法。
[0047] 圖13和14圖示了根據(jù)本發(fā)明的各種實(shí)施例的基于圖像描述符提供圖像標(biāo)簽的方 法。
[0048] 圖15圖示了根據(jù)本發(fā)明的各種實(shí)施例的按優(yōu)先級(jí)排序圖像標(biāo)簽的方法。
【具體實(shí)施方式】
[0049] 圖1圖示了根據(jù)本發(fā)明的各種實(shí)施例的圖像處理系統(tǒng)110。圖像處理系統(tǒng)110被 配置用于對(duì)圖像添加標(biāo)簽并且可以包括一個(gè)或多個(gè)分布式計(jì)算設(shè)備。例如，圖像處理系統(tǒng) 110可以包括位于地理上不同地點(diǎn)的一個(gè)或多個(gè)服務(wù)器。圖像處理系統(tǒng)110被配置為經(jīng)由 網(wǎng)絡(luò)115進(jìn)行通信。網(wǎng)絡(luò)115可以包括多種的通信網(wǎng)絡(luò)，諸如互聯(lián)網(wǎng)和/或蜂窩電話系統(tǒng)。 網(wǎng)絡(luò)115通常被配置為使用諸如IP/TCP、FTP等標(biāo)準(zhǔn)協(xié)議傳送數(shù)據(jù)。被圖像處理系統(tǒng)110 處理的圖像從圖像源120 (單獨(dú)標(biāo)記為120A、120B等）被接收。圖像源120可以包括被連 接至互聯(lián)網(wǎng)和/或個(gè)人移動(dòng)計(jì)算設(shè)備的計(jì)算源。例如，圖像源120A可以是被配置為提供社 交網(wǎng)站或圖片分享服務(wù)的網(wǎng)絡(luò)服務(wù)器。圖像源120B可以是智能電話、相機(jī)、可穿戴相機(jī)、電 子眼鏡或其它便攜圖像采集設(shè)備。圖像源可以被統(tǒng)一資源定位符、互聯(lián)網(wǎng)協(xié)議地址、MC地 址、蜂窩電話標(biāo)識(shí)符和/或類似物所識(shí)別。在一些實(shí)施例中，圖像處理系統(tǒng)110被配置為接 收來自大量圖像源120的圖像。
[0050] 由圖像處理系統(tǒng)110執(zhí)行的圖像標(biāo)簽的部分包括向目的地125(分別標(biāo)記為125A、 125B等）發(fā)送圖像。目的地125是人類圖像審核者的計(jì)算設(shè)備并且通常在地理上遠(yuǎn)離圖像 處理系統(tǒng)110。目的地125至少包括顯示器和數(shù)據(jù)輸入設(shè)備，諸如觸摸屏、鍵盤和/或麥克 風(fēng)。例如，目的地125可以是與圖像處理系統(tǒng)110不同的建筑物、城市、州和/或國家。目 的地125可以包括個(gè)人計(jì)算機(jī)、平板電腦、智能電話等。在一些實(shí)施例中，目的地125包括 被特別配置為促進(jìn)圖像的審核的（計(jì)算）應(yīng)用。該應(yīng)用被可選地從圖像處理系統(tǒng)110提供 至目的地125。在一些實(shí)施例中，圖像處理系統(tǒng)110被配置用于人類圖像審核者從目的地 125登錄用戶賬號(hào)。目的地125通常與個(gè)體審核者相關(guān)聯(lián)并且可以被互聯(lián)網(wǎng)協(xié)議地址、MAC 地址、登錄會(huì)話標(biāo)識(shí)符、蜂窩電話標(biāo)識(shí)符和/或類似物所識(shí)別。在一些實(shí)施例中，目的地125 包括音頻至文本轉(zhuǎn)換器。由人類圖像審核者在若干目的地125提供的圖像標(biāo)簽數(shù)據(jù)被發(fā)送 至圖像處理系統(tǒng)110。圖像標(biāo)簽數(shù)據(jù)可以包括文本圖像標(biāo)簽、包括語言化標(biāo)簽的音頻數(shù)據(jù)、 和/或諸如升級(jí)請(qǐng)求或不適當(dāng)（明確的）材料標(biāo)識(shí)之類的非標(biāo)簽信息。
[0051] 圖像處理系統(tǒng)110包括被配置用于與外部系統(tǒng)通信的1/0(輸入/輸出）130。I/O 130包括路由器、交換機(jī)、調(diào)制解調(diào)器、防火墻、和/或類似物。I/O 130被配置為接收來自 圖像源120的圖像，向目的地125發(fā)送圖像，接收來自目的地125的標(biāo)簽數(shù)據(jù)，并且可選地 向圖像源120發(fā)送圖像標(biāo)簽。I/O 130包括通信硬件以及可選地包括應(yīng)用程序接口（API)。
[0052] 圖像處理系統(tǒng)110進(jìn)一步包括存儲(chǔ)器135。存儲(chǔ)器135包括被配置用于諸如圖像、 圖像標(biāo)簽、計(jì)算指令以及其它本文所討論的數(shù)據(jù)之類的數(shù)據(jù)的非暫時(shí)性儲(chǔ)存的硬件。例如， 存儲(chǔ)器135可以包括隨機(jī)存取存儲(chǔ)器（RAM)、硬盤驅(qū)動(dòng)器、光儲(chǔ)存介質(zhì)和/或類似物。存儲(chǔ) 器135被配置為通過使用特定的數(shù)據(jù)結(jié)構(gòu)、索引、文件結(jié)構(gòu)、數(shù)據(jù)訪問例程、安全協(xié)議和/或 類似物而存儲(chǔ)特定的數(shù)據(jù)（如本文所描述）。
[0053] 圖像處理系統(tǒng)110進(jìn)一步包括至少一個(gè)處理器140。處理器140是諸如電子微處 理器之類的硬件設(shè)備。處理器140被配置為通過硬件、固件或?qū)④浖噶钶d入處理器140 的寄存器而執(zhí)行特定功能。圖像處理系統(tǒng)110可選地包括多個(gè)處理器140。處理器140被 配置為執(zhí)行本文討論的各種類型的邏輯。
[0054] 由圖像處理系統(tǒng)110接收的圖像首先被存儲(chǔ)在圖像隊(duì)列145中。圖像隊(duì)列145是 存儲(chǔ)在存儲(chǔ)列表中的待審核的圖像的有序列表。存儲(chǔ)在圖像隊(duì)列145中的圖像通常與用于 引用圖像的圖像標(biāo)識(shí)符相關(guān)聯(lián)地被存儲(chǔ)并且可以具有不同的優(yōu)先級(jí)。例如，從圖片分享網(wǎng) 站接收的圖像可以具有比從智能電話接收的圖像更低的優(yōu)先級(jí)。通常，相對(duì)于針對(duì)一些其 它目的使用的圖像標(biāo)簽的那些圖像，針對(duì)請(qǐng)求者正在等待接收實(shí)時(shí)地表示圖像的圖像標(biāo)簽 的那些圖像被給予更高的優(yōu)先級(jí)。圖像隊(duì)列145可選地被存儲(chǔ)在存儲(chǔ)器135中。
[0055] 在圖像隊(duì)列145中，圖像被可選地與圖像標(biāo)識(shí)符或索引以及其它與每個(gè)圖像關(guān)聯(lián) 的數(shù)據(jù)相關(guān)聯(lián)地存儲(chǔ)。例如，圖像可以與關(guān)于圖像源120中的一個(gè)的源數(shù)據(jù)相關(guān)聯(lián)。源數(shù)據(jù) 可以包括諸如全球定位系統(tǒng)坐標(biāo)、街道和/或城市名、郵編、和/或類似物的地理信息。源 數(shù)據(jù)可以包括互聯(lián)網(wǎng)協(xié)議地址、