本發(fā)明涉及計算機數(shù)據(jù)處理領(lǐng)域，尤其涉及一種數(shù)據(jù)標(biāo)注的管理方法及裝置。
背景技術(shù)：
：數(shù)據(jù)標(biāo)注是指對文本、圖片、語音等數(shù)據(jù)進行描述或者標(biāo)記的過程，例如，在人臉樣本圖片上標(biāo)注左眼外眼角、右眼外眼角等位置?，F(xiàn)有的數(shù)據(jù)標(biāo)注過程為：手動將數(shù)據(jù)標(biāo)注任務(wù)切分為多個子任務(wù)并分發(fā)給多個標(biāo)注者；各標(biāo)注者根據(jù)子任務(wù)的數(shù)據(jù)的數(shù)據(jù)類型選擇對應(yīng)的單機版標(biāo)注工具進行標(biāo)注；所有子任務(wù)的標(biāo)注工作完成后，將各標(biāo)注者標(biāo)注后的數(shù)據(jù)整合保存。目前，標(biāo)注工具多種多樣。即使同一個數(shù)據(jù)類型，也可能對應(yīng)多種標(biāo)注工具。不同的標(biāo)注工具，導(dǎo)出的數(shù)據(jù)格式可能不同。因此，采用現(xiàn)有的數(shù)據(jù)標(biāo)注過程，對一個數(shù)據(jù)標(biāo)注任務(wù)，各個子任務(wù)對應(yīng)的標(biāo)注后的數(shù)據(jù)格式可能不盡相同，且與實際需要的數(shù)據(jù)格式不符，需要轉(zhuǎn)換為需要的數(shù)據(jù)格式后才能整合。數(shù)據(jù)格式轉(zhuǎn)換，特別是大數(shù)據(jù)量的數(shù)據(jù)標(biāo)注任務(wù)的數(shù)據(jù)格式轉(zhuǎn)換，降低了數(shù)據(jù)標(biāo)注、整合過程的效率。技術(shù)實現(xiàn)要素：本發(fā)明的一個目的是，提供一種數(shù)據(jù)標(biāo)注的管理方法及裝置，它能提高數(shù)據(jù)標(biāo)注、整合過程的效率。根據(jù)本發(fā)明的一方面，提供了一種數(shù)據(jù)標(biāo)注的管理方法，其中，該管理方法包括以下步驟：獲取與數(shù)據(jù)標(biāo)注任務(wù)對應(yīng)的數(shù)據(jù)集；獲取與所述數(shù)據(jù)集中各類數(shù)據(jù)對應(yīng)的標(biāo)注規(guī)則；將所述數(shù)據(jù)集分成數(shù)據(jù)子集；根據(jù)獲取的與所述各類數(shù)據(jù)對應(yīng)的標(biāo)注規(guī)則，生成數(shù)據(jù)子集的數(shù)據(jù)標(biāo)注子任務(wù)描述信息；發(fā)布數(shù)據(jù)子集的數(shù)據(jù)標(biāo)注子任務(wù)描述信息；響應(yīng)于接收到對數(shù)據(jù)子集的第一認(rèn)領(lǐng)請求，向所述第一認(rèn)領(lǐng)請求的發(fā)送方發(fā)送該數(shù)據(jù)子集；接收來自第一認(rèn)領(lǐng)請求的發(fā)送方的標(biāo)注后的數(shù)據(jù)，其中：該管理方法還包括將與數(shù)據(jù)子集中各類數(shù)據(jù)對應(yīng)的標(biāo)注工具的調(diào)用指令發(fā)送到第一認(rèn)領(lǐng)請求的發(fā)送方，其中與一類數(shù)據(jù)對應(yīng)的標(biāo)注工具導(dǎo)出的數(shù)據(jù)為該類數(shù)據(jù)的目標(biāo)標(biāo)注后數(shù)據(jù)格式；和/或在發(fā)布的數(shù)據(jù)子集的數(shù)據(jù)標(biāo)注子任務(wù)描述信息中含有該數(shù)據(jù)子集中各類數(shù)據(jù)的目標(biāo)標(biāo)注后數(shù)據(jù)格式。根據(jù)本發(fā)明的另一方面，還提供了一種數(shù)據(jù)標(biāo)注的管理裝置，其中，該管理裝置包括：數(shù)據(jù)集獲取單元，用于獲取與數(shù)據(jù)標(biāo)注任務(wù)對應(yīng)的數(shù)據(jù)集；標(biāo)注規(guī)則獲取單元，用于獲取與所述數(shù)據(jù)集中各類數(shù)據(jù)對應(yīng)的標(biāo)注規(guī)則；數(shù)據(jù)子集劃分單元，用于將所述數(shù)據(jù)集分成數(shù)據(jù)子集；標(biāo)注任務(wù)描述信息生成單元，用于根據(jù)獲取的與所述各類數(shù)據(jù)對應(yīng)的標(biāo)注規(guī)則，生成數(shù)據(jù)子集的數(shù)據(jù)標(biāo)注子任務(wù)描述信息；標(biāo)注任務(wù)描述信息發(fā)布單元，用于發(fā)布數(shù)據(jù)子集的數(shù)據(jù)標(biāo)注子任務(wù)描述信息；數(shù)據(jù)子集發(fā)送單元，用于響應(yīng)于接收到對數(shù)據(jù)子集的第一認(rèn)領(lǐng)請求，向所述第一認(rèn)領(lǐng)請求的發(fā)送方發(fā)送該數(shù)據(jù)子集；標(biāo)注后數(shù)據(jù)接收單元，用于接收來自第一認(rèn)領(lǐng)請求的發(fā)送方的標(biāo)注后的數(shù)據(jù)，其中：該管理裝置還包括用于將與數(shù)據(jù)子集中各類數(shù)據(jù)對應(yīng)的標(biāo)注工具的 調(diào)用指令發(fā)送到第一認(rèn)領(lǐng)請求的發(fā)送方的第一調(diào)用指令發(fā)送單元，其中與一類數(shù)據(jù)對應(yīng)的標(biāo)注工具導(dǎo)出的數(shù)據(jù)為該類數(shù)據(jù)的目標(biāo)標(biāo)注后數(shù)據(jù)格式；和/或在發(fā)布的數(shù)據(jù)子集的數(shù)據(jù)標(biāo)注子任務(wù)描述信息中含有該數(shù)據(jù)子集中各類數(shù)據(jù)的目標(biāo)標(biāo)注后數(shù)據(jù)格式。與現(xiàn)有技術(shù)相比，本發(fā)明的實施例具有以下優(yōu)點：提供的標(biāo)注工具導(dǎo)出的數(shù)據(jù)為該標(biāo)注工具對應(yīng)的這類數(shù)據(jù)的目標(biāo)標(biāo)注后數(shù)據(jù)格式，和/或在發(fā)布的數(shù)據(jù)子集的數(shù)據(jù)標(biāo)注子任務(wù)描述信息中含有該數(shù)據(jù)子集中各類數(shù)據(jù)的目標(biāo)標(biāo)注后數(shù)據(jù)格式，從而保證了標(biāo)注后的數(shù)據(jù)為目標(biāo)標(biāo)注后的數(shù)據(jù)格式，避免對標(biāo)注后的數(shù)據(jù)進行數(shù)據(jù)格式轉(zhuǎn)換，提高了數(shù)據(jù)標(biāo)注、整合過程的效率。另外，本發(fā)明實施例還將數(shù)據(jù)標(biāo)注任務(wù)對應(yīng)的數(shù)據(jù)集分成若干數(shù)據(jù)子集，生成并發(fā)布每個數(shù)據(jù)子集的數(shù)據(jù)標(biāo)注子任務(wù)描述信息，即以眾包的形式實現(xiàn)數(shù)據(jù)標(biāo)注，將數(shù)據(jù)標(biāo)注任務(wù)分割為若干數(shù)據(jù)標(biāo)注子任務(wù)眾包給網(wǎng)絡(luò)用戶，提高大數(shù)據(jù)量的數(shù)據(jù)標(biāo)注任務(wù)的處理效率。附圖說明通過閱讀參照以下附圖所作的對非限制性實施例所作的詳細描述，本發(fā)明的其它特征、目的和優(yōu)點將會變得更明顯：圖1為本發(fā)明一個實施例提供的方法的流程圖；圖2為本發(fā)明實施例提供的標(biāo)注規(guī)則模板及自定義標(biāo)注規(guī)則顯示界面示意圖；圖3為本發(fā)明實施例提供的數(shù)據(jù)標(biāo)注子任務(wù)描述信息的顯示界面示意圖；圖4為本發(fā)明另一個實施例提供的方法流程圖；圖5為本發(fā)明又一個實施例提供的方法流程圖；圖6為本發(fā)明再一個實施例提供的方法流程圖；圖7為本發(fā)明實施例提供的系統(tǒng)架構(gòu)圖；圖8為本發(fā)明實施例提供的發(fā)布多個數(shù)據(jù)子集的數(shù)據(jù)標(biāo)注子任務(wù)描述信息的總發(fā)布界面的示意圖；圖9為本發(fā)明一個實施例提供的裝置示意圖；圖10為本發(fā)明另一個實施例提供的裝置示意圖；圖11為本發(fā)明又一個實施例提供的裝置示意圖；圖12為本發(fā)明再一個實施例提供的裝置示意圖。附圖中相同或相似的附圖標(biāo)記代表相同或相似的部件。具體實施方式在更加詳細地討論示例性實施例之前應(yīng)當(dāng)提到的是，一些示例性實施例被描述成作為流程圖描繪的處理或方法。雖然流程圖將各項操作描述成順序的處理，但是，其中的許多操作可以被并行地、并發(fā)地或者同時實施。此外，各項操作的順序可以被重新安排。當(dāng)其操作完成時所述處理可以被終止，但是還可以具有未包括在附圖中的附加步驟。所述處理可以對應(yīng)于方法、函數(shù)、規(guī)程、子例程、子程序等等。在上下文中所稱“計算機設(shè)備”，也稱為“電腦”，是指可以通過運行預(yù)定程序或指令來執(zhí)行數(shù)值計算和/或邏輯計算等預(yù)定處理過程的智能電子設(shè)備，其可以包括處理器與存儲器，由處理器執(zhí)行在存儲器中預(yù)存的存續(xù)指令來執(zhí)行預(yù)定處理過程，或是由ASIC、FPGA、DSP等硬件執(zhí)行預(yù)定處理過程，或是由上述二者組合來實現(xiàn)。計算機設(shè)備包括但不限于服務(wù)器、個人電腦、筆記本電腦、平板電腦、智能手機等。所述計算機設(shè)備包括用戶設(shè)備與網(wǎng)絡(luò)設(shè)備。其中，所述用戶設(shè)備包括但不限于電腦、智能手機、PDA等；所述網(wǎng)絡(luò)設(shè)備包括但不限于單個網(wǎng)絡(luò)服務(wù)器、多個網(wǎng)絡(luò)服務(wù)器組成的服務(wù)器組或基于云計算(CloudComputing)的由大量計算機或網(wǎng)絡(luò)服務(wù)器構(gòu)成的云，其中，云計算是分布式計算的一種，由一群松散耦合的計算機集組成的一個超級虛擬計算機。其中，所述計算機設(shè)備可單獨運行來實現(xiàn)本發(fā)明，也可接入網(wǎng)絡(luò)并通過與網(wǎng)絡(luò)中的其他計算機設(shè)備的交互操作來實現(xiàn)本發(fā)明。其中，所述計算機設(shè)備所處的網(wǎng)絡(luò)包括但不限于互聯(lián)網(wǎng)、廣域網(wǎng)、城域網(wǎng)、局域網(wǎng)、VPN網(wǎng)絡(luò)等。需要說明的是，所述用戶設(shè)備、網(wǎng)絡(luò)設(shè)備和網(wǎng)絡(luò)等僅為舉例，其他現(xiàn)有的或今后可能出現(xiàn)的計算機設(shè)備或網(wǎng)絡(luò)如可適用于本發(fā)明，也應(yīng)包含在 本發(fā)明保護范圍以內(nèi)，并以引用方式包含于此。后面所討論的方法(其中一些通過流程圖示出)可以通過硬件、軟件、固件、中間件、微代碼、硬件描述語言或者其任意組合來實施。當(dāng)用軟件、固件、中間件或微代碼來實施時，用以實施必要任務(wù)的程序代碼或代碼段可以被存儲在機器或計算機可讀介質(zhì)(比如存儲介質(zhì))中。(一個或多個)處理器可以實施必要的任務(wù)。這里所公開的具體結(jié)構(gòu)和功能細節(jié)僅僅是代表性的，并且是用于描述本發(fā)明的示例性實施例的目的。但是本發(fā)明可以通過許多替換形式來具體實現(xiàn)，并且不應(yīng)當(dāng)被解釋成僅僅受限于這里所闡述的實施例。應(yīng)當(dāng)理解的是，雖然在這里可能使用了術(shù)語“第一”、“第二”等等來描述各個單元，但是，這些單元不應(yīng)當(dāng)受這些術(shù)語限制。使用這些術(shù)語僅僅是為了將一個單元與另一個單元進行區(qū)分。舉例來說，在不背離示例性實施例的范圍的情況下，第一單元可以被稱為第二單元，并且類似地第二單元可以被稱為第一單元。這里所使用的術(shù)語“和/或”包括其中一個或更多所列出的相關(guān)聯(lián)項目的任意和所有組合。這里所使用的術(shù)語僅僅是為了描述具體實施例而不意圖限制示例性實施例。除非上下文明確地另有所指，否則這里所使用的單數(shù)形式“一個”、“一項”還意圖包括復(fù)數(shù)。還應(yīng)當(dāng)理解的是，這里所使用的術(shù)語“包括”和/或“包含”規(guī)定所陳述的特征、整數(shù)、步驟、操作、單元和/或組件的存在，而不排除存在或添加一個或更多其他特征、整數(shù)、步驟、操作、單元、組件和/或其組合。還應(yīng)當(dāng)提到的是，在一些替換實現(xiàn)方式中，所提到的功能/動作可以按照不同于附圖中標(biāo)示的順序發(fā)生。舉例來說，取決于所涉及的功能/動作，相繼示出的兩幅圖實際上可以基本上同時執(zhí)行或者有時可以按照相反的順序來執(zhí)行。下面結(jié)合附圖對本發(fā)明作進一步詳細描述。圖1為本發(fā)明一個實施例的數(shù)據(jù)標(biāo)注的管理方法流程圖。根據(jù)本發(fā)明的方法1至少包括步驟110、步驟120、步驟130、步驟140、步驟150、步驟160和步驟170。數(shù)據(jù)標(biāo)注的管理是指將數(shù)據(jù)標(biāo)注的任務(wù)分包給用戶、對用戶數(shù)據(jù)標(biāo)注后的數(shù)據(jù)進行整合以完成數(shù)據(jù)標(biāo)注的任務(wù)的整個過程。該數(shù)據(jù)標(biāo)注的管理方法可以由數(shù)據(jù)標(biāo)注任務(wù)發(fā)布者本身的平臺執(zhí)行，也可以由獨立與數(shù)據(jù)標(biāo)注任務(wù)發(fā)布者和進行數(shù)據(jù)標(biāo)注的用戶的第三方平臺執(zhí)行。參照圖1，在步驟110中，獲取與數(shù)據(jù)標(biāo)注任務(wù)對應(yīng)的數(shù)據(jù)集。數(shù)據(jù)標(biāo)注任務(wù)是指一項需要完成的數(shù)據(jù)標(biāo)注的工作。例如，需要將大量人臉、狗臉、貓臉等圖片進行臉部各位置(例如，左眼眼角、右眼眼角等)的標(biāo)注，以便用作機器學(xué)習(xí)的訓(xùn)練樣本。對所有這些圖片進行臉部位置標(biāo)注就是一項數(shù)據(jù)標(biāo)注任務(wù)。與數(shù)據(jù)標(biāo)注任務(wù)對應(yīng)的數(shù)據(jù)集是指在數(shù)據(jù)標(biāo)注任務(wù)中數(shù)據(jù)標(biāo)注所針對的數(shù)據(jù)的集合。在對這些圖片進行臉部位置標(biāo)注的數(shù)據(jù)標(biāo)注任務(wù)中，這些圖片就構(gòu)成與數(shù)據(jù)標(biāo)注任務(wù)對應(yīng)的數(shù)據(jù)集。獲取與數(shù)據(jù)標(biāo)注任務(wù)對應(yīng)的數(shù)據(jù)集例如可以通過以下方式進行：通過數(shù)據(jù)標(biāo)注任務(wù)發(fā)布者使用的計算機設(shè)備向發(fā)布者顯示數(shù)據(jù)導(dǎo)入界面，從而提供數(shù)據(jù)導(dǎo)入的接口，以便發(fā)布者將與數(shù)據(jù)標(biāo)注任務(wù)對應(yīng)的數(shù)據(jù)集導(dǎo)入，這樣，執(zhí)行方法1的平臺就可以獲取與數(shù)據(jù)標(biāo)注任務(wù)對應(yīng)的數(shù)據(jù)集。數(shù)據(jù)導(dǎo)入界面既可以是WEB界面，也可以是本地客戶端界面，還可以是其他形式的界面，本發(fā)明對此不作限定。參照圖1，在步驟120中，獲取與上述數(shù)據(jù)集中各類數(shù)據(jù)對應(yīng)的標(biāo)注規(guī)則。本發(fā)明實施例中，數(shù)據(jù)按照不同的標(biāo)注對象劃分為不同的類型。例如，在上面對人臉、狗臉、貓臉等圖片進行臉部位置標(biāo)注的數(shù)據(jù)標(biāo)注任務(wù)中，數(shù)據(jù)類型包括：人臉圖片數(shù)據(jù)，狗臉圖片數(shù)據(jù)，貓臉圖片數(shù)據(jù)等等。本發(fā)明實施例中，標(biāo)注規(guī)則是對數(shù)據(jù)標(biāo)注內(nèi)容和如何標(biāo)注的規(guī)定。例如，與人臉圖片數(shù)據(jù)對應(yīng)的標(biāo)注規(guī)則包括在人臉圖片上需要標(biāo)注哪些位置(例如，左眼眼角、右眼眼角)、對某一位置如何標(biāo)注(例如重標(biāo)、輕標(biāo)、畫大點、畫小點等)；與狗臉圖片數(shù)據(jù)對應(yīng)的標(biāo)注規(guī)則包括在狗臉圖片上需要標(biāo)注哪些位置(例如，左狗耳尖、右狗耳尖)、對某一位置如何標(biāo)注(例如，重標(biāo)、 輕標(biāo)、畫大點、畫小點等)。表1是對于人臉圖片數(shù)據(jù)來說需要標(biāo)注的內(nèi)容、及如何標(biāo)注的一個例子。序號標(biāo)注內(nèi)容如何標(biāo)注0左眼外眼角重標(biāo)1左眼中心點輕標(biāo)2左眼內(nèi)眼角重標(biāo)3右眼內(nèi)眼角重標(biāo)4右眼中心點輕標(biāo)5右眼外眼角重標(biāo)6鼻尖重標(biāo)7左嘴角重標(biāo)8嘴中心輕標(biāo)9右嘴角重標(biāo)10左耳朵頂點重標(biāo)11左耳朵底點輕標(biāo)12右耳朵頂點重標(biāo)13右耳朵底點輕標(biāo)表1雖然表1是用表格形式表示的需要標(biāo)注的內(nèi)容、及如何標(biāo)注的一個例子，但實際上，標(biāo)注規(guī)則一般是以機器語言寫成的，例如：在本發(fā)明實施例中，可以接收與上述數(shù)據(jù)集中各類數(shù)據(jù)對應(yīng)的標(biāo)注規(guī)則，也可以參考數(shù)據(jù)類型與標(biāo)注規(guī)則的對應(yīng)關(guān)系，調(diào)取與上述數(shù)據(jù)集中各類數(shù)據(jù)對應(yīng)的標(biāo)注規(guī)則。具體地，上述數(shù)據(jù)集中各類數(shù)據(jù)對應(yīng)的標(biāo)注規(guī)則可以全部通過接收的方式獲取，也可以全部通過調(diào)取的方式獲??；還可以是部分類型數(shù)據(jù)對應(yīng)的標(biāo)注規(guī)則通過接收的方式獲取，部分類型數(shù)據(jù)對應(yīng)的標(biāo)注規(guī)則通過調(diào)取的方式獲取。如果通過調(diào)取方式獲取標(biāo)注規(guī)則，優(yōu)選地，可以預(yù)先配置各類數(shù)據(jù)對應(yīng)的標(biāo)注規(guī)則，并存儲數(shù)據(jù)類型與標(biāo)注規(guī)則的對應(yīng)關(guān)系。因此，參考該數(shù)據(jù)類型與標(biāo)注規(guī)則的對應(yīng)關(guān)系，就可以調(diào)取與該數(shù)據(jù)類型對應(yīng)的標(biāo)注規(guī)則。如果通過接收方式獲取標(biāo)注規(guī)則，執(zhí)行管理方法1的平臺從發(fā)布者處接收發(fā)布者自定義的標(biāo)注規(guī)則。為便于發(fā)布者自定義標(biāo)注規(guī)則，優(yōu)選地，預(yù)置可修改的對應(yīng)于各種數(shù)據(jù)類型的標(biāo)注規(guī)則模板，通過界面呈現(xiàn)給發(fā)布者。例如，預(yù)置有與人臉圖片數(shù)據(jù)對應(yīng)的人臉標(biāo)注規(guī)則模板，與狗臉圖片數(shù)據(jù)對應(yīng)的狗臉標(biāo)注規(guī)則模板等等。如圖2所示，標(biāo)注規(guī)則模板可包括模板名、模板類型、規(guī)則樣例、自定義規(guī)則等部分。模板名是標(biāo)注規(guī)則模板的名稱，它在標(biāo)注規(guī)則模板中有默認(rèn)值，但發(fā)布者可以根據(jù)自身需要對該模板名進行修改。模板類型是標(biāo)注規(guī)則模板對應(yīng)的數(shù)據(jù)類型，如上述的人臉圖片數(shù)據(jù)、狗臉圖片數(shù)據(jù)等。發(fā)布者可以根據(jù)自身需要對模板類型進行修改。規(guī)則樣例是與數(shù)據(jù)類型對應(yīng)的標(biāo)注規(guī)則模板的一個樣例，發(fā)布者可以仿照該樣例在自定義規(guī)則處創(chuàng)建符合發(fā)布者實際需求的標(biāo)注規(guī)則。例如，在對應(yīng)于人臉圖片的標(biāo)注規(guī)則模板中，規(guī)則樣例給出的樣例是標(biāo)注左眼眼角和左眼中心點的規(guī)則，但發(fā)布者不需要對左眼中心點的標(biāo)注，可以將該規(guī)則樣例拷貝到自定義規(guī)則處后，刪除其中標(biāo)注左眼中心點的部分)，并將填好的標(biāo)注規(guī)則模板提交給執(zhí)行管理方法1的平臺。執(zhí)行管理方法1的平臺從填好的標(biāo)注規(guī)則模板的自定義規(guī)則部分可以讀取發(fā)布者定義的與人臉圖片數(shù)據(jù)對應(yīng)的標(biāo)注規(guī)則。參照圖1，步驟130中，將上述數(shù)據(jù)集分成數(shù)據(jù)子集。其中，可以將上述數(shù)據(jù)集等分成數(shù)據(jù)子集。等分的數(shù)據(jù)子集的數(shù)量可以是默認(rèn)值，也可以是從發(fā)布者處接收的。例如，在用于讓發(fā)布者將與數(shù)據(jù)標(biāo)注任務(wù)對應(yīng)的數(shù)據(jù)集導(dǎo)入的界面上設(shè)置發(fā)布者希望將數(shù)據(jù)標(biāo)注任務(wù)分成多少個數(shù)據(jù)標(biāo)注子任務(wù)的選項，供發(fā)布者填寫。發(fā)布者希望分成的數(shù)據(jù)標(biāo)注子任務(wù)的數(shù)量對應(yīng)于等分成的數(shù)據(jù)子集的數(shù)量。。該實現(xiàn)方式尤其適用于數(shù)據(jù)集中只有一類數(shù)據(jù)的情形。其中，也可以將上述數(shù)據(jù)集按照數(shù)據(jù)集中的數(shù)據(jù)類型分成數(shù)據(jù)子集。該劃分方式的具體實現(xiàn)方式又分為多種。例如，數(shù)據(jù)集中包括人臉圖片數(shù)據(jù)、狗臉圖片數(shù)據(jù)和文本數(shù)據(jù)，可以將上述數(shù)據(jù)集中的所有人臉圖片數(shù)據(jù)分為一個數(shù)據(jù)子集，將所有狗臉圖片數(shù)據(jù)分為另一個數(shù)據(jù)子集，并將所有文本數(shù)據(jù)分為又一個數(shù)據(jù)子集；或者，在此基礎(chǔ)上，由于人臉圖片數(shù)據(jù)較多，則進一步將人臉圖片數(shù)據(jù)分為多個數(shù)據(jù)子集，由于狗臉圖片數(shù)據(jù)和文本數(shù)據(jù)較少，則進一步將狗臉圖片數(shù)據(jù)的數(shù)據(jù)子集和文本數(shù)據(jù)的數(shù)據(jù)子集合并為一個數(shù)據(jù)子集。參照圖1，步驟140中，根據(jù)獲取的與上述各類數(shù)據(jù)對應(yīng)的標(biāo)注規(guī)則，生成數(shù)據(jù)子集的數(shù)據(jù)標(biāo)注子任務(wù)描述信息。在一個實施例中，其包括：判斷數(shù)據(jù)子集中包含的數(shù)據(jù)類型；對于數(shù)據(jù)子集中包含的每一數(shù)據(jù)類型，將與該類數(shù)據(jù)對應(yīng)的標(biāo)注規(guī)則轉(zhuǎn)換成自然語言；將轉(zhuǎn)換成自然語言的與每類數(shù)據(jù)對應(yīng)的標(biāo)注規(guī)則整合，以獲得數(shù)據(jù)標(biāo)注子任務(wù)描述信息。以既包含狗臉圖片數(shù)據(jù)、又包含文本數(shù)據(jù)的數(shù)據(jù)子集為例，首先判斷出該數(shù)據(jù)子集包含的數(shù)據(jù)類型是狗臉圖片數(shù)據(jù)和文本數(shù)據(jù)。然后，將與狗臉圖片數(shù)據(jù)對應(yīng)的標(biāo)注規(guī)則轉(zhuǎn)化為自然語言(即以文字的方式而非機器語言的方式描述需要標(biāo)注的內(nèi)容、及如何標(biāo)注)，將與文本數(shù)據(jù)對應(yīng)的標(biāo)注規(guī)則轉(zhuǎn)化為自然語言。注意，雖然獲取的與各類數(shù)據(jù)對應(yīng)的標(biāo)注規(guī)則還包括與人臉圖片數(shù)據(jù)對應(yīng)的標(biāo)注規(guī)則，但由于當(dāng)前數(shù)據(jù)子集中不包含人臉圖片數(shù)據(jù)，因此 與人臉圖片數(shù)據(jù)對應(yīng)的標(biāo)注規(guī)則在當(dāng)前數(shù)據(jù)子集中不使用。然后，將轉(zhuǎn)換成自然語言的與狗臉圖片數(shù)據(jù)對應(yīng)的標(biāo)注規(guī)則、與文本數(shù)據(jù)對應(yīng)的標(biāo)注規(guī)則整合，以獲得數(shù)據(jù)標(biāo)注子任務(wù)描述信息。數(shù)據(jù)標(biāo)注子任務(wù)描述信息的一個例子如下：“對于狗臉圖片，用圓圈標(biāo)出左耳朵頂點、左耳朵底點、右耳朵頂點、右耳朵底點，用圓點標(biāo)出鼻尖、左嘴角、右嘴角；對于文本數(shù)據(jù)，用波浪線標(biāo)出動詞，用下橫線標(biāo)出名詞?！睉?yīng)當(dāng)指出的是，步驟140既可以是自動執(zhí)行的，也可以是按照發(fā)布者輸入的操作指令執(zhí)行的。參照圖1，步驟150中，發(fā)布數(shù)據(jù)子集的數(shù)據(jù)標(biāo)注子任務(wù)描述信息。其中，發(fā)布的數(shù)據(jù)標(biāo)注子任務(wù)描述信息既可以顯示在WEB頁面上，也可以發(fā)布式顯示在眾多用戶APP客戶端的界面上。以WEB頁面為例，數(shù)據(jù)標(biāo)注子任務(wù)描述信息的顯示界面可以如圖3所示。注意，據(jù)以生成圖3的數(shù)據(jù)標(biāo)注子任務(wù)描述信息的標(biāo)注規(guī)則中只含有需要標(biāo)注的內(nèi)容，不含有如何標(biāo)注(例如用圓圈、圓點等)的信息，因此，圖3所示的數(shù)據(jù)標(biāo)注子任務(wù)描述信息只描述了需要標(biāo)注的內(nèi)容，但實際的數(shù)據(jù)標(biāo)注子任務(wù)描述信息可能會對如何標(biāo)注也要進行描述。參照圖1，步驟160中，響應(yīng)于接收到對數(shù)據(jù)子集的第一認(rèn)領(lǐng)請求，向該第一認(rèn)領(lǐng)請求的發(fā)送方發(fā)送該數(shù)據(jù)子集。如圖3所示，在發(fā)布數(shù)據(jù)子集的數(shù)據(jù)標(biāo)注子任務(wù)描述信息的頁面上，可以含有一個認(rèn)領(lǐng)選項。例如，用戶在看到該頁面后，希望認(rèn)領(lǐng)該數(shù)據(jù)子集，即接受數(shù)據(jù)標(biāo)注子任務(wù)，選擇該認(rèn)領(lǐng)選項，就接受了該數(shù)據(jù)標(biāo)注子任務(wù)，即發(fā)出了對該數(shù)據(jù)子集的第一認(rèn)領(lǐng)請求。執(zhí)行管理方法1的平臺接收到該第一認(rèn)領(lǐng)請求，將該數(shù)據(jù)子集發(fā)送到發(fā)出該第一認(rèn)領(lǐng)請求的用戶。參照圖1，步驟170中，接收來自第一認(rèn)領(lǐng)請求的發(fā)送方的標(biāo)注后的數(shù)據(jù)。例如，在用戶選擇圖3中的認(rèn)領(lǐng)選項后，執(zhí)行管理方法1的平臺將數(shù)據(jù)子集發(fā)送到用戶。向用戶顯示數(shù)據(jù)子集中的各類數(shù)據(jù)。用戶對各類數(shù)據(jù)進行數(shù)據(jù)標(biāo)注后選擇界面上的提交選項，則將標(biāo)注后的數(shù)據(jù)提交到執(zhí)行管理方法 1的平臺。在一種實施方式中，為了保證標(biāo)注后的數(shù)據(jù)為目標(biāo)標(biāo)注后的數(shù)據(jù)格式，該管理方法1還可以包括：將與數(shù)據(jù)子集中各類數(shù)據(jù)對應(yīng)的標(biāo)注工具的調(diào)用指令發(fā)送到第一認(rèn)領(lǐng)請求的發(fā)送方(圖中未示)，其中與一類數(shù)據(jù)對應(yīng)的標(biāo)注工具導(dǎo)出的數(shù)據(jù)為該類數(shù)據(jù)的目標(biāo)標(biāo)注后數(shù)據(jù)格式。標(biāo)注工具是指對數(shù)據(jù)進行標(biāo)注時使用的應(yīng)用等。一般某一類數(shù)據(jù)可以用一種或多種標(biāo)注工具標(biāo)注，使用的標(biāo)注工具不同，導(dǎo)出的數(shù)據(jù)格式也不同。該實施方式中，將一類數(shù)據(jù)與唯一一種標(biāo)注工具對應(yīng)，保證對于這一類數(shù)據(jù)來說，導(dǎo)出的數(shù)據(jù)都是一種數(shù)據(jù)格式的，即目標(biāo)標(biāo)注后數(shù)據(jù)格式。上述步驟的一種具體實現(xiàn)方式可以是：參考數(shù)據(jù)類型與標(biāo)注工具對應(yīng)關(guān)系，確定與數(shù)據(jù)子集中各類數(shù)據(jù)對應(yīng)的標(biāo)注工具；根據(jù)獲取的與各類數(shù)據(jù)對應(yīng)的標(biāo)注規(guī)則，配置確定出的與數(shù)據(jù)子集中各類數(shù)據(jù)對應(yīng)的標(biāo)注工具的參數(shù)；將配置好參數(shù)的標(biāo)注工具的調(diào)用指令發(fā)送到第一認(rèn)領(lǐng)請求的發(fā)送方。該實施方式中，事先根據(jù)對于每種數(shù)據(jù)類型希望導(dǎo)出的目標(biāo)標(biāo)注后數(shù)據(jù)格式(其例如由平臺憑經(jīng)驗確定對于特定數(shù)據(jù)類型，導(dǎo)出哪種標(biāo)注后數(shù)據(jù)格式更好)，平臺確定能夠?qū)С鲈撓Ｍ麑?dǎo)出的目標(biāo)標(biāo)注后數(shù)據(jù)格式的一種標(biāo)注工具作為與數(shù)據(jù)子集中該類數(shù)據(jù)對應(yīng)的標(biāo)注工具。然后平臺根據(jù)獲取的與各類數(shù)據(jù)對應(yīng)的標(biāo)注規(guī)則，配置確定出的與數(shù)據(jù)子集中各類數(shù)據(jù)對應(yīng)的標(biāo)注工具的參數(shù)，例如線條的粗細等。例如，標(biāo)注規(guī)則指出對于人臉圖片中的左耳朵頂點，需要用直徑2cm的圓點，則必須要配置與人臉圖片數(shù)據(jù)對應(yīng)的標(biāo)注工具，使其能夠畫出直徑2cm的圓點。接著，平臺將將配置好參數(shù)的標(biāo)注工具的調(diào)用指令發(fā)送到第一認(rèn)領(lǐng)請求的發(fā)送方，該發(fā)送可以在步驟160中向第一認(rèn)領(lǐng)請求的發(fā)送方發(fā)送數(shù)據(jù)子集的同時執(zhí)行，也可以單獨執(zhí)行。例如，數(shù)據(jù)子集中有狗臉圖片數(shù)據(jù)和文本數(shù)據(jù)。對于狗臉圖片數(shù)據(jù)，希望的目標(biāo)標(biāo)注后數(shù)據(jù)格式是G1。對于文本數(shù)據(jù)，希望的目標(biāo)標(biāo)注后數(shù)據(jù)格式是G2。為了產(chǎn)生目標(biāo)標(biāo)注后數(shù)據(jù)格式G1，確定用標(biāo)注工具T1。為了產(chǎn)生目標(biāo)標(biāo)注后數(shù)據(jù)格式G2，需要用標(biāo)注工具T2。平臺會將配置好參數(shù)的標(biāo)注工具T1的調(diào)用指令和配置好參數(shù)的標(biāo)注工具T2的調(diào)用指令發(fā)送給發(fā)送第一認(rèn) 領(lǐng)請求的用戶，以便該用戶標(biāo)注后產(chǎn)生的數(shù)據(jù)格式對于狗臉圖片數(shù)據(jù)是G1，對于文本數(shù)據(jù)是G2。在另一種實施方式中，在發(fā)布的數(shù)據(jù)子集的數(shù)據(jù)標(biāo)注子任務(wù)描述信息中含有該數(shù)據(jù)子集中各類數(shù)據(jù)的目標(biāo)標(biāo)注后數(shù)據(jù)格式。在發(fā)布的數(shù)據(jù)子集的數(shù)據(jù)標(biāo)注子任務(wù)描述信息中含有該數(shù)據(jù)子集中各類數(shù)據(jù)的目標(biāo)標(biāo)注后數(shù)據(jù)格式的情況下，上述步驟150的實現(xiàn)方式可以是：參考數(shù)據(jù)類型與目標(biāo)標(biāo)注后數(shù)據(jù)格式對應(yīng)關(guān)系，確定數(shù)據(jù)子集中各類數(shù)據(jù)的目標(biāo)標(biāo)注后數(shù)據(jù)格式；將確定出的數(shù)據(jù)子集中各類數(shù)據(jù)的目標(biāo)標(biāo)注后數(shù)據(jù)格式放入數(shù)據(jù)子集的數(shù)據(jù)標(biāo)注子任務(wù)描述信息中發(fā)布。例如，事先確定對于每種數(shù)據(jù)類型希望導(dǎo)出的目標(biāo)標(biāo)注后數(shù)據(jù)格式(其例如由平臺憑經(jīng)驗確定對于特定數(shù)據(jù)類型，導(dǎo)出哪種標(biāo)注后數(shù)據(jù)格式更好)，將該數(shù)據(jù)類型與希望導(dǎo)出的目標(biāo)標(biāo)注后數(shù)據(jù)格式的對應(yīng)關(guān)系事先存儲。然后，就可以根據(jù)數(shù)據(jù)子集中含有的數(shù)據(jù)類型，參考數(shù)據(jù)類型與目標(biāo)標(biāo)注后數(shù)據(jù)格式對應(yīng)關(guān)系，確定數(shù)據(jù)子集中各類數(shù)據(jù)的目標(biāo)標(biāo)注后數(shù)據(jù)格式，并將確定出的數(shù)據(jù)子集中各類數(shù)據(jù)的目標(biāo)標(biāo)注后數(shù)據(jù)格式放入數(shù)據(jù)子集的數(shù)據(jù)標(biāo)注子任務(wù)描述信息中發(fā)布。例如，數(shù)據(jù)子集中有狗臉圖片數(shù)據(jù)和文本數(shù)據(jù)。對于狗臉圖片數(shù)據(jù)，希望的目標(biāo)標(biāo)注后數(shù)據(jù)格式是G1。對于文本數(shù)據(jù)，希望的目標(biāo)標(biāo)注后數(shù)據(jù)格式是G2。因此，在發(fā)布數(shù)據(jù)子集的數(shù)據(jù)標(biāo)注子任務(wù)描述信息時，在發(fā)布的數(shù)據(jù)標(biāo)注子任務(wù)描述信息中含有對于狗臉圖片數(shù)據(jù)希望的目標(biāo)標(biāo)注后數(shù)據(jù)格式G1、對于文本數(shù)據(jù)希望的目標(biāo)標(biāo)注后數(shù)據(jù)格式G2。發(fā)送第一認(rèn)領(lǐng)請求的用戶不管采用什么標(biāo)注工具，只要保證對于狗臉圖片數(shù)據(jù)，標(biāo)注工具導(dǎo)出的標(biāo)注后數(shù)據(jù)格式是G1，對于文本數(shù)據(jù)，標(biāo)注工具導(dǎo)出的標(biāo)注后數(shù)據(jù)格式是G2就可以。本發(fā)明實施例提供的技術(shù)方案，保證了標(biāo)注后的數(shù)據(jù)為目標(biāo)標(biāo)注后的數(shù)據(jù)格式，避免對標(biāo)注后的數(shù)據(jù)進行數(shù)據(jù)格式轉(zhuǎn)換，提高了數(shù)據(jù)標(biāo)注過程的效率。另外，將數(shù)據(jù)標(biāo)注任務(wù)對應(yīng)的數(shù)據(jù)集分成若干數(shù)據(jù)子集，生成并發(fā)布每個數(shù)據(jù)子集的數(shù)據(jù)標(biāo)注子任務(wù)描述信息，即以眾包的形式實現(xiàn)數(shù)據(jù)標(biāo)注，將數(shù)據(jù)標(biāo)注任務(wù)分割為若干數(shù)據(jù)標(biāo)注子任務(wù)眾包給網(wǎng)絡(luò)用戶，提高 了大數(shù)據(jù)量的數(shù)據(jù)標(biāo)注任務(wù)的處理效率?；谏鲜鋈我夥椒▽嵤├蛇x地，上述管理方法還包括步驟180。參考圖4，步驟180中，將對于各數(shù)據(jù)子集的來自第一認(rèn)領(lǐng)請求的發(fā)送方的標(biāo)注后的數(shù)據(jù)整合存儲。即，將數(shù)據(jù)集分成的各數(shù)據(jù)子集各自的來自第一認(rèn)領(lǐng)請求的發(fā)送方的標(biāo)注后的數(shù)據(jù)，按照數(shù)據(jù)子集在數(shù)據(jù)集中的順序，重新組合在一起并存儲。例如，在數(shù)據(jù)集S包括數(shù)據(jù)子集S1、S2、S3的情況下，按照數(shù)據(jù)子集S1、S2、S3在數(shù)據(jù)集S中的順序，將數(shù)據(jù)子集S1、S2、S3各自的來自第一認(rèn)領(lǐng)請求的發(fā)送方的標(biāo)注后的數(shù)據(jù)合在一起成為一個整體，即標(biāo)注后的數(shù)據(jù)集，然后進行存儲。為了提高數(shù)據(jù)資源的利用廣泛性，優(yōu)選地，將對于各數(shù)據(jù)子集的來自第一認(rèn)領(lǐng)請求的發(fā)送方的標(biāo)注后的數(shù)據(jù)整合存儲到云存儲器中。如果僅僅將整合后的標(biāo)注后的數(shù)據(jù)發(fā)送給發(fā)布者，只有發(fā)布者能夠使用該整合后的標(biāo)注后的數(shù)據(jù)。在某些情況下，需要更多的人能共享該整合后的標(biāo)注后的數(shù)據(jù)。例如，需要發(fā)布者所在公司的所有人甚至公眾都能夠使用該整合后的標(biāo)注后的數(shù)據(jù)。因此整合存儲到云存儲器的方式提高了標(biāo)注成果的利用廣泛性。進一步地，該管理方法還包括步驟181～步驟185。參照圖5，步驟181中，根據(jù)獲取的與上述各類數(shù)據(jù)對應(yīng)的標(biāo)注規(guī)則，生成數(shù)據(jù)子集的數(shù)據(jù)校驗子任務(wù)描述信息。其具體實現(xiàn)方式可以參照上述數(shù)據(jù)標(biāo)注子任務(wù)描述信息的實現(xiàn)，此處不再贅述。校驗是對標(biāo)注的一種檢驗，因此，這種校驗與標(biāo)注采用同樣的標(biāo)注工具，標(biāo)注內(nèi)容和如何標(biāo)注都是與標(biāo)注時一致的，因此其數(shù)據(jù)校驗子任務(wù)描述信息也基本類似于數(shù)據(jù)標(biāo)注子任務(wù)描述信息。參照圖5，步驟182中，獲取該數(shù)據(jù)子集對應(yīng)的校驗者信息。其中，該數(shù)據(jù)子集對應(yīng)的校驗者信息可以是發(fā)布者在讓發(fā)布者導(dǎo)入與數(shù)據(jù)標(biāo)注任務(wù)對應(yīng)的數(shù)據(jù)集的界面中填寫好的，也可以是單獨向發(fā)布者發(fā)出詢問獲取的，還可以是通過其他方式獲取的。校驗者可以是發(fā)布者所在團體中的專門人員。參照圖5，步驟183中，根據(jù)上述校驗者信息發(fā)送上述校驗子任務(wù)描述信息和該數(shù)據(jù)子集的標(biāo)注后的數(shù)據(jù)。例如，向校驗者信息指示的校驗者發(fā)送 上述校驗子任務(wù)描述信息和該數(shù)據(jù)子集的標(biāo)注后的數(shù)據(jù)。參照圖5，步驟184中，接收該數(shù)據(jù)子集的經(jīng)過校驗的標(biāo)注后的數(shù)據(jù)。即，校驗者校驗后向平臺發(fā)送該數(shù)據(jù)子集的經(jīng)過校驗的標(biāo)注后的數(shù)據(jù)，由平臺接收該數(shù)據(jù)。參照圖5，步驟185中，將對于各數(shù)據(jù)子集的經(jīng)過校驗的標(biāo)注后的數(shù)據(jù)整合存儲。即，將各數(shù)據(jù)子集的經(jīng)過校驗的標(biāo)注后的數(shù)據(jù)，按照數(shù)據(jù)子集在數(shù)據(jù)集中的順序，重新組合在一起并存儲。例如，在數(shù)據(jù)集S包括數(shù)據(jù)子集S1、S2、S3的情況下，按照數(shù)據(jù)子集S1、S2、S3在數(shù)據(jù)集S中的順序，將數(shù)據(jù)子集S1、S2、S3各自的經(jīng)過校驗的標(biāo)注后的數(shù)據(jù)合在一起成為一個整體，即校驗后的標(biāo)注后的數(shù)據(jù)集，然后進行存儲。其中，可以使用經(jīng)過校驗的標(biāo)注后的數(shù)據(jù)替換掉步驟180中存儲的數(shù)據(jù)，也可以分別存儲，不做替換。另外，該管理方法也可以包括步驟181、步驟186、步驟187、步驟188和步驟185，如圖6。步驟181與圖5中步驟181相同。參照圖6，步驟186中，發(fā)布數(shù)據(jù)子集的數(shù)據(jù)校驗子任務(wù)描述信息。其中，發(fā)布的數(shù)據(jù)校驗子任務(wù)描述信息既可以顯示在WEB頁面上，也可以分布式顯示在多個用戶的APP客戶端的界面上。參照圖6，步驟187中，響應(yīng)于接收到對數(shù)據(jù)子集的第二認(rèn)領(lǐng)請求，向該第二認(rèn)領(lǐng)請求的發(fā)送方發(fā)送該數(shù)據(jù)子集的標(biāo)注后的數(shù)據(jù)。第二認(rèn)領(lǐng)請求即接收校驗該數(shù)據(jù)子集的數(shù)據(jù)標(biāo)注的子任務(wù)的請求。也就是說，與圖5中專門人員校驗不同，圖6的實施方式中仍然是將各數(shù)據(jù)子集的標(biāo)注后的數(shù)據(jù)的校驗發(fā)布并外包給公眾等。參照圖6，步驟188中，接收來自第二認(rèn)領(lǐng)請求的發(fā)送方的該數(shù)據(jù)子集的經(jīng)過校驗的標(biāo)注后的數(shù)據(jù)。其中，該管理方法1還包括將與數(shù)據(jù)子集中各類數(shù)據(jù)對應(yīng)的標(biāo)注工具的調(diào)用指令發(fā)送到第二認(rèn)領(lǐng)請求的發(fā)送方，其中與一類數(shù)據(jù)對應(yīng)的標(biāo)注工具導(dǎo)出的數(shù)據(jù)為該類數(shù)據(jù)的目標(biāo)標(biāo)注后數(shù)據(jù)格式；和/或在發(fā)布的數(shù)據(jù)子集的數(shù)據(jù)標(biāo)注子任務(wù)描述信息中含有該數(shù)據(jù)子集中各類數(shù)據(jù)的目標(biāo)標(biāo)注后數(shù)據(jù)格式。其中，步驟185中，將對于各數(shù)據(jù)子集的經(jīng)過校驗的標(biāo)注后的數(shù)據(jù)整合存儲。例如，將對于各數(shù)據(jù)子集的經(jīng)過校驗的標(biāo)注后的數(shù)據(jù)整合存儲到云存儲器中。下面以具體應(yīng)用場景為例，對本發(fā)明實施例提供的方法進行詳細說明。圖7所示的應(yīng)用場景中，數(shù)據(jù)標(biāo)注任務(wù)的發(fā)布者使用的計算機設(shè)備701，數(shù)據(jù)標(biāo)注任務(wù)管理服務(wù)器702，數(shù)據(jù)標(biāo)注任務(wù)發(fā)布平臺服務(wù)器703，數(shù)據(jù)中心存儲服務(wù)器704和數(shù)據(jù)標(biāo)注任務(wù)的認(rèn)領(lǐng)者使用的計算機設(shè)備705通過互聯(lián)網(wǎng)實現(xiàn)通信。其中，數(shù)據(jù)標(biāo)注任務(wù)管理服務(wù)器702可以由一臺服務(wù)器實現(xiàn)，也可以由多臺服務(wù)器組成的架構(gòu)實現(xiàn)；數(shù)據(jù)標(biāo)注任務(wù)發(fā)布平臺服務(wù)器703可以由一臺服務(wù)器實現(xiàn)，也可以由多臺服務(wù)器組成的架構(gòu)實現(xiàn)；數(shù)據(jù)中心存儲服務(wù)器704可以由一臺服務(wù)器實現(xiàn)，也可以由多臺服務(wù)器組成的架構(gòu)實現(xiàn)。其中，數(shù)據(jù)標(biāo)注任務(wù)管理服務(wù)器702、數(shù)據(jù)標(biāo)注任務(wù)發(fā)布平臺服務(wù)器703和數(shù)據(jù)中心存儲服務(wù)器704的功能還可以集成在一臺或多臺設(shè)備上實現(xiàn)。參照圖7所示的系統(tǒng)架構(gòu)，其具體工作原理如下：步驟一、數(shù)據(jù)標(biāo)注任務(wù)的發(fā)布者使用的計算機設(shè)備701向發(fā)布者顯示數(shù)據(jù)導(dǎo)入界面，以便發(fā)布者通過該界面導(dǎo)入數(shù)據(jù)標(biāo)注任務(wù)對應(yīng)的數(shù)據(jù)集。步驟二、上述計算機設(shè)備701將發(fā)布者導(dǎo)入的數(shù)據(jù)標(biāo)注任務(wù)對應(yīng)的數(shù)據(jù)集發(fā)送給數(shù)據(jù)標(biāo)注任務(wù)管理服務(wù)器702，即數(shù)據(jù)標(biāo)注任務(wù)管理服務(wù)器702獲取數(shù)據(jù)標(biāo)注任務(wù)對應(yīng)的數(shù)據(jù)集。其中，該數(shù)據(jù)集中僅包含人臉標(biāo)注數(shù)據(jù)。步驟三、上述計算機設(shè)備701根據(jù)發(fā)布者的操作指令調(diào)取并顯示人臉標(biāo)注規(guī)則模板，以供發(fā)布者自定義標(biāo)注規(guī)則。相應(yīng)的界面如圖2所示。其中，計算機設(shè)備701調(diào)取的人臉標(biāo)注規(guī)則模板可以是預(yù)先存儲在本地的，也可以是向上述服務(wù)器702請求獲取的。步驟四、上述計算機設(shè)備701將發(fā)布者自定義配置的人臉標(biāo)注數(shù)據(jù)對應(yīng)的標(biāo)注規(guī)則發(fā)送給上述服務(wù)器702，即上述服務(wù)器702獲取與上述數(shù)據(jù)集中各類數(shù)據(jù)對應(yīng)的標(biāo)注規(guī)則。應(yīng)當(dāng)指出的是，如果發(fā)布者沒有自定義標(biāo)注規(guī)則(即不執(zhí)行步驟三和步驟四)，那么，可以由上述計算機設(shè)備701調(diào)取預(yù)先配置的人臉標(biāo)注數(shù)據(jù)對應(yīng)的標(biāo)注規(guī)則并發(fā)送給上述服務(wù)器702，還可以由上述服務(wù)器702調(diào)取預(yù)先配置的人臉標(biāo)注數(shù)據(jù)對應(yīng)的標(biāo)注規(guī)則。步驟五、上述服務(wù)器702將上述數(shù)據(jù)集等分成數(shù)據(jù)子集。其中，等分的數(shù)量可以是默認(rèn)值，也可以是發(fā)布者設(shè)定的值。應(yīng)當(dāng)指出的是，也可以由上述計算機設(shè)備701將上述數(shù)據(jù)集等分成數(shù)據(jù)子集后再發(fā)送給上述服務(wù)器702。步驟六、上述服務(wù)器702根據(jù)獲取的標(biāo)注規(guī)則，生成數(shù)據(jù)子集的數(shù)據(jù)標(biāo)注子任務(wù)描述信息。步驟七、上述服務(wù)器702將生成的數(shù)據(jù)子集的數(shù)據(jù)標(biāo)注子任務(wù)描述信息連同發(fā)布請求發(fā)送給數(shù)據(jù)標(biāo)注任務(wù)發(fā)布平臺服務(wù)器703。其中，上述服務(wù)器702既可以自動將數(shù)據(jù)子集的數(shù)據(jù)標(biāo)注子任務(wù)描述信息連同發(fā)布請求發(fā)送給上述服務(wù)器703，也可以在接收到發(fā)布者發(fā)送的操作指令后發(fā)送。其中，發(fā)布請求用于指示將子任務(wù)描述信息發(fā)布到目標(biāo)網(wǎng)絡(luò)平臺的指定顯示區(qū)域。步驟八、上述服務(wù)器703根據(jù)發(fā)布請求，將數(shù)據(jù)子集的數(shù)據(jù)標(biāo)注子任務(wù)描述信息發(fā)布到目標(biāo)網(wǎng)絡(luò)平臺的指定顯示區(qū)域，如圖8所示。步驟九、數(shù)據(jù)標(biāo)注任務(wù)的認(rèn)領(lǐng)者使用的計算機設(shè)備705根據(jù)認(rèn)領(lǐng)者的操作指令向認(rèn)領(lǐng)者顯示圖8所示的界面，并進一步根據(jù)認(rèn)領(lǐng)者的操作指令顯示圖3所示的操作界面。步驟十、上述計算機設(shè)備705根據(jù)認(rèn)領(lǐng)者的操作指令向上述服務(wù)器702發(fā)送對人臉標(biāo)注子任務(wù)1對應(yīng)的數(shù)據(jù)子集1的第一認(rèn)領(lǐng)請求。步驟十一、上述服務(wù)器702響應(yīng)于對數(shù)據(jù)子集1的第一認(rèn)領(lǐng)請求，將數(shù)據(jù)子集1和人臉標(biāo)注工具的調(diào)用指令發(fā)送給上述計算機設(shè)備705。其中，在調(diào)用人臉標(biāo)注工具之前，上述服務(wù)器702根據(jù)接收到的標(biāo)注規(guī)則配置人臉標(biāo)注工具的參數(shù)。步驟十二、上述計算機設(shè)備705根據(jù)調(diào)用指令調(diào)用WEB版的人臉標(biāo)注 工具并顯示給認(rèn)領(lǐng)者，根據(jù)認(rèn)領(lǐng)者的操作指令完成對數(shù)據(jù)子集1的人臉標(biāo)注。步驟十三、上述計算機設(shè)備705將標(biāo)注后的數(shù)據(jù)連同校驗者信息發(fā)送給上述服務(wù)器702。本發(fā)明中，校驗者信息可以但不僅限于是賬戶標(biāo)識、設(shè)備地址、設(shè)備標(biāo)識等等。本實施例中，校驗者信息為上述發(fā)布者的賬戶標(biāo)識。步驟十四、上述服務(wù)器702接收到來自計算機設(shè)備705的對人臉標(biāo)注子任務(wù)1對應(yīng)的數(shù)據(jù)子集1的標(biāo)注后的數(shù)據(jù)和來自其他計算機設(shè)備的對人臉標(biāo)注子任務(wù)2、3……對應(yīng)的數(shù)據(jù)子集2、3……的標(biāo)注后的數(shù)據(jù)后，將數(shù)據(jù)子集1、2、3……的標(biāo)注后的數(shù)據(jù)整合存儲到數(shù)據(jù)中心存儲服務(wù)器704中。步驟十五、上述服務(wù)器702根據(jù)人臉標(biāo)注數(shù)據(jù)對應(yīng)的標(biāo)注規(guī)則生成數(shù)據(jù)子集1的數(shù)據(jù)校驗子任務(wù)描述信息。步驟十六、上述服務(wù)器702根據(jù)上述校驗者信息，向上述計算機設(shè)備701發(fā)送上述校驗子任務(wù)描述信息和該數(shù)據(jù)子集的標(biāo)注后的數(shù)據(jù)。步驟十七、上述計算機設(shè)備701根據(jù)發(fā)布者的操作指令完成數(shù)據(jù)校驗工作。步驟十八、上述服務(wù)器702接收上述計算機設(shè)備701發(fā)送的數(shù)據(jù)子集的經(jīng)過校驗的標(biāo)注后的數(shù)據(jù)。步驟十九、上述服務(wù)器702在接收到該數(shù)據(jù)子集1的經(jīng)過校驗的標(biāo)注后的數(shù)據(jù)、以及數(shù)據(jù)子集2、3……的經(jīng)過校驗的標(biāo)注后的數(shù)據(jù)整合，并存儲在上述服務(wù)器704中。基于與方法同樣的發(fā)明構(gòu)思，本發(fā)明還提供一種數(shù)據(jù)標(biāo)注的管理裝置。圖9所示為數(shù)據(jù)標(biāo)注的管理裝置9示意圖。該管理裝置包括：數(shù)據(jù)集獲取單元910，用于獲取與數(shù)據(jù)標(biāo)注任務(wù)對應(yīng)的數(shù)據(jù)集；標(biāo)注規(guī)則獲取單元920，用于獲取與所述數(shù)據(jù)集中各類數(shù)據(jù)對應(yīng)的標(biāo)注規(guī)則；數(shù)據(jù)子集劃分單元930，用于將所述數(shù)據(jù)集分成數(shù)據(jù)子集；標(biāo)注任務(wù)描述信息生成單元940，用于根據(jù)獲取的與所述各類數(shù)據(jù)對應(yīng) 的標(biāo)注規(guī)則，生成數(shù)據(jù)子集的數(shù)據(jù)標(biāo)注子任務(wù)描述信息；標(biāo)注任務(wù)描述信息發(fā)布單元950，用于發(fā)布數(shù)據(jù)子集的數(shù)據(jù)標(biāo)注子任務(wù)描述信息；數(shù)據(jù)子集發(fā)送單元960，用于響應(yīng)于接收到對數(shù)據(jù)子集的第一認(rèn)領(lǐng)請求，向所述第一認(rèn)領(lǐng)請求的發(fā)送方發(fā)送該數(shù)據(jù)子集；標(biāo)注后數(shù)據(jù)接收單元970，用于接收來自第一認(rèn)領(lǐng)請求的發(fā)送方的標(biāo)注后的數(shù)據(jù)，其中，該管理裝置還包括用于將與數(shù)據(jù)子集中各類數(shù)據(jù)對應(yīng)的標(biāo)注工具的調(diào)用指令發(fā)送到第一認(rèn)領(lǐng)請求的發(fā)送方的第一調(diào)用指令發(fā)送單元(未示)，其中與一類數(shù)據(jù)對應(yīng)的標(biāo)注工具導(dǎo)出的數(shù)據(jù)為該類數(shù)據(jù)的目標(biāo)標(biāo)注后數(shù)據(jù)格式；和/或在發(fā)布的數(shù)據(jù)子集的數(shù)據(jù)標(biāo)注子任務(wù)描述信息中含有該數(shù)據(jù)子集中各類數(shù)據(jù)的目標(biāo)標(biāo)注后數(shù)據(jù)格式。其中，所述標(biāo)注規(guī)則獲取單元920用于：接收與所述數(shù)據(jù)集中各類數(shù)據(jù)對應(yīng)的標(biāo)注規(guī)則；和/或參考數(shù)據(jù)類型與標(biāo)注規(guī)則的對應(yīng)關(guān)系，調(diào)取與所述數(shù)據(jù)集中各類數(shù)據(jù)對應(yīng)的標(biāo)注規(guī)則。其中，所述數(shù)據(jù)子集劃分單元930用于：將所述數(shù)據(jù)集等分成數(shù)據(jù)子集；或者將所述數(shù)據(jù)集按照數(shù)據(jù)集中的數(shù)據(jù)類型分成數(shù)據(jù)子集。其中，所述標(biāo)注任務(wù)描述信息生成單元940用于：判斷數(shù)據(jù)子集中包含的數(shù)據(jù)類型；對于數(shù)據(jù)子集中包含的每一數(shù)據(jù)類型，將與該類數(shù)據(jù)對應(yīng)的標(biāo)注規(guī)則轉(zhuǎn)換成自然語言；將轉(zhuǎn)換成自然語言的與每類數(shù)據(jù)對應(yīng)的標(biāo)注規(guī)則整合，以獲得數(shù)據(jù)標(biāo)注子任務(wù)描述信息。其中，參照圖10，該管理裝置還包括標(biāo)注后數(shù)據(jù)存儲單元980，用于：將對于各數(shù)據(jù)子集的來自第一認(rèn)領(lǐng)請求的發(fā)送方的標(biāo)注后的數(shù)據(jù)整合存儲。其中，所述標(biāo)注后數(shù)據(jù)存儲單元980用于：將對于各數(shù)據(jù)子集的來自第一認(rèn)領(lǐng)請求的發(fā)送方的標(biāo)注后的數(shù)據(jù)整合存儲到云存儲器中。其中，所述第一調(diào)用指令發(fā)送單元被配置為：參考數(shù)據(jù)類型與標(biāo)注工具對應(yīng)關(guān)系，確定與數(shù)據(jù)子集中各類數(shù)據(jù)對應(yīng)的標(biāo)注工具；根據(jù)獲取的與各類數(shù)據(jù)對應(yīng)的標(biāo)注規(guī)則，配置確定出的與數(shù)據(jù)子集中各類數(shù)據(jù)對應(yīng)的標(biāo)注工具的參數(shù)；將配置好參數(shù)的標(biāo)注工具的調(diào)用指令連同該數(shù)據(jù)子集一同發(fā)送到第一認(rèn)領(lǐng)請求的發(fā)送方。其中，在發(fā)布的數(shù)據(jù)子集的數(shù)據(jù)標(biāo)注子任務(wù)描述信息中含有該數(shù)據(jù)子集中各類數(shù)據(jù)的目標(biāo)標(biāo)注后數(shù)據(jù)格式的情況下，所述標(biāo)注任務(wù)描述信息發(fā)布單元950用于：參考數(shù)據(jù)類型與目標(biāo)標(biāo)注后數(shù)據(jù)格式對應(yīng)關(guān)系，確定數(shù)據(jù)子集中各類數(shù)據(jù)的目標(biāo)標(biāo)注后數(shù)據(jù)格式；將確定出的數(shù)據(jù)子集中各類數(shù)據(jù)的目標(biāo)標(biāo)注后數(shù)據(jù)格式放入數(shù)據(jù)子集的數(shù)據(jù)標(biāo)注子任務(wù)描述信息中發(fā)布。其中，參照圖11，該管理裝置還包括：校驗任務(wù)描述信息生成單元990，用于根據(jù)獲取的與所述各類數(shù)據(jù)對應(yīng)的標(biāo)注規(guī)則，生成數(shù)據(jù)子集的數(shù)據(jù)校驗子任務(wù)描述信息；校驗者信息獲取單元9100，用于獲取該數(shù)據(jù)子集對應(yīng)的校驗者信息；第一校驗任務(wù)發(fā)送單元9110，用于根據(jù)所述校驗者信息發(fā)送所述校驗子任務(wù)描述信息和該數(shù)據(jù)子集的標(biāo)注后的數(shù)據(jù)；第一校驗后數(shù)據(jù)接收單元9120，用于接收該數(shù)據(jù)子集的經(jīng)過校驗的標(biāo)注后的數(shù)據(jù)；校驗后數(shù)據(jù)存儲單元9130，用于將對于各數(shù)據(jù)子集的經(jīng)過校驗的標(biāo)注后的數(shù)據(jù)整合存儲。其中，參照圖12，該管理裝置還包括：校驗任務(wù)描述信息生成單元990，用于根據(jù)獲取的與所述各類數(shù)據(jù)對應(yīng)的標(biāo)注規(guī)則，生成數(shù)據(jù)子集的數(shù)據(jù)校驗子任務(wù)描述信息；校驗任務(wù)描述信息發(fā)布單元9140，用于發(fā)布數(shù)據(jù)子集的數(shù)據(jù)校驗子任務(wù)描述信息；第二校驗任務(wù)發(fā)送單元9150，用于響應(yīng)于接收到對數(shù)據(jù)子集的第二認(rèn)領(lǐng)請求，向所述第二認(rèn)領(lǐng)請求的發(fā)送方發(fā)送該數(shù)據(jù)子集的標(biāo)注后的數(shù)據(jù)；第二校驗后數(shù)據(jù)接收單元9160，用于接收來自第二認(rèn)領(lǐng)請求的發(fā)送方的該數(shù)據(jù)子集的經(jīng)過校驗的標(biāo)注后的數(shù)據(jù)；校驗后數(shù)據(jù)存儲單元9130，用于將對于各數(shù)據(jù)子集的經(jīng)過校驗的標(biāo)注后的數(shù)據(jù)整合存儲，其中，該管理裝置還包括將與數(shù)據(jù)子集中各類數(shù)據(jù)對應(yīng)的標(biāo)注工具的調(diào)用指令發(fā)送到第二認(rèn)領(lǐng)請求的發(fā)送方的第二調(diào)用指令發(fā)送單元，其中與一類數(shù)據(jù)對應(yīng)的標(biāo)注工具導(dǎo)出的數(shù)據(jù)為該類數(shù)據(jù)的目標(biāo)標(biāo)注后數(shù)據(jù)格式；和/或在發(fā)布的數(shù)據(jù)子集的數(shù)據(jù)標(biāo)注子任務(wù)描述信息中含有該數(shù)據(jù)子集中各類數(shù)據(jù)的目標(biāo)標(biāo)注后數(shù)據(jù)格式。其中，所述校驗后數(shù)據(jù)存儲單元9130包括：將對于各數(shù)據(jù)子集的經(jīng)過校驗的標(biāo)注后的數(shù)據(jù)整合存儲到云存儲器中。。需要注意的是，本發(fā)明可在軟件和/或軟件與硬件的組合體中被實施，例如，本發(fā)明的各個裝置可采用專用集成電路(ASIC)或任何其他類似硬件設(shè)備來實現(xiàn)。在一個實施例中，本發(fā)明的軟件程序可以通過處理器執(zhí)行以實現(xiàn)上文所述步驟或功能。同樣地，本發(fā)明的軟件程序(包括相關(guān)的數(shù)據(jù)結(jié)構(gòu))可以被存儲到計算機可讀記錄介質(zhì)中，例如，RAM存儲器，磁或光驅(qū)動器或軟磁盤及類似設(shè)備。另外，本發(fā)明的一些步驟或功能可采用硬件來實現(xiàn)，例如，作為與處理器配合從而執(zhí)行各個步驟或功能的電路。對于本領(lǐng)域技術(shù)人員而言，顯然本發(fā)明不限于上述示范性實施例的細節(jié)，而且在不背離本發(fā)明的精神或基本特征的情況下，能夠以其他的具體形式實現(xiàn)本發(fā)明。因此，無論從哪一點來看，均應(yīng)將實施例看作是示范性的，而且是非限制性的，本發(fā)明的范圍由所附權(quán)利要求而不是上述說明限定，因此旨在將落在權(quán)利要求的等同要件的含義和范圍內(nèi)的所有變化涵括在本發(fā)明內(nèi)。不應(yīng)將權(quán)利要求中的任何附圖標(biāo)記視為限制所涉及的權(quán)利要求。此外，顯然“包括”一詞不排除其他單元或步驟，單數(shù)不排除復(fù)數(shù)。系 統(tǒng)權(quán)利要求中陳述的多個單元或裝置也可以由一個單元或裝置通過軟件或者硬件來實現(xiàn)。第一，第二等詞語用來表示名稱，而并不表示任何特定的順序。雖然前面特別示出并且描述了示例性實施例，但是本領(lǐng)域技術(shù)人員將會理解的是，在不背離權(quán)利要求書的精神和范圍的情況下，在其形式和細節(jié)方面可以有所變化。當(dāng)前第1頁1 2 3