技術(shù)總結(jié)
本申請公開了一種數(shù)據(jù)處理的方法及其系統(tǒng)。該方法包括以下步驟:按照拆分規(guī)則,拆分待處理文件形成若干子文件;啟動預(yù)設(shè)數(shù)量的線程,根據(jù)線程加載規(guī)則,調(diào)度第一線程加載并處理第一子文件;判斷第一線程的當前狀態(tài)是否為就緒或阻塞狀態(tài);如果第一線程的當前狀態(tài)是就緒或阻塞狀態(tài),調(diào)度第一線程釋放第一子文件,調(diào)度第一線程加載并處理第二子文件。在該方法及其對應(yīng)的系統(tǒng)中,如果第一線程的當前狀態(tài)是就緒或阻塞狀態(tài),調(diào)度第一線程釋放第一子文件,調(diào)度第一線程加載并處理第二子文件,從而減少了第一線程的閑置,提高了線程的利用率,進而提高了數(shù)據(jù)處理效率。
技術(shù)研發(fā)人員:王玲玉;李雪
受保護的技術(shù)使用者:阿里巴巴集團控股有限公司
文檔號碼:201510242276
技術(shù)研發(fā)日:2015.05.13
技術(shù)公布日:2017.01.04