技術(shù)總結(jié)
本申請公開了一種作業(yè)調(diào)度方法、裝置及分布式系統(tǒng),所述分布式系統(tǒng)至少包括中心節(jié)點(diǎn)、與中心節(jié)點(diǎn)連接的多個(gè)控制節(jié)點(diǎn)以及每一控制節(jié)點(diǎn)分別連接的多個(gè)計(jì)算節(jié)點(diǎn);中心節(jié)點(diǎn)為各個(gè)控制節(jié)點(diǎn)分配所述作業(yè)的任務(wù);控制節(jié)點(diǎn)調(diào)度各個(gè)任務(wù)切片在與其連接的計(jì)算節(jié)點(diǎn)中運(yùn)行,所述方法包括:調(diào)度第一任務(wù)的第一控制節(jié)點(diǎn)在第一任務(wù)的至少一個(gè)任務(wù)切片運(yùn)行結(jié)束時(shí),通知調(diào)度第二任務(wù)的第二控制節(jié)點(diǎn)獲取第一任務(wù)的至少一個(gè)任務(wù)切片生成的運(yùn)行數(shù)據(jù);第二控制節(jié)點(diǎn)獲取第一任務(wù)的至少一個(gè)任務(wù)切片生成的運(yùn)行數(shù)據(jù),分配給第二任務(wù)的每一個(gè)任務(wù)切片,并調(diào)度第二任務(wù)的至少一個(gè)任務(wù)切片運(yùn)行,處理所述運(yùn)行數(shù)據(jù)。本申請實(shí)施例提高了調(diào)度效率,提高了資源利用率。
技術(shù)研發(fā)人員:才華
受保護(hù)的技術(shù)使用者:阿里巴巴集團(tuán)控股有限公司
文檔號(hào)碼:201510362989
技術(shù)研發(fā)日:2015.06.26
技術(shù)公布日:2017.01.04